專利名稱：用于跨層視頻質(zhì)量管理的裝置、系統(tǒng)和方法
用于跨層視頻質(zhì)量管理的裝置、系統(tǒng)和方法本申請(qǐng)是PCT國(guó)際申請(qǐng)?zhí)枮镻CT/US2007/064645、國(guó)際申請(qǐng)日為2007年3月22日、國(guó)際公布號(hào)為W02007/115011、中國(guó)國(guó)家申請(qǐng)?zhí)枮?00780011799.2、題為“用于跨層視頻質(zhì)量管理的裝置、系統(tǒng)和方法”的申請(qǐng)的分案申請(qǐng)。背景最新的國(guó)際視頻編碼標(biāo)準(zhǔn)是由國(guó)際電信聯(lián)盟(ITU)的視頻編碼專家組和國(guó)際標(biāo)準(zhǔn)化組織和國(guó)際電工委員會(huì)的運(yùn)動(dòng)圖像專家組(MPEG)聯(lián)合開發(fā)并發(fā)布的H.264/MPEG-4高級(jí)視頻編碼(AVC)標(biāo)準(zhǔn)。該AVC H.264/MPEG-4AVC標(biāo)準(zhǔn)為各種各樣的應(yīng)用包括視頻電話、視頻會(huì)議、電視、流送視頻、數(shù)字視頻制作、和其它視頻應(yīng)用提供編碼。該標(biāo)準(zhǔn)進(jìn)一步為用于上述視頻應(yīng)用程序的存儲(chǔ)應(yīng)用包括硬盤和DVD存儲(chǔ)提供編碼。隨著以有線或無線方式與家庭網(wǎng)絡(luò)環(huán)境交互的組件或進(jìn)程的數(shù)量的增多，“數(shù)字家庭”的流行已提高了對(duì)家庭網(wǎng)絡(luò)性能的要求。然而，可用于支持?jǐn)?shù)字家庭的資源是有限的。因此，有限的資源(例如帶寬)應(yīng)當(dāng)在構(gòu)成組件或進(jìn)程之間被高效率地分配以向終端用戶提供例如高質(zhì)量的數(shù)字家庭體驗(yàn)。附圖簡(jiǎn)述

圖1不出媒體處理系統(tǒng)的一個(gè)實(shí)施例。圖2示出媒體處理子系統(tǒng)的一個(gè)實(shí)施例。圖3示出一實(shí)施例的初始化邏輯流程。圖4示出一實(shí)施例的準(zhǔn)入決策邏輯流程。圖5示出一實(shí)施例的運(yùn)行時(shí)邏輯流程。圖6示出一實(shí)施例的跨層視頻質(zhì)量管理器的框圖。圖7示出一實(shí)施例的邏輯流程。詳細(xì)描述將描述用于層間視頻質(zhì)量管理的技術(shù)?，F(xiàn)在將詳細(xì)參照如附圖所示的這些實(shí)施例的描述。盡管將結(jié)合這些附圖描述實(shí)施例，但并不旨在將它們限定于本文中公開的附圖。相反，旨在涵蓋由所附權(quán)利要求所定義的所述實(shí)施例的精神和范圍內(nèi)的所有替換、修改和等效方案。各個(gè)實(shí)施例涉及協(xié)調(diào)多種視頻處理和網(wǎng)絡(luò)處理技術(shù)以提升終端用戶對(duì)例如視頻的體驗(yàn)質(zhì)量的跨層視頻質(zhì)量管理器(CL-VQM)。例如，CL-VQM可監(jiān)視和控制網(wǎng)絡(luò)，并根據(jù)網(wǎng)絡(luò)狀況調(diào)節(jié)視頻處理。此外，CL-VQM跨多個(gè)網(wǎng)絡(luò)層(例如根據(jù)OSI七層模型的層)的應(yīng)用使得CL-VQM能通過協(xié)調(diào)各種因?qū)佣惖募夹g(shù)來控制網(wǎng)絡(luò)以提升終端用戶的體驗(yàn)質(zhì)量。圖1示出系統(tǒng)的一個(gè)實(shí)施例。圖1示出系統(tǒng)100的框圖。例如，在一個(gè)實(shí)施例中，系統(tǒng)100可包括具有多個(gè)節(jié)點(diǎn)的媒體處理系統(tǒng)。節(jié)點(diǎn)可包括在系統(tǒng)100中用于處理和/或傳達(dá)信息的任何物理或邏輯實(shí)體，并可視給定的一組設(shè)計(jì)參數(shù)或性能約束所需實(shí)現(xiàn)為硬件、軟件、或其任意組合。盡管圖1被示為具有呈特定拓?fù)涞挠邢迶?shù)目的節(jié)點(diǎn)，但可以理解系統(tǒng)100可視給定實(shí)現(xiàn)所需包括呈任意類型的拓?fù)涞幕蚨嗷蛏俚墓?jié)點(diǎn)。這些實(shí)施例在這點(diǎn)上并不受限。
在各個(gè)實(shí)施例中，節(jié)點(diǎn)可包括或被實(shí)現(xiàn)為計(jì)算機(jī)系統(tǒng)、計(jì)算機(jī)子系統(tǒng)、計(jì)算機(jī)、設(shè)施、工作站、終端、服務(wù)器、個(gè)人計(jì)算機(jī)(PC)、膝上型計(jì)算機(jī)、超薄膝上型計(jì)算機(jī)、手持式計(jì)算機(jī)、個(gè)人數(shù)字助理(PDA)、機(jī)頂盒(STB)、電話、移動(dòng)電話、蜂窩電話、手機(jī)、無線接入點(diǎn)、基站(BS)、訂戶站(SS)、移動(dòng)訂戶中心(MSC)、無線電網(wǎng)絡(luò)控制器(RNC)、微處理器、諸如專用集成電路(ASIC)的集成電路、可編程邏輯器件(PLD)、諸如通用處理器的處理器、數(shù)字信號(hào)處理器(DSP)和/或網(wǎng)絡(luò)處理器、接口、輸入/輸出(I/O)設(shè)備(例如鍵盤、鼠標(biāo)、顯示器、打印機(jī))、路由器、集線器、網(wǎng)關(guān)、網(wǎng)橋、交換機(jī)、電路、邏輯門、寄存器、半導(dǎo)體器件、芯片、晶體管、或任何其它設(shè)備、機(jī)器、工具、裝備、組件、或其組合。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，節(jié)點(diǎn)可包括或被實(shí)現(xiàn)為軟件、軟件模塊、應(yīng)用、程序、子例程、指令集、計(jì)算代碼、字、值、符號(hào)、或其組合。節(jié)點(diǎn)可根據(jù)預(yù)定義計(jì)算機(jī)語(yǔ)言、方式或語(yǔ)法實(shí)現(xiàn)以指示處理器執(zhí)行特定功能。計(jì)算機(jī)語(yǔ)言的示例可包括C、C++、Java、BASIC、Perl、Matlab、PascaUVisual BASIC、匯編語(yǔ)言、機(jī)器代碼、處理器用微代碼等等。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，通信系統(tǒng)100可根據(jù)一種或多種協(xié)議傳達(dá)、管理、或處理信息。協(xié)議可包括用于管理節(jié)點(diǎn)之間通信的一組預(yù)定義規(guī)則或指令。協(xié)議可由諸如國(guó)際電信聯(lián)盟(ITU),國(guó)際標(biāo)準(zhǔn)化組織(ISO)、國(guó)際電工委員會(huì)(IEC),電氣和電子工程師協(xié)會(huì)(IEEE)、因特網(wǎng)工程任務(wù)組(IETF)、運(yùn)動(dòng)圖像專家組(MPEG)等的標(biāo)準(zhǔn)組織發(fā)布的一種或多種標(biāo)準(zhǔn)定義。例如，所述實(shí)施例可被安排成根據(jù)媒體處理標(biāo)準(zhǔn)運(yùn)行，這些媒體處理標(biāo)準(zhǔn)諸如有國(guó)家電視系統(tǒng)委員會(huì)(NTSC)標(biāo)準(zhǔn)、逐行倒相(PAL)標(biāo)準(zhǔn)、MPEG-1標(biāo)準(zhǔn)、MPEG-2標(biāo)準(zhǔn)、MPEG-4標(biāo)準(zhǔn)、地面數(shù)字視頻廣播(DVB-T)標(biāo)準(zhǔn)、ITU/IEC H.263標(biāo)準(zhǔn)、低比特率通信視頻編碼、2000年11月公布的ITU-T推介H.263v3和/或ITU/IECH.264標(biāo)準(zhǔn)、極低比特率通信視頻編碼、于2003年5月公布的ITU-T推介H.264。這些實(shí)施例在這點(diǎn)上并不受限。在各種實(shí)施例中，系統(tǒng)100的節(jié)點(diǎn)可被安排成傳達(dá)、管理或處理不同類型的信息，諸如媒體信息和控制信息。媒體信息的示例一般可包括表示對(duì)用戶有意義的內(nèi)容的任何數(shù)據(jù)，諸如語(yǔ)音信息、視頻信息、音頻信息、圖像信息、文本信息、數(shù)字信息、字母數(shù)字符號(hào)、圖形等?？刂菩畔⒖芍副硎緦?duì)自動(dòng)化系統(tǒng)有意義的命令、指令或控制字的任何數(shù)據(jù)。例如，控制信息可被用來路由媒體信息通過系統(tǒng)，建立設(shè)備之間的連接，指示節(jié)點(diǎn)以預(yù)定方式處理該媒體信息等。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，系統(tǒng)100可被實(shí)現(xiàn)為有線通信系統(tǒng)、無線通信系統(tǒng)、或兩者的組合。盡管系統(tǒng)100可能是作為示例使用特定通信介質(zhì)示出的，但是可以理解本文中所討論的原理和技術(shù)可使用任何類型的通信介質(zhì)或伴隨技術(shù)來實(shí)現(xiàn)。這些實(shí)施例在這點(diǎn)上并不受限。當(dāng)被實(shí)現(xiàn)為有線系統(tǒng)時(shí)，系統(tǒng)100例如可包括被安排成在一個(gè)或多個(gè)有線通信介質(zhì)上傳達(dá)信息的一個(gè)或多個(gè)節(jié)點(diǎn)。有線通信介質(zhì)的示例可包括布線、電纜、印刷電路板(PCB)、底板、交換結(jié)構(gòu)、半導(dǎo)體材料、雙絞線、同軸電纜、光纖等。有線通信介質(zhì)可使用輸入/輸出(I/o)適配器與節(jié)點(diǎn)相連。該I/O適配器可被安排成用任何適當(dāng)技術(shù)操作以使用所需的一組通信協(xié)議、服務(wù)或操作過程來控制節(jié)點(diǎn)之間的信息信號(hào)。該I/o適配器還可包括用以將I/o適配器與相應(yīng)通信介質(zhì)相連的適當(dāng)物理連接器。I/O適配器的示例可包括網(wǎng)絡(luò)接口、網(wǎng)絡(luò)接口卡(NIC)、盤控制器、視頻控制器、音頻控制器等。這些實(shí)施例在這點(diǎn)上并不受限。當(dāng)被實(shí)現(xiàn)為無線系統(tǒng)時(shí)，系統(tǒng)100例如可包括被安排成在一類或多類無線通信介質(zhì)上傳達(dá)信息的一個(gè)或多個(gè)無線節(jié)點(diǎn)。無線通信介質(zhì)的示例可包括無線頻譜的各部分，諸如一般的RF頻譜和具體的超高頻(UHF)頻譜。這些無線節(jié)點(diǎn)可包括適于在指定無線頻譜上傳達(dá)信息信號(hào)的的組件和接口，諸如一個(gè)或多個(gè)天線、無線發(fā)射機(jī)/接收機(jī)(“收發(fā)機(jī)”)、放大器、濾波器、控制邏輯、天線等。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，系統(tǒng)100可包括具有一個(gè)或多個(gè)媒體源節(jié)點(diǎn)102-1-n的媒體處理系統(tǒng)。媒體源節(jié)點(diǎn)102-1-n可包括能向媒體處理節(jié)點(diǎn)106提供或投放媒體信息和/或控制信息的任何媒體源。更具體地，媒體源節(jié)點(diǎn)102-1-n可包括能向媒體處理節(jié)點(diǎn)106提供或投放數(shù)字音頻和/或視頻(AV)信號(hào)的任何媒體源。媒體源節(jié)點(diǎn)102-1-n的示例可包括能存儲(chǔ)和/或投放媒體信息的任何硬件或軟件單元，諸如數(shù)字多功能盤(DVD)設(shè)備、家用錄像系統(tǒng)(VHS)設(shè)備、數(shù)字VHS設(shè)備、個(gè)人攝像機(jī)、計(jì)算機(jī)、游戲控制臺(tái)、光盤(CD)播放器、計(jì)算機(jī)可讀或機(jī)器可讀存儲(chǔ)器、數(shù)碼相機(jī)、攝像放像一體機(jī)、視頻監(jiān)視系統(tǒng)、電話會(huì)議系統(tǒng)、電話系統(tǒng)、醫(yī)療和測(cè)量?jī)x器、掃描器系統(tǒng)、復(fù)印機(jī)系統(tǒng)等等。媒體源節(jié)點(diǎn)102-1-n的其它示例可包括向媒體處理節(jié)點(diǎn)106提供廣播或流送模擬或數(shù)字AV信號(hào)的媒體分發(fā)系統(tǒng)。媒體分發(fā)系統(tǒng)的示例可包括例如無線電(OTA)廣播系統(tǒng)、地面有線電視系統(tǒng)(CATV)、衛(wèi)星廣播系統(tǒng)等。值得注意，取決于給定實(shí)現(xiàn)，媒體源節(jié)點(diǎn)102-1-n對(duì)媒體處理節(jié)點(diǎn)106而言可以是內(nèi)部的、或者是外部的。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，從媒體源節(jié)點(diǎn)102-1-n接收的傳入視頻信號(hào)可能具有本機(jī)格式，有時(shí)稱為視覺分辨率格式。視覺分辨率格式的示例包括數(shù)字電視(DTV)格式、高清電視(HDTV)、逐行掃描格式、計(jì)算機(jī)顯示格式等。例如，媒體信息可能是用范圍在每幀480個(gè)可見行到每幀1080個(gè)可見行的垂直分辨率格式和范圍在每行640個(gè)可見像素到每行1920個(gè)可見像素的水平分辨率格式編碼。在一個(gè)實(shí)施例中，媒體信息可能例如被編碼在具有720逐行(720p)的視覺分辨率格式的HDTV視頻信號(hào)中，720p指720個(gè)垂直像素和1280個(gè)水平像素(720x1280)。在另一示例中，媒體信息可能具有與各種計(jì)算機(jī)顯示格式相對(duì)應(yīng)的視覺分辨率格式，諸如視頻圖形陣列(VGA)格式分辨率(640x480)、擴(kuò)展圖形陣列(XGA)格式分辨率(1024x768)、高級(jí)XGA (SXGA)格式分辨率(1280x1024)、超級(jí)XGA (UXGA)格式分辨率(1600x1200)等等。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，媒體處理系統(tǒng)100可包括在一個(gè)或多個(gè)通信介質(zhì)104-1-m上連接到媒體源節(jié)點(diǎn)102-1-n的媒體處理節(jié)點(diǎn)106。媒體處理節(jié)點(diǎn)106可包括如前所述安排成處理從媒體源節(jié)點(diǎn)102-1-n接收的媒體信息的任何節(jié)點(diǎn)。在各個(gè)實(shí)施例中，媒體處理節(jié)點(diǎn)106可包括或被實(shí)現(xiàn)為具有處理系統(tǒng)、處理子系統(tǒng)、處理器、計(jì)算機(jī)、設(shè)備、編碼器、解碼器、編/解碼器(CODEC)、濾波設(shè)備(例如圖形縮放設(shè)備、解塊濾波設(shè)備)、變換設(shè)備、娛樂系統(tǒng)、顯示器或任何其它處理架構(gòu)的一個(gè)或多個(gè)媒體處理設(shè)備。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，媒體處理節(jié)點(diǎn)106可包括媒體處理子系統(tǒng)108。媒體處理子系統(tǒng)108可包括安排成處理從媒體源節(jié)點(diǎn)102-1-n接收的媒體信息的處理器、存儲(chǔ)器、和應(yīng)用硬件和/或軟件。例如，媒體處理子系統(tǒng)108可被安排成管理JSVC/H.264視頻解碼器關(guān)于圖像或畫面的相鄰塊數(shù)據(jù)，并執(zhí)行如以下更詳細(xì)描述的其它媒體處理操作。媒體處理子系統(tǒng)108可將經(jīng)處理的媒體信息輸出到顯示器110。這些實(shí)施例在這點(diǎn)上并不受限。
在各個(gè)實(shí)施例中，媒體處理節(jié)點(diǎn)106可包括顯示器110。顯示器110可以是能夠顯示從媒體源節(jié)點(diǎn)102-1-n接收的媒體信息的任何顯示器。顯示器110可以給定格式分辨率顯示媒體信息。例如，顯示器110可在具有VGA格式分辨率、XGA格式分辨率、SXGA格式分辨率、UXGA格式分辨率等的顯示器上顯示該媒體信息。顯示器和格式分辨率的類型可根據(jù)給定的一組設(shè)計(jì)或性能約束而變化，且這些實(shí)施例在這點(diǎn)上并不受限。在一般操作中，媒體處理節(jié)點(diǎn)106可從一個(gè)或多個(gè)媒體源節(jié)點(diǎn)102-1-n接收媒體信息。例如，媒體處理節(jié)點(diǎn)106可從實(shí)現(xiàn)為與媒體處理節(jié)點(diǎn)106整合的DVD播放器的媒體源節(jié)點(diǎn)102-1接收媒體信息。媒體處理子系統(tǒng)108可從該DVD播放器取回媒體信息、將該媒體信息從視覺分辨率格式轉(zhuǎn)換成顯示器110的顯示分辨率格式,并使用顯示器110再現(xiàn)該媒體信息。在各個(gè)實(shí)施例中，媒體處理節(jié)點(diǎn)106可被安排成從一個(gè)或多個(gè)媒體源節(jié)點(diǎn)102-1-n接收輸入圖像。該輸入圖像可包括從一個(gè)或多個(gè)視頻圖像得出的或與其相關(guān)聯(lián)的任何數(shù)據(jù)或媒體信息。在各個(gè)實(shí)施例中，輸入圖像可包括圖像數(shù)據(jù)、視頻數(shù)據(jù)、視頻序列、畫面組、畫面、圖像、區(qū)域、對(duì)象、幀、切片、宏塊、塊、像素、信號(hào)等。賦給像素的值可包括實(shí)數(shù)和/或整數(shù)。在各個(gè)實(shí)施例中，媒體處理節(jié)點(diǎn)106可被安排成協(xié)調(diào)多種視頻處理和網(wǎng)絡(luò)處理技術(shù)以提升終端用戶對(duì)例如媒體(例如，視頻)的呈現(xiàn)的體驗(yàn)質(zhì)量。例如,媒體處理節(jié)點(diǎn)106可監(jiān)視和控制網(wǎng)絡(luò)，并根據(jù)網(wǎng)絡(luò)狀況調(diào)節(jié)視頻處理。此外，媒體處理節(jié)點(diǎn)106可通過協(xié)調(diào)各種因?qū)佣惖募夹g(shù)來控制網(wǎng)絡(luò)以提升終端用戶的體驗(yàn)質(zhì)量。在一個(gè)實(shí)施例中，例如媒體處理節(jié)點(diǎn)106的媒體處理子系統(tǒng)108可被安排成協(xié)調(diào)多種視頻處理和網(wǎng)絡(luò)處理技術(shù)。更具體地，媒體處理子系統(tǒng)108可被安排成協(xié)調(diào)和控制多種涉及視頻處理、網(wǎng)絡(luò)處理或其各個(gè)部分(例如涉及網(wǎng)絡(luò)的個(gè)體層的網(wǎng)絡(luò)處理)的、原本是獨(dú)立的或被獨(dú)立控制的服務(wù)質(zhì)量(QoS)和優(yōu)化技術(shù)，以提升系統(tǒng)100的整體性能。媒體處理子系統(tǒng)108可利用一個(gè)或多個(gè)預(yù)定`義或預(yù)定數(shù)學(xué)函數(shù)、或預(yù)先計(jì)算的表來控制視頻的處理和輸出(例如向顯示器110的輸出)以提升系統(tǒng)100性能，特別是系統(tǒng)100終端用戶的體驗(yàn)質(zhì)量。一般的系統(tǒng)100以及具體的媒體處理子系統(tǒng)108可參照?qǐng)D2更詳細(xì)地描述。圖2不出媒體處理子系統(tǒng)108的一個(gè)實(shí)施例。圖2不出適于與如參照?qǐng)D1所述的媒體處理節(jié)點(diǎn)106 —起使用的媒體處理子系統(tǒng)108的框圖。然而，這些實(shí)施例并不限定于圖2中給出的示例。如圖2所示，媒體處理子系統(tǒng)108可包括多個(gè)單元。視給定的一組設(shè)計(jì)或性能約束所需，一個(gè)或多個(gè)單元可使用一個(gè)或多個(gè)電路、組件、寄存器、處理器、軟件子例程、模塊、或其任意組合實(shí)現(xiàn)。盡管圖2示出呈特定拓?fù)涞挠邢迶?shù)目的單元作為示例，但可以理解可視給定實(shí)現(xiàn)所需在媒體處理子系統(tǒng)108中使用呈任意適當(dāng)拓?fù)涞幕蚨嗷蛏俚膯卧?。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，媒體處理子系統(tǒng)108可包括處理器202。處理器202可使用諸如復(fù)雜指令集計(jì)算機(jī)(CISC)微處理器、精簡(jiǎn)指令集計(jì)算(RISC)微處理器、超長(zhǎng)指令字(VLIW)微處理器、實(shí)現(xiàn)指令集組合的處理器、或其它處理器器件的任何處理器或邏輯器件來實(shí)現(xiàn)。例如，在一個(gè)實(shí)施例中，處理器202可被實(shí)現(xiàn)為通用處理器，諸如由美國(guó)加州圣克拉拉的ntel 公司制造的處理器。處理器202也可被實(shí)現(xiàn)為專用處理器，諸如控制器、微控制器、嵌入式處理器、數(shù)字信號(hào)處理器(DSP)、網(wǎng)絡(luò)處理器、媒體處理器、輸入/輸出(I/O)處理器、媒體接入控制(MAC)處理器、無線基帶處理器、現(xiàn)場(chǎng)可編程門陣列(FPGA)、可編程邏輯器件(PLD)等。這些實(shí)施例在這點(diǎn)上并不受限。在一個(gè)實(shí)施例中，媒體處理子系統(tǒng)108可包括耦合到處理器202的存儲(chǔ)器204。視給定實(shí)現(xiàn)所需，存儲(chǔ)器204可經(jīng)由通信總線214、或通過處理器202與存儲(chǔ)器204之間的專用通信總線耦合于處理器202。存儲(chǔ)器204可使用能夠儲(chǔ)存數(shù)據(jù)的任何機(jī)器可讀或計(jì)算機(jī)可讀介質(zhì)來實(shí)現(xiàn)，包括易失性和非易失性存儲(chǔ)器兩者。例如，存儲(chǔ)器204可包括只讀存儲(chǔ)器(ROM)、隨機(jī)存取存儲(chǔ)器(RAM)、動(dòng)態(tài)RAM (DRAM)、雙倍數(shù)據(jù)率DRAM (DDRAM)、同步DRAM(SDRAM)、靜態(tài)RAM (SRAM)、可編程ROM (PR0M)、可擦式可編程ROM (EPROM)、電可擦式可編程ROM (EEPR0M)、閃存、諸如鐵電聚合物存儲(chǔ)器等的聚合物存儲(chǔ)器、奧弗辛斯基(ovonic)存儲(chǔ)器、相變或鐵電存儲(chǔ)器、硅-氧化物-氮化物-氧化物-硅(SONOS)存儲(chǔ)器、磁卡或光卡、或任何其它類型的適于儲(chǔ)存信息的介質(zhì)。值得注意的是，存儲(chǔ)器204的某部分或全部可與處理器202被包括在同一集成電路上，或者替換地，存儲(chǔ)器204的某部分或全部可被設(shè)置于在處理器202的集成電路之外的集成電路或其它介質(zhì)例如硬盤驅(qū)動(dòng)器上。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，媒體處理子系統(tǒng)108可包括收發(fā)機(jī)206。收發(fā)機(jī)206可以是安排成根據(jù)所需無線協(xié)議操作的任何無線電發(fā)射機(jī)和/或接收機(jī)。適當(dāng)無線協(xié)議的示例可包括各種無線局域網(wǎng)(WLAN)協(xié)議，包括諸如 ffiEE802.lla/b/g/n、IEEE 802.16、IEEE 802.20等的IEEE 802.XX系列協(xié)議。無線協(xié)議的其它示例可包括各種無線廣域網(wǎng)(WffAN)協(xié)議，諸如具有通用分組無線服務(wù)(GPRS)的全球移動(dòng)通信(GSM)蜂窩無線電話系統(tǒng)協(xié)議、具有IxRTT的碼分多址(CDMA)蜂窩無線電話通信系統(tǒng)、增強(qiáng)數(shù)據(jù)率全球演進(jìn)(EDGE)系統(tǒng)等等。無線協(xié)議的其它示例可包括諸如紅外線協(xié)議的無線個(gè)域網(wǎng)(PAN)協(xié)議，來自藍(lán)牙技術(shù)聯(lián)盟(SIG)系列協(xié)議的協(xié)議，包括藍(lán)牙規(guī)范版本vl.0、vl.1、vl.2、v2.0、具有增強(qiáng)數(shù)據(jù)率(EDR)的v2.0、以及一種或多種藍(lán)牙樣板(在此合稱為“藍(lán)牙規(guī)范”)等。其它適當(dāng)協(xié)議可包括超寬帶(UWB)、數(shù)字辦公室(D0)、數(shù)字家庭、可信平臺(tái)模塊(TPM)、ZigBee、以及其它協(xié)議。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，媒體處理子系統(tǒng)108可包括一個(gè)或多個(gè)模塊。視給定的一組設(shè)計(jì)或性能約束所需，這些模塊可包括或被實(shí)現(xiàn)為一個(gè)或多個(gè)系統(tǒng)、子系統(tǒng)、處理器、設(shè)備、機(jī)器、工具、組件、電路、寄存器、應(yīng)用、程序、子例程、或其任意組合。這些實(shí)施例在這點(diǎn)上并不受限。例如，在一個(gè)實(shí)施例中，媒體處理子系統(tǒng)108可包括視頻質(zhì)量管理模塊208。視頻質(zhì)量管理模塊208可被安排成根據(jù)預(yù)定數(shù)學(xué)函數(shù)、算法或表來協(xié)調(diào)和控制如以上介紹的多種涉及視頻處理、網(wǎng)絡(luò)處理、或其各個(gè)部分(例如涉及網(wǎng)絡(luò)的個(gè)體層的網(wǎng)絡(luò)處理)的、原本是獨(dú)立的或被獨(dú)立控制的服務(wù)質(zhì)量(QoS)和優(yōu)化技術(shù)。例如，預(yù)定數(shù)學(xué)函數(shù)、算法、或表可被儲(chǔ)存在任何適當(dāng)存儲(chǔ)設(shè)備中，諸如存儲(chǔ)器204、大容量存儲(chǔ)設(shè)備(MSD) 210、硬件實(shí)現(xiàn)的查找表(LUT) 216等等?？梢岳斫猓陦K模塊208可被實(shí)現(xiàn)為由處理器202執(zhí)行的軟件、專用硬件、或兩者的組合。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，媒體處理子系統(tǒng)108可包括MSD 210。MSD 210的示例可包括硬盤、軟盤、壓縮盤只讀存儲(chǔ)器(⑶-ROM)、可記錄壓縮盤(⑶-R)、可重寫壓縮盤(⑶-RW)、光盤、磁性介質(zhì)、磁性-光學(xué)介質(zhì)、可移動(dòng)存儲(chǔ)卡或盤、各類DVD設(shè)備、帶設(shè)備、卡式設(shè)備等。這些實(shí)施例在這點(diǎn)上并不受限。在各個(gè)實(shí)施例中，媒體處理子系統(tǒng)108可包括一個(gè)或多個(gè)I/O適配器212。I/O適配器212的示例可包括通用串行總線(USB)端口 /適配器、IEEE1394火線端口 /適配器等。這些實(shí)施例在這點(diǎn)上并不受限。在一般操作中，媒體處理子系統(tǒng)108可從一個(gè)或多個(gè)媒體源節(jié)點(diǎn)102-1-n接收媒體信息。例如，媒體源節(jié)點(diǎn)102-1可包括與處理器202連接的DVD設(shè)備。替換地，媒體源102-2可包括儲(chǔ)存數(shù)字AV文件的存儲(chǔ)器204，諸如運(yùn)動(dòng)圖像專家組(MPEG)編碼的AV文件。視頻質(zhì)量管理模塊208可用來從大容量存儲(chǔ)設(shè)備216和/或存儲(chǔ)器204接收媒體信息、處理這些媒體信息(例如通過處理器202)、并在存儲(chǔ)器204、處理器202的高速緩沖存儲(chǔ)器、或其組合上儲(chǔ)存或緩沖這些媒體信息。視頻質(zhì)量管理器模塊208的操作可參照?qǐng)D3到圖7理解。目如存在眾多解決QoS和其它優(yōu)化以提升例如流送視頻的質(zhì)量的技術(shù)(基于標(biāo)準(zhǔn)的或?qū)Ｓ玫?。QoS和優(yōu)化技術(shù)已在網(wǎng)絡(luò)層棧中的各個(gè)層上提出以提升流送視頻質(zhì)量。例如有在網(wǎng)絡(luò)層棧的鏈路層上定義的優(yōu)先級(jí)化和參數(shù)化技術(shù)，諸如IEEE 802.1D中針對(duì)以太網(wǎng)連接的和IEEE 802.1le中針對(duì)無線連接的。此外還有上層技術(shù)，例如提供QoS過程以管理實(shí)時(shí)流送視頻話務(wù)的實(shí)時(shí)傳輸協(xié)議(RTP)增強(qiáng)。每種QoS和/或優(yōu)化技術(shù)可提供特定的質(zhì)量提升，例如流送視頻質(zhì)量提升，但沒有單一的QoS和/或優(yōu)化技術(shù)可在所有視頻或網(wǎng)絡(luò)狀況下提供最佳視頻質(zhì)量。如所介紹地，一實(shí)施例協(xié)調(diào)多種視頻處理和網(wǎng)絡(luò)處理技術(shù)以提升終端用戶例如對(duì)流送視頻的整體體驗(yàn)質(zhì)量。更具體地，一實(shí)施例協(xié)調(diào)可能各自原本獨(dú)立涉及特定網(wǎng)絡(luò)層或特定層的各種技術(shù)。此外，實(shí)現(xiàn)這種跨層協(xié)調(diào)的一實(shí)施例可同步地采用這些各不相同的技術(shù)并考慮每種技術(shù)個(gè)體的優(yōu)點(diǎn)和限制以得到適于提升對(duì)流送視頻的整體體驗(yàn)質(zhì)量的組合。因此，一實(shí)施例可能能夠跨網(wǎng)絡(luò)棧的這些各不相同的層收集來自眾多源的信息(例如MAC統(tǒng)計(jì)數(shù)據(jù)、RTP統(tǒng)計(jì)數(shù)據(jù)、UPnP QoS統(tǒng)計(jì)數(shù)據(jù)、來自客戶機(jī)的緩沖區(qū)滿度報(bào)告、FEC統(tǒng)計(jì)數(shù)據(jù)等)，并且可能能夠恰切地操縱涉及這些層的一種或多種技術(shù)以鑒于例如分組丟失和帶寬限制來維持視頻質(zhì)量。出于討論目的(且部分地由圖6所示)，一實(shí)施例可在包括流送服務(wù)器和流送客戶機(jī)(或渲染器)作為網(wǎng)絡(luò)拓?fù)涞囊徊糠值木W(wǎng)絡(luò)內(nèi)操作。在一實(shí)施例中，流送服務(wù)器和流送客戶機(jī)兩者皆可駐留在例如家庭或辦公室網(wǎng)絡(luò)、或可在其上處理和/或觀看(例如在顯示器110上觀看)流送視頻的任何網(wǎng)絡(luò)上。此外，流送服務(wù)器和流送客戶機(jī)可用一條或多條鏈路連接，每條鏈路可包括管理該鏈路的一種或多種鏈路層技術(shù)。例如，流送服務(wù)器可經(jīng)由HomePlug AV (HPAV)連接到無線接入點(diǎn)，該無線接入點(diǎn)又將經(jīng)由例如IEEE 802.1lg與流送客戶機(jī)通信。表I示出可應(yīng)用于特定的一個(gè)或多個(gè)網(wǎng)絡(luò)層的現(xiàn)有QoS或其它優(yōu)化技術(shù)的樣本的細(xì)節(jié)。表I
權(quán)利要求
1.一種用于跨層視頻質(zhì)量管理的裝置，包括: 媒體處理節(jié)點(diǎn)，其通過跨多個(gè)網(wǎng)絡(luò)層從多個(gè)媒體源收集媒體信息和/或控制信息并且響應(yīng)于收集到的媒體信息和/或控制信息操縱涉及所述多個(gè)網(wǎng)絡(luò)層的一種或多種視頻處理和網(wǎng)絡(luò)處理技術(shù)以鑒于分組丟失和帶寬限制來維持視頻質(zhì)量，在多個(gè)圖形進(jìn)程和多個(gè)跨層網(wǎng)絡(luò)進(jìn)程之間協(xié)調(diào)以提升流送視頻的質(zhì)量。
2.如權(quán)利要求1所述的裝置，所述媒體處理節(jié)點(diǎn)包括視頻質(zhì)量管理模塊，所述視頻質(zhì)量管理模塊進(jìn)一步: 取決于網(wǎng)絡(luò)狀況準(zhǔn)入視頻流。
3.如權(quán)利要求2所述的裝置，所述視頻質(zhì)量管理模塊進(jìn)一步: 檢測(cè)所述網(wǎng)絡(luò)狀況中的變化。
4.如權(quán)利要求3所述的裝置，所述視頻質(zhì)量管理模塊進(jìn)一步: 響應(yīng)于所述網(wǎng)絡(luò)狀況的變化重新協(xié)調(diào)至少圖形進(jìn)程或網(wǎng)絡(luò)進(jìn)程。
5.如權(quán)利要求4所述的裝置，其特征在于，至少有一個(gè)網(wǎng)絡(luò)進(jìn)程涉及與另一網(wǎng)絡(luò)進(jìn)程不同的網(wǎng)絡(luò)層。
6.一種用于跨層視頻質(zhì)量管理的系統(tǒng)，包括: 有線通信介質(zhì)；以及 與所述通信介質(zhì)耦合的媒體處理節(jié)點(diǎn)，其通過跨多個(gè)網(wǎng)絡(luò)層從多個(gè)媒體源收集媒體信息和/或控制信息并且響應(yīng)于收集到的媒體信息和/或控制信息操縱涉及所述多個(gè)網(wǎng)絡(luò)層的一種或多種視頻處理和網(wǎng)絡(luò)處理技術(shù)以鑒于分組丟失和帶寬限制來維持視頻質(zhì)量，在多個(gè)圖形進(jìn)程和多個(gè)跨層網(wǎng)絡(luò)進(jìn)程之間協(xié)調(diào)以提升流送視頻的質(zhì)量。
7.如權(quán)利要求6所述的系統(tǒng)，所述媒體處理節(jié)點(diǎn)包括視頻質(zhì)量管理模塊,所述視頻質(zhì)量管理模塊進(jìn)一步: 取決于網(wǎng)絡(luò)狀況準(zhǔn)入視頻流。
8.如權(quán)利要求7所述的系統(tǒng)，所述視頻質(zhì)量管理模塊進(jìn)一步: 檢測(cè)所述網(wǎng)絡(luò)狀況中的變化。
9.如權(quán)利要求8所述的系統(tǒng)，所述視頻質(zhì)量管理模塊進(jìn)一步: 響應(yīng)于所述網(wǎng)絡(luò)狀況的變化重新協(xié)調(diào)至少圖形進(jìn)程或網(wǎng)絡(luò)進(jìn)程。
10.如權(quán)利要求9所述的系統(tǒng)，其特征在于，至少有一個(gè)網(wǎng)絡(luò)進(jìn)程涉及與另一網(wǎng)絡(luò)進(jìn)程不同的網(wǎng)絡(luò)層。
11.一種用于跨層視頻質(zhì)量管理的方法，包括: 初始化視頻質(zhì)量管理模塊； 由所述視頻質(zhì)量管理模塊準(zhǔn)入視頻流；以及 通過跨多個(gè)網(wǎng)絡(luò)層從多個(gè)媒體源收集媒體信息和/或控制信息并且響應(yīng)于收集到的媒體信息和/或控制信息操縱涉及所述多個(gè)網(wǎng)絡(luò)層的一種或多種視頻處理和網(wǎng)絡(luò)處理技術(shù)以鑒于分組丟失和帶寬限制來維持視頻質(zhì)量，由所述視頻質(zhì)量管理模塊協(xié)調(diào)多個(gè)圖形進(jìn)程和多個(gè)網(wǎng)絡(luò)進(jìn)程以提升所述視頻流的質(zhì)量。
12.如權(quán)利要 求11所述的方法，所述初始化視頻質(zhì)量管理模塊進(jìn)一步包括: 發(fā)現(xiàn)UPnP設(shè)備或服務(wù)； 監(jiān)視網(wǎng)絡(luò)狀況；以及檢測(cè)跨層組件。
13.如權(quán)利要求11所述的方法，所述準(zhǔn)入視頻流進(jìn)一步包括: 搜集網(wǎng)絡(luò)QoS和客戶機(jī)能力信息； 選擇MPEG概況； 配置可縮放視頻解碼器；以及 控制RTP選擇性重傳。
14.如權(quán)利要求11所述的方法，其特征在于，至少有一個(gè)網(wǎng)絡(luò)進(jìn)程涉及與另一網(wǎng)絡(luò)進(jìn)程不同的網(wǎng)絡(luò)層。
15.如權(quán)利要求14所述的方法，其特征在于，還包括: 檢測(cè)網(wǎng)絡(luò)狀況中的變化；以及 由所述視頻質(zhì)量管理模塊重新協(xié)調(diào)至少圖形進(jìn)程或網(wǎng)絡(luò)進(jìn)程。
全文摘要
一實(shí)施例是協(xié)調(diào)多種視頻處理和網(wǎng)絡(luò)處理技術(shù)以提升例如流送視頻的體驗(yàn)質(zhì)量的跨層視頻質(zhì)量管理器。
文檔編號(hào)H04N5/44GK103118301SQ20131005154
公開日2013年5月22日 申請(qǐng)日期2007年3月22日 優(yōu)先權(quán)日2006年3月31日
發(fā)明者R·波帕迪卡, B·哈基米 申請(qǐng)人:英特爾公司