專利名稱：過濾和扭曲的運(yùn)動(dòng)補(bǔ)償?shù)闹谱鞣椒?br> 過濾和扭曲的運(yùn)動(dòng)補(bǔ)償技術(shù)領(lǐng)域0001本發(fā)明涉及數(shù)字視頻信號(hào)處理，且更具體地涉及視頻壓縮的設(shè)備和方法。
背景技術(shù)：
0002目前存在數(shù)字視頻通信和存儲(chǔ)的各種應(yīng)用，且相應(yīng)的國(guó)際標(biāo)準(zhǔn) 己經(jīng)得到了發(fā)展并且發(fā)展還在持續(xù)。低比特率通信，比如視頻電話和視 頻會(huì)議，產(chǎn)生了具有多路64kbps比特率的H.261標(biāo)準(zhǔn)。對(duì)更低比特率的需 求產(chǎn)生了11.263標(biāo)準(zhǔn)。0003H.264/AVC是最近的視頻信號(hào)編解碼標(biāo)準(zhǔn)，其利用了若干高級(jí)的 視頻編碼工具來提供比現(xiàn)有的視頻信號(hào)編碼標(biāo)準(zhǔn)比如MPEG-2， MPEG-4, 和H.263更好的壓縮性能。R264/AVC標(biāo)準(zhǔn)的核心是塊運(yùn)動(dòng)補(bǔ)償(BMC)和 變換編碼的混合視頻信號(hào)編碼技術(shù)。在視頻序列中，塊運(yùn)動(dòng)補(bǔ)償用于去 除時(shí)間冗余，而變換編碼用于去除空間冗余。傳統(tǒng)的塊運(yùn)動(dòng)補(bǔ)償方案基 本上假定一個(gè)鏡頭或場(chǎng)景(scene)內(nèi)的物體在x方向和y方向經(jīng)歷位移。 實(shí)際上這種簡(jiǎn)單的假定在大多數(shù)情況下可以以滿意的方式設(shè)計(jì)出，且因 而在視頻信號(hào)編碼標(biāo)準(zhǔn)中，塊運(yùn)動(dòng)補(bǔ)償已經(jīng)成為用于時(shí)間冗余去除的最 廣泛使用的技術(shù)。圖2a-2b圖解說明了H.264/AVC中塊運(yùn)動(dòng)補(bǔ)償?shù)木幋a和 解碼，圖2c顯示了多個(gè)參考幀。0004然而，傳統(tǒng)的塊運(yùn)動(dòng)補(bǔ)償模型未能捕獲視頻序列中若干場(chǎng)景 (scenario)內(nèi)的時(shí)間冗余，如下面所列出0005仿射運(yùn)動(dòng)當(dāng)一個(gè)鏡頭中的物體經(jīng)歷仿射運(yùn)動(dòng)，比如放大和旋 轉(zhuǎn)的時(shí)候。在文獻(xiàn)中存在一些修改運(yùn)動(dòng)補(bǔ)償方案以處理仿射運(yùn)動(dòng)的技術(shù); 參看Y. T. Tse and R. L Baker的"Global zoom/pan estimation and compensation for video compression", IEEE Proc. ICASSP'91 (Toronto, Ont: Canada) May 1991, pp. 2725-2728; Y. Nakaya and H. Hamshima的"Motioncompensation based on spatial transformations", IEEE Trans. Circuits Systs. Video Technol" vol. 4， No. 3, pp. 339-356, 366-7， June 1994;禾口T. Wiegand et al" "Affine Multipicture Motion-Compensated Prediction", IEEE Trans. Circuits Systs. Video Technol" vol. 5， No. 2， pp. 197-209, February 2005。0006照明變化、褪色(fading)和混合(blending):傳統(tǒng)的塊運(yùn)動(dòng)補(bǔ)償模型未能捕獲時(shí)間冗余的另一場(chǎng)景，是當(dāng)一個(gè)鏡頭中存在亮度變化 的日寸候(參看K. Kamikura et al.， "Global brightness variation compensation for video coding," IEEE Trans. Circuits Systs. Video Technol" vol. 8， No. 8， pp. 988-1000, Dec. 1998)，或者當(dāng)視頻序列中存在多個(gè)鏡頭褪色的時(shí)候(參 看丄M. Boyce， "Weighted prediction in the H.264/MPEG AVC video coding standard," IEEE ISCAS， pp. 789-792, 2004)。褪色(fade)(例如褪成黑色， 褪成白色)有時(shí)被用于在視頻序列中的多個(gè)鏡頭之間轉(zhuǎn)換。H.264/AVC標(biāo) 準(zhǔn)引入了被稱作加權(quán)預(yù)測(cè)的新的視頻信號(hào)編碼工具來為這種多個(gè)鏡頭的 褪色有效地編碼。傳統(tǒng)的塊運(yùn)動(dòng)補(bǔ)償方法當(dāng)使用多幀混合以在各鏡頭轉(zhuǎn) 換時(shí)也不成功。0007模糊傳統(tǒng)的塊運(yùn)動(dòng)補(bǔ)償模型不能捕獲時(shí)間冗余的另外一個(gè)場(chǎng) 景是當(dāng)視頻序列中存在模糊的時(shí)候。當(dāng)照像機(jī)和正在捕獲的鏡頭之間的 相對(duì)運(yùn)動(dòng)比照像機(jī)曝光時(shí)間更快的時(shí)候，模糊典型地在視頻序列中發(fā)生。 模糊也在當(dāng)一個(gè)鏡頭中不同景深的目標(biāo)被聚焦和散焦的時(shí)候發(fā)生，如電 影里所實(shí)現(xiàn)的在一個(gè)鏡頭中聚焦不同的演員。0008因而，當(dāng)仿射運(yùn)動(dòng)、照明變化和模糊開始在視頻序列中發(fā)生的 時(shí)候，傳統(tǒng)的基于塊的運(yùn)動(dòng)補(bǔ)償技術(shù)比如在汪264/八￥(:中所使用的那些運(yùn) 動(dòng)補(bǔ)償技術(shù)變成無效的。發(fā)明內(nèi)容0009本發(fā)明提供了視頻編碼器結(jié)構(gòu)和方法，其具有參考幀的過濾/扭 曲的形式，作為附加參考幀用于運(yùn)動(dòng)補(bǔ)償。0010這允許仿射運(yùn)動(dòng)(affine motion)、照明變化和模糊的場(chǎng)景中的 有效壓縮。


0011圖la-ld圖解說明了包括編碼和解碼的優(yōu)選實(shí)施例。0012圖2a-2c圖解說明了H.264/AVC中的運(yùn)動(dòng)補(bǔ)償。0013圖3a-3b顯示了處理器和網(wǎng)絡(luò)通信。
具體實(shí)施方式
1. 綜述0014視頻壓縮方法的優(yōu)選實(shí)施例包括過濾和/或扭曲一個(gè)或多于一個(gè) 參考幀(或者只是其中的多個(gè)部分)，以提供用于運(yùn)動(dòng)補(bǔ)償?shù)念~外的參 考幀。這允許對(duì)具有仿射運(yùn)動(dòng)、照明和褪色變化，和/或模糊的場(chǎng)景的準(zhǔn) 確推算。圖la是進(jìn)行檢測(cè)的優(yōu)選實(shí)施例的流程圖，圖lb顯示了由重構(gòu)的 幀加上這些幀的過濾和/或扭曲形式(version)而生成的一組參考幀，并 且圖lc-ld圖解說明了實(shí)現(xiàn)優(yōu)選實(shí)施例方法的編碼器和解碼器。所生成的 這組參考幀(或者各幀的各部分)可以對(duì)檢測(cè)到當(dāng)前幀中的模糊、褪色 和/或仿射運(yùn)動(dòng)做出響應(yīng)，或者可以是具有可能適應(yīng)性的一組預(yù)定義的過 濾和扭曲的應(yīng)用程序的結(jié)果。0015優(yōu)選實(shí)施例系統(tǒng)(例如，蜂窩式便攜無線電話、掌上電腦(PDA)、 數(shù)碼照像機(jī)、筆記本電腦等等)以幾種類型硬件的任何一種執(zhí)行優(yōu)選實(shí) 施例方法，例如數(shù)字信號(hào)處理器(DSP)、通用可編程處理器、專用電路 或者片上系統(tǒng)(SoC)，比如多芯處理器陣列或者比如DSP和RISC處理器 與各種專門的可編程加速器的組合(例如，圖3a)。機(jī)載的或者外部的(閃速電可檫除只讀存儲(chǔ)器(flash EEP))只讀存儲(chǔ)器(ROM)或者鐵 電隨機(jī)存儲(chǔ)器(FRAM)中存儲(chǔ)的程序可以實(shí)現(xiàn)信號(hào)處理方法。模數(shù)和數(shù) 模轉(zhuǎn)換器可以提供與模擬世界的耦合；調(diào)制器和解調(diào)器(加上用于空氣 接口的天線，比如用于蜂窩電話上的視頻的天線)可以提供對(duì)傳輸波形 的耦合；并且打包器可以提供在網(wǎng)絡(luò)中傳輸?shù)母袷剑热缭趫D3b中說明 的國(guó)際互聯(lián)網(wǎng)中。2. 具有過濾/扭曲的參考幀的視頻壓縮0016首先考慮圖2a，其顯示了H.26々/AVC的傳統(tǒng)的復(fù)幀(multiframe) 塊運(yùn)動(dòng)補(bǔ)償(BMC)方法。當(dāng)前視頻幀/T"J是通過使用塊運(yùn)動(dòng)補(bǔ)償(BMC)從一組M個(gè)幀，yr"-"/r"-"，…，yr"-〗K)(其中的一些可以是將來的幀) 來預(yù)測(cè)的。0017相反，圖lc顯示了一般過濾和扭曲的復(fù)幀塊運(yùn)動(dòng)補(bǔ)償?shù)牡谝粌?yōu) 選實(shí)施例，且圖lb試探或直觀推斷方式顯示了一系列參考幀。給定一參 考巾M"-0，優(yōu)選實(shí)施例方法生成一組&個(gè)其它參考幀，/"1),/ 一(2),...， 它們中的每一個(gè)是幀X"-z')的過濾的形式，或者是幀/"-0的扭 曲的形式，或者是兩者。之后這個(gè)擴(kuò)展了的過濾和扭曲的參考幀組在塊 運(yùn)動(dòng)補(bǔ)償(BMC)中用于推算當(dāng)前幀X")。0018更明確地，使// ^{}表示從/"-/)獲得/ -州的算子；艮卩，/ —(^= 仏-u(/^-W 。過濾和扭曲的第一優(yōu)選實(shí)施例如下(a) 過濾的參考幀0019過濾的參考幀通過線性或者非線性過濾獲得。過濾運(yùn)算適用于 沒有被塊運(yùn)動(dòng)補(bǔ)償有效地捕獲的視頻序列中的如下若干場(chǎng)景(i) 模糊}將是線性平移不變?yōu)V色鏡，其具有由/^,^^)所給出的脈沖響應(yīng)。例如，在水平方向?yàn)樗膫€(gè)像素長(zhǎng)的運(yùn)動(dòng)模糊被脈沖響應(yīng)捕獲，脈沖響應(yīng)為在點(diǎn)(p, g) = (0, 0)， (0， 1), (0， 2)， (0, 3)時(shí)，/^，Kp,e) = {A /4}=i/4，以及在所有其它點(diǎn)時(shí)，/^_u(/^) = 0。第4部分將有更多模糊的 詳細(xì)資料。(ii) 褪色仏-aU將是每次作用于一個(gè)像素的算子，比如仏","}可以由下面的運(yùn)算定義y;一w =+其具有參數(shù)a和A(iii) 全局運(yùn)動(dòng)全局運(yùn)動(dòng)也可以被線性平移不變?yōu)V色鏡捕獲。設(shè)(mvx,mxy) 是全局運(yùn)動(dòng)向量。那么仏-,"}由線性平移不變?yōu)V色鏡1,乂0^)定義，除了 在位置(mvx， mv力之外，在各處/^^(p，《)均為零，其中在(mvx， myy)處 /z"、;t(mvjc, wyy) = 1;即，脈沖響應(yīng)是S函數(shù)。(b) 扭曲的參考幀0020扭曲的參考幀按如下方式導(dǎo)出。設(shè)(x,力表示輸入?yún)⒖紙D像X"") 的坐標(biāo)系，并且設(shè)(？,力表示/ _#)的坐標(biāo)系。然后札_^}由下面的幾何變換定義[ ，/，l] = [JC，_y, l]T，其中3X3矩陣T這樣給出<formula>formula see original document page 8</formula>上面的變換適用于沒有被塊運(yùn)動(dòng)補(bǔ)償(BMC)有效地捕獲的視頻序列中的若干場(chǎng)景。變換的一些特定實(shí)施例在下面給出<formula>formula see original document page 8</formula>對(duì)于局部化的變換，坐標(biāo)將和正在變換的區(qū)域的中心有關(guān)。注意變換圖 像包括圖像插值。我們可以使用最近的鄰近值(neighbor)或者雙線性過 濾或者其他圖像插值技術(shù)用于該目的。同樣在放大的情況下，因?yàn)樗a(chǎn) 生的變換后的圖像尺寸大于輸入圖像尺寸，所以我們可以使變換后的參 考圖像尺寸比輸入圖像尺寸大。同樣當(dāng)在變換后的圖像尺寸在小于輸入 圖像尺寸時(shí)停止的時(shí)候，我們通過擴(kuò)展邊緣像素來拉長(zhǎng)(pad)變換的圖 像。當(dāng)圖像被旋轉(zhuǎn)時(shí)我們也進(jìn)行拉長(zhǎng)。0021當(dāng)然，模糊、褪色和扭曲操作中的任意兩個(gè)或者全部三個(gè)可以 應(yīng)用于幀。同樣地，注意平移(全局運(yùn)動(dòng))可以通過非零的"h d2矩陣 T來表示。 3.編碼器選項(xiàng)0022編碼器需要向解碼器發(fā)信號(hào)表明要在參考幀上實(shí)現(xiàn)哪種類型的 過濾/扭曲。并且過濾/扭曲可以是在幀層級(jí)或者只局限于宏模塊層級(jí)。 (a)幀層級(jí)0023我們使用兩個(gè)參數(shù)op—type和opjarameters來編碼這個(gè)信息。例 如，在運(yùn)動(dòng)模糊的情況下，op—type將是運(yùn)動(dòng)模糊且opjarameters將是濾 色鏡響應(yīng)系數(shù)(filter response coeff icient)。在扭曲的情況下，op—type 將是仿射變換且opjammeters將是變換矩陣T。對(duì)于褪色和其他的組合也如此。 (b)宏模塊層級(jí)0024過濾和扭曲也可以在宏模塊層級(jí)實(shí)現(xiàn)。這在當(dāng)各個(gè)部分的輸入 幀經(jīng)歷不同種類變換的時(shí)候是特別有用的。例如， 一個(gè)鏡頭中的一個(gè)人 可能朝著照相機(jī)走來，這導(dǎo)致這個(gè)人的放大，并且這個(gè)鏡頭中的另一人 可能開始水平地跑開，這在那部分的視頻幀中產(chǎn)生運(yùn)動(dòng)模糊。因?yàn)檎麄€(gè) 幀沒有經(jīng)歷相同種類的過濾/扭曲，所以生成整個(gè)過濾/扭曲的參考幀不是 計(jì)算上有效的。在宏模塊層級(jí)編碼的情況下，我們擴(kuò)充宏模塊類型參數(shù) mb—type，其用于以信號(hào)形式發(fā)送模式信息來包括過濾和扭曲的情況。在 這種情況下，為了降低以信號(hào)形式發(fā)送mb—type的系統(tǒng)開銷，我們可以先 驗(yàn)地向用于整個(gè)視頻序列的可能的濾色鏡和扭曲參數(shù)表發(fā)信號(hào)，之后 mb—type參數(shù)將為這個(gè)可能的濾色鏡和扭曲參數(shù)表作索引。 4.模糊0025用于生成模糊的幀的模糊濾色鏡從編碼器向解碼器發(fā)送信號(hào)作 為輔助信息，例如，作為&264/八￥(:中的補(bǔ)充增強(qiáng)信息(SEI)的一部分。 解碼器使用這個(gè)信息，從它先前重構(gòu)的幀、在它的參考幀緩沖器中生成 模糊的幀。0026編碼器在一組預(yù)定義的模糊濾色鏡上迭代循環(huán)，根據(jù)速率降低 來尋找最佳的模糊濾色鏡。例如，可以考慮兩種類型的模糊濾色鏡(a) 平均濾色鏡6aJ.,.)，其在/0^大小的塊內(nèi)作平均(b) 運(yùn)動(dòng)模糊濾色鏡~ (.,.)，其中r表示運(yùn)動(dòng)幅度，而0表示運(yùn)動(dòng) 的方向。特別地，使owe^m,")表示所有輸入都等于1的m幼矩陣?？梢?使用編碼器中下面一組七個(gè)簡(jiǎn)單預(yù)定義的模糊濾色鏡，前面的三個(gè)模糊 濾色鏡是平均濾色鏡，且后面的四個(gè)模糊濾色鏡是運(yùn)動(dòng)模糊濾色鏡。6。4 = o"es(4,4) / 166a8 = o腦(8,8) / 64 6ai6 = o"&s(16,16) / 256 6m一4—o = 1 ，4) / 4 dsx) = owes(4， 1) / 4 6—_o = owes( 1 ，6) / 66_卯=o"&s(6,1) / 0027模糊補(bǔ)償技術(shù)只在模糊區(qū)域是有用的。這種視頻信號(hào)編碼工具 的使用與H.264/AVC的加權(quán)預(yù)測(cè)工具的使用相類似，R264/AVC的加權(quán)預(yù) 測(cè)工具主要在褪色或淡化的區(qū)域是有用的。
0028在運(yùn)動(dòng)估計(jì)/補(bǔ)償中，模糊補(bǔ)償也可以通過使用附加模式在塊層 級(jí)完成。當(dāng)前視頻編碼器在一組若干模式(INTRA, INTER, INTER+4MV 等等)內(nèi)搜索以尋找最佳的編碼選項(xiàng)。在編碼器在其上作搜索的這組模 式中，模糊模式將是一個(gè)這樣的附加模式。在其中只有一部分視頻幀有 模糊處的場(chǎng)景中，在塊層級(jí)的模糊補(bǔ)償將降低計(jì)算的復(fù)雜性。這在其中 存在著不同物體或目標(biāo)在不同方向經(jīng)歷模糊的場(chǎng)景中也是有用的，例如， 照相機(jī)可以向左移動(dòng)且感興趣的主要物體或目標(biāo)可以向右移動(dòng)。
0029前述的優(yōu)選實(shí)施例強(qiáng)力(brute force)補(bǔ)償編碼器的復(fù)雜性較高。 因此，為了降低計(jì)算復(fù)雜性，優(yōu)選的實(shí)施例方法可以只在存在模糊的區(qū) 域中運(yùn)行模糊補(bǔ)償方法。通過使用攝影機(jī)自動(dòng)聚焦技術(shù)(例如，參看K-S. Choi et al.， New Autofocussing Technique Using Frequency Selective Weighted Median Filter for Video Cameras, 45 IEEE Trans. Cons, Elec. 820 (1999)以及其中引用的參考文獻(xiàn))來檢測(cè)這種區(qū)域。在編碼器中，在一組
預(yù)定義的模糊濾色鏡上迭代循環(huán)，根據(jù)速率降低來尋找最佳的模糊濾色 鏡。通過估計(jì)模糊來改善壓縮性能并降低復(fù)雜性，比如通過使用變換域 處理。
5. 參考幀緩沖器
0030復(fù)幀緩沖器中的幀(其由參考幀和它們的過濾/扭曲的相應(yīng)幀組 成)可以是長(zhǎng)期的參考幀或者短期的參考幀。因此，將R264/AVC的長(zhǎng) 期的和短期的參考幀管理擴(kuò)展到優(yōu)選實(shí)施例的復(fù)幀緩沖器。
6. 參數(shù)確定
0031需要有用于過濾/扭曲的各參數(shù)值，其被應(yīng)用于重構(gòu)的參考幀(多 個(gè)參考幀)以生成如圖lb中那組完整參考幀，并且用于過濾/扭曲的參數(shù) 值可以是一組選定的預(yù)定義的參數(shù)值(有一些可能的精細(xì)化)，或者是 可以直接地以各種方式估計(jì)的參數(shù)值。各參數(shù)值也可以從一幀到另一幀 預(yù)測(cè)出。例如，視頻序列中的放大典型地在若干幀內(nèi)發(fā)生。為一個(gè)幀計(jì)算的放大值可以用于預(yù)測(cè)初始放大參數(shù)以用于下一幀。注意各參數(shù)只在 區(qū)域內(nèi)可以粗略地為常數(shù)，且因而將只在區(qū)域的基礎(chǔ)上作出估計(jì)和過濾/ 扭曲。對(duì)于模糊，水平物體運(yùn)動(dòng)和垂直物體下落模糊是普通的模糊，所以一組預(yù)定義的模糊濾色鏡可以如在第4部分中的那樣只有0度和90度 方向的模糊。參數(shù)值適應(yīng)作用(即，下落物體的垂直模糊隨物體加速度 而增強(qiáng))可以用于降低復(fù)雜性。在任何情況下物體(或區(qū)域)或者背景(照相機(jī)移動(dòng)鏡頭)的平移將通過從沒有過濾/扭曲的參考幀所獲得的常 規(guī)運(yùn)動(dòng)向量來估計(jì)。類似地，均衡的放大和旋轉(zhuǎn)是典型的仿射 運(yùn)動(dòng)并且只需要兩個(gè)參數(shù)，所以如第3部分中其坐標(biāo)相對(duì)于目標(biāo)或區(qū)域 中心的一組預(yù)定義的濾色鏡、加上適應(yīng)性的參數(shù)，也將降低復(fù)雜性。0032各種方法可被用于指導(dǎo)參數(shù)估計(jì)(代替在一組預(yù)定義的初始參 數(shù)值中的搜索，加上精細(xì)化和適應(yīng)作用)。對(duì)于模糊或淡化，自動(dòng)聚焦 和局部頻域分析提供信息；對(duì)于褪色和照明變化，可以使用局部照明； 并且對(duì)于仿射運(yùn)動(dòng)方法，可以使用比如如背景技術(shù)中引用的Wiegand等 人的通過錯(cuò)誤極小化來精細(xì)化初始運(yùn)動(dòng)向量。 7.修改0033在保留了包括過濾和/或扭曲的參考幀(或其幾部分)的特性用 于運(yùn)動(dòng)估計(jì)的同時(shí)，優(yōu)選實(shí)施例可以以各種方式被修改。0034例如，字段(上和下)可以代替幀使用，即，這些方法應(yīng)用于 通常具有相應(yīng)的調(diào)整的圖片。在常規(guī)的塊運(yùn)動(dòng)補(bǔ)償運(yùn)動(dòng)向量預(yù)測(cè)的變形(例如，SAD)超出閾值的時(shí)候，可以調(diào)用可能的模糊、褪色和/或仿射 運(yùn)動(dòng)的檢測(cè)；在這種情況下，在參考?jí)K附近局部地應(yīng)用過濾/扭曲，并且 將相應(yīng)的各變形(SAD)與最初的SAD相比較，以尋找可能的模糊、褪 色和/或仿射運(yùn)動(dòng)，以及精細(xì)化的參數(shù)值；以變形和歸因于更多編碼信息 的速率變化的權(quán)衡對(duì)編碼作出決定。
權(quán)利要求
1.一種具有塊運(yùn)動(dòng)補(bǔ)償類型的視頻壓縮方法，其使用一個(gè)或多于一個(gè)參考圖片，在當(dāng)前圖片中尋找用于像素塊的運(yùn)動(dòng)向量，改進(jìn)包括步驟(a)所述一個(gè)或多于一個(gè)參考圖片包括先前圖片的一組過濾/扭曲，其中所述先前圖片的這些過濾/扭曲選自(i)所述先前圖片的模糊的形式加上所述先前圖片的扭曲的形式，(ii)所述先前圖片的模糊的形式加上所述先前圖片的褪色的形式，(iii)所述先前圖片的褪色的形式加上所述先前圖片的扭曲的形式，以及(iv)所述先前圖片的模糊的形式加上所述先前圖片的褪色的形式加上所述先前圖片的扭曲的形式。
2. 根據(jù)權(quán)利要求1所述的方法，其中，所述過濾/扭曲從有限集中選擇。
3. 根據(jù)權(quán)利要求1所述的方法，其中所述過濾/扭曲從模糊參數(shù)、褪色參數(shù)和/或扭曲參數(shù)的估計(jì)中確定。
4. 一種具有塊運(yùn)動(dòng)補(bǔ)償器類型的視頻編碼器，其使用存儲(chǔ)器中的一個(gè)或多于一個(gè)參考圖片，在當(dāng)前圖片中尋找用于像素塊的運(yùn)動(dòng)向量，改進(jìn)包括(a)濾色鏡/扭曲器，其被耦合到所述存儲(chǔ)器，并且可用于生成、并在所述存儲(chǔ)器中存儲(chǔ)先前圖片的一組過濾/扭曲，供作參考圖片之用，其中所述先前圖片的所述過濾/扭曲選自(i)所述先前圖片的模糊的形式加上所述先前圖片的扭曲的形式，(ii)所述先前圖片的模糊的形式加上所述 先前圖片的褪色的形式，(iii)所述先前圖片的褪色的形式加上所述先前圖片的扭曲的形式，以及(iv)所述先前圖片的模糊的形式加上所述先前圖片的褪色的形式加上所述先前圖片的扭曲的形式。
5. 根據(jù)權(quán)利要求4所述的編碼器，其中，所述濾器/扭曲器包括模糊 檢測(cè)器。
6. 根據(jù)權(quán)利要求4所述的編碼器，其中，用于確定運(yùn)動(dòng)向量的關(guān)于 先前圖片的過濾/扭曲的信息是與所述運(yùn)動(dòng)向量相關(guān)的。
7. —種具有塊運(yùn)動(dòng)補(bǔ)償器類型的視頻解碼器，其使用運(yùn)動(dòng)向量從存 儲(chǔ)器中的一個(gè)或多于一個(gè)參考圖片來預(yù)測(cè)當(dāng)前圖片中的像素塊，改進(jìn)包 括(a)濾色鏡/扭曲器，其被耦合到所述存儲(chǔ)器，并且可用于生成、并 在所述存儲(chǔ)器中存儲(chǔ)先前重構(gòu)的圖片的各過濾/扭曲，其中所述先前圖片 的所述過濾/扭曲選自(i)所述先前圖片的模糊的形式加上所述先前圖片 的扭曲的形式，(ii)所述先前圖片的模糊的形式加上所述先前圖片的褪色 的形式，(iii)所述先前圖片的褪色的形式加上所述先前圖片的扭曲的形 式，以及(iv)所述先前圖片的模糊的形式加上所述先前圖片的褪色的形 式加上所述先前圖片的扭曲的形式。
8. 根據(jù)權(quán)利要求7所述的解碼器，其中，與運(yùn)動(dòng)向量相關(guān)的關(guān)于先 前圖片的過濾/扭曲的信息被用于確定使用哪種所述過濾/扭曲用于塊預(yù)
全文摘要
視頻壓縮利用了參考幀的過濾和/或扭曲進(jìn)行運(yùn)動(dòng)估計(jì)和運(yùn)動(dòng)補(bǔ)償。確定仿射、褪色或者模糊的存在。如果存在，濾色鏡和/或扭曲被應(yīng)用于參考幀，并且使用參考幀加上任何過濾/扭曲參考幀來估計(jì)運(yùn)動(dòng)。
文檔編號(hào)G06K9/40GK101263513SQ200680033830
公開日2008年9月10日 申請(qǐng)日期2006年7月17日 優(yōu)先權(quán)日2005年7月15日
發(fā)明者A·U·巴圖爾, M·周, M·巴達(dá)加維 申請(qǐng)人:德克薩斯儀器股份有限公司