專利名稱：用于過渡效果的多媒體編碼技術(shù)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及數(shù)字多媒體編碼和解碼，且更特定來說涉及用于編碼和解碼與多媒體序 列相關(guān)聯(lián)的過渡效果的技術(shù)。
背景技術(shù)：
已建立多種不同的視頻編碼標準用于編碼數(shù)字多媒體序列。例如運動圖片專家組 (MPEG)已開發(fā)出多種標準，包括MPEG-1、 MPEG-2禾卩MPEG-4。其它實例包括國際電 信聯(lián)合會(ITU) H.263標準，和新興的ITU H.264標準，所述標準也在MPEG-4第10 部分(題為"高級音頻編碼")中陳述。這些視頻編碼標準一般通過以壓縮方式編碼數(shù)據(jù) 來支持多媒體序列的改進的傳輸效率。壓縮減少了用于多媒體幀的有效傳輸需要傳輸?shù)?數(shù)據(jù)的總量。視頻編碼用于有線與無線傳輸媒體上的許多情形，包括視頻串流、視頻攝 像機、視頻電話(VT)和視頻廣播應(yīng)用。
特定來說，MPEG-4、 ITU H.263和ITU H.264標準支持利用連續(xù)多媒體幀之間的相 似性(稱為時間或幀間相關(guān)性)來提供幀間壓縮的視頻編碼技術(shù)。幀間壓縮技術(shù)通過將 多媒體幀的基于像素的表示形式轉(zhuǎn)換為運動表示形式來利用幀上的數(shù)據(jù)冗余。通常將使 用幀間技術(shù)編碼的幀稱為P ("預(yù)測")幀或B ("雙向")幀。通常稱為I ("內(nèi)")幀的 一些幀是使用空間壓縮(其為非預(yù)測的)編碼的。此外， 一些幀可包括內(nèi)部編碼與相互 間編碼的區(qū)塊的組合。
尤其當使用幀間壓縮時，過渡效果可在視頻編碼中提出挑戰(zhàn)。過渡效果是指用于從 多媒體序列的當前場景過渡的視覺視頻效果。過渡效果包括漸隱漸顯效果、漸隱效果、 滑動效果、破裂效果、翻轉(zhuǎn)效果，以及各種其它類型的用于從當前場景過渡的視覺效果。 過渡效果常用于(例如)通過將第一場景衰褪或漸隱為第二場景而從第一場景變?yōu)榈诙?場景。然而，過渡效果也可用于其它情形，例如通過使一序列的最末場景衰褪或漸隱為 空場景以表示所述多媒體序列的末端。

發(fā)明內(nèi)容
本發(fā)明針對用于對過渡效果進行編碼和解碼的技術(shù)。所述技術(shù)可改進經(jīng)編碼多媒體 序列中的數(shù)據(jù)壓縮和/或改進過渡效果的視覺質(zhì)量。根據(jù)所揭示的技術(shù)，編碼裝置在多媒 體序列的編碼期間檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果，并將作為經(jīng)編碼多媒體序 列的一部分的用以識別所述過渡效果的信息傳輸?shù)浇獯a器。
所述解碼器接收識別與所述多媒體序列相關(guān)聯(lián)的過渡效果的信息。識別所述過渡效 果的信息可包含可由所述解碼器用以模擬或重新建立過渡效果的元數(shù)據(jù)。隨后響應(yīng)于所 述信息而解碼所述經(jīng)編碼多媒體序列以模擬所述過渡效果。還描述可經(jīng)發(fā)送以便于模擬 不同過渡效果的特定信息的若干實例。在一些情況下，識別過渡效果的信息可僅觸發(fā)某 一類型過渡效果的模擬，所述過渡效果不必與原始視頻序列中的過渡效果相同。在其它 情況下，識別過渡效果的信息可識別對解碼器的特定類型的效果。
在一些實施例中，本發(fā)明的技術(shù)可實施與常稱為幀速率向上轉(zhuǎn)換(FRUC)的技術(shù)類 似的內(nèi)插技術(shù)以便允許解碼器處的編碼器輔助的過渡效果模擬。在此情況下，對于過渡 效果，可使用類似FRUC的技術(shù)替代用于過渡效果的幀的常規(guī)的基于預(yù)測或基于空間的 編碼，以改進經(jīng)編碼多媒體序列中的數(shù)據(jù)壓縮和/或改進過渡效果的視覺質(zhì)量。
在一些實施例中，本發(fā)明提供一種方法，其包含接收作為經(jīng)編碼多媒體序列的一 部分的信息，其中所述信息識別與所述多媒體序列相關(guān)聯(lián)的過渡效果；和解碼所述經(jīng)編 碼多媒體序列，包括響應(yīng)于所述信息而模擬所述過渡效果。
在一些實施例中，本發(fā)明提供一種方法，其包含在多媒體序列的編碼期間檢測與 所述多媒體序列相關(guān)聯(lián)的過渡效果；和產(chǎn)生作為經(jīng)編碼多媒體序列的一部分的用以識別 所述過渡效果的信息。
在一些實施例中，本發(fā)明提供一種設(shè)備，所述設(shè)備包含接收器，其經(jīng)配置以接收 作為經(jīng)編碼多媒體序列的一部分的信息，其中所述信息識別與所述多媒體序列相關(guān)聯(lián)的 過渡效果；和解碼器，其響應(yīng)于所述信息而模擬所述過渡效果。
在一些實施例中，本發(fā)明提供一種設(shè)備，所述設(shè)備包含檢測器，其在多媒體序列
的編碼期間檢測與所述多媒體伊列相關(guān)聯(lián)的過渡效果；和編碼器，其產(chǎn)生作為經(jīng)編碼多 媒體序列的一部分的用以識別所述過渡效果的信息。
在一些實施例中，本發(fā)明提供一種處理器，其經(jīng)配置以接收作為經(jīng)編碼多媒體序
列的一部分的信息，其中所述信息識別與所述多媒體序列相關(guān)聯(lián)的過渡效果；且解碼所 述經(jīng)編碼多媒體序列，包括響應(yīng)于所述信息而模擬所述過渡效果。在一些實施例中，本發(fā)明提供一種處理器，其經(jīng)配置以在多媒體序列的編碼期間 檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果；且向解碼器產(chǎn)生作為經(jīng)編碼多媒體序列的一 部分的用以識別與所述經(jīng)編碼多媒體序列相關(guān)聯(lián)的所述過渡效果的信息。
在一些實施例中，本發(fā)明提供一種設(shè)備，所述設(shè)備包含接收裝置，其用于接收作 為經(jīng)編碼多媒體序列的一部分的信息，其中所述信息識別與所述多媒體序列相關(guān)聯(lián)的過 渡效果和解碼裝置，其響應(yīng)于識別所述過渡效果的信息而模擬多媒體序列中的過渡效 果。
在一些實施例中，本發(fā)明提供一種設(shè)備，所述設(shè)備包含檢測裝置，其用于在多媒 體序列的編碼期間檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果；和編碼裝置，其產(chǎn)生用以 識別與所述多媒體序列相關(guān)聯(lián)的過渡效果的信息。
本文描述的技術(shù)可實施于硬件、軟件、固件或其任意組合中。如果實施于軟件中， 那么所述軟件可在數(shù)字信號處理器(DSP)或其它類型的處理器中執(zhí)行。執(zhí)行所述技術(shù) 的軟件可初始存儲于機器可讀媒體(例如計算機可讀媒體)中，并在處理器或其它機器 中載入和執(zhí)行以允許如本文所描述對過渡效果進行視頻編碼或解碼。
因此，本發(fā)明還預(yù)期一種包含指令的機器可讀媒體，所述指令一旦執(zhí)行便促使一機 器接收作為經(jīng)編碼多媒體序列的一部分的信息，其中所述信息識別與所述多媒體序列 相關(guān)聯(lián)的過渡效果；且解碼所述經(jīng)編碼多媒體序列，包括響應(yīng)于所述信息而模擬所述過 渡效果。
同樣，本發(fā)明預(yù)期一種包含指令的機器可讀媒體，所述指令一旦執(zhí)行便促使一機器 在多媒體序列的編碼期間檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果；且產(chǎn)生作為經(jīng)編碼 多媒體序列的一部分的用以識別所述過渡效果的信息。
在附圖和以下描述中陳述一個或一個以上實施例的細節(jié)。從描述內(nèi)容和附圖以及從 權(quán)利要求書中將了解其它特征、目的和優(yōu)點。


圖1是說明根據(jù)本發(fā)明可實施過渡效果編碼和解碼技術(shù)的視頻編碼和解碼系統(tǒng)的框圖。
圖2是說明根據(jù)本發(fā)明的過渡效果編碼技術(shù)的流程圖。 圖3是說明根據(jù)本發(fā)明的過渡效果解碼技術(shù)的流程圖。
圖4到圖16是說明可根據(jù)本發(fā)明的技術(shù)進行編碼的不同過渡效果的示范性幀的概念圖。圖17是說明根據(jù)本發(fā)明可實施過渡效果編碼和解碼技術(shù)的示范性視頻編碼和解碼 系統(tǒng)的另一框圖。
具體實施例方式
本發(fā)明針對用于對過渡效果進行編碼和解碼的技術(shù)。過渡效果是指用于從多媒體序 列的當前場景過渡的視覺視頻效果。過渡效果的實例包括漸隱漸顯效果、抹擦效果、漸 隱效果、滑動效果、破裂效果和翻轉(zhuǎn)效果，僅列舉這幾個例子。過渡效果常用于(例如) 通過將第一場景衰褪或漸隱為第二場景而從第一場景變?yōu)榈诙鼍啊Ｈ欢?，過渡效果也 可用于其它情形，例如通過使序列的最末場景衰褪或漸隱為空場景以表示所述多媒體序 列的末端。
根據(jù)所揭示的技術(shù)，編碼裝置在多媒體序列編碼期間檢測與多媒體序列相關(guān)聯(lián)的過 渡效果。此過渡效果檢測可基于常規(guī)鏡頭邊界(shot boundary)檢測算法或任何其它用于 檢測多媒體序列中的過渡效果的可靠方法?；蛘?，編碼裝置可檢測源位流中指示過渡效 果的存在的信號或命令。所述編碼裝置隨后產(chǎn)生信息從而以非常規(guī)方式編碼過渡效果。
解碼器可使用內(nèi)插技術(shù)(例如與常規(guī)用于在兩個經(jīng)編碼幀之間插入一個或一個以上 幀以用于幀速率向上轉(zhuǎn)換(FRUC)的技術(shù)類似的技術(shù))模擬過渡效果。編碼裝置傳輸作 為經(jīng)編碼多媒體序列的一部分的用以識別所述經(jīng)編碼多媒體序列中的過渡效果的過渡效 果信息。在一些實施例中，過渡效果信息可包含可由解碼器用以產(chǎn)生過渡效果的元數(shù)據(jù)。 在此情況下，過渡效果信息可輔助解碼器產(chǎn)生近似于原始視頻源位流中的過渡效果的過 渡效果?；蛘?，過渡效果信息可僅發(fā)送指示過渡效果存在的信號。在此情況下，解碼器 可響應(yīng)于過渡效果信息而獨立地產(chǎn)生過渡效果，所述過渡效果不必與原始視頻序列中的 原始過渡效果相同。
圖1是說明根據(jù)本發(fā)明可實施過渡效果編碼和解碼技術(shù)的視頻編碼和解碼系統(tǒng)10的 框圖。如圖所示，系統(tǒng)IO包括視頻編碼器裝置12和視頻解碼器裝置14。經(jīng)編碼的多媒 體序列可從視頻編碼器裝置12在通信信道15上傳輸?shù)揭曨l解碼器裝置14。為此，視頻 編碼器裝置12和視頻解碼器裝置14分別包含發(fā)射器23和接收器27以便于此通信，所 述通信可為有線或無線通信。
視頻編碼器裝置12 (例如)可形成用于將一個或一個以上視頻信道廣播到無線訂戶 裝置的廣播網(wǎng)路組件的一部分。在此情況下，視頻編碼器裝置12可將經(jīng)編碼數(shù)據(jù)傳輸?shù)?若干視頻解碼器(即，廣播服務(wù)的許多訂戶)。然而，出于簡明起見，在圖1中說明單一 視頻解碼器裝置14。視頻編碼器裝置12和視頻解碼器裝置14可實施為一個或一個以上處理器、數(shù)字信號處理器、專用集成電路(ASIC)、場可編程門陣列(FPGA)、離散邏 輯、軟件、硬件、固件，或其任意組合。裝置12和裝置14的所說明的組件可包括于一 個或一個以上編碼器或解碼器中，其中任一者可集成為編碼器/解碼器(CODEC)的一部 分。然而，發(fā)射器23和接收器27可形成于與編碼器、解碼器或CODEC不同的組件或 芯片上。
如上所述，視頻編碼器裝置12可形成用于廣播一個或一個以上視頻數(shù)據(jù)信道的廣播 網(wǎng)路組件的一部分。此類組件的實例包括無線基站或任何用于廣播經(jīng)編碼視頻數(shù)據(jù)的基 礎(chǔ)結(jié)構(gòu)節(jié)點。另一方面，視頻解碼器裝置14可包含接收經(jīng)編碼視頻的用戶裝置。舉例來 說，視頻解碼器裝置14可實施為數(shù)字電視、無線通信裝置、便攜式數(shù)字助理(PDA)、 膝上型計算機或臺式計算機、數(shù)字音樂與視頻裝置(例如以商標"iPod"出售的裝置)、 或無線電話(例如基于蜂窩式、衛(wèi)星或陸地的無線電話)的一部分。所說明的系統(tǒng)10中 的組件是最適于實施本文描述的技術(shù)的組件，但編碼器裝置12和解碼器裝置14在需要 時可包括許多其它組件。此外，本發(fā)明的技術(shù)不必限于在類似于系統(tǒng)IO的系統(tǒng)或廣播系 統(tǒng)中使用。所述技術(shù)可應(yīng)用于其中過渡效果用于待編碼和/或解碼的多媒體序列中的任何 視頻編碼環(huán)境中。
如圖1所示，視頻編碼器裝置12 (例如)從存儲器位置接收多媒體序列5。所述存 儲器(為了簡明起見在圖1中未圖示)可以是編碼器裝置12的一部分，或者可以是將多 媒體序列提供到視頻編碼器裝置12的外部存儲器。多媒體序列5可包含待編碼和作為廣 播而傳輸?shù)膶崨r播送實時視頻或視頻與音頻序列，或者可包含待編碼和作為廣播或按所 需傳輸?shù)念A(yù)先記錄和存儲的視頻或視頻與音頻序列。
在任何情況下，視頻編碼器裝置12有助于多媒體序列5的編碼，并實施本發(fā)明的技 術(shù)以在多媒體序列5內(nèi)遭遇過渡效果時改進此編碼。視頻編碼器裝置12包括過渡效果檢 測器20，其執(zhí)行與序列5相關(guān)聯(lián)的過渡效果的檢測。舉例來說，過渡效果檢測器20可 對多媒體序列5取樣，尋找過渡效果的一個或一個以上記號，例如產(chǎn)生漸隱漸顯效果、 抹擦效果、漸隱效果、滑動效果、破裂效果、翻轉(zhuǎn)效果或各種其它類型的用于從當前場 景過渡的視覺效果的一組幀。作為一個實例，過渡效果檢測器20可實施一個或一個以上 所謂的鏡頭邊界檢測算法，或任何其它用于檢測與多媒體序列相關(guān)聯(lián)的過渡效果的可靠 方法。以此方式，過渡效果檢測器20識別多媒體序列5內(nèi)過渡效果的存在。
過渡效果可在視頻編碼中提出挑戰(zhàn)。特定來說，過渡效果通常不會展示允許高度有 效的基于預(yù)測的視頻編碼的相對場景運動。此外，過渡效果常用于場景改變處，在所述場景改變處觀察者的感覺對高階信號噪音不敏感。當使用常規(guī)編碼器使用基于預(yù)測的技 術(shù)以標準方式編碼過渡效果時，壓縮水平可能極為有限，且視頻質(zhì)量可能較差。此外， 由于觀察者的感覺對過渡效果中的高階信號噪音通常不如對多媒體序列的完整運動部分 中的高階信號噪音敏感，所以此類過渡效果的低效標準樣式編碼從質(zhì)量觀點來說可能是 不必要的。換句話說，當場景改變時，用戶通?？扇淌茌^高噪音水平而不會感覺到任何 主觀的質(zhì)量下降。
出于這些和其它原因，本發(fā)明的技術(shù)提供相對于多媒體序列的其它非過渡部分的過 渡效果的不同編碼方法。具體來說，視頻編碼器裝置12包括標準編碼模塊16與過渡效 果編碼模塊18，其可形成于一個編碼器或多個編碼器中。標準編碼模塊16應(yīng)用標準的 基于預(yù)測的編碼技術(shù)，例如運動估計和運動補償，以編碼多媒體序列5的幀。標準編碼 模塊16還可應(yīng)用非運動編碼技術(shù)，例如用于一些幀的空間估計和內(nèi)部預(yù)測。根據(jù)標準的 基于預(yù)測的技術(shù)，標準編碼模塊16還可包括各種用于熵編碼、掃描、量化、變換和可能 的解塊(deblock)濾波的單元。這些單元應(yīng)用于正常(非過渡)幀，以促進此類幀的標 準的基于預(yù)測的編碼。然而，對于識別為過渡效果的任何幀，過渡效果編碼模塊18執(zhí)行 不同的非標準編碼技術(shù)。
特定來說，對于包含過渡效果的幀，過渡效果編碼器18產(chǎn)生可由視頻解碼器裝置 14用以模擬過渡效果的信息。解碼器裝置14通過重建過渡效果的幀，而非單獨地解碼 此類幀，而使用所述信息來模擬所述效果。所述信息可包含可由解碼器裝置14以類似于 FRUC技術(shù)的方式使用的元數(shù)據(jù)。舉例來說，元數(shù)據(jù)可識別一類型的效果，以使得可在 視頻解碼器裝置14處針對包含所述過渡效果的那些特定幀來模擬所述類型的效果。在較 簡單的情況下，元數(shù)據(jù)可僅識別過渡效果的存在，而不用考慮效果的類型，在此情況下， 視頻解碼器裝置14可模擬不一定與原始效果相同的過渡效果。然而在較復(fù)雜的情況下， 元數(shù)據(jù)可包括用以識別效果周期的信息、可能的與過渡效果的幀相關(guān)聯(lián)的一個或一個以 上幾何映射，或有助于在視頻解碼器裝置14處模擬所述效果的其它數(shù)據(jù)。然而在大多數(shù) 情況下，可在解碼器側(cè)存儲或產(chǎn)生用于模擬過渡效果的幾何映射，并基于對效果類型的 指示和與效果相關(guān)聯(lián)的周期而應(yīng)用所述幾何映射。根據(jù)所揭示的技術(shù)，可避免需要編碼、 發(fā)送和解碼用于過渡效果的完整預(yù)測幀，從而節(jié)省編碼器和解碼器處的處理額外開銷， 且節(jié)省無線通信信道上的帶寬。
視頻解碼器裝置14包括標準解碼模塊22與過渡效果解碼模塊24，其可形成于一個 解碼器或多個解碼器中。標準解碼模塊22處理通過標準的基于預(yù)測的運動技術(shù)或非基于
11預(yù)測的空間技術(shù)編碼的任何幀。為此，標準解碼模塊22可包括運動補償器和空間補償器。 標準解碼模塊22還可包括用于熵編碼、反向掃描、反向量化、反向變換和可能的解塊 (deblock)濾波的單元。出于簡明起見在圖I中未說明這些標準組件。從編碼裝置12的 發(fā)射器23經(jīng)由通信信道15將經(jīng)編碼視頻序列傳輸?shù)浇獯a裝置14的接收器27，通信信 道15可為無線信道。
過渡效果解碼模塊24基于從視頻編碼器裝置12發(fā)送的信息而處理過渡效果的解碼。 經(jīng)發(fā)送以解碼過渡效果的信息可比原本使用標準技術(shù)編碼此類效果所需的信息少得多。 實質(zhì)上，視頻編碼器裝置12產(chǎn)生識別過渡效果的信息，和可能的關(guān)于效果的其它信息， 例如與效果相關(guān)聯(lián)的周期、效果類型以及與效果相關(guān)聯(lián)的開始與結(jié)束場景。解碼裝置14 經(jīng)由接收器27接收此信息，且過渡效果解碼模塊24響應(yīng)于所述信息而在視頻解碼器裝 置14中模擬所述效果。舉例來說，給定開始與結(jié)束場景、對效果類型的指示和效果的周 期，可由過渡效果解碼模塊24重新建立所述效果的模擬，而不需要原本使用標準技術(shù)編 碼此類效果時所需的較廣泛的編碼信息。
圖2是說明根據(jù)本發(fā)明的編碼技術(shù)的流程圖。如圖2所示，視頻編碼器裝置12接收 待編碼的多媒體序列5 (31)。過渡效果檢測器20 (例如)通過實施鏡頭邊界檢測算法或 任何其它用于檢測與多媒體序列相關(guān)聯(lián)的過渡效果的可靠方法來檢測多媒體序列5的任 何給定部分是否包含過渡效果(32)。如果過渡效果檢測器20未識別到任何過渡效果(32 的否定分支)，那么調(diào)用標準編碼模塊16以編碼整個多媒體序列5。在此情況下，標準 編碼模塊16對多媒體序列5執(zhí)行標準的基于預(yù)測的運動編碼和非基于預(yù)測的空間編碼。
然而，如果過渡效果檢測器20識別到與多媒體序列5相關(guān)聯(lián)的過渡效果，那么調(diào)用 過渡效果編碼模塊18以用于多媒體序列5的過渡效果部分。在此情況下，過渡效果編碼 模塊18產(chǎn)生針對過渡效果的過渡效果信息(34)，其可由視頻解碼器裝置14使用以模擬 過渡效果。此信息可以是有助于內(nèi)插的信息或?qū)^渡效果的存在、位置和定時的指示， 或者可能僅是指示需要在解碼器處產(chǎn)生過渡效果的旗標。在任何情況下，標準編碼模塊 16仍對多媒體序列5的非過渡部分執(zhí)行標準的基于預(yù)測的運動編碼和標準的非基于預(yù)測 的空間編碼(35)。
圖3是說明根據(jù)本發(fā)明的解碼技術(shù)的流程圖。如圖3所示，視頻解碼器裝置14的接 收器27(例如)經(jīng)由通信信道15從編碼裝置12的發(fā)射器23接收經(jīng)編碼多媒體序列(51)。 如果所接收多媒體序列不包括識別過渡效果的存在的過渡效果信息，那么調(diào)用標準解碼 模塊22以用于整個多媒體序列的解碼。在此情況下，標準解碼模塊22執(zhí)行標準的基于預(yù)測的運動解碼和非基于預(yù)測的空間解碼。
然而，如果所接收多媒體序列包括識別過渡效果的存在的過渡效果信息，那么調(diào)用 過渡效果解碼模塊24以用于所接收多媒體序列的過渡效果部分。在此情況下，過渡效果 解碼模塊24響應(yīng)于過渡效果信息而模擬過渡效果(53)。同樣，由過渡效果解碼模塊24 進行的此模擬可類似于用于支持FRUC技術(shù)的內(nèi)插技術(shù)或編碼器輔助的FRUC技術(shù)，其 中產(chǎn)生幀以模擬所需效果。對于所接收多媒體序列的非過渡部分，標準解碼模塊22仍執(zhí) 行標準的基于預(yù)測和非基于預(yù)測的解碼(55)。
圖4到圖16是說明可根據(jù)本發(fā)明的技術(shù)編碼的個別過渡效果內(nèi)的一個個別幀的概念 圖。圖4到圖16中所說明的不同示范性情境將用于解釋可用于編碼過渡效果并允許在解 碼器處良好模擬個別效果的不同類型的過渡效果信息或元數(shù)據(jù)。再次，在一些簡單情況 下，元數(shù)據(jù)可僅識別過渡效果的存在，而不用考慮效果的類型，在此情況下，視頻解碼 器裝置14可模擬不必與原始效果相同的過渡效果。然而在較復(fù)雜的情況下，元數(shù)據(jù)可包 括用以識別效果類型、效果周期、效果的開始與結(jié)束幀的信息，以及可能協(xié)助在視頻解 碼器裝置14處模擬效果的其它數(shù)據(jù)。在這些情況下，信息可由解碼器使用以輔助過渡效 果的模擬。
圖4是說明漸隱漸顯效果(在此情況下為交叉衰褪)的一個幀62的概念圖。在此情 況下，場景A在周期P中衰褪為場景B。漸隱漸顯效果可包括"淡入(fade-in)",此情 況下場景B從空場景淡入；和"淡出(fade-out)",此情況下場景A淡出為空場景。圖4 說明"交叉衰褪"，其中場景A衰褪為場景B。技術(shù)上，在處理這些淡入、淡出和交叉衰 褪的情況時，可能不存在差異?？蓪⒌牒偷鲆暈榕c交叉衰褪相同，但僅將場景A或 B視為用于淡入或淡出的空白場景。
在任何情況下，對于例如圖4的幀62中所說明的交叉衰褪的漸隱漸顯效果，加權(quán)雙 向運動補償可與零運動向量一起使用。在此情況下，由解碼裝置14使用以編碼過渡效果 的信息可將效果識別為漸隱漸顯效果并界定所述效果的周期。場景A的一個副本和場景 B的一個副本也可包括于過渡效果信息中。然而，可省略在場景A與B之間擴展的介入 幀的至少一些信息。
給定從視頻編碼器裝置12接收的相對有限的信息，視頻解碼器裝置14可模擬漸隱 漸顯效果。具體來說，過渡效果解碼模塊24可基于場景A的副本、場景B的副本和與 從場景A到場景B的衰褪過渡相關(guān)聯(lián)的周期來重建過渡的一組幀。在此情況下，過渡效 果解碼模塊24可使用零值的運動向量來執(zhí)行多媒體幀的加權(quán)雙向重建。用于場景A和場景B的加權(quán)可在周期中相對于彼此而改變以產(chǎn)生一組過渡幀，且可存儲于在解碼過程期 間由過渡效果解碼模塊24存取的一個或一個以上査找表(LUT)中。漸隱漸顯效果的周 期可界定若干指數(shù)，所述指數(shù)可應(yīng)用于LUT以選擇用于效果的每一連續(xù)幀的加權(quán)。然而 重要的是，需要發(fā)送以促進此重建的信息是漸隱漸顯效果類型的指示、場景A和場景B 的副本，以及周期。所述周期中幀的重建可由過渡效果解碼模塊24單獨執(zhí)行。以此方式， 在視頻編碼機制中傳送過渡效果所需的信息可顯著減少。
圖5是說明漸隱漸顯效果(在此情況下為漸隱效果)的一個幀64的概念圖。在漸隱 效果中，場景A在周期P中漸隱為場景B。漸隱效果還可包含"漸入(dissolve-in)",此 情況下場景B從空場景漸入；或"漸出(dissolve-out)",此情況下場景A漸出為空場景。 圖5說明"交叉漸隱"，其中場景A漸隱為場景B。可將漸入和漸出視為與交叉漸隱相同， 但僅將場景A或B視為用于漸入或漸出的空白場景。
在任何情況下，對于例如圖5的幀64中所說明的漸隱效果， 一對選擇是可能的。在 一種情況下，在過渡效果解碼模塊24處預(yù)先界定幾何映射以界定具有零運動向量的雙向 運動。對于過渡效果的每一連續(xù)幀，所述映射界定哪些像素取自場景A以及哪些像素取 自場景B。漸隱中所使用的映射的數(shù)目可由與過渡效果相關(guān)聯(lián)的周期來界定。用于過渡 效果的預(yù)定義的映射可存儲在可由過渡效果解碼模塊24存取的一個或一個以上査找表 (LUT)中。效果周期可界定指數(shù)，所述指數(shù)可應(yīng)用于LUT以選擇用于效果的每一連續(xù) 幀的預(yù)定義的映射。
然而在另一情況下，幾何映射可以隨機方式在視頻解碼器裝置14處產(chǎn)生。類似于其 它漸隱實例，在此情況下，過渡效果信息可識別場景A和B、漸隱效果和周期。過渡效 果解碼模塊24隨后可基于隨機數(shù)產(chǎn)生而產(chǎn)生一組漸隱映射。此情況導(dǎo)致漸隱效果，但可 在視頻解碼器裝置14處隨機選擇漸隱的特定像素。因此，任何隨后的漸隱效果將以隨機 方式而彼此不同。
圖6到圖8分別是說明方框效果(box effect)、滑動效果和曲線效果的概念圖。在圖 6的幀65中所示的方框效果中，場景B68從場景A66呈現(xiàn)在放大框中。在圖7的幀75 中所示的滑動效果中，場景B 78從場景A以滑動方式76呈現(xiàn)。在圖7的幀85中所示的 曲線效果中，場景B88從場景A86呈現(xiàn)于在場景上放大的一組曲線區(qū)域中。類似于圖4 和圖5的效果，圖6到圖8的效果也可與用于場景A或用于場景B的空白場景一起使用。 在任何情況下，用于編碼此效果的信息可將所述類型的過渡效果識別為方框效果，并界 定周期。場景A和場景B的副本也用于產(chǎn)生模擬。具體來說，過渡效果解碼模塊24可根據(jù)用于這些類型的過渡效果的每一者的預(yù)定義 的映射來模擬圖6到圖8的過渡效果。給定場景A、場景B、過渡效果類型和與效果相 關(guān)聯(lián)的周期，過渡效果解碼模塊24可選擇可存儲于一個或一個以上LUT中的一組預(yù)定 義的映射。選定的映射可界定過渡序列上每一連續(xù)幀的幾何圖形以便模擬過渡效果。換 句話說，過渡效果解碼模塊24可使用用于每一幀的映射來執(zhí)行每一連續(xù)幀的雙向重建， 所述映射界定哪些像素(或像素區(qū)塊)取自場景A以及哪些像素(或像素區(qū)塊)取自場 景B。對于每一個別像素或區(qū)塊，用于每一像素(或像素區(qū)塊)的運動向量將為零。LUT 可經(jīng)預(yù)先界定以用于每一類型的過渡效果，且可基于過渡周期從LUT中進行選擇，例如 如果周期較短，那么跳過LUT中的一個或一個以上映射。
在另外其它實例中，用于本發(fā)明中所描述的效果的任一者的幾何映射可在編碼裝置 12處產(chǎn)生并發(fā)送到解碼裝置14。換句話說，通過產(chǎn)生用于個別效果的幾何映射，或通過 應(yīng)用在編碼裝置12處產(chǎn)生并發(fā)送到解碼裝置14作為過渡效果信息的一部分的映射，可 在解碼裝置14處模擬所述效果。由編碼裝置12產(chǎn)生幾何映射可減少解碼裝置14的復(fù)雜 性，解碼裝置H通常比編碼裝置12具有較少的復(fù)雜計算的能力，在廣播情形中尤其如 此。另一方面，由解碼裝置14產(chǎn)生幾何映射實現(xiàn)截然不同的優(yōu)點，因為這減少了有效編 碼過渡效果所需要轉(zhuǎn)遞的信息量。在此情況下，在解碼器處模擬效果可允許編碼裝置12 與解碼裝置14之間轉(zhuǎn)遞的信息的減少，以有效編碼過渡效果，這尤其在以無線方式轉(zhuǎn)遞 信息時可能極其有用。
圖9是說明開門(door opening)效果的另一概念圖。圖9的幀95中，在開門以移 除場景A 96時呈現(xiàn)場景B 98。類似于其它效果，圖9的開門效果也可與用于場景A或 用于場景B的空白場景一起使用。在任何情況下，用于編碼此效果的信息可將所述類型 的過渡效果識別為開門效果，并界定周期。場景A和場景B的副本也用于產(chǎn)生模擬。
在此情況下，過渡序列的幀分段為前向預(yù)測部分和后向預(yù)測部分。所述前向預(yù)測部 分以不同于所述后向預(yù)測部分的方式而解碼。 一組幾何映射可界定在過渡周期中經(jīng)前向 預(yù)測和后向預(yù)測的場景的個別部分。與呈現(xiàn)的場景B相關(guān)聯(lián)的運動向量為零，而與場景 A的開門相關(guān)聯(lián)的運動向量可經(jīng)平滑化和定標以產(chǎn)生此效果。因此，場景A96的開門經(jīng) 定標和平滑化以使得完整的場景A包括于開門中，還經(jīng)調(diào)節(jié)以產(chǎn)生開門效果。類似于其 它實例，定標和平滑因子以及任何與所述效果相關(guān)聯(lián)的幾何映射可預(yù)先存儲于視頻解碼 器12中(例如)作為過渡效果解碼模塊24中的一個或一個以上LUT。
因此，與場景A相關(guān)聯(lián)的運動向量的平滑化和定標可在視頻解碼器裝置14處由過渡效果解碼單元24執(zhí)行，從而消除了在經(jīng)編碼數(shù)據(jù)中發(fā)送復(fù)雜運動信息的需要。編碼裝置 12的過渡效果編碼模塊18僅識別開門效果和周期，并發(fā)送場景A和場景B的副本。解 碼裝置14的過渡效果解碼模塊24隨后可使用具有零運動向量的場景B 98的呈現(xiàn)區(qū)域與 使用運動向量的平滑化和定標的場景A96的開門的差分解碼來模擬此效果。場景A和B 可經(jīng)空間壓縮以用于增加效率。
圖10到圖12說明也可根據(jù)本發(fā)明的技術(shù)進行模擬的不同的破裂效果。在圖10的幀 105中，場景A106被分裂為場景B 108。在圖11的幀115中，場景A116破裂為若干條 以暴露空場景119，且場景B 118以破裂方式出現(xiàn)，最終重建B場景。在圖12的幀125 中，場景A 126破裂為若干片以暴露空場景129，且隨后場景B 128呈現(xiàn)為聚集形成B 場景的若干片。
圖10到圖12的實例還可由解碼器裝置14基于識別效果類型、周期和開始場景A與 結(jié)束場景B的內(nèi)容的過渡效果信息來模擬。在此情況下，將幀分段為前向和后向預(yù)測部 分，在前向與后向部分中執(zhí)行定標和旋轉(zhuǎn)以實現(xiàn)個別破裂過渡效果。
圖13展示示范性翻轉(zhuǎn)效果的幀135。在此情況下，場景A 136在旋轉(zhuǎn)時其尺寸減少， 從而最終翻轉(zhuǎn)為場景B (未圖示)，場景B隨過渡的連續(xù)幀而放大，直到其包含完整場 景為止。背景139在此實例中展示為空的。類似于圖10到圖12的實例，為了模擬圖3 的效果，幀被分段為前向和后向預(yù)測部分。然而在此情況下，在前向與后向部分中執(zhí)行 定標和旋轉(zhuǎn)以實現(xiàn)個別破裂過渡效果。所述效果可由解碼器裝置"基于識別效果類型、 周期和開始場景A與結(jié)束場景B的內(nèi)容的過渡效果信息來模擬。效果的定標、旋轉(zhuǎn)和幾 何形狀可預(yù)先存儲于(例如) 一個或一個以上LUT中，并可基于針對所述效果而識別的 周期進行選擇以用于所述效果的每一連續(xù)場景。
圖14說明電影膠片效果的幀145，其中在場景B 148移入時場景A 146移出。運動 為過渡的。在此情況下，運動向量以均一方式界定，且邊界線的兩側(cè)使用不同的預(yù)測方 向。類似于其它過渡效果，可在視頻解碼器裝置14處基于界定過渡效果類型、周期和場 景A與B的內(nèi)容的信息來模擬此效果。因此，可避免針對序列的過渡部分的每一幀的基 于標準預(yù)測的編碼和解碼，且過渡效果解碼器模塊24可基于比原本所需要的信息少的信 息來模擬此效果。
圖15說明包括兩種過渡效果的組合的幀155。在此情況下，所述效果是圖8所示的 曲線效果與圖4所示的交叉漸隱漸顯效果的組合。假定圖15的效果是這兩種不同效果的 組合，過渡效果解碼器模塊24可通過組合用于曲線效果與交叉漸隱漸顯效果的技術(shù)來模擬此效果。在此情況下，由過渡效果解碼器模塊24來執(zhí)行與過渡效果相關(guān)聯(lián)的多媒體幀 的使用零值運動向量的加權(quán)雙向重建，且根據(jù)曲線效果的預(yù)定義的映射來界定預(yù)測權(quán)數(shù)。 一些復(fù)雜效果，例如圖16的幀165中所說明的波紋效果，可能過于復(fù)雜而不能識別 為簡單效果的組合。在此情況下，可引入物理翹曲、交叉衰褪和其它隨機運動以在視頻 解碼器裝置14處模擬所述效果。隨機和/或非線性失真也可用于模擬此類復(fù)雜過渡效果。 在這些復(fù)雜情況下，替代于傳輸每一區(qū)塊的每一細節(jié)，可發(fā)送統(tǒng)計數(shù)字，例如以交叉漸 隱更新為新場景的區(qū)塊的比率，和白噪音中明亮像素的比率。給定此信息，可模擬復(fù)雜 的類似波紋的效果。
然而在一些情況下，尤其在內(nèi)容可修改時，可能需要用較簡單的過渡效果(例如交 叉衰褪)替代復(fù)雜效果(例如波紋效果)。在此情況下，編碼器裝置12可僅識別過渡的 存在，且解碼器裝置14可模擬不必與原始序列中的過渡效果相同的過渡效果。在此情況 下，觀察者仍將觀察到過渡，并通過避免傳遞復(fù)雜過渡效果所需的高代價的編碼和解碼 可顯著降低復(fù)雜性。
當針對解碼器處的過渡效果模擬執(zhí)行加權(quán)運動補償時，可在過渡效果的周期中在幀 上對加權(quán)進行平滑化。當對用于給定效果的運動向量執(zhí)行平滑化時，此平滑化不必限于 緊鄰的相鄰部分，而是可包括正被平滑化的整個段或部分的平滑化。平滑化也不限于過 渡運動，且可包括(例如)定標和旋轉(zhuǎn)。對于給定過渡效果，平滑化、加權(quán)、濾波等均 可在解碼器處預(yù)先界定。
圖17是說明根據(jù)本發(fā)明可實施過渡效果編碼和解碼技術(shù)的示范性視頻編碼和解碼 系統(tǒng)的另一框圖。如圖所示，系統(tǒng)170包括編碼裝置172和解碼裝置174。編碼裝置172 可包含編碼器，且解碼裝置可包含解碼器。編碼裝置172 (例如)從存儲器位置接收多 媒體序列171。所述存儲器(為了簡明起見在圖17中未圖示)可以是編碼裝置172的一 部分，或者可以是將多媒體序列提供到編碼裝置172的外部存儲器。
編碼裝置172有助于多媒體序列171的編碼，并實施本發(fā)明的技術(shù)以當在多媒體序 列171的一部分中遭遇過渡效果時改進此編碼。編碼裝置172包括過渡效果檢測裝置177， 其執(zhí)行與多媒體序列177相關(guān)聯(lián)的過渡效果的檢測。檢測裝置177可包含檢測器。在系 統(tǒng)170中，不同的編碼方法用于相對于多媒體序列177的其它非過渡部分的過渡效果。
編碼裝置172包括標準編碼裝置176和過渡效果編碼裝置178，所述裝置可稱為第 一和第二編碼裝置。標準編碼裝置176和過渡效果編碼裝置178可包含單獨的編碼器或 可實施于共同編碼器中。標準編碼裝置176應(yīng)用標準的基于預(yù)測的編碼技術(shù)，例如運動估計和運動補償，以便編碼多媒體序列171的幀。標準編碼裝置176還可針對一些幀應(yīng) 用非運動編碼技術(shù)，例如空間估計和內(nèi)部預(yù)測。另一方面，過渡效果編碼裝置178執(zhí)行 如本文所述的非標準解碼技術(shù)。具體來說，過渡效果編碼裝置178編碼可由解碼裝置174 使用的元數(shù)據(jù)，以促進過渡效果的模擬。經(jīng)由發(fā)射裝置183和接收裝置185在通信信道 175上在編碼裝置172與解碼裝置174之間轉(zhuǎn)遞經(jīng)編碼視頻序列。發(fā)射裝置183可包含 發(fā)射器，且接收裝置185可包含接收器?；蛘撸l(fā)射裝置183和接收裝置185可包含可 發(fā)射與接收信息的收發(fā)器。
解碼裝置174包括標準解碼裝置182和過渡效果解碼裝置184,所述裝置可稱為第 一和第二解碼裝置。標準解碼裝置182和過渡效果編碼裝置184可包含單獨的解碼器或 可實施于共同解碼器中。標準解碼裝置182執(zhí)行標準解碼技術(shù)，例如運動補償解碼和任 何內(nèi)部編碼幀的內(nèi)部解碼。然而，過渡效果解碼裝置184執(zhí)行非標準技術(shù)，本質(zhì)上基于 針對本文描述的此類效果而傳輸?shù)脑獢?shù)據(jù)來模擬任何過渡效果。
已描述了可經(jīng)發(fā)送以有助于模擬不同過渡效果的信息的若干實例。大體來說，本發(fā) 明的技術(shù)可實施與用于一些幀速率上轉(zhuǎn)換(FRUC)技術(shù)的技術(shù)類似的內(nèi)插技術(shù)，以便允 許在解碼器處進行編碼器輔助的過渡效果模擬。在此情況下，對于過渡效果，可使用類 似FRUC的技術(shù)替代常規(guī)的基于預(yù)測的編碼，以便改進經(jīng)編碼多媒體序列中的數(shù)據(jù)壓縮 和/或改進過渡效果的視覺質(zhì)量。將開始和結(jié)束場景(和可能一些中間場景)發(fā)送到解碼 器，且解碼器插入其它幀以產(chǎn)生過渡效果。
在任何情況下，本文描述的技術(shù)可實施于硬件、軟件、固件或其任一組合中。如果 實施于軟件中，那么所述技術(shù)可由包含含有指令的程序代碼的計算機可讀媒體(或其它 機器可讀媒體)來部分實現(xiàn)，所述程序代碼當被執(zhí)行時執(zhí)行上文描述的技術(shù)中的一者或 一者以上。在此情況下，所述計算機可讀媒體可包含例如同步動態(tài)隨機存取存儲器 (SDRAM)等隨機存取存儲器(RAM)、只讀存儲器(ROM)、非易失性隨機存取存儲器 (NVRAM)、電可擦除可編程只讀存儲器(EEPROM)、快閃存儲器、磁性或光學(xué)數(shù)據(jù)存 儲媒體等。
所述指令可由一個或一個以上處理器或其它機器執(zhí)行，所述其它機器例如為一個或 一個以上數(shù)字信號處理器(DSP)、通用微處理器、專用集成電路(ASIC)、現(xiàn)場可編程 邏輯陣列(FPGA)或其它等效的集成或離散邏輯電路。執(zhí)行所述指令的機器通?？砂?一設(shè)備。在一些實施例中，本文描述的功能性可提供于經(jīng)配置以用于編碼和解碼的專用 軟件模塊或硬件單元內(nèi)，或并入在組合的視頻編碼器-解碼器(CODEC)中。已描述各種實施例。然而，在不偏離所附權(quán)利要求書的范圍的情況下，可對所述技 術(shù)作出各種修改。舉例來說，仿射運動可用于根據(jù)一些類型的過渡效果來界定模擬中的 映射和像素值。仿射運動允許六個自由度，且可編碼平移、壓縮或放大。加速運動也可 用于界定模擬。此外，還可通過應(yīng)用等式而非編碼器或解碼器中的査找表(LUT)來使 用本發(fā)明的技術(shù)。這些和其它實施例在所附權(quán)利要求書的范圍內(nèi)。
權(quán)利要求
1.一種方法，其包含接收作為經(jīng)編碼多媒體序列的一部分的信息，其中所述信息識別與所述多媒體序列相關(guān)聯(lián)的過渡效果；以及解碼所述經(jīng)編碼多媒體序列，包括響應(yīng)于所述信息而模擬所述過渡效果。
2. 根據(jù)權(quán)利要求1所述的方法，其中所述信息識別一類型的過渡效果，所述方法進一 步包含基于所述類型的過渡效果而模擬所述過渡效果。
3. 根據(jù)權(quán)利要求1所述的方法，其中所述信息識別一類型的過渡效果和與所述過渡效 果相關(guān)聯(lián)的周期，且其中模擬所述過渡效果包含在所述周期期間模擬所述類型的過 渡效果。
4. 根據(jù)權(quán)利要求1所述的方法，其中所述信息識別一類型的過渡效果、與所述過渡效 果相關(guān)聯(lián)的周期以及與所述過渡效果相關(guān)聯(lián)的開始和結(jié)束場景，且其中模擬所述過 渡效果包括產(chǎn)生一個或一個以上幾何映射。
5. 根據(jù)權(quán)利要求4所述的方法，其中從一個或一個以上查找表中產(chǎn)生所述一個或一個 以上幾何映射。
6. 根據(jù)權(quán)利要求1所述的方法，其中所述信息將所述過渡效果識別為漸隱漸顯效果， 且其中模擬所述過渡效果包含使用零值的運動向量來執(zhí)行與所述漸隱漸顯效果相關(guān)聯(lián)的多媒體幀的加權(quán)雙向重建。
7. 根據(jù)權(quán)利要求1所述的方法，其中所述信息將所述過渡效果識別為漸隱效果，且其 中模擬所述過渡效果包含隨機產(chǎn)生所述漸隱效果。
8. 根據(jù)權(quán)利要求l所述的方法，其中所述信息將所述過渡效果識別為其中第二場景呈現(xiàn)于第一場景上的效果，且模擬所述過渡效果包含使用零值的運 動向量根據(jù)其中所述第二場景呈現(xiàn)于所述第一場景上的預(yù)定義的映射來執(zhí)行與所 述過渡效果相關(guān)聯(lián)的多媒體幀的雙向重建。
9. 根據(jù)權(quán)利要求1所述的方法，其中模擬所述過渡效果包含將過渡序列中的至少一個 幀分段為前向預(yù)測部分和后向預(yù)測部分，以及以不同方式對所述前向預(yù)測部分與所 述后向預(yù)測部分進行解碼。
10. 根據(jù)權(quán)利要求1所述的方法，其中模擬所述過渡效果包含根據(jù)所述過渡效果的預(yù)定 義的映射來執(zhí)行與所述過渡效果相關(guān)聯(lián)的多媒體幀的加權(quán)雙向重建。
11. 一種方法，其包含在多媒體序列的編碼期間檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果；以及 產(chǎn)生作為經(jīng)編碼多媒體序列的一部分的信息以識別所述過渡效果。
12. 根據(jù)權(quán)利要求ll所述的方法，其中所述信息包括一類型的過渡效果的識別。
13. 根據(jù)權(quán)利要求11所述的方法，其中所述信息包括一類型的過渡效果和與所述過渡效 果相關(guān)聯(lián)的周期的識別。
14. 根據(jù)權(quán)利要求11所述的方法，其中所述信息包括一類型的過渡效果和與所述過渡效 果相關(guān)聯(lián)的一個或一個以上幾何映射的識別。
15. 根據(jù)權(quán)利要求11所述的方法，其進一步包含將所述信息作為所述經(jīng)編碼多媒體序列 的一部分傳輸?shù)浇獯a器。
16. 根據(jù)權(quán)利要求11所述的方法，其中所述信息包括一類型的過渡效果、與所述過渡效 果相關(guān)聯(lián)的周期以及與所述過渡效果相關(guān)聯(lián)的開始和結(jié)束場景的識別。
17. —種設(shè)備，其包含接收器，其接收作為經(jīng)編碼多媒體序列的一部分的信息，其中所述信息識別與所 述多媒體序列相關(guān)聯(lián)的過渡效果；以及解碼器，其響應(yīng)于所述信息而模擬所述過渡效果。
18. 根據(jù)權(quán)利要求17所述的設(shè)備，其中所述解碼器包括模擬所述過渡效果的過渡效果 解碼模塊，和解碼所述經(jīng)編碼多媒體序列的非過渡部分的標準解碼模塊。
19. 根據(jù)權(quán)利要求17所述的設(shè)備，其中所述信息識別一類型的過渡效果、與所述過渡 效果相關(guān)聯(lián)的周期以及與所述過渡效果相關(guān)聯(lián)的開始和結(jié)束場景，且其中所述解碼 器在所述周期期間模擬所述經(jīng)識別的類型的過渡效果。
20. 根據(jù)權(quán)利要求17所述的設(shè)備，其中所述解碼器產(chǎn)生與所述過渡效果相關(guān)聯(lián)的一個 或一個以上幾何映射，并使用所述一個或一個以上幾何映射來模擬所述過渡效果。
21. 根據(jù)權(quán)利要求20所述的設(shè)備，其中所述解碼器從一個或一個以上查找表中產(chǎn)生所 述一個或一個以上幾何映射。
22. 根據(jù)權(quán)利要求17所述的設(shè)備，其中所述解碼器通過將過渡序列的幀分段為前向預(yù) 測部分和后向預(yù)測部分并以不同方式對所述前向預(yù)測部分與所述后向預(yù)測部分進 行解碼來模擬所述過渡效果。
23. —種設(shè)備，其包含檢測器，其在多媒體序列的編碼期間檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果；以及編碼器，其產(chǎn)生作為經(jīng)編碼視頻序列的一部分的信息以識別所述過渡效果。
24. 根據(jù)權(quán)利要求23所述的設(shè)備，其中所述信息識別一類型的過渡效果、與所述過渡 效果相關(guān)聯(lián)的周期以及與所述過渡效果相關(guān)聯(lián)的開始和結(jié)束場景。
25. 根據(jù)權(quán)利要求23所述的設(shè)備，其中所述編碼器包括第一編碼模塊，其產(chǎn)生用以 識別所述過渡效果的所述信息；和第二編碼模塊，其使用預(yù)測編碼技術(shù)來編碼所述 多媒體序列的非過渡部分。
26. —種包含指令的機器可讀媒體，所述指令一旦執(zhí)行便促使一機器接收作為經(jīng)編碼多媒體序列的一部分的信息，其中所述信息識別與所述多媒體序 列相關(guān)聯(lián)的過渡效果；以及解碼所述經(jīng)編碼多媒體序列，包括響應(yīng)于所述信息而模擬所述過渡效果。
27. 根據(jù)權(quán)利要求26所述的機器可讀媒體，其中所述信息識別一類型的過渡效果、與 所述過渡效果相關(guān)聯(lián)的周期以及與所述過渡效果相關(guān)聯(lián)的開始和結(jié)束場景，且其中 模擬所述過渡效果包括產(chǎn)生一個或一個以上幾何映射。
28. 根據(jù)權(quán)利要求26所述的機器可讀媒體，其中所述指令通過將過渡序列的幀分段為 前向預(yù)測部分和后向預(yù)測部分并以不同方式對所述前向預(yù)測部分與所述后向預(yù)測 部分進行解碼來模擬所述過渡效果。
29. —種包含指令的機器可讀媒體，所述指令一旦執(zhí)行便促使一機器在多媒體序列的編碼期間檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果；以及 產(chǎn)生作為經(jīng)編碼多媒體序列的 一部分的信息以識別所述過渡效果。
30. —種處理器，其經(jīng)配置以接收作為經(jīng)編碼多媒體序列的一部分的信息，其中所述信息識別與所述多媒體序 列相關(guān)聯(lián)的過渡效果；以及解碼所述經(jīng)編碼多媒體序列，包括響應(yīng)于所述信息而模擬所述過渡效果。
31. —種處理器，其經(jīng)配置以在多媒體序列的編碼期間檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果；以及 向解碼器產(chǎn)生作為經(jīng)編碼多媒體序列的一部分的用以識別與所述經(jīng)編碼多媒體序列相關(guān)聯(lián)的所述過渡效果的信息。
32. 根據(jù)權(quán)利要求31所述的處理器，其中所述信息包括一類型的過渡效果、與所述過 渡效果相關(guān)聯(lián)的周期以及與所述過渡效果相關(guān)聯(lián)的開始和結(jié)束場景的識別。
33. 根據(jù)權(quán)利要求31所述的處理器，其中所述信息包括由解碼器用以模擬所述過渡效 果的一個或一個以上幾何映射。
34. —種設(shè)備，其包含.-接收裝置，其用于接收作為經(jīng)編碼多媒體序列的一部分的信息，其中所述信息識 別與所述多媒體序列相關(guān)聯(lián)的過渡效果；以及解碼裝置，其響應(yīng)于識別所述過渡效果的所述信息而模擬多媒體序列中的過渡效 果。
35. 根據(jù)權(quán)利要求34所述的設(shè)備，其中所述解碼裝置包含過渡效果解碼裝置，所述設(shè) 備進一步包含標準解碼裝置，所述標準解碼裝置解碼所述多媒體序列的非過渡部 分。
36. 根據(jù)權(quán)利要求34所述的設(shè)備，其中所述信息識別一類型的過渡效果、與所述過渡 效果相關(guān)聯(lián)的周期以及與所述過渡效果相關(guān)聯(lián)的開始和結(jié)束場景，且其中所述解碼 裝置在所述周期中使用所述信息來模擬所述經(jīng)識別的類型的過渡效果。
37. 根據(jù)權(quán)利要求34所述的設(shè)備，其中所述解碼裝置產(chǎn)生與所述過渡效果相關(guān)聯(lián)的一 個或一個以上幾何映射，并使用所述一個或一個以上幾何映射來模擬所述過渡效 果。
38. 根據(jù)權(quán)利要求34所述的設(shè)備，其中所述解碼裝置通過將過渡序列的幀分段為前向 預(yù)測部分和后向預(yù)測部分并以不同方式對所述前向預(yù)測部分與所述后向預(yù)測部分 進行解碼來模擬所述過渡效果。
39. —種設(shè)備，其包含過渡效果檢測裝置，其用于在多媒體序列的編碼期間檢測與所述多媒體序列相關(guān) 聯(lián)的過渡效果；以及編碼裝置，其產(chǎn)生用以識別與所述多媒體序列相關(guān)聯(lián)的所述過渡效果的信息。
40. 根據(jù)權(quán)利要求39所述的設(shè)備，其中所述信息識別一類型的過渡效果、與所述過渡 效果相關(guān)聯(lián)的周期以及與所述過渡效果相關(guān)聯(lián)的開始和結(jié)束場景。
41. 根據(jù)權(quán)利要求39所述的設(shè)備，其中所述編碼裝置包含過渡效果編碼裝置，所述設(shè) 備進一步包含標準編碼裝置，所述標準編碼裝置使用預(yù)測編碼技術(shù)編碼所述多媒體 序列的非過渡部分。
全文摘要
本發(fā)明針對用于對過渡效果(即，用于從多媒體序列的當前場景進行過渡的視覺視頻效果)進行編碼和解碼的技術(shù)。根據(jù)所揭示的技術(shù)，編碼裝置在多媒體序列的編碼期間檢測與所述多媒體序列相關(guān)聯(lián)的過渡效果，并將作為經(jīng)編碼多媒體序列的一部分的用以識別與所述經(jīng)編碼多媒體序列相關(guān)聯(lián)的所述過渡效果的信息傳輸?shù)浇獯a器。所述信息可包含可由所述解碼器用以模擬或重新建立所述過渡效果的元數(shù)據(jù)(metadata)。所述解碼器響應(yīng)于所述信息而模擬過渡效果。
文檔編號H04N7/08GK101310530SQ200680042909
公開日2008年11月19日 申請日期2006年9月27日 優(yōu)先權(quán)日2005年9月27日
發(fā)明者濤 田, 方 石, 維賈雅拉克希米·R·拉韋恩德拉恩 申請人:高通股份有限公司