專利名稱:圖像編碼裝置、圖像解碼裝置、圖像編碼方法及圖像解碼方法
技術(shù)領(lǐng)域:
本發(fā)明涉及用于對(duì)具有大比特深度的圖像進(jìn)行編碼的圖像編碼裝置以及用于對(duì)具有大比特深度的已編碼圖像進(jìn)行解碼的圖像解碼裝置。
背景技術(shù):
通常,比如顯示設(shè)備、成像設(shè)備、圖像編碼裝置以及圖像解碼裝置之類的圖像處理裝置以像素為單位對(duì)圖像進(jìn)行處理。每個(gè)像素包括三個(gè)獨(dú)特的子像素綠、紅和藍(lán)(RGB)。 顯示設(shè)備通過(guò)控制每個(gè)子像素的亮度來(lái)混合像素的顏色。針對(duì)每個(gè)子像素,改變亮度級(jí)的數(shù)量。這種級(jí)別數(shù)量的變化取決于每個(gè)子像素顏色的比特深度。比特深度表示每像素的信息容量,并且更為具體地表示每子像素的比特?cái)?shù)量。例如,對(duì)于具有8-比特深度的像素的子像素中的每個(gè),該像素能夠?qū)崿F(xiàn)采用256(2的8次冪) 個(gè)亮度級(jí)進(jìn)行的表示。作為另一示例,對(duì)于具有10-比特深度的像素的子像素中的每個(gè),該像素能夠?qū)崿F(xiàn)采用1024(2的10次冪)個(gè)亮度級(jí)進(jìn)行的表示。與具有8比特深度的每個(gè)像素中的所述三個(gè)子像素對(duì)應(yīng)的亮度級(jí)的組合的數(shù)量為256的三次冪(16,777,216)。而與具有10比特深度的每個(gè)像素中的所述三個(gè)子像素對(duì)應(yīng)的亮度級(jí)的組合的數(shù)量為1024的三次冪(1,073,741,824)。相應(yīng)地,使用具有10比特深度的像素可再現(xiàn)的顏色數(shù)量比使用具有8比特深度的像素可再現(xiàn)的顏色數(shù)量高64倍。近來(lái),供專業(yè)使用的顯示設(shè)備可以表示具有12比特深度或16比特深度的圖像。供消費(fèi)者使用的顯示設(shè)備中的部分顯示設(shè)備可以表示具有多于8比特深度的圖像。能夠再現(xiàn)更多顏色數(shù)目的顯示設(shè)備可以提供從一個(gè)顏色到另一顏色的更為平滑的轉(zhuǎn)換,以及對(duì)真實(shí)顏色的更為實(shí)際的表示。換言之,更深的比特深度得到從一個(gè)顏色到另一顏色的更為平滑的轉(zhuǎn)換,以及對(duì)真實(shí)顏色的更為實(shí)際的表示。為此,消費(fèi)者將寧愿使用具有10比特深度的圖像而不使用具有8比特深度的圖像作為要表示的圖像。表示具有更大比特深度的圖像的方法包括在專利文獻(xiàn)(PTL)I中公開(kāi)的方法。利用8比特深度表示的圖像被稱為8比特圖像。同樣,利用10比特深度表示的圖像被稱為10比特圖像。[引用列表][專利文獻(xiàn)][PTL 1]PCT 國(guó)際申請(qǐng)公開(kāi) No. W02008/04927
發(fā)明內(nèi)容
[技術(shù)問(wèn)題]然而,不是所有視頻應(yīng)用都可以處理具有多于8比特深度的圖像。甚至可以實(shí)現(xiàn)最高圖像質(zhì)量的藍(lán)光應(yīng)用也不能處理多于8比特深度的圖像。能夠表示10比特圖像的顯示設(shè)備可以表示被編碼為8比特圖像的原始圖像。在這種情況下,所述顯示設(shè)備不能提供從一個(gè)顏色到另一顏色的更為平滑的轉(zhuǎn)換,以及對(duì)真實(shí)顏色的更為實(shí)際的表示。在這種情況下,即使在所述原始8比特圖像被上變換為10比特圖像時(shí),所述上變換后所得到的圖像不能總是提供對(duì)真實(shí)顏色的更為實(shí)際的表示。為此,期望對(duì)10比特原始圖像進(jìn)行編碼,而不是將原始8比特圖像上變換為10比特圖像。另一方面,當(dāng)10比特圖像被編碼后,用于表示8比特圖像的顯示設(shè)備不能表示所述已編碼的10比特圖像。在PTL 1中公開(kāi)的方法根據(jù)客戶端側(cè)的環(huán)境切換解碼方法。這使得能夠根據(jù)所述客戶端側(cè)的環(huán)境實(shí)現(xiàn)圖像的表示。然而,PTL 1中的所述方法與傳統(tǒng)編碼和解碼方法明顯不同,并且因此難以在實(shí)踐中實(shí)現(xiàn)。鑒于此而提出了本發(fā)明,并且本發(fā)明的目的在于提供一種圖像編碼裝置,該圖像編碼裝置使用對(duì)比特深度實(shí)行限制的編碼器,對(duì)具有大比特深度的圖像進(jìn)行編碼。[解決方案]為了解決上述問(wèn)題,根據(jù)本發(fā)明的圖像編碼裝置意在對(duì)所具有的比特深度大于預(yù)定比特深度(比特深度表示每像素的信息容量)的要被編碼的當(dāng)前圖像進(jìn)行編碼,并且圖像編碼裝置可以包括下變換器,用于將當(dāng)前圖像下變換為所具有的比特深度等于或小于預(yù)定比特深度的基本視像;MVC(多視圖視頻編碼)編碼器,用于對(duì)基本視像進(jìn)行編碼并對(duì)已編碼基本視像進(jìn)行解碼以生成重構(gòu)圖像;以及減法器,用于計(jì)算預(yù)下變換的當(dāng)前圖像的像素值的特性和重構(gòu)圖像的對(duì)應(yīng)像素值的特性之間的差值,并且使用所計(jì)算出的差值,生成所具有的比特深度等于或小于預(yù)定比特深度的非基本視像,其中MVC 編碼器還對(duì)非基本視像進(jìn)行編碼。按照這種方式,可以使用對(duì)每個(gè)圖像的比特深度實(shí)行限制的編碼器,對(duì)具有大比特深度的圖像進(jìn)行編碼。另外,下變換器可以通過(guò)下移當(dāng)前圖像的每個(gè)像素值,將當(dāng)前圖像下變換為基本視像,并且減法器可以上移重構(gòu)圖像的每個(gè)像素值,從而使得重構(gòu)圖像和預(yù)下變換的當(dāng)前圖像具有相同的比特深度,計(jì)算預(yù)下變換的當(dāng)前圖像的各個(gè)像素值和重構(gòu)圖像的對(duì)應(yīng)上移像素值之間的差值,以及使用所計(jì)算出的差值,生成非基本視像。按照這種方式,可以減少要被下變換的當(dāng)前圖像的特性的變化。此外,這使得可以獲得要被下變換的當(dāng)前圖像的特性和重構(gòu)圖像的特性之間的準(zhǔn)確差值。此外,移位操作能夠?qū)崿F(xiàn)高速處理。另外,下變換器可以通過(guò)將當(dāng)前圖像的每個(gè)像素值除以預(yù)定除數(shù)來(lái)將當(dāng)前圖像下變換為基本視像,并且減法器可以將重構(gòu)圖像的每個(gè)像素值乘以預(yù)定乘數(shù),從而使得重構(gòu)圖像和預(yù)下變換的當(dāng)前圖像具有相同的比特深度,計(jì)算預(yù)下變換的當(dāng)前圖像的各個(gè)像素值和重構(gòu)圖像的對(duì)應(yīng)相乘后的像素值之間的差值,以及使用所計(jì)算出的差值,生成非基本視像。
按照這種方式,可以減少要被下變換的當(dāng)前圖像的特性的變化。此外,這使得可以獲得要被下變換的當(dāng)前圖像的特性和重構(gòu)圖像的特性之間的準(zhǔn)確差值。另外,減法器可以通過(guò)將用于使得非基本視像的像素值中的對(duì)應(yīng)的像素值變?yōu)檎档念A(yù)定值與差值中的每個(gè)差值相加,以生成非基本視像。按照這種方式,根據(jù)要被下變換的當(dāng)前圖像的特性和重構(gòu)圖像的特性之間的差值得到的像素值被調(diào)整為準(zhǔn)確的像素值。另外,減法器可以通過(guò)將由非基本視像的比特深度表示的最大像素值的一半舍入(round)到整數(shù)而獲得的值與差值中的每個(gè)差值相加,生成非基本視像。按照這種方式,根據(jù)差值得到的像素值被調(diào)整為是當(dāng)不包括量化失真時(shí)像素值的可能范圍的中間值。相應(yīng)地,即使在包括量化失真時(shí),根據(jù)所述差值得到的像素值也被調(diào)整為落在所述像素值的可能范圍內(nèi)。另外,MVC編碼器可以通過(guò)對(duì)基本視像執(zhí)行運(yùn)動(dòng)估計(jì)來(lái)獲得運(yùn)動(dòng)矢量,通過(guò)使用所獲得的運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)基本視像進(jìn)行編碼,以及通過(guò)使用用于對(duì)基本視像進(jìn)行編碼的運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)非基本視像進(jìn)行編碼。這使得可以減少在運(yùn)動(dòng)估計(jì)時(shí)涉及的不必要的處理。由此,處理速度增加。另外,MVC編碼器可以通過(guò)對(duì)基本視像執(zhí)行運(yùn)動(dòng)估計(jì)來(lái)獲得第一運(yùn)動(dòng)矢量, 通過(guò)使用所獲得的第一運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)基本視像進(jìn)行編碼,以及通過(guò)在水平方向和垂直方向上與用于編碼基本視像的第一運(yùn)動(dòng)矢量的整數(shù)部分示出的整數(shù)像素位置共同位于的整數(shù)像素位置相距1個(gè)像素的范圍內(nèi),對(duì)非基本視像執(zhí)行運(yùn)動(dòng)估計(jì)獲得第二運(yùn)動(dòng)矢量,并且通過(guò)使用所獲得的第二運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)非基本視像進(jìn)行編碼。這使得可以減少要被處理的信息量。此外,限制運(yùn)動(dòng)估計(jì)范圍可減少不必要的處理。由此,處理速度增加。此外,受限范圍內(nèi)的運(yùn)動(dòng)估計(jì)減小了運(yùn)動(dòng)預(yù)測(cè)準(zhǔn)確性的降低。另外,MVC編碼器可以通過(guò)對(duì)基本視像中的運(yùn)動(dòng)估計(jì)范圍執(zhí)行運(yùn)動(dòng)估計(jì)來(lái)獲得第一運(yùn)動(dòng)矢量,通過(guò)使用所獲得的第一運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)基本視像進(jìn)行編碼,量化所獲得的第一運(yùn)動(dòng)矢量,以及逆量化已量化的第一運(yùn)動(dòng)矢量;并且可以通過(guò)在包括由逆量化的第一運(yùn)動(dòng)矢量示出的像素位置且小于基本視像中的運(yùn)動(dòng)估計(jì)范圍的范圍內(nèi)對(duì)非基本視像執(zhí)行運(yùn)動(dòng)估計(jì),獲得第二運(yùn)動(dòng)矢量,并且通過(guò)使用所獲得的第二運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)非基本視像進(jìn)行編碼。這減少了要處理的信息量,從而減少不必要的處理。此外,這使得可以根據(jù)量化級(jí)別和運(yùn)動(dòng)估計(jì)范圍調(diào)整運(yùn)動(dòng)預(yù)測(cè)準(zhǔn)確性和處理速度。另外,MVC編碼器可以通過(guò)使用被假設(shè)為用于視圖間預(yù)測(cè)的位移矢量的幅度為0 的視圖間預(yù)測(cè),對(duì)非基本視像進(jìn)行編碼。這使得可以減少在位移估計(jì)時(shí)涉及的不必要的處理。由此,處理速度增加。另外,MVC編碼器可以通過(guò)在水平方向和垂直方向上的1個(gè)像素的范圍內(nèi)執(zhí)行位移估計(jì),獲得要用于視圖間預(yù)測(cè)的位移矢量,以及通過(guò)使用視圖間預(yù)測(cè)對(duì)非基本視像進(jìn)行編碼。按照這種方式限制位移估計(jì)范圍可減少不必要的處理。由此,處理速度增加。此外,受限范圍內(nèi)的位移估計(jì)減少了視圖間預(yù)測(cè)準(zhǔn)確性的降低。
此外,根據(jù)本發(fā)明的圖像解碼裝置可以意在對(duì)在比特流中包括的且所具有的比特深度大于預(yù)定比特深度(所述比特深度表示每像素的信息容量)的要被解碼的當(dāng)前圖像進(jìn)行解碼,并且圖像解碼裝置可以包括MVC(多視圖視頻編碼)解碼器,用于對(duì)所具有的比特深度等于或小于預(yù)定比特深度的基本視像以及所具有的比特深度等于或小于預(yù)定比特深度的非基本視像進(jìn)行解碼,所述基本視像和所述非基本視像包括在所述比特流中;以及加法器,用于將基本視像的每個(gè)像素值和非基本視像的像素值中的對(duì)應(yīng)像素值合成為所具有的比特深度大于預(yù)定比特深度的當(dāng)前圖像。這使得可以使用對(duì)圖像中的每個(gè)圖像的比特深度實(shí)行限制的解碼器,對(duì)具有大比特深度的圖像進(jìn)行解碼。另外,加法器可以通過(guò)上移基本視像的每個(gè)像素值從而使得基本視像和當(dāng)前圖像具有相同的比特深度、并且將非基本視像的像素值中的每個(gè)與基本視像的上移像素值中的對(duì)應(yīng)像素值相加,生成當(dāng)前圖像。按照這種方式,兩個(gè)圖像被合適地合成為具有大比特深度的想要的圖像。此外,移位操作能夠?qū)崿F(xiàn)高速處理。另外,加法器可以通過(guò)將基本視像的每個(gè)像素值與預(yù)定乘數(shù)相乘從而使得基本視像和當(dāng)前圖像具有相同的比特深度、并且將非基本視像的像素值中的每個(gè)與基本視像的相乘后的像素值中的對(duì)應(yīng)像素值相加,生成當(dāng)前圖像。按照這種方式,兩個(gè)圖像被合適地合成為具有大比特深度的想要的圖像。另外,加法器可以通過(guò)從通過(guò)將非基本視像的像素值與基本視像的對(duì)應(yīng)相乘后的像素值相加而獲得的值中的每個(gè)中減去在編碼時(shí)相加的預(yù)定值,生成當(dāng)前圖像。減去由編碼裝置側(cè)相加的預(yù)定值以調(diào)整像素值,可維持編碼裝置側(cè)和解碼裝置側(cè)之間的一致性。另外,加法器可以通過(guò)從通過(guò)將非基本視像的像素值與基本視像的對(duì)應(yīng)相乘后的像素值相加而獲得的值中的每個(gè)中、減去通過(guò)將由非基本視像的比特深度表示的最大像素值的一半舍入到整數(shù)而獲得的值,生成當(dāng)前圖像。減去由編碼裝置側(cè)相加的值以調(diào)整量化失真,可維持編碼裝置側(cè)和解碼裝置側(cè)之間的一致性。另外,加法器可以通過(guò)調(diào)整通過(guò)將最大像素值的一半減去預(yù)定最小值而獲得的值中比預(yù)定最小值小的值、并且調(diào)整通過(guò)將最大像素值的一半減去預(yù)定最大值而獲得的值中比預(yù)定最大值大的值,生成當(dāng)前圖像。按照這種方式,所生成的像素值被調(diào)整為可能范圍內(nèi)的像素值。由此,防止出現(xiàn)致命的錯(cuò)誤。此外,根據(jù)本發(fā)明的圖像編碼方法可以意在對(duì)所具有的比特深度大于預(yù)定比特深度(比特深度表示每像素的信息容量)的要被編碼的當(dāng)前圖像進(jìn)行編碼,并且圖像編碼方法可以包括將當(dāng)前圖像下變換為所具有的比特深度等于或小于預(yù)定比特深度的基本視像;使用MVC(多視圖視頻編碼)編碼器,對(duì)基本視像進(jìn)行編碼并對(duì)已編碼基本視像進(jìn)行解碼以生成重構(gòu)圖像;以及計(jì)算預(yù)下變換的當(dāng)前圖像的像素值的特性和重構(gòu)圖像的對(duì)應(yīng)像素值的特性之間的差值,并使用所計(jì)算出的差值,生成所具有的比特深度等于或小于預(yù)定比特深度的非基本視像;并且使用MVC編碼器對(duì)非基本視像進(jìn)行編碼。
按照這種方式,根據(jù)本發(fā)明的圖像編碼裝置被實(shí)現(xiàn)為圖像編碼方法。此外,根據(jù)本發(fā)明的圖像解碼方法意在對(duì)在比特流中包括的、且所具有的比特深度大于預(yù)定比特深度(所述比特深度表示每像素的信息容量)的要被解碼的當(dāng)前圖像進(jìn)行解碼,并且圖像解碼方法可以包括使用MVC(多視圖視頻編碼)解碼器,對(duì)所具有的比特深度等于或小于預(yù)定比特深度的基本視像、以及所具有的比特深度等于或小于預(yù)定比特深度的非基本視像進(jìn)行解碼,所述基本視像和所述非基本視像包括在所述比特流中;以及將所述基本視像的每個(gè)像素值和所述非基本視像的像素值中的對(duì)應(yīng)像素值合成為所具有的比特深度大于所述預(yù)定比特深度的當(dāng)前圖像。按照這種方式,根據(jù)本發(fā)明的圖像解碼裝置被實(shí)現(xiàn)為圖像解碼方法。此外,根據(jù)本發(fā)明的集成電路可以意在對(duì)所具有的比特深度大于預(yù)定比特深度 (所述比特深度表示每像素的信息容量)的要被編碼的當(dāng)前圖像進(jìn)行編碼,并且所述集成電路可以包括下變換器,用于將當(dāng)前圖像下變換為所具有的比特深度等于或小于預(yù)定比特深度的基本視像;MVC(多視圖視頻編碼)編碼器,用于對(duì)基本視像進(jìn)行編碼并對(duì)已編碼基本視像進(jìn)行解碼以生成重構(gòu)圖像;以及減法器,用于計(jì)算預(yù)下變換的當(dāng)前圖像的像素值的特性和重構(gòu)圖像的對(duì)應(yīng)像素值的特性之間的差值,并且使用所計(jì)算出的差值,生成所具有的比特深度等于或小于預(yù)定比特深度的非基本視像,其中MVC編碼器還對(duì)非基本視像進(jìn)行編碼。按照這種方式,根據(jù)本發(fā)明的圖像編碼裝置被實(shí)現(xiàn)為集成電路。此外,根據(jù)本發(fā)明的集成電路可以意在對(duì)在比特流中包括的且所具有的比特深度大于預(yù)定比特深度(所述比特深度表示每像素的信息容量)的要被解碼的當(dāng)前圖像進(jìn)行解碼,并且所述集成電路可以包括MVC(多視圖視頻編碼)解碼器,用于對(duì)所具有的比特深度等于或小于預(yù)定比特深度的基本視像、以及所具有的比特深度等于或小于預(yù)定比特深度的非基本視像進(jìn)行解碼,基本視像和非基本視像包括在比特流中;以及加法器,用于將基本視像的每個(gè)像素值和非基本視像的像素值中的對(duì)應(yīng)像素值合成為所具有的比特深度大于預(yù)定比特深度的當(dāng)前圖像。按照這種方式,根據(jù)本發(fā)明的圖像解碼裝置被實(shí)現(xiàn)為集成電路。此外,根據(jù)本發(fā)明的記錄介質(zhì)可以是非易失性計(jì)算機(jī)可讀記錄介質(zhì),所述非易失性計(jì)算機(jī)可讀介質(zhì)上記錄用于使得計(jì)算機(jī)對(duì)所具有的比特深度大于預(yù)定比特深度(所述比特深度表示每像素的信息容量)的要被編碼的當(dāng)前圖像進(jìn)行編碼的計(jì)算機(jī)程序。所述編碼包括將當(dāng)前圖像下變換為所具有的比特深度等于或小于預(yù)定比特深度的基本視像;使用MVC(多視圖視頻編碼)編碼器,對(duì)基本視像進(jìn)行編碼并對(duì)已編碼基本視像進(jìn)行解碼以生成重構(gòu)圖像;以及計(jì)算預(yù)下變換的當(dāng)前圖像的像素值的特性和重構(gòu)圖像的對(duì)應(yīng)像素值的特性之間的差值,并使用所計(jì)算出的差值,生成所具有的比特深度等于或小于預(yù)定比特深度的非基本視像;并且使用MVC編碼器對(duì)非基本視像進(jìn)行編碼。按照這種方式,根據(jù)本發(fā)明的圖像編碼方法被實(shí)現(xiàn)為記錄有使得計(jì)算機(jī)執(zhí)行圖像編碼方法的程序的記錄介質(zhì)。此外,根據(jù)本發(fā)明的記錄介質(zhì)可以是非易失性計(jì)算機(jī)可讀記錄介質(zhì),所述非易失性計(jì)算機(jī)可讀介質(zhì)上記錄用于使得計(jì)算機(jī)對(duì)在比特流中包括的且所具有的比特深度大于預(yù)定比特深度(所述比特深度表示每像素的信息容量)的要被解碼的當(dāng)前圖像進(jìn)行解碼的計(jì)算機(jī)程序。所述解碼包括使用MVC(多視圖視頻編碼)解碼器,對(duì)所具有的比特深度等于或小于預(yù)定比特深度的基本視像、以及所具有的比特深度等于或小于預(yù)定比特深度的非基本視像進(jìn)行解碼,基本視像和非基本視像包括在比特流中;以及將基本視像的每個(gè)像素值和非基本視像的像素值中的對(duì)應(yīng)像素值合成為所具有的比特深度大于預(yù)定比特深度的當(dāng)前圖像。按照這種方式,根據(jù)本發(fā)明的圖像解碼方法被實(shí)現(xiàn)為記錄有使得計(jì)算機(jī)執(zhí)行圖像解碼方法的程序的記錄介質(zhì)。[本發(fā)明的有益效果]根據(jù)本發(fā)明,可以使用對(duì)圖像中的每個(gè)的比特深度實(shí)行限制的編碼器對(duì)具有大比特深度的圖像進(jìn)行編碼。
根據(jù)下面結(jié)合例示本發(fā)明的具體實(shí)施例的附圖進(jìn)行的描述,本發(fā)明的這些和其他目的、優(yōu)點(diǎn)和特征將變得顯而易見(jiàn)。在附圖中圖1是根據(jù)第一實(shí)施例的MVC編碼器的結(jié)構(gòu)圖2是根據(jù)第一實(shí)施例的MVC解碼器的結(jié)構(gòu)圖3是根據(jù)第一實(shí)施例的圖像編碼裝置的結(jié)構(gòu)圖4是根據(jù)第一實(shí)施例的圖像編碼裝置的詳細(xì)結(jié)構(gòu)圖5是根據(jù)第一實(shí)施例的圖像解碼裝置的結(jié)構(gòu)圖6是根據(jù)第一實(shí)施例的圖像解碼裝置的詳細(xì)結(jié)構(gòu)圖7是示出由根據(jù)第一實(shí)施例的圖像編碼裝置執(zhí)行的處理的流程圖8是示出由根據(jù)第一實(shí)施例的圖像解碼裝置執(zhí)行的處理的流程圖9是根據(jù)第二實(shí)施例的圖像編碼裝置的結(jié)構(gòu)圖10是根據(jù)第二實(shí)施例的圖像解碼裝置的結(jié)構(gòu)圖11是根據(jù)第三實(shí)施例的圖像編碼裝置的結(jié)構(gòu)圖12是根據(jù)第三實(shí)施例的MVC編碼器的結(jié)構(gòu)圖13示意性地示出了用于實(shí)現(xiàn)內(nèi)容分發(fā)服務(wù)的內(nèi)容提供系統(tǒng)的整體配置;
圖14示出了蜂窩電話的外部視圖15是示出蜂窩電話的配置的示例的方框圖16示意性地示出了數(shù)字廣播系統(tǒng)的整體配置的示例;
圖17是示出電視的配置的示例的方框圖18是示出用于從作為光盤的記錄介質(zhì)讀取信息以及將信息寫入該記錄介質(zhì)的信息再現(xiàn)和記錄單元的配置的示例的方框圖19示出了作為光盤的記錄介質(zhì)的配置的示例;和
圖20是示出用于實(shí)現(xiàn)根據(jù)每個(gè)實(shí)施例的圖像編碼方法和圖像解碼方法的集成電
路的配置的示例的方框圖。
具體實(shí)施方式
(第一實(shí)施例)
11
在多視圖視頻編碼(MVC)技術(shù)中,第一類型的視圖被作為基本視圖進(jìn)行編碼。這里,基本視圖也稱為第一視圖。第二類型的視圖被作為非基本視圖進(jìn)行編碼。非基本視圖也稱為依賴視圖(cbpendent view)或第二視圖。已編碼基本視圖的比特流可以被獨(dú)立地解碼。例如,基本視圖用于表示3D視頻的 2D版本。另一方面,已編碼非基本視圖的比特流不能被獨(dú)立地解碼。非基本視圖需要與對(duì)應(yīng)的基本視圖一起解碼。非基本視圖用于增強(qiáng)基本視圖。使用基本視圖和非基本視圖兩者來(lái)得到3D效果。 例如,與左眼視頻對(duì)應(yīng)的基本視圖和與右眼視頻對(duì)應(yīng)的非基本視圖的組合表示立體視頻。圖1是根據(jù)第一實(shí)施例的MVC編碼器的結(jié)構(gòu)圖。MVC編碼器意在基于多視圖視頻編碼方法來(lái)編碼多視圖視頻。圖1中示出的MVC編碼器101包括第一編碼器111、第二編碼器112以及復(fù)用器113。第一編碼器111接收作為與基本視圖對(duì)應(yīng)的圖像的基本視像D11。第一編碼器111對(duì)基本視像Dll進(jìn)行編碼,以生成包括已編碼基本視像Dll的基本視圖比特流D14。此外,第一編碼器111對(duì)已編碼基本視像Dll進(jìn)行解碼,以生成重構(gòu)圖像 D13。重構(gòu)圖像D13用于視圖間預(yù)測(cè)。第二編碼器112接收作為與非基本視圖對(duì)應(yīng)的圖像的非基本視像D12。第二編碼器112對(duì)非基本視像D12進(jìn)行編碼,以生成包括已編碼非基本視像D12的非基本視圖比特流D15。此時(shí),第二編碼器112可以使用視圖間預(yù)測(cè),參照重構(gòu)圖像D13來(lái)編碼非基本視像D12。這增加了編碼效率。復(fù)用器113將基本視圖比特流D14和非基本視圖比特流D15疊力卩,以生成MVC比特流D16。典型地,復(fù)用器113生成MVC比特流D16,從而使得表示基本視圖的部分和表示非基本視圖的部分交替出現(xiàn)。按照這種方式,MVC編碼器101接收基本視像Dll以及非基本視像D12, 并且對(duì)它們進(jìn)行編碼以生成MVC比特流D16。例如,MVC編碼器101對(duì)3D圖像中的作為左眼圖像的基本視像Dll以及作為右眼圖像的非基本視像D12進(jìn)行編碼,并且由此能夠輸出已編碼3D圖像作為MVC比特流D16。圖1中示出的MVC編碼器101是一個(gè)示例。MVC編碼器101可以包括三個(gè)或更多的編碼器,并且對(duì)三個(gè)或更多的視圖進(jìn)行編碼?;蛘?,MVC編碼器101中包括的單個(gè)編碼器可以編碼多個(gè)視圖?;蛘?,MVC編碼器101可以分別輸出基本視圖比特流D14和非基本視圖比特流D15,而無(wú)需將它們疊加。在這種情況下,MVC編碼器101可以不包括任何復(fù)用器 113。圖2是根據(jù)第一實(shí)施例的MVC解碼器的結(jié)構(gòu)圖。MVC解碼器意在對(duì)基于多視圖視頻編碼方法編碼的多視圖視頻進(jìn)行解碼。圖2中示出的MVC解碼器201包括第一解碼器 211、第二解碼器212以及復(fù)用器213。第一解碼器211接收基本視圖比特流D21。第一解碼器211可以從圖1中示出的 MVC比特流D16中讀取基本視圖的部分,作為基本視圖比特流D21。第一解碼器211對(duì)基本視圖比特流D21中的基本視像D23進(jìn)行解碼。第二解碼器212接收非基本視圖比特流D22。第二解碼器212可以從圖1中示出的MVC比特流D16中讀取非基本視圖的部分,作為非基本視圖比特流D22。第二解碼器212
12對(duì)非基本視圖比特流D22中的非基本視像D24進(jìn)行解碼。此時(shí),第二解碼器212可以使用視圖間預(yù)測(cè),參照基本視像D23來(lái)對(duì)非基本視像D24進(jìn)行解碼。復(fù)用器213將基本視像D23和非基本視像D24疊加,以生成圖像序列 D25。典型地,復(fù)用器113生成圖像序列D25,從而使得表示基本視圖的部分和表示非基本視圖的部分交替出現(xiàn)。按照這種方式,MVC解碼器201接收基本視圖比特流D21和非基本視圖比特流 D22,并且對(duì)基本視像D23和非基本視像D2進(jìn)行解碼以生成圖像序列D25。例如,MVC解碼器201對(duì)作為基本視圖比特流D21中的與左眼對(duì)應(yīng)的左眼圖像的基本視像D23、以及作為非基本視圖比特流D22中的與右眼對(duì)應(yīng)的右眼圖像的非基本視像D24進(jìn)行解碼。MVC解碼器201可以輸出通過(guò)組合基本視圖比特流D21和非基本視圖比特流D22生成的圖像序列D25,作為3D圖像。如同圖1中示出的MVC編碼器101,圖2中示出的MVC解碼器201是一個(gè)示例。MVC 解碼器201可以包括三個(gè)或更多的解碼器,并且解碼三個(gè)或更多的視圖。或者,MVC解碼器 201中包括的單個(gè)解碼器可以解碼多個(gè)視圖?;蛘?,MVC解碼器201可以單獨(dú)地輸出基本視像D23和非基本視像D24,而無(wú)需將它們疊加。在這種情況下,MVC解碼器201可以不包括任何復(fù)用器213?;蛘?,MVC解碼器201可以包括解復(fù)用器,用于將圖1中示出的MVC比特流D16解復(fù)用為表示基本視圖的部分以及表示非基本視圖的部分。圖1中示出的MVC編碼器101和圖2中示出的MVC解碼器201分別是典型的MVC 編碼器和典型的MVC解碼器。相應(yīng)地,所述MVC編碼器101和所述MVC解碼器201不能分別編碼和解碼具有多于8比特深度的圖像。為此,根據(jù)第一實(shí)施例的圖像編碼裝置和圖像解碼裝置中的每個(gè)包括附加結(jié)構(gòu)元件。圖3是包括圖1中示出的MVC編碼器101的圖像編碼裝置的結(jié)構(gòu)圖。圖3中示出的圖像編碼裝置包括MVC編碼器101、下變換器102以及減法器103。下變換器102將要被編碼的當(dāng)前10比特圖像D31下變換為8比特基本層圖像D32。MVC編碼器101將基本層圖像D32作為基本視像進(jìn)行編碼。此外,MVC編碼器 101對(duì)已編碼基本層圖像D32進(jìn)行解碼,以生成8比特重構(gòu)圖像D33。減法器103通過(guò)使用10比特圖像D31的特性和重構(gòu)圖像D33的特性之間的差值, 生成用于將基本層圖像D32放大(up-scaling)到10比特圖像的增強(qiáng)層圖像D34。這里所使用的每個(gè)圖像的特性例如是指示它的像素值的幅度的信息。MVC編碼器101將增強(qiáng)層圖像D34作為非基本視像進(jìn)行編碼。接著,MVC編碼器101以MVC比特流D35的形式輸出已編碼基本層圖像D32以及已編碼增強(qiáng)層圖像D34。圖4是具體示出圖3中示出的圖像編碼裝置的示圖。參照?qǐng)D4,在下面詳細(xì)地描述根據(jù)第一實(shí)施例的圖像編碼裝置。下變換器102將10比特圖像D31下變換為8比特基本層圖像D32。更為具體地, 根據(jù)表達(dá)式1示出的操作,下變換器102對(duì)10比特圖像D31進(jìn)行下變換。B(x, y) = (S(x, y)+2) >> 2 (表達(dá)式 1)其中,(x,y)表示像素位置。B(x,y)表示基本層圖像D32的像素值。S(x,y)表示 10比特圖像D31的像素值。符號(hào)“>>”表示比特右移操作。
首先,下變換器102將2與10比特圖像D31的每個(gè)像素值相加。接著,下變換器 102將每個(gè)像素值右移2比特。按照這種方式,每個(gè)像素值的最不重要的2比特被舍掉,以生成8比特基本層圖像D32。MVC編碼器101的第一編碼器111將基本層圖像D32作為基本視像進(jìn)行編碼, 以生成基本層比特流D36。此外,第一編碼器11對(duì)已編碼基本層圖像D32進(jìn)行解碼,以生成重構(gòu)圖像D33。減法器103使用10比特圖像D31和重構(gòu)圖像D33之間的差值,生成增強(qiáng)層圖像 D34。更為具體地,減法器103根據(jù)表達(dá)式2所示出的操作,計(jì)算10比特圖像D31和重構(gòu)圖像D3之間的差值。E(X,y) = S(X,y)-(Br (X,y) << 2) +128 (表達(dá)式 2)其中,(x,y)表示像素位置,E(x,y)表示增強(qiáng)層圖像D34的像素值。S(x,y)表示 10比特圖像D31的像素值。Br(x,y)表示重構(gòu)圖像D33的像素值。符號(hào)“<<”表示比特左移操作。首先,減法器103將重構(gòu)圖像D33的每個(gè)像素值左移2比特。按照這種方式,重構(gòu)圖像D33被變換為具有10比特深度的圖像。接著,減法器103從10比特圖像D31的像素值中的對(duì)應(yīng)像素值中減去每個(gè)左移像素值。然后,減法器103將128與每個(gè)減法結(jié)果相加。這里,減法器103將128與每個(gè)減法結(jié)果相加,但是取代128,減法器103可以相加通過(guò)將由增強(qiáng)層圖像D34的比特深度表示的最大像素值的一半舍入為整數(shù)而獲得的值。或者,減法器可以將用于使得增強(qiáng)層圖像D34的每個(gè)像素值變?yōu)檎档娜魏纹渌蹬c每個(gè)減法結(jié)果相加。除此之外,減法器103可以在8比特圖像的范圍
內(nèi)裁剪每個(gè)E(x,y)。更為具體地,減法器103可以將每個(gè)比0小的像素值變換為0,并且可以將每個(gè)比255大的像素值變換為255。在包括量化失真的示例重構(gòu)圖像D33的情況下,基于8比特圖像的像素值的范圍W,255],量化失真被假設(shè)為最大在[_32,31]的范圍內(nèi)。即使在由于比特左移操作而使量化失真成為四倍時(shí),量化失真也落在[-128,127]的范圍內(nèi)。因此,由S(x,y)-(Br(x, y) << 2示出的像素值的范圍在[_128,127]的范圍內(nèi)。相應(yīng)地,即使在減法器103將128與每個(gè)上述差值相加并且隨后針對(duì)8比特圖像的每個(gè)像素值在范圍W,255]內(nèi)裁剪E(x,y)時(shí),由此僅僅影響錯(cuò)誤值。因此,減法器103 可以通過(guò)針對(duì)8比特圖像的每個(gè)像素值在范圍W,255]內(nèi)裁剪E (x,y),去除或掩蔽僅僅致命錯(cuò)誤。MVC編碼器101的第二編碼器112將減法器103所生成的增強(qiáng)層圖像D34作為非基本視像進(jìn)行編碼。按照這種方式,第二編碼器112生成增強(qiáng)層比特流D37。此時(shí),第二編碼器112可以使用視圖間預(yù)測(cè),參照重構(gòu)圖像D33來(lái)對(duì)增強(qiáng)層圖像D34進(jìn)行編碼。這里,重構(gòu)圖像D33較小可能與增強(qiáng)層圖像D34具有關(guān)聯(lián)性。然而,視圖間預(yù)測(cè)的使用不受限制。第二編碼器112可以使用視圖間預(yù)測(cè)來(lái)對(duì)增強(qiáng)層圖像D34進(jìn)行編碼。同時(shí),MVC編碼器101的復(fù)用器113將基本層比特流D36和增強(qiáng)層比特流D37疊力口,以生成MVC比特流D35。圖5是包括圖2中示出的MVC解碼器201的圖像解碼裝置的結(jié)構(gòu)圖。圖5中示出的圖像解碼裝置包括MVC解碼器201以及加法器202。MVC解碼器201對(duì)基本層比特流D51中的基本層圖像進(jìn)行解碼。此外,MVC解碼器 201對(duì)增強(qiáng)層比特流D52中的增強(qiáng)層圖像進(jìn)行解碼。由此,MVC解碼器201生成圖像序列 D53。加法器202對(duì)圖像序列D53中包括的基本層圖像D54和圖像序列D53中包括的增強(qiáng)層圖像D55進(jìn)行合成,以生成要被解碼的當(dāng)前10比特圖像D56。圖6是具體示出圖5中示出的圖像解碼裝置的示圖。參照?qǐng)D6,如下詳細(xì)描述根據(jù)第一實(shí)施例的圖像解碼裝置。MVC解碼器201的第一解碼器211對(duì)基本層比特流D51中的基本層圖像D54進(jìn)行解碼。此外,MVC解碼器201的第二解碼器212對(duì)增強(qiáng)層比特流D52中的增強(qiáng)層圖像D55 進(jìn)行解碼。此時(shí),第二解碼器212可以使用視圖間預(yù)測(cè),參照基本層圖像D54來(lái)對(duì)增強(qiáng)層圖像D55進(jìn)行解碼。MVC解碼器201的復(fù)用器213使用基本層圖像D54和增強(qiáng)層圖像D55,生成圖像序列 D53。加法器202對(duì)圖像序列D53中包括的基本層圖像D54和圖像序列D53中包括的增強(qiáng)層圖像D55進(jìn)行合成,以生成10比特圖像D56。更為具體地,加法器201根據(jù)表達(dá)式3所示出的操作,對(duì)基本層圖像D54和增強(qiáng)層圖像D55進(jìn)行合成。V (x, y) = (Br (χ, y) < < 2) + (Ε (x,y)-128)(表達(dá)式 3)其中,(x,y)表示像素位置。V(x,y)表示10比特圖像D56的像素值。Br(x,y)表示基本層圖像D54的像素值。E(x,y)表示增強(qiáng)層圖像D55的像素值。符號(hào)“<<”表示比特左移操作。首先,加法器202將基本層圖像D54的每個(gè)像素值左移2比特。按照這種方式,基本層圖像D54被變換為具有10比特深度的圖像。接著,加法器202從增強(qiáng)層圖像D55的每個(gè)像素值中減去128。接著,加法器202將增強(qiáng)層圖像D55中無(wú)所減去的128后的每個(gè)像素值與10比特基本層圖像D54中像素值中的對(duì)應(yīng)一個(gè)像素值相加。這里,加法器202從每個(gè)像素值中減去128,但是取代128,加法器202可以減去通過(guò)將由增強(qiáng)層圖像D55的比特深度表示的最大像素值的一半舍入為整數(shù)而獲得的值?;蛘?,加法器202可以從每個(gè)像素值中減去在編碼時(shí)相加的值。接著,加法器202針對(duì)10比特圖像的每個(gè)像素值,在可能的范圍內(nèi)裁減V(x,y)。 例如,加法器202根據(jù)表達(dá)式4和5示出的操作裁減V(X,y)。V (x, y) = V (χ, y) > maxVIO ? maxVIO :V(x, y)(表達(dá)式 4)V (χ, y) = V (χ, y) < minVIO ? minVIO :V(x, y)(表達(dá)式 5)其中,各個(gè)maxVIO和minVIO是10比特圖像的像素值的可能最大值和可能最小值。典型地,maxVIO是1023,以及minVIO是O。然而,任何其他值可以被設(shè)置為maxVIO和 /^minVIO。加法器202通過(guò)執(zhí)行上述處理來(lái)生產(chǎn)10比特圖像D56。圖7是由圖3中的圖像編碼裝置執(zhí)行的處理的流程圖。首先,下變換器102將10比特圖像D31下變換為8比特基本層圖像D32 (SlOl)。
接著,MVC編碼器101將基本層圖像D32作為基本視像進(jìn)行編碼(S102)。此外,MVC編碼器101對(duì)已編碼基本層圖像D32進(jìn)行解碼,以生成重構(gòu)圖像D33。接著,減法器103使用10比特圖像D31和重構(gòu)圖像D33之間的差值,生成增強(qiáng)層圖像 D34(S103)。接著,MVC編碼器101將增強(qiáng)層圖像D34作為非基本視像進(jìn)行編碼(S104)。 接著,MVC編碼器101以MVC比特流D35的形式輸出已編碼基本層圖像D32以及增強(qiáng)層圖像 D34。圖8是示出由圖5中示出的圖像解碼裝置執(zhí)行的處理的流程圖。首先,MVC解碼器201對(duì)基本層比特流D51中的基本層圖像進(jìn)行解碼(S201)。接著,MVC解碼器201對(duì)增強(qiáng)層比特流D52中的增強(qiáng)層圖像進(jìn)行解碼(S202)。由此,MVC解碼器201生成圖像序列D53。接著,加法器202將圖像序列D53中包括的基本層圖像D54和圖像序列D53中包括的增強(qiáng)層圖像D55相加,以生成10比特圖像D56 (S203)。按照這種方式,根據(jù)第一實(shí)施例的圖像編碼裝置通過(guò)下變換10比特圖像來(lái)生成8 比特圖像。圖像編碼裝置將8比特圖像作為基本視像進(jìn)行編碼。此外,圖像編碼裝置將10比特圖像和8比特圖像之間的差值作為8比特非基本視像進(jìn)行編碼。按照這種方式,在所述編碼中,10比特圖像被分為8比特基本視像和8比特非基本視像。根據(jù)第一實(shí)施例的圖像編碼裝置使用已編碼基本視像的重構(gòu)圖像來(lái)計(jì)算10 比特圖像和8比特圖像之間的差值。按照這種方式,當(dāng)對(duì)10比特圖像進(jìn)行編碼時(shí),圖像編碼裝置可以吸收在編碼8比特圖像時(shí)造成的量化失真。同時(shí),根據(jù)第一實(shí)施例的圖像解碼裝置對(duì)8比特基本視像和8比特非基本視像進(jìn)行解碼。圖像解碼裝置通過(guò)合成已解碼基本視像和非基本視像,生成10 比特圖像。此外,根據(jù)第一實(shí)施例的圖像解碼裝置還可以通過(guò)僅僅解碼基本視像來(lái)生成 8比特圖像。這維持了與可以表示具有8比特或更少比特的圖像的顯示設(shè)備之間的兼容性。這里,第一實(shí)施例中的MVC編碼器101和MVC解碼器201不必具有獨(dú)立地對(duì)10比特圖像進(jìn)行獨(dú)立編碼和解碼的能力。即使在MVC編碼器101和MVC解碼器201不具有這種能力時(shí),根據(jù)第一實(shí)施例的圖像編碼裝置和圖像解碼裝置可以分別編碼和解碼10比特圖像。相應(yīng)地,可以減少開(kāi)發(fā)用于處理具有更大比特深度的圖像的圖像編碼裝置和圖像解碼裝置的成本和時(shí)間。理所當(dāng)然地,第一實(shí)施例中的MVC編碼器101和MVC解碼器201可以用于分別編碼和解碼3D圖像。在第一實(shí)施例中,8比特圖像和10比特圖像被作為示例示出。然而,比特深度不限于8比特和10比特。即使在除了 8比特深度和10比特深度的組合之外的比特深度的組合的情況下,相應(yīng)的圖像編碼裝置和圖像解碼器裝置也可以對(duì)所具有的比特深度比在利用對(duì)應(yīng)的MVC編碼器101和MVC解碼器201進(jìn)行的編碼和解碼時(shí)的最大比特深度更大的圖像進(jìn)行編碼和解碼。第一實(shí)施例中示出的表達(dá)式是例示性的,并且因此可以使用其他表達(dá)式。具體地, 比特右移操作與除以預(yù)定除數(shù)的除法相同。同樣,比特左移操作與乘以預(yù)定乘數(shù)的乘法相同。在上述示例的下變換中,下變換器102下舍入每個(gè)像素值的最不重要比特。然而,下變換器102可以切去或上舍入每個(gè)像素值的最不重要比特。這里,基本層圖像和增強(qiáng)層圖像是基于同一圖像(S卩,同一視圖)的圖像。相應(yīng)地, 在第一實(shí)施例中,這些圖像被稱為不同于基本視像以及非基本視像。然而,MVC編碼器101和MVC解碼器201將基本層圖像用作基本視像,以及將增強(qiáng)層圖像用作非基本視像。相應(yīng)地,這些圖像可以稱為基本視像以及非基本視像。(第二實(shí)施例)根據(jù)第二實(shí)施例的圖像編碼裝置和圖像解碼裝置使用兩個(gè)10比特圖像來(lái)實(shí)現(xiàn)3D 10比特圖像表示。圖9是根據(jù)第二實(shí)施例的圖像編碼裝置的結(jié)構(gòu)圖。圖9中示出的圖像編碼裝置包括MVC編碼器901、第一下變換器902、第一減法器903、第二下變換器904以及第二減法器 905。所述圖像編碼裝置對(duì)兩個(gè)10比特圖像進(jìn)行編碼,所述兩個(gè)10比特圖像是10比特基本視像D91和10比特非基本視像D95。下變換器902將10比特基本視像D91下變換為8比特基本視圖基本層圖像 D92。10比特基本視像D91例如對(duì)應(yīng)于左眼圖像。MVC編碼器901對(duì)8比特基本視圖基本層圖像D92進(jìn)行編碼。接著,MVC編碼器 901對(duì)已編碼8比特基本視圖基本層圖像D92進(jìn)行解碼,以生成重構(gòu)圖像D93。第一減法器903計(jì)算10比特基本視像D91和重構(gòu)圖像D93之間的差值,以生成8比特基本視圖增強(qiáng)層圖像D94。MVC編碼器901將基本視圖增強(qiáng)層圖像D94作為非基本視像進(jìn)行編碼。第二下變換器904將10比特非基本視像D95下變換為8比特非基本視圖基本層圖像D96。10比特非基本視像D95例如對(duì)應(yīng)于右眼圖像。MVC編碼器901對(duì)8比特非基本視圖基本層圖像D96進(jìn)行編碼。接著,MVC編碼器 901對(duì)已編碼8比特非基本視圖基本層圖像D96進(jìn)行解碼,以生成重構(gòu)圖像D97。第二減法器905計(jì)算10比特非基本視像D95和重構(gòu)圖像D97之間的差值,以生成8比特非基本視圖增強(qiáng)層圖像D98。MVC編碼器901將非基本視圖增強(qiáng)層圖像D98作為非基本視像進(jìn)行編碼。接著,MVC編碼器901將已編碼基本視圖基本層圖像D92、已編碼基本視圖增強(qiáng)層圖像D94、已編碼非基本視圖基本層圖像D96和已編碼非基本視圖增強(qiáng)層圖像D98疊加,以生成MVC比特流D99。圖10是根據(jù)第二實(shí)施例的圖像解碼裝置的結(jié)構(gòu)圖。圖10中示出的圖像解碼裝置包括MVC解碼器1001、第一加法器1002以及第二加法器1003。MVC解碼器1001對(duì)基本視圖基本層比特流DlOl中的基本視圖基本層圖像進(jìn)行解碼。此外,MVC解碼器1001對(duì)基本視圖增強(qiáng)層比特流D102中的基本視圖增強(qiáng)層圖像進(jìn)行解碼。同樣,MVC解碼器1001對(duì)非基本視圖基本層比特流D103中的非基本視圖基本層圖像進(jìn)行解碼。此外,MVC解碼器1001對(duì)非基本視圖增強(qiáng)層比特流D104中的非基本視圖增強(qiáng)層圖像進(jìn)行解碼。MVC解碼器1001可以從圖9中示出的MVC比特流D99中,提取與基本視圖、非基本
17視圖、基本層以及增強(qiáng)層對(duì)應(yīng)的比特流中的每個(gè),并對(duì)每個(gè)比特流進(jìn)行解碼。接著,MVC解碼器1001以圖像序列D105的形式疊加已解碼圖像。第一加法器1002將圖像序列D105中的基本視圖基本層圖像D106和基本視圖增強(qiáng)層圖像D107相加,以生成10比特基本視像D110。第二加法器1003將圖像序列D105中的非基本視圖基本層圖像D108和非基本視圖增強(qiáng)層圖像D109相加,以生成10比特非基本視像Dili。8比特2D顯示1004通過(guò)表示在圖像序列D105中包括的基本視圖基本層圖像D106 來(lái)表示8比特2D圖像。10比特2D顯示1005通過(guò)表示由第一加法器1002生成的10比特基本視像 DllO來(lái)表示10比特2D圖像。8比特3D顯示1006通過(guò)表示在圖像序列D105中包括的基本視圖基本層圖像D106 和非基本視圖基本層圖像D108的組合來(lái)表示8比特3D圖像。此時(shí),例如,基本視圖基本層圖像D106對(duì)應(yīng)于左眼圖像,而非基本視圖基本層圖像D108對(duì)應(yīng)于右眼圖像。10比特3D顯示1007通過(guò)表示由第一加法器1002生成的10比特基本視像 DllO和由第二加法器1003生成的10比特非基本視像Dlll的組合來(lái)表示10比特3D 圖像。此時(shí),例如,所述10比特基本視像DllO對(duì)應(yīng)于左眼圖像,而所述10比特非基本視像Dlll對(duì)應(yīng)于右眼圖像。如上所述,根據(jù)第二實(shí)施例的圖像編碼裝置和圖像解碼裝置使用兩個(gè)10比特圖像來(lái)實(shí)現(xiàn)3D 10比特圖像表示。此外,利用上述結(jié)構(gòu),可以實(shí)現(xiàn)各種類型的表示,包括8比特圖像的2D表示、8比特圖像的3D表示、10比特圖像的2D表示。(第三實(shí)施例)根據(jù)第三實(shí)施例的圖像編碼裝置使用運(yùn)動(dòng)預(yù)測(cè)和視圖間預(yù)測(cè)來(lái)編碼10比特圖像。圖11是根據(jù)第三實(shí)施例的圖像編碼裝置的結(jié)構(gòu)圖。圖11中示出的圖像編碼裝置包括MVC編碼器1101、下變換器102以及減法器103。根據(jù)第三實(shí)施例的圖像編碼裝置包括通過(guò)修改圖3中示出的、根據(jù)第一實(shí)施例的圖像編碼裝置的MVC編碼器101而獲得的MVC 編碼器1101。關(guān)于其他結(jié)構(gòu)元件,根據(jù)第三實(shí)施例的圖像編碼裝置與根據(jù)第一實(shí)施例的圖像編碼裝置相同。圖12是圖11中示出的MVC編碼器1101的結(jié)構(gòu)圖。圖12中示出的MVC編碼器 1101包括第一編碼器1111、第二編碼器1112以及復(fù)用器113。第一編碼器1111、第二編碼器1112以及復(fù)用器113分別按照與圖4中的第一編碼器111、第二編碼器112和復(fù)用器113 相同的方式操作。更為具體地,第一編碼器1111將基本層圖像D32作為基本視像進(jìn)行編碼,以生成基本層比特流D36。此外,第一編碼器1111對(duì)已編碼基本層圖像D32進(jìn)行解碼,以生成重構(gòu)圖像D33。同時(shí),第二編碼器1112將增強(qiáng)層圖像D34作為非基本視像進(jìn)行編碼,以生成增強(qiáng)層比特流D37。同時(shí),復(fù)用器113將基本層比特流D36和增強(qiáng)層比特流D37疊加,以生成MVC比特流 D35。
根據(jù)第三實(shí)施例的第一編碼器1111在編碼基本層圖像D32時(shí)使用運(yùn)動(dòng)預(yù)測(cè)。同樣,第二編碼器1112在編碼增強(qiáng)層圖像D34時(shí)使用運(yùn)動(dòng)預(yù)測(cè)。同時(shí),第二編碼器1112在編碼增強(qiáng)層圖像D34時(shí)使用視圖間預(yù)測(cè)。為此,第一編碼器1111包括運(yùn)動(dòng)估計(jì)單元1121,用于估計(jì)要被用于運(yùn)動(dòng)預(yù)測(cè)的運(yùn)動(dòng)矢量。同樣,第二編碼器1112包括運(yùn)動(dòng)估計(jì)單元1122,用于估計(jì)要被用于運(yùn)動(dòng)預(yù)測(cè)的運(yùn)動(dòng)矢量。第二編碼器1112還包括位移估計(jì)單元1123,用于估計(jì)要被用于視圖間預(yù)測(cè)的位移
運(yùn)動(dòng)矢量。為了執(zhí)行運(yùn)動(dòng)預(yù)測(cè),運(yùn)動(dòng)估計(jì)單元1121估計(jì)要被用于運(yùn)動(dòng)預(yù)測(cè)的運(yùn)動(dòng)矢量。第一編碼器1111使用由運(yùn)動(dòng)估計(jì)單元1121檢測(cè)到的運(yùn)動(dòng)矢量來(lái)編碼基本層圖像D32。這里,基本層圖像D32和增強(qiáng)層圖像D34是根據(jù)同一 10比特圖像D31生成的圖像, 并且因此被假設(shè)為具有相同的運(yùn)動(dòng)信息。相應(yīng)地,第一編碼器1111和第二編碼器1112可以使用相同的運(yùn)動(dòng)矢量。換言之,也可以獲得運(yùn)動(dòng)矢量的信息D38,并且使用由運(yùn)動(dòng)估計(jì)單元1121估計(jì)的運(yùn)動(dòng)矢量來(lái)編碼增強(qiáng)層圖像D34。在這種情況下,第二編碼器1112的運(yùn)動(dòng)估計(jì)單元1122不是必需的。然而,增強(qiáng)層圖像D34包括量化失真,因?yàn)橐呀?jīng)根據(jù)重構(gòu)圖像D33生成了所述量化失真。為此,第二編碼器1112的運(yùn)動(dòng)估計(jì)單元1122可以使用運(yùn)動(dòng)估計(jì)單元1121所估計(jì)的運(yùn)動(dòng)矢量,在比通常更小的范圍內(nèi)執(zhí)行運(yùn)動(dòng)估計(jì)。例如,運(yùn)動(dòng)估計(jì)單元1122可以獲得關(guān)于運(yùn)動(dòng)估計(jì)單元1121所檢測(cè)到的運(yùn)動(dòng)矢量的整數(shù)部分的信息D38,并且在水平方向和垂直方向上與由信息D38標(biāo)識(shí)的整數(shù)像素位置共同位于的整數(shù)像素位置相距1個(gè)像素的范圍內(nèi),估計(jì)增強(qiáng)層圖像D34的運(yùn)動(dòng)矢量。第一編碼器1111可以量化由運(yùn)動(dòng)估計(jì)單元1121所估計(jì)的運(yùn)動(dòng)矢量,并且向第二編碼器1112通知關(guān)于量化后的運(yùn)動(dòng)矢量的信息D38。第二編碼器1112逆向量化所述量化后的運(yùn)動(dòng)矢量。同時(shí),運(yùn)動(dòng)估計(jì)單元1122可以在包括由逆向量化后的運(yùn)動(dòng)矢量示出的像素位置且比基本層圖像D32中的運(yùn)動(dòng)估計(jì)范圍小的范圍內(nèi),估計(jì)增強(qiáng)層圖像D34的運(yùn)動(dòng)矢量。這使得可以減少要處理的信息量。此外,限制運(yùn)動(dòng)估計(jì)范圍可減少不必要的處理。 由此,處理速度增加。為了執(zhí)行視圖間預(yù)測(cè),位移估計(jì)單元1123估計(jì)位移矢量。視圖間預(yù)測(cè)是根據(jù)基本視像預(yù)測(cè)非基本視像。典型地,由于視差,在基本視像和對(duì)應(yīng)的非基本視像之間存在位移。位移估計(jì)單元1123估計(jì)該位移,作為位移矢量。在第三實(shí)施例中,位移估計(jì)單元1123使用重構(gòu)圖像D33和增強(qiáng)層圖像D34,估計(jì)該位移。這里,重構(gòu)圖像D33和增強(qiáng)層圖像D34是根據(jù)同一 10比特圖像D31生成的圖像, 并且因此不存在這種位移。相應(yīng)地,第二編碼器1112可以在視圖間預(yù)測(cè)中使用表示它的幅度為0的位移矢量(0,0)o然而,重構(gòu)圖像D33和增強(qiáng)層圖像D34包括量化失真。相應(yīng)地,位移估計(jì)單元1123 可以在比通常更小的范圍內(nèi)估計(jì)位移。例如,位移估計(jì)單元1123可以估計(jì)位移,使得重構(gòu)圖像D33和增強(qiáng)層圖像D34之間的差值在水平方向和垂直方向上在1個(gè)像素的范圍內(nèi),以獲得要在視圖間預(yù)測(cè)中使用的位移矢量。這里,重構(gòu)圖像D33和增強(qiáng)層圖像D34之間的關(guān)系近似于10比特圖像D31中的最重要8比特和最不重要2比特之間的關(guān)系。相應(yīng)地,假設(shè)不存在關(guān)聯(lián)性。為此,存在視圖間預(yù)測(cè)不產(chǎn)生任何效果的可能性。因此,優(yōu)選地,按照上述受限制的方式執(zhí)行視圖間預(yù)測(cè)。這使得可以減少不必要的處理,并且由此增加處理速度。即使在由于重構(gòu)圖像D33和增強(qiáng)層圖像D34之間的量化失真而導(dǎo)致存在位移時(shí), 假設(shè)由于量化失真導(dǎo)致的位移在1個(gè)像素范圍內(nèi)。僅僅具有子像素準(zhǔn)確度的位移估計(jì)中的限制相對(duì)簡(jiǎn)單。因此,可以減少實(shí)現(xiàn)的復(fù)雜度。為此,優(yōu)選位移估計(jì)被限制在1個(gè)像素范圍內(nèi)。由于同樣的原因,優(yōu)選運(yùn)動(dòng)估計(jì)被限制在1個(gè)像素范圍內(nèi)。(第四實(shí)施例)在第一實(shí)施例中描述的處理可以利用獨(dú)立的計(jì)算機(jī)系統(tǒng),通過(guò)在記錄介質(zhì)中記錄用于實(shí)現(xiàn)在第一實(shí)施例中描述的圖像編碼方法和圖像解碼方法的配置的程序簡(jiǎn)單地實(shí)現(xiàn)。 記錄介質(zhì)可以是任何記錄介質(zhì),只要可以記錄程序即可,比如磁盤、光盤、磁光盤、IC卡以及半導(dǎo)體存儲(chǔ)器。在下面,將描述在第一實(shí)施例中描述的圖像編碼方法和圖像解碼方法的應(yīng)用以及使用該應(yīng)用的系統(tǒng)。圖13例示了用于實(shí)現(xiàn)內(nèi)容分發(fā)服務(wù)的內(nèi)容提供系統(tǒng)exlOO的整體配置。用于提供通信服務(wù)的區(qū)域被分為具有期望尺寸的小區(qū)以及作為被放置在每個(gè)小區(qū)中的固定無(wú)線站的基站exl06到exllO。內(nèi)容提供系統(tǒng)exlOO經(jīng)由互聯(lián)網(wǎng)exlOl、互聯(lián)網(wǎng)服務(wù)提供商exl02、電話網(wǎng)絡(luò) exl04以及基站exl06到exllO,連接到比如計(jì)算機(jī)exlll、個(gè)人數(shù)字助理(PDA) exll2、相機(jī) exll3、蜂窩電話exll4和游戲機(jī)exll5之類的設(shè)備。然而,內(nèi)容提供系統(tǒng)exlOO的配置不限于圖13中示出的配置,并且連接到上述元件中的每個(gè)的組合是可接受的。另外,上述設(shè)備中的每個(gè)可以直接連接到電話網(wǎng)絡(luò)exl04, 而不是經(jīng)由作為固定無(wú)線站的基站exl06到exllO。此外,上述設(shè)備可以經(jīng)由短程無(wú)線通信等彼此互聯(lián)。比如數(shù)字?jǐn)z像機(jī)之類的相機(jī)exll3能夠捕獲運(yùn)動(dòng)圖像。比如數(shù)字?jǐn)z像機(jī)之類的相機(jī)exll6能夠捕獲靜止圖像和運(yùn)動(dòng)圖像兩者。此外,蜂窩電話exll4可以是滿足比如全球移動(dòng)通信系統(tǒng)(GSM)、碼分多址(CDMA)、寬帶碼分多址(W-CDMA)、長(zhǎng)期演進(jìn)(LTE)以及高速分組接入(HSPA)之類的標(biāo)準(zhǔn)中的任何一種的蜂窩電話。或者,蜂窩電話exll4可以是個(gè)人手持電話系統(tǒng)(PHS)。在內(nèi)容提供系統(tǒng)exlOO中,流服務(wù)器exl03經(jīng)由電話網(wǎng)絡(luò)exl04和基站exl09連接到相機(jī)exll3等,從而實(shí)現(xiàn)現(xiàn)場(chǎng)直播等的分發(fā)。對(duì)于這種分發(fā),由用戶使用相機(jī)exll3捕獲的內(nèi)容(例如,音樂(lè)現(xiàn)場(chǎng)直播的視頻)如上在第一實(shí)施例中所述進(jìn)行編碼,并且已編碼內(nèi)容被發(fā)送到流服務(wù)器exl03。另一方面,一旦客戶端請(qǐng)求,則流服務(wù)器exl03將所接收的內(nèi)容數(shù)據(jù)流分發(fā)到客戶端。所述客戶端包括能夠解碼上述已編碼數(shù)據(jù)的計(jì)算機(jī)exlll、PDA exll2、相機(jī)exll3、蜂窩電話exll4以及游戲機(jī)exll5。已經(jīng)接收到所分發(fā)的數(shù)據(jù)的上述設(shè)備中的每個(gè)解碼和再現(xiàn)已編碼數(shù)據(jù)。所捕獲的數(shù)據(jù)可以被發(fā)送該數(shù)據(jù)的相機(jī)exll3或流服務(wù)器exl03編碼,或者編碼過(guò)程可以在相機(jī)exl 13和流服務(wù)器exl03之間共享。類似地,所分發(fā)的數(shù)據(jù)可以被客戶端或流服務(wù)器exl03解碼,或者解碼過(guò)程可以在客戶端和流服務(wù)器exl03之間共享。此外,不僅被相機(jī)exll3而且被相機(jī)exll6捕獲的靜止圖像和運(yùn)動(dòng)圖像的數(shù)據(jù)可以通過(guò)計(jì)算機(jī)exlll 發(fā)送到流服務(wù)器exl03。編碼過(guò)程可以由相機(jī)exll6、計(jì)算機(jī)exlll或流服務(wù)器exl03執(zhí)行, 或者在它們之間共享。此外,所述編碼和解碼過(guò)程可以由通常包括在計(jì)算機(jī)exlll和上述設(shè)備的每個(gè)中的LSI ex500執(zhí)行。所述LSI ex500可以包括單個(gè)芯片或多個(gè)芯片。用于編碼和解碼圖像的軟件可以集成到可被計(jì)算機(jī)exlll等讀取的某種類型的記錄介質(zhì)(比如⑶-ROM、軟盤、硬盤)中,并且編碼和解碼過(guò)程可以通過(guò)使用軟件來(lái)執(zhí)行。此外,當(dāng)蜂窩電話exll4配備有相機(jī)時(shí),可以發(fā)送由相機(jī)獲得的運(yùn)動(dòng)圖像數(shù)據(jù)。所述視頻數(shù)據(jù)是被蜂窩電話exll4中包括的 LSI ex500編碼的數(shù)據(jù)。此外,流服務(wù)器exl03可以包括服務(wù)器和計(jì)算機(jī),并且可以分散數(shù)據(jù),處理所述分散數(shù)據(jù),記錄或分發(fā)數(shù)據(jù)。如上所述,客戶端可以接收和在內(nèi)容提供系統(tǒng)exlOO中再現(xiàn)已編碼數(shù)據(jù)。換言之, 所述客戶端可以接收和解碼用戶所發(fā)送的信息,并且在內(nèi)容提供系統(tǒng)exlOO中實(shí)時(shí)再現(xiàn)所解碼的數(shù)據(jù),從而使得不具有任何特定權(quán)限和裝備的用戶可以實(shí)現(xiàn)個(gè)人廣播。當(dāng)在內(nèi)容提供系統(tǒng)exlOO中包括的上述設(shè)備中的每個(gè)執(zhí)行編碼和解碼時(shí),可以使用第一實(shí)施例中示出的圖像編碼方法和圖像解碼方法。蜂窩電話exll4將被作為這種設(shè)備的示例進(jìn)行描述。圖14例示了使用在第一實(shí)施例中描述的圖像編碼方法和圖像解碼方法的蜂窩電話exll4。蜂窩電話exll4包括用于通過(guò)基站exllO發(fā)送和接收無(wú)線電波的天線ex601 ; 比如CXD相機(jī)之類的能夠捕獲運(yùn)動(dòng)圖像和靜止圖像的相機(jī)單元ex603 ;用于顯示比如由相機(jī)單元ex603捕獲的或者由天線ex601接收的已解碼視頻之類的數(shù)據(jù)的顯示單元ex602,比如液晶顯示器;包括一組操作鍵ex604的主體單元;用于輸出音頻的音頻輸出單元ex608, 比如揚(yáng)聲器;用于輸入音頻的音頻輸入單元ex605,比如麥克風(fēng);用于記錄已編碼或已解碼數(shù)據(jù)的記錄介質(zhì)ex607,所述已編碼或已解碼數(shù)據(jù)包括所捕獲的運(yùn)動(dòng)或靜止圖像的數(shù)據(jù)、所接收的電子郵件的數(shù)據(jù)以及運(yùn)動(dòng)圖像或靜止圖像的數(shù)據(jù);以及用于使得蜂窩電話exll4能夠附接記錄介質(zhì)ex607的插槽單元ex606。記錄介質(zhì)ex607是在塑料外殼內(nèi)容納快閃存儲(chǔ)器器件(例如,SD卡)的介質(zhì)。所述快閃存儲(chǔ)器器件是一種類型的電可擦寫可編程只讀存儲(chǔ)器(EEPROM),所述EEPROM是可電重寫和擦除的非易失性存儲(chǔ)器。接著,將參照?qǐng)D15描述蜂窩電話exll4。在蜂窩電話exll4中,被設(shè)計(jì)為控制包括顯示單元ex602以及操作鍵ex604的主體的每個(gè)單元的主控制單元ex711經(jīng)由同步總線ex713,與電源電路單元ex710、操作輸入控制單元ex704、圖像編碼單元ex712、相機(jī)接口單元ex703、液晶顯示器(IXD)控制單元ex702、圖像解碼單元ex709、復(fù)用/解復(fù)用單元 ex708、記錄/再現(xiàn)單元ex707、調(diào)制解調(diào)器電路單元ex706以及音頻處理單元ex705相互連接。當(dāng)呼叫結(jié)束鍵或開(kāi)機(jī)鍵由于用戶的操作而被接通時(shí),電源電路單元ex710從電池組向各個(gè)單元供電,從而激活數(shù)字型的且配備有相機(jī)的蜂窩電話exll4。在蜂窩電話exll4中,音頻處理單元ex705在包括CPU、ROM和RAM的主控制單元 ex711的控制下,將在語(yǔ)音會(huì)話模式下由音頻輸入單元ex605收集的音頻信號(hào)變換為數(shù)字音頻數(shù)據(jù)。然后,調(diào)制解調(diào)器電路單元ex706對(duì)數(shù)字音頻數(shù)據(jù)執(zhí)行擴(kuò)頻處理,并且發(fā)送和接收電路單元ex701對(duì)數(shù)據(jù)執(zhí)行數(shù)/模變換和頻率變換,從而經(jīng)由天線ex601發(fā)送所得到的數(shù)據(jù)。另外,在蜂窩電話exl 14中,發(fā)送和接收電路單元ex701對(duì)在語(yǔ)音會(huì)話模式下由天線 ex601接收的數(shù)據(jù)進(jìn)行放大,并且對(duì)數(shù)據(jù)執(zhí)行頻率變換和模/數(shù)變換。然后,調(diào)制解調(diào)器電路單元ex706對(duì)數(shù)據(jù)執(zhí)行逆擴(kuò)頻處理,以及音頻處理單元ex705將其變換為模擬音頻數(shù)據(jù), 從而經(jīng)由音頻輸出單元ex608輸出該模擬音頻數(shù)據(jù)。此外,當(dāng)在數(shù)據(jù)通信模式下發(fā)送電子郵件時(shí),通過(guò)操作主體的操作鍵ex604而輸入的電子郵件的文本數(shù)據(jù)經(jīng)由操作輸入控制單元ex704發(fā)送到主控制單元ex711。主控制單元ex711使得調(diào)制解調(diào)器電路單元ex706對(duì)文本數(shù)據(jù)執(zhí)行擴(kuò)頻處理,并且發(fā)送和接收電路單元ex701對(duì)所得到的數(shù)據(jù)執(zhí)行數(shù)/模變換和頻率變換,以經(jīng)由天線ex601將數(shù)據(jù)發(fā)送到基站exl 10。當(dāng)在數(shù)據(jù)通信模式下發(fā)送圖像數(shù)據(jù)時(shí),由相機(jī)單元ex603捕獲的圖像數(shù)據(jù)被經(jīng)由相機(jī)接口單元ex703提供給圖像編碼單元ex712。當(dāng)圖像數(shù)據(jù)未被發(fā)送時(shí),由相機(jī)單元 ex603捕獲的圖像數(shù)據(jù)可以經(jīng)由相機(jī)接口單元ex703和IXD控制單元ex702,直接表示在顯示單元ex602上。包括在本發(fā)明中所述的圖像編碼裝置的圖像編碼單元ex712使用如第一實(shí)施例中所示由圖像編碼裝置使用的編碼方法,壓縮和編碼從相機(jī)單元ex603提供的圖像數(shù)據(jù), 從而將數(shù)據(jù)轉(zhuǎn)換為已編碼圖像數(shù)據(jù),并且將所述數(shù)據(jù)發(fā)送到復(fù)用/解復(fù)用單元ex708。此外,蜂窩電話exll4同時(shí)經(jīng)由音頻處理單元ex705,將在利用相機(jī)單元ex603進(jìn)行的捕獲期間由音頻輸入單元ex605接收的音頻作為數(shù)字音頻數(shù)據(jù)發(fā)送到復(fù)用/解復(fù)用單元ex708。復(fù)用/解復(fù)用單元ex708使用預(yù)定方法,將從圖像編碼單元ex712提供的已編碼圖像數(shù)據(jù)和從音頻處理單元ex705提供的音頻數(shù)據(jù)復(fù)用在一起。然后,調(diào)制解調(diào)器電路單元ex706對(duì)通過(guò)復(fù)用/解復(fù)用單元ex708獲得的已復(fù)用數(shù)據(jù)執(zhí)行擴(kuò)頻處理。在對(duì)所述數(shù)據(jù)進(jìn)行數(shù)/模變換和頻率變換后,發(fā)送和接收電路單元ex701經(jīng)由天線ex601發(fā)送所得到的數(shù)據(jù)。當(dāng)在數(shù)據(jù)通信模式下接收鏈接到網(wǎng)頁(yè)等上的視頻文件的數(shù)據(jù)時(shí),調(diào)制解調(diào)器電路單元ex706對(duì)經(jīng)由天線ex601從基站exllO接收的所述數(shù)據(jù)進(jìn)行逆擴(kuò)頻處理,并且將根據(jù)逆擴(kuò)頻處理而獲得的已復(fù)用數(shù)據(jù)發(fā)送到復(fù)用/解復(fù)用單元ex708。為了解碼經(jīng)由天線ex601接收的已復(fù)用數(shù)據(jù),復(fù)用/解復(fù)用單元ex708將已復(fù)用數(shù)據(jù)解復(fù)用為圖像數(shù)據(jù)的比特流和音頻數(shù)據(jù)的比特流,并且經(jīng)由同步總線ex713,分別將已編碼圖像數(shù)據(jù)提供給圖像解碼單元ex709,以及將音頻數(shù)據(jù)提供給音頻處理單元ex705。接著,包括如本發(fā)明中所述的圖像解碼裝置的圖像解碼單元ex709使用與第一實(shí)施例中的編碼方法對(duì)應(yīng)的解碼方法,對(duì)圖像數(shù)據(jù)的比特流進(jìn)行解碼,從而生成再現(xiàn)的視頻數(shù)據(jù),并且經(jīng)由IXD控制單元ex702,將該數(shù)據(jù)提供給顯示單元ex602。因此,顯示例如鏈接到網(wǎng)頁(yè)的視頻文件中包括的視頻數(shù)據(jù)。同時(shí),音頻處理單元ex705將音頻數(shù)據(jù)變換為模擬音頻數(shù)據(jù),并且將該數(shù)據(jù)提供給音頻輸出單元ex608。因此,再現(xiàn)例如鏈接到網(wǎng)頁(yè)的視頻文件中包括的音頻數(shù)據(jù)。因?yàn)榻鼇?lái)在新聞中已經(jīng)報(bào)道地面或衛(wèi)星數(shù)字廣播技術(shù),并且至少第一實(shí)施例中描述的圖像編碼裝置或圖像解碼裝置可以并入到圖16所示的數(shù)字廣播系統(tǒng)中,所以本發(fā)明不限于上述系統(tǒng)。更為具體地,廣播站ex201經(jīng)由無(wú)線電波向廣播衛(wèi)星ex202傳送或發(fā)送音頻數(shù)據(jù)、視頻數(shù)據(jù)或者通過(guò)復(fù)用音頻數(shù)據(jù)和視頻數(shù)據(jù)而獲得的比特流。一旦接收到比特流,則廣播衛(wèi)星ex202將發(fā)射用于廣播的無(wú)線電波。然后,具有衛(wèi)星廣播接收功能的家用天線ex204接收無(wú)線電波,并且比如電視(接收器)ex300和機(jī)頂盒(STB) ex217之類的設(shè)備解碼已編碼比特流并再現(xiàn)已編碼比特流。此外,用于讀取和解碼這種通過(guò)復(fù)用被記錄在記錄介質(zhì)ex215和ex216(比如,⑶和DVD)上的圖像數(shù)據(jù)和音頻數(shù)據(jù)而獲得比特流之類的讀取器/記錄器ex218可以包括第一實(shí)施例中示出的圖像解碼裝置。在這種情況下,被再現(xiàn)的視頻信號(hào)顯示在監(jiān)視器ex219上。還可以在連接到用于有線電視的線纜ex203或用于衛(wèi)星和/或地面廣播的天線ex204的機(jī)頂盒ex217中實(shí)現(xiàn)圖像解碼裝置,從而在電視機(jī)ex300 的監(jiān)視器ex219上再現(xiàn)視頻信號(hào)。圖像解碼裝置可以不包括在機(jī)頂盒中,而是包括在電視機(jī)ex300中。而且,具有天線ex205的汽車ex201可以從衛(wèi)星ex202或基站ex201接收用于在比如在汽車ex210中設(shè)置的汽車導(dǎo)航系統(tǒng)ex211之類的顯示設(shè)備上再現(xiàn)視頻的信號(hào)。此外,第一實(shí)施例中所示的圖像解碼裝置或圖像編碼裝置可以在讀取器/記錄器 ex218中實(shí)現(xiàn),讀取器/記錄器ex218(i)用于讀取并解碼視頻數(shù)據(jù)、音頻數(shù)據(jù)或者通過(guò)復(fù)用視頻數(shù)據(jù)和音頻數(shù)據(jù)而獲得的已編碼比特流,或者(ii)用于編碼視頻數(shù)據(jù)、音頻數(shù)據(jù)或者通過(guò)復(fù)用視頻數(shù)據(jù)和音頻數(shù)據(jù)而獲得的已編碼比特流,并將所得到的數(shù)據(jù)作為已復(fù)用數(shù)據(jù)記錄在記錄介質(zhì)ex215上。這里,視頻數(shù)據(jù)和音頻數(shù)據(jù)被記錄在比如BD和DVD之類的記錄介質(zhì)ex215上。在這種情況下,所述被再現(xiàn)的視頻信號(hào)被顯示在監(jiān)視器ex219上。此外,被再現(xiàn)的視頻信號(hào)可以由另一設(shè)備或系統(tǒng)使用記錄有已編碼比特流的記錄介質(zhì)ex215來(lái)再現(xiàn)。例如,另一再現(xiàn)裝置ex212可以使用其上復(fù)制有已編碼比特流的記錄介質(zhì)ex214來(lái)將視頻信號(hào)再現(xiàn)在監(jiān)視器ex213上。此外,還可以在連接到用于有線電視的線纜ex203或用于衛(wèi)星和/或地面廣播的天線ex204的機(jī)頂盒ex217中實(shí)現(xiàn)所述圖像解碼裝置,從而在電視機(jī)ex300的監(jiān)視器ex219 上再現(xiàn)所述視頻信號(hào)。所述圖像解碼裝置可以不包括在所述機(jī)頂盒中,而是包括在電視機(jī) ex300 中。圖17例示了使用第一實(shí)施例中描述的圖像編碼方法和圖像解碼方法的電視機(jī) (接收器)ex300。電視機(jī)eX300包括調(diào)諧器ex301,用于從用于接收廣播的天線ex204或線纜ex203獲得視頻信息比特流或者通過(guò)天線ex204或線纜ex203提供視頻信息比特流; 調(diào)制/解調(diào)單元ex302,用于解調(diào)所接收的已編碼數(shù)據(jù)或者將數(shù)據(jù)調(diào)制成要提供給外部的已編碼數(shù)據(jù);以及復(fù)用/解復(fù)用單元ex303,用于將所述已調(diào)制數(shù)據(jù)解復(fù)用為視頻數(shù)據(jù)和音頻數(shù)據(jù)、或者將已編碼視頻數(shù)據(jù)和音頻數(shù)據(jù)復(fù)用為數(shù)據(jù)。電視機(jī)ex300還包括信號(hào)處理單元ex306,包括分別用于解碼音頻數(shù)據(jù)和視頻數(shù)據(jù)以及編碼音頻數(shù)據(jù)和視頻數(shù)據(jù)的音頻信號(hào)處理單元ex304和視頻信號(hào)處理單元ex305 ;揚(yáng)聲器ex307,用于提供已解碼音頻信號(hào); 以及輸出單元ex309,包括用于顯示已解碼視頻信號(hào)的顯示單元ex308,比如顯示器。此外, 電視機(jī)eX300包括接口單元ex317,所述接口單元ex317包括用于接收用戶操作的輸入的操作輸入單元ex312。此外,電視機(jī)ex300包括控制單元ex310,用于控制電視機(jī)ex300的每個(gè)組成元件;以及電源電路單元ex311,用于向元件中的每個(gè)供電。除了操作輸入單元ex312 之外,接口單元ex317可以包括連接到比如讀取器/記錄器ex218之類的外部設(shè)備的橋接器ex313 ;用于實(shí)現(xiàn)比如SD卡之類的記錄介質(zhì)ex216的附接的插槽單元ex314 ;連接到比如硬盤之類的外部記錄介質(zhì)的驅(qū)動(dòng)器ex315 ;以及連接到電話網(wǎng)絡(luò)的調(diào)制解調(diào)器ex316。這
23里,記錄介質(zhì)ex216可以使用用于存儲(chǔ)的非易失性/易失性半導(dǎo)體存儲(chǔ)器元件來(lái)電記錄信息。電視機(jī)ex300的組成元件彼此通過(guò)同步總線連接。首先,將描述電視機(jī)ex300解碼通過(guò)天線ex204等從外部獲得的數(shù)據(jù)并再現(xiàn)所解碼的數(shù)據(jù)的配置。在電視機(jī)ex300中,一旦從遠(yuǎn)程控制器ex220等接收到用戶的操作,則復(fù)用/解復(fù)用單元ex303在包括CPU的主控制單元ex310的控制下,解復(fù)用由調(diào)制/解調(diào)單元 ex302解調(diào)出的視頻數(shù)據(jù)和音頻數(shù)據(jù)。此外,在電視機(jī)ex300中,音頻信號(hào)處理單元ex304 使用第一實(shí)施例中的描述的解碼方法解碼已解復(fù)用的音頻數(shù)據(jù),以及視頻信號(hào)處理單元 ex305使用第一實(shí)施例中的描述的解碼方法解碼已解復(fù)用的視頻數(shù)據(jù)。輸出單元ex309分別向外部提供已解碼視頻數(shù)據(jù)和已解碼音頻數(shù)據(jù)。當(dāng)輸出單元ex309提供視頻數(shù)據(jù)和音頻數(shù)據(jù)時(shí),所述信號(hào)可以臨時(shí)存儲(chǔ)在緩存器ex318和ex319等中,從而彼此同步地再現(xiàn)信號(hào)。此外,電視機(jī)ex300可以不是通過(guò)廣播等讀取已編碼比特流,而是從比如磁盤、光盤和 SD卡之類的記錄媒介ex215和ex216讀取已編碼比特流。接著,將描述電視機(jī)ex300編碼音頻信號(hào)和視頻信號(hào)并且向外部發(fā)送數(shù)據(jù)或者將數(shù)據(jù)寫入到記錄介質(zhì)上的配置。在電視機(jī) ex300中,一旦從遠(yuǎn)程控制器ex220等接收到用戶的操作,則在控制單元ex310的控制下, 音頻信號(hào)處理單元ex304使用第一實(shí)施例中的描述的編碼方法編碼音頻信號(hào),以及視頻信號(hào)處理單元ex305使用第一實(shí)施例中的描述的編碼方法編碼視頻信號(hào)。復(fù)用/解復(fù)用單元 ex303復(fù)用已編碼視頻信號(hào)和音頻信號(hào),并且向外部提供所得到的數(shù)據(jù)。當(dāng)復(fù)用/解復(fù)用單元ex303復(fù)用視頻信號(hào)和音頻信號(hào)時(shí),所述信號(hào)可以臨時(shí)存儲(chǔ)在緩存器ex320和ex321 等中,從而彼此同步地再現(xiàn)所述信號(hào)。這里,所述緩存器ex318到ex321可以是多個(gè),如所例示,或者在電視機(jī)ex300中可以共享至少一個(gè)緩存器。此外,數(shù)據(jù)可以存儲(chǔ)在除了緩存器 ex318到ex321之外的緩存器中,從而可以例如避免調(diào)制/解調(diào)單元ex302和復(fù)用/解復(fù)用單元ex303之間的系統(tǒng)過(guò)流(overflow)和欠流(underflow)。此外,除了用于從廣播或記錄介質(zhì)獲得音頻和視頻數(shù)據(jù)的配置之外,電視機(jī)ex300 可以包括用于從麥克風(fēng)或相機(jī)接收AV輸入的配置,并且可以編碼所獲得的數(shù)據(jù)。盡管在上面描述中電視機(jī)ex300可以編碼、復(fù)用和向外部提供數(shù)據(jù),但是它可以不是能夠編碼、復(fù)用和向外部提供數(shù)據(jù),而是能夠僅僅進(jìn)行接收、解碼和向外部提供數(shù)據(jù)中之一。此外,當(dāng)讀取器/記錄器ex218從記錄介質(zhì)讀取已編碼比特流或?qū)⒁丫幋a比特流寫入到記錄介質(zhì)中時(shí),電視機(jī)ex300和讀取器/記錄器ex218中之一可以解碼或編碼所述已編碼比特流,以及電視機(jī)ex300和讀取器/記錄器ex218可以共享所述解碼或編碼。作為示例,圖18例示了當(dāng)從光盤讀取數(shù)據(jù)或?qū)?shù)據(jù)寫入到光盤中時(shí)信息再現(xiàn)/ 記錄單元ex400的配置。信息再現(xiàn)/記錄單元ex400包括稍后描述的組成元件ex401到 ex407o光學(xué)頭ex401將激光點(diǎn)照射到作為被寫入信息的光盤的記錄介質(zhì)ex215的記錄表面上,并且檢測(cè)來(lái)自記錄介質(zhì)ex215的記錄表面的反射光以讀取信息。調(diào)制記錄單元ex402 電驅(qū)動(dòng)光學(xué)頭ex401中包括的半導(dǎo)體激光器,并且根據(jù)所記錄的數(shù)據(jù)調(diào)制激光。再現(xiàn)解調(diào)單元ex403對(duì)通過(guò)使用光學(xué)頭ex401中包括的光電檢測(cè)器電檢測(cè)來(lái)自記錄表面的反射光而獲得的再現(xiàn)信號(hào)進(jìn)行放大,并且通過(guò)分離在記錄介質(zhì)ex215上記錄的信號(hào)分量來(lái)解調(diào)再現(xiàn)信號(hào),以再現(xiàn)必要信息。緩存器ex404臨時(shí)保存要被記錄在記錄介質(zhì)ex215上的信息、以及從記錄介質(zhì)ex215再現(xiàn)的信息。盤式電機(jī)ex405轉(zhuǎn)動(dòng)記錄介質(zhì)ex215。伺服控制單元ex406 將光學(xué)頭ex401移到預(yù)定信息軌道,同時(shí)控制盤式電機(jī)ex405的轉(zhuǎn)動(dòng)驅(qū)動(dòng)以便跟隨激光點(diǎn)。系統(tǒng)控制單元ex407控制信息再現(xiàn)/記錄單元ex400。所述讀取和寫入過(guò)程可以由系統(tǒng)控制單元ex407、調(diào)制記錄單元ex402、再現(xiàn)解調(diào)單元ex403以及伺服控制單元ex406實(shí)現(xiàn),所述系統(tǒng)控制單元ex407使用緩存器ex404中存儲(chǔ)的各種信息并且在必要時(shí)生成和添加新信息,調(diào)制記錄單元ex402、再現(xiàn)解調(diào)單元ex403以及伺服控制單元ex406在以協(xié)作的方式操作時(shí)通過(guò)光學(xué)頭ex401記錄和再現(xiàn)信息。系統(tǒng)控制單元ex407例如包括微處理器,并且通過(guò)使得計(jì)算機(jī)執(zhí)行用于讀取和寫入的程序來(lái)執(zhí)行處理。盡管在上面的描述中光學(xué)頭ex401照射激光點(diǎn),但是光學(xué)頭ex401可以使用近場(chǎng)光執(zhí)行高密度記錄。圖19示意性地例示了作為光盤的記錄介質(zhì)ex215。在記錄介質(zhì)ex215的記錄表面上,形成有螺旋狀地引導(dǎo)槽,并且信息軌道ex230根據(jù)引導(dǎo)槽的形狀變化預(yù)先記錄用于指示盤片上的絕對(duì)位置的地址信息。所述地址信息包括用于確定作為用于記錄數(shù)據(jù)的單元的記錄塊ex231的位置的信息。用于記錄和再現(xiàn)數(shù)據(jù)的裝置再現(xiàn)信息軌道ex230并且讀取地址信息,從而確定記錄塊的位置。此外,記錄介質(zhì)ex215包括數(shù)據(jù)記錄區(qū)ex233、內(nèi)環(huán)區(qū) ex232以及外環(huán)區(qū)ex234。數(shù)據(jù)記錄區(qū)ex233是供記錄用戶數(shù)據(jù)時(shí)使用的區(qū)域。作為數(shù)據(jù)記錄區(qū)ex233的內(nèi)部和外部的內(nèi)環(huán)區(qū)ex232和外環(huán)區(qū)ex234分別用于除了記錄用戶數(shù)據(jù)之外的特定使用。信息再現(xiàn)/記錄單元400從記錄介質(zhì)ex215的數(shù)據(jù)記錄區(qū)ex233讀取已編碼音頻數(shù)據(jù)、已編碼視頻數(shù)據(jù)或通過(guò)復(fù)用所述已編碼音頻數(shù)據(jù)和所述已編碼視頻數(shù)據(jù)而獲得的已編碼數(shù)據(jù),以及將已編碼音頻數(shù)據(jù)、已編碼視頻數(shù)據(jù)或通過(guò)復(fù)用所述已編碼音頻數(shù)據(jù)和所述已編碼視頻數(shù)據(jù)而獲得的已編碼數(shù)據(jù)寫入到記錄介質(zhì)ex215的數(shù)據(jù)記錄區(qū)ex233 中。盡管具有一層的光盤(比如DVD和BD)在上面的描述中被作為示例描述,但是所述光盤不限于此,并且可以是具有多層結(jié)構(gòu)并且能夠在除了表面之外的部分上記錄的光盤。此外,所述光盤可以具有用于多維記錄/再現(xiàn)的結(jié)構(gòu),比如在所述光盤的相同部分使用具有不同波長(zhǎng)的有色光記錄信息以及記錄從各種不同角度來(lái)看具有不同層的信息。此外,在數(shù)字廣播系統(tǒng)ex200中,具有天線ex205的汽車ex210可以從衛(wèi)星ex202 等接收數(shù)據(jù),并且在比如設(shè)置在汽車ex210中的汽車導(dǎo)航系統(tǒng)ex211之類的顯示設(shè)備上再現(xiàn)視頻。這里,與圖17中例示的配置不同,汽車導(dǎo)航系統(tǒng)ex211的配置將是例如包括GPS接收單元的配置。計(jì)算機(jī)exl 11、蜂窩電話exl 14等配置是相同的。此外,類似于電視機(jī)ex300, 比如蜂窩電話exll4之類的終端可以具有三種類型的實(shí)現(xiàn)配置,不僅包括(i)包括編碼裝置和解碼裝置的發(fā)送和接收終端,而且包括(ii)僅僅包括編碼裝置的發(fā)送終端以及(iii) 僅僅包括解碼裝置的接收終端。同樣,第一實(shí)施例中的圖像編碼方法和圖像解碼方法可以用于上述設(shè)備和系統(tǒng)的任何一個(gè)中。因此,可以獲得第一實(shí)施例中所述的優(yōu)點(diǎn)。此外,本發(fā)明不限于上述實(shí)施例,并且可以進(jìn)行各種修改和修訂,而不會(huì)背離本發(fā)明的范圍。(第五實(shí)施例)每個(gè)實(shí)施例中的圖像編碼方法、圖像編碼裝置、圖像解碼方法以及圖像解碼裝置中的每個(gè)通常以集成電路或大規(guī)模集成(LSI)電路的形式實(shí)現(xiàn)。作為L(zhǎng)SI的示例,圖20例示了被制成一個(gè)芯片的LSI ex500的配置。LSI ex500包括要在下面描述的元件ex501到ex509,并且所述元件通過(guò)總線ex510彼此相連。當(dāng)上電時(shí),通過(guò)向所述元件中的每個(gè)供電來(lái)激活電源電路單元ex505。例如,當(dāng)執(zhí)行編碼時(shí),LSI ex500在包括CPU ex502、存儲(chǔ)器控制器ex503以及流控制器ex504的控制單元ex501的控制下,通過(guò)AV IO ex509從麥克風(fēng)exll7、相機(jī)exll3等接收AV信號(hào)。所接收的AV信號(hào)被臨時(shí)存儲(chǔ)在LSI ex500外部的比如SDRAM之類的存儲(chǔ)器 ex511中。在控制單元ex501的控制下,在需要時(shí),根據(jù)處理量和速度將所存儲(chǔ)的數(shù)據(jù)細(xì)分為數(shù)據(jù)部分。然后,所述數(shù)據(jù)部分被發(fā)送到信號(hào)處理單元ex507。信號(hào)處理單元ex507編碼音頻信號(hào)和/或視頻信號(hào)。這里,對(duì)所述視頻信號(hào)的編碼是在實(shí)施例中描述的編碼。此外,信號(hào)處理單元ex507有時(shí)將已編碼音頻數(shù)據(jù)和已編碼視頻數(shù)據(jù)復(fù)用,并且流I/O ex506 向外部提供已復(fù)用數(shù)據(jù)。所提供的比特流被發(fā)送到基站exl07,或者寫入到記錄介質(zhì)ex215 上。當(dāng)數(shù)據(jù)集被復(fù)用后,所述數(shù)據(jù)集應(yīng)該臨時(shí)存儲(chǔ)在緩存器ex508中,從而使得所述數(shù)據(jù)集彼此同步。例如,當(dāng)已編碼數(shù)據(jù)被解碼時(shí),LSI ex500將在控制單元ex501的控制下通過(guò)流 I/O ΘΧ506從基站exl07獲得或者從記錄介質(zhì)ex215讀取的已編碼數(shù)據(jù)臨時(shí)存儲(chǔ)在存儲(chǔ)器 ex511中。在控制單元ex501的控制下,在需要時(shí),根據(jù)所述處理量和速度將所存儲(chǔ)的數(shù)據(jù)細(xì)分為數(shù)據(jù)部分。然后,數(shù)據(jù)部分被發(fā)送到信號(hào)處理單元ex507。信號(hào)處理單元ex507解碼音頻信號(hào)和/或視頻信號(hào)。這里,對(duì)視頻信號(hào)的解碼是在實(shí)施例中描述的解碼。此外,已解碼音頻信號(hào)和已解碼視頻信號(hào)可以臨時(shí)存儲(chǔ)在緩存器ex508等中,從而使得所述信號(hào)可以彼此同步地再現(xiàn)。在必要時(shí),比如蜂窩電話exll4、游戲機(jī)exll5和電視機(jī)ex300之類的輸出單元中的每個(gè)通過(guò)例如存儲(chǔ)器ex511提供所述已解碼輸出信號(hào)。盡管存儲(chǔ)器ex511在上面的描述中是在LSI ex500外部的元件,但是它可以包括在LSI ex500中。緩存器ex508不限于一個(gè)緩存器,而可以包括多個(gè)緩存器。此外,LSI ex500可以被制成一個(gè)芯片或多個(gè)芯片。這里所使用的名稱是LSI,但根據(jù)集成度,它也可以稱為IC、系統(tǒng)LSI、Super LSI 或 Ultra LSI。此外,用于實(shí)現(xiàn)集成的方式不限于LSI,專用電路或通用處理器等也可以實(shí)現(xiàn)所述集成。在制造LSI后可進(jìn)行編程的現(xiàn)場(chǎng)可編程門陣列(FPGA)或允許重新配置LSI的連接或配置的可重置處理器可以用于同樣的目的。將來(lái),隨著半導(dǎo)體技術(shù)的發(fā)展,全新的技術(shù)可以取代LSI。所述功能塊可以使用這種技術(shù)集成。一個(gè)這種可能是本發(fā)明應(yīng)用于生物技術(shù)。盡管已經(jīng)基于示例實(shí)施例,描述了根據(jù)本發(fā)明的編碼方法、編碼裝置、解碼方法和解碼裝置,但是本發(fā)明不限于上述實(shí)施例。本領(lǐng)域技術(shù)人員將容易明白的是,可以對(duì)示例實(shí)施例進(jìn)行許多修改,而不會(huì)在實(shí)質(zhì)上背離本發(fā)明的新穎性教導(dǎo)和優(yōu)點(diǎn)。相應(yīng)地,所有這些修改以及通過(guò)任意合并不同實(shí)施例的結(jié)構(gòu)元件和/或步驟而設(shè)想的其他實(shí)施例也意在包括在本發(fā)明的范圍內(nèi)。[工業(yè)適用性]根據(jù)本發(fā)明的圖像編碼裝置和圖像解碼裝置適用于電視機(jī)、數(shù)字視頻記錄器、汽車導(dǎo)航設(shè)備、蜂窩電話、數(shù)字相機(jī)或數(shù)字?jǐn)z像機(jī)等。[參考標(biāo)記列表]
26
101,901,1101 MVC 編碼器102下變換器103減法器111,1111 第一編碼器112,1112 第二編碼器113,213 復(fù)用器201,1001 MVC 解碼器202加法器211第一解碼器212第二解碼器902第一下變換器903第一減法器904第二下變換器905第二減法器1002第一加法器1003第二加法器1004 8-比特 2D 顯示1005 10-比特 2D 顯示1006 8-比特 3D 顯示1007 10-比特 3D 顯示1121,1122運(yùn)動(dòng)估計(jì)單元1123位移估計(jì)單元Dll,D23基本視像D12,D24非基本視像D13,D33,D93,D97 重構(gòu)圖像D14,D21基本視圖比特流D15,D22非基本視圖比特流D16, D35, D99 MVC 比特流D25, D53, D105 圖像序列D31, D56 10 比特圖像D32,D54基本層圖像D34,D55增強(qiáng)層圖像D36,D51基本層比特流D37,D52增強(qiáng)層比特流D38 信息D91,DllO 10-比特基本視像D92,D106基本視圖基本層圖像D94,D107基本視圖增強(qiáng)層圖像D95,Dili 10-比特非基本視像
D96,D108非基本視圖基本層圖像D98,D109非基本視圖增強(qiáng)層圖像DlOl基本視圖基本層比特流D102基本視圖增強(qiáng)層比特流D103非基本視圖基本層比特流D104非基本視圖增強(qiáng)層比特流exlOO內(nèi)容提供系統(tǒng)exlOl 互聯(lián)網(wǎng)exl02互聯(lián)網(wǎng)服務(wù)提供商exl03流服務(wù)器ex 104電話網(wǎng)絡(luò)exl06, exl07, exl08, exl09, exllO 基站exlll 計(jì)算機(jī)exll2 PDAexll3,exll6 相機(jī)exll4配備有相機(jī)的蜂窩電話(蜂窩電話)exll5 游戲機(jī)exll7 麥克風(fēng)ex200數(shù)字廣播系統(tǒng)ex201 廣播站eUO2廣播衛(wèi)星(衛(wèi)星)ex203 線纜ex204, ex205, ex601 天線ex210 汽車ex211汽車導(dǎo)航系統(tǒng)ex212再現(xiàn)裝置ex213, ex219 監(jiān)視器ex214, ex215, ex216, ex607 記錄介質(zhì)ex217 機(jī)頂盒(STB)ex218讀取器/記錄器ex220遠(yuǎn)程控制器ex230信息軌道ex231 記錄塊ex232 內(nèi)環(huán)區(qū)ex233數(shù)據(jù)記錄區(qū)ex234 外環(huán)區(qū)ex300 電視機(jī)ex301 調(diào)諧器ex302調(diào)制/解調(diào)單元
ex303復(fù)用/解復(fù)用單元ex304音頻信號(hào)處理單元ex305視頻信號(hào)處理單元ex306, ex507信號(hào)處理單元ex307 揚(yáng)聲器ex308, ex602 顯示單元ex309輸出單元ex310, ex501 控制單元ex311, ex505, ex710 電源電路單元ex312操作輸入單元ex313 橋接器ex314, ex606 插槽單元ex315馬區(qū)動(dòng)器ex316調(diào)制解調(diào)器ex317 接口單元ex318, ex319, ex320, ex321, ex404, ex508 緩存器ex400信息再現(xiàn)/記錄單元ex401 光學(xué)頭ex402調(diào)制和記錄單元ex403再現(xiàn)和解調(diào)單元ex405盤式電機(jī)ex406伺服控制單元ex407系統(tǒng)控制單元ex500 LSIex502 CPUex503存儲(chǔ)器控制器ex504流控制器ex506 流 I/Oex509 AV I/Oex510 總線ex511 存儲(chǔ)器ex603相機(jī)單元ex604 操作鍵ex605音頻輸入單元ex608音頻輸出單元ex701發(fā)送和接收電路單元ex702 LCD 控制單元ex703相機(jī)接口單元(相機(jī)I/F單元)ex704操作輸入控制單元
ex705音頻處理單元
ex706調(diào)制解調(diào)器電路單元
ex707記錄/再現(xiàn)單元
ex708復(fù)用/解復(fù)用單元
ex709圖像解碼單元
ex711主控制單元
ex712圖像編碼單元
ex713同步總線
權(quán)利要求
1.一種圖像編碼裝置,用于對(duì)所具有的比特深度大于預(yù)定比特深度的要被編碼的當(dāng)前圖像進(jìn)行編碼,所述比特深度表示每像素的信息容量,所述圖像編碼裝置包括下變換器,用于將所述當(dāng)前圖像下變換為所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像;MVC(多視圖視頻編碼)編碼器,用于對(duì)所述基本視像進(jìn)行編碼,并對(duì)已編碼的基本視像進(jìn)行解碼,以生成重構(gòu)圖像;以及減法器,用于計(jì)算所述預(yù)下變換的當(dāng)前圖像的像素值的特性和所述重構(gòu)圖像的對(duì)應(yīng)像素值的特性之間的差值,并且使用所計(jì)算出的差值,生成所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像,其中,所述MVC編碼器還對(duì)所述非基本視像進(jìn)行編碼。
2.如權(quán)利要求1所述的圖像編碼裝置,其中,所述下變換器通過(guò)下移所述當(dāng)前圖像的像素值中的每個(gè),將所述當(dāng)前圖像下變換為所述基本視像,以及所述減法器上移所述重構(gòu)圖像的像素值中的每個(gè)、以使得所述重構(gòu)圖像和所述預(yù)下變換的當(dāng)前圖像具有相同的比特深度,計(jì)算所述預(yù)下變換的當(dāng)前圖像的各個(gè)像素值和所述重構(gòu)圖像中的對(duì)應(yīng)的上移像素值之間的差值,以及使用所計(jì)算出的差值生成所述非基本視像。
3.如權(quán)利要求1所述的圖像編碼裝置,其中,所述下變換器通過(guò)將所述當(dāng)前圖像的像素值中的每個(gè)除以預(yù)定除數(shù)來(lái)將所述當(dāng)前圖像下變換為所述基本視像,以及所述減法器將所述重構(gòu)圖像的像素值中的每個(gè)乘以預(yù)定乘數(shù)、以使得所述重構(gòu)圖像和所述預(yù)下變換的當(dāng)前圖像具有相同的比特深度,計(jì)算所述預(yù)下變換的當(dāng)前圖像的各個(gè)像素值和所述重構(gòu)圖像中的對(duì)應(yīng)的相乘后的像素值之間的差值,以及使用所計(jì)算出的差值生成所述非基本視像。
4.如權(quán)利要求2所述的圖像編碼裝置,其中,所述減法器通過(guò)將預(yù)定值與所述差值中的每個(gè)差值相加以生成所述非基本視像,其中所述預(yù)定值用于使得所述非基本視像的像素值中的對(duì)應(yīng)的一個(gè)像素值變?yōu)檎怠?br>
5.如權(quán)利要求2所述的圖像編碼裝置,其中,所述減法器通過(guò)將由所述非基本視像的比特深度表示的最大像素值的一半舍入到整數(shù)而獲得的值與所述差值中的每個(gè)差值相加,生成所述非基本視像。
6.如權(quán)利要求1所述的圖像編碼裝置,其中,所述MVC編碼器通過(guò)對(duì)所述基本視像執(zhí)行運(yùn)動(dòng)估計(jì)來(lái)獲得運(yùn)動(dòng)矢量,通過(guò)使用所獲得的運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)所述基本視像進(jìn)行編碼,以及通過(guò)使用用于對(duì)所述基本視像進(jìn)行編碼的所述運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)所述非基本視像進(jìn)行編碼。
7.如權(quán)利要求1所述的圖像編碼裝置,其中,所述MVC編碼器通過(guò)對(duì)所述基本視像執(zhí)行運(yùn)動(dòng)估計(jì)來(lái)獲得第一運(yùn)動(dòng)矢量,通過(guò)使用所獲得的第一運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)所述基本視像進(jìn)行編碼,以及通過(guò)在水平方向和垂直方向上與用于對(duì)所述基本視像進(jìn)行編碼的所述第一運(yùn)動(dòng)矢量的整數(shù)部分示出的整數(shù)像素位置共同位于的整數(shù)像素位置相距1個(gè)像素的范圍內(nèi),對(duì)所述非基本視像執(zhí)行運(yùn)動(dòng)估計(jì)來(lái)獲得第二運(yùn)動(dòng)矢量,并且通過(guò)使用所獲得的第二運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)所述非基本視像進(jìn)行編碼。
8.如權(quán)利要求1所述的圖像編碼裝置,其中,所述MVC編碼器通過(guò)對(duì)所述基本視像中的運(yùn)動(dòng)估計(jì)范圍執(zhí)行運(yùn)動(dòng)估計(jì)來(lái)獲得第一運(yùn)動(dòng)矢量,通過(guò)使用所獲得的第一運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)所述基本視像進(jìn)行編碼,對(duì)所獲得的第一運(yùn)動(dòng)矢量進(jìn)行量化,以及對(duì)已量化的第一運(yùn)動(dòng)矢量進(jìn)行逆量化;以及通過(guò)在包括由逆量化的第一運(yùn)動(dòng)矢量示出的像素位置且小于所述基本視像中的所述運(yùn)動(dòng)估計(jì)范圍的范圍內(nèi),對(duì)所述非基本視像執(zhí)行運(yùn)動(dòng)估計(jì),來(lái)獲得第二運(yùn)動(dòng)矢量, 并且通過(guò)使用所獲得的第二運(yùn)動(dòng)矢量執(zhí)行運(yùn)動(dòng)預(yù)測(cè)來(lái)對(duì)所述非基本視像進(jìn)行編碼。
9.如權(quán)利要求1所述的圖像編碼裝置,其中,所述MVC編碼器通過(guò)使用視圖間預(yù)測(cè)來(lái)對(duì)所述非基本視像進(jìn)行編碼,其中所述視圖間預(yù)測(cè)假定用于視圖間預(yù)測(cè)的位移矢量的幅度為O。
10.如權(quán)利要求1所述的圖像編碼裝置,其中,所述MVC編碼器通過(guò)在水平方向和垂直方向上的1個(gè)像素的范圍內(nèi)執(zhí)行位移估計(jì),獲得要用于視圖間預(yù)測(cè)的位移矢量,以及通過(guò)使用視圖間預(yù)測(cè)對(duì)所述非基本視像進(jìn)行編碼。
11.一種圖像解碼裝置,所述圖像解碼裝置對(duì)在比特流中包括的且所具有的比特深度大于預(yù)定比特深度的要被解碼的當(dāng)前圖像進(jìn)行解碼,所述比特深度表示每像素的信息容量,所述圖像解碼裝置包括MVC(多視圖視頻編碼)解碼器,用于對(duì)所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像、以及所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像進(jìn)行解碼,所述基本視像和所述非基本視像被包括在所述比特流中;以及加法器,用于將所述基本視像的像素值中的每個(gè)和所述非基本視像的像素值中的對(duì)應(yīng)一個(gè)像素值合成為所具有的比特深度大于所述預(yù)定比特深度的當(dāng)前圖像。
12.如權(quán)利要求11所述的圖像解碼裝置,其中,所述加法器通過(guò)上移所述基本視像的像素值中的每個(gè)、以使得所述基本視像和所述當(dāng)前圖像具有相同的比特深度,并且通過(guò)將所述非基本視像的像素值中的每個(gè)與所述基本視像的上移像素值中的對(duì)應(yīng)一個(gè)像素值相加,生成所述當(dāng)前圖像。
13.如權(quán)利要求11所述的圖像解碼裝置,其中,所述加法器通過(guò)將所述基本視像的像素值中的每個(gè)與預(yù)定乘數(shù)相乘、以使得所述基本視像和所述當(dāng)前圖像具有相同的比特深度,并且通過(guò)將所述非基本視像的像素值中的每個(gè)與所述基本視像的相乘后的像素值中的對(duì)應(yīng)一個(gè)像素值相加,來(lái)生成所述當(dāng)前圖像。
14.如權(quán)利要求12所述的圖像解碼裝置,其中,所述加法器通過(guò)從通過(guò)將所述非基本視像的像素值與所述基本視像的對(duì)應(yīng)的相乘后的像素值相加而獲得的值中的每個(gè)中,減去在編碼時(shí)相加的預(yù)定值,來(lái)生成所述當(dāng)前圖像。
15.如權(quán)利要求12所述的圖像解碼裝置,其中,所述加法器通過(guò)從通過(guò)將所述非基本視像的像素值與所述基本視像的對(duì)應(yīng)的相乘后的像素值相加而獲得的值中的每個(gè)中、減去通過(guò)將由所述非基本視像的比特深度表示的最大像素值的一半舍入到整數(shù)而獲得的值,生成所述當(dāng)前圖像。
16.如權(quán)利要求15所述的圖像解碼裝置,其中,所述加法器通過(guò)調(diào)整通過(guò)將所述最大像素值的一半減去預(yù)定最小值而獲得的值中比所述預(yù)定最小值小的值、并且調(diào)整通過(guò)將所述最大像素值的一半減去預(yù)定最大值而獲得的值中比所述預(yù)定最大值大的值,生成所述當(dāng)前圖像。
17.一種圖像編碼方法,所述圖像編碼方法對(duì)所具有的比特深度大于預(yù)定比特深度的要被編碼的當(dāng)前圖像進(jìn)行編碼,所述比特深度表示每像素的信息容量,所述圖像編碼方法包括將所述當(dāng)前圖像下變換為所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像;使用MVC(多視圖視頻編碼)編碼器,對(duì)所述基本視像進(jìn)行編碼,并對(duì)已編碼的基本視像進(jìn)行解碼,以生成重構(gòu)圖像;計(jì)算所述預(yù)下變換的當(dāng)前圖像的像素值的特性和所述重構(gòu)圖像的對(duì)應(yīng)像素值的特性之間的差值,并且使用所計(jì)算出的差值,生成所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像;以及使用所述MVC編碼器對(duì)所述非基本視像進(jìn)行編碼。
18.一種圖像解碼方法,所述圖像解碼方法對(duì)在比特流中包括的且所具有的比特深度大于預(yù)定比特深度的要被解碼的當(dāng)前圖像進(jìn)行解碼,所述比特深度表示每像素的信息容量,所述圖像解碼方法包括使用MVC(多視圖視頻編碼)解碼器,對(duì)所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像、以及所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像進(jìn)行解碼,所述基本視像和所述非基本視像被包括在所述比特流中;以及將所述基本視像的像素值中的每個(gè)和所述非基本視像的像素值中的對(duì)應(yīng)一個(gè)像素值合成為所具有的比特深度大于所述預(yù)定比特深度的當(dāng)前圖像。
19.一種集成電路,所述集成電路對(duì)所具有的比特深度大于預(yù)定比特深度的要被編碼的當(dāng)前圖像進(jìn)行編碼,所述比特深度表示每像素的信息容量,所述集成電路包括下變換器,用于將所述當(dāng)前圖像下變換為所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像;MVC(多視圖視頻編碼)編碼器,用于對(duì)所述基本視像進(jìn)行編碼,并對(duì)已編碼的基本視像進(jìn)行解碼,以生成重構(gòu)圖像;以及減法器,用于計(jì)算所述預(yù)下變換的當(dāng)前圖像的像素值的特性和所述重構(gòu)圖像的對(duì)應(yīng)的像素值的特性之間的差值,并且使用所計(jì)算出的差值,生成所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像,其中,所述MVC編碼器還對(duì)所述非基本視像進(jìn)行編碼。
20.一種集成電路,所述集成電路對(duì)在比特流中包括的且所具有的比特深度大于預(yù)定比特深度的要被解碼的當(dāng)前圖像進(jìn)行解碼,所述比特深度表示每像素的信息容量,所述集成電路包括MVC(多視圖視頻編碼)解碼器,用于對(duì)所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像、以及所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像進(jìn)行解碼,所述基本視像和所述非基本視像被包括在所述比特流中;以及加法器,用于將所述基本視像的像素值中的每個(gè)和所述非基本視像的像素值中的對(duì)應(yīng)一個(gè)像素值合成為所具有的比特深度大于所述預(yù)定比特深度的當(dāng)前圖像。
21.一種在計(jì)算機(jī)中使用的非易失性計(jì)算機(jī)可讀記錄介質(zhì),所述記錄介質(zhì)上記錄有用于使得所述計(jì)算機(jī)對(duì)所具有的比特深度大于預(yù)定比特深度的要被編碼的當(dāng)前圖像進(jìn)行編碼的計(jì)算機(jī)程序,所述比特深度表示每像素的信息容量,所述編碼包括將所述當(dāng)前圖像下變換為所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像;使用MVC(多視圖視頻編碼)編碼器,對(duì)所述基本視像進(jìn)行編碼,并對(duì)已編碼的基本視像進(jìn)行解碼,以生成重構(gòu)圖像;計(jì)算所述預(yù)下變換的當(dāng)前圖像的像素值的特性和所述重構(gòu)圖像的對(duì)應(yīng)的像素值的特性之間的差值,并使用所計(jì)算出的差值,生成所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像;以及使用所述MVC編碼器對(duì)所述非基本視像進(jìn)行編碼。
22.—種在計(jì)算機(jī)中使用的非易失性計(jì)算機(jī)可讀記錄介質(zhì),所述記錄介質(zhì)上記錄有用于使得所述計(jì)算機(jī)對(duì)在比特流中包括的且所具有的比特深度大于預(yù)定比特深度的要被解碼的當(dāng)前圖像進(jìn)行解碼的計(jì)算機(jī)程序,所述比特深度表示每像素的信息容量,所述解碼包括使用MVC (多視圖視頻編碼)解碼器,對(duì)所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像、以及所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像進(jìn)行解碼,所述基本視像和所述非基本視像被包括在所述比特流中;以及將所述基本視像的像素值中的每個(gè)和所述非基本視像的像素值中的對(duì)應(yīng)一個(gè)像素值合成為所具有的比特深度大于所述預(yù)定比特深度的當(dāng)前圖像。
全文摘要
提供一種使用對(duì)比特深度實(shí)行限制的編碼器來(lái)對(duì)所具有的比特深度大于預(yù)定比特深度的要被編碼的當(dāng)前圖像進(jìn)行編碼的圖像編碼裝置,并且所述圖像編碼裝包括下變換器(102),用于將所述當(dāng)前圖像下變換為所具有的比特深度等于或小于所述預(yù)定比特深度的基本視像;MVC(多視圖視頻編碼)編碼器(101),用于對(duì)所述基本視像進(jìn)行編碼并對(duì)所述已編碼基本視像進(jìn)行解碼以生成重構(gòu)圖像;以及減法器(103),用于計(jì)算所述預(yù)下變換的當(dāng)前圖像的像素值的特性和所述重構(gòu)圖像的對(duì)應(yīng)像素值的特性之間的差值,并且使用所計(jì)算出的差值,生成所具有的比特深度等于或小于所述預(yù)定比特深度的非基本視像,其中所述MVC編碼器(101)還對(duì)所述非基本視像進(jìn)行編碼。
文檔編號(hào)H04N7/12GK102224731SQ201080003267
公開(kāi)日2011年10月19日 申請(qǐng)日期2010年9月21日 優(yōu)先權(quán)日2009年9月22日
發(fā)明者柏木吉一郎, 西孝啟, 陳濤 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社