偏移解碼裝置、偏移編碼裝置、圖像濾波器裝置以及數(shù)據(jù)結(jié)構(gòu)的制作方法
【專利摘要】自適應(yīng)偏移濾波器(60)對(duì)輸入圖像的各像素值加上偏移，參考偏移類型指定信息，設(shè)定輸入圖像的對(duì)象單位區(qū)域中的偏移屬性，對(duì)具有與所設(shè)定的偏移屬性中包含的偏移值域相應(yīng)的比特寬度的偏移進(jìn)行解碼，并且對(duì)上述輸入圖像的各像素值加上上述偏移。
【專利說明】偏移解碼裝置、偏移編碼裝置、圖像濾波器裝置以及數(shù)據(jù)結(jié)
構(gòu)
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及進(jìn)行圖像的濾波的圖像濾波器裝置。此外，涉及對(duì)由圖像濾波器參考的偏移進(jìn)行解碼的偏移解碼裝置、以及對(duì)由圖像濾波器參考的偏移進(jìn)行編碼的偏移編碼裝置。此外，涉及編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)。
【背景技術(shù)】
[0002]為了高效地傳輸或者記錄運(yùn)動(dòng)圖像，使用了通過對(duì)運(yùn)動(dòng)圖像進(jìn)行編碼從而生成編碼數(shù)據(jù)的運(yùn)動(dòng)圖像編碼裝置(編碼裝置)、以及通過對(duì)該編碼數(shù)據(jù)進(jìn)行解碼從而生成解碼圖像的運(yùn)動(dòng)圖像解碼裝置(解碼裝置)。作為具體的運(yùn)動(dòng)圖像編碼方式，例如，可以列舉:H.264 / MPEG-4.AVC 中采用的方式、VCEG (Video Coding Expert Group,視頻編碼專家組)中的共同開發(fā)用編解碼器即KTA軟件中采用的方式、作為其后繼編解碼器的TMuC(TestModel under Consideration,考慮中的測(cè)試模型)軟件中采用的方式、以及HM(HEVCTestModel，高效率視頻編碼測(cè)試模型)軟件中采用的方式等。
[0003]在這種編碼方式中，構(gòu)成運(yùn)動(dòng)圖像的圖像(圖片)通過層次結(jié)構(gòu)進(jìn)行管理，多數(shù)情況下，以區(qū)塊為最小單位進(jìn)行編碼，所述層次結(jié)構(gòu)由通過分割圖像而得到的切片(slice)、通過分割切片而得到的最大編碼單位(IXU:Largest Coding Unit ;也稱為樹區(qū)塊)、通過分割最大編碼單位而得到的編碼單位(CU =Coding Unit;也稱為編碼節(jié)點(diǎn))、以及通過分割編碼單位而得到的區(qū)塊以及分區(qū)構(gòu)成。
[0004]此外，在這種編碼方式中，通?；谕ㄟ^對(duì)輸入圖像進(jìn)行編碼/解碼而得到的局部解碼圖像來生成預(yù)測(cè)圖像，并且對(duì)該預(yù)測(cè)圖像與輸入圖像的差分?jǐn)?shù)據(jù)進(jìn)行編碼。此外，作為預(yù)測(cè)圖像的生成方法，已知稱為畫面間預(yù)測(cè)(幀間預(yù)測(cè))、以及畫面內(nèi)預(yù)測(cè)(幀內(nèi)預(yù)測(cè))的方法。
[0005]在幀內(nèi)預(yù)測(cè)中，基于同一幀內(nèi)的局部解碼圖像，依次生成該幀中的預(yù)測(cè)圖像。具體而言，在幀內(nèi)預(yù)測(cè)中，通常按每個(gè)預(yù)測(cè)單位(例如，區(qū)塊)，從預(yù)先規(guī)定的預(yù)測(cè)方向(預(yù)測(cè)模式)群中包含的預(yù)測(cè)方向選擇任一個(gè)預(yù)測(cè)方向，并且通過向所選擇的預(yù)測(cè)方向外插局部解碼圖像中的參考像素的像素值，來生成預(yù)測(cè)對(duì)象區(qū)域上的預(yù)測(cè)像素值。此外，在幀間預(yù)測(cè)中，對(duì)于對(duì)幀整體進(jìn)行解碼所得的參考幀(解碼圖像)內(nèi)的參考圖像，應(yīng)用使用了運(yùn)動(dòng)矢量的運(yùn)動(dòng)補(bǔ)償，由此按每個(gè)預(yù)測(cè)單位(例如，區(qū)塊)生成預(yù)測(cè)對(duì)象幀內(nèi)的預(yù)測(cè)圖像。
[0006]在非專利文獻(xiàn)I以及非專利文獻(xiàn)2中公開了導(dǎo)入到使解碼圖像的塊失真減少的去區(qū)塊濾波器的后級(jí)、且進(jìn)行使用了自適應(yīng)地決定的濾波器系數(shù)的濾波處理的自適應(yīng)循環(huán)濾波器(也稱為“自適應(yīng)濾波器”)的前級(jí)的自適應(yīng)的偏移濾波器(也稱為“自適應(yīng)偏移濾波器”)。該自適應(yīng)偏移濾波器，對(duì)從去區(qū)塊濾波器輸出的圖像的各像素值加上自適應(yīng)地設(shè)定的偏移。
[0007]通過具備這種自適應(yīng)偏移濾波器，能夠更有效地抑制塊失真。
[0008]現(xiàn)有技術(shù)文獻(xiàn)[0009]非專利文獻(xiàn)
[0010]非專利文獻(xiàn)I JCTVC-D122”，Joint Collaborative Team on VideoCoding (JCT-VC) of ITU-T SG16WP3and ISO / IEC JTCl / SC29 / WGlI，4th Meeting:Daegu, KR,01 / 2011
[0011]非專利文獻(xiàn)2:“JCTVC_E049”，Joint Collaborative Team on VideoCoding (JCT-VC) of ITU-T SG16WP3and ISO / IEC JTCl / SC29 / WGlI，5th Meeting:Geneva, CH,03 / 2011

【發(fā)明內(nèi)容】

[0012]發(fā)明要解決的課題
[0013]但是，以往的自適應(yīng)偏移濾波器中所使用的偏移，具有如下問題:因?yàn)闆]有設(shè)定值的范圍，比特?cái)?shù)較大，所以需要用于預(yù)先存儲(chǔ)偏移的較大的存儲(chǔ)器大小。
[0014]本發(fā)明鑒于上述問題而研發(fā)，目的在于實(shí)現(xiàn)一種圖像濾波器裝置，能夠抑制存儲(chǔ)器大小的增大并且減少塊失真。
[0015]用于解決課題的方案
[0016]為了解決上述問題，本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器裝置，其特征在于具備:偏移屬性設(shè)定單元，其參考編碼數(shù)據(jù)，設(shè)定偏移值域；偏移解碼單元，其解碼被限制在上述設(shè)定的偏移值域的偏移；和濾波器單元，其對(duì)上述輸入圖像的各像素值加上上述偏移。
[0017]根據(jù)上述那樣所構(gòu)成的圖像濾波器裝置，通過上述偏移屬性設(shè)定單元設(shè)定偏移值域，通過上述偏移解碼單元對(duì)具有與所設(shè)定的偏移值域相對(duì)應(yīng)的比特寬度的偏移進(jìn)行解碼，所以能夠有效地削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小。
[0018]因此，根據(jù)上述構(gòu)成，能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小的同時(shí)，進(jìn)行適當(dāng)?shù)钠茷V波處理。
[0019]此外，本發(fā)明所涉及的偏移解碼裝置是一種對(duì)由對(duì)輸入圖像的各像素值加上偏移的圖像濾波器所參考的各偏移進(jìn)行解碼的偏移解碼裝置，其特征在于具備:偏移殘差解碼單元，其從編碼數(shù)據(jù)解碼各偏移殘差；預(yù)測(cè)值導(dǎo)出單元，其根據(jù)已經(jīng)解碼的偏移，導(dǎo)出各偏移的預(yù)測(cè)值；和偏移計(jì)算單元，其根據(jù)由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值、以及由上述偏移殘差解碼單兀所解碼的偏移殘差，計(jì)算各偏移。
[0020]根據(jù)上述那樣所構(gòu)成的偏移解碼裝置，因?yàn)榫邆涓鶕?jù)編碼數(shù)據(jù)解碼各偏移殘差的偏移殘差解碼單元、根據(jù)已經(jīng)解碼的偏移導(dǎo)出各偏移的預(yù)測(cè)值的預(yù)測(cè)值導(dǎo)出單元、和根據(jù)由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值、以及由上述偏移殘差解碼單元所解碼的偏移殘差計(jì)算各偏移的偏移計(jì)算單元，所以與直接解碼各偏移的情況相比，能夠根據(jù)碼量較少的編碼數(shù)據(jù)適當(dāng)?shù)亟獯a偏移。
[0021]此外，本發(fā)明所涉及的圖像濾波器裝置是一種作用于輸入圖像的圖像濾波器裝置，其特征在于具備:計(jì)算單元，其計(jì)算輸入圖像中的對(duì)象像素的像素值與該對(duì)象像素的周邊像素的像素值的差分值；比特移位單元，其使由上述計(jì)算單元所參考的像素值、或者由上述計(jì)算單元所計(jì)算出的差分值右比特移位給定移位值；分類單元，其根據(jù)由上述比特移位單元進(jìn)行了右比特移位的差分值與O的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別中的任一個(gè)；和偏移單元，其對(duì)上述對(duì)象像素的像素值加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移。
[0022]根據(jù)上述那樣所構(gòu)成的圖像濾波器裝置，根據(jù)進(jìn)行了右比特移位的差分值與O的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別中的任一個(gè)，并且對(duì)上述對(duì)象像素的像素值加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移，所以類別分類處理難以受到噪聲的影響，編碼效率提高。
[0023]此外，本發(fā)明所涉及的圖像濾波器裝置是一種作用于輸入圖像的圖像濾波器裝置，其特征在于具備:計(jì)算單元，其計(jì)算輸入圖像中的對(duì)象像素的像素值與該對(duì)象像素的周邊像素的像素值的差分值；分類單元，其根據(jù)由上述計(jì)算單元所計(jì)算出的差分值與預(yù)先決定的第I閾值以及第2閾值的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別中的任一個(gè)；和偏移單元，其對(duì)上述對(duì)象像素的像素值加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移。
[0024]上述那樣所構(gòu)成的圖像濾波器裝置根據(jù)由上述計(jì)算單元所計(jì)算出的差分值與預(yù)先決定的第I閾值以及第2閾值的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別的任一個(gè)，并且對(duì)上述對(duì)象像素的像素值加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移，所以類別分類處理難以受到噪聲的影響，編碼效率提高。
[0025]此外，本發(fā)明所涉及的圖像濾波器裝置是一種作用于由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的圖像濾波器裝置，其特征在于具備:決定單元，其從第I偏移類型以及第2偏移類型中決定包含輸入圖像中的對(duì)象像素的對(duì)象單位區(qū)域所屬的偏移類型；分類單元，其根據(jù)上述對(duì)象單位區(qū)域所屬的偏移類型、以及上述對(duì)象像素的像素值，將上述對(duì)象像素分類為不加上偏移的偏移類別、以及加上偏移的多個(gè)偏移類別中的任一個(gè)；和偏移單元，其對(duì)上述對(duì)象像素的像素值，加上與上述對(duì)象單位區(qū)域所屬的偏移類型以及由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移，上述分類單元在上述對(duì)象像素的像素值處于給定范圍內(nèi)時(shí)，無論包含上述對(duì)象像素的單位區(qū)域所屬的偏移類型是上述第I偏移類型以及上述第2偏移類型的哪一個(gè)，都將上述對(duì)象像素分類為加上偏移的偏移類別。
[0026]根據(jù)上述那樣所構(gòu)成的圖像濾波器裝置，在上述對(duì)象像素的像素值處于給定范圍內(nèi)時(shí)，無論包含上述對(duì)象像素的單位區(qū)域所屬的偏移類型是上述第I偏移類型以及上述第2偏移類型的哪一個(gè)，都將上述對(duì)象像素分類為加上偏移的偏移類別，所以能夠有效地去除區(qū)塊噪聲。因此，根據(jù)上述構(gòu)成，能夠?qū)崿F(xiàn)編碼效率的提高。
[0027]此外，本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器裝置，其特征在于具備:決定單元，其從多個(gè)偏移類型中決定處理對(duì)象的單位區(qū)域所屬的偏移類型；偏移編碼單元，其根據(jù)上述偏移類型，決定具有不同的比特寬度的偏移，并且對(duì)該偏移進(jìn)行編碼；和濾波器單元，其對(duì)上述輸入圖像的各像素值加上上述決定的偏移。
[0028]根據(jù)上述那樣所構(gòu)成的圖像濾波器裝置，從多個(gè)偏移類型中決定處理對(duì)象的單位區(qū)域所屬的偏移類型，根據(jù)所決定的偏移類型，決定具有不同的比特寬度的偏移，并且對(duì)上述輸入圖像的各像素加上所決定的偏移。此外，對(duì)所決定的偏移進(jìn)行編碼。
[0029]因此，根據(jù)上述構(gòu)成，能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小，同時(shí)能夠進(jìn)行適當(dāng)?shù)钠茷V波處理。此外，根據(jù)上述構(gòu)成，編碼數(shù)據(jù)的碼量被削減，所以編碼效率提高。[0030]此外，本發(fā)明所涉及的偏移編碼裝置是一種對(duì)由對(duì)輸入圖像的各像素值加上偏移的圖像濾波器所參考的各偏移進(jìn)行編碼的偏移編碼裝置，其特征在于具備:預(yù)測(cè)值導(dǎo)出單元，其根據(jù)已經(jīng)編碼的偏移，導(dǎo)出各偏移的預(yù)測(cè)值；偏移殘差計(jì)算單元，其根據(jù)各偏移和由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值，計(jì)算偏移殘差；和偏移殘差編碼單元，其對(duì)由上述偏移殘差計(jì)算單元所計(jì)算出的偏移殘差進(jìn)行編碼。
[0031]根據(jù)如上述那樣所構(gòu)成的偏移編碼裝置，因?yàn)榫邆涓鶕?jù)已經(jīng)編碼的偏移導(dǎo)出各偏移的預(yù)測(cè)值的預(yù)測(cè)值導(dǎo)出單元、根據(jù)各偏移和由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值計(jì)算偏移殘差的偏移殘差計(jì)算單兀、和對(duì)由上述偏移殘差計(jì)算單兀所計(jì)算出的偏移殘差進(jìn)行編碼的偏移殘差編碼單元，所以能夠削減編碼數(shù)據(jù)的碼量。
[0032]此外，本發(fā)明所涉及的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)是由對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器所參考的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)，其特征在于，
[0033]包含指定各單位區(qū)域所屬的偏移類型的偏移類型指定信息、和根據(jù)該偏移類型具有不同的比特寬度的偏移，上述圖像濾波器參考上述編碼數(shù)據(jù)中包含的偏移類型指定信息，決定處理對(duì)象的單位區(qū)域所屬的偏移類型，并且根據(jù)所決定的偏移類型對(duì)具有不同的比特寬度的偏移進(jìn)行解碼。
[0034]上述那樣所構(gòu)成的編碼數(shù)據(jù)包含根據(jù)偏移類型具有不同的比特寬度的偏移，所以編碼數(shù)據(jù)的碼量被削減。此外，對(duì)上述編碼數(shù)據(jù)進(jìn)行解碼的圖像濾波器參考上述偏移類型指定信息決定處理對(duì)象的單位區(qū)域所屬的偏移類型，并且根據(jù)所決定的偏移類型解碼具有不同的比特寬度的偏移，所以能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小，同時(shí)能夠進(jìn)行適當(dāng)?shù)钠茷V波處理。
[0035]另外，上述偏移類型指定信息可以按每個(gè)上述輸入圖像來決定，也可以按每個(gè)上述單位區(qū)域來決定。此外，可以按上述輸入圖像的每個(gè)給定集來決定，也可以按上述單位區(qū)域的每個(gè)給定集來決定。
[0036]發(fā)明效果
[0037]如上所述，本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器裝置，具備:偏移屬性設(shè)定單元，其參考編碼數(shù)據(jù)，設(shè)定偏移值域；偏移解碼單元，其對(duì)限制于上述設(shè)定的偏移值域的偏移進(jìn)行解碼；和濾波器單元，其對(duì)上述輸入圖像的各像素值加上上述偏移。
[0038]此外，本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器裝置，具備:決定單元，其從多個(gè)偏移類型中決定處理對(duì)象的單位區(qū)域所屬的偏移類型；偏移編碼單元，其根據(jù)上述偏移類型，決定具有不同的比特寬度的偏移，并且對(duì)該偏移進(jìn)行編碼；和濾波器單元，其對(duì)上述輸入圖像的各像素值加上上述決定的偏移。
[0039]此外，本發(fā)明所涉及的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)，是由對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器所參考的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)，包含指定各單位區(qū)域所屬的偏移類型的偏移類型指定信息、和根據(jù)該偏移類型具有不同的比特寬度的偏移，上述圖像濾波器參考上述編碼數(shù)據(jù)中包含的偏移類型指定信息，決定處理對(duì)象的單位區(qū)域所屬的偏移類型，并且根據(jù)所決定的偏移類型對(duì)具有不同的比特寬度的偏移進(jìn)行解碼。
[0040]根據(jù)上述構(gòu)成，能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小，同時(shí)能夠使圖像濾波 器進(jìn)行適當(dāng)?shù)钠茷V波處理。
【專利附圖】

【附圖說明】
[0041]圖1是表示本發(fā)明的第I實(shí)施方式所涉及的自適應(yīng)偏移濾波器的構(gòu)成的框圖。
[0042]圖2是表示本發(fā)明的第I實(shí)施方式所涉及的由運(yùn)動(dòng)圖像編碼裝置生成、并且由運(yùn)動(dòng)圖像解碼裝置解碼的編碼數(shù)據(jù)的數(shù)據(jù)構(gòu)成的圖，(a)?(d)分別示出圖片層、切片層、樹區(qū)塊層、以及CU層，(e)示出與不是葉子的QAOU相關(guān)的QAOU信息的構(gòu)成，(f)示出與葉子的QAOU相關(guān)的QAOU信息的構(gòu)成。
[0043]圖3是表示本發(fā)明的第I實(shí)施方式所涉及的編碼數(shù)據(jù)的偏移信息OI中包含的各句法的圖。
[0044]圖4是表示本發(fā)明的第I實(shí)施方式所涉及的偏移單位的分割方式的圖，(a)示出 sao_curr_depth=0 的情況，(b)不出 sao_curr_depth=l 的情況，(C)不出 sao_curr_depth=2 的情況，(d)示出 sao_curr_depth=3 的情況，(e)示出 sao_curr_depth=4 的情況。
[0045]圖5是表示本發(fā)明的第I實(shí)施方式所涉及的運(yùn)動(dòng)圖像解碼裝置的構(gòu)成的框圖。
[0046]圖6是用于說明本發(fā)明的第I實(shí)施方式的圖，(a)示出構(gòu)成對(duì)象處理單位的分割深度3的各QAOMU和分配給各QAOMU的QAOU索引，(b)示出與QAOU索引O?9的各個(gè)建立了關(guān)聯(lián)的偏移類型以及與各偏移類型中能夠選擇的各類別相關(guān)的偏移。
[0047]圖7是表示在本發(fā)明的第I實(shí)施方式中對(duì)象處理單位中所包含的QAOMU所附加的QAOMU編號(hào)的一例的圖，(a)示出對(duì)分割深度為O的QAOMU所附加的QAOMU編號(hào)，(b)示出對(duì)分割深度為I的QAOMU所附加的QAOMU編號(hào)，(c)示出對(duì)分割深度為2的QAOMU所附加的QAOMU編號(hào)，(d)示出對(duì)分割深度為3的QAOMU所附加的QAOMU編號(hào)，(e)示出對(duì)分割深度為4的QAOMU所附加的QAOMU編號(hào)。
[0048]圖8是表示本發(fā)明的第I實(shí)施方式所涉及的自適應(yīng)偏移濾波器處理部執(zhí)行的處理流程的流程圖。
[0049]圖9是將由本發(fā)明的第I實(shí)施方式所涉及的自適應(yīng)濾波器具備的偏移屬性設(shè)定部所設(shè)定的偏移的比特深度以及移位值的例子與像素的比特深度一起進(jìn)行表示的圖，(a)?(d)分別示出與型式SI?S4對(duì)應(yīng)的例子，(e)示出在(d)中STEP=2的情況。
[0050]圖10是用于說明本發(fā)明的第I實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移處理的圖，(a)?(d)分別示出sao_type_idx=l?4時(shí)所參考的像素。
[0051]圖11是用于說明本發(fā)明的第I實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移處理的圖，(a)示出表示處理對(duì)象像素X的像素值pic[X]與像素a或者b的像素值的大小關(guān)系的曲線、以及與該大小關(guān)系對(duì)應(yīng)的函數(shù)Sign的值，(b)示出表示處理對(duì)象像素X的像素值與像素a以及b的像素值的大小關(guān)系的曲線、以及與該大小關(guān)系對(duì)應(yīng)的EgdeType的值，(C)示出(b)中所示的各曲線與class_idx的對(duì)應(yīng)，(d)示出表示從EgdeType向class_idx的變換的變換表。
[0052]圖12是用于說明本發(fā)明的第I實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移處理的圖，(a)概略示出sao_type_idx=5時(shí)的類別分類，(b)概略示出sao_type_idx=6時(shí)的類別分類，(C)是表示指定了帶偏移的情況下的類別分類的一例的表。
[0053]圖13是用于說明本發(fā)明的第I實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移處理的圖，是表示指定了帶偏移的情況下的類別分類的其他例的表。
[0054]圖14是表示本發(fā)明的第I實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置的構(gòu)成的框圖。
[0055]圖15是表示本發(fā)明的第I實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置具備的自適應(yīng)偏移濾波器的構(gòu)成的框圖。
[0056]圖16是表示本發(fā)明的第I實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置具備的自適應(yīng)偏移濾波器的偏移計(jì)算部執(zhí)行的處理流程的流程圖。
[0057]圖17是表示本發(fā)明的第I實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置具備的自適應(yīng)偏移濾波器的偏移信息選擇部執(zhí)行的處理流程的流程圖。
[0058]圖18是用于說明本發(fā)明的第I實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置具備的自適應(yīng)偏移濾波器的偏移信息選擇部執(zhí)行的處理的圖，(a)示出分割深度為O以及I時(shí)的分割形態(tài)，(b)示出分割深度為I時(shí)的分割形態(tài)，(C)示出分割深度為2時(shí)的分割形態(tài)，(d)示出由偏移信息選擇部所決定的分割的一例。
[0059]圖19是表示本發(fā)明的第2實(shí)施方式所涉及的運(yùn)動(dòng)圖像解碼裝置具備的自適應(yīng)偏移濾波器的構(gòu)成的框圖。
[0060]圖20是用于說明本發(fā)明的第2實(shí)施方式所涉及的自適應(yīng)偏移濾波器的圖，(a)示出函數(shù) merge_tbl [sao_type_idx]的第 I 具體例，(b)不出函數(shù) merge_tbl [sao_type_idx]的第2具體例。
[0061]圖21是表示本發(fā)明的第2實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置具備的自適應(yīng)偏移濾波器的構(gòu)成的框圖。
[0062]圖22是表示本發(fā)明的第3實(shí)施方式所涉及的自適應(yīng)偏移濾波器的構(gòu)成的框圖。
[0063]圖23是表示上述第3實(shí)施方式所涉及的編碼數(shù)據(jù)的偏移信息OI的句法的圖。
[0064]圖24是用于說明上述第3實(shí)施方式的圖，(a)是表示構(gòu)成對(duì)象處理單位的分割深度3的各QAOMU和分配給各QAOMU的QAOU索引的圖，(b)是表示與QAOU索引O?9的各個(gè)建立了關(guān)聯(lián)的偏移類型以及與各偏移類型中能夠選擇的各類別相關(guān)的偏移的圖。
[0065]圖25是表不上述第3實(shí)施方式所涉及的偏移信息解碼部使用的變換表的圖。
[0066]圖26是用于說明上述第3實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移處理的圖，(a)是示出表示處理對(duì)象像素X的像素值pix[x]與像素a或b的像素值的大小關(guān)系的曲線、以及與該大小關(guān)系相應(yīng)的函數(shù)Sign的值的圖，(b)是示出表示處理對(duì)象像素X的像素值與像素a以及b的像素值的大小關(guān)系的曲線、以及與該大小關(guān)系相應(yīng)的EgdeType的值的圖，(C)是表示(b)中所示的各曲線與class_idx的對(duì)應(yīng)的圖，(d)?(f)是示出表示從EgdeType向class_idx的變換的變換表的圖。
[0067]圖27是用于說明上述第3實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移處理的圖，(a)是概略地表示sao_type_idx=5時(shí)的類別分類的圖，(b)是概略地表示sao_type_idx=6時(shí)的類別分類的圖。
[0068]圖28是用于說明上述第3實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移處理的圖，(a)是概略地表示處理對(duì)象的QAOU的層次深度小于閾值時(shí)的類別分類的圖，(b)是概略地表示處理對(duì)象的QAOU的層次深度為閾值以上時(shí)的類別分類的圖。
[0069]圖29是表示在上述第3實(shí)施方式中指定了帶偏移的情況下的類別分類的一例的圖，(a)是表示處理對(duì)象的QAOU的層次深度小于閾值時(shí)的類別分類的一例的圖，(b)是表示處理對(duì)象的QAOU的層次深度為閾值以上時(shí)的類別分類的一例的圖。
[0070]圖30是表示上述第3實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置具備的自適應(yīng)偏移濾波器的構(gòu)成的框圖。
[0071]圖31是表示在上述第3實(shí)施方式中對(duì)于QAOU索引為“x”的QAOU計(jì)算出各個(gè)偏移類型的平方誤差的概要的圖。
[0072]圖32是用于說明在本發(fā)明所涉及的第4實(shí)施方式中根據(jù)像素值切換EO和BO的構(gòu)成的圖，(a)是用于說明根據(jù)像素值切換EO和BO的構(gòu)成的概要的圖，(b)是用于說明具體的切換值的圖，(C)是表示偏移信息存儲(chǔ)部621中存儲(chǔ)的表存儲(chǔ)器的內(nèi)容的圖。
[0073]圖33是用于說明在本發(fā)明所涉及的第5實(shí)施方式中將EO的類型限定為水平方向的情況的圖，(a)是用于說明效果的概要的圖，(b)是用于說明水平方向的像素的位置的圖，(C)是用于說明與(b)不同的狀態(tài)的圖，(d)是用于說明(C)的效果的圖。
[0074]圖34是用于說明在上述第5實(shí)施方式中將EO的類型限定為水平方向的情況的圖，(a)以及(b)是表示要參考的像素處于非對(duì)稱的位置的情況的圖，(C)是表示水平邊緣的概要的圖。
[0075]圖35是表示在本發(fā)明所涉及的第6實(shí)施方式中使偏移的精度提高的情況的概要的圖。
[0076]圖36是表示在上述第6實(shí)施方式中對(duì)類別分類進(jìn)行細(xì)分的情況的概要的圖，(a)是表示變換表的圖，(b)?(d)是用于說明類別分割的圖。
[0077]圖37是用于說明在上述第6實(shí)施方式中根據(jù)色差進(jìn)行類別分類的情況的圖，(a)是用于說明考慮了非彩色的像素值的類別分類的圖，(b)是用于說明在夾著非彩色的像素值的2個(gè)值域非對(duì)稱的類別分類的圖，(c)以及(d)是用于說明按每色彩通道(Cr或者Cb)而不同的類別分類的圖，(e)是用于說明使BO的類別分類為一個(gè)的情況的圖。
[0078]圖38是在本發(fā)明所涉及的第7實(shí)施方式中表示偏移信息解碼部的構(gòu)成的框圖。
[0079]圖39是表示在上述第7實(shí)施方式中存在沒有被分類的像素的類別的情況的概要的圖。
[0080]圖40是表示在上述第7實(shí)施方式中使用預(yù)測(cè)候補(bǔ)標(biāo)志的情況的句法的圖。
[0081]圖41是表示上述第5實(shí)施方式所涉及的偏移信息解碼部的構(gòu)成的框圖。
[0082]圖42的(a)是表示上述第5實(shí)施方式所涉及的使用偏移類型選擇部的構(gòu)成的框圖，(b)是表示其他的使用偏移類型選擇部的構(gòu)成的框圖。
[0083]圖43是表示上述第5實(shí)施方式所涉及的類別分類部的構(gòu)成的框圖。
[0084]圖44是表不上述第3實(shí)施方式所涉及的偏移彳目息以及QAOU彳目息的句法的圖，(a)是表示偏移信息的句法的圖，(b)是表示QAOU信息的句法的圖，(c)是表示調(diào)用(a)以及(b)所示的句法的自適應(yīng)偏移濾波器整體的句法的圖。
[0085]圖45是用于說明運(yùn)動(dòng)圖像解碼裝置以及運(yùn)動(dòng)圖像編碼裝置能夠利用于運(yùn)動(dòng)圖像的收發(fā)的圖，(a)是表示搭載了運(yùn)動(dòng)圖像編碼裝置的發(fā)送裝置的構(gòu)成的框圖，(b)是表示搭載了運(yùn)動(dòng)圖像解碼裝置的接收裝置的構(gòu)成的框圖。
[0086]圖46是用于說明運(yùn)動(dòng)圖像解碼裝置以及運(yùn)動(dòng)圖像編碼裝置能夠利用于運(yùn)動(dòng)圖像的記錄以及再生的圖，(a)是表示搭載了運(yùn)動(dòng)圖像編碼裝置2的記錄裝置的構(gòu)成的框圖，(b)是表示搭載了運(yùn)動(dòng)圖像解碼裝置的再生裝置的構(gòu)成的框圖?！揪唧w實(shí)施方式】
[0087]〔實(shí)施方式I〕
[0088](編碼數(shù)據(jù)#1)
[0089]在進(jìn)行本實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置2以及運(yùn)動(dòng)圖像解碼裝置I的詳細(xì)說明之前，先對(duì)由運(yùn)動(dòng)圖像編碼裝置2生成、并且由運(yùn)動(dòng)圖像解碼裝置I解碼的編碼數(shù)據(jù)#1的數(shù)據(jù)結(jié)構(gòu)進(jìn)行說明。
[0090]圖2是表示編碼數(shù)據(jù)#1的數(shù)據(jù)結(jié)構(gòu)的圖。作為示例，編碼數(shù)據(jù)#1包括序列、以及構(gòu)成序列的多個(gè)圖片。
[0091]在圖2中示出編碼數(shù)據(jù)#1中的圖片層以下的層次的結(jié)構(gòu)。圖2的(a)?(d)分別是表示規(guī)定圖片PICT的圖片層、規(guī)定切片S的切片層、規(guī)定樹區(qū)塊(Tree block)TBLK的樹區(qū)塊層、規(guī)定樹區(qū)塊TBLK中包含的編碼單位(Coding Unit ;CT)的⑶層的圖。
[0092](圖片層)
[0093]在圖片層中，規(guī)定了運(yùn)動(dòng)圖像解碼裝置I為了對(duì)處理對(duì)象的圖片PICT(以下也稱為“對(duì)象圖片”)進(jìn)行解碼而參考的數(shù)據(jù)的集合。如圖2的(a)所示，圖片PICT包含圖片頭PH、以及切片SI?SNS (NS是圖片PICT中包含的切片的總數(shù))。
[0094]另外，以下在不需要區(qū)別切片SI?SNS的各個(gè)的情況下，有時(shí)省略碼的后綴來記述。此外，對(duì)于以下進(jìn)行說明的編碼數(shù)據(jù)#1中包含的帶有后綴的其他數(shù)據(jù)也相同。
[0095]在圖片頭PH中包含運(yùn)動(dòng)圖像解碼裝置I為了決定對(duì)象圖片的解碼方法而參考的編碼參數(shù)群。例如，表示運(yùn)動(dòng)圖像編碼裝置2在編碼時(shí)使用的可變長編碼的模式的編碼模式信息(entropy_coding_mode_flag),是圖片頭PH中包含的編碼參數(shù)的一例。
[0096]在entropy_coding_mode_flag 為 O 的情況下，該圖片 PICT 通過CAVLC (Context-based Adaptive Variable Length Coding,基于上下文的自適應(yīng)變長編碼)進(jìn)行了編碼。此外，在entropy_coding_mode_flag為I的情況下，該圖片PICT通過CABAC (Context-based Adaptive Binary Arithmetic Coding,基于上下文的自適應(yīng)二進(jìn)制算術(shù)編碼)進(jìn)行了編碼。
[0097]另外，圖片頭PH也被稱為圖片參數(shù)集(PPS:Picture Parameter Set)。
[0098](切片層)
[0099]在切片層中，規(guī)定運(yùn)動(dòng)圖像解碼裝置I為了對(duì)處理對(duì)象的切片S(也稱為“對(duì)象切片，，)進(jìn)行解碼而參考的數(shù)據(jù)的集合。如圖2的(b)所示，切片S包含切片頭SH、以及樹區(qū)塊TBLKl?TBLKNC (NC是切片S中包含的樹區(qū)塊的總數(shù))的序列。
[0100]在切片頭SH中包含運(yùn)動(dòng)圖像解碼裝置I為了決定對(duì)象切片的解碼方法而參考的編碼參數(shù)群。指定切片類型的切片類型指定信息(Slicejype)，是切片頭SH中包含的編碼參數(shù)的一例。
[0101]作為通過切片類型指定信息能夠指定的切片類型，可以列舉:(I)編碼時(shí)僅使用幀內(nèi)預(yù)測(cè)的I切片；(2)編碼時(shí)使用單方向預(yù)測(cè)、或者幀內(nèi)預(yù)測(cè)的P切片；(3)編碼時(shí)使用單方向預(yù)測(cè)、雙方向預(yù)測(cè)、或者幀內(nèi)預(yù)測(cè)的B切片等。
[0102]此外，在切片頭SH中包含由運(yùn)動(dòng)圖像解碼裝置I具備的自適應(yīng)濾波器參考的濾波器參數(shù)FP。另外，也可以采用在圖片頭PH中包含濾波器參數(shù)FP的構(gòu)成。[0103](樹區(qū)塊層)
[0104]在樹區(qū)塊層中，規(guī)定運(yùn)動(dòng)圖像解碼裝置I為了對(duì)處理對(duì)象的樹區(qū)塊TBLK(以下也稱為“對(duì)象樹區(qū)塊”)進(jìn)行解碼而參考的數(shù)據(jù)的集合。另外，有時(shí)將樹區(qū)塊稱為最大編碼單位(LCU:Largest Cording Unit)。
[0105]樹區(qū)塊TBLK包含樹區(qū)塊頭TBLKH和編碼單位信息⑶I?CUNL (NL是樹區(qū)塊TBLK中包含的編碼單位信息的總數(shù))。這里，首先，如下所述來說明樹區(qū)塊TBLK與編碼單位信息⑶的關(guān)系。
[0106]樹區(qū)塊TBLK被分割為用于確定用于幀內(nèi)預(yù)測(cè)或者幀間預(yù)測(cè)、以及變換的各處理的區(qū)塊大小的分區(qū)。
[0107]樹區(qū)塊TBLK的上述分區(qū)，通過遞歸的四叉樹分割進(jìn)行分割。以下將通過該遞歸的四叉樹分割而得到的樹結(jié)構(gòu)稱為編碼樹(coding tree)。
[0108]以下，將與編碼樹的末端的節(jié)點(diǎn)即葉子(leaf)對(duì)應(yīng)的分區(qū)作為編碼節(jié)點(diǎn)(codingnode)來參考。此外，因?yàn)榫幋a節(jié)點(diǎn)成為編碼處理的基本單位，所以以下也將編碼節(jié)點(diǎn)稱為編碼單位(⑶)。
[0109]也就是說，編碼單位信息(以下稱為⑶信息)⑶I?CUNL是與將樹區(qū)塊TBLK遞歸地進(jìn)行四叉樹分割而得到的各編碼節(jié)點(diǎn)(編碼單位)對(duì)應(yīng)的信息。
[0110]此外，編碼樹的根(root)與樹區(qū)塊TBLK建立對(duì)應(yīng)。換言之，樹區(qū)塊TBLK與遞歸地包含多個(gè)編碼節(jié)點(diǎn)的四叉樹分割的樹結(jié)構(gòu)的最上位節(jié)點(diǎn)建立對(duì)應(yīng)。
[0111]另外，各編碼節(jié)點(diǎn)的大小，縱橫都是該編碼節(jié)點(diǎn)直接所屬的編碼節(jié)點(diǎn)(即，該編碼節(jié)點(diǎn)的上一層次的節(jié)點(diǎn)的分區(qū))的大小的一半。
[0112]此外，各編碼節(jié)點(diǎn)能夠取值的大小，依賴于編碼數(shù)據(jù)#1的序列參數(shù)集SPS中包含的編碼節(jié)點(diǎn)的大小指定信息以及最大層次深度(maximum hierarchical depth)。例如,在樹區(qū)塊TBLK的大小為64X64像素、最大層次深度為3的情況下，該樹區(qū)塊TBLK以下的層次中的編碼節(jié)點(diǎn)能夠取值3種大小、即64X64像素、32X 32像素、以及16X 16像素的任一個(gè)。
[0113](樹區(qū)塊頭)
[0114]樹區(qū)塊頭TBLKH中包含運(yùn)動(dòng)圖像解碼裝置I為了決定對(duì)象樹區(qū)塊的解碼方法而參考的編碼參數(shù)。具體而言，如圖2的(c)所示，包含用于指定向?qū)ο髽鋮^(qū)塊的各CU的分割型式(pattern)的樹區(qū)塊分割信息SP_TBLK、以及用于指定量化步長的大小的量化參數(shù)差分 Δqp(qp_delta)。
[0115]樹區(qū)塊分割信息SP_TBLK是表示用于分割樹區(qū)塊的編碼樹的信息，具體而言，是指定對(duì)象樹區(qū)塊中包含的各CU的形狀、大小、以及在對(duì)象樹區(qū)塊內(nèi)的位置的信息。
[0116]另外，樹區(qū)塊分割信息SP_TBLK也可以不顯示地包含⑶的形狀、大小。例如樹區(qū)塊分割信息SP_TBLK可以是表示是否對(duì)對(duì)象樹區(qū)塊整體或者樹區(qū)塊的部分區(qū)域進(jìn)行四分割的標(biāo)志(split_coding_unit_flag)的集合。在該情況下,通過并用樹區(qū)塊的形狀、大小能夠確定各CU的形狀、大小。
[0117]此外，量化參數(shù)差分Aqp是對(duì)象樹區(qū)塊中的量化參數(shù)qp與緊接該對(duì)象樹區(qū)塊之前被編碼的樹區(qū)塊中的量化參數(shù)qp’的差分qP-qp’。
[0118](CU 層)[0119]在⑶層中，規(guī)定運(yùn)動(dòng)圖像解碼裝置I為了對(duì)處理對(duì)象的⑶(以下也稱為“對(duì)象CU”)進(jìn)行解碼而參考的數(shù)據(jù)的集合。
[0120]這里，在說明CU信息CU中包含的數(shù)據(jù)的具體內(nèi)容之前，對(duì)CU中包含的數(shù)據(jù)的樹結(jié)構(gòu)進(jìn)行說明。編碼節(jié)點(diǎn)成為預(yù)測(cè)樹(prediction tree ；PT)以及變換樹(transformtree ；TT)的根節(jié)點(diǎn)。如下所述來說明預(yù)測(cè)樹以及變換樹。
[0121]在預(yù)測(cè)樹中，編碼節(jié)點(diǎn)被分割為一個(gè)或者多個(gè)預(yù)測(cè)區(qū)塊，規(guī)定各預(yù)測(cè)區(qū)塊的位置和大小。用其他表現(xiàn)方式來說，預(yù)測(cè)區(qū)塊是構(gòu)成編碼節(jié)點(diǎn)的一個(gè)或者多個(gè)不重復(fù)的區(qū)域。此夕卜，預(yù)測(cè)樹包含通過上述的分割而得到的一個(gè)或者多個(gè)預(yù)測(cè)區(qū)塊。
[0122]按每個(gè)該預(yù)測(cè)區(qū)塊來進(jìn)行預(yù)測(cè)處理。以下，將作為預(yù)測(cè)的單位的預(yù)測(cè)區(qū)塊也稱為預(yù)測(cè)單位(prediction unit ；PU)。
[0123]預(yù)測(cè)樹中的分割的種類，籠統(tǒng)地說存在幀內(nèi)預(yù)測(cè)的情況和幀間預(yù)測(cè)的情況。
[0124]在幀內(nèi)預(yù)測(cè)的情況下，分割方法存在2NX2N(大小與編碼節(jié)點(diǎn)相同)和NXN。
[0125]此外，在幀間預(yù)測(cè)的情況下，分割方法存在2NX2N(大小與編碼節(jié)點(diǎn)相同)、2NXN、NX2N、以及 NXN 等。
[0126]此外，在變換樹中，編碼節(jié)點(diǎn)被分割為一個(gè)或者多個(gè)變換區(qū)塊，規(guī)定各變換區(qū)塊的位置和大小。用其他表現(xiàn)方式來說，變換區(qū)塊是構(gòu)成編碼節(jié)點(diǎn)的一個(gè)或者多個(gè)不重復(fù)的區(qū)域。此外，變換樹包含通過上述的分割而得到的一個(gè)或者多個(gè)變換區(qū)塊。
[0127]對(duì)于變換樹中的分割，有將大小與編碼節(jié)點(diǎn)相同的區(qū)域作為變換區(qū)塊進(jìn)行分配的方式；和與上述的樹區(qū)塊的分割同樣，基于遞歸的四叉樹分割的方式。
[0128]按每個(gè)該變換區(qū)塊來進(jìn)行變換處理。以下，將作為變換的單位的變換區(qū)塊也稱為變換單位(transform unit ；TU)。
[0129](⑶信息的數(shù)據(jù)結(jié)構(gòu))
[0130]接下來，參考圖2的(d)來說明CU信息CU中包含的數(shù)據(jù)的具體內(nèi)容。如圖2的(d)所示，具體而言，⑶信息⑶包含跳轉(zhuǎn)標(biāo)志SKIP、PT信息PT1、以及TT信息TTI。
[0131]跳轉(zhuǎn)標(biāo)志SKIP，是表示對(duì)于對(duì)象的PU是否應(yīng)用了跳轉(zhuǎn)模式的標(biāo)志，在跳轉(zhuǎn)標(biāo)志SKIP的值為I的情況下，即，對(duì)對(duì)象CU應(yīng)用了跳轉(zhuǎn)模式的情況下，該CU信息CU中的PT信息PT1、以及TT信息TTI被省略。另外，對(duì)于I切片，省略跳轉(zhuǎn)標(biāo)志SKIP。
[0132]PT信息PTI是與⑶中包含的PT相關(guān)的信息。換言之，PT信息PTI是與PT中包含的一個(gè)或者多個(gè)PU的各個(gè)相關(guān)的信息的集合，在由運(yùn)動(dòng)圖像解碼裝置I生成預(yù)測(cè)圖像時(shí)被參考。如圖2的(d)所示，PT信息PTI包含預(yù)測(cè)類型信息PType、以及預(yù)測(cè)信息PInfo。
[0133]預(yù)測(cè)類型信息PType，是指定使用幀內(nèi)預(yù)測(cè)或者使用幀間預(yù)測(cè)作為對(duì)于對(duì)象的預(yù)測(cè)圖像生成方法的信息。
[0134]預(yù)測(cè)信息PInfo根據(jù)預(yù)測(cè)類型信息PType指定哪種預(yù)測(cè)方法，由幀內(nèi)預(yù)測(cè)信息或者幀間預(yù)測(cè)信息構(gòu)成。以下，將應(yīng)用幀內(nèi)預(yù)測(cè)的PU也稱為幀內(nèi)PU，將應(yīng)用幀間預(yù)測(cè)的也稱為幀間PU。
[0135]此外，預(yù)測(cè)信息PInfo包含指定對(duì)象PU的形狀、大小、以及位置的信息。如上所述，以PU為單位來進(jìn)行預(yù)測(cè)圖像的生成。對(duì)于預(yù)測(cè)信息PInfO的詳細(xì)情況，后面敘述。
[0136]TT信息TTI是與⑶中包含的TT相關(guān)的信息。換言之，TT信息TTI是與TT中包含的一個(gè)或者多個(gè)TU的各個(gè)相關(guān)的信息的集合，在由運(yùn)動(dòng)圖像解碼裝置I解碼殘差數(shù)據(jù)時(shí)被參考。另外，以下，有時(shí)將TU稱為區(qū)塊。
[0137]如圖2的(d)所示，TT信息TTI包含用于指定向?qū)ο驝U的各變換區(qū)塊的分割型式的TT分割信息SP_TT、以及量化預(yù)測(cè)殘差QDl?QDNT (NT是對(duì)象⑶中包含的區(qū)塊的總數(shù))。
[0138]具體而言，TT分割信息SP_TT是用于決定對(duì)象⑶中包含的各TU的形狀、大小、以及在對(duì)象CU內(nèi)的位置的信息。例如，TT分割信息SP_TT能夠由表示是否進(jìn)行成為對(duì)象的節(jié)點(diǎn)的分割的信息(SPI i t_tran s form_un i t_f I ag)、和表示該分割的深度的信息(trafoDepth)來實(shí)現(xiàn)。
[0139]此外，例如，在⑶的大小為64X64的情況下，由分割所得的各TU可以取值從32X32像素到2X2像素的大小。
[0140]各量化預(yù)測(cè)殘差QD是通過運(yùn)動(dòng)圖像編碼裝置2對(duì)作為處理對(duì)象區(qū)塊的對(duì)象區(qū)塊實(shí)施以下的處理I?3而生成的編碼數(shù)據(jù)。
[0141]處理1:對(duì)從編碼對(duì)象圖像減去預(yù)測(cè)圖像得到的預(yù)測(cè)殘差進(jìn)行DCT變換(DiscreteCosine Transform,離散余弦變換)；
[0142]處理2:對(duì)由處理I所得到的變換系數(shù)進(jìn)行量化；
[0143]處理3:對(duì)由處理2被量化后的變換系數(shù)進(jìn)行可變長編碼；
[0144]另外，上述的量化參數(shù)qp表示運(yùn)動(dòng)圖像編碼裝置2對(duì)變換系數(shù)進(jìn)行量化時(shí)所使用的量化步長QP的大小(QP=2qp / 6)。
[0145](預(yù)測(cè)信息PInfo)
[0146]如上所述，預(yù)測(cè)信息PInfo中存在幀間預(yù)測(cè)信息以及幀內(nèi)預(yù)測(cè)信息這兩種。
[0147]幀間預(yù)測(cè)信息中包含運(yùn)動(dòng)圖像解碼裝置I通過幀間預(yù)測(cè)生成幀間預(yù)測(cè)圖像時(shí)所參考的編碼參數(shù)。更具體而言，幀間預(yù)測(cè)信息中包含用于指定向?qū)ο驝U的各幀間的分割型式的幀間PU分割信息、以及對(duì)于各幀間PU的幀間預(yù)測(cè)參數(shù)。
[0148]幀間預(yù)測(cè)參數(shù)中包含參考圖像索引、估計(jì)運(yùn)動(dòng)矢量索引和運(yùn)動(dòng)矢量殘差。
[0149]另一方面，幀內(nèi)預(yù)測(cè)信息中包含運(yùn)動(dòng)圖像解碼裝置I通過幀內(nèi)預(yù)測(cè)生成幀內(nèi)預(yù)測(cè)圖像時(shí)所參考的編碼參數(shù)。更具體而言，幀內(nèi)預(yù)測(cè)信息中包含用于指定向?qū)ο驝U的各幀內(nèi)PU的分割型式的幀內(nèi)PU分割信息、以及對(duì)于各幀內(nèi)PU的幀內(nèi)預(yù)測(cè)參數(shù)。幀內(nèi)預(yù)測(cè)參數(shù)是用于指定對(duì)于各幀內(nèi)PU的幀內(nèi)預(yù)測(cè)方法(預(yù)測(cè)模式)的參數(shù)。
[0150](偏移單位)
[0151]此外，在本實(shí)施方式中，各圖片或者各切片通過四叉樹結(jié)構(gòu)被遞歸地分割為多個(gè)偏移單位(也稱為QAOU:Quad Adaptive Offset Unit,四方自適應(yīng)偏移單位)。這里,所謂QA0U，是本實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移濾波處理的處理單位。
[0152]如圖2 (e)?(f)所示，與各QAOU相關(guān)的信息即QAOU信息包含表示自身是否被進(jìn)一步分割的sao_split_flag。更具體而言，sao_split_flag通過后述的參量(sao_curr_depth、ys> xs)來指定，也記作 sao_sp I i t_f I ag [ sao_curr_dep th] [ys] [xs]。
[0153]在某QAOU中包含的sao_split_flag表示該QAOU進(jìn)一步被分割的情況下(即，該QAOU不是葉子的情況下)，如圖2 (e)所示，在與該QAOU相關(guān)的QAOU信息中包含與該QAOU中包含的多個(gè)QAOU的各個(gè)相關(guān)的QAOU信息。
[0154]另一方面,在某QAOU中包含的sao_split_f lag表示該QAOU不被進(jìn)一步分割的情況下(即，該QAOU是葉子的情況下)，如圖2(f)所示，在與該QAOU相關(guān)的QAOU信息中包含與該QAOU相關(guān)的偏移信息01。此外，如圖2 (f)所示，在偏移信息OI中包含:指定偏移類型的偏移類型指定信息0ΤΙ、以及根據(jù)偏移類型而決定的偏移群。進(jìn)而，如圖2(f)所示，偏移群中包含多個(gè)偏移。
[0155]另外，編碼數(shù)據(jù)中的偏移是被量化過的值。此外，編碼數(shù)據(jù)中的偏移也可以是通過使用任一種預(yù)測(cè)、例如線性預(yù)測(cè)而得到的預(yù)測(cè)殘差。此外，在按每一定的單位區(qū)域不同地指定后述的像素比特深度的情況下，根據(jù)像素比特深度來變更偏移的比特深度、偏移值域、以及移位值的本實(shí)施方式中，在偏移類型指定信息OTI中也可以包含處理對(duì)象區(qū)域的像素比特深度。
[0156]替換要參考的附圖來說明偏移信息01，如下所述。 [0157]圖3是表示偏移信息OI (圖3中記作sao_offset_param())中包含的各句法的圖。
[0158]如圖3 所示，偏移信息 OI 中包含句法 sao_type_idx[sao_curr_depth] [ys] [xs]。此外，在sao_type_idx[sao_curr_depth] [ys] [xs]不是O的情況下,在偏移信息OI中包含sao_offset[sao_curr_depth][ys][xs][i]。
[0159](sao_curr_depth> ys> xs)
[0160]作為sao_type_idx 以及 sao_offset 的參量的 sao_curr_depth 是表不 QAOU 的分割深度的索引，ys以及xs分別是用于表示QAOU(或者后述的QA0MU)的y方向的位置以及X方向的位置的索引。
[0161]圖4(a)~(e)是表示與sao_curr_depth的值相應(yīng)的QAOU的分割形態(tài)的圖，(a)不出 sao_curr_depth=0 的情況，(b)不出 sao_curr_depth=l 的情況，(C)不出 sao_curr_depth=2 的情況，(d)示出 sao_curr_depth=3 的情況，(e)示出 sao_curr_depth=4 的情況。如圖4(a)~(e)所示,各QAOU由sao_curr_depth、以及(xs、ys)來指定。
[0162]此外，如圖4(a)所示,在sao_curr_depth=0時(shí),xs以及ys分別是O,如圖4(b)所示,在sao_curr_depth=l時(shí),xs以及ys分別可以取O以及I的任一個(gè)值。此外，如圖4(c)所示，在sao_curr_depth=2時(shí),xs以及ys分別可以取0、1、2以及3的任一個(gè)值。一般，對(duì)于給定的sa0_curr_cbpth，xs以及ys分別可以取O~2sa。-eu^depth-1的值。
[0163](sao_type_idx)
[0164]sao_type_idx[sao_curr_depth] [ys] [xs]與上述的偏移類型指定信息 OTI 相對(duì)應(yīng)，是用于指定對(duì)于各QAOU的偏移類型的句法。以下，有時(shí)將sao_type_idX簡稱為偏移類型。
[0165]在本實(shí)施方式中，sao_type_idx[sao_curr_depth][ys] [xs]取 O 至 6 的整數(shù)值。sao_type_idx[sao_curr_depth] [ys] [xs] = O表示對(duì)于對(duì)象QAOU中的偏移濾波器前圖像(例如，后述的已去區(qū)塊解碼圖像P_DB)不進(jìn)行偏移濾波處理，sao_type_idx[sao_curr_depth] [ys] [xs] = I~4表示對(duì)于對(duì)緣QAOU中的偏移濾波器前圖像進(jìn)行邊緣偏移處理，sao_type_idx[sao_curr_depth] [ys] [xs] = 5~6表示對(duì)于對(duì)象QAOU中的偏移濾波器前圖像進(jìn)行帶偏移處理。對(duì)于邊緣偏移處理以及帶偏移處理的具體內(nèi)容，后面敘述。
[0166](sao_offset)
[0167]sao_offset [sao_curr_depth] [ys] [xs] [i]是表示在本實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移濾波處理中對(duì)象QAOU中包含的各像素上加上的偏移的具體值的句法。在本實(shí)施方式中，有時(shí)將sao_ofTset簡稱為偏移。
[0168]sao_offset [sao_curr_depth] [ys] [xs] [i],除 了 參量 sao_curr_depth、ys 以及XS之外還根據(jù)索引i來指定。這里,索引i是用于指定類別的索引，也記作class_idx。索弓丨i在sao_type_idx[sao_curr_depth] [ys] [xs]的值為I?4的任一個(gè)的情況下(即，邊緣偏移的情況下)，取i=0?4的任一個(gè)整數(shù)值。此外,在sao_type_idx[sao_curr_depth][ys] [xs]的值為5?6的任一個(gè)的情況下(即，帶偏移的情況下)，取i=0?16的任一個(gè)整數(shù)值。另外，如后所述，任一種情況下，i=0都表示不加上偏移。
[0169]如后所述，本實(shí)施方式所涉及的自適應(yīng)偏移濾波器將對(duì)象QAOU中包含的對(duì)象像素分類為上述多個(gè)類別的任一個(gè)，并且對(duì)該對(duì)象像素加上對(duì)于該對(duì)象像素被分類的類別的偏移 Offset。
[0170]此外，圖3所示的Descriptor (描述符)ue(v)表示與該描述符建立了關(guān)聯(lián)的句法是無符號(hào)的數(shù)值，值被可變長編碼，se (V)表示與該描述符建立了關(guān)聯(lián)的句法是帶符號(hào)的數(shù)值，分為符號(hào)和絕對(duì)值被可變長編碼。
[0171](運(yùn)動(dòng)圖像解碼裝置I)
[0172]以下，參考圖1以及圖5?圖13來說明本實(shí)施方式所涉及的運(yùn)動(dòng)圖像解碼裝置I。關(guān)于運(yùn)動(dòng)圖像解碼裝置I，其一部分包含H.264 / MPEG-4.AVC中所采用的方式、VCEG (VideoCoding Expert Group,視頻編碼專家組)中的共同開發(fā)用編解碼器即KTA軟件中所采用的方式、作為其后繼編解碼器的TMuC(Test Model under Consideration,考慮中的測(cè)試模型)軟件中所采用的方式、以及HM(HEVC TestModel，高效率視頻編碼測(cè)試模型)軟件中所采用的技術(shù)。
[0173]圖5是表示運(yùn)動(dòng)圖像解碼裝置I的構(gòu)成的框圖。如圖5所示，運(yùn)動(dòng)圖像解碼裝置I具備可變長碼解碼部13、運(yùn)動(dòng)矢量恢復(fù)部14、緩沖存儲(chǔ)器15、幀間預(yù)測(cè)圖像生成部16、幀內(nèi)預(yù)測(cè)圖像生成部17、預(yù)測(cè)方式?jīng)Q定部18、逆量化/逆變換部19、加法器20、去區(qū)塊濾波器41、自適應(yīng)濾波器50、以及自適應(yīng)偏移濾波器60。運(yùn)動(dòng)圖像解碼裝置I是用于通過對(duì)編碼數(shù)據(jù)#1進(jìn)行解碼來生成運(yùn)動(dòng)圖像#2的裝置。
[0174]可變長碼解碼部13從編碼數(shù)據(jù)#1解碼與各分區(qū)相關(guān)的預(yù)測(cè)參數(shù)PP。即，關(guān)于幀間預(yù)測(cè)分區(qū)，從編碼數(shù)據(jù)#1解碼參考圖像索引R1、估計(jì)運(yùn)動(dòng)矢量索引PMV1、以及運(yùn)動(dòng)矢量殘差MVD，并將這些提供給運(yùn)動(dòng)矢量恢復(fù)部14。另一方面，關(guān)于幀內(nèi)預(yù)測(cè)分區(qū)，從編碼數(shù)據(jù)#1解碼(I)指定分區(qū)的大小的大小指定信息、以及(2)指定預(yù)測(cè)索引的預(yù)測(cè)索引指定信息，并將其提供給幀內(nèi)預(yù)測(cè)圖像生成部17。此外，可變長碼解碼部13從編碼數(shù)據(jù)解碼CU信息，并將其提供給預(yù)測(cè)方式?jīng)Q定部18 (省略圖示)。進(jìn)而，可變長碼解碼部13從編碼數(shù)據(jù)#1解碼與各區(qū)塊相關(guān)的量化預(yù)測(cè)殘差QD、以及與包含該區(qū)塊的樹區(qū)塊相關(guān)的量化參數(shù)差分Λ qp,并且將這些提供給逆量化/逆變換部19。此外，可變長碼解碼部13從編碼數(shù)據(jù)#1提取QAOU信息，并且將所提取的QAOU信息提供給自適應(yīng)偏移濾波器60。
[0175]運(yùn)動(dòng)矢量恢復(fù)部14將與各幀間預(yù)測(cè)分區(qū)相關(guān)的運(yùn)動(dòng)矢量mv根據(jù)與該分區(qū)相關(guān)的運(yùn)動(dòng)矢量殘差MVD和與其他分區(qū)相關(guān)的已恢復(fù)的運(yùn)動(dòng)矢量mv’進(jìn)行恢復(fù)。具體而言，(I)按照由估計(jì)運(yùn)動(dòng)矢量索引PMVI所指定的估計(jì)方法，根據(jù)已恢復(fù)的運(yùn)動(dòng)矢量mv’導(dǎo)出估計(jì)運(yùn)動(dòng)矢量pmv, (2)通過將導(dǎo)出的估計(jì)運(yùn)動(dòng)矢量pmv和運(yùn)動(dòng)矢量殘差MVD相加來得到運(yùn)動(dòng)矢量mv。另外，可以從緩沖存儲(chǔ)器15讀出與其他分區(qū)相關(guān)的已恢復(fù)的運(yùn)動(dòng)矢量mv’。運(yùn)動(dòng)矢量恢復(fù)部14將所恢復(fù)的運(yùn)動(dòng)矢量mv與對(duì)應(yīng)的參考圖像索引RI —起提供給幀間預(yù)測(cè)圖像生成部16。另外，對(duì)于進(jìn)行雙方向預(yù)測(cè)(加權(quán)預(yù)測(cè))的幀間預(yù)測(cè)分區(qū)，將所恢復(fù)的2個(gè)運(yùn)動(dòng)矢量mvl以及mv2與對(duì)應(yīng)的參考圖像索引RIl以及RI2 —起提供給幀間預(yù)測(cè)圖像生成部16。
[0176]幀間預(yù)測(cè)圖像生成部16生成與各幀間預(yù)測(cè)分區(qū)相關(guān)的運(yùn)動(dòng)補(bǔ)償圖像me。具體而言，使用從運(yùn)動(dòng)矢量恢復(fù)部14提供的運(yùn)動(dòng)矢量mv，根據(jù)由同樣從運(yùn)動(dòng)矢量恢復(fù)部14提供的參考圖像索引RI所指定的已濾波解碼圖像P_FL’，生成運(yùn)動(dòng)補(bǔ)償圖像me。這里，已濾波解碼圖是通過對(duì)已經(jīng)完成了解碼的解碼圖像P實(shí)施去區(qū)塊濾波器41的去區(qū)塊處理、自適應(yīng)偏移濾波器60的偏移濾波處理、以及自適應(yīng)濾波器50的自適應(yīng)濾波處理而得到的圖像，幀間預(yù)測(cè)圖像生成部16可以從緩沖存儲(chǔ)器15讀出構(gòu)成已濾波解碼圖像P_FL’的各像素的像素值。由幀間預(yù)測(cè)圖像生成部16生成的運(yùn)動(dòng)補(bǔ)償圖像me作為幀間預(yù)測(cè)圖像PrecLImer提供給預(yù)測(cè)方式?jīng)Q定部18。另外，對(duì)于進(jìn)行雙方向預(yù)測(cè)(加權(quán)預(yù)測(cè))的幀間預(yù)測(cè)分區(qū)，通過(I)使用運(yùn)動(dòng)矢量mvl根據(jù)由參考圖像索引RIl所指定的已濾波解碼圖像P_FLr生成運(yùn)動(dòng)補(bǔ)償圖像mcl，(2)使用運(yùn)動(dòng)矢量mv2根據(jù)由參考圖像索引RI2所指定的已濾波解碼圖像P_FL2’生成運(yùn)動(dòng)補(bǔ)償圖像mc2，(3)通過對(duì)運(yùn)動(dòng)補(bǔ)償圖像mcl與運(yùn)動(dòng)補(bǔ)償圖像mc2的加權(quán)平均加上偏移值從而生成幀間預(yù)測(cè)圖像Pred_Inter。
[0177]幀內(nèi)預(yù)測(cè)圖像生成部17生成與各幀內(nèi)預(yù)測(cè)分區(qū)相關(guān)的預(yù)測(cè)圖像Pred_Intra。具體而言，首先，參考從編碼數(shù)據(jù)#1解碼出的預(yù)測(cè)模式，例如按照光柵掃描順序?qū)?duì)象分區(qū)分配該預(yù)測(cè)模式。接下來，按照該預(yù)測(cè)模式所示的預(yù)測(cè)方法，從解碼圖像P生成預(yù)測(cè)圖像Pred_Intra。由幀內(nèi)預(yù)測(cè)圖像生成部17所生成的幀內(nèi)預(yù)測(cè)圖像Pred_Intra提供給預(yù)測(cè)方式?jīng)Q定部18。
[0178]此外，幀內(nèi)預(yù)測(cè)圖像生成部17將對(duì)象分區(qū)的大小、以及表示分配給對(duì)象分區(qū)的預(yù)測(cè)模式的信息即幀內(nèi)編碼模式信息IEM提供給自適應(yīng)濾波器50。
[0179]預(yù)測(cè)方式?jīng)Q定部18基于CU信息決定各分區(qū)是要進(jìn)行幀間預(yù)測(cè)的幀間預(yù)測(cè)分區(qū)，還是要進(jìn)行幀內(nèi)預(yù)測(cè)的幀內(nèi)預(yù)測(cè)分區(qū)。而且，在前者的情況下，將由幀間預(yù)測(cè)圖像生成部16所生成的幀間預(yù)測(cè)圖像PrecLInter作為預(yù)測(cè)圖像Pred提供給加法器20，在后者的情況下，將由幀內(nèi)預(yù)測(cè)圖像生成部17所生成的幀內(nèi)預(yù)測(cè)圖像PrecLIntra作為預(yù)測(cè)圖像Pred提供給加法器20。
[0180]逆量化/逆變換部19，(I)對(duì)量化預(yù)測(cè)殘差QD進(jìn)行逆量化，(2)對(duì)通過逆量化而得到的DCT系數(shù)進(jìn)行逆DCT (Discrete Cosine Transform,離散余弦變換)變換，(3)將通過逆DCT變換而得到的預(yù)測(cè)殘差D提供給加法器20。另外，在對(duì)量化預(yù)測(cè)殘差QD進(jìn)行逆量化時(shí)，逆量化/逆變換部19根據(jù)從可變長碼解碼部13提供的量化參數(shù)差分△ qp導(dǎo)出量化步長QP。量化參數(shù)qp可以通過對(duì)與緊接之前進(jìn)行了逆量化/逆DCT變換的樹區(qū)塊相關(guān)的量化參數(shù)qp’加上量化參數(shù)差分Aqp來導(dǎo)出，量化步長QP可以從量化步長qp通過Qp=2M/b導(dǎo)出。此外，逆量化/逆變換部19執(zhí)行的預(yù)測(cè)殘差D的生成，以區(qū)塊(變換單位)為單位來進(jìn)行。
[0181]加法器20通過將從預(yù)測(cè)方式?jīng)Q定部18提供的預(yù)測(cè)圖像Pred、和從逆量化/逆變換部19提供的預(yù)測(cè)殘差D相加，來生成解碼圖像P。
[0182]去區(qū)塊濾波器41在隔著解碼圖像P中的區(qū)塊邊界或者⑶邊界而相互相鄰的像素的像素值之差小于預(yù)先決定的閾值的情況下，通過對(duì)解碼圖像P中的該區(qū)塊邊界或者該CU邊界實(shí)施去區(qū)塊處理，從而進(jìn)行該區(qū)塊邊界或者該CU邊界附近的圖像的平滑化。通過去區(qū)塊濾波器41實(shí)施了去區(qū)塊處理的圖像，作為已去區(qū)塊解碼圖像P_DB輸出給自適應(yīng)偏移濾波器60。
[0183]自適應(yīng)偏移濾波器60通過對(duì)從去區(qū)塊濾波器41提供的已去區(qū)塊解碼圖像P_DB，以QAOU為處理單位實(shí)施使用了從編碼數(shù)據(jù)#1解碼出的偏移的偏移濾波處理，從而生成偏移已濾波解碼圖像P_0F。所生成的偏移已濾波解碼圖像P_0F被提供給自適應(yīng)偏移濾波器60。對(duì)于自適應(yīng)偏移濾波器60的具體構(gòu)成，進(jìn)行后述，所以這里省略說明。
[0184]自適應(yīng)濾波器50通過對(duì)從自適應(yīng)偏移濾波器60提供的偏移已濾波解碼圖像P_OF實(shí)施使用了從編碼數(shù)據(jù)#1解碼出的濾波器參數(shù)FP的濾波處理，從而生成已濾波解碼圖像？_?匕通過自適應(yīng)濾波器50實(shí)施了濾波處理的圖像，作為已濾波解碼圖輸出到外部，并且與由可變長碼解碼部13從編碼數(shù)據(jù)解碼出的POC指定信息建立關(guān)聯(lián)地存儲(chǔ)到緩沖存儲(chǔ)器15。
[0185](自適應(yīng)偏移濾波器60)
[0186]圖1是表示自適應(yīng)偏移濾波器60的構(gòu)成的框圖。如圖1所示，自適應(yīng)偏移濾波器60具備自適應(yīng)偏移濾波器信息解碼部61以及自適應(yīng)偏移濾波器處理部62。
[0187]此外，如圖1所示，自適應(yīng)偏移濾波器信息解碼部61具備偏移信息解碼部611、QAOU結(jié)構(gòu)解碼部612、以及偏移屬性設(shè)定部613。
[0188]偏移信息解碼部611參考編碼數(shù)據(jù)#1中包含的QAOU信息，解碼QAOU信息中包含的偏移信息01。此外,將通過解碼偏移信息OI而得到的sao_type_idx[sao_curr_depth][ys] [xs]以及 sao_of fset[sao_curr_depth] [ys] [xs] [i]的各值與各個(gè)參量(sao_curr_depth、ys、xs)以及(sao_curr_depth、ys、xs、i)建立關(guān)聯(lián),提供給偏移信息存儲(chǔ)部621。
[0189]QAOU結(jié)構(gòu)解碼部612通過解碼QAOU信息中包含的sao_split_flag[sao_curr_depth] [ys] [xs]，決定QAOU的分割結(jié)構(gòu)，將表示所決定的QAOU的分割結(jié)構(gòu)的QAOU結(jié)構(gòu)信息提供給偏移信息存儲(chǔ)部621。
[0190]偏移屬性設(shè)定部613決定偏移的比特深度(也稱為SA0_DEPTH)和偏移的值域。這里，偏移的比特深度，根據(jù)輸入到偏移屬性設(shè)定部613的未圖示的像素比特深度(也稱為PIC_DEPTH)決定。所謂像素比特深度，用比特寬度表示構(gòu)成自適應(yīng)偏移濾波器60的輸入圖像的像素值的值域，像素比特深度為N比特時(shí)，像素值取O至2n-1的范圍。例如，像素比特深度為8比特時(shí)，像素值可以取O至255的范圍。自適應(yīng)偏移濾波器60的輸入圖像是運(yùn)動(dòng)圖像解碼裝置I的解碼圖像、或者運(yùn)動(dòng)圖像編碼裝置2的局部解碼圖像的情況下，使用解碼圖像/局部解碼圖像的比特深度。自適應(yīng)偏移濾波器60的輸入圖像的精度以及輸出圖像的精度是像素比特深度。
[0191]像素比特深度能夠?qū)κ褂镁幋a數(shù)據(jù)#1中的句法而決定的值進(jìn)行解碼來使用。例如,H.264 / AVC的情況下,可以使用序列參數(shù)集中的bit_depth_luma_minus8來決定。進(jìn)而，作為其他方式，像素比特深度可以按處理對(duì)象的每個(gè)單位區(qū)域來決定，在該情況下，從該單位區(qū)域的頭解碼像素比特深度。單位區(qū)域的像素比特深度可以包含在用于解碼自適應(yīng)偏移濾波器60的輸入圖像的編碼數(shù)據(jù)#1中的參數(shù)信息或頭中，也可以被包含為QAOU信息的一部分。作為用于解碼輸入圖像的參數(shù)信息以及頭，可以預(yù)先在圖片參數(shù)頭、切片頭、IXU、⑶等中包含像素比特深度。此外，作為QAOU信息的一部分，可以在葉子QAOU中包含像素比特深度，也可以在給定層次(例如最上位層次的QAOU、第I層次的QAOU)的QAOU信息中包含像素比特深度。此外，作為像素比特深度的編碼，適宜作為自8比特的差分值進(jìn)行編碼。在QAOU信息中，除了像素比特深度之外，也可以直接對(duì)移位值進(jìn)行編碼。此外，移位值適于僅在超過8比特的情況下進(jìn)行編碼。這里作為移位值，表示為了進(jìn)行逆量化而需要的比特移位量。作為用于逆量化的參數(shù)，除了移位值之外，還可以是步長值。在該情況下，偏移的逆量化可以利用與步長值的積來執(zhí)行，偏移的量化可以利用基于步長值的除法來執(zhí)行。
[0192]此外，所謂偏移的比特深度，是表示編碼數(shù)據(jù)#1中被編碼的偏移的精度的值。編碼數(shù)據(jù)#1中包含的偏移被量化，該量化后的偏移在解碼后，通過后述的偏移導(dǎo)出部625，被逆量化為與像素比特深度相匹配的比特深度。此外，在后述的偏移加法部626中，進(jìn)行逆量化后的偏移的加法運(yùn)算。偏移的比特深度具有像素比特深度以下的值。在偏移的比特深度比像素比特深度小k比特的情況下，被編碼的偏移的值，表示將2k作為偏移的量化步長進(jìn)行了量化后的值。由后述的偏移導(dǎo)出部625進(jìn)行從解碼后的比特深度向像素比特深度的變換。
[0193]偏移屬性設(shè)定部613還根據(jù)所決定的偏移的比特深度設(shè)定偏移值域。而且，根據(jù)偏移的像素比特深度和偏移值域設(shè)定移位值。被設(shè)定的偏移值域以及移位值提供給偏移信息存儲(chǔ)部621以及偏移信息解碼部611。利用后述的型式SI?S6的任一種方式進(jìn)行偏移的比特深度的決定和移位值的設(shè)定。利用后述的型式Cl、型式C2的任一種方式進(jìn)行偏移值域的設(shè)定。將偏移值域以及移位值等對(duì)于偏移公共的屬性稱為偏移屬性。另一方面，如圖1所示，自適應(yīng)偏移濾波器處理部62具備偏移信息存儲(chǔ)部621、QAOU控制部622、偏移類型導(dǎo)出部623、類別分類部624、偏移導(dǎo)出部625、以及偏移加法部626。
[0194]偏移信息存儲(chǔ)部621是用于基于QAOU結(jié)構(gòu)信息、sao_type_idx[sao_curr_depth][ys] [xs]、以及 sao_offset [sao_curr_depth] [ys] [xs] [i]管理以及存儲(chǔ)與對(duì)于各 QAOU 所指定的偏移類型以及該偏移類型中能夠選擇的各類別相關(guān)的偏移的具體值的構(gòu)成，具備映射存儲(chǔ)器以及表存儲(chǔ)器。
[0195]映射存儲(chǔ)器中存儲(chǔ)有分配給根據(jù)分割深度而決定的各偏移最小單位(也稱為QAOMU:Quad Adaptive Offset Minimum Unit ;四方自適應(yīng)偏移最小單位)的后述的QAOU索引。在圖6(a)中說明映射存儲(chǔ)器。圖6(a)是用于說明映射存儲(chǔ)器中存儲(chǔ)的QAOU索引的一例的圖，是表示構(gòu)成對(duì)象處理單位(例如LCU)的分割深度3的各QAOMU和分配給各QAOMU的QAOU索引的圖。在圖6 (a)中，為了簡便，不考慮QAOU的分割深度地將索引O?9指定QA0U。在圖6 (a)所示的示例中，將由QAOU索引=I所指定的QAOU記作QA0UI。此外，圖6(a)中的細(xì)線示出QAOMU的邊界，粗線示出QAOU的邊界。
[0196]如圖6 (a)所示，QAOUO由4個(gè)QAOMU構(gòu)成，對(duì)于這4個(gè)QA0MU，分配了 O作為QAOU索引。另一方面，QA0U3由一個(gè)QAOMU構(gòu)成，對(duì)該QAOMU分配了 3作為QAOU索引。如此，映射存儲(chǔ)器中存儲(chǔ)了對(duì)各QAOMU所分配的QAOU索引。
[0197]另一方面，在表存儲(chǔ)器中，各QAOU索引、與該QAOU索引建立了關(guān)聯(lián)的偏移類型、以及與該偏移類型中能夠選擇的各類別相關(guān)的偏移的具體的值相關(guān)建立關(guān)聯(lián)地進(jìn)行存儲(chǔ)。偏移信息存儲(chǔ)部621存儲(chǔ)被由偏移屬性設(shè)定部613設(shè)定的偏移值域限制了值的范圍的偏移。
[0198]圖6(b)是用于說明表存儲(chǔ)器中所存儲(chǔ)的信息的一例的圖，示出與QAOU索引O?9的各個(gè)建立了關(guān)聯(lián)的偏移類型以及與各偏移類型中能夠選擇的各類別相關(guān)的偏移。圖6(b)中的“XXX”表示可以相互不同的具體數(shù)值。
[0199]此外，圖6(b)中的表示由sao_type_idx=5指定的偏移類型。此外，“E0_1”表示由sao_type_idx=l指定的偏移類型。如此,將由sao_type_idx=l、2、3、4指定的偏移類型即邊緣偏移分別記作E0_l、2、3、4,將由sao_type_idx=5、6指定的偏移類型即帶偏移分別記作B0_l、2。
[0200]如圖6(b)所示，在偏移類型為帶偏移的情況下，與該偏移類型相關(guān)地存儲(chǔ)在表存儲(chǔ)器中的偏移是偏移I?偏移16這總計(jì)16個(gè)。這里，偏移I?偏移16指的是，sao_type_idx[sao_curr_depth] [ys] [xs]的值為 5 或者 6 的情況下的、由 sao_offset [sao_curr_depth] [ys] [xs] [I]?sao_offset[sao_curr_depth] [ys] [xs] [16]分別指定的值。另一方面，在偏移類型為邊緣偏移的情況下，關(guān)于該偏移類型存儲(chǔ)在表存儲(chǔ)器中的偏移是偏移I ?4 這總計(jì) 4 個(gè)。這里,偏移 I ?4 指的是，sao_type_idx[sao_curr_depth] [ys] [xs]的值為 1、2、3、4 的任一個(gè)的情況下的、由 sao_offset[sao_curr_depth] [ys] [xs] [I]?sao_offset[sao_curr_depth] [ys] [xs] [4]分別指定的值。偏移5?16中什么都沒有存儲(chǔ)。
[0201]此外，表存儲(chǔ)器中所存儲(chǔ)的各偏移的存儲(chǔ)器大小，由從偏移屬性設(shè)定部613提供的偏移值域決定。在偏移值域?yàn)開24?24-1的情況下，每一個(gè)偏移可以用5比特來表現(xiàn)，需要5比特的存儲(chǔ)器大小。
[0202]另外，各QAOMU中帶有QAOMU編號(hào)，可以通過該QAOMU編號(hào)來相互識(shí)別各QA0MU。以下，將QAOMU編號(hào)為Nq的QAOMU也記作QAOMUNq。
[0203]從分割深度O到最大的分割深度，QAOU索引是所指定的QAOU的區(qū)塊的編號(hào)。在最大分割深度為4的情況下，對(duì)于分割深度的全區(qū)塊(1+4+16+64+256=341個(gè))，如圖7所示，由QAOU索引指定O?340的值。
[0204]由運(yùn)動(dòng)圖像解碼裝置I使用的偏移信息存儲(chǔ)部621中，不需要存儲(chǔ)全部分割深度的全部QAOU的偏移，所以不需要確保341個(gè)存儲(chǔ)器區(qū)域，只要有在由所輸入的QAOU信息所指定的結(jié)構(gòu)實(shí)際使用的QAOU的數(shù)量的存儲(chǔ)器區(qū)域即可。在最大分割深度為4時(shí)，該區(qū)塊數(shù)是256以下，所以有256個(gè)映射存儲(chǔ)器以及表存儲(chǔ)器就足夠。在該情況下，在偏移信息存儲(chǔ)部621使用的QAOU索引，使用用于識(shí)別葉子QAOU的唯一的索引，例如，每當(dāng)解碼葉子QAOU時(shí)逐一增量的O至255以下的索引。此外，在偏移信息存儲(chǔ)部621中，也可以以與最大分割深度對(duì)應(yīng)的QAOU信息為單位，來存儲(chǔ)映射表。在該情況下，在偏移信息存儲(chǔ)部621使用的QAOU索引，使用O?255的編號(hào)，這與圖7中的QAOMU編號(hào)85?340對(duì)應(yīng)。
[0205]圖7 (a)?(e)是表示對(duì)象處理單位(例如LCU)中包含的QAOMU所附帶的QAOMU編號(hào)的一例的圖，(a)示出分割深度為O的QAOMU所附帶的QAOMU編號(hào)，(b)示出分割深度為I的QAOMU所附帶的QAOMU編號(hào)，(c)示出分割深度為2的QAOMU所附帶的QAOMU編號(hào)，(d)示出分割深度為3的QAOMU所附帶的QAOMU編號(hào)，(e)示出分割深度為4的QAOMU所附帶的QAOMU編號(hào)。
[0206]QAOU控制部622控制自適應(yīng)偏移濾波器處理部62中包含的各部。此外，QAOU控制部622參考QAOU結(jié)構(gòu)信息，將已去區(qū)塊解碼圖像P_DB分割為一個(gè)或多個(gè)QA0U，并且以給定順序掃描各QA0U。此外，將表示作為處理對(duì)象的對(duì)象QAOMU的QAOMU編號(hào)提供給偏移類型導(dǎo)出部623。[0207]偏移類型導(dǎo)出部623參考偏移信息存儲(chǔ)部621的映射存儲(chǔ)器以及表存儲(chǔ)器，導(dǎo)出由從QAOU控制部622提供的QAOMU編號(hào)所指定的偏移類型。此外，將所導(dǎo)出的偏移類型提供給類別分類部624。
[0208]類別分類部624將對(duì)象QAOU中包含的各像素分類為從偏移類型導(dǎo)出部623提供的偏移類型中能夠選擇的多個(gè)類別的任一個(gè)。此外，將該偏移類型、和表示各像素被分類的類別的類別索引提供給偏移導(dǎo)出部625。另外，對(duì)于類別分類部624執(zhí)行的具體的分類處理，后面敘述，所以這里省略說明。
[0209]偏移導(dǎo)出部625參考偏移信息存儲(chǔ)部621的表存儲(chǔ)器，對(duì)于對(duì)象QAOU中包含的各像素，導(dǎo)出由從類別分類部624提供的偏移類型以及類別索引所指定的偏移。還具備偏移逆移位部，其使偏移向左側(cè)比特移位由偏移屬性設(shè)定部613所設(shè)定的移位值(未圖示)。偏移逆移位部進(jìn)行該偏移的逆量化，使得偏移的比特深度與像素比特深度相匹配。通過進(jìn)行這種逆量化，在后述的偏移加法部626的加算處理中，能夠在同一比特深度進(jìn)行像素值與偏移的加法運(yùn)算。對(duì)各像素逆量化后的偏移提供給偏移加法部626。
[0210]偏移加法部626對(duì)對(duì)象QAOU中的已去區(qū)塊解碼圖像P_DB的各像素加上從偏移導(dǎo)出部625提供的偏移。偏移加法部626將對(duì)已去區(qū)塊解碼圖像P_DB中包含的全部QAOU進(jìn)行處理而得到的圖像作為偏移已濾波解碼圖像P_0F輸出。
[0211]圖8是表示自適應(yīng)偏移濾波器處理部62執(zhí)行的處理的流程的流程圖。
[0212](步驟S101)
[0213]首先，QAOU控制部622從偏移信息存儲(chǔ)部621取得QAOU結(jié)構(gòu)信息。
[0214](步驟SlO2)
[0215]接下來，QAOU控制部622開始將作為處理對(duì)象的對(duì)象QAOMU的QAOMU編號(hào)作為循環(huán)變量的第I循環(huán)。
[0216](步驟SlO3)
[0217]QAOU控制部622向偏移類型導(dǎo)出部623提供QAOMU編號(hào)?；赒AOU控制部622的控制，偏移類型導(dǎo)出部623從偏移信息存儲(chǔ)部621的映射存儲(chǔ)器以及表存儲(chǔ)器讀出由從QAOU控制部622提供的QAOMU編號(hào)指定的偏移類型。此外，偏移類型導(dǎo)出部623將所讀出的偏移類型提供給類別分類部624。
[0218](步驟S104)
[0219]接下來，QAOU控制部622開始以對(duì)象QAOMU中包含的各像素的像素編號(hào)為循環(huán)變量的第2循環(huán)。這里，像素編號(hào)，用于相互識(shí)別對(duì)象QAOMU中包含的像素，例如，可以使用對(duì)包含在對(duì)象QAOMU中的各像素按給定掃描順序所附加的編號(hào)。此外，也可以代替這種像素編號(hào)，而將對(duì)象QAOMU中包含的各像素的X坐標(biāo)以及y坐標(biāo)作為循環(huán)變量。
[0220](步驟S105)
[0221]接下來，類別分類部624基于QAOU控制部622的控制，將處理對(duì)象的像素分類為從偏移類型導(dǎo)出部623提供的偏移類型中能夠選擇的多個(gè)類別的任一個(gè)。此外，將該偏移類型、和表示處理對(duì)象的像素被分類的類別的類別索引提供給偏移導(dǎo)出部625。
[0222](步驟SlO6)
[0223]接下來，偏移導(dǎo)出部625基于QAOU控制部622的控制，從偏移信息存儲(chǔ)部621讀出要對(duì)處理對(duì)象的像素加上的偏移。即，讀出由從類別分類部624提供的偏移類型以及類別索引所指定的偏移。此外，將通過將針對(duì)處理對(duì)象的像素所導(dǎo)出的偏移向左側(cè)比特移位從偏移屬性設(shè)定部613提供的移位值而逆量化后的偏移提供給偏移加法部626。
[0224](步驟SlO7)
[0225]接下來，偏移加法部626基于QAOU控制部622的控制，對(duì)已去區(qū)塊解碼圖像P_DB的處理對(duì)象像素的像素值加上從偏移導(dǎo)出部625提供的偏移。
[0226](步驟SlO8)
[0227]本步驟是第2循環(huán)的結(jié)束。
[0228](步驟SlO9)
[0229]本步驟是第I循環(huán)的結(jié)束。
[0230]另外，在步驟S103中，在偏移類型導(dǎo)出部623讀出的偏移為0(偏移類型=0)時(shí)，QAOU控制部622控制偏移加法部626，使得不對(duì)處理對(duì)象的QAOMU的各像素加上偏移。
[0231]此外，在步驟S105中，在對(duì)象像素被分類為類別O (類別索引=0)的情況下，控制偏移加法部626，使得不對(duì)該對(duì)象像素加上偏移。
[0232](存儲(chǔ)偏移所需要的比特?cái)?shù))
[0233]接下來，說明存儲(chǔ)偏移(sa0_0ffset)所需要的比特?cái)?shù)。在像素比特深度是10比特、偏移的比特深度是9比特的情況下，偏移取_29?29-1的值，每一個(gè)偏移的比特?cái)?shù)具有大到10比特的比特?cái)?shù)。在如此解碼較大的比特?cái)?shù)的偏移的情況下，偏移信息存儲(chǔ)部621，作為用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小，要求具有每I圖片最大為
[0234](每I圖片的OAOMU的總數(shù))X(類別數(shù))X (每偏移的比特?cái)?shù))=256X 16X 10(比特)=40960 (比特)。
[0235]每I圖片的QAOMU的總數(shù)，對(duì)于解碼裝置是256個(gè)，而對(duì)于后述的編碼裝置使用341個(gè)，所以需要更大的存儲(chǔ)器。如此，在不限制偏移的值域，而使用在偏移的比特深度可能的值域的情況下，偏移的比特?cái)?shù)較大，所以需要用于預(yù)先存儲(chǔ)偏移的較大的存儲(chǔ)器大小。
[0236](SA0_DEPTH與編碼效率的關(guān)系)
[0237]從量化誤差的觀點(diǎn)出發(fā)，SA0_DEPTH和PIC_DEPTH存在相互密切的關(guān)系。自適應(yīng)偏移濾波器60的輸出圖像的比特深度是像素比特深度PIC_DEPTH，SA0_DEPTH是對(duì)像素加上的偏移的比特深度，所以即使使用超過像素比特深度的精度的偏移，也會(huì)在輸出過程被舍棄，作為偏移的精度的SA0_DEPTH，優(yōu)選被設(shè)定為PIC_DEPTH以下。此外，在SA0_DEPTH小于PIC_DEPTH的情況下，僅能對(duì)輸入圖像進(jìn)行比由濾波器能夠補(bǔ)正的精度(PIC_DEPTH)粗的補(bǔ)正，所以濾波器效果減小。
[0238]另外，在偏移的精度SA0_DEPTH高的情況下，偏移的碼量增加。一般，由通過使使用編碼數(shù)據(jù)的碼量R、輸入圖像的失真D、權(quán)重λ來表現(xiàn)的碼率失真成本D+λ R最小化從而編碼效率被最佳化也可以理解，因?yàn)槠频木葘?duì)失真D給予負(fù)面影響，對(duì)碼率R給予正面影響，所以精度的大小存在折中，存在特定的最佳值。
[0239]進(jìn)而，在本實(shí)施例中，通過將被量化的偏移限制在由一定的比特寬度能夠表現(xiàn)的偏移值域，從而能夠限制在偏移信息存儲(chǔ)部621用于存儲(chǔ)被量化的偏移的比特寬度。與不進(jìn)行限制的情況相比，能夠獲得削減存儲(chǔ)器大小的效果。但是，過度地使偏移值域變窄，偏移對(duì)解碼圖像的失真進(jìn)行補(bǔ)正的效果變小，所以存在偏移的加法處理不能去除解碼圖像的失真、編碼效率降低的情況。因此，優(yōu)選對(duì)偏移值域設(shè)定最佳的范圍，使得編碼效率不降低。[0240]在本實(shí)施方式中，偏移屬性設(shè)定部613通過型式SI?S6的任一種來設(shè)定偏移比特深度以及偏移的移位值，通過型式Cl?C3的任一種來設(shè)定偏移值域。
[0241](型式SI)
[0242]在型式SI中，如圖9 (a)所示，使偏移的比特深度SA0_DEPTH與像素比特深度PIC_DEPTH相等。因?yàn)槠频木鹊淖畲笾党蔀橄袼乇忍厣疃?，所以型式SI成為以最大的精度對(duì)偏移進(jìn)行編碼。
[0243](型式S2)
[0244]在型式S2中，如圖9(b)所示，在PIC_DEPTH為10比特以下時(shí)，使SA0_DEPTH與PIC_DEPTH相等，在PIC_DEPTH為11比特以上時(shí)，將SA0_DEPTH設(shè)為10。在型式S2將偏移的比特深度的上限設(shè)為10比特。根據(jù)
【發(fā)明者】的見解，在解碼圖像的量化步長QP的值較小時(shí)(比特率高時(shí))，偏移的比特深度與像素比特深度相同的情況與偏移的比特深度較小的情況相比，編碼效率高，相反，在量化步長QP的值較大時(shí)，偏移的比特深度小于像素比特深度的情況較之于與像素比特深度相同的情況，編碼效率變高。根據(jù)
【發(fā)明者】的實(shí)驗(yàn)，確認(rèn)了量化參數(shù)qp在12?27的區(qū)域中通過按照型式S2決定偏移的比特深度，從而與像素比特深度為9比特以下時(shí)偏移的比特深度為8比特、像素比特深度為10比特以上時(shí)偏移的比特深度為9比特的情況相比，編碼效率提高。因此，在型式S2中，通過以10比特為界來改變對(duì)像素比特深度的依賴性，從而與如型式SI那樣使偏移的比特深度和像素比特深度相等的情況相比，能夠減小偏移的碼量，并且能夠獲得較高的編碼效率。
[0245](型式S3)
[0246]在型式S3中，如圖9 (C)所示，在PIC_DEPTH為9比特以下時(shí)，使SA0_DEPTH與PIC_DEPTH相等，在PIC_DEPTH為10比特以上時(shí)，將SA0_DEPTH設(shè)為9。在型式S3將偏移的比特深度的上限設(shè)為9比特。在型式S3中，也與型式S2同樣地能夠減小偏移的碼量，能夠獲得較高的編碼效率。
[0247](型式S4)
[0248]在型式S4中，如圖9 (d)所示，在PIC_DEPTH為10比特以下時(shí)，使SA0_DEPTH與 PIC_DEPTH 相等，在 PIC_DEPTH 為 11 比特以上時(shí)，將 SA0_DEPTH 設(shè)為 10-floor ((PIC_DEPTH-10) / STEP)。這里，函數(shù)floor (x)是給出x以下的最大整數(shù)的函數(shù)。在型式S4中，在像素比特深度為10比特以上時(shí)，表示像素比特每增加(減少)STEP比特，偏移的比特深度增加(減少)I比特。在圖9(e)中，示出型式S4中的STEP=2的情況，像素比特深度每增加2比特，偏移的比特深度增加I比特。通過采用這種構(gòu)成，考慮像素比特深度的大小的同時(shí)，對(duì)于比特率的大小，能夠進(jìn)行自由度比型式S2以及型式S3高的對(duì)應(yīng)。
[0249]此外，型式SI?型式S4中共同的是移位值用PIC_DEPTH與SA0_DEPTH的差分值PIC_DEPTH-SAO_DEPTH來表示。上述型式SI?S4中的偏移比特深度以及移位值的變更，不增加存儲(chǔ)器大小以及處理量而設(shè)定偏移比特深度以及移位值，所以能夠改善編碼效率。
[0250](型式S5)
[0251]在型式S5中明示地對(duì)偏移的比特深度進(jìn)行編碼。具體而言，對(duì)偏移的比特深度與給定值的差進(jìn)行編碼。給定值為8、或者像素比特深度恰當(dāng)，前者的情況下，SA0_DEPTH-8被編碼，后者的情況下，PIC_DEPTH-SAO_DEPTH是恰當(dāng)?shù)摹Ａ硗?，偏移的比特深度也可以作為編碼數(shù)據(jù)的各種參數(shù)信息、頭或者QAOU信息的一部分進(jìn)行編碼。作為QAOU信息的一部分，既可以在葉子QAOU中含有像素比特深度，也可以在給定層次(例如最上位層次的QA0U、或者第I層次的QA0U)的QAOU信息中含有像素比特深度。通過作為編碼數(shù)據(jù)的一部分進(jìn)行編碼，通過在解碼裝置以及編碼裝置將比特深度設(shè)定為最佳的值，從而可以獲得使編碼效率最大化的效果。此外，在利用QAOU信息對(duì)比特深度進(jìn)行編碼的情況下，通過按照QAOU的深度sao_curr_depth變更比特深度,從而能夠減小用于存儲(chǔ)偏移的存儲(chǔ)器。有可能出現(xiàn)較多的偏移的情況是sao_curr_depth較大的情況,所以通過在sao_curr_depth較大的情況下將比特深度設(shè)定得較小，在sao_curr_depth較小的情況下將比特深度設(shè)定得較大,從而能夠削減存儲(chǔ)器大小。例如，在sao_curr_depth=0?I的情況下,設(shè)偏移的比特深度=像素比特深度(型式SI),在sao_curr_depth=2?4時(shí),對(duì)偏移的比特深度設(shè)定上限(型式S2)等是恰當(dāng)?shù)?，如此?duì)比特寬度進(jìn)行編碼。此外，也可以對(duì)表示是按每個(gè)QAOU的深度對(duì)偏移的比特寬度進(jìn)行編碼、還是與QAOU的深度無關(guān)地使用一種偏移的比特寬度的標(biāo)志進(jìn)行編碼，切換是否按每個(gè)QAOU的深度進(jìn)行編碼。
[0252](型式S6)
[0253]在型式S6中，沒有明示的編碼,按照sao_curr_depth決定比特深度。例如,在sao_curr_depth=0?I的情況下,設(shè)偏移的比特深度=像素比特深度(型式SI),在sao_curr_depth=2?4時(shí)，對(duì)偏移的比特深度設(shè)定上限(型式S2)等是恰當(dāng)?shù)摹?br> [0254](型式Cl)
[0255]在型式Cl中，按照SA0_DEPTH設(shè)定偏移值域。以下，將表示偏移值域的值的最大的比特長設(shè)為CLIP_BIT。具體而言，通過CLIP_BIT=SAO_DEPTH-K的計(jì)算，將偏移值域決定為-2eup—μη?2αΙΡ—ΜΗ+根據(jù)
【發(fā)明者】的實(shí)驗(yàn)，發(fā)現(xiàn)了 Κ=4是恰當(dāng)?shù)?。S卩，確認(rèn)了在Κ=4的情況下，即使根據(jù)偏移值域來限定偏移的范圍，也沒有編碼效率的降低。在最經(jīng)常使用的像素的比特深度為8的情況下，Κ=4是恰當(dāng)?shù)?。在像素比特深度?的情況下，偏移的比特深度SA0_DEPTH也為8，成為CLIP_BIT=8_K=4。一個(gè)偏移能夠用4比特進(jìn)行存儲(chǔ)，對(duì)于以8比特的字節(jié)為單位進(jìn)行處理的軟件等，可以在I字節(jié)打包存儲(chǔ)一個(gè)偏移，可以簡便地削減存儲(chǔ)器大小。
[0256](型式C2)
[0257]在型式C2中，與SA0_DEPTH無關(guān)地設(shè)定偏移值域。具體而言，設(shè)CLIP_BIT=8，將偏移值域決定為-27?27-1。
[0258]此外，一般地，也可以使用不依賴于SA0_DEPTH的常數(shù)N來設(shè)CLIP_BIT=N。在與SA0_DEPTH無關(guān)地設(shè)定偏移值域的情況下，可以獲得減小存儲(chǔ)器大小的效果，所以優(yōu)選設(shè)定為小于偏移的比特深度的值。
[0259](型式C3)
[0260]在型式C3中，按照QAOU的層次來決定偏移值域。在sao_curr_depth較小的情況下(例如O?I),設(shè)為不依賴于偏移的比特深度來決定偏移值域,在sao_curr_depth較大的情況下(例如2?4)，根據(jù)偏移的比特深度來進(jìn)行決定，這是恰當(dāng)?shù)?。例如，存在前者采用CLIP_BIT=8 (型式C2)、后者采用SA0_DEPTH_K比特(型式Cl)的方法。另外，在按照QAOU的層次來變更偏移的比特深度的情況下，作為結(jié)果，存在也可以是固定的比特?cái)?shù)的情況。例如，設(shè)CLIP_BIT=4是恰當(dāng)?shù)摹?br> [0261](偏移的比特?cái)?shù)的具體例I)[0262]接下來，對(duì)于本實(shí)施方式所涉及的偏移(sa0_0ffset)的比特?cái)?shù)的第I具體例進(jìn)行說明。在本例中，說明將像素比特深度設(shè)為10比特，根據(jù)型式S2進(jìn)行移位值的設(shè)定，根據(jù)型式Cl進(jìn)行偏移值域的設(shè)定的情況。在型式S2中，偏移的比特深度被設(shè)定為10比特，在型式Cl中，偏移值域被設(shè)定為10-4=6比特。每一個(gè)偏移的比特?cái)?shù)是6比特，對(duì)應(yīng)于將偏移可以取的值限制在-32?31的值。在本例的情況下，偏移信息存儲(chǔ)部621，作為用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小，每一圖片最大具有
[0263](每一圖片的QAOMU的總數(shù))X(類別數(shù))X (每一偏移的比特?cái)?shù))=256X 16X6 (比特)=24576 (比特)
[0264]就夠。
[0265]因此，通過采用偏移具有本例的值域的構(gòu)成，與現(xiàn)有例相比，能夠使偏移信息存儲(chǔ)部621所需要的存儲(chǔ)器大小減少到約3 / 5。
[0266]因?yàn)槟軌蛳鳒p包含在編碼數(shù)據(jù)#1中的偏移的碼量，所以能夠?qū)崿F(xiàn)編碼效率的提高。此外，因?yàn)榧由线^度的偏移的情況被抑制，所以可以保證適當(dāng)?shù)漠嬞|(zhì)。
[0267](偏移的比特?cái)?shù)的具體例2)
[0268]接下來，對(duì)本實(shí)施方式所涉及的偏移(sa0_0ffset)的比特?cái)?shù)的第2具體例進(jìn)行說明。在本例中，說明將像素比特深度設(shè)為10比特，根據(jù)型式S2進(jìn)行移位值的設(shè)定，根據(jù)型式C2進(jìn)行偏移值域的設(shè)定的示例。根據(jù)型式S2，偏移的比特深度被設(shè)定為10比特，根據(jù)型式C2，偏移值域被設(shè)定8比特。每一偏移的比特?cái)?shù)為8比特，對(duì)應(yīng)于將偏移可以取的值限制在例如-128?127的值。在本例的情況下，偏移信息存儲(chǔ)部621，作為用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小，每一圖片最大具有
[0269](每一圖片的QAOMU的總數(shù))X(類別數(shù))X (每一偏移的比特?cái)?shù))=256X 16X8 (比特)=32768 (比特)
[0270]就夠。
[0271]因此，通過采用偏移具有本例的比特?cái)?shù)的構(gòu)成，與現(xiàn)有例相比，能夠使偏移信息存儲(chǔ)部621所需要的存儲(chǔ)器大小減少到約4 / 5。
[0272]此外，因?yàn)槟軌蛳鳒p包含在編碼數(shù)據(jù)#1中的偏移的碼量，所以能夠?qū)崿F(xiàn)編碼效率的提高。此外，因?yàn)榧由线^度的偏移的情況被抑制，所以可以保證適當(dāng)?shù)漠嬞|(zhì)。
[0273]另外，若限制偏移的比特?cái)?shù)，則能夠減少包含在編碼數(shù)據(jù)中的偏移信息的碼量，但是若過度地進(jìn)行限制，則存在如下問題:具備自適應(yīng)偏移濾波器的情況的優(yōu)點(diǎn)變小，包含在編碼數(shù)據(jù)中的殘差數(shù)據(jù)(殘差圖像的像素值)的碼量變大。
[0274](偏移的比特?cái)?shù)的具體例3)
[0275]接下來，對(duì)偏移(sa0_0ffset)的比特?cái)?shù)的第3具體例進(jìn)行說明。本例在型式Cl、C2任一種中，根據(jù)偏移類型是邊緣偏移(偏移類型=1?4)還是帶偏移(偏移類型=5?6)，而對(duì)偏移的比特?cái)?shù)設(shè)定不同的值。這里，以將像素比特深度設(shè)為10比特的情況為例，說明如下方法:根據(jù)型式S2進(jìn)行移位值的設(shè)定，根據(jù)型式C2進(jìn)行邊緣偏移的偏移值域的設(shè)定，根據(jù)型式Cl進(jìn)行帶偏移的偏移值域的設(shè)定。
[0276]在像素比特深度為10比特的情況下，在型式S2中，偏移的比特深度被設(shè)定為10比特。屬于邊緣偏移的偏移類型的偏移(以下稱為“邊緣偏移的偏移”)，根據(jù)型式C2將值域設(shè)定為8比特。屬于帶偏移的偏移類型的偏移(以下稱為“帶偏移的偏移”)，根據(jù)型式Cl將值域設(shè)定為6比特。更一般而言，將邊緣偏移的偏移的比特?cái)?shù)設(shè)為N比特，將帶偏移的偏移的比特?cái)?shù)設(shè)為M比特時(shí)，按照滿足N > M的方式?jīng)Q定偏移的比特?cái)?shù)。
[0277]在偏移信息存儲(chǔ)部621需要確保的存儲(chǔ)器大小，以QAOU單位，是偏移類型的類別數(shù)X偏移的比特?cái)?shù)，所以若減小偏移的類別數(shù)大于邊緣偏移的帶偏移的比特?cái)?shù)，則對(duì)于偏移能夠有效地利用在偏移信息存儲(chǔ)部621所使用的存儲(chǔ)器區(qū)域。
[0278]如此通過按照偏移類型，使偏移的比特?cái)?shù)不同，不會(huì)對(duì)偏移信息存儲(chǔ)部621要求過度的存儲(chǔ)器大小，能夠?qū)崿F(xiàn)編碼效率的提高。能夠最有效地利用存儲(chǔ)器區(qū)域。
[0279]另外，在用于限制偏移可以取的值的閾值th大于21^1且為2m以下時(shí)，作為用于對(duì)該偏移進(jìn)行編碼的編碼方式，可以采用m比特的固定長編碼/解碼方式。此外，可以采用將最大值設(shè)為th的Truncated unary編碼、Truncated Rice編碼等可變長編碼/解碼方式。另外，上述最大值th，根據(jù)從偏移屬性設(shè)定部613提供的偏移值域來決定。此外，運(yùn)動(dòng)圖像解碼裝置I可以對(duì)如此進(jìn)行了編碼的偏移進(jìn)行解碼。
[0280]對(duì)于以上的構(gòu)成，在偏移屬性設(shè)定部613中設(shè)定偏移的比特深度、偏移值域、以及移位值。在自適應(yīng)偏移濾波器信息解碼部61中，解碼具有偏移值域的范圍的值的量化偏移，對(duì)各個(gè)偏移，存儲(chǔ)在具有偏移值域以上的比特寬度的存儲(chǔ)區(qū)域的偏移信息存儲(chǔ)部621。在本實(shí)施方式中，特征在于根據(jù)偏移的比特深度來決定偏移值域。此外，根據(jù)像素的比特深度來決定偏移的比特深度。因此，根據(jù)像素的比特深度來決定偏移的比特深度也是本實(shí)施方式的特征。
[0281]此外，實(shí)施方式I中的自適應(yīng)偏移濾波器信息解碼部61可以采用如下方式:具備存儲(chǔ)解碼后的偏移的存儲(chǔ)部和對(duì)從該存儲(chǔ)部獲得的偏移進(jìn)行逆量化的逆量化部，省略偏移導(dǎo)出部625中的逆量化處理。在該情況下，特征在于:存儲(chǔ)部存儲(chǔ)被限制在由偏移屬性設(shè)定部613設(shè)定的偏移值域的偏移 ；以及逆量化部按照由偏移屬性設(shè)定部613設(shè)定的移位值向左側(cè)進(jìn)行移位來進(jìn)行逆量化處理。
[0282]偏移信息解碼部611還可以表現(xiàn)為，從編碼數(shù)據(jù)#1解碼由偏移加法部626參考的各偏移，偏移加法部626對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移，并且偏移信息解碼部611具備偏移解碼單元，該偏移解碼單元設(shè)定按照未圖示的像素比特深度而決定的偏移值域以及移位值，并且解碼被限制在偏移值域的偏移。
[0283]此外，本實(shí)施方式所涉及的自適應(yīng)偏移濾波器60還可以表現(xiàn)為圖像濾波器裝置，圖像濾波器裝置對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移，并且圖像濾波器裝置具備:偏移屬性設(shè)定部613，其參考編碼數(shù)據(jù)中包含的偏移類型指定信息，設(shè)定處理對(duì)象的單位區(qū)域中的偏移屬性；偏移信息解碼部611，其解碼具有與上述設(shè)定的偏移屬性中包含的偏移值域相應(yīng)的比特寬度的偏移；和偏移加法部626，其對(duì)上述輸入圖像的各像素值加上上述偏移。
[0284]進(jìn)而，偏移信息解碼部611還可以構(gòu)成為，除了上述偏移解碼單元之外，具備--決定單元，其決定多個(gè)偏移類型中處理對(duì)象的單位區(qū)域所屬的偏移類型；和偏移解碼單元，其解碼具有根據(jù)由上述決定單元所決定的偏移類型而不同的比特寬度的偏移。
[0285]此外可以構(gòu)成為，上述偏移類型指定信息包含各單位區(qū)域中的上述輸入圖像的像素值的比特深度，偏移信息解碼部611解碼具有與上述像素值的比特深度相應(yīng)的比特寬度的偏移。[0286]以下，對(duì)于類別分類部624執(zhí)行的分類處理的具體例進(jìn)行說明。類別分類部624優(yōu)選進(jìn)行以下的分類處理例中的與生成編碼數(shù)據(jù)#1的運(yùn)動(dòng)圖像編碼裝置中的分類處理相對(duì)應(yīng)的分類處理。
[0287](類別分類部624執(zhí)行的分類處理例I)
[0288]參考圖10(a)~(f)至圖12來說明類別分類部624執(zhí)行的分類處理的第I例。 [0289](偏移類型=1~4(邊緣偏移)時(shí))
[0290]在由偏移類型導(dǎo)出部623所提供的偏移類型為I~4的任一種時(shí)，類別分類部624判斷在處理對(duì)象的像素附近是否存在邊緣，并且在存在邊緣的情況下判斷邊緣的種類，根據(jù)判斷的結(jié)果，將該處理對(duì)象的像素分類為多個(gè)類別的任一種。
[0291]更具體而言，首先，類別分類部624計(jì)算處理對(duì)象像素X的像素值pic [X]與相鄰于該處理對(duì)象像素或者共有頂點(diǎn)的2個(gè)像素a、b的像素值pic [a]、pic [b]的差分的符號(hào)
[0292]Sign (pic [X]-pic [a])、以及
[0293]Sign (pic [x] -pic [b])。
[0294]這里，Sign(z)是取
[0295]Sign(z) =+1 (z > 0 時(shí))
[0296]Sign (z) =0 (z=0 時(shí))
[0297]Sign (z) =-1 (z < 0 時(shí))
[0298]的各值的函數(shù)。此外，將哪個(gè)像素用作像素a以及像素b，依賴于具體的偏移類型，按照以下方式?jīng)Q定。
[0299].偏移類型=1 (sao_type_idx=l)時(shí)
[0300]如圖10(a)所示，將與處理對(duì)象像素X的左側(cè)相鄰的像素作為像素a，將與處理對(duì)象像素的右側(cè)相鄰的像素作為像素b。
[0301]?偏移類型=2 (sao_type_idx=2)時(shí)
[0302]如圖10(b)所示，將與處理對(duì)象像素X的上側(cè)相鄰的像素作為像素a，將與處理對(duì)象像素的下側(cè)相鄰的像素作為像素b。
[0303]?偏移類型=3 (sao_type_idx=3)時(shí)
[0304]如圖10 (C)所示，將共有處理對(duì)象像素X的左上的頂點(diǎn)的像素作為像素a，將共有處理對(duì)象像素的右下的頂點(diǎn)的像素作為像素b。
[0305]?偏移類型=4 (sao_type_idx=4)時(shí)
[0306]如圖10 (d)所示，將共有處理對(duì)象像素X的左下的頂點(diǎn)的像素作為像素a，將共有處理對(duì)象像素的右上的頂點(diǎn)的像素作為像素b。
[0307]圖11 (a)是表示處理對(duì)象像素X的像素值pic [X]與像素a或者b的像素值的大小關(guān)系的曲線、以及表示與其大小關(guān)系相應(yīng)的函數(shù)Sign的值的圖。在圖11(a)所示的曲線中，附帶有pic[x]的黑圓點(diǎn)表示處理對(duì)象像素X的像素值，未附帶有pic[X]的黑圓點(diǎn)表示處理對(duì)象像素a或者b的像素值。此外，圖11(a)所示的曲線中的上下方向表示像素值的大小。
[0308]接下來,類別分類部624 基于 Sign (pic [X]-pic [a])、以及 Sign (pic [x]-pic [b])通過以下的數(shù)式(1-1)導(dǎo)出EgdeType。
[0309]EgdeType=Sign(pic[x]-pic[a])+Sign(pic[x]-pic[b])+2…(1-1)[0310]圖11 (b)是表示處理對(duì)象像素X的像素值與像素a以及b的像素值的大小關(guān)系的曲線、以及表示與其大小關(guān)系相應(yīng)的EgdeType的值的圖。在圖11(b)中，各曲線的中心的黑圓點(diǎn)表示處理對(duì)象像素X的像素值，兩端的黑圓點(diǎn)表示像素a以及b的像素值。此外，圖11(b)所示的曲線中的上下方向表示像素值的大小。
[0311]接下來，類別分類部624基于所導(dǎo)出的EgdeType，按以下的方式導(dǎo)出處理對(duì)象像素X應(yīng)該所屬的類別的類別索引(claSS_idx)。
[0312]class_idx=EoTbl[EdgeType]
[0313]這里,EoTbl[EdgeType]是用于根據(jù) EdgeType 導(dǎo)出 class_idx 的變換表。圖 11(d)中示出該變換表EoTbl的具體例。
[0314]如圖11(d)所示，類別分類部624在由處理對(duì)象像素X、像素a以及像素b構(gòu)成的區(qū)域不存在邊緣的情況下(以下，也稱為“平坦的情況”)，將處理對(duì)象像素X分類為類別O (class_idx=0)。圖11(c)示出圖11(b)所示的各曲線與lass_idx的對(duì)應(yīng)。
[0315](偏移類型=5~6(帶偏移)時(shí))
[0316]在從偏移類型導(dǎo)出部623提供的偏移類型是5~6的任一種時(shí)，類別分類部624按照處理對(duì)象像素X的像素值Pic [X]，將該處理對(duì)象像素的像素值分類為多個(gè)類別的任一個(gè)。
[0317]?偏移類型=5 (sao_type_idx=5)時(shí)
[0318]類別分類部624在處理對(duì)象像素X的像素值pic [X]滿足
[0319](maxX1 / 4)≤pic [x]≤(maxX 3 / 4)
[0320]的情況下，將該處理對(duì)象像素分類為類別O以外的類別。即，在處理對(duì)象像素的像素值處于圖12(a)中的斜線的范圍內(nèi)的情況下，將該處理對(duì)象像素分類為類別O以外的類別。另外，上述max表示處理對(duì)象像素X的像素值可以取的最大值，例如，max=255。此外，在max=255時(shí)，上述條件也可以表現(xiàn)為
[0321]8≤(pic[x] / 8)≤ 23。
[0322]?偏移類型=6 (sao_type_idx=6)時(shí)
[0323]類別分類部624在處理對(duì)象像素X的像素值pic [x]滿足
[0324]pic [x] ≤(maxX 1 / 4)或者(maxX 3 / 4) ≤ pic [x]
[0325]的情況下，將該處理對(duì)象像素分類為類別O以外的類別。即，在處理對(duì)象像素的像素值處于圖12(b)中的斜線的范圍內(nèi)的情況下，將該處理對(duì)象像素分類為類別O以外的類別。另外，上述max表示處理對(duì)象像素X的像素值可以取的最大值，例如，max=255。此外，在nax = 255時(shí)，上述條件可以表現(xiàn)為
[0326](pic [x] / 8) ≤7 或者 24 ≤(pic [x] / 8)。
[0327]若更具體地說明類別分類部624執(zhí)行的類別分類處理，則如下所述。
[0328]在偏移類型為5~6的任一種時(shí)，類別分類部624按照以下方式導(dǎo)出處理對(duì)象像素X應(yīng)該所屬的類別的類別索引(claSS_idx)。
[0329]class_idx=EoTbl[sao_type_idx][pic[x] / 8]
[0330]這里，EoTbl [sao_type_idx] [pic [x] / 8]是用于根據(jù)處理對(duì)象像素x的像素值pic[x]和sao_type_idx導(dǎo)出class_idx的變換表。圖12中示出該變換表EoTbl的具體例。在圖 12(c)中，“B0_1 ” 表不 sao_type_index=5, “B0_2” 表不 sao_type_index=6。[0331]如圖12(c)所示，sao_type_index=5時(shí),類別分類部624在處理對(duì)象像素x的像素值pic [X]滿足(pic[x] / 8) < 23時(shí),按照pic [x]的大小,將處理對(duì)象像素x分類為類別索引I~16的任一種。
[0332]另一方面，sao_type_index=6時(shí)，類別分類部624在處理對(duì)象像素X的像素值pic[X]滿足pic[X] / 8) < 7或者24 < (pic[x] / 8)時(shí),按照pic[x]的大小,將處理對(duì)象像素X分類為類別索引I~16的任一種類別。
[0333]一般，圖像的比特深度為 PIC_DEPTH 時(shí)，max=2PIG-DEPTH_1，使用 pic / 2(pigjiepth^ 代替圖12(c)中的pic / 8來進(jìn)行類別的分類。
[0334](類別分類部624執(zhí)行的分類處理例2)
[0335]接下來，對(duì)類別分類部624執(zhí)行的分類處理的第2例進(jìn)行說明。
[0336]在本處理例中，類別分類部624使用以下的數(shù)式(1-2)代替數(shù)式(1_1)來導(dǎo)出EgdeType。其他與分類處理例I相同。
[0337]EgdeType=Sign((pic[x] > > shift)-(pic[a] > > shift))+Sign ((pic [x] > >shift) - (pic [b] > > shift))+2 …(1-2)
[0338]這里，“>>”表示右比特移位，“shift”表示比特移位的大小。對(duì)于“shift”的具體值，例如，可以按照與像素值的比特深度具有正相關(guān)的方式進(jìn)行決定。
[0339]在基于分類處理例 I的分類處理中，即使在像素值的斜率非常小的情況下，只要像素值的斜率不是0，則Sign的值成為非O。因此，基于分類處理例I的分類處理，具有容易受到噪聲的影響的一面。
[0340]在本處理例中，因?yàn)槭瓜袼刂迪蛴乙莆恢笕〉貌罘?，所以EgdeType的值變得難以受到噪聲的影響，具有編碼效率提高這樣的效果。
[0341]另外，在本處理例中，也可以使用以下的數(shù)式(1-3)代替數(shù)式(1-2)。
[0342]EgdeType=Sign ((pic[x]-pic[a]) > > shift)+Sign ((pic[x]-pic[b]) > >shift)) +2...(1-3)
[0343]即，也可以在取得像素值的差分之后，進(jìn)行右比特移位。通過使用數(shù)式(1-3)也可以取得與使用數(shù)式(1-2)的情況相同的效果。
[0344](類別分類部624執(zhí)行的分類處理例3)
[0345]接下來，對(duì)類別分類部624執(zhí)行的分類處理的第3例進(jìn)行說明。
[0346]在本處理例中，類別分類部624按照以下的方式變更在分類處理例I中所說明的函數(shù)Sign的定義。其他與分類處理例I相同。
[0347]Sign (z) =+1 (z > th 時(shí))
[0348]Sign (z) =0 (-th < z < th 時(shí))
[0349]Sign (z) =-1 (z < -th 時(shí))
[0350]這里，th是具有預(yù)先決定的值的閾值。對(duì)于閾值th的具體值的絕對(duì)值，例如，可以決定為與像素值的比特深度具有正相關(guān)。
[0351]在本處理例中，EgdeType的值也變得難以受到噪聲的影響，能夠獲得較高的編碼效率。
[0352](類別分類部624執(zhí)行的分類處理例4)
[0353]接下來，對(duì)類別分類部624執(zhí)行的分類處理的第4例進(jìn)行說明。[0354]在本處理例中，類別分類部624使用圖13所示的EoTbl [sao_type_idx][pic [x] / 8]代替圖 12 (c)所不的 EoTbl [sao_type_idx] [pic [x] / 8]。
[0355]如圖13所示，在本處理例中，在pic [x] / 8的值是8以及9的任一個(gè)的情況下，無論是sao_type_index=5,還是sao_type_index = 6,處理對(duì)象像素x都被分類為類別索引不是O的類別。此外，在pic[x] / 8的值是22以及23的任一個(gè)的情況下，無論是sao_type_index=5,還是sao_type_index=6,處理對(duì)象像素x都被分類為類別索引不是O的類別。
[0356]此外，在本處理例中，處理對(duì)象像素的像素值在其值為15以下的情況下(pic[x] / 8=0或者I的情況下)，被裁剪(clip)為MIN。此外，處理對(duì)象像素的像素值在其值為240以上的情況下(pic[x] / 8=30或者31的情況下)，被裁剪為MAX。這里，作為MIN以及MAX，優(yōu)選使用如下任一種組合:
[0357].MIN=15、MAX=240
[0358].MIN=16、MAX=239
[0359].MIN=16、MAX=235
[0360]在分類處理例I中，sao_type_index=5時(shí)被分類為類別O的處理對(duì)象像素，在sao_type_index=6時(shí)被分類為不是類別O的類別。此外，sao_type_index=6時(shí)被分類為類別O的處理對(duì)象像素,在sao_type_index=5時(shí)被分類為不是類別O的類別。
[0361]因此，在分類處理例I中，根據(jù)是sao_type_index=5,還是sao_type_index=6,力口上了偏移之后的像素值有可能較大地不同，所以有可能產(chǎn)生不能如所期待的那樣提高編碼效率的問題。此外，這種問題，在偏移濾波器前圖像的像素值是pic[x] / 8的值為8以及9的任一個(gè)、或者pic[X] / 8的值為22以及23的任一個(gè)的情況下，會(huì)變得顯著。
[0362]在本處理例中，在pic[x] / 8的值為8以及9的任一個(gè)的情況下，無論是sao_type_index=5,還是sao_type_index=6,處理對(duì)象像素x都被分類為類別索引不是O的類另Ij，在pic [X] / 8的值為22以及23的任一個(gè)的情況下,無論是sao_type_index=5,還是sao_type_index=6，處理對(duì)象像素x都被分類為類別索引不是O的類別，所以難以產(chǎn)生上述問題。因此，通過進(jìn)行本處理例的處理，能夠?qū)崿F(xiàn)編碼效率的提高。
[0363]另外，在本處理例中，在pic[x] / 8的值為8以及9的任一個(gè)的情況下，以及在pic[x] / 8的值為22以及23的任一個(gè)的情況下，無論是sao_type_index=5,還是sao_type_indeX=6，處理對(duì)象像素X都被分類為了類別索引不是O的類別，但是這不是用來限定本處理例的，只要在pic [X] / 8的值為給定范圍時(shí),進(jìn)行無論是sao_type_index = 5,還是sao_type_index=6都將處理對(duì)象像素x分類為類別索引不是O的類別的處理即可。
[0364]一般而言，在圖像的像素比特深度為PIC_DEPTH時(shí)，max = 2PIG-DEPTH_1，使用pic /2(PKJ)EPTH_5)代替圖13中的pic / 8來進(jìn)行類別的分類。
[0365]如此，進(jìn)行本處理例的分類處理的類別分類部624可以表現(xiàn)為，在上述對(duì)象像素的像素值為給定范圍內(nèi)時(shí)，包含上述對(duì)象像素的單位區(qū)域所屬的偏移類型是上述第I以及上述第2偏移類型的任一種的情況下，都將上述對(duì)象像素分類為加上偏移的偏移類別。
[0366](運(yùn)動(dòng)圖像編碼裝置2)
[0367]以下，參考圖14至圖18(a)?(d)說明通過對(duì)編碼對(duì)象圖像進(jìn)行編碼從而生成編碼數(shù)據(jù)#1的運(yùn)動(dòng)圖像編碼裝置2。關(guān)于運(yùn)動(dòng)圖像編碼裝置2，其一部分包含H.264 /MPEG-4.AVC中所采用的方式、VCEG (Video Coding Expert Group,視頻編碼專家組)中的共同開發(fā)用編解碼器即KTA軟件中所采用的方式、作為其后繼編解碼器的TMuC(TestModel under Consideration,考慮中的測(cè)試模型)軟件中所采用的方式、以及HM(HEVCTestModel，高效率視頻編碼測(cè)試模型)軟件中所采用的技術(shù)。
[0368]圖14是表示本實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置2的構(gòu)成的框圖。如圖14所示，運(yùn)動(dòng)圖像編碼裝置2具備:變換/量化部21、可變長碼編碼部22、逆量化/逆變換部23、緩沖存儲(chǔ)器24、幀內(nèi)預(yù)測(cè)圖像生成部25、幀間預(yù)測(cè)圖像生成部26、運(yùn)動(dòng)矢量檢測(cè)部27、預(yù)測(cè)方式控制部28、運(yùn)動(dòng)矢量冗余刪除部29、加法器31、減法器32、去區(qū)塊濾波器33、自適應(yīng)濾波器70、以及自適應(yīng)偏移濾波器80。運(yùn)動(dòng)圖像編碼裝置2是通過對(duì)運(yùn)動(dòng)圖像#10 (編碼對(duì)象圖像)進(jìn)行編碼從而生成編碼數(shù)據(jù)#1的裝置。
[0369]變換/量化部21，(1)按每個(gè)區(qū)塊對(duì)從編碼對(duì)象圖像減去預(yù)測(cè)圖像Pred而得到的預(yù)測(cè)殘差D進(jìn)行DCT變換(Discrete Cosine Transform,離散余弦變換)，(2)對(duì)通過DCT變換而得到的DCT系數(shù)進(jìn)行量化，(3)將通過量化而得到的量化預(yù)測(cè)殘差QD提供給可變長碼編碼部22以及逆量化/逆變換部23。另外，變換/量化部21，(1)按每個(gè)樹區(qū)塊，選擇進(jìn)行量化時(shí)所使用的量化步長QP，(2)將表示所選擇的量化步長QP的大小的量化參數(shù)差分Δ qp提供給可變長碼編碼部22，(3)將所選擇的量化步長QP提供給逆量化/逆變換部23。這里，所謂量化參數(shù)差分Δqp，是指從與DCT變換/量化的樹區(qū)塊相關(guān)的量化參數(shù)qp (Qp =2M丨6)的值減去與緊接之前進(jìn)行了 DCT變換/量化的樹區(qū)塊相關(guān)的量化參數(shù)qp’的值而得到的差分值。
[0370]可變長碼編碼部22，通過對(duì)(I)從變換/量化部21提供的量化預(yù)測(cè)殘差QD以及Δqp, (2)從后述的預(yù)測(cè)方式控制部28提供的量化參數(shù)PP、以及(3)從后述的自適應(yīng)濾波器70提供的濾波器集編號(hào)、濾波器系數(shù)群、區(qū)域指定信息以及開關(guān)(οn-οff)信息進(jìn)行可變長編碼，從而生成編碼數(shù)據(jù)#1。此外，可變長碼編碼部22對(duì)從自適應(yīng)偏移濾波器80提供的QAOU信息進(jìn)行編碼，并包含在編碼數(shù)據(jù)#1中。
[0371]逆量化/逆變換部23，(1)對(duì)量化預(yù)測(cè)殘差QD進(jìn)行逆量化，(2)對(duì)通過逆量化而得到的DCT系數(shù)進(jìn)行逆DCT (Discrete Cosine Transform,離散余弦變換)變換，(3)將通過逆DCT變換而得到的預(yù)測(cè)殘差D提供給加法器31。在對(duì)量化預(yù)測(cè)殘差QD進(jìn)行逆量化時(shí)，利用從變換/量化部21提供的量化步長QP。另外，從逆量化/逆變換部23輸出的預(yù)測(cè)殘差D是對(duì)輸入到變換/量化部21的預(yù)測(cè)殘差D加上了量化誤差的預(yù)測(cè)殘差D，但這里為了簡化，使用共同的名稱。
[0372]幀內(nèi)預(yù)測(cè)圖像生成部25生成與各分區(qū)相關(guān)的預(yù)測(cè)圖像Pred_Intra。具體而言，(1)對(duì)各分區(qū)，選擇用于幀內(nèi)預(yù)測(cè)的預(yù)測(cè)模式，(2)使用所選擇的預(yù)測(cè)模式，從解碼圖像P生成預(yù)測(cè)圖像Pred_Intra。幀內(nèi)預(yù)測(cè)圖像生成部25將所生成的幀內(nèi)預(yù)測(cè)圖像Pred_Intra提供給預(yù)測(cè)方式控制部28。
[0373]此外，幀內(nèi)預(yù)測(cè)圖像生成部25根據(jù)對(duì)各分區(qū)所選擇的預(yù)測(cè)模式、和各分區(qū)的大小，確定對(duì)各分區(qū)的預(yù)測(cè)索引PI，并且將該預(yù)測(cè)索引PI提供給預(yù)測(cè)方式控制部28。
[0374]此外，幀內(nèi)預(yù)測(cè)圖像生成部25將對(duì)象分區(qū)的大小、以及表示分配給對(duì)象分區(qū)的預(yù)測(cè)模式的信息即幀內(nèi)編碼模式信息IEM提供給自適應(yīng)濾波器70。
[0375]運(yùn)動(dòng)矢量檢測(cè)部27檢測(cè)與各分區(qū)相關(guān)的運(yùn)動(dòng)矢量mv。具體而言，(1)選擇作為參考圖像利用的已濾波解碼圖像？_?1/，(2)通過在所選擇的已濾波解碼圖像P_FL’中搜索與對(duì)象分區(qū)最近似的區(qū)域，從而檢測(cè)與對(duì)象分區(qū)相關(guān)的運(yùn)動(dòng)矢量mv。這里，已濾波解碼圖像P_FL’是對(duì)已經(jīng)完成了解碼的完成解碼的解碼圖像實(shí)施去區(qū)塊濾波器33的去區(qū)塊處理、自適應(yīng)偏移濾波器80的自適應(yīng)偏移處理、以及自適應(yīng)濾波器70的自適應(yīng)濾波處理而得到的圖像，運(yùn)動(dòng)矢量檢測(cè)部27可以從緩沖存儲(chǔ)器24讀出構(gòu)成已濾波解碼圖像P_FL’的各像素的像素值。運(yùn)動(dòng)矢量檢測(cè)部27將所檢測(cè)出的運(yùn)動(dòng)矢量mv和指定作為參考圖像利用的已濾波解碼圖像P_FL’的參考圖像索引RI —起提供給幀間預(yù)測(cè)圖像生成部26以及運(yùn)動(dòng)矢量冗余刪除部29。另外，對(duì)于進(jìn)行雙方向預(yù)測(cè)(加權(quán)預(yù)測(cè))的分區(qū)，作為參考圖像選擇2個(gè)已濾波解碼圖像P_FL1’以及P_FL2’，將與2個(gè)已濾波解碼圖像P_FL1’以及P_FL2’分別對(duì)應(yīng)的運(yùn)動(dòng)矢量mvl和mv2、以及參考圖像索引RIl和RI2提供給幀間預(yù)測(cè)圖像生成部26以及運(yùn)動(dòng)矢量冗余刪除部29。
[0376]幀間預(yù)測(cè)圖像生成部26生成與各幀間預(yù)測(cè)分區(qū)相關(guān)的運(yùn)動(dòng)補(bǔ)償圖像me。具體而言，使用從運(yùn)動(dòng)矢量檢測(cè)部27提供的運(yùn)動(dòng)矢量mv，根據(jù)由從運(yùn)動(dòng)矢量檢測(cè)部27提供的參考圖像索引RI所指定的已濾波解碼圖像P_FL’，生成運(yùn)動(dòng)補(bǔ)償圖像me。與運(yùn)動(dòng)矢量檢測(cè)部27相同，幀間預(yù)測(cè)圖像生成部26可以從緩沖存儲(chǔ)器24讀出構(gòu)成已濾波解碼圖像P_FL’的各像素的像素值。幀間預(yù)測(cè)圖像生成部26將所生成的運(yùn)動(dòng)補(bǔ)償圖像me (幀間預(yù)測(cè)圖像Pred_Inter)與從運(yùn)動(dòng)矢量檢測(cè)部27提供的參考圖像索引RI —起提供給預(yù)測(cè)方式控制部28。另外，關(guān)于分區(qū)雙方向預(yù)測(cè)(加權(quán)預(yù)測(cè))，(1)使用運(yùn)動(dòng)矢量mvl，根據(jù)由參考圖像索引RIl所指定的已濾波解碼圖像P_FL1’生成運(yùn)動(dòng)補(bǔ)償圖像mcl，(2)使用運(yùn)動(dòng)矢量mv2，根據(jù)由參考圖像索引RI2所指定的濾波器済參考圖像P_FL2’生成運(yùn)動(dòng)補(bǔ)償圖像mc2，(3)通過對(duì)運(yùn)動(dòng)補(bǔ)償圖像mcl和運(yùn)動(dòng)補(bǔ)償圖像mc2的加權(quán)平均加上偏移值，從而生成幀間預(yù)測(cè)圖像Pred_Inter。
[0377]預(yù)測(cè)方式控制部28將幀內(nèi)預(yù)測(cè)圖像Pred_Intra以及幀間預(yù)測(cè)圖像Pred_Inter與編碼對(duì)象圖像進(jìn)行比較，選擇是進(jìn)行幀內(nèi)預(yù)測(cè)還是進(jìn)行幀間預(yù)測(cè)。在選擇了幀內(nèi)預(yù)測(cè)的情況下，預(yù)測(cè)方式控制部28將幀內(nèi)預(yù)測(cè)圖像PrecLIntra作為預(yù)測(cè)圖像Pred提供給加法器31以及減法器32，并且將從幀內(nèi)預(yù)測(cè)圖像生成部25提供的預(yù)測(cè)索引PI作為預(yù)測(cè)參數(shù)PP提供給可變長碼編碼部22。另一方面，在選擇了幀間預(yù)測(cè)的情況下，預(yù)測(cè)方式控制部28將幀間預(yù)測(cè)圖像PrecLInter作為預(yù)測(cè)圖像Pred提供給加法器31以及減法器32，并且將從幀間預(yù)測(cè)圖像生成部26提供的參考圖像索引RI以及從運(yùn)動(dòng)矢量冗余刪除部29 (后述)提供的估計(jì)運(yùn)動(dòng)矢量索引PMVI和運(yùn)動(dòng)矢量殘差MVD作為預(yù)測(cè)參數(shù)PP提供給可變長碼編碼部。
[0378]通過從編碼對(duì)象圖像中減去由預(yù)測(cè)方式控制部28所選擇的預(yù)測(cè)圖像Pred，從而利用減法器32生成預(yù)測(cè)殘差D。由減法器32生成的預(yù)測(cè)殘差D，如上所述，通過變換/量化部21進(jìn)行DCT變換/量化。另一方面，通過在由逆量化/逆變換部23所生成的預(yù)測(cè)殘差D加上由預(yù)測(cè)方式控制部28所選擇的預(yù)測(cè)圖像Pred，從而由加法器31生成局部解碼圖像P。由加法器31所生成的局部解碼圖像P經(jīng)由去區(qū)塊濾波器33、自適應(yīng)偏移濾波器80以及自適應(yīng)濾波器70之后，作為已濾波解碼圖像P_FL存儲(chǔ)到緩沖存儲(chǔ)器24中，并且被利用為幀間預(yù)測(cè)中的參考圖像。
[0379]另外，運(yùn)動(dòng)矢量冗余刪除部29刪除由運(yùn)動(dòng)矢量檢測(cè)部27所檢測(cè)出的運(yùn)動(dòng)矢量mv中的冗余。具體而言，(I)選擇用于估計(jì)運(yùn)動(dòng)矢量mv的估計(jì)方法，(2)按照所選擇的估計(jì)方法，導(dǎo)出估計(jì)運(yùn)動(dòng)矢量pmv, (3)通過從運(yùn)動(dòng)矢量mv減去估計(jì)運(yùn)動(dòng)矢量pmv從而生成運(yùn)動(dòng)矢量殘差MVD。運(yùn)動(dòng)矢量冗余刪除部29將所生成的運(yùn)動(dòng)矢量殘差MVD與表示所選擇的估計(jì)方法的估計(jì)運(yùn)動(dòng)矢量索引PMVI —起提供給預(yù)測(cè)方式控制部28。
[0380]去區(qū)塊濾波器33在隔著解碼圖像P中的區(qū)塊邊界或者⑶邊界而相互相鄰的像素的像素值之差小于預(yù)先決定的閾值的情況下，對(duì)解碼圖像P中的該區(qū)塊邊界或者該CU邊界實(shí)施去區(qū)塊處理，由此進(jìn)行該區(qū)塊邊界或者該CU邊界附近的圖像的平滑化。通過去區(qū)塊濾波器33實(shí)施了去區(qū)塊處理的圖像作為已去區(qū)塊解碼圖像P_DB輸出到自適應(yīng)偏移濾波器80中。
[0381]自適應(yīng)偏移濾波器80對(duì)從去區(qū)塊濾波器33提供的已去區(qū)塊解碼圖像P_DB實(shí)施自適應(yīng)偏移濾波處理從而生成偏移已濾波解碼圖像P_0F。所生成的偏移已濾波解碼圖像P_0F提供給自適應(yīng)濾波器70。對(duì)于自適應(yīng)偏移濾波器80的具體構(gòu)成，后面敘述，所以這里省略說明。
[0382]自適應(yīng)濾波器70對(duì)從自適應(yīng)偏移濾波器80提供的偏移已濾波解碼圖像P_0F實(shí)施自適應(yīng)濾波處理，從而生成已濾波解碼圖像P_FL。通過自適應(yīng)濾波器70實(shí)施了濾波處理的已濾波解碼圖像P_FL存儲(chǔ)到緩沖存儲(chǔ)器24中。由自適應(yīng)濾波器70所使用的濾波器系數(shù)被決定為使得已濾波解碼圖像P_FL與編碼對(duì)象圖像#10的誤差變得更小，如此所決定的濾波器系數(shù)作為濾波器參數(shù)FP進(jìn)行編碼，并傳輸給運(yùn)動(dòng)圖像解碼裝置I。
[0383](自適應(yīng)偏移濾波器80)
[0384]圖15是表示自適應(yīng)偏移濾波器80的構(gòu)成的框圖。如圖15所示，自適應(yīng)偏移濾波器80具備自適應(yīng)偏移濾波器信息設(shè)定部81以及自適應(yīng)偏移濾波器處理部82。
[0385]此外，如圖15所示，自適應(yīng)偏移濾波器信息設(shè)定部81具備偏移計(jì)算部811、偏移移位部816、偏移裁剪部812、偏移信息選擇部813以及偏移屬性設(shè)定部815。
[0386](偏移計(jì)算部811)
[0387]偏移計(jì)算部811對(duì)于包含在對(duì)象處理單位(例如IXU)中的給定分割深度為止的全部QA0MU，計(jì)算針對(duì)全部偏移類型以及全部類別的偏移。這里，偏移類型以及類別與運(yùn)動(dòng)圖像解碼裝置I的說明中所說明的偏移類型以及類別相同。
[0388]圖16是表示偏移計(jì)算部811執(zhí)行的處理流程的流程圖。
[0389](步驟S2Ol)
[0390]首先，偏移計(jì)算部811開始將作為處理對(duì)象的對(duì)象QAOMU的QAOMU編號(hào)作為循環(huán)變量的第I循環(huán)。例如，在圖7(a)?(e)所示的示例的情況下，該第I循環(huán)是從QAOMU編號(hào)=0至QAOMU編號(hào)=340的循環(huán)。
[0391](步驟S2O2)
[0392]接下來，偏移計(jì)算部811開始將對(duì)于對(duì)象QAOMU能夠選擇的偏移類型作為循環(huán)變量的第2循環(huán)。該第2循環(huán)是從偏移類型I至偏移類型6的循環(huán)。
[0393](步驟S2O3)
[0394]接下來，偏移計(jì)算部811開始將包含在對(duì)象QAOMU中的像素作為單位的第3循環(huán)。
[0395](步驟S204)
[0396]接下來，偏移計(jì)算部811將對(duì)象像素分類為多個(gè)類別的任一種。更具體而言，在作為第2循環(huán)變量的偏移類型為I?4時(shí)，將對(duì)象像素分類為類別I?4的任一種。本步驟中的分類處理是與運(yùn)動(dòng)圖像解碼裝置I中的自適應(yīng)偏移濾波器60具備的類別分類部624執(zhí)行的分類處理例I~分類處理例4的任一種相同的處理。
[0397]此外，關(guān)于對(duì)象QA0MU，按每個(gè)類別，計(jì)算像素被分類的次數(shù)即分類次數(shù)count [part_idx] [sao_type_index] [class_idx]。這里，part_idx 表不 QAOMU 編號(hào)。
[0398](步驟S2O5) [0399]接下來，偏移計(jì)算部811通過取得對(duì)象像素中的已去區(qū)塊解碼圖像P_DB的像素值與該對(duì)象像素中的編碼對(duì)象圖像#10的像素值的差分，從而計(jì)算該對(duì)象像素中的差分像素值。更具體而言，將對(duì)象像素的位置設(shè)為(X、y)時(shí)，計(jì)算P_DB(X、y)-0rg(x、y)。這里，P_DB(x、y)表示對(duì)象像素中的已去區(qū)塊解碼圖像？_08的像素值，Org(x, y)表示對(duì)象像素中的編碼對(duì)象圖像#10的像素值。
[0400](步驟S206)
[0401]本步驟是第3循環(huán)的結(jié)束。在本步驟結(jié)束的時(shí)點(diǎn),關(guān)于包含在對(duì)象QAOMU中的全部像素，計(jì)算出了差分像素值。
[0402](步驟S207)
[0403]接下來，偏移計(jì)算部811通過用針對(duì)包含在對(duì)象QAOMU中的各像素的差分像素值的每個(gè)類別的總和除以該類別的分類次數(shù)，從而計(jì)算偏移。更具體而言，偏移計(jì)算部811使用以下的式子計(jì)算針對(duì)對(duì)象QA0MU、對(duì)象偏移類型、以及對(duì)象類別的偏移offset [part_idx][sao_type_idx][class_idx]。
[0404]offset [part_idx] [sao_type_idx] [class_idx]= Σ (P_DB (x、y)-Org (x、y)) /count[part_idx][sao_type_idx][class_idx]
[0405]這里,記號(hào)Σ表示取得由part_idx指定的對(duì)象QAOMU、以及由sao_type_idx指定的對(duì)象偏移類型中關(guān)于被分類為由classjdx所指定的對(duì)象類別的像素的和。
[0406](步驟S208)
[0407]本步驟是第2循環(huán)的結(jié)束。
[0408](步驟S209)
[0409]本步驟是第3循環(huán)的結(jié)束。
[0410]通過以上處理，偏移計(jì)算部811對(duì)于包含在對(duì)象IXU中的給定分割深度為止的全部QA0MU，計(jì)算針對(duì)全部偏移類型以及全部類別的偏移。例如，在圖7(a)~(e)所示的示例的情況下，偏移計(jì)算部811總計(jì)計(jì)算出
[0411]((分割深度O的QAOMU的總數(shù))+……+(分割深度4的QAOMU的總數(shù)))X ((E0的偏移類型數(shù))X (E0的類別數(shù))+ (B0的偏移類型數(shù))X (B0的類別數(shù)))=(1+4+16+64+256) X((4 X 4) + (2 X 16)) =16368 (個(gè))
[0412]偏移。這里，各偏移的比特?cái)?shù)是例如10比特。
[0413]偏移計(jì)算部811將由通過上述處理所計(jì)算出的偏移、偏移類型、類別、以及表示QAOU的分割結(jié)構(gòu)的QAOU結(jié)構(gòu)信息構(gòu)成的偏移信息提供給偏移移位部816。
[0414]另外，運(yùn)動(dòng)圖像編碼裝置2可以構(gòu)成為對(duì)表示在上述步驟S204中進(jìn)行了哪種分類處理例所涉及的分類處理的標(biāo)志進(jìn)行編碼，并且運(yùn)動(dòng)圖像解碼裝置I具備的自適應(yīng)偏移濾波器60可以構(gòu)成為參考該標(biāo)志進(jìn)行與該標(biāo)志所示的分類處理相同的分類處理。此外，也可以構(gòu)成為不利用那樣的標(biāo)志，而是由運(yùn)動(dòng)圖像編碼裝置2和運(yùn)動(dòng)圖像解碼裝置I進(jìn)行預(yù)先決定的相同的分類處理。
[0415](偏移移位部816)
[0416]偏移移位部816進(jìn)行從偏移計(jì)算部811提供的偏移信息中包含的各偏移的量化。量化通過使偏移向右側(cè)進(jìn)行比特移位，從而將偏移從像素比特深度的精度變換為偏移的比特深度的精度。另外，移位處理中的移位量通過由后述的偏移屬性設(shè)定部815所提供的移位值來決定。
[0417](偏移裁剪部812)
[0418]偏移裁剪部812為了向從后述的偏移屬性設(shè)定部815提供的偏移值域進(jìn)行限制，通過以下所示的裁剪處理1、裁剪處理2的任一種處理對(duì)從偏移移位部816提供的偏移進(jìn)行裁剪處理。
[0419](裁剪處理I)
[0420]偏移裁剪部812對(duì)從偏移移位部816提供的偏移信息中所包含的各偏移進(jìn)行裁剪處理。偏移裁剪部812通過將從偏移移位部816提供的各偏移裁剪為例如-8至7的值，從而用4比特來表現(xiàn)各偏移。被裁剪后的各偏移提供給偏移信息選擇部813。與運(yùn)動(dòng)圖像解碼裝置I同樣地，根據(jù)圖像的比特深度和偏移的比特深度來設(shè)定要裁剪的比特寬度。
[0421]如此，通過對(duì)各偏移進(jìn)行裁剪，從而能夠削減用于存儲(chǔ)各偏移的存儲(chǔ)器(未圖示)的存儲(chǔ)器大小。此外，因?yàn)槟軌蛳鳒p編碼數(shù)據(jù)#1中包含的偏移的碼量，所以能夠?qū)崿F(xiàn)編碼效率的提高。此外，因?yàn)橐种屏思由线^度的偏移，所以保證了適當(dāng)?shù)漠嬞|(zhì)。
[0422](裁剪處理2)
[0423]此外，偏移裁剪部812也可以構(gòu)成為按照偏移類型將從偏移移位部816提供的各偏移的裁剪范圍設(shè)定為不同的值。
[0424]例如，在偏移類型為邊緣偏移的情況下，將偏移的比特?cái)?shù)設(shè)為8比特，在偏移類型為帶偏移的情況下，將偏移的比特?cái)?shù)設(shè)為4比特。更一般而言，在將偏移類型為邊緣偏移時(shí)的偏移的比特?cái)?shù)設(shè)為N比特，將偏移類型為帶偏移時(shí)的偏移的比特?cái)?shù)設(shè)為M比特時(shí)，按照滿足N>M的方式?jīng)Q定偏移的比特?cái)?shù)。
[0425]如此按照偏移類型，使偏移的比特?cái)?shù)不同，從而不會(huì)對(duì)用于存儲(chǔ)各偏移的存儲(chǔ)器要求過度的存儲(chǔ)器大小，能夠?qū)崿F(xiàn)編碼效率的提高。
[0426]另外，在用于限制偏移能夠取的值的閾值th大于21^1并且為2m以下時(shí)，作為用于對(duì)該偏移進(jìn)行編碼的編碼方式，能夠使用m比特的固定長編碼。更具體而言，能夠采用將最大值設(shè)為th的Truncated unary編碼、Truncated Rice編碼。另外，上述最大值th由從偏移屬性設(shè)定部815提供的偏移值域來決定。
[0427]此外，將上述裁剪處理I以及2進(jìn)行組合而得到的裁剪處理也包含在本實(shí)施方式中。此外，自適應(yīng)偏移濾波器80也可以采用不具備偏移裁剪部812的構(gòu)成。
[0428](偏移信息選擇部813)
[0429]偏移信息選擇部813決定RD成本(Rate-Distorsion cost)變得更小的偏移類型、類別、偏移的組合、以及與其對(duì)應(yīng)的QAOU分割結(jié)構(gòu)，并且將表示所決定的偏移類型、類另O、偏移、以及與其對(duì)應(yīng)的QAOM分割結(jié)構(gòu)的QAOU信息提供給可變長碼編碼部22。此外，偏移信息選擇部813按每個(gè)QAOU或者按每個(gè)QAOMU將所決定的偏移提供給自適應(yīng)偏移濾波器處理部82。[0430]若參考圖17?圖18來具體地說明偏移信息選擇部813的處理，則如下所述。圖17是表示偏移信息選擇部813執(zhí)行的處理流程的流程圖。
[0431](步驟S301)
[0432]首先，偏移信息選擇部813開始將作為處理對(duì)象的對(duì)象QAOMU的QAOMU編號(hào)作為循環(huán)變量的第I循環(huán)。
[0433](步驟S302)
[0434]接下來，偏移信息選擇部813開始以針對(duì)對(duì)象QAOMU能夠選擇的偏移類型為循環(huán)變量的第2循環(huán)。該第2循環(huán)是偏移類型I至偏移類型6的循環(huán)。
[0435](步驟S303)
[0436]接下來，偏移信息選擇部813針對(duì)對(duì)象偏移類型計(jì)算對(duì)象QAOMU中的偏移已濾波解碼圖像P_0F和編碼對(duì)象圖像#10的平方誤差。
[0437](步驟S304)
[0438]本步驟是第2循環(huán)的結(jié)束。
[0439](步驟S305)
[0440]本步驟是第I循環(huán)的結(jié)束。在第I以及第2循環(huán)結(jié)束的時(shí)點(diǎn)，關(guān)于各QA0MU，計(jì)算出了針對(duì)全部偏移類型的平方誤差。
[0441](步驟S306)
[0442]接下來，偏移信息選擇部813從將對(duì)象處理單位(例如LCU)分割為QAOU的QAOU分割結(jié)構(gòu)中決定RD成本變得更小的QAOU分割結(jié)構(gòu)。
[0443]若參考圖18(a)?(d)來說明本步驟中的偏移信息選擇部813的具體處理例，則如下所述。
[0444]首先，偏移信息選擇部813計(jì)算使分割深度為O時(shí)的RD成本和使分割深度為I時(shí)的RD成本(圖18 (a))。在圖18 (a)中，設(shè)分割深度I的RD成本小于分割深度O的RD成本(圖 18(b))。
[0445]接下來，偏移信息選擇部813計(jì)算使分割深度為2時(shí)的RD成本(圖18(c))。
[0446]接下來，偏移信息選擇部813比較分割深度I的QAOMU的RD成本和該分割深度I的QAOMU中包含的分割深度2的QAOMU的RD成本，在分割深度2的QAOMU的RD成本比較小的情況下，將該分割深度I的QAOMU更新為分割深度2的QAOMU (圖18 (d))。直到達(dá)到最大分割深度為止反復(fù)該處理。據(jù)此，決定RD成本變得更小的QAOU分割結(jié)構(gòu)。
[0447](偏移屬性設(shè)定部815)
[0448]偏移屬性設(shè)定部815將未圖示的像素比特深度作為輸入來決定偏移的比特深度。根據(jù)所決定的偏移的比特深度，設(shè)定偏移值域以及移位值。偏移值域提供給自適應(yīng)偏移濾波器處理部82，移位值提供給偏移移位部816。偏移值域以及移位值的設(shè)定是與上述的偏移屬性設(shè)定部613相同的處理，所以這里省略說明。
[0449](自適應(yīng)偏移濾波器處理部82)
[0450]自適應(yīng)偏移濾波器處理部82對(duì)對(duì)象QAOU中的已去區(qū)塊解碼圖像P_DB的各像素加上從偏移信息選擇部813提供的偏移。自適應(yīng)偏移濾波器處理部82將對(duì)包含在已去區(qū)塊解碼圖像P_DB中的全部QAOU進(jìn)行處理而得到的圖像作為偏移已濾波解碼圖像P_0F來輸出。另外，自適應(yīng)偏移濾波器處理部82的構(gòu)成與自適應(yīng)偏移濾波器處理部62相同，所以這里省略說明。這里未圖示的自適應(yīng)偏移濾波器處理部82中包含的偏移信息存儲(chǔ)部中所存儲(chǔ)的各偏移，被限制在由偏移屬性設(shè)定部815設(shè)定的偏移值域。
[0451]〔實(shí)施方式2〕
[0452]在實(shí)施方式I中，將編碼數(shù)據(jù)#1中包含的sao_offset [sao_curr_depth] [ys] [xs][i]設(shè)為了表示在自適應(yīng)偏移濾波器的偏移濾波處理中對(duì)包含在對(duì)象QAOU中的各像素加上的偏移的具體值的句法。
[0453]另一方面，
【發(fā)明者】獲得了如下見解:通過對(duì)偏移濾波處理中使用的偏移的值進(jìn)行預(yù)測(cè)編碼，即，對(duì)使用偏移的值和該偏移的值的預(yù)測(cè)值而計(jì)算出的偏移殘差進(jìn)行編碼，從而能夠進(jìn)一步削減編碼數(shù)據(jù)的碼量。
[0454]在本實(shí)施方式中，參考圖19?圖21來說明對(duì)進(jìn)行了預(yù)測(cè)編碼的偏移進(jìn)行偏移濾波處理的運(yùn)動(dòng)圖像解碼裝置、和對(duì)偏移濾波處理中使用的偏移進(jìn)行預(yù)測(cè)編碼的運(yùn)動(dòng)圖像編碼裝置。另外，對(duì)于在實(shí)施方式I中已經(jīng)說明過的部分省略說明。
[0455](編碼數(shù)據(jù))
[0456]本實(shí)施方式所涉及的編碼數(shù)據(jù)含有偏移殘差sao_offset_residual [sao_curr_depth] [ys] [xs] [i]來代替實(shí)施方式I所涉及的編碼數(shù)據(jù)#1中包含的sao_offset[sao_curr_depth] [ys] [xs] [i]。本實(shí)施方式所涉及的編碼數(shù)據(jù)的其他結(jié)構(gòu)與實(shí)施方式I所涉及的編碼數(shù)據(jù)#1的結(jié)構(gòu)相同。以下，有時(shí)將本實(shí)施方式所涉及的編碼數(shù)據(jù)記作編碼數(shù)據(jù)#3。
[0457](sao_offset_residual)
[0458]偏移殘差sao_offset_residual [sao_curr_depth] [ys] [xs] [i]是本實(shí)施方式所涉及的自適應(yīng)偏移濾波器執(zhí)行的偏移濾波處理中對(duì)包含在對(duì)象QAOU中的各像素加上的偏移的值與該偏移的值的預(yù)測(cè)值的帶權(quán)重的差分值，也記作sao_offset_residual [sao_type_idx][class_idx]。
[0459]將對(duì)包含在對(duì)象QAOU中的對(duì)象像素加上的偏移記作Offset[sao_type_idx][class_idx]時(shí)，偏移殘差 sao_offset_residual [sao_type_idx] [class_idx]通過下式給出:
[0460]sao_offset_residual[sao_type_idx][class_idx]
[0461]=Offset[sao_type_idx][class_idx]
[0462]-a*pred_offset[merge_tbl[sao_type_idx]][class_idx]。
[0463]這里，a是對(duì)預(yù)測(cè)值pred_offset乘上的權(quán)重系數(shù)，merge_tbl是以sao_type_idx為參量的函數(shù)。對(duì)于a以及merge_tbl的具體例,后面敘述,所以這里省略說明。
[0464](運(yùn)動(dòng)圖像解碼裝置)
[0465]本實(shí)施方式所涉及的運(yùn)動(dòng)圖像解碼裝置具備自適應(yīng)偏移濾波器60’來代替實(shí)施方式I所涉及的運(yùn)動(dòng)圖像解碼裝置I具備的自適應(yīng)偏移濾波器60。本實(shí)施方式所涉及的運(yùn)動(dòng)圖像解碼裝置的其他構(gòu)成與實(shí)施方式I所涉及的運(yùn)動(dòng)圖像解碼裝置I的構(gòu)成相同。
[0466]圖19是表示本實(shí)施方式所涉及的自適應(yīng)偏移濾波器60’的構(gòu)成的框圖。如圖19所示，自適應(yīng)偏移濾波器60’具備偏移信息解碼部611’來代替自適應(yīng)偏移濾波器60具備的偏移信息解碼部611。
[0467](偏移信息解碼部611’)
[0468]偏移信息解碼部611’參考編碼數(shù)據(jù)#3中包含的QAOU信息，對(duì)QAOU信息中包含的偏移信息OI進(jìn)行解碼。此外，使用通過解碼偏移信息OI而得到的偏移殘差sao—offset—residual[sao_type_idx][class_idx]、和予頁測(cè)值 pred—offset[merge_tbl[sao_type_idx]] [class—idx]，通過下式來計(jì)算自適應(yīng)偏移濾波處理中使用的偏移Offset [sao—type—idx][class_idx]:
[0469]Offset [sao—type—idx] [class—idx]
[0470]=a*pred—offset[merge_tbl[sao_type_idx]][class_idx]
[0471]+sao_offset—residual[sao_type_idx][class_idx]
[0472]并且將所計(jì)算出的偏移Offset [sao—type—idx] [class—idx]存儲(chǔ)到偏移信息存儲(chǔ)部 621。這里，pred—offset [merge—tbl [sao—type—idx] ] [class—idx]是 0ffset[sao—type—idx] [class_idx]的預(yù)測(cè)值。merge—tbl [sao—type—idx]是對(duì) sao—type—idx=l ~6給予索引的表，可以將一個(gè)以上的sao—type—idx看做同一組。
[0473](pred—offset 的具體例 I)
[0474]對(duì)pred—offset [merge—tbl [sao—type—idx] ] [class—idx]的第 I 具體例進(jìn)行說明。在本例中，通過
[0475]pred—offset[merge_tbl[sao_type_idx]][class_idx]
[0476]=Offset' [sao—type—idx][class—idx] [0477]來決定預(yù)測(cè)值pred—offset [merge—tbl [sao—type—idx] ] [class—idx]。這里，Offset! [sao—type—idx] [class—idx]是已經(jīng)解碼的偏移，表示與偏移類型索引sao—type—idx、以及類別索引class—idx建立了關(guān)聯(lián)的偏移。
[0478]如此，在本例中，作為Offset [sao—type—idx] [class—idx]的預(yù)測(cè)值，是已經(jīng)解碼的偏移，使用與偏移類型索引sao—type—idx、以及類別索引class—idx建立了關(guān)聯(lián)的偏移Offset! [sao_type_idx][class_idx]。
[0479](pred—offset 的具體例 2、
[0480]對(duì)pred—offset [merge—tbl [sao—type—idx] ] [class—idx]的第 2 具體例進(jìn)行說明。在本例中，通過
[0481]pred—offset[merge_tbl[sao_type_idx]][class_idx]
[0482]=(pred—offset' [merge—tbl[sao—type—idx]][class—idx]*W1
[0483]+Offset' [sao—type—idx] [class—idx]*W2) >>log2 (W1+W2)
[0484]來決定預(yù)測(cè)值pred—offset [merge—tbl [sao—type—idx] ] [class—idx]。這里，pred—offset 丨[merge—tbl [sao—type—idx] ] [class—idx]表不計(jì)算已經(jīng)解碼的偏移Offsetr [saotype—idx] [class—idx]時(shí)所使用的預(yù)測(cè)值。此外，表示取乘積的運(yùn)算記號(hào)，“》”表示右比特移位。此外，Wl以及W2分別表示權(quán)重系數(shù)，例如，可以取W1=3、W2=1。Wl以及W2的具體值，只要按照編碼效率變得更高的方式進(jìn)行決定即可。
[0485]由上式可知，在本例中，為了求出predoffset，參考pred—offset '以及
Offset1，為了求出 pred—offset'，參考 pred—offset "以及 Offset"，......，如此遞
歸地參考已經(jīng)解碼的預(yù)測(cè)值以及偏移，所以對(duì)于pred—offset，已經(jīng)解碼的多個(gè)偏移作出貢獻(xiàn)。因此，預(yù)測(cè)值的過度的變動(dòng)被抑制。據(jù)此，例如，即使在由于噪聲的影響而計(jì)算出不恰當(dāng)?shù)念A(yù)測(cè)值那樣的情況下，也可以抑制那樣的不恰當(dāng)?shù)念A(yù)測(cè)值的影響，所以能夠?qū)崿F(xiàn)編碼效率的提1?。[0486](pred_offset 的具體例 3)
[0487]對(duì)pred_offset [merge_tbl [sao_type_idx] ] [class_idx]的第 3 具體例進(jìn)行說明。在本例中，通過
[0488]pred_offset[merge_tbl[sao_type_idx]][class_idx]
[0489]=clip3 (_th、th、pred_offset [merge_tbl [sao_type_idx] ] [class_idx])
[0490]來決定預(yù)測(cè)值pred_offset [merge_tbl [sao_type_idx] ] [class_idx]。這里，clip3(A、B、C)表示用下限值A(chǔ)以及上限值B來裁剪值C。此外，對(duì)于clip3的參量的pred_offset [merge_tbl [sao_type_idx]],例如,設(shè)為如上述具體例I或者2那樣所決定的值。此夕卜，對(duì)于閾值th,例如,依賴于像素值的比特深度bit_depth,如下地來決定。
[0491]th=4(bit_depth=8)
[0492]th=8 (bit_depth > 8)
[0493]如此，在本例中，通過使用利用上限值以及下限值進(jìn)行了裁剪的預(yù)測(cè)值，不會(huì)產(chǎn)生過大的預(yù)測(cè)值或過小的預(yù)測(cè)值，所以能夠?qū)崿F(xiàn)編碼效率的提高。此外，上限值以及下限值的絕對(duì)值被設(shè)定為像素值的比特較大時(shí)變大，所以可以根據(jù)像素值的比特深度來進(jìn)行適當(dāng)?shù)牟眉籼幚恚軌蚍乐巩嬞|(zhì)的劣化。
[0494](merge_tbl 的具體例 I)
[0495]圖20(a)是表示函數(shù)mergetbl [sao_type_idx]的第I具體例的表。如圖20(a)所不，本例所涉及的 merge_tbl [sao_type_idx]在 saotype_idx = O 時(shí)不取值，在 sao_type_idx=l?6時(shí)分別取O?5的值。因此,本例所涉及的merge_tbl [sao_type_idx]還可以表現(xiàn)為
[0496]merge_tbl [sao_type_idx] =sao_type_idx_l。
[0497]通過使用本例所涉及的merge_tbl [sao_type_idx],偏移信息解碼部611’對(duì)于各個(gè)sao_type_idx以及各個(gè)class_idx個(gè)別地決定預(yù)測(cè)值pred_offset,所以能夠削減偏移殘差 sao_offset_residual 的碼量。
[0498](merge_tbl 的具體例 2)
[0499]圖20(b)是表示函數(shù)merge_tbl [sao_type_idx]的第2具體例的表。如圖20(b)所示，本例所涉及的merge_tbl [sao_type_idx]在邊緣偏移(sao_type_idx=l?4)時(shí)取O的值，在帶偏移(sao_type_idx=5?6)時(shí)取I?2的值。
[0500]例如，設(shè)在先偏移的計(jì)算時(shí)指定sao_type_idx=l (merge_tbl [sao_type_idx=l]=O)以及 class_idx=l,下一偏移的計(jì)算時(shí)指定 sao_type_idx=2 (merge_tbl [sao_type_idx=2] =0)以及class_idx=l時(shí),計(jì)算該下一偏移時(shí)所使用的預(yù)測(cè)值與該在先偏移的計(jì)算時(shí)所使用的預(yù)測(cè)值相同。
[0501]通過使用本例所涉及的merge_tbl [sao_type_idx],偏移信息解碼部611’對(duì)于指定了邊緣偏移的情況、以及指定了帶偏移的情況的各情況，進(jìn)行以下的處理。
[0502].指定了邊緣偏移的情況
[0503]根據(jù)與解碼對(duì)象的偏移建立了關(guān)聯(lián)的類別相同的類別的已經(jīng)解碼的偏移，計(jì)算該解碼對(duì)象的偏移的預(yù)測(cè)值。這里，解碼對(duì)象的偏移和預(yù)測(cè)值，只要類別相同，則偏移類型也可以不同。因此，可以將為了計(jì)算某偏移類型的偏移而設(shè)定的預(yù)測(cè)值用于計(jì)算與該某偏移不同的偏移類型的偏移，所以用于設(shè)定預(yù)測(cè)值的處理被減輕。[0504].指定了帶偏移的情況
[0505]根據(jù)與與解碼對(duì)象的偏移建立了關(guān)聯(lián)的偏移類型以及類別相同的偏移類型以及類別的偏移，計(jì)算該解碼對(duì)象的偏移的預(yù)測(cè)值。
[0506]若使用本例所涉及的merge_tbl [sao_type_idx],則能夠削減處理量的同時(shí)計(jì)算出適當(dāng)?shù)念A(yù)測(cè)值。
[0507](系數(shù)a的具體例)
[0508]對(duì)預(yù)測(cè)值pred_offset乘上的權(quán)重系數(shù)a,既可以與偏移類型無關(guān)地使用I,也可以根據(jù)偏移類型來使用不同的值。
[0509]例如，可以設(shè)為:
[0510]a=l(邊緣偏移時(shí))
[0511]a=0.5(帶偏移時(shí))。
[0512]更一般而言，在設(shè)將指定了邊緣偏移時(shí)的系數(shù)a表示為a(edge)、將指定了帶偏移時(shí)的系數(shù)a表不為a (band)時(shí)，可以使用滿足如下關(guān)系的系數(shù)a:
[0513]a (edge) > a (band)。
[0514]
【發(fā)明者】發(fā)現(xiàn):指定了邊緣偏移時(shí)的、已經(jīng)解碼的偏移與解碼對(duì)象的偏移之間的相關(guān)，大于指定了帶偏移時(shí)的、已經(jīng)解碼的偏移與解碼對(duì)象的偏移之間的相關(guān)。在上述具體例中，能夠適當(dāng)?shù)匾胍呀?jīng)解碼的偏移與解碼對(duì)象的偏移的相關(guān)的影響，所以可以削減偏移殘差的碼量。
[0515](運(yùn)動(dòng)圖像編碼裝置)
[0516]本實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置具備自適應(yīng)偏移濾波器80 ’來代替實(shí)施方式I所涉及的運(yùn)動(dòng)圖像編碼裝置2具備的自適應(yīng)偏移濾波器80。本實(shí)施方式所涉及的運(yùn)動(dòng)圖像編碼裝置的其他構(gòu)成與實(shí)施方式I所涉及的運(yùn)動(dòng)圖像編碼裝置2的構(gòu)成相同。
[0517]圖21是表示本實(shí)施方式所涉及的自適應(yīng)偏移濾波器80’的構(gòu)成的框圖。如圖21所示，自適應(yīng)偏移濾波器80’除了自適應(yīng)偏移濾波器60具備的各部之外具備偏移殘差導(dǎo)出部 814。
[0518](偏移殘差導(dǎo)出部814)
[0519]偏移殘差導(dǎo)出部814通過取得從偏移信息選擇部813提供的偏移與該偏移的預(yù)測(cè)值的差分，計(jì)算偏移殘差。該偏移殘差作為QAOU信息的一部分由可變長碼編碼部22進(jìn)行編碼。
[0520]由偏移殘差導(dǎo)出部814所設(shè)定的預(yù)測(cè)值與由本實(shí)施方式所涉及的運(yùn)動(dòng)圖像解碼裝置具備的偏移信息解碼部611’所設(shè)定的預(yù)測(cè)值相同，所以這里省略說明。
[0521](附注事項(xiàng)I)
[0522]本發(fā)明還可以如以下那樣進(jìn)行記載。
[0523]本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器裝置，其特征在于具備:偏移屬性設(shè)定單元，其參考編碼數(shù)據(jù)中包含的偏移類型指定信息，設(shè)定處理對(duì)象的單位區(qū)域中的偏移屬性；偏移解碼單元，其對(duì)具有與上述設(shè)定的偏移屬性中包含的偏移值域?qū)?yīng)的比特寬度的偏移進(jìn)行解碼；和濾波器單元，其對(duì)上述輸入圖像的各像素值加上上述偏移。
[0524]根據(jù)上述那樣所構(gòu)成的圖像濾波器裝置，通過上述偏移屬性設(shè)定單元參考包含在編碼數(shù)據(jù)中的偏移類型指定信息，設(shè)定處理對(duì)象的單位區(qū)域中的偏移屬性，并且通過上述偏移解碼單元對(duì)具有與包含在所設(shè)定的偏移屬性中的偏移值域?qū)?yīng)的比特寬度的偏移進(jìn)行解碼，所以能夠有效的削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小。
[0525]因此，根據(jù)上述構(gòu)成，能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小的同時(shí)進(jìn)行適當(dāng)?shù)钠茷V波處理。
[0526]另外，上述偏移類型指定信息可以是按每個(gè)上述輸入圖像而決定信息，也可以是按每個(gè)上述單位區(qū)域而決定的信息。此外，可以是按每個(gè)上述輸入圖像的給定集而決定的信息，也可以是按每個(gè)上述單位區(qū)域的給定集而決定的信息。
[0527]此外，優(yōu)選上述偏移類型指定信息包含各單位區(qū)域中的上述輸入圖像的像素值的比特深度，上述偏移解碼單元對(duì)具有與上述像素值的比特深度相應(yīng)的比特寬度的偏移進(jìn)行解碼。
[0528]根據(jù)上述構(gòu)成，上述偏移解碼單元對(duì)具有與上述像素值的比特深度相應(yīng)的比特寬度的偏移進(jìn)行解碼，所以能夠有效的削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小。
[0529]另外，可以構(gòu)成為:上述偏移類型指定信息包含各單位區(qū)域中的上述輸入圖像的像素值的比特深度，上述偏移解碼單元對(duì)具有能夠表現(xiàn)與上述比特深度相應(yīng)的值域的比特寬度的偏移進(jìn)行解碼。
[0530]根據(jù)上述構(gòu)成，上述偏移解碼單元對(duì)具有能夠表現(xiàn)與各單位區(qū)域中的上述輸入圖像的像素值的比特深度相應(yīng)的值域的比特寬度的偏移進(jìn)行解碼，所以能夠有效的削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小。
[0531]另外，所謂能夠表現(xiàn)與上述比特深度相應(yīng)的值域的比特寬度，是指用二進(jìn)制數(shù)表現(xiàn)包含在值域范圍內(nèi)的值時(shí)的比特寬度，例如值域?yàn)開23?23-1時(shí)，能夠表現(xiàn)的比特寬度是4比特。
[0532]此外，優(yōu)選上述解碼后的偏移是被量化后的值，上述濾波器單元對(duì)上述各像素值加上使用上述偏移屬性中包含的參數(shù)對(duì)上述偏移進(jìn)行逆量化而得到的值。
[0533]根據(jù)上述構(gòu)成，因?yàn)樯鲜鼋獯a后的偏移是被量化后的值，上述濾波器單元對(duì)上述各像素值加上使用包含在上述偏移屬性中的參數(shù)對(duì)上述偏移進(jìn)行逆量化而得到的值，所以與上述偏移屬性中包含的參數(shù)相應(yīng)的偏移被加到各圖像值上。
[0534]因此，根據(jù)上述構(gòu)成，能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小的同時(shí)使編碼效
率提高。
[0535]另外，可以構(gòu)成為:上述偏移類型指定信息包含像素值的移位值，上述濾波器單元加上使用該移位值對(duì)上述偏移進(jìn)行逆量化所得到的值，來代替上述偏移。
[0536]根據(jù)上述構(gòu)成，因?yàn)樯鲜銎祁愋椭付ㄐ畔袼刂档囊莆恢?，上述濾波器單元加上使用該移位值對(duì)上述偏移進(jìn)行逆量化而得到的值，來代替上述偏移，所以能夠獲得與像素值的移位值相應(yīng)的偏移。因此，能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小的同時(shí)使編碼效率提高。
[0537]另外，所謂像素值的移位值，是指像素比特深度與偏移的比特深度的差分值，所謂使用該移位值對(duì)上述偏移進(jìn)行逆量化，是指使上述偏移向左側(cè)比特移位該移位值，從偏移的比特深度變換為像素比特深度。
[0538]此外，優(yōu)選上述偏移類型指定信息是針對(duì)上述輸入圖像而決定的信息。[0539]根據(jù)上述構(gòu)成，因?yàn)槠祁愋椭付ㄐ畔⑹轻槍?duì)上述輸入圖像而決定的信息，所以上述圖像濾波器裝置能夠?qū)ι鲜鲚斎雸D像進(jìn)行適當(dāng)?shù)钠铺幚怼?br> [0540]此外，本發(fā)明所涉及的偏移解碼裝置是一種對(duì)由對(duì)輸入圖像的各像素值加上偏移的圖像濾波器所參考的各偏移進(jìn)行解碼的偏移解碼裝置，其特征在于具備:偏移殘差解碼單元，其從編碼數(shù)據(jù)解碼各偏移殘差；預(yù)測(cè)值導(dǎo)出單元，其從已經(jīng)解碼的偏移導(dǎo)出各偏移的預(yù)測(cè)值；和偏移計(jì)算單元，其根據(jù)由上述預(yù)測(cè)值導(dǎo)出單元導(dǎo)出的預(yù)測(cè)值、以及由上述偏移殘差解碼單兀解碼的偏移殘差，計(jì)算各偏移。
[0541]根據(jù)上述那樣所構(gòu)成的偏移解碼裝置，因?yàn)榫邆鋸木幋a數(shù)據(jù)解碼各偏移殘差的偏移殘差解碼單元、從已經(jīng)解碼的偏移導(dǎo)出各偏移的預(yù)測(cè)值的預(yù)測(cè)值導(dǎo)出單元、和根據(jù)由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值以及由上述偏移殘差解碼單元所解碼的偏移殘差計(jì)算各偏移的偏移計(jì)算單元，所以與直接編碼各偏移的情況相比，能夠根據(jù)碼量較少的編碼數(shù)據(jù)適當(dāng)?shù)亟獯a偏移。
[0542]此外，優(yōu)選上述輸入圖像由多個(gè)單位區(qū)域構(gòu)成，上述偏移殘差解碼單元將各偏移殘差與按每個(gè)單位區(qū)域而決定的偏移類型以及按每個(gè)像素而決定的偏移類別建立關(guān)聯(lián)來進(jìn)行解碼，上述預(yù)測(cè)值導(dǎo)出單元對(duì)各偏移的預(yù)測(cè)值根據(jù)與與該偏移相同的偏移類型以及偏移類別建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出。
[0543]根據(jù)上述構(gòu)成，因?yàn)閷?duì)于各偏移的預(yù)測(cè)值，根據(jù)與與該偏移相同的偏移類型以及偏移類別建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出，所以預(yù)測(cè)精度提高。因此，根據(jù)上述構(gòu)成，能夠由碼量較少的編碼數(shù)據(jù)適當(dāng)?shù)慕獯a偏移。
[0544]此外，優(yōu)選上述輸入圖像由多個(gè)單位區(qū)域構(gòu)成，上述偏移殘差解碼單元將各偏移殘差與按每個(gè)單位區(qū)域而決定的偏移類型以及按每個(gè)像素而決定的偏移類別建立關(guān)聯(lián)來進(jìn)行解碼，上述預(yù)測(cè)值導(dǎo)出單元對(duì)于各偏移的預(yù)測(cè)值，在與該偏移建立了關(guān)聯(lián)的偏移類型屬于第I偏移類型群的情況下，根據(jù)與與該偏移相同的第I偏移類型群以及相同的偏移類別建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出，在與該偏移建立了關(guān)聯(lián)的偏移類型屬于第2偏移類型群的情況下，根據(jù)與與該偏移相同的偏移類型以及偏移類別建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出。
[0545]根據(jù)上述構(gòu)成，因?yàn)閷?duì)各偏移的預(yù)測(cè)值，在與該偏移建立了關(guān)聯(lián)的偏移類型屬于第I偏移類型群的情況下，根據(jù)與與該偏移相同的偏移類型建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出，在與該偏移建立了關(guān)聯(lián)的偏移類型屬于第2偏移類型群的情況下，根據(jù)與與該偏移相同的偏移類型以及偏移類別建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出，所以能夠削減處理量，并且使預(yù)測(cè)精度提高。因此，根據(jù)上述構(gòu)成，能夠削減處理量的同時(shí)，根據(jù)碼量較少的編碼數(shù)據(jù)適當(dāng)?shù)亟獯a偏移。
[0546]另外，所謂上述第I偏移類型，是指例如與該第I偏移類型建立了關(guān)聯(lián)的單位區(qū)域中的各像素例如根據(jù)在該像素的附近邊緣的形態(tài)，被分類為多個(gè)類別的任一種，所謂上述第2偏移類型，是指與該第2偏移類型建立了關(guān)聯(lián)的單位區(qū)域中的各像素例如根據(jù)該像素的像素值被分類為多個(gè)類別的任一種。
[0547]此外，優(yōu)選上述偏移計(jì)算單元將各偏移作為由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值以及由上述偏移殘差解碼單元所解碼的偏移殘差的線性函數(shù)來計(jì)算，對(duì)上述預(yù)測(cè)值乘上的系數(shù)，在與上述偏移建立了關(guān)聯(lián)的偏移類型屬于第I偏移類型群的情況、和與上述偏移建立了關(guān)聯(lián)的偏移類型屬于第2偏移類型群的情況是不同的。
[0548]根據(jù)上述構(gòu)成，因?yàn)閷?duì)上述預(yù)測(cè)值乘上的系數(shù)，在與上述偏移建立了關(guān)聯(lián)的偏移類型屬于第I偏移類型群的情況、和與上述偏移建立了關(guān)聯(lián)的偏移類型屬于第2偏移類型群的情況不同，所以能夠根據(jù)偏移類型，使用更適當(dāng)?shù)南禂?shù)來計(jì)算上述偏移。據(jù)此，能夠?qū)崿F(xiàn)編碼效率的提聞。
[0549]此外，優(yōu)選上述預(yù)測(cè)值導(dǎo)出單元通過取得已經(jīng)解碼的偏移和該已經(jīng)解碼的偏移的預(yù)測(cè)值的加權(quán)平均，從而導(dǎo)出各偏移的預(yù)測(cè)值。
[0550]根據(jù)上述構(gòu)成，因?yàn)橥ㄟ^取得已經(jīng)解碼的偏移和該已經(jīng)解碼的偏移的預(yù)測(cè)值的加權(quán)平均，導(dǎo)出各偏移的預(yù)測(cè)值，所以已經(jīng)解碼的多個(gè)偏移貢獻(xiàn)于各偏移的預(yù)測(cè)值。因此，預(yù)測(cè)值的過度的變動(dòng)被抑制。據(jù)此，例如，即使在由于噪聲的影響而計(jì)算出了不恰當(dāng)?shù)念A(yù)測(cè)值的情況下，也能夠抑制這種不恰當(dāng)?shù)念A(yù)測(cè)值的影響，所以能夠?qū)崿F(xiàn)編碼效率的提高。
[0551]此外，優(yōu)選上述預(yù)測(cè)值導(dǎo)出單元利用與輸入圖像中的各像素值的比特深度相應(yīng)的上限值以及下限值，對(duì)所導(dǎo)出的各預(yù)測(cè)值進(jìn)行裁剪。
[0552]根據(jù)上述構(gòu)成，因?yàn)槔门c輸入圖像中的各像素值的比特深度相應(yīng)的上限值以及下限值，對(duì)所導(dǎo)出的各預(yù)測(cè)值進(jìn)行裁剪，所以不會(huì)產(chǎn)生過大的預(yù)測(cè)值或過小的預(yù)測(cè)值，能夠?qū)崿F(xiàn)編碼效率的提聞。
[0553]此外，本發(fā)明所涉及的圖像濾波器裝置是一種作用于輸入圖像的圖像濾波器裝置，其特征在于具備:計(jì)算單元，其計(jì)算輸入圖像中的對(duì)象像素的像素值與該對(duì)象像素的周邊像素的像素值的差分值；和比特移位單元，其將由上述計(jì)算單元所參考的像素值、或者由上述計(jì)算單元所計(jì)算出的差分值右比特移位給定移位值；分類單元，其根據(jù)由上述比特移位單元進(jìn)行了右比特移位的差分值與O的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別的任一種；和偏移單元，其對(duì)上述對(duì)象像素的像素值，加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移。
[0554]根據(jù)如上述那樣所構(gòu)成的圖像濾波器裝置，因?yàn)楦鶕?jù)進(jìn)行了右比特移位的差分值與O的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別的任一種，并且對(duì)上述對(duì)象像素的像素值，加上與由上述分類單元進(jìn)行了分類的偏移類別建立了關(guān)聯(lián)的偏移，所以類別分類處理難以受到噪聲的影響，編碼效率提高。
[0555]此外，優(yōu)選上述給定移位值與上述對(duì)象像素的像素值的比特深度具有正相關(guān)。
[0556]根據(jù)上述構(gòu)成，因?yàn)樯鲜鼋o定移位值與上述對(duì)象像素的像素值的比特深度具有正相關(guān)，所以能夠更有效地實(shí)現(xiàn)編碼效率的提高。
[0557]此外，本發(fā)明所涉及的圖像濾波器裝置是一種作用于輸入圖像的圖像濾波器裝置，其特征在于具備:計(jì)算單元，其計(jì)算輸入圖像中的對(duì)象像素的像素值與該對(duì)象像素的周邊像素的像素值的差分值；分類單元，其根據(jù)由上述計(jì)算單元所計(jì)算出的差分值與預(yù)先決定的第I以及第2閾值的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別的任一種；和偏移單元，其對(duì)上述對(duì)象像素的像素值，加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移。
[0558]因?yàn)樯鲜瞿菢铀鶚?gòu)成的圖像濾波器裝置，根據(jù)由上述計(jì)算單元所計(jì)算出的差分值與預(yù)先決定的第I以及第2閾值的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別的任一種，并且對(duì)上述對(duì)象像素的像素值，加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移，所以類別分類處理難以受到噪聲的影響，編碼效率提高。
[0559]此外，優(yōu)選上述第I以及第2閾值的絕對(duì)值與上述對(duì)象像素的像素值的比特深度具有正相關(guān)。
[0560]根據(jù)上述構(gòu)成，因?yàn)樯鲜龅贗以及第2閾值的絕對(duì)值與上述對(duì)象像素的像素值的比特深度具有正相關(guān)，所以能夠更有效地實(shí)現(xiàn)編碼效率的提高。
[0561]此外，本發(fā)明所涉及的圖像濾波器裝置是一種作用于由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的圖像濾波器裝置，其特征在于具備:決定單元，其從第I以及第2偏移類型中決定包含輸入圖像中的對(duì)象像素的對(duì)象單位區(qū)域所屬的偏移類型；分類單元，其根據(jù)上述對(duì)象單位區(qū)域所屬的偏移類型以及上述對(duì)象像素的像素值，將上述對(duì)象像素分類為不加上偏移的偏移類別、以及加上偏移的多個(gè)偏移類別的任一種；和偏移單元，其對(duì)上述對(duì)象像素的像素值，加上與上述對(duì)象單位區(qū)域所屬的偏移類型以及由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移，其中，上述分類單元在上述對(duì)象像素的像素值處于給定范圍內(nèi)時(shí)，在包含上述對(duì)象像素的單位區(qū)域所屬的偏移類型是上述第I以及上述第2偏移類型的任一種的情況下，都將上述對(duì)象像素分類為加上偏移的偏移類別。
[0562]根據(jù)上述那樣所構(gòu)成的圖像濾波器裝置，因?yàn)樵谏鲜鰧?duì)象像素的像素值處于給定范圍內(nèi)時(shí)，在包含上述對(duì)象像素的單位區(qū)域所屬的偏移類型是上述第I以及上述第2偏移類型的任一種的情況下，都將上述對(duì)象像素分類為加上偏移的偏移類別，所以能夠有效地去除區(qū)塊噪聲。因此，根據(jù)上述構(gòu)成，能夠?qū)崿F(xiàn)編碼效率的提高。
[0563]此外，本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器裝置，其特征在于具備:決定單元，其從多個(gè)偏移類型中決定處理對(duì)象的單位區(qū)域所屬的偏移類型；偏移編碼單元，其根據(jù)上述偏移類型，決定具有不同的比特寬度的偏移，并且對(duì)該偏移進(jìn)行編碼；和濾波器單元，其對(duì)上述輸入圖像的各像素值加上上述所決定的偏移。
[0564]根據(jù)上述那樣所構(gòu)成的圖像濾波器裝置，從多個(gè)偏移類型中決定處理對(duì)象的單位區(qū)域所屬的偏移類型，根據(jù)所決定的偏移類型，決定具有不同的比特寬度的偏移，并且將所決定的偏移加到上述輸入圖像的各像素上。此外，對(duì)所決定的偏移進(jìn)行編碼。
[0565]因此，根據(jù)上述構(gòu)成，能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小，同時(shí)能夠進(jìn)行適當(dāng)?shù)钠茷V波處理。此外，根據(jù)上述構(gòu)成，因?yàn)榫幋a數(shù)據(jù)的碼量被削減，所以編碼效率提高。
[0566]此外，本發(fā)明所涉及的偏移編碼裝置是一種對(duì)由對(duì)輸入圖像的各像素值加上偏移的圖像濾波器所參考的各偏移進(jìn)行編碼的偏移編碼裝置，其特征在于具備:預(yù)測(cè)值導(dǎo)出單元，其根據(jù)已經(jīng)編碼的偏移導(dǎo)出各偏移的預(yù)測(cè)值；偏移殘差計(jì)算單元，其根據(jù)各偏移和由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值計(jì)算偏移殘差；和偏移殘差編碼單元，其對(duì)由上述偏移殘差計(jì)算單元所計(jì)算出的偏移殘差進(jìn)行編碼。
[0567]根據(jù)如上述那樣所構(gòu)成的偏移編碼裝置，因?yàn)榫邆?預(yù)測(cè)值導(dǎo)出單元，其根據(jù)已經(jīng)編碼的偏移導(dǎo)出各偏移的預(yù)測(cè)值；偏移殘差計(jì)算單元，其根據(jù)各偏移和由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值計(jì)算偏移殘差；和偏移殘差編碼單元，其對(duì)由上述偏移殘差計(jì)算單元所計(jì)算出的偏移殘差進(jìn)行編碼，所以能夠削減編碼數(shù)據(jù)的碼量。
[0568]此外，本發(fā)明所涉及的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)是一種由對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器所參考的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)，其特征在于:含有指定各單位區(qū)域所屬的偏移類型的偏移類型指定信息、和具有根據(jù)該偏移類型而不同的比特寬度的偏移，上述圖像濾波器參考上述編碼數(shù)據(jù)中包含的偏移類型指定信息，決定處理對(duì)象的單位區(qū)域所屬的偏移類型，并且對(duì)具有根據(jù)所決定的偏移類型而不同的比特寬度的偏移進(jìn)行解碼。
[0569]如上述那樣所構(gòu)成的編碼數(shù)據(jù)，因?yàn)楹懈鶕?jù)偏移類型而具有不同的比特寬度的偏移，所以編碼數(shù)據(jù)的碼量被削減。此外，對(duì)上述編碼數(shù)據(jù)進(jìn)行解碼的圖像濾波器參考上述偏移類型指定信息，決定處理對(duì)象的單位區(qū)域所屬的偏移類型，并且對(duì)根據(jù)所決定的偏移類型而具有不同的比特寬度的偏移進(jìn)行解碼，所以能夠削減用于預(yù)先存儲(chǔ)偏移的存儲(chǔ)器大小的同時(shí)，進(jìn)行適當(dāng)?shù)钠茷V波處理。
[0570]另外，上述偏移類型指定信息可以按每個(gè)上述輸入圖像來決定，也可以按每個(gè)上述單位區(qū)域來決定。此外，可以按每個(gè)上述輸入圖像的給定集來決定，也可以按每個(gè)上述單位區(qū)域的給定集來決定。
[0571]〔實(shí)施方式3〕
[0572]首先，參考圖23來說明本實(shí)施方式中的偏移信息01。圖23(a)是表示偏移信息OI (圖 23 (a)中記作 “sao_offset_param() ”)的句法的圖。
[0573]如圖23(a)所示，在偏移信息 OI 中包含參數(shù)“sao_type_idx[sao_curr_depth][ys] [xs] ”。此外,在參數(shù)“sao_type_idx[sao_curr_depth] [ys] [xs] ”不是“O” 的情況下，在偏移信息 OI 中含有參數(shù) “sao_offset [sao_curr_depth] [ys] [xs] [i] ”。
[0574](sao_curr_depth、ys、xs)
[0575]作為“sao_type_idx”以及“sao_offset”的參量的“sao_curr_depth”是表不QAOU的分割深度的參數(shù)，“ys”以及“xs”是分別用于表示QAOU(或者后述的QA0MU)的y方向的位置以及X方向的位置的參數(shù)。
[0576]對(duì)于與“Sa0_curr_cbpth”的值相應(yīng)的QAOU的分割形態(tài)，如上述參考圖4所進(jìn)行的說明。
[0577]圖23(b)是表示QAOU信息(圖23(b)中記作“sao_split_param() ”)的句法的圖。如圖23(b)的句法所示,若分割深度“sao_curr_depth”小于利用給定“saoMaxDepth”所設(shè)定的最大值，則根據(jù)參數(shù)“sao_Split_flag”來選擇是否進(jìn)一步分割QA0U。在進(jìn)行分割的情況下，遞歸地調(diào)用下一層次深度的“sao_split_param() ”。在分割深度達(dá)到最大值(“sao_curr_depth，，不小于 “saoMaxDepth，，)的情況下，在 “sao_split_flag[sao_curr_depth] [ys] [xs] ”中設(shè)定“0”，不進(jìn)行進(jìn)一步的分割。
[0578]圖44中示出偏移信息以及QAOU信息的句法的另一例。
[0579]圖44 (a)是偏移信息的句法。雖然是與圖23 (a)同樣的構(gòu)成，但是在“sao_offset_param() ” 的參量、以及“sao_split_flag”、“sao_type_idx”、“sao_offset” 的排列的下標(biāo)中增加了作為表示顏色分量的值的“component”。據(jù)此，能夠進(jìn)行按每個(gè)亮度以及色差等顏色分量而不同的QAOU分割，并且能夠應(yīng)用不同的偏移。
[0580]圖44(b)是QAOU信息的句法。與圖44(a)相同，是在圖23(b)中作為參量增加了顏色分量“component”的句法。
[0581]圖44(c)是調(diào)用圖44(a)以及圖44(b)的句法的自適應(yīng)偏移濾波器整體的句法。參數(shù)“sao_flag”是選擇是否應(yīng)用自適應(yīng)偏移濾波器的標(biāo)志，僅在該標(biāo)志為真的情況下，使用后續(xù)的關(guān)于自適應(yīng)偏移濾波器的參數(shù)。在該標(biāo)志為真的情況下，對(duì)各顏色分量，指定最上位層次，調(diào)用句法“sao_split_param() ”以及“sao_offset_param() ”。因?yàn)槭亲钌衔粚哟?，所以各句法中所給出的參量是sao_curr_depth=0、ys=0、xs=0。此外，“component”的值在亮度(Y)的情況下是0，在色差(Cb)的情況下是1，在色差(Cr)的情況下是2，來區(qū)別各顏色分量。另外，只要能夠區(qū)別處理對(duì)象的顏色分量，則component的值也可以是其他值。
[0582]另外，對(duì)于色差(Cb)以及色差(Cr)，使用與其分別對(duì)應(yīng)的標(biāo)志“ sao_f lag_Cb”“Sao_flag_Cr”，選擇是否應(yīng)用自適應(yīng)偏移濾波器，在不應(yīng)用的情況下，不存儲(chǔ)與該顏色分量對(duì)應(yīng)的QAOU信息以及偏移信息。
[0583]因?yàn)樵谏鲜鰣D44的句法中增加了參量“component”，所以在使用了上述圖23的說明中將參量[sao_curr_depth] [ys] [xs]置換為[sao_curr_depth] [ys] [xs] [component]來進(jìn)行處理。以后的說明也相同。
[0584](運(yùn)動(dòng)圖像解碼裝置I’)
[0585]接下來，參考圖22以及圖24?圖29來說明本實(shí)施方式所涉及的運(yùn)動(dòng)圖像解碼裝置I’。另外，對(duì)于與上述實(shí)施方式中所示的部件具有相同功能的部件，標(biāo)注相同的符號(hào)，并且省略其說明。
[0586]運(yùn)動(dòng)圖像解碼裝置I’與運(yùn)動(dòng)圖像解碼裝置I同樣地，關(guān)于其一部分，包含H.264 /MPEG-4.AVC中所采用的方式、VCEG (Video Coding Expert Group,視頻編碼專家組)中的共同開發(fā)用編解碼器即KTA軟件中所采用的方式、作為其后繼編解碼器的TMuC(TestModel under Consideration,考慮中的測(cè)試模型)軟件中所采用的方式、以及HM(HEVCTestModel，高效率視頻編碼測(cè)試模型)軟件中所采用的技術(shù)。此外，運(yùn)動(dòng)圖像解碼裝置I’設(shè)置了自適應(yīng)偏移濾波器60’來代替運(yùn)動(dòng)圖像解碼裝置I中的自適應(yīng)偏移濾波器60，這一點(diǎn)不同，其他構(gòu)成相同。
[0587](自適應(yīng)偏移濾波器60’)
[0588]接下來，參考圖22來說明自適應(yīng)偏移濾波器60’的詳細(xì)情況。圖22是表示自適應(yīng)偏移濾波器60’的構(gòu)成的框圖。如圖22所示，自適應(yīng)偏移濾波器60’是包括自適應(yīng)偏移濾波器信息解碼部61’以及自適應(yīng)偏移濾波器處理部62’的構(gòu)成。
[0589]此外，如圖22所示，自適應(yīng)偏移濾波器信息解碼部61’是包括偏移信息解碼部611、以及QAOU結(jié)構(gòu)解碼部612的構(gòu)成。
[0590]偏移信息解碼部611參考編碼數(shù)據(jù)#1中包含的QAOU信息，解碼QAOU信息中包含的偏移信息01。此外,將通過解碼偏移信息01而得到的“sao_type_idx[sao_curr_depth][ys] [xs] [component] ”以及“sao_offset [sao_curr_depth] [ys] [xs] [i] ”的各值與各個(gè)參量(sao_curr_depth、ys、xs)以及(sao_curr_depth、ys、xs、i)建立關(guān)聯(lián),提供給偏移信息存儲(chǔ)部621。
[0591]更詳細(xì)而言，偏移信息解碼部611從編碼數(shù)據(jù)#1解碼代碼，并且將所解碼出的代碼變換為“sao_type_idX”的值，與參量建立關(guān)聯(lián)提供給偏移信息存儲(chǔ)部621。這里，偏移信息解碼部611根據(jù)處理對(duì)象的QAOU的層次的深度，變更代碼的解碼方法、以及從代碼向“sao_type_idx”的值的變換。將該QAOU的層次的深度等的條件稱為參數(shù)條件。對(duì)于與一般參數(shù)條件相應(yīng)的偏移信息的解碼，使用圖41、圖42進(jìn)行后述。
[0592]對(duì)于代碼的解碼方法，可以在處理對(duì)象的QAOU的層次的深度小于閾值時(shí)和處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)，使用不同的最大值來進(jìn)行，也可以僅在處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)使用最大值。此外，可以在處理對(duì)象的QAOU的層次的深度小于閾值時(shí)和處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)，使用不同的二值化(binarization)來進(jìn)行。而且,可以在處理對(duì)象的QAOU的層次的深度小于閾值時(shí)和處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)，使用不同的上下文。
[0593]例如，可以在處理對(duì)象的QAOU的層次的深度小于閾值的情況下，利用可變長編碼(ue(v))解碼代碼，在處理對(duì)象的QAOU的層次的深度為閾值以上的情況下，利用與偏移類型的數(shù)量相應(yīng)的truncated編碼(te(v))解碼代碼。此外，可以在偏移類型數(shù)為2的冪時(shí)，利用固定長編碼解碼代碼。若偏移類型數(shù)為4個(gè)，則可以用2bit來表現(xiàn)，所以可以用2bit進(jìn)行固定長編碼。
[0594]此外，偏移信息解碼部611使用圖25所示那樣的變換表801以及變換表802進(jìn)行從所解碼的代碼向“sa0_type_idX”的值的變換。在圖25(a)的變換表801中，示出2種變換型式。這2種變換型式根據(jù)處理對(duì)象的QAOU的層次的深度來分開使用。即，偏移信息解碼部611在處理對(duì)象的QAOU的層次的深度小于閾值的情況下使用變換表801A，在處理對(duì)象的QAOU的層次的深度為閾值以上的情況下使用變換表801B。
[0595]在圖25(a)的變換表80IA中，對(duì)于代碼“1”，偏移類型“E0_0” ( “sao_type_idx”=l)建立了對(duì)應(yīng)，對(duì)于代碼“2”，偏移類型“E0_1” ( “sa0_type_idX”=2)建立了對(duì)應(yīng)，對(duì)于代碼“3”，偏移類型“E0_2” ( “sa0_type_idX”=3)建立了對(duì)應(yīng)。以下，對(duì)于代碼4?6也同樣。
[0596]此外，在圖25(a)的變換表801B中，對(duì)于代碼“ 1”，偏移類型“E0_0”( “sao_type_idx”=l)建立了對(duì)應(yīng)，對(duì)于代碼“2”，偏移類型“B0_0” ( “sao_type_idx”=5)建立了對(duì)應(yīng)，對(duì)于代碼“3”，偏移類型( “sao_type_idx”=6)建立了對(duì)應(yīng)。而且，在變換表801B中不使用代碼4?6。
[0597]如此，相對(duì)于在變換表801A中含有用于自適應(yīng)偏移(SAO)的全部偏移類型，而在變換表801B中僅含有用于自適應(yīng)偏移(SAO)的偏移類型中的一部分偏移類型。因此，在處理對(duì)象的QAOU的層次的深度為閾值以上的情況下，僅能使用一部分偏移類型。
[0598]這是因?yàn)?，?duì)于較深的層次，QAOU的面積變小，所以QAOU內(nèi)的像素值的特性變得接近一樣，即使不使用較多的類型，也能夠?qū)С鲞m當(dāng)?shù)钠啤４送?，?jù)此，能夠減少所使用的偏移類型數(shù)，所以能夠減少所需要的存儲(chǔ)器量，并且通過縮短表示偏移類型的編碼數(shù)據(jù)的數(shù)據(jù)長等，從而能夠使編碼效率提高。
[0599]另外，若變換表801B中的代碼與偏移類型的對(duì)應(yīng)關(guān)系，與變換表801A中的代碼與偏移類型的對(duì)應(yīng)關(guān)系的順序相同，則也可以采用僅使用變換表801A的構(gòu)成。
[0600]圖25(b)的變換表802示出能夠代替變換表801B來使用的、與變換表801B同樣的變換表的各種示例。所有變換表都與變換表801B同樣地限制了類型的種類。此外，空欄表示不使用相應(yīng)的代碼。
[0601]變換表802A是僅使用邊緣偏移的示例，不包含帶偏移。邊緣偏移的偏移數(shù)通常是4個(gè)，帶偏移的偏移數(shù)通常是16個(gè)。如此，邊緣偏移的偏移數(shù)比帶偏移的偏移數(shù)少。因此，通過限制帶偏移的使用，從而能夠削減用于保持偏移的存儲(chǔ)器量。尤其在層次較深的情況下，因?yàn)槠圃黾铀源鎯?chǔ)器量變大。此外，在層次較深的情況下，帶偏移的選擇率降低。因此，通過將層次作為參數(shù)條件，在層次較深的情況下使用僅具備邊緣偏移的變換表802A，在層次較淺的情況下使用具備邊緣偏移和帶偏移的變換表(例如801A)，從而能夠不使編碼效率降低地削減存儲(chǔ)器量。此外，因?yàn)樵诰幋a裝置中能夠節(jié)省不需要的選擇分支的計(jì)算成本，所以能夠減少處理量。
[0602]變換表802B是僅使用帶偏移的示例，不包含邊緣偏移。帶偏移與邊緣偏移相比具有如下特征:運(yùn)算量較小，因?yàn)椴皇褂脤?duì)象像素的周圍像素所以不需要用于保持參考像素的行存儲(chǔ)器等。因此，通過根據(jù)參數(shù)條件來使用變換表802B，從而能夠獲得上述的效果。變換表802C是僅使用一個(gè)帶偏移“B0_0” ( “sa0_type_idX”=5)的示例。
[0603]此外，變換表802D與變換表801B同樣地是使用一個(gè)邊緣偏移和兩個(gè)帶偏移的示例。具體而言，是使用偏移類型 “E0_0” ( “sa0_type_idX”=l)以及 “B0_0” ( "sao_type_idX”=5)、“B0_l” ( “sa0_type_idX”=6)，帶偏移類型中優(yōu)先與短的代碼(小的代碼編號(hào))建立了對(duì)應(yīng)的示例。在層次較淺的情況下，與層次較深的情況相比，帶偏移的選擇率變高，所以通過將層次作為參數(shù)條件，在層次較淺的情況下使用變換表802D，將短的代碼與使用頻度高的類型建立對(duì)應(yīng)，從而能夠使編碼效率提高。
[0604]另外，除了圖25所例示的以外，也可以根據(jù)參數(shù)條件來變更代碼與偏移類型的對(duì)應(yīng)關(guān)系。對(duì)于變換表801A的任一與邊緣偏移和帶偏移都不同的偏移類型，可以根據(jù)層次深度等條件，單獨(dú)或者與其他偏移類型一起進(jìn)行使用。作為其具體例，可以列舉在后述的其他實(shí)施方式中說明的、同時(shí)具有EO和BO的特征的偏移類型、在與現(xiàn)有邊緣偏移“E0_0”不同的水平采樣位置檢測(cè)邊緣的邊緣偏移、基于與現(xiàn)有帶偏移“B0_0”以及不同的帶分配的帶偏移。
[0605]QAOU結(jié)構(gòu)解碼部612通過解碼包含在QAOU信息中的“sao_split_flag[sao_curr_depth] [ys] [xs] ”,來決定QAOU的分割結(jié)構(gòu)，并且將表示所決定的QAOU的分割結(jié)構(gòu)的QAOU結(jié)構(gòu)信息提供給偏移信息存儲(chǔ)部621。
[0606]此外，也可以具備如下所示的偏移屬性設(shè)定部613。偏移屬性設(shè)定部613決定偏移的移位值。編碼數(shù)據(jù)的偏移利用精度比像素比特深度(也稱為PIC_DEPTH)低的偏移的比特深度(也稱為SA0_DEPTH)進(jìn)行編碼。即，編碼數(shù)據(jù)中的偏移被量化。所謂移位值，表示用于進(jìn)行逆量化而需要的比特移位量。此外，偏移屬性設(shè)定部613決定偏移的比特深度和偏移的值域。這里，根據(jù)輸入偏移屬性設(shè)定部613的未圖示的像素比特深度(也稱為PIC_DEPTH)來決定偏移的比特深度。所謂像素比特深度，是指用比特寬度表示構(gòu)成自適應(yīng)偏移濾波器60的輸入圖像的像素值的值域，在像素比特深度為N比特時(shí)，像素值取O?2N-1的范圍。
[0607]SAO的比特深度以及移位值使用以下的式子，但是如后所述，也可以根據(jù)參數(shù)條件而使用其他值。
[0608]SA0_DEPTH=MIN(PIC_DEPTH、10)
[0609]移位值=PIC_DEPTH_MIN(PIC_DEPTH、10)
[0610]此外，用以下的式子決定量化偏移的值域。
[0611]此外，如圖22所示，自適應(yīng)偏移濾波器處理部62’是包括偏移信息存儲(chǔ)部621、QAOU控制部622、偏移類型導(dǎo)出部623、類別分類部624、偏移導(dǎo)出部625、以及偏移加法部626的構(gòu)成。[0612]偏移信息存儲(chǔ)部621 基于 QAOU 結(jié)構(gòu)信息、“sao_type_idx[sao_curr_depth] [ys][xs] ”、以及 “sao_offset [sao_curr_depth] [ys] [xs] [i] ”,管理以及存儲(chǔ)對(duì)各 QAOU 所指定的偏移類型、以及在該偏移類型中能夠選擇的各類別相關(guān)的偏移的具體值，是具備映射存儲(chǔ)器以及表存儲(chǔ)器的構(gòu)成。
[0613]參考圖24來說明映射存儲(chǔ)器、以及表存儲(chǔ)器。圖24是表示映射存儲(chǔ)器以及表存儲(chǔ)器中所存儲(chǔ)的示例的圖，圖24(a)是用于說明存儲(chǔ)在映射存儲(chǔ)器中的QAOU索引的一例的圖，圖24(b)是用于說明存儲(chǔ)在表存儲(chǔ)器中的信息的一例的圖。
[0614]映射存儲(chǔ)器601中存儲(chǔ)分配給根據(jù)分割深度而決定的各偏移最小單位(也稱為QAOMU:Quad Adaptive Offset Minimum Unit)的后述的 QAOU 索引。在圖 24(a)中不出構(gòu)成對(duì)象處理單位(例如IXU)的分割深度3的各QAOMU和分配給各QAOMU的QAOU索引。另夕卜，在圖24(a)中，不考慮QAOU的分割深度，簡便地將索引O?9分配給QA0U。此外，在圖24(a)所示的示例中，將由QAOU索引=I所指定的QAOU記作QA0UL.此外，圖24(a)中的細(xì)線表示QAOMU的邊界,粗線表示QAOU的邊界。
[0615]如圖24 (a)所示，QAOUO由4個(gè)QAOMU構(gòu)成，這4個(gè)QAOMU中作為QAOU索引而分配了 O。另一方面，QA0U3由一個(gè)QAOMU構(gòu)成，該QAOMU中作為QAOU索引而分配了 3。如此，在映射存儲(chǔ)器中存儲(chǔ)了分配給各QAOMU的QAOU索引。
[0616]此外，在表存儲(chǔ)器602中，對(duì)于各QAOU索引，與該QAOU索引建立了關(guān)聯(lián)的偏移類型、以及在該偏移類型中能夠選擇的各類別相關(guān)的偏移的具體值相互建立關(guān)聯(lián)地進(jìn)行存儲(chǔ)。
[0617]具體而言，參考圖24(b)進(jìn)行說明。在圖24(b)中示出與QAOU索引O?9的各個(gè)建立了關(guān)聯(lián)的偏移類型以及在各偏移類型中能夠選擇的各類別相關(guān)的偏移。圖24(b)中的“ XXX ”表示可以相互不同的具體數(shù)值。
[0618]此外，圖24(b)中的表示由“sao_type_idx”=5所指定的偏移類型。此外，“E0_1”表示由“sao_type_idx” =1所指定的偏移類型。如此,將由“sao_type_idx” =1、2、3、4所指定的偏移類型即邊緣偏移分別記作“E0_l、2、3、4”，將由“sa0_type_idX”=5、6所指定的偏移類型即帶偏移分別記作“B0_l、2”。
[0619]如圖24(b)所示，在偏移類型為帶偏移的情況下，關(guān)于該偏移類型而存儲(chǔ)在表存儲(chǔ)器中的偏移是偏移I?偏移16的總計(jì)16個(gè)。這里，偏移I?偏移16指在“sa0_type_idx[sao_curr_depth] [ys] [xs] ” 的值為“5” 或者“6” 時(shí)由“sao_ofTset[sao_cur;r_depth][ys] [xs] [I] ” ?“sao_offset [sao_curr_depth] [ys] [xs] [16] ” 分別所指定的值。
[0620]另一方面，在偏移類型為邊緣偏移的情況下，關(guān)于該偏移類型而存儲(chǔ)在表存儲(chǔ)器中的偏移是偏移I?4的總計(jì)4個(gè)。這里,偏移I?4指在“sao_type_idx[sao_curr_depth][ys] [xs] ” 的值為 “ 1、2、3、4” 任一個(gè)時(shí)由 “sao_offset [sao_curr_depth] [ys] [xs] [I] ” ?“sao_offset[sao_curr_depth] [ys] [xs] [4] ”所分別指定的值。另外，在邊緣偏移的情況下，對(duì)于偏移5?16什么也不存儲(chǔ)。
[0621 ] 另外，對(duì)各QAOMU附加QAOMU編號(hào)，通過該QAOMU編號(hào)，各QAOMU能夠相互識(shí)別。以下，將QAOMU編號(hào)為Nq的QAOMU記作QAOMUNq。
[0622]此外，在本實(shí)施方式中，可以根據(jù)處理對(duì)象的QAOU的層次，使偏移的精度不同。根據(jù)偏移的精度，逆量化所使用的移位值也不同。在該情況下，也使用像素比特深度PIC_DEPTH來導(dǎo)出偏移的精度以及移位值。
[0623]作為偏移的精度的示例，例如，若將QAOU的層次的深度小于閾值時(shí)的偏移的精度、移位值設(shè)為
[0624]SA0_DEPTH=MIN(PIC_DEPTH、10)
[0625]移位值=PIC_DEPTH_MIN(PIC_DEPTH、10)
[0626]并且，將QAOU的層次的深度為閾值以上時(shí)的偏移的精度設(shè)為
[0627]SA0_DEPTH=MIN(PIC_DEPTH、8)
[0628]移位值=PIC_DEPTH_MIN(PIC_DEPTH、8)
[0629]則能夠使偏移的精度不同。
[0630]如上所述，偏移的精度(偏移的比特深度、SA0_DEPTH)、和用比特寬度表現(xiàn)了構(gòu)成輸入圖像的像素值的值域的像素比特深度(PIC_DEPTH)，處于量化誤差的觀點(diǎn)存在相互密切的關(guān)系。自適應(yīng)偏移濾波器60的輸出圖像的比特深度是像素比特深度PIC_DEPTH，SA0_DEPTH是對(duì)像素加上的偏移的比特深度，所以即使使用超過像素比特深度的精度的偏移，在輸出過程也被舍棄，即使將SA0_DEPTH設(shè)定得超過PIC_DEPTH，也沒有意義。相反，在SA0_DEPTH小于PIC_DEPTH的情況下，僅能對(duì)輸入圖像進(jìn)行比由濾波器能夠補(bǔ)正的精度(PIC_DEPTH)粗的補(bǔ)正，所以濾波器效果減小。
[0631]因此，通過將被 量化后的偏移限制在用一定的比特寬度能夠表現(xiàn)的偏移值域，能夠限制由偏移信息存儲(chǔ)部621用于存儲(chǔ)被量化后的偏移的比特寬度。據(jù)此，與不進(jìn)行限制的情況相比，能夠獲得存儲(chǔ)器大小削減的效果。另一方面，使偏移值域過度地變窄，使偏移補(bǔ)正解碼圖像的失真的效果變小，通過偏移加法處理也不能去除解碼圖像的失真，編碼效率降低。
[0632]因此，通過將偏移值域設(shè)定在最合適的范圍使得編碼效率不降低，從而能夠削減存儲(chǔ)器的使用量的同時(shí)維持濾波器的效果。
[0633]而且，將表示偏移值域的值的最大的比特長設(shè)為CLIP_BIT，通過CLIP_BIT = SA0_DEPTH-K的計(jì)算，將偏移值域確定為-2^βιη~的情況下，根據(jù)
【發(fā)明者】的實(shí)驗(yàn)，發(fā)現(xiàn)了若使K=4，則即使由偏移值域限制偏移的范圍，編碼效率也不會(huì)降低。
[0634]而且，在像素比特深度=8的情況下，偏移的比特深度SA0_DEPTH也是8，成為CLIP_BIT=8-K=4。一個(gè)偏移能夠用4比特進(jìn)行存儲(chǔ)，對(duì)于以8比特的字節(jié)為單位進(jìn)行處理的軟件等，可以在I字節(jié)打包存儲(chǔ)一個(gè)偏移，可以簡便地削減存儲(chǔ)器大小。
[0635]而且，在所設(shè)定的偏移的精度根據(jù)處理對(duì)象的QAOU的層次而不同的情況下，偏移信息存儲(chǔ)部621根據(jù)處理對(duì)象的QAOU的層次的深度，切換確保偏移存儲(chǔ)區(qū)域的單位大小。
[0636]具體而言，在將處理對(duì)象的QAOU的層次的深度小于閾值時(shí)的偏移的精度設(shè)定為nA比特(例如，nA=8或者6)、將處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)的偏移的精度設(shè)定為nB比特(nA > nB、例如，nB=nA-2)時(shí)，偏移信息存儲(chǔ)部621用nA比特單位確保用于存儲(chǔ)處理對(duì)象的QAOU的層次的深度小于閾值時(shí)的偏移的區(qū)域，用nB比特單位確保用于存儲(chǔ)處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)的偏移的區(qū)域。
[0637]另外，優(yōu)選如下構(gòu)成:在處理對(duì)象的QAOU的層次的深度為閾值以上的情況下，對(duì)偏移信息存儲(chǔ)部621進(jìn)行偏移的讀寫時(shí)，在寫入時(shí)進(jìn)行(nA-nB)比特下舍入，在讀出時(shí)進(jìn)行(nA-nB)比特上舍入，從而進(jìn)行輸入輸出。根據(jù)該構(gòu)成，不需要在其他模塊中考慮偏移的精度的差來進(jìn)行處理。
[0638]此外，偏移信息存儲(chǔ)部621在根據(jù)處理對(duì)象的QAOU的層次的深度來改變需要的類別數(shù)的情況下，與需要的類別數(shù)相匹配，來切換要確保的表存儲(chǔ)器的區(qū)域。例如，如后所述，考慮如下帶偏移的情況:在處理對(duì)象的QAOU的層次的深度小于閾值的情況下，被分類為16類別，在處理對(duì)象的QAOU的層次的深度成為閾值以上的情況下，被分類為8類別。在該情況下，用于確保處理對(duì)象的QAOU的層次的深度成為閾值以上時(shí)的類別所需要的存儲(chǔ)器的容量，成為處理對(duì)象的QAOU的層次的深度小于閾值時(shí)的一半。因此，偏移信息存儲(chǔ)部621將處理對(duì)象的QAOU的層次的深度成為閾值以上時(shí)要確保的表存儲(chǔ)器的大小切換為處理對(duì)象的QAOU的層次的深度小于閾值時(shí)的一半。
[0639]QAOU控制部622控制自適應(yīng)偏移濾波器處理部62中包含的各部。此外，QAOU控制部622參考QAOU結(jié)構(gòu)信息，將已去區(qū)塊解碼圖像P_DB分割為一個(gè)或者多個(gè)QA0U，按給定順序掃描各QA0U。此外，將表示作為處理對(duì)象的對(duì)象QAOMU的QAOMU編號(hào)提供給偏移類型導(dǎo)出部623。
[0640]偏移類型導(dǎo)出部623參考偏移信息存儲(chǔ)部621的映射存儲(chǔ)器以及表存儲(chǔ)器，導(dǎo)出由從QAOU控制部622提供的QAOMU編號(hào)所指定的偏移類型。此外，將所導(dǎo)出的偏移類型提供給類別分類部624。
[0641]類別分類部624將包含在對(duì)象QAOU中的各像素分類為從偏移類型導(dǎo)出部623提供的偏移類型中能夠選擇的多個(gè)類別的任一種。此外，將該偏移類型、和表示各像素被分類的類別的類別索引提供給偏移導(dǎo)出部625。另外，對(duì)于類別分類部624執(zhí)行的具體的分類處理，后面敘述，所以這里省略說明。
[0642]偏移導(dǎo)出部625參考偏移信息存儲(chǔ)部621的表存儲(chǔ)器，對(duì)包含在對(duì)象QAOU中的各像素，導(dǎo)出從類別分類部624提供的偏移類型以及由類別索引所指定的偏移。進(jìn)一步，具備偏移逆移位部(未圖示)，其使偏移向左側(cè)比特移位由偏移屬性設(shè)定部613所設(shè)定的移位值。偏移逆移位部進(jìn)行該偏移的逆量化，使得偏移的比特深度和像素比特深度相匹配。通過進(jìn)行這種逆量化，在后述的偏移加法部626的加法運(yùn)算處理中，可以在同一比特深度，進(jìn)行像素值和偏移的加法運(yùn)算。對(duì)各像素進(jìn)行了逆量化的偏移提供給偏移加法部626。
[0643]偏移加法部626對(duì)對(duì)象QAOU中的已去區(qū)塊解碼圖像P_DB的各像素加上從偏移導(dǎo)出部625提供的偏移。偏移加法部626將對(duì)包含在已去區(qū)塊解碼圖像P_DB中的全部QAOU進(jìn)行處理而得到的圖像作為偏移已濾波解碼圖像P_0F輸出。
[0644]接下來，參考圖26?29來說明類別分類部624執(zhí)行的分類處理。另外，以下，說明將QAOU的層次的深度等條件作為參數(shù)條件的情況，但是對(duì)于與一般參數(shù)條件相對(duì)應(yīng)的類別分類部的構(gòu)成，使用圖34進(jìn)行后述。
[0645]圖26是用于說明自適應(yīng)偏移濾波器60的偏移處理的圖，(a)示出表示處理對(duì)象像素X的像素值pix[x]與像素a或者b的像素值的大小關(guān)系的曲線、以及與該大小關(guān)系相應(yīng)的函數(shù)Sign的值，(b)示出表示處理對(duì)象像素X的像素值與像素a以及b的像素值的大小關(guān)系的曲線、以及與該大小關(guān)系相應(yīng)的EgdeType的值，(C)示出(b)所示的各曲線與class_idx的對(duì)應(yīng)，(d)?(f)示出表示從EgdeType向class_idx的變換的變換表。
[0646]圖27是用于說明自適應(yīng)偏移濾波器60的偏移處理的圖，(a)概略地示出“sao_type_idx”=5時(shí)的類別分類，(b)概略地示出“sao_type_idx” =6時(shí)的類別分類。[0647]圖28是用于說明自適應(yīng)偏移濾波器60的偏移處理的圖，(a)概略地示出處理對(duì)象的QAOU的層次的深度小于閾值時(shí)的類別分類，(b)概略地示出處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)的類別分類。
[0648]圖29是表示指定了帶偏移時(shí)的類別分類的一例的圖，(a)示出處理對(duì)象的QAOU的層次的深度小于閾值時(shí)的類別分類的一例，(b)示出處理對(duì)象的QAOU的層次的深度為閾值以上的時(shí)的類別分類的一例。
[0649](偏移類型=1~4(邊緣偏移)時(shí))
[0650]從偏移類型導(dǎo)出部623提供的偏移類型為I~4的任一種時(shí)的類別分類部624的處理，如上述參考圖10進(jìn)行的說明那樣。
[0651]因此，如圖26(a)所示，在像素值pix [x]與像素a或者b的像素值的大小關(guān)系中，在像素值pix[x]小于像素a或者b的像素值的情況下，Sign (pix [x] -pix [a]) =-1 ;在相同的情況下，Sign (pix [x]-pix [a]) =0 ;在大于的情況下，Sign (pix [x]-pix [a]) =1。另外,在圖26(a)中帶有pix[x]的黑圓點(diǎn)表示處理對(duì)象像素X的像素值，不帶有pix[x]的黑圓點(diǎn)表示處理對(duì)象像素a或者b的像素值。此外，圖26(a)中的上下方向表示像素值的大小。
[0652]接下來,類別分類部624 基于 Sign (pix[X]-pix[a])、以及 Sign (pix[x]-pix[b]),通過以下的數(shù)式(1-1)導(dǎo)出EgdeType。
[0653]EgdeType=Sign(pix[x]-pix[a])+Sign(pix[x]-pix[b])+2…(1-1)
[0654]據(jù)此，如圖26(b)所示，相對(duì)于像素值pix[x]，像素a以及b的像素值都比較大的情況下，成為EgdeType = O。此外，相對(duì)于像素值pix [x]，像素a以及b中的一方的像素值較大、另一方的像素值相同的情況下，成為EgdeType=l。此外，相對(duì)于像素值pix [x]，像素a以及b中的一方的像素值較小、另一方的像素值相同的情況下，成為EgdeType=3。
[0655]此外，相對(duì)于像素值pix[x]，像素a以及b的像素值都小的情況下，成為EgdeType=4。此外，相對(duì)于像素值pix[x]，像素a以及b中的一方的像素值較小、另一方的像素值較大的情況下，或者相對(duì)于像素值pix[x]，像素a以及b的像素值都相同的情況下，成為 EgdeType=2。
[0656]另外，在圖26(b)中，各曲線的中心的黑圓點(diǎn)示出處理對(duì)象像素X的像素值，兩端的黑圓點(diǎn)示出像素a以及b的像素值。此外，圖26(b)中的上下方向示出像素值的大小。
[0657]接下來，類別分類部624基于所導(dǎo)出的EgdeType，按照以下方式導(dǎo)出處理對(duì)象像素X應(yīng)該屬于的類別的類別索引(claSS_idx)。
[0658]class_idx=EoTbl[EdgeType]
[0659]這里,EoTbl [EdgeType]是用于從EdgeType導(dǎo)出class_idx而使用的變換表。在圖26(d)~(f)中示出該變換表EoTbl的具體例。
[0660]圖26 (d)所示的變換表1001X是不根據(jù)處理對(duì)象的QAOU的層次的深度而改變所使用的變換表的情況的變換表。
[0661]此外，圖26(e)所示的變換表1001A和圖26(f)所示的變換表1001B是根據(jù)處理對(duì)象的QAOU的層次的深度來改變所使用的變換表的情況的變換表，在處理對(duì)象的QAOU的層次的深度小于閾值的情況下使用變換表1001A，在處理對(duì)象的QAOU的層次的深度為閾值以上的情況下使用變換表1001B。
[0662]在不根據(jù)處理對(duì)象的QAOU的層次的深度改變所使用的變換表的情況下，如變換表1OOlX所示，類別分類部624在由處理對(duì)象像素X、像素a以及像素b構(gòu)成的區(qū)域不存在邊緣的情況下(以下也稱為平坦的情況)，即，EdgeType=2的情況下，將處理對(duì)象像素x分類為類別 O (“class_idx，，=0)。此外,將 EdgeType=0、1、3、4 分別分類為 class_idx=l、2、3、4。
[0663]此外，在不根據(jù)處理對(duì)象的QAOU的層次的深度而改變要使用的變換表的情況下，在處理對(duì)象的QAOU的層次的深度小于閾值時(shí)，如變換表1001A所示，類別分類部624在由處理對(duì)象像素X、像素a以及像素b構(gòu)成的區(qū)域不存在邊緣的情況下(以下也稱為平坦的情況)，即，EdgeType=2的情況下,將處理對(duì)象像素x分類為類別0( “class_idx” =0)。此外,將EdgeType=0、l、3、4分別分類為class_idx=l、3、4、2。此外,在處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)，如變換表1001B所示，類別分類部624在由處理對(duì)象像素X、像素a以及像素b構(gòu)成的區(qū)域不存在邊緣的情況下(以下也稱為平坦的情況)，即，EdgeType=2的情況下，將處理對(duì)象像素X分類為類別0( “class_idx” =0)。此外,將EdgeType=0、l分類為 class_idx=l,將 EdgeType=3、4 分類為 class_idx=2。因此,在變換表 1001B 中，一個(gè)class_idx 對(duì)應(yīng)于多個(gè) EdgeType。
[0664]另外，對(duì)于變換表1001A,可認(rèn)為可以與變換表1001X相同。但是,若使變換表1001A與變換表1001X相同，則在與變換S表1001B之間，對(duì)于相同的EdgeType，會(huì)分配不同的class_idx,變?yōu)楦鶕?jù)層次而改變處理。例如,在EdgeType=3時(shí),在層次的深度小于閾值的情況下，class_idX=4，在層次的深度為閾值以上的情況下，Class_idX=2，變?yōu)楦鶕?jù)層次而改變處理。
[0665]因此，通過使變換表1001A為圖26(e)所示，通過與變換表1001B之間，即層次間，不使處理發(fā)生變化。
[0666](偏移類型=5~6(帶偏移)時(shí))
[0667]在從偏移類型導(dǎo)出部623提供的偏移類型為5或者6時(shí)，類別分類部624根據(jù)處理對(duì)象像素X的像素值pix[x]，將該處理對(duì)象像素的像素值分類為多個(gè)類別的任一個(gè)。
[0668]?偏移類型=5 (sao_type_idx=5)時(shí)
[0669]類別分類部624在處理對(duì)象像素X的像素值pix[x]滿足
[0670](maxX I / 4) ≤ pix[x] ≤ (maxX 3 / 4)
[0671]時(shí)，將該處理對(duì)象像素分類為類別O以外的類別。即，在處理對(duì)象像素的像素值處于圖11(a)中的斜線的范圍內(nèi)的情況下，將該處理對(duì)象像素分類為類別O以外的類別。另外，上述max表示處理對(duì)象像素X的像素值能夠取得的最大值,例如，max=255o此外，max=255時(shí),上述條件既可以表現(xiàn)為8 < (pix[x] / 8) < 23,也可以表現(xiàn)為4 < (pix[x] /16) ( 11。
[0672]?偏移類型=6 (sao_type_idx=6)時(shí)
[0673]類別分類部624在處理對(duì)象像素X的像素值pix[x]滿足
[0674]pix [x] ≤ (maxX I / 4)或者(maxX 3 / 4) ≤ pix [x]
[0675]時(shí)，將該處理對(duì)象像素分類為類別0以外的類別。即，在處理對(duì)象像素的像素值處于圖11(b)中的斜線的范圍內(nèi)的情況下，將該處理對(duì)象像素分類為類別O以外的類別。另外，上述max表示處理對(duì)象像素X的像素值能夠取得的最大值，例如，max=255o此外,在max=255時(shí),上述條件既可以表現(xiàn)為(pix[x] / 8) ≤ 7或者24 < (pix[x] / 8),也可以表現(xiàn)為(pix[x] / 16)≤ 3 或者 12 ≤(pix[x] / 16)。
[0676]若更具體地說明類別分類部624執(zhí)行的類別分類處理，則如下所述。
[0677]在偏移類型為5~6的任一種時(shí)，類別分類部624根據(jù)處理對(duì)象的QAOU的層次的深度，按照以下的方式導(dǎo)出處理對(duì)象像素X應(yīng)該屬于的類別的類別索引(Classjdx)。
[0678].處理對(duì)象的QAOU的層次的深度小于閾值時(shí)
[0679]class_idx=EoTbl[sao_type_idx][pix[x] / >>BoRefBit32]
[0680].處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)
[0681]class_idx=EoTbl[sao_type_idx][pix[x] / >>BoRefBitl6]
[0682]這里，BoTbl[sa o_type_idx] [pix [x] / >>BoRefBit32]、以及 BoTbl [sao_type_idx] [pix[x] / > > BoRefBitl6]是用于根據(jù)處理對(duì)象像素x的像素值pix[x]和sao_type_idx導(dǎo)出class_idx而使用的變換表。BoRefBit32和BoRefBitl6,在將圖像比特深度設(shè)為PIC_DEPTH時(shí)，分別是由PIC_DEPTH-5、PIC_DEPTH_4所導(dǎo)出的值，是將像素值量化為32等級(jí)或者16等級(jí)的值。被量化的像素值也記作pixquant。利用BoRefBit32以及BoRefBitl6進(jìn)行右移位，對(duì)應(yīng)于利用I < < BoRefBit32以及I < < BoRefBitl6進(jìn)行除法運(yùn)算。該量化幅度在像素值的比特深度為8比特的情況下，分別是I << (8-5)=8、1<< (8-4)=16。以下，說明量化幅度為8的情況。此外，將該量化幅度稱為類別的幅度。
[0683]類別分類部624改變根據(jù)處理對(duì)象的QAOU的層次的深度進(jìn)行分類的類別的幅度，進(jìn)行類別的分類。例如，如圖28(a)所示，在處理對(duì)象的QAOU的層次的深度小于閾值的情況下，類別分類部624將類別的幅度設(shè)為“8”從而將像素值分類為32個(gè)，來進(jìn)行類別分類。此外，如圖28(b)所示，在處理對(duì)象的QAOU的層次的深度為閾值以上的情況下，類別分類部624將類別的幅度設(shè)為“16”從而將像素值分類為16個(gè)，進(jìn)行類別分類。
[0684]接下來，在圖29中示出變換表EoTbl的具體例。分別在圖29的(a)、(b)中，
表不 “sao_type_index” =5, “B0_2” 表不“sao_type_index” =6。此外，圖 29(a)所不的變換表1301是處理對(duì)象的QAOU的層次的深度小于閾值時(shí)所使用的變換表，圖29(b)所示的變換表1302是處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)所使用的變換表。
[0685]在處理對(duì)象的QAOU的層次的深度小于閾值的情況下，“sao_type_index”=5時(shí),如圖29(a)所示，類別分類部624對(duì)于像素值pix [X]滿足8 < (pix[x] / 8) ^ 23的處理對(duì)象像素X，根據(jù)Pix[x]的大小，分類為類別索引I~16的任一種類別。
[0686]此外,“830_17口6_;[11(161”=6時(shí),類別分類部624對(duì)于像素值口11|^]滿足pix[x] /8) <7或者24< (pix[x] / 8)的處理對(duì)象像素X，根據(jù)pix [X]的大小，分類為類別索引I~16的任一種類別。
[0687]此外，在處理對(duì)象的QAOU的層次的深度為閾值以上的情況下，“ sao_type_index” =5時(shí)，如圖29 (b)所示,類別分類部624對(duì)于像素值pix [X]滿足4≤(pix[x] /16) ( 11的處理對(duì)象像素X，根據(jù)pix[X]的大小，分類為類別索引I~8的任一種類別。
[0688]此外，“sao_type_index”=6時(shí)，類別分類部624對(duì)于像素值pix[x]滿足(pix[x]/16) < 3或者12 < (pix[x]/16)的處理對(duì)象像素x,根據(jù)pix[x]的大小，分類為類別索引I~8的任一種類別。
[0689](偏移信息解碼部611的構(gòu)成)
[0690]圖41是根據(jù)自適應(yīng)偏移的參數(shù)的種類(參數(shù)條件)改變要使用的偏移類型的、并且/或者根據(jù)自適應(yīng)偏移的參數(shù)條件改變類別的分類數(shù)的偏移信息解碼部611的框圖。偏移信息解碼部611由自適應(yīng)偏移類型解碼部6111、使用偏移類型選擇部6112、偏移類型解碼部6113、自適應(yīng)偏移解碼部6114、使用偏移數(shù)選擇部6115、偏移解碼部6116構(gòu)成。另外，所謂參數(shù)條件，是指由像素值計(jì)算出的值以外的參數(shù)，除了上述所說明的層次、偏移類型之夕卜，還存在后述的附注事項(xiàng)中所說明的區(qū)塊大小(QAOU大小)、顏色分量(component)、QP。
[0691]自適應(yīng)偏移類型解碼部6111是根據(jù)參數(shù)條件從編碼數(shù)據(jù)中的QAOU信息自適應(yīng)地解碼偏移類型的單元，具備使用偏移類型選擇部6112和偏移類型解碼部6113。
[0692]使用偏移類型選擇部6112是根據(jù)參數(shù)條件選擇要使用的偏移類型的單元。如上所述，參數(shù)條件之一是層次。層次淺時(shí)所使用的偏移類型的數(shù)量小于層次深時(shí)所使用的偏移的數(shù)量。使用偏移類型選擇部6112根據(jù)參數(shù)條件將用圖8所說明的那樣的變換表輸入到偏移類型解碼部6113。此外將能夠使用的偏移類型的最大數(shù)輸入到偏移類型解碼部6113。
[0693]偏移類型解碼部6113根據(jù)所輸入的變換表和最大數(shù)，從編碼數(shù)據(jù)解碼偏移類型。將偏移類型的最大數(shù)設(shè)為N時(shí)，代碼能夠取的范圍被限制為O?N-1的N個(gè)，所以能夠減少代碼的編碼中所需要的比特?cái)?shù)。例如，在最大數(shù)大于2m-l且為2m以下時(shí)，能夠使用m比特的固定長編碼。此外，還可以采用將最大值設(shè)為N-1的Truncated unary編碼、TruncatedRice編碼。
[0694]自適應(yīng)偏移解碼部6114是根據(jù)參數(shù)條件從編碼數(shù)據(jù)中的QAOU信息自適應(yīng)地解碼偏移的單元，具備使用偏移數(shù)選擇部6115和偏移解碼部6116。使用偏移數(shù)選擇部6115是根據(jù)參數(shù)條件，選擇要使用的偏移數(shù)的最大值和偏移的精度的單元。參數(shù)條件之一是層次，層次淺時(shí)所使用的偏移的數(shù)量大于層次深時(shí)所使用的偏移的數(shù)量。例如，可以在層次淺時(shí)，如圖29(a)所示將偏移數(shù)設(shè)為16個(gè)，在層次深時(shí)，如圖29(b)所示將偏移數(shù)設(shè)為8個(gè)。此夕卜，如上所述，還可以根據(jù)層次來改變偏移的精度(比特深度)。使用偏移數(shù)選擇部6115將偏移最大數(shù)和偏移精度輸入到偏移解碼部6116。偏移解碼部6116根據(jù)偏移的最大數(shù)和偏移的精度來解碼偏移。在使偏移的數(shù)量較少時(shí)，偏移的碼量減少。此外，與偏移類型同樣地，對(duì)于偏移也是若決定了各偏移的精度則對(duì)偏移進(jìn)行編碼的代碼能夠取的范圍也被限制，所以能夠減少代碼的編碼所需要的比特?cái)?shù)。
[0695]圖42(a)是表示使用偏移類型選擇部6112的構(gòu)成的框圖。
[0696]使用偏移類型選擇部6112具備偏移類型變換表選擇部6117、第I偏移類型變換表存儲(chǔ)部6118、第2偏移類型變換表存儲(chǔ)部6119。
[0697]偏移類型變換表選擇部6117根據(jù)參數(shù)條件選擇第I偏移類型變換表存儲(chǔ)部6118具備的變換表、或者第2偏移類型變換表存儲(chǔ)部6119具備的變換表。在上述的示例中，801A是第I偏移類型變換表存儲(chǔ)部6118具備的變換表，801B對(duì)應(yīng)于第2偏移類型變換表存儲(chǔ)部6119具備的變換表。
[0698]圖42(b)是表示使用偏移類型選擇部的其他構(gòu)成的框圖。
[0699]使用偏移類型選擇部6112’具備偏移類型變換表選擇部6117’、邊緣偏移類型以及帶偏移類型變換表存儲(chǔ)部6118’、水平邊緣偏移類型以及帶偏移類型變換表存儲(chǔ)部6119，。
[0700](類別分類部624的構(gòu)成)
[0701]圖43是表示類別分類部624的構(gòu)成的框圖。[0702]類別分類部624由自適應(yīng)邊緣偏移類別分類部6241、使用邊緣偏移類別選擇部6242、邊緣偏移類別分類部6243、自適應(yīng)帶偏移類別分類部6244、使用帶偏移類別/類別幅度選擇部6245、帶偏移類別分類部6246構(gòu)成。
[0703]類別分類部624根據(jù)參數(shù)條件以及偏移類型，將各像素分類為類別。在偏移類型表示邊緣偏移的情況下，通過自適應(yīng)邊緣偏移類別分類部6241對(duì)像素進(jìn)行分類，在偏移類型為帶偏移的情況下，在自適應(yīng)帶偏移類別分類部6244中對(duì)像素進(jìn)行分類。
[0704]自適應(yīng)邊緣偏移類別分類部6241是根據(jù)參數(shù)條件，自適應(yīng)地將像素分類為類別的單元，具備使用邊緣偏移類別選擇部6242和邊緣偏移類別分類部6243。使用邊緣偏移類別選擇部6242選擇要使用的類別的種類。使用邊緣偏移類別選擇部6242將像素值的分類方法輸入到邊緣偏移類別分類部6243。具體而言，輸入對(duì)像素值進(jìn)行分類時(shí)臨時(shí)導(dǎo)出的中間值EdgeType的導(dǎo)出方法、和用于從EdgeType導(dǎo)出class_idx而使用的變換表。使用圖26(a)、圖26(b)來說明中間值EdgeType的導(dǎo)出方法的示例，將其稱為基本邊緣分類方法。也可以使用用圖33后述的邊緣分類方法。如上所述，參數(shù)條件之一是層次，進(jìn)行選擇，使得層次淺時(shí)所使用的類別與層次深時(shí)所使用的類別相比成為較大的數(shù)。對(duì)于用于從EdgeType導(dǎo)出class_idx而使用的變換表，1001A、1001B成為示例。此外,根據(jù)顏色分量(component)來切換邊緣導(dǎo)出方法的方法也是恰當(dāng)?shù)?。在該情況下，恰當(dāng)?shù)氖?對(duì)于亮度，采用使用水平、垂直、傾斜方向的邊緣分類方法的基本邊緣分類方法，對(duì)于色差，采用水平邊緣分類方法，在水平邊緣分類方法中，從對(duì)象像素來看，將為了削減行存儲(chǔ)器而由邊緣分類所使用的參考像素的范圍限定在水平方向。邊緣偏移類別分類部6243基于所給出的分類方法、和用于從EdgeType導(dǎo)出class_idx而使用的變換表,對(duì)像素進(jìn)行分類。
[0705]自適應(yīng)帶偏移類別分類部6244是根據(jù)參數(shù)條件，自適應(yīng)地將像素分類為類別的單元，具備使用帶偏移類別/類別幅度選擇部6245和帶偏移類別分類部6246。使用帶偏移類別/類別幅度選擇部6245將像素值的分類方法輸入到帶偏移類別分類部6246。具體而言，輸入作為將像素值分類為中間值時(shí)所使用的量化幅度的類別幅度、和用于從中間值導(dǎo)出classjdx而使用的變換表。如已經(jīng)說明的那樣，參數(shù)條件之一是層次，層次淺時(shí)所使用的類別的幅度小于層次深時(shí)所使用的類別的幅度。帶偏移類別分類部6246根據(jù)所輸入的類別幅度、和用于從中間值導(dǎo)出classjdx而使用的變換表，將像素值分類為類別。作為輸入的類別幅度，可以不是類別幅度本身，而是與類別幅度對(duì)應(yīng)的整數(shù)。例如在將I<<BoRefBit32設(shè)為類別幅度的情況下，可以使用用于根據(jù)該以2為底的對(duì)數(shù)即用于像素量化的比特?cái)?shù)BoRefBit32、像素的比特深度而求出用于對(duì)像素進(jìn)行量化的比特?cái)?shù)的值，來代替類別幅度，例如，若BoRefBit32=PIC_DEPTH-5，則使用5。
[0706]如此，根據(jù)參數(shù)條件來自適應(yīng)地對(duì)編碼數(shù)據(jù)進(jìn)行解碼，并且進(jìn)行像素的類別分類。
[0707]如上所述，在本實(shí)施方式中，根據(jù)處理對(duì)象的QAOU的層次的深度，改變類別的分類數(shù)。更詳細(xì)而言，在處理對(duì)象的QAOU的層次的深度較大的情況下，與較小的情況相比，分類為較少的類別數(shù)。
[0708]—般，需要的存儲(chǔ)器量是存儲(chǔ)器量=偏移的數(shù)據(jù)長X類別數(shù)XQAOU數(shù)，所以通過減少類別數(shù)，能夠削減存儲(chǔ)器的使用量。
[0709]此外，在較深的層次中，因?yàn)镼AOU的面積變小，并且QAOU內(nèi)的像素值的特性接近一樣，所以即使減少類別數(shù)，偏移的效果也幾乎不發(fā)生變化。[0710]此外，在本實(shí)施方式中，根據(jù)處理對(duì)象的QAOU的層次的深度，改變偏移的精度。更詳細(xì)而言，在處理對(duì)象的QAOU的層次的深度較大的情況下，與較小的情況相比，偏移的精度下降。據(jù)此，減少了處理對(duì)象的QAOU的層次的深度較大時(shí)的碼量。
[0711]在較深的層次的QAOU中，所包含的像素?cái)?shù)變少，所以QAOU整體來看的量化誤差與上位的層次相比變小。因此，在較深的層次中，即使降低偏移的精度，偏移的效果也幾乎不發(fā)生變化。
[0712](運(yùn)動(dòng)圖像編碼裝置2’)
[0713]接下來，參考圖30、31來說明通過對(duì)編碼對(duì)象圖像進(jìn)行編碼從而生成編碼數(shù)據(jù)#1的運(yùn)動(dòng)圖像編碼裝置2’。運(yùn)動(dòng)圖像編碼裝置2’與運(yùn)動(dòng)圖像編碼裝置2同樣地，其一部分包含 H.264 / MPEG-4.AVC 中所采用的方式、VCEG (Video Coding Expert Group，視頻編碼專家組)中的共同開發(fā)用編解碼器即KTA軟件中所采用的方式、作為其后繼編解碼器的TMuC(Test Model under Consideration,考慮中的測(cè)試模型)軟件中所采用的方式、以及HM(HEVC TestModel，高效率視頻編碼測(cè)試模型)軟件中所采用的技術(shù)。
[0714]此外，運(yùn)動(dòng)圖像編碼裝置2’設(shè)置有自適應(yīng)偏移濾波器80’來代替運(yùn)動(dòng)圖像編碼裝置2中的自適應(yīng)偏移濾波器80，這點(diǎn)不同，其他構(gòu)成相同。
[0715](自適應(yīng)偏移濾波器80’)
[0716]接下來，參考圖30來說明自適應(yīng)偏移濾波器80 ’。圖30是表示自適應(yīng)偏移濾波器80’的構(gòu)成的框圖。如圖30所示，自適應(yīng)偏移濾波器80’是包括自適應(yīng)偏移濾波器信息設(shè)定部81’以及自適應(yīng)偏移濾波器處理部82’的構(gòu)成。
[0717]此外，如圖30所示，自適應(yīng)偏移濾波器信息設(shè)定部81’是包括偏移計(jì)算部811、偏移移位部816、偏移裁剪部812、偏移信息選擇部813、以及偏移屬性設(shè)定部815的構(gòu)成。
[0718](偏移計(jì)算部811)
[0719]偏移計(jì)算部811對(duì)于對(duì)象處理單位(例如IXU)中包含的給定分割深度為止的全部QA0U，計(jì)算針對(duì)于處理對(duì)象的QAOU的層次相應(yīng)地存在的全部偏移類型以及全部類別的偏移。這里，偏移類型以及類別與運(yùn)動(dòng)圖像解碼裝置I的說明中所說明的相同。
[0720]偏移計(jì)算部811將由通過上述處理所計(jì)算出的偏移、偏移類型、類別、以及表示QAOU的分割結(jié)構(gòu)的QAOU結(jié)構(gòu)信息構(gòu)成的偏移信息提供給偏移裁剪部812。
[0721](偏移裁剪部812)
[0722]偏移裁剪部812通過以下所示的裁剪處理1、裁剪處理2的任一種處理對(duì)從偏移計(jì)算部811提供的偏移進(jìn)行裁剪處理。
[0723](裁剪處理I)
[0724]偏移裁剪部812通過將從偏移計(jì)算部811提供的各偏移裁剪為例如_8至7的值，從而用4比特來表現(xiàn)各偏移。被裁剪后的各偏移提供給偏移信息選擇部813。與運(yùn)動(dòng)圖像解碼裝置I同樣地，根據(jù)圖像的比特深度和偏移的比特深度來設(shè)定要裁剪的比特寬度。
[0725]如此，通過對(duì)各偏移進(jìn)行裁剪，從而能夠削減用于存儲(chǔ)各偏移的存儲(chǔ)器(未圖示)的存儲(chǔ)器大小。此外，因?yàn)槟軌蛳鳒p編碼數(shù)據(jù)#1中包含的偏移的碼量，所以能夠?qū)崿F(xiàn)編碼效率的提高。此外，因?yàn)橐种屏思由线^度的偏移，所以保證了適當(dāng)?shù)漠嬞|(zhì)。
[0726](裁剪處理2)
[0727]此外，偏移裁剪部812也可以構(gòu)成為按照偏移類型將從偏移計(jì)算部811提供的各偏移的裁剪范圍設(shè)定為不同的值。
[0728]例如，在偏移類型為邊緣偏移的情況下，將偏移的比特?cái)?shù)設(shè)為8比特，在偏移類型為帶偏移的情況下，將偏移的比特?cái)?shù)設(shè)為4比特。更一般而言，在將偏移類型為邊緣偏移時(shí)的偏移的比特?cái)?shù)設(shè)為N比特，將偏移類型為帶偏移時(shí)的偏移的比特?cái)?shù)設(shè)為M比特時(shí)，按照滿足N>M的方式?jīng)Q定偏移的比特?cái)?shù)。
[0729]如此按照偏移類型，使偏移的比特?cái)?shù)不同，從而不會(huì)對(duì)用于存儲(chǔ)各偏移的存儲(chǔ)器要求過度的存儲(chǔ)器大小，能夠?qū)崿F(xiàn)編碼效率的提高。
[0730]另外，在用于限制偏移能夠取的值的閾值th大于2m-l并且為2m以下時(shí)，作為用于對(duì)該偏移進(jìn)行編碼的編碼方式，能夠使用m比特的固定長編碼。更具體而言，可以采用將最大值設(shè)為 th 的 Truncated unary 編碼、Truncated Rice 編碼。
[0731]此外，將上述裁剪處理I以及2進(jìn)行組合而得到的裁剪處理也包含在本實(shí)施方式中。此外，自適應(yīng)偏移濾波器80也可以采用不具備偏移裁剪部812的構(gòu)成。
[0732]此外，偏移裁剪部812，與偏移的精度相匹配，根據(jù)處理對(duì)象的QAOU的層次的深度，切換裁剪范圍。具體而言，考慮在處理對(duì)象的QAOU的層次的深度小于閾值時(shí)偏移的精度為nA比特，在處理對(duì)象的QAOU的層次的深度為閾值以上時(shí)偏移的精度為nB比特的情況。此時(shí)，若處理對(duì)象的QAOU的層次的深度小于閾值，則偏移裁剪部812將裁剪范圍設(shè)為-2—?此外，若處理對(duì)象的QA0u的層次的深度為閾值以上，則將裁剪范圍設(shè)為-2M/2?2M/2-l的基礎(chǔ)上，將低位的(nA-nB)比特設(shè)為“O”。據(jù)此，能夠通過偏移裁剪部812，對(duì)使用被裁剪處理后的偏移進(jìn)行處理的偏移信息選擇部813，使其不考慮偏移的精度進(jìn)行處理。
[0733](偏移信息選擇部813)
[0734]偏移信息選擇部813決定RD成本(Rate-Distorsion cost)變得更小的偏移類型、類別、偏移的組合、以及與其對(duì)應(yīng)的QAOU分割結(jié)構(gòu)，并且將表示所決定的偏移類型、類另O、偏移、以及與其對(duì)應(yīng)的QAOM分割結(jié)構(gòu)的QAOU信息提供給可變長碼編碼部22。此外，偏移信息選擇部813按每個(gè)QAOU將所決定的偏移提供給自適應(yīng)偏移濾波器處理部82。
[0735]若參考圖31來進(jìn)一步具體地說明偏移信息選擇部813的處理，則如下所述。
[0736]圖31是表示對(duì)于QAOU索引為“x”的QAOU計(jì)算針對(duì)各個(gè)偏移類型的平方誤差的概要的圖。如圖31所示，偏移信息選擇部813對(duì)于全部QA0MU，計(jì)算針對(duì)各個(gè)偏移類型的平方誤差。而且，將所計(jì)算出的平方誤差成為最小的偏移類型作為該QAOU的偏移類型。據(jù)此，對(duì)于全部QAOMU (QA0MU編號(hào)O?340)，決定偏移類型。
[0737]接下來，偏移信息選擇部813計(jì)算使分割深度為O時(shí)的RD成本和使分割深度為I時(shí)的RD成本。具體的計(jì)算方法，如上述參考圖18所說明的那樣。
[0738](自適應(yīng)偏移濾波器處理部82’)
[0739]自適應(yīng)偏移濾波器處理部82’對(duì)對(duì)象QAOU中的已去區(qū)塊解碼圖像P_DB的各像素加上從偏移信息選擇部813提供的偏移。自適應(yīng)偏移濾波器處理部82’將對(duì)包含在已去區(qū)塊解碼圖像P_DB中的全部QAOU進(jìn)行處理而得到的圖像作為偏移已濾波解碼圖像P_0F來輸出。另外，自適應(yīng)偏移濾波器處理部82’的構(gòu)成與自適應(yīng)偏移濾波器處理部62’相同，所以這里省略說明。
[0740]此外，也可以使用自適應(yīng)裁剪類型。即，作為偏移類型之一，可以設(shè)置自適應(yīng)裁剪(AC)類型。在該情況下，偏移類型成為EO、BO、AC這3種。對(duì)于自適應(yīng)裁剪類型(AC)，不使用偏移，而使用下限值Cl和上限值c2的裁剪來補(bǔ)正像素值。作為下限值Cl以及上限值c2的示例,例如,可以列舉cl=16、c2=235。
[0741]通過使用自適應(yīng)裁剪類型，不需要偏移的編碼處理、用于保持許多偏移的存儲(chǔ)器。另外，在不使裁剪的下限值以及上限值為固定值而是自適應(yīng)地給出的情況下，對(duì)下限值和上限值進(jìn)行編碼即可。該情況下，可以優(yōu)選分別對(duì)自適當(dāng)?shù)墓潭ㄖ档牟罘诌M(jìn)行編碼，例如下限值對(duì)自16的偏移進(jìn)行編碼，上限值對(duì)自235的偏移進(jìn)行編碼。尤其是因?yàn)樯舷拗党蔀檩^大的值，所以通過這種方法，不會(huì)降低編碼效率。
[0742](附注事項(xiàng)2)
[0743]此外，如上所述，根據(jù)QAOU的層次的深度，也可以是指根據(jù)QAOU的大小。S卩，可以根據(jù)QAOU的大小，使SAO的類型數(shù)、類別數(shù)、偏移精度不同。
[0744]例如，可以構(gòu)成為:在QAOU的大小不足NXN像素的情況下，與QAOU的大小為NXN像素以上的情況相比，進(jìn)一步限制SAO的類型數(shù)、類別數(shù)、以及偏移精度中的一種或多種。作為N的具體例，例如可以列舉N=64(LCU的大小)。
[0745]此外，作為SAO的類型數(shù)的限制，例如，可以列舉將EO限制為水平以及垂直類型的、使BO為I種的(變換表802C)、僅使用EO不使用BO的(變換表802A)、僅使用水平類型的EO以及BO的任一個(gè)的(變換表801B、變換表802D)等。在偏移信息解碼部611中除了使用括弧內(nèi)所示的變換表之外，對(duì)于SAO的類別數(shù)的限制、以及偏移精度的限制，可以利用與上述的實(shí)施方式相同的方法進(jìn)行。
[0746]如此，通過限制SAO的類型的種類、類型數(shù)、類別數(shù)、以及偏移精度，能夠削減存儲(chǔ)器的使用量、減輕處理負(fù)荷。尤其在將類型的種類限制為BO的情況下，或者在將EO限制為水平以及垂直類型的情況下，能夠減輕編碼裝置以及解碼裝置的類別分類部的處理負(fù)荷。此外，在限制類型數(shù)的情況下，能夠省略用于限制最合適的類型的計(jì)算成本，所以能夠減輕編碼裝置的處理負(fù)荷。通過將類型的種類限制為E0、限制類別數(shù)以及偏移精度，能夠削減用于蓄積偏移的存儲(chǔ)器的使用量。此外，通過將類型的種類限制為水平類型的EO以及B0，能夠削減用于保持用于類別分類的參考像素的行存儲(chǔ)器等的臨時(shí)存儲(chǔ)器，此外，能夠縮短等待參考像素的解碼的期間的延遲。另外，對(duì)于削減存儲(chǔ)器的使用量，與限制EO的類別數(shù)相t匕，限制BO的類別數(shù)更為有效。
[0747]這種限制，可以通過圖41?圖43所示的單元的構(gòu)成，在將參數(shù)條件設(shè)為QAOUN的大小的情況下，根據(jù)參數(shù)條件自適應(yīng)地改變偏移信息解碼部611、類別分類部624的動(dòng)作來實(shí)現(xiàn)。
[0748](附注事項(xiàng)3)
[0749]此外，可以采用如下構(gòu)成:使對(duì)于亮度值加上偏移的QAOU(以下也稱為亮度單位)的大小、與對(duì)于色差加上偏移的QA0U(以下也稱為色差單位)的大小不同，對(duì)于色差單位，相比較于亮度單位，進(jìn)一步限制SAO的類型的種類、類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次。
[0750]例如，若是YUV形式的圖像格式中的4:2:0形式等，對(duì)于亮度和色差，分辨率不同，色差的分辨率比亮度低的數(shù)據(jù)形式，則不需要如亮度那樣精細(xì)地分割色差。因此，對(duì)于色差單位，通過限制SAO的類型的種類、類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次，從而能夠削減存儲(chǔ)器的使用量、減輕處理負(fù)荷。另外，例如，可以通過使SAO的樹結(jié)構(gòu)的最大深度比亮度單位變淺，來進(jìn)行色差單位的最大層次的限制。
[0751]這種限制，可以通過利用圖41?圖43所示的單元的構(gòu)成，在將參數(shù)條件設(shè)為QAOUN的大小的情況下，根據(jù)參數(shù)條件來自適應(yīng)地改變偏移信息解碼部611、類別分類部624的動(dòng)作來實(shí)現(xiàn)。
[0752]尤其在對(duì)于亮度和色差都進(jìn)行SAO處理的情況下，需要具備按每個(gè)顏色分量保持用于類別分類的參考像素的行存儲(chǔ)器等的臨時(shí)存儲(chǔ)器。亮度成分與色差成分相比，重要度較低，所以通過使參數(shù)條件為色差成分，將類型的種類限制為水平類型的EO以及B0，從而能夠削減對(duì)于色差成分的行存儲(chǔ)器。在該情況下，在偏移信息解碼部611中使用變換表801B、變換表802D等變換表。
[0753]此外，使參數(shù)條件為色差成分，與亮度成分相比，使偏移的精度變小，也尤其有效。例如，將亮度成分的偏移的精度設(shè)為
[0754]SA0_DEPTH=MIN(PIC_DEPTH、AY)
[0755]移位值=PIC_DEPTH-MIN(PIC_DEPTH、AY)
[0756]對(duì)于色差成分的情況，如下那樣
[0757]SA0_DEPTH=MIN (PIC_DEPTH、THC)
[0758]移位值=PIC_DEPTH_MIN(PIC_DEPTH、AC)
[0759]求出偏移的精度、移位值的情況下，作為控制精度的變量AY、AC，使用AY>AC是恰當(dāng)?shù)?。例如，設(shè)AY= 10或者9、AC=8。在該情況下，相比較于色差成分，亮度成分的偏移的精度較大。對(duì)于移位值，相比較于色差成分，亮度成分的移位值成為較小的值。
[0760](附注事項(xiàng)4)
[0761]此外，可以構(gòu)成為:在CU的量化參數(shù)QP的值(QP值)為閾值以上的情況下，限制SAO的類型的種類、類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次。QP值可以采用圖片的初期的QP值，在SAO的處理對(duì)象QAOU沿著IXU或⑶的邊界的情況下，也可以采用與QAOU的左上坐標(biāo)或者中心坐標(biāo)對(duì)應(yīng)的位置的⑶的QP值。
[0762]QP值的值越高，預(yù)測(cè)圖像的畫質(zhì)變得越低，詳細(xì)的分類以及偏移的補(bǔ)正變得困難，所以即使限制SAO的類型的種類、類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次，對(duì)畫質(zhì)產(chǎn)生的影響也較小。因此，在QP值為閾值以上的情況下，若采用對(duì)SAO的類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次進(jìn)行限制的構(gòu)成，則不會(huì)對(duì)畫質(zhì)產(chǎn)生影響，能夠削減存儲(chǔ)器的使用量、減輕處理負(fù)荷。
[0763]這種限制，通過圖41?圖43所示的單元的構(gòu)成，在將參數(shù)條件設(shè)為QP時(shí)，能夠根據(jù)參數(shù)條件來自適應(yīng)地改變偏移信息解碼部611、類別分類部624的動(dòng)作。
[0764](附注事項(xiàng)5)
[0765]此外，對(duì)于特定類型的圖片，例如B圖片、非參考圖片(IDR圖片)，也可以是限制SAO的類型的種類、類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次的結(jié)構(gòu)。
[0766]對(duì)于I圖片、P圖片，因?yàn)樵搱D片的畫質(zhì)對(duì)之后的圖片產(chǎn)生較大的影響，所以需要將SAO的精度保持得較高。另一方面，對(duì)于這之外的圖片，因?yàn)椴粫?huì)對(duì)之后的圖片產(chǎn)生較大的影響，所以對(duì)于這些圖片(B圖片、IDR圖片)，也可以限制SAO的類型的種類、類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次。據(jù)此，能夠削減存儲(chǔ)器的使用量、減輕處理負(fù)荷。[0767]這種限制，通過圖41?圖43所示的單元的構(gòu)成，在將參數(shù)條件設(shè)為圖片的種類的情況下，可以根據(jù)參數(shù)條件來自適應(yīng)地改變偏移信息解碼部611、類別分類部624的動(dòng)作。
[0768](附注事項(xiàng)6)
[0769]此外，也可以是根據(jù)畫面上的QAOU的位置，對(duì)SAO的類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次進(jìn)行限制的結(jié)構(gòu)。
[0770]例如，在畫面的周緣，也可以對(duì)SAO的類型數(shù)、類別數(shù)、偏移精度、以及分割的最大層次進(jìn)行限制。
[0771]因?yàn)橛脩羧菀钻P(guān)注畫面的中央附近，所以畫面的中央附近的畫質(zhì)下降時(shí)，主觀畫質(zhì)直接降低，而在畫面的周緣，即使畫質(zhì)下降，主觀畫質(zhì)也不會(huì)如畫面中央附近那樣降低。
[0772]此外，若不采用需要超過畫面端的采樣點(diǎn)的SAO類型，則能夠減輕邊界判斷處理。
[0773]這種限制，通過圖41?圖43所示的單元的構(gòu)成，在將參數(shù)條件設(shè)為QAOU的位置時(shí)，可以根據(jù)參數(shù)條件來自適應(yīng)地改變偏移信息解碼部611、類別分類部624的動(dòng)作。
[0774]〔實(shí)施方式4〕
[0775]若基于圖32來說明本發(fā)明的其他實(shí)施方式，則如下所述。在本實(shí)施方式中，與上述實(shí)施方式的不同點(diǎn)是，根據(jù)像素值來切換EO和B0。
[0776]本申請(qǐng)
【發(fā)明者】等發(fā)現(xiàn)了如下特性:在像素中，對(duì)于中間灰度域，相比較于B0，EO —方的效果較高，對(duì)于其他的值域(低像素值域.高像素值域)，BO —方的效果較高。因此，在本實(shí)施方式中，對(duì)于低像素值域以及高像素值域，采用B0，對(duì)于中間灰度域，采用E0。
[0777]具體而言，參考圖32來進(jìn)行說明。圖32是用于說明根據(jù)像素值來切換EO和BO的構(gòu)成的圖，(a)是用于說明根據(jù)像素值來切換EO和BO的構(gòu)成的概要的圖，(b)是用于說明具體的切換值的圖，(C)是表示偏移信息存儲(chǔ)部621中存儲(chǔ)的表存儲(chǔ)器的內(nèi)容的圖。
[0778]如圖32 (a)所示，在本實(shí)施方式中，在像素值(亮度值)為O附近、以及255附近時(shí)使用B0，在其他值域時(shí)使用E0。即，根據(jù)像素值對(duì)SAO類型進(jìn)行分類，在像素值為O附近、以及255附近時(shí)加上與像素值相應(yīng)的偏移，在其他值域時(shí)加上與邊緣的種類相應(yīng)的偏移。
[0779]本申請(qǐng)
【發(fā)明者】等的實(shí)驗(yàn)結(jié)果，EO和BO在所使用的像素值的范圍分別發(fā)現(xiàn)了偏差。即，知道了 EO在中間灰度域較多。這意味著在低像素值域以及高像素值域，與邊緣的種類相比，像素值具有對(duì)誤差的影響較大的傾向。
[0780]因此，在本實(shí)施方式中采用如下構(gòu)成，S卩:根據(jù)像素值域來決定EO和B0，對(duì)于一種SAO類型，利用EO以及BO這兩者中的誤差補(bǔ)正效果高的部分。據(jù)此，能夠使編碼效率提高。此外，能夠使SAO類型數(shù)、總類別數(shù)減少，所以能夠削減存儲(chǔ)器的使用量，并且減輕處理負(fù)荷。
[0781]接下來，更詳細(xì)地說明本實(shí)施方式。首先，在本實(shí)施方式中，與上述實(shí)施方式不同，對(duì)于“sao_type_idx”使用I?4,如下地進(jìn)行定義。
[0782].“sao_type_idx” =1: (Β0_Ε0_0)相當(dāng)于實(shí)施方式 I 的 Ε0_0+Β0
[0783].“sao_type_idx” =2: (B0_E0_1)相當(dāng)于實(shí)施方式 I 的 E0_1+B0
[0784].“sao_type_idx” =3: (B0_E0_2)相當(dāng)于實(shí)施方式 I 的 E0_2+B0
[0785].“sao_type_idx” =4: (B0_E0_3)相當(dāng)于實(shí)施方式 I 的 E0_3+B0
[0786]此外，不使用實(shí)施方式I中的E0_0?3、以及B0_0、1。
[0787]而且，如圖32 (b)所示，類別分類部624使用圖29的變換表1301中的BoTbl [B0_1]進(jìn)行類別分類。而且，若像素值為max的I / 4以下、以及max的3 / 4以上，則使用變換表1301來進(jìn)行類別分類。
[0788]此外，如像素值為max的I / 4與3 / 4之間，則根據(jù)上述實(shí)施方式中所說明的E0_0?3來判斷邊緣類型，進(jìn)行類別分類。
[0789]據(jù)此，類別分類部624能夠根據(jù)像素值切換BO和EO來對(duì)類別進(jìn)行分類。
[0790]此外，偏移計(jì)算部811利用與上述實(shí)施方式中所說明的偏移的計(jì)算方法相同的方法計(jì)算偏移。但是，在本實(shí)施方式中，因?yàn)槠祁愋偷姆N類數(shù)是4種，所以使這點(diǎn)不同來進(jìn)行計(jì)算。
[0791]此外，偏移信息存儲(chǔ)部621中存儲(chǔ)的表存儲(chǔ)器2101，如圖32(c)所示，將QAOU索引和偏移類型和該偏移類型中能夠選擇的各類別所相關(guān)的偏移的具體值相互建立關(guān)聯(lián)地進(jìn)行存儲(chǔ)。
[0792]另外，在使用兼具有EO和BO的特征的偏移類型的情況下，可以構(gòu)成為:首先，使用EO進(jìn)行類別分類，對(duì)于特定的類別(邊緣平坦的類別)，使用BO進(jìn)一步進(jìn)行類別分類。此夕卜，也可以構(gòu)成為直接一起使用實(shí)施方式中所記載的EO以及B0。進(jìn)而，也可以構(gòu)成為根據(jù)上述實(shí)施方式中所記載的條件(QA0U的層次的深度是否小于閾值)，改變是否設(shè)置兼具有EO和BO的特征的偏移類型，來削減類型數(shù)、類別數(shù)。
[0793]〔實(shí)施方式5〕
[0794]若基于圖33、34、42來說明本發(fā)明的其他實(shí)施方式，則如以下所述。在本實(shí)施方式中，與上述實(shí)施方式的不同點(diǎn)是，在EO的類別分類中，將邊緣的判斷中所使用的像素限定為僅是存在于判斷對(duì)象的像素的水平方向的像素。
[0795]在上述實(shí)施方式中，對(duì)于存在于對(duì)象像素的上或者下方向的像素，也用在了邊緣的判斷中。因此，對(duì)于存在于對(duì)象像素的上方向的像素(完成偏移處理的像素)，需要用于預(yù)先保持該像素的偏移處理前的像素值的行緩沖器。
[0796]因此，若將用于邊緣的判斷的像素限定于存在于對(duì)象像素的水平方向的像素，則不需要向上方向的參考，所以能夠削減行緩沖器部分的存儲(chǔ)器的使用量。此外，因?yàn)椴恍枰戏较虻倪吔缗袛?畫面端等)，所以也可以削減處理量。
[0797]此外，在僅使用存在于水平方向的像素的情況下，可以沿用上次為止的處理結(jié)果，所以能夠進(jìn)一步削減處理量。參考圖33(a)進(jìn)行說明。圖33(a)示出存在于水平方向的像素，x0?x3是各個(gè)像素的像素值。
[0798]首先，對(duì)于像素值Xl的像素，與兩鄰的差分如以下所示。
[0799]sl=sign(xl—xO)-sign(x2_xl)
[0800]接下來，對(duì)于像素值x2的像素，按以下的方式計(jì)算與兩鄰的差分。
[0801]s2 = sign(x2_xl)—sign (x3_x2)
[0802]這里，S1、s2是用于xl、x2中的邊緣的類別分類的值。
[0803]如此,在計(jì)算s2的情況下,再利用由si所使用的sign (x2_xl)。因此,能夠相應(yīng)地減少處理量。
[0804]接下來，說明本實(shí)施方式的詳細(xì)情況。在本實(shí)施方式中，將EO的類型設(shè)為2種。即，僅在“sao_type_idx”=l、2的情況下，設(shè)為邊緣偏移(EO)。而且，在“sao_type_idx”=l(E0_0)時(shí)，與對(duì)象像素的左右像素進(jìn)行比較來導(dǎo)出邊緣的種類(圖33(b))，在“sao_type_idx”=2(E0’_0)時(shí)，與處于在對(duì)象像素的左右離開了 2像素的位置的像素進(jìn)行比較來導(dǎo)出邊緣的種類(圖33 (C))。
[0805]另外,在“sao_type_idx”=3、4的情況下,成為帶偏移(60)。這可以在上述實(shí)施方式I中將“sao_type_idx”=5、6的情況分別看做3、4。
[0806]上述“sa0_type_idX”=2的情況下，使用從對(duì)象像素的兩鄰進(jìn)一步離開了 I像素的像素來判斷邊緣的種類，是為了使角度相對(duì)于水平較淺的邊緣的檢測(cè)變得容易。如圖33 (d)所示，在將對(duì)象像素的兩鄰的像素作為比較對(duì)象的情況下，存在像素值的差分較小，不被判斷為邊緣的情況。即使在這種情況下，若取得與隔著I像素而相鄰的像素的差分，則能夠檢測(cè)角度相對(duì)于水平較淺的邊緣。
[0807]此外，也可以不使用與對(duì)象像素的兩鄰的差分，而是在左側(cè)使用與相鄰的像素的差分，在右側(cè)使用與隔著I像素而相鄰的像素(圖34(a))的差分，還可以采用相反的情況(圖34(b))。這在參考像素處于畫面的端部的情況尤其有效。
[0808]進(jìn)而，也可以構(gòu)成為限定僅使用水平方向的像素的情況。例如，可以構(gòu)成為在對(duì)B圖片、非參考圖片等其他圖片的影響較小的圖片的情況下，僅參考水平方向的像素，在這以外的情況下，與上述實(shí)施方式I相同，也可以構(gòu)成為在畫面端、切片邊界附近等僅參考水平方向的像素，此外與上述實(shí)施方式相同。若采用這種方式，則能夠削減存儲(chǔ)器的使用量，并且能夠削減處理量。此外，因?yàn)椴贿M(jìn)行上方向的參考，所以在畫面端、切片邊界附近的邊界的判斷處理也能夠減輕。
[0809]此外，可以構(gòu)成為以圖片、區(qū)塊單位利用標(biāo)志明確地進(jìn)行指定。
[0810]例如，在水平 邊緣(圖34(c)))較多的情況下，若采用上述實(shí)施方式中所記載的方法進(jìn)行處理，則能夠防止性能下降。
[0811]此外，可以根據(jù)上述實(shí)施方式中所記載的條件(QA0U的層次的深度是否小于閾值)，來變更是否采用僅使用存在于水平方向的像素的結(jié)構(gòu)。進(jìn)而也可以構(gòu)成為:僅限于上述實(shí)施方式中所記載的并用BO和EO的情況，對(duì)于EO僅使用存在于水平方向的像素。
[0812]此外，可以根據(jù)與存在于水平方向的像素的差分是否大于(或者小于)閾值，來導(dǎo)出邊緣的種類。具體而言，可以根據(jù)以下的式子對(duì)類別進(jìn)行分類。
[0813]Sign (z) =+1 (z > th 時(shí))
[0814]Sign (z) =0 (-th < z < th 時(shí))
[0815]Sign (z) =-1 (z <-th 時(shí))
[0816]這里，th是具有預(yù)先決定的值的閾值。
[0817]此外，在表示色差的像素值的情況下，對(duì)于邊緣偏移，也可以采用僅使用存在于水平方向的像素的結(jié)構(gòu)。
[0818]僅在水平邊緣分類方法僅是一種的情況下，例如，僅圖33(b)的情況下，也能夠獲得限定于水平的效果。如上所述，在組合多種不同的水平邊緣分類方法的情況下，與使用一種水平邊緣分類方法例如圖33(b)的情況相比，能夠進(jìn)行更細(xì)致的邊緣分類。另外，使用多種水平邊緣分類方法的情況的組合，如圖33(b)、(c)所示，不限于變更對(duì)象像素與參考像素的距離來使用兩個(gè)示例的情況，也可以是使用兩個(gè)用于導(dǎo)出邊緣種類的情況的閾值的結(jié)構(gòu)。例如，可以具備上述閾值th為O的情況和為I的情況這兩種水平邊緣分類方法。
[0819]限定僅使用水平方向的像素的情況的構(gòu)成，可以根據(jù)實(shí)施方式I的圖41~圖43所示的單元的構(gòu)成，通過根據(jù)參數(shù)條件自適應(yīng)地變更偏移信息解碼部611、類別分類部624的動(dòng)作來實(shí)現(xiàn)。例如，在圖41的偏移信息解碼部611中，根據(jù)參數(shù)條件，將由使用偏移類型選擇部6112選擇的偏移類型的種類僅限定于水平邊緣分類方法，在偏移類型解碼部6113中對(duì)所限定的種類的偏移類型進(jìn)行解碼。
[0820]如圖42 (b)所示，偏移類型變換表選擇部6117根據(jù)參數(shù)條件選擇邊緣偏移類型以及帶偏移類型存儲(chǔ)部6118’具備的變換表、或者水平邊緣偏移類型以及帶偏移類型變換表存儲(chǔ)部6119’具備的變換表。在一個(gè)示例中，在顏色分量為亮度的情況下，選擇邊緣偏移類型以及帶偏移類型存儲(chǔ)部6118’具備的變換表，在顏色分量為色差的情況下，選擇水平邊緣偏移類型以及帶偏移類型變換表存儲(chǔ)部6119’具備的變換表。 [0821]對(duì)于類別分類部624，在內(nèi)部的使用偏移類型選擇部6112中根據(jù)參數(shù)條件選擇僅限定于水平邊緣分類方法的邊緣分類方法，在邊緣偏移類別分類部6243中對(duì)像素進(jìn)行分類。在一個(gè)示例中，在顏色分量為亮度的情況下，選擇基本邊緣分類方法，在顏色分量為色差的情況下，選擇水平邊緣分類方法。
[0822]〔實(shí)施方式6〕
[0823]若基于圖35~37來說明本發(fā)明的其他實(shí)施方式，則如下所述。在本實(shí)施方式中，與上述實(shí)施方式的不同點(diǎn)是:在色差的像素值的中央附近，提高偏移精度或者細(xì)化類別的分割。
[0824]在圖像中具有非彩色附近的誤差在主觀畫質(zhì)中容易顯眼的特性。在各色差的像素值中，所謂非彩色，在值域的中央、比特深度為8比特的情況下，是指像素值128的像素的顏色。因此，在本實(shí)施方式中，在BO的情況下，對(duì)于色差的像素值128附近，提高偏移精度、或者使用更小的類別幅度來細(xì)化類別分割。另外在以下，對(duì)于色差的像素值將非彩色附近的值域稱為非彩色值域。
[0825]據(jù)此，能夠提高非彩色值域的偏移精度，所以在非彩色值域的偏移補(bǔ)正的性能提高。因此，在非彩色值域與原圖像的誤差減少，能夠提高主觀畫質(zhì)。此外，在非彩色值域中，通過相較于其他值域較窄地分割類別的分割，能夠更精密地進(jìn)行在非彩色值域的偏移補(bǔ)正。據(jù)此，能夠減少與原圖像的誤差，能夠提高主觀畫質(zhì)。
[0826]另外，在本實(shí)施方式中，進(jìn)行了非彩色值域的偏移精度的提高、以及類別分割的細(xì)分化，但是不局限于此，只要對(duì)會(huì)影響主觀畫質(zhì)的范圍的值，使類別分割細(xì)分化或者提高偏移精度，就能夠提高主觀畫質(zhì)。此外，在亮度的像素值中，對(duì)于在主觀畫質(zhì)上畫質(zhì)劣化容易顯眼的像素值域，同樣地提高偏移精度、或者使類別分割細(xì)分化的構(gòu)成，也能夠取得同樣的效果。
[0827]首先，參考圖35來說明提高偏移的精度的情況。圖35是表示提高偏移的精度的情況的概要的圖。如圖35所示，在提高偏移的精度的情況下，使色差的像素值128附近的偏移的精度為高精度，使這以外的值域的偏移的精度為低精度。
[0828]此外，偏移信息存儲(chǔ)部621對(duì)于偏移為高精度的值域的偏移，確保nB比特(例如nB=8)的存儲(chǔ)區(qū)域，對(duì)于偏移為低精度的值域的偏移，確保nA比特(例如nA=6)的存儲(chǔ)區(qū)域。另外，若存儲(chǔ)區(qū)域有富余，則也可以統(tǒng)一為nB比特。這種情況下，實(shí)現(xiàn)變得容易。
[0829]此外，偏移裁剪部812在偏移為高精度的值域和偏移為低精度的值域中切換裁剪范圍。例如，對(duì)于偏移為低精度的值域，將裁剪范圍設(shè)為_2M/2~2^-1，對(duì)于偏移為高精度的值域，將裁剪范圍設(shè)為-211^2~2@/2-1。
[0830]接下來，參考圖36來說明使類別分類細(xì)分化的情況。圖36是表示使類別分類細(xì)分化的情況的概要圖，(a)示出變換表，(b)~(d)是用于說明類別分割的圖。
[0831]而且，在使類別分類細(xì)分化的情況下，在偏移信息存儲(chǔ)部621中的色差用的表存儲(chǔ)器中，根據(jù)類別分類數(shù)來確保相當(dāng)于“sao_type_idX” =5的偏移存儲(chǔ)區(qū)域。 [0832]此外，在類別分類部624中，在BO的情況下，在由像素值導(dǎo)出類別時(shí)，判斷對(duì)象像素的像素值是否包含非彩色值域。具體而言，例如使用圖36(a)所示的變換表2501的任一個(gè)來進(jìn)行類別分類。
[0833]在變換表2501 中，通過“class_idx=BoTbl [sao_type_idx] [pix [X] / 4]”進(jìn)行類別分類，相較于圖29的變換表1301、1302，對(duì)于更細(xì)致的像素值分配了類別。
[0834]此外，在變換表2501的“BoTbl[B0_0] [pix / 4] (a) ”中示出如下示例:將類別分為16個(gè)，對(duì)非彩色值域進(jìn)行細(xì)分化，使中間灰度域(pix / 4=16~21，42~47)變得粗糙(圖36(b))。此外，在“BoTbl[B0_0] [pix / 4] (b) ”中示出如下示例:將類別分為16個(gè)，并且縮小有偏移的值域，維持類別數(shù)和類別幅度的最大值的同時(shí)使非彩色值域細(xì)分化(圖36(c))。此外，在“BoTbl[B0_0] [pix / 4] (c) ”中示出如下示例:將類別分為18個(gè)，使非彩色附近的值域細(xì)分化，并且也維持了類別幅度的最大值(圖36(d))。此外，若列舉其他示例，則可以使中問灰度域的類別幅度比非彩色值域的類別幅度相對(duì)變大，通過減少整體的類別數(shù)，來如以往地保持非彩色值域的補(bǔ)正精度的情況下，削減偏移存儲(chǔ)區(qū)域。這是因?yàn)橹虚g灰度域中的偏移補(bǔ)正的使用頻度低于非彩色區(qū)域所以能夠?qū)崿F(xiàn)。
[0835]此外，也可以采用并用偏移的精度提高、和非彩色值域中的類別分類的細(xì)分化的結(jié)構(gòu)。
[0836]此外，可以構(gòu)成為:在表示亮度的像素值和表示色差的像素值，使偏移的精度不同，即，使對(duì)于表示色差的像素值的偏移的精度比對(duì)于表示亮度的像素值的偏移的精度變得粗糙。
[0837](附注事項(xiàng)7)
[0838]此外，可以構(gòu)成為:向靠近非彩色(=色差的像素值128)的方向進(jìn)行偏移的加法運(yùn)算。即，偏移加法部626可以在像素值為128以上和不足128使要加上的偏移的符號(hào)相反來進(jìn)行處理。例如，在偏移a時(shí)，可以設(shè)為X，=x+a(x < 128), X，= x_a(x≥128)。
[0839]此外，在加上偏移后的像素值要跨越128的情況下，可以構(gòu)成為用128進(jìn)行裁剪。例如，可以在像素值為“126 (綠色一側(cè))”、偏移為“3”時(shí)，不是直接加上偏移x=126+3=129，而是設(shè)為x=clip (126+3,0,128) =128。這里,clip (x, y, z)表示將x的值限制于y < x < z的處理。
[0840]此外，例如，也可以在像素值為“ 129 (紅色一側(cè))”、偏移為“_4”時(shí)，不是直接加上偏移 x=129+(-4)=125，而是設(shè)為 x=clip (129+(-4)，128，255) =128。
[0841](附注事項(xiàng)8)
[0842]此外,可以構(gòu)成為:在色差中，分為中間灰度域和其他值域來加上偏移。例如,如圖37(a)所示，可以考慮非彩色的像素值來進(jìn)行類別分類。在圖37 (a)所示的示例中，在“sao_type_idx” =5 (B0_0)的情況下,將類別分配于中間灰度域，在“sao_type_idx” =6 (B0_1)的情況下，將類別分配于中間灰度域以外的值域。[0843]此外，如圖37 (b)所示，也可以在夾著非彩色的像素值的2個(gè)值域被非對(duì)稱地進(jìn)行類別分類。在圖37(b)所示的示例中，類別的幅度與圖37(a)所示的示例相同而劃分的位置不同。
[0844]此外，如圖37(c)、(d)所示，也可以按每個(gè)色差的通道(Cr以及Cb)，使用不同的類別分類。在圖37(c)、(d)所示的示例中，在色差(Cr)和色差(Cb)，類別的幅度不同。類別幅度的變更，可以通過如變換表2501那樣使類別數(shù)細(xì)分化來進(jìn)行。
[0845]此外，如圖37(e)所示，也可以構(gòu)成為:對(duì)于色差，使BO的類型為一種來進(jìn)行類別分類。
[0846]〔實(shí)施方式7〕
[0847]若基于圖38?40來說明本發(fā)明的其他實(shí)施方式，則如下所述。在本實(shí)施方式中，與上述實(shí)施方式的不同點(diǎn)是:不對(duì)偏移的值本身進(jìn)行編碼，而是對(duì)偏移的值進(jìn)行預(yù)測(cè)編碼，即，對(duì)使用偏移的值和該偏移的值的預(yù)測(cè)值而計(jì)算出的偏移殘差進(jìn)行編碼；以及對(duì)偏移預(yù)測(cè)值設(shè)置“O”。
[0848]一般在SAO中，根據(jù)表示區(qū)域分類的類別，對(duì)偏移進(jìn)行編碼。在沒有被分類為該類別的像素(類別為空)的情況下，“O”被編碼。通常，附近類別以及附近區(qū)域的偏移具有相近的值，所以若將已經(jīng)解碼過的偏移值作為預(yù)測(cè)值對(duì)差分進(jìn)行編碼，則能夠削減碼量。但是，在類別為空的情況下，反而碼量增加。
[0849]因此，在本實(shí)施方式中，通過在偏移的預(yù)測(cè)值中包含“0”，從包含“O”的多個(gè)預(yù)測(cè)值候補(bǔ)中選擇一個(gè)預(yù)測(cè)值，對(duì)預(yù)測(cè)差分進(jìn)行編碼，從而減少偏移的碼量。
[0850]據(jù)此，即使類別為空，也存在被分類為該類別的像素，即使在偏移被編碼的情況下，也可以分配適當(dāng)?shù)念A(yù)測(cè)值，所以能夠通過預(yù)測(cè)編碼來削減碼量。
[0851]參考圖38來說明本實(shí)施方式所涉及的偏移信息解碼部611’的構(gòu)成。偏移信息解碼部611’是用于代替圖22的偏移信息解碼部611而設(shè)置的，是包括偏移殘差解碼部651、偏移恢復(fù)部652、預(yù)測(cè)值導(dǎo)出部653的結(jié)構(gòu)。此外，預(yù)測(cè)值導(dǎo)出部653是包括預(yù)測(cè)候補(bǔ)標(biāo)志解碼部661、固定預(yù)測(cè)值計(jì)算部662、編碼預(yù)測(cè)值計(jì)算部663、以及預(yù)測(cè)值候補(bǔ)選擇部664的結(jié)構(gòu)。
[0852]偏移殘差解碼部651從編碼數(shù)據(jù)#1所包含的QAOU信息解碼偏移殘差，并且將所解碼的偏移殘差提供給偏移恢復(fù)部652。
[0853]預(yù)測(cè)值導(dǎo)出部653導(dǎo)出偏移的預(yù)測(cè)值。預(yù)測(cè)候補(bǔ)標(biāo)志解碼部661從QAOU信息解碼預(yù)測(cè)候補(bǔ)標(biāo)志，并且將所解碼的預(yù)測(cè)候補(bǔ)標(biāo)志提供給預(yù)測(cè)值候補(bǔ)選擇部664。另外，預(yù)測(cè)候補(bǔ)標(biāo)志解碼部661也可以構(gòu)成為:在以前所解碼的偏移值為“O”的情況下，不解碼候補(bǔ)選擇標(biāo)志。”
[0854]固定預(yù)測(cè)值計(jì)算部662將不存在被分類為該類別的像素的情況下所編碼的偏移即固定值(這里是“O”)作為預(yù)測(cè)值進(jìn)行計(jì)算，并且提供給預(yù)測(cè)值候補(bǔ)選擇部664。
[0855]編碼預(yù)測(cè)值計(jì)算部663從偏移信息存儲(chǔ)部621讀出已經(jīng)被解碼的偏移，計(jì)算預(yù)測(cè)值，并且提供給預(yù)測(cè)值候補(bǔ)選擇部664。
[0856]預(yù)測(cè)值候補(bǔ)選擇部664根據(jù)預(yù)測(cè)候補(bǔ)標(biāo)志，從由固定預(yù)測(cè)值計(jì)算部662所提供的預(yù)測(cè)值以及由編碼預(yù)測(cè)值計(jì)算部663所提供的預(yù)測(cè)值中選擇要提供給偏移恢復(fù)部652的預(yù)測(cè)值。[0857]偏移恢復(fù)部652根據(jù)下式從由預(yù)測(cè)值候補(bǔ)選擇部664所提供的預(yù)測(cè)值(pred)和由偏移殘差解碼部651所提供的偏移殘差(sao_offset)恢復(fù)偏移(Offset)。
[0858]“Offset，，= “pred，，+ “sao_offset，，
[0859]這里，對(duì)于在存在沒有被分類的像素的類別(空的類別)的情況下，碼量增加的理由，參考圖39進(jìn)行說明。圖39是表示存在空的類別的情況的概要圖。如圖39所示，對(duì)于不是空的類別，該類別的偏移被編碼。而且，按每個(gè)類別，將上次的偏移作為預(yù)測(cè)值，對(duì)該預(yù)測(cè)值與偏移的差分進(jìn)行編碼。但是，若存在空的類別，則預(yù)測(cè)值變?yōu)椤?”，差分值變大。據(jù)此，碼量增大。
[0860]因此，在本實(shí)施方式中構(gòu)成為，通過預(yù)測(cè)候補(bǔ)標(biāo)志，可以從“O”和“緊接之前的(O以外的)偏移”選擇預(yù)測(cè)值。
[0861]參考圖40來說明使用預(yù)測(cè)候補(bǔ)標(biāo)志的情況的句法。圖40是表示使用預(yù)測(cè)候補(bǔ)標(biāo)志的情況的句法2901的圖。如圖40所示，增加預(yù)測(cè)候補(bǔ)標(biāo)志“sao_pred_flag”，若“sao_pred_fIag^=O則將緊接之前所解碼的(不是O的)偏移作為預(yù)測(cè)值offsetp，若“sao_pred_flag”=l、或者最初的偏移，則設(shè)為預(yù)測(cè)值offsetp=0。另外，在句法2901中，“sao_offset_delta” 表不與預(yù)測(cè)值的差分 d,成為 “sao_offset [sao_curr_depth] [ys] [xs] ” =“offsetp+d”。
[0862]另外，也可以構(gòu)成為根據(jù)偏移類型而不使用預(yù)測(cè)候補(bǔ)標(biāo)志。例如可以構(gòu)成為，在EO的情況下不使用預(yù)測(cè)候補(bǔ)標(biāo)志 ，在BO的情況下使用預(yù)測(cè)候補(bǔ)標(biāo)志。這是因?yàn)閷?duì)于B0，根據(jù)像素值的分布，常常發(fā)生空的類別。
[0863]此外，也可以構(gòu)成為根據(jù)偏移類型來決定是否進(jìn)行預(yù)測(cè)編碼本身。例如，可以構(gòu)成為:在EO的情況下進(jìn)行預(yù)測(cè)編碼，在BO的情況下不進(jìn)行預(yù)測(cè)編碼。
[0864](附注事項(xiàng)9)
[0865]此外，在上述實(shí)施方式3~7中，也可以使用幀內(nèi)預(yù)測(cè)模式，以IXU單位，對(duì)邊緣偏移的類別進(jìn)行估計(jì)、限制、排序。
[0866]被認(rèn)為作為SAO的EO類型而選擇的邊緣方向與幀內(nèi)預(yù)測(cè)模式具有相關(guān)。因此，若參考處于與SAO的QAOU對(duì)應(yīng)的位置的CU的幀內(nèi)預(yù)測(cè)模式，則可以利用于EO類別的選擇。
[0867]例如，根據(jù)幀內(nèi)預(yù)測(cè)模式，可以估計(jì)并決定EO類別，限制EO類別的候補(bǔ)，或者按照被選擇的可能性由高到低的順序排列EO類別的順序(索引)。
[0868]這在SAO的各層次的QAOU的大小為與⑶相同的大小的情況下，例如分割圖像使得SAO的QAOU的最大大小變得與IXU大小相等的情況下，尤其能夠容易地實(shí)現(xiàn)。
[0869](附注事項(xiàng)10)
[0870]在以往的自適應(yīng)偏移濾波器中，因?yàn)槠频姆N類(類型、類別)較多，所以可能需要較大的存儲(chǔ)器大小。因此，在本實(shí)施方式中，實(shí)現(xiàn)了能夠抑制存儲(chǔ)器大小的增大的同時(shí)減少塊失真的圖像濾波器裝置等。
[0871]本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上從多個(gè)偏移中所選擇的偏移的圖像濾波器裝置，其特征在于，具備:偏移決定單元，其按每個(gè)單位區(qū)域，決定對(duì)各單位區(qū)域中所包含的像素的像素值加上的偏移；和濾波器單元，其對(duì)該單位區(qū)域中所包含的像素的像素值加上由上述偏移決定單元所決定的偏移，其中，上述偏移決定單元在成為偏移的決定對(duì)象的單位區(qū)域的大小小于給定大小的情況下，從相較于單位區(qū)域的大小為給定大小以上的情況限制了能夠選擇的偏移數(shù)的偏移之中，決定對(duì)該單位區(qū)域中所包含的像素的像素值加上的偏移。
[0872]根據(jù)上述構(gòu)成，在成為偏移的決定對(duì)象的單位區(qū)域的大小小于給定大小的情況下，從相較于單位區(qū)域的大小為給定大小以上的情況被限制的偏移之中，決定要加上的偏移。
[0873]在單位區(qū)域的大小較小的情況下，其中包含的像素?cái)?shù)變少，此外，該像素彼此具有相近似的值的可能性較高。因此，在單位區(qū)域的大小較小的情況下，即使限制了能夠選擇的偏移數(shù)，給予應(yīng)用了偏移后的圖像的影響也較小。此外，通過限制能夠選擇的偏移數(shù)，能夠減少所需要的存儲(chǔ)器的容量。
[0874]因此，根據(jù)上述構(gòu)成，能夠降低給予應(yīng)用了偏移后的圖像的影響，并且削減存儲(chǔ)器的使用量。此外，通過能夠選擇的偏移數(shù)變少，能夠削減碼量，編碼效率提高。
[0875]為了解決上述課題，本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器裝置，其特征在于包括:偏移決定單元，其按每個(gè)單位區(qū)域，決定對(duì)各單位區(qū)域中包含的像素的像素值加上的偏移；和濾波器單元，其對(duì)該單位區(qū)域中包含的像素的像素值加上由上述偏移決定單元所決定的偏移，其中上述濾波器單元在成為偏移的決定對(duì)象的單位區(qū)域的大小小于給定大小的情況下，加上精度相較于單位區(qū)域的大小為給定大小以上的情況變粗糙的偏移。
[0876]根據(jù)上述構(gòu)成，在成為偏移的決定對(duì)象的單位區(qū)域的大小小于給定大小的情況下，加上精度相較于單位區(qū)域的大小為給定大小以上的情況粗糙的偏移。
[0877]在單位區(qū)域的大小較小的情況下，其中所包含的像素?cái)?shù)變少，此外，其像素彼此具有相近似的值的可能性較高。因此，在單位區(qū)域的大小較小的情況下，即使使偏移的精度變得粗糙，給予量化誤差的影響也較小。因此，給予應(yīng)用了偏移后的圖像的影響也較小。此外，通過使偏移的精度變粗糙，能夠減少所需要的存儲(chǔ)器的容量。
[0878]因此，根據(jù)上述構(gòu)成，能夠降低給予應(yīng)用了偏移后的圖像的影響，并且削減存儲(chǔ)器的使用量。此外，通過偏移的精度變粗糙，能夠削減碼量，編碼效率提高。
[0879]本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值實(shí)施自適應(yīng)偏移(SA0: Samp Ie Adaptive Offset,采樣自適應(yīng)偏移)的圖像濾波器裝置，具備:偏移決定單元，其按每個(gè)單位區(qū)域，決定對(duì)各單位區(qū)域中包含的像素的像素值加上的偏移的種類；和濾波器單元，其對(duì)該單位區(qū)域中包含的像素的像素值加上與由上述偏移決定單元所決定的偏移的種類相應(yīng)的偏移，其中上述偏移決定單元對(duì)于要加上偏移的對(duì)象像素的像素值為最大值以及最小值的附近，將偏移的種類決定為帶偏移(BO)，對(duì)于這以外的值域的像素，將偏移的種類決定為邊緣偏移(EO)。
[0880]根據(jù)上述構(gòu)成，在實(shí)施自適應(yīng)偏移的情況下，對(duì)于像素值為最大值以及最小值的附近的像素應(yīng)用帶偏移，對(duì)于這以外的值域的像素應(yīng)用邊緣偏移。
[0881]因?yàn)樵诟呦袼刂涤蛞约暗拖袼刂涤蛑写嬖谙袼刂迪噍^于邊緣容易對(duì)誤差造成影響的傾向，所以通過上述構(gòu)成，誤差補(bǔ)正的效率提高，能夠提高編碼效率。
[0882]此外，若在一種類型并用帶偏移和邊緣偏移，則能夠減少自適應(yīng)偏移的類型數(shù)，能夠削減存儲(chǔ)器的使用量以及處理量。
[0883]另外，在上述構(gòu)成中，所謂帶偏移，是指根據(jù)處理對(duì)象的像素的像素值的大小，對(duì)該處理對(duì)象像素的像素值加上多個(gè)偏移中的任一個(gè)的偏移處理(以下同樣)。此外，在上述構(gòu)成中，所謂邊緣偏移，是指根據(jù)處理對(duì)象的像素的像素值與該處理對(duì)象的像素的周邊像素的像素值的差分，對(duì)該處理對(duì)象像素的像素值加上多個(gè)偏移中的任一個(gè)的偏移處理(以下同樣)。
[0884]在本發(fā)明所涉及的圖像濾波器裝置中，上述偏移決定單元也可以構(gòu)成為:對(duì)于像素值為從最小值到最大值的四分之一、和從最大值的四分之三到最大值的值域的像素，決定為帶偏移，對(duì)于這以外的值域，決定為邊緣偏移。
[0885]根據(jù)上述構(gòu)成，能夠明確地區(qū)分應(yīng)用帶偏移的像素和應(yīng)用邊緣偏移的像素。
[0886]本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)輸入圖像實(shí)施自適應(yīng)偏移(SAO =SampleAdaptive Offset，采樣自適應(yīng)偏移)的圖像濾波器裝置，其特征在于具備:類別分類單元，其僅參考存在于對(duì)象像素的水平方向的像素，來進(jìn)行用于決定應(yīng)用邊緣偏移(EO)時(shí)的類別而進(jìn)行的邊緣判斷；和濾波器單元，其在應(yīng)用邊緣偏移(EO)的情況下，加上與上述類別分類單元分類的類別對(duì)應(yīng)的偏移。
[0887]根據(jù)上述構(gòu)成，因?yàn)樵谂袛噙吘墪r(shí)，僅參考水平方向的像素，所以與也參考上方向的像素的情況相比，能夠削減所需要的存儲(chǔ)器量。此外，因?yàn)椴恍枰戏较虻倪吔缗袛?，所以還能夠削減處理量。
[0888]在本發(fā)明所涉及的圖像濾波器裝置中，上述類別分類單元還可以參考處于在水平方向上從對(duì)象像素離開了 2像素的位置的像素來進(jìn)行邊緣判斷。
[0889]根據(jù)上述構(gòu)成，因?yàn)閰⒖紡膶?duì)象像素離開了 2像素的像素，所以即使在邊緣的角度較淺的情況下，也能夠檢測(cè)邊緣。
[0890]本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)輸入圖像實(shí)施自適應(yīng)偏移(SAO =SampleAdaptive Offset，采樣自適應(yīng)偏移)的圖像濾波器裝置，其特征在于具備:類別分類單元，其將表示色差的像素值為最大值以及最小值的中央的值的中央值附近的類別的分割幅度相較于其他值域進(jìn)行細(xì)分化，來決定應(yīng)用帶偏移(BO)時(shí)的類別；和濾波器單元，其在應(yīng)用帶偏移(BO)的情況下，加上與上述類別分類單元分類的類別對(duì)應(yīng)的偏移。
[0891]根據(jù)上述構(gòu)成，將表示色差的像素值為最大值以及最小值的中央的值的中央值附近的類別的分割幅度相較于其他值域進(jìn)行細(xì)分化來決定應(yīng)用帶偏移(BO)時(shí)的類別。
[0892]在色差的像素值為中央值時(shí)，該像素成為非彩色。非彩色的誤差容易被人眼注意，主觀畫質(zhì)降低。因此，如上述構(gòu)成那樣，若將中央值附近的類別幅度細(xì)分化，則能夠?qū)χ醒胫蹈浇南袼丶?xì)致地設(shè)定偏移。據(jù)此，能夠提高主觀畫質(zhì)。
[0893]在本發(fā)明所涉及的圖像濾波器裝置中，也可以構(gòu)成為:上述濾波器單元在上述中央值存在于加上偏移前的像素值與加上偏移后的像素值之間時(shí)，將加上偏移后的像素值設(shè)為上述中央值。
[0894]根據(jù)上述構(gòu)成，不會(huì)超過中央值而加上偏移。色差的像素值為中央值的像素是非彩色，在夾著中央值的兩側(cè)，人眼能夠察覺的顏色發(fā)生變化。因此，根據(jù)上述構(gòu)成。通過加上偏移，能夠防止人靠近的顏色發(fā)生變化。
[0895]本發(fā)明所涉及的圖像濾波器裝置是一種對(duì)輸入圖像實(shí)施自適應(yīng)偏移(SAO =SampleAdaptive Offset，采樣自適應(yīng)偏移)的圖像濾波器裝置，其特征在于具備:濾波器單元，其對(duì)于表示色差的像素值為最大值以及最小值的中央的值的中央值附近的像素，加上精度高于其他值域的像素的偏移。
[0896]根據(jù)上述構(gòu)成，對(duì)于表示色差的像素值為最大值以及最小值的中央的值的中央值附近的像素，加上精度高于其他值域的像素的偏移。
[0897]色差的像素值為中央值時(shí)，該像素成為非彩色。非彩色的誤差容易引起人眼注意，主觀畫質(zhì)降低。因此，如上述構(gòu)成那樣，若在中央值附近，提高要加上的偏移的精度，則能夠?qū)τ谥醒胫蹈浇南袼丶?xì)致地加上偏移。據(jù)此，能夠提高主觀畫質(zhì)。
[0898]本發(fā)明所涉及的偏移解碼裝置是一種對(duì)由對(duì)輸入圖像的各像素值加上偏移的圖像濾波器所參考的各偏移進(jìn)行解碼的偏移解碼裝置，其特征在于具備:偏移殘差解碼單元，其從編碼數(shù)據(jù)解碼各偏移殘差；預(yù)測(cè)值導(dǎo)出單元，其根據(jù)已經(jīng)解碼的偏移、或者預(yù)先決定的值，導(dǎo)出各偏移的預(yù)測(cè)值；和偏移計(jì)算單元，其根據(jù)由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值、以及由上述偏移殘差解碼單元所解碼的偏移殘差，計(jì)算各偏移。
[0899]根據(jù)上述構(gòu)成，因?yàn)楦鶕?jù)殘差來解碼偏移，所以與直接編碼偏移的情況相比，能夠減少碼量。此外，因?yàn)楦鶕?jù)已經(jīng)解碼的偏移或者預(yù)先決定的值，導(dǎo)出用于求出殘差的預(yù)測(cè)值，所以能夠通過僅使用已經(jīng)解碼的偏移，防止差分?jǐn)?shù)據(jù)的碼量比直接進(jìn)行編碼時(shí)變大。
[0900]另外，作為預(yù)先決定的值，例如可以列舉“O”。
[0901]本發(fā)明所涉及的偏移編碼裝置是一種對(duì)由對(duì)輸入圖像的各像素值加上偏移的圖像濾波器所參考的各偏移進(jìn)行編碼的偏移編碼裝置，其特征在于具備:預(yù)測(cè)值導(dǎo)出單元，其根據(jù)已經(jīng)編碼的偏移、或者預(yù)先決定的值，導(dǎo)出各偏移的預(yù)測(cè)值；偏移殘差計(jì)算單元，其根據(jù)各偏移和由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值，計(jì)算偏移殘差；和偏移殘差編碼單元，其對(duì)由上述偏移殘差計(jì)算單元所計(jì)算出的偏移殘差進(jìn)行編碼。
[0902]根據(jù)上述構(gòu)成，因?yàn)楦鶕?jù)殘差來解碼偏移，所以與直接編碼偏移的情況相比，能夠減少碼量。此外，因?yàn)楦鶕?jù)已經(jīng)解碼的偏移或者預(yù)先決定的值，導(dǎo)出用于求出殘差的預(yù)測(cè)值，所以能夠通過僅使用已經(jīng)解碼的偏移，防止差分?jǐn)?shù)據(jù)的碼量比直接進(jìn)行編碼時(shí)變大。
[0903]本發(fā)明所涉及的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)是一種由對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器所參考的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)，其特征在于，包括表示根據(jù)已經(jīng)解碼的偏移以及預(yù)先決定的值的哪一個(gè)導(dǎo)出預(yù)測(cè)值的預(yù)測(cè)值導(dǎo)出信息，上述圖像濾波器參考上述編碼數(shù)據(jù)中包含的預(yù)測(cè)值導(dǎo)出信息，導(dǎo)出預(yù)測(cè)值并且對(duì)偏移進(jìn)行解碼。
[0904]根據(jù)上述構(gòu)成，能夠根據(jù)預(yù)測(cè)值導(dǎo)出信息，決定是使預(yù)測(cè)值為已經(jīng)解碼的偏移、還是使預(yù)測(cè)值為預(yù)先決定的值。
[0905](應(yīng)用例)
[0906]上述的運(yùn)動(dòng)圖像解碼裝置1(1’)以及運(yùn)動(dòng)圖像編碼裝置2 (2’)能夠搭載于進(jìn)行運(yùn)動(dòng)圖像的發(fā)送、接收、記錄、再生的各種裝置中來利用。另外，運(yùn)動(dòng)圖像既可以是由照相機(jī)等所拍攝的自然運(yùn)動(dòng)圖像，也可以是由計(jì)算機(jī)等所生成的人工運(yùn)動(dòng)圖像(包括CG以及⑶I)。
[0907]首先，參考圖45來說明可以將上述的運(yùn)動(dòng)圖像解碼裝置I以及運(yùn)動(dòng)圖像編碼裝置2利用于運(yùn)動(dòng)圖像的發(fā)送以及接收。
[0908]圖45(a)是表示搭載了運(yùn)動(dòng)圖像編碼裝置2的發(fā)送裝置A的構(gòu)成的框圖。如圖45(a)所示，發(fā)送裝置A具備:通過對(duì)運(yùn)動(dòng)圖像進(jìn)行編碼從而獲得編碼數(shù)據(jù)的編碼部Al、通過以編碼部Al所獲得的編碼數(shù)據(jù)調(diào)制載波從而獲得調(diào)制信號(hào)的調(diào)制部A2、和發(fā)送調(diào)制部A2所獲得的調(diào)制信號(hào)的發(fā)送部A3。上述的運(yùn)動(dòng)圖像編碼裝置2被利用作該編碼部Al。[0909]發(fā)送裝置A還可以具備拍攝運(yùn)動(dòng)圖像的照相機(jī)A4、記錄了運(yùn)動(dòng)圖像的記錄介質(zhì)A5、用于從外部輸入運(yùn)動(dòng)圖像的輸入端子A6、以及生成或者加工圖像的圖像處理部A7，作為輸入到編碼部Al的運(yùn)動(dòng)圖像的提供源。在圖45(a)中，例示了發(fā)送裝置A具備全部這些部件的構(gòu)成，但是也可以省略一部分。
[0910]另外,記錄介質(zhì)A5,既可以是記錄了未被編碼的運(yùn)動(dòng)圖像的介質(zhì)，也可以是記錄了以與傳輸用的編碼方式不同的記錄用的編碼方式進(jìn)行了編碼的運(yùn)動(dòng)圖像的介質(zhì)。在后者的情況下，可以在記錄介質(zhì)A5與編碼部Al之間具備解碼部(未圖示)，其按照記錄用的編碼方式對(duì)從記錄介質(zhì)A5讀出的編碼數(shù)據(jù)進(jìn)行解碼。
[0911]圖45(b)是表示搭載了運(yùn)動(dòng)圖像解碼裝置I的接收裝置B的構(gòu)成的框圖。如圖45(b)所示，接收裝置B具備:接收調(diào)制信號(hào)的接收部B1、通過對(duì)接收部BI接收到的調(diào)制信號(hào)進(jìn)行解調(diào)從而獲得編碼數(shù)據(jù)的解調(diào)部B2、和通過對(duì)解調(diào)部B2獲得的編碼數(shù)據(jù)進(jìn)行解碼從而獲得運(yùn)動(dòng)圖像的解碼部B3。上述的運(yùn)動(dòng)圖像解碼裝置I被利用作該解碼部B3。
[0912]接收裝置B還可以具備顯示運(yùn)動(dòng)圖像的顯示器B4、用于記錄運(yùn)動(dòng)圖像的記錄介質(zhì)B5、以及用于將運(yùn)動(dòng)圖像輸出到外部的輸出端子B6，作為解碼部B3輸出的運(yùn)動(dòng)圖像的提供目的地。在圖45(b)中例示了接收裝置B具備全部這些部件的構(gòu)成，但是也可以省略一部分。
[0913]另外，記錄介質(zhì)B5既可以是記錄了未被編碼的運(yùn)動(dòng)圖像的介質(zhì)，也可以是記錄了以與傳輸用的編碼方式不同的記錄用的編碼方式進(jìn)行了編碼的運(yùn)動(dòng)圖像的介質(zhì)。在后者的情況下，可以在解碼部B3與記錄介質(zhì)B5之間具備編碼部(未圖示)，其按照記錄用的編碼方式對(duì)從解碼部B3取得的運(yùn)動(dòng)圖像進(jìn)行編碼。
[0914]另外，傳輸調(diào)制信號(hào)的傳輸介質(zhì)，既可以采用無線方式，也可以采用有線方式。此夕卜，傳輸調(diào)制信號(hào)的傳輸方式，既可以是廣播(這里指未預(yù)先確定發(fā)送目的地的發(fā)送方式)，也可以是通信(這里指預(yù)先確定了發(fā)送目的地的發(fā)送方式)。即，調(diào)制信號(hào)的傳輸，可以通過無線廣播、有線廣播、無線通信、以及有線通信的任一種來實(shí)現(xiàn)。
[0915]例如，地面數(shù)字廣播的廣播站(廣播設(shè)備等)/接收站(電視接收機(jī)等)是以無線廣播收發(fā)調(diào)制信號(hào)的發(fā)送裝置A/接收裝置B的一例。此外，有線電視廣播的廣播站(廣播設(shè)備等)/接收站(電視接收機(jī)等)是以有線廣播收發(fā)調(diào)制信號(hào)的發(fā)送裝置A/接收裝置B的一例。
[0916]此外,使用了因特網(wǎng)的VOD(Video On Demand,視頻點(diǎn)播)服務(wù)、視頻共享服務(wù)等的服務(wù)器(工作站等)/客戶端(電視接收機(jī)、個(gè)人計(jì)算機(jī)、智能電話等)是以通信收發(fā)調(diào)制信號(hào)的發(fā)送裝置A/接收裝置B的一例(通常，在LAN中作為傳輸介質(zhì)使用無線或者有線的任一種，在WAN中作為傳輸介質(zhì)使用有線)。這里，個(gè)人計(jì)算機(jī)中包括臺(tái)式型PC、筆記本型PC、以及平板型PC。此外，智能電話中也包括多功能移動(dòng)電話終端。
[0917]另外，視頻共享服務(wù)的客戶端，除了具有對(duì)從服務(wù)器下載的編碼數(shù)據(jù)進(jìn)行解碼從而顯示于顯示器的功能之外，還具有對(duì)由照相機(jī)拍攝的運(yùn)動(dòng)圖像進(jìn)行編碼從而上傳到服務(wù)器的功能。即，視頻共享服務(wù)的客戶端作為發(fā)送裝置A以及接收裝置B的雙方發(fā)揮功能。
[0918]接下來，參考圖46來說明可以將上述的運(yùn)動(dòng)圖像解碼裝置I以及運(yùn)動(dòng)圖像編碼裝置2用于運(yùn)動(dòng)圖像的記錄以及再生。
[0919]圖46(a)是表示搭載了上述的運(yùn)動(dòng)圖像解碼裝置I的記錄裝置C的構(gòu)成的框圖。如圖46(a)所示，記錄裝置C具備:通過對(duì)運(yùn)動(dòng)圖像進(jìn)行編碼從而獲得編碼數(shù)據(jù)的編碼部Cl、和將編碼部Cl所獲得的編碼數(shù)據(jù)寫入記錄介質(zhì)M中的寫入部C2。上述的運(yùn)動(dòng)圖像編碼裝置2被利用作該編碼部Cl。
[0920]另外，對(duì)于記錄介質(zhì)M, (I)可以是如HDD (Hard Disk Drive,硬盤驅(qū)動(dòng)器)、SSD(Solid State Drive，固態(tài)驅(qū)動(dòng)器)等那樣，內(nèi)置于記錄裝置C的類型，(2)可以是如SD存儲(chǔ)卡、USB (Universal Serial Bus,通用串行總線)閃速存儲(chǔ)器等那樣,連接于記錄裝置C的類型，(3)可以是如DVD (Digital Versatile Disc，數(shù)字多功能光盤)、BD (Blu-rayDisc(藍(lán)光光盤):注冊(cè)商標(biāo))等那樣，裝在內(nèi)置于記錄裝置C的驅(qū)動(dòng)器裝置(未圖示)的類型。
[0921]此外，記錄裝置C還可以具備拍攝運(yùn)動(dòng)圖像的照相機(jī)C3、用于從外部輸入運(yùn)動(dòng)圖像的輸入端子C4、用于接收運(yùn)動(dòng)圖像的接收部C5、以及生成或者加工圖像的圖像處理部C6，作為輸入到編碼部Cl的運(yùn)動(dòng)圖像的提供源。在圖46(a)中例示了記錄裝置C具備全部這些部件的構(gòu)成，但是也可以省略一部分。
[0922]另外，接收部C5可以接收未被編碼的運(yùn)動(dòng)圖像，也可以接收以與記錄用的編碼方式不同的傳輸用的編碼方式進(jìn)行了編碼的編碼數(shù)據(jù)。在后者的情況下，可以在接收部C5與編碼部Cl之間具備傳輸用解碼部(未圖示)，其以傳輸用的編碼方式對(duì)被編碼的編碼數(shù)據(jù)進(jìn)行解碼。
[0923]作為這種記錄裝置C，例如，列舉DVD記錄器、BD記錄器、HD (Hard Disk,硬盤)記錄器等(在該情況下，輸入端子C4或者接收部C5成為運(yùn)動(dòng)圖像的主提供源)。此外，攝錄機(jī)(在該情況下，照相機(jī)C3成為運(yùn)動(dòng)圖像的主提供源)、個(gè)人計(jì)算機(jī)(在該情況下，接收部C5或者圖像處理部C6成為運(yùn)動(dòng)圖像的主提供源)、智能電話(在該情況下，照相機(jī)C3或者接收部C5成為運(yùn)動(dòng)圖像的主提供源)等也是這種記錄裝置C的一例。
[0924]圖46(b)是表示搭載了上述的運(yùn)動(dòng)圖像解碼裝置I的再生裝置D的構(gòu)成的框圖。如圖46 (b)所示，再生裝置D具備:讀出記錄介質(zhì)M中所寫入的編碼數(shù)據(jù)的讀出部D1、和通過對(duì)讀出部Dl所讀出的編碼數(shù)據(jù)進(jìn)行解碼從而獲得運(yùn)動(dòng)圖像的解碼部D2。上述的運(yùn)動(dòng)圖像解碼裝置I被利用作該解碼部D2。
[0925]另外，對(duì)于記錄介質(zhì)M，(I)可以是如HDD、SSD等那樣，內(nèi)置于再生裝置D的類型，(2)可以是如SD存儲(chǔ)卡、USB閃速存儲(chǔ)器等那樣，連接于再生裝置D的類型，(3)可以是如DVD、BD等那樣，裝在內(nèi)置于再生裝置D的驅(qū)動(dòng)器裝置(未圖示)的類型。
[0926]此外，再生裝置D還可以具備顯示運(yùn)動(dòng)圖像的顯示器D3、用于將運(yùn)動(dòng)圖像輸出到外部的輸出端子D4、以及發(fā)送運(yùn)動(dòng)圖像的發(fā)送部D5，作為解碼部D2輸出的運(yùn)動(dòng)圖像的提供目的地。在圖46(b)中，例示了再生裝置D具備全部這些部件的構(gòu)成，但是也可以省略一部分。
[0927]另外，發(fā)送部D5可以發(fā)送未被編碼的運(yùn)動(dòng)圖像，也可以發(fā)送以與記錄用的編碼方式不同的傳輸用的編碼方式進(jìn)行了編碼的編碼數(shù)據(jù)。在后者的情況下，可以在解碼部D2與發(fā)送部D5之間具備編碼部(未圖示)，其以傳輸用的編碼方式對(duì)運(yùn)動(dòng)圖像進(jìn)行編碼。
[0928]作為這種再生裝置D，例如，列舉DVD播放器、BD播放器、HDD播放器等(在該情況下，連接電視接收機(jī)等的輸出端子D4成為運(yùn)動(dòng)圖像的主提供目的地)。此外，電視接收機(jī)(在該情況下，顯示器D3成為運(yùn)動(dòng)圖像的主提供目的地)、臺(tái)式型PC (在該情況下，輸出端子D4或者發(fā)送部D5成為運(yùn)動(dòng)圖像的主提供目的地)、筆記本型或者平板型PC (在該情況下，顯示器D3或者發(fā)送部D5成為運(yùn)動(dòng)圖像的主提供目的地)、智能電話(在該情況下，顯示器D3或者發(fā)送部D5成為運(yùn)動(dòng)圖像的主提供目的地)、數(shù)字標(biāo)牌(也稱為電子看板、電子公告板等，顯示器D3或者發(fā)送部D5成為運(yùn)動(dòng)圖像的主提供目的地)等也是這種再生裝置D的一例。
[0929](基于軟件的構(gòu)成)
[0930]最后，運(yùn)動(dòng)圖像解碼裝置1(1’ )以及運(yùn)動(dòng)圖像編碼裝置2(2’ )的各模塊，尤其是可變長碼解碼部13、運(yùn)動(dòng)矢量恢復(fù)部14、幀間預(yù)測(cè)圖像生成部16、幀內(nèi)預(yù)測(cè)圖像生成部17、預(yù)測(cè)方式?jīng)Q定部18、逆量化/逆變換部19、去區(qū)塊濾波器41、自適應(yīng)濾波器50、自適應(yīng)偏移濾波器6(K60’)、變換/量化部21、可變長碼編碼部22、逆量化/逆變換部23、幀內(nèi)預(yù)測(cè)圖像生成部25、幀間預(yù)測(cè)圖像生成部26、運(yùn)動(dòng)矢量檢測(cè)部27、預(yù)測(cè)方式控制部28、運(yùn)動(dòng)矢量冗余刪除部29、去區(qū)塊濾波器33、自適應(yīng)濾波器70、自適應(yīng)偏移濾波器80(80’ )，既可以通過形成在集成電路(IC芯片)上的邏輯電路來硬件地實(shí)現(xiàn)，也可以使用CPU(centralprocessing unit,中央處理單元)來軟件地實(shí)現(xiàn)。
[0931]在后者的情況下，運(yùn)動(dòng)圖像解碼裝置I以及運(yùn)動(dòng)圖像編碼裝置2具備:執(zhí)行用于實(shí)現(xiàn)各功能的控制程序的命令的CPU、存儲(chǔ)了上述程序的ROM (read only memory,只讀存儲(chǔ)器)、展開上述程序的RAM (random access memory,隨機(jī)存取存儲(chǔ)器)、存儲(chǔ)上述程序以及各種數(shù)據(jù)的存儲(chǔ)器等的存儲(chǔ)裝置(記錄介質(zhì))等。而且，本發(fā)明的目的可以通過將以計(jì)算機(jī)可讀取的方式記錄了作為實(shí)現(xiàn)上述功能的軟件的運(yùn)動(dòng)圖像解碼裝置I以及運(yùn)動(dòng)圖像編碼裝置2的控制程序的程序代碼(執(zhí)行形式程序、中間代碼程序、源程序)的記錄介質(zhì)提供給上述運(yùn)動(dòng)圖像解碼裝置I以及運(yùn)動(dòng)圖像編碼裝置2，并且其計(jì)算機(jī)(或者CPU、MPU(micix)processing unit,微處理單元))讀出并執(zhí)行記錄介質(zhì)中所記錄的程序代碼,來達(dá)成。
[0932]作為上述記錄介質(zhì),例如，可以使用:磁帶、盒式帶等帶類；包括Floppy (注冊(cè)商標(biāo))盤/硬盤等磁盤、⑶-ROM(compact disc read-only memory,光盤只讀存儲(chǔ)器)/ MO盤(magneto-optical disc,磁光盤)/ MD (Mini Disc,迷你盤)/ DVD (digital versatiledisc，數(shù)字多功能盤)/⑶-R(⑶Recordable，可刻錄⑶)等光盤的盤類；IC卡(包括存儲(chǔ)卡)/ 光卡等卡類；掩模 ROM / EPROM (erasable programmable read-only memory,可擦寫可編程只讀存儲(chǔ)器)/ EEPROM(electrically erasable and programmable read-onlymemory,電可擦可編程只讀存儲(chǔ)器)(注冊(cè)商標(biāo))/閃存ROM等半導(dǎo)體存儲(chǔ)器類；或者PLD(Programmable logic device,可編程邏輯器件)、FPGA(Field Programmable GateArray，現(xiàn)場(chǎng)可編程門陣列)等邏輯電路類等。
[0933]此外，也可以將運(yùn)動(dòng)圖像解碼裝置I以及運(yùn)動(dòng)圖像編碼裝置2構(gòu)成為可連接于通信網(wǎng)絡(luò)，通過通信網(wǎng)絡(luò)來提供上述程序代碼。對(duì)于該通信網(wǎng)絡(luò)，只要能夠傳輸程序代碼即可，不做特別限定。例如，可以利用因特網(wǎng)、內(nèi)聯(lián)網(wǎng)、夕卜聯(lián)網(wǎng)、LAN(local area network,局域網(wǎng))、ISDN (integrated services digital network,綜合服務(wù)數(shù)字網(wǎng))、VAN (value-addednetwork,增值網(wǎng)絡(luò))、CATV (community antenna television / cable television,共用天線電視/有線電視)通信網(wǎng)、虛擬專用網(wǎng)(virtual private network)、電話線路網(wǎng)、移動(dòng)體通信網(wǎng)、衛(wèi)星通信網(wǎng)等。此外，對(duì)于構(gòu)成該通信網(wǎng)絡(luò)的傳輸介質(zhì)，也是只要是能夠傳輸程序代碼的介質(zhì)即可，不限定于特定的構(gòu)成或者種類。例如，既可以利用IEEE (instituteof electrical and electronic engineers,電氣和電子工程師協(xié)會(huì))1394、USB、電力線載波、有線TV線路、電話線、ADSL (asymmetric digital subscriber loop,非對(duì)稱數(shù)字用戶環(huán)路)線路等的有線，也可以利用IrDA(infrared data association,紅外線數(shù)據(jù)協(xié)會(huì))、遠(yuǎn)程控制那樣的紅外線、Bluetooth (注冊(cè)商標(biāo))、IEEE802.11無線、HDR(high data rate,高數(shù)據(jù)速率)、NFC (Near Field Communication,近場(chǎng)通信)、DLNA (Digital Living NetworkAlliance，數(shù)字生活網(wǎng)絡(luò)聯(lián)盟)、移動(dòng)電話網(wǎng)、衛(wèi)星線路、地上波數(shù)字網(wǎng)等的無線。另外，本發(fā)明也可以利用以電子傳輸使上述程序代碼具體化的、嵌入在載波中的計(jì)算機(jī)數(shù)據(jù)信號(hào)的方式來實(shí)現(xiàn)。
[0934]本發(fā)明不限定于上述的各實(shí)施方式，在權(quán)利要求所示的范圍內(nèi)可以進(jìn)行各種變更，適當(dāng)組合不同的實(shí)施方式中分別公開的技術(shù)手段而得到的實(shí)施方式也包含在本發(fā)明的技術(shù)范圍中。
[0935]產(chǎn)業(yè)上的可利用性
[0936]本發(fā)明可以適宜地用于對(duì)圖像數(shù)據(jù)進(jìn)行偏移濾波的圖像濾波器。此外，可以適宜地應(yīng)用于對(duì)編碼數(shù)據(jù)進(jìn)行解碼的解碼裝置、以及對(duì)編碼數(shù)據(jù)進(jìn)行編碼的編碼裝置。
[0937]符號(hào)說明
[0938]I運(yùn)動(dòng)圖像解碼裝置(解碼裝置)
[0939]41去區(qū)塊濾波器
[0940]50自適應(yīng)濾波器
[0941]60、60’ 自 適應(yīng)偏移濾波器(圖像濾波器裝置)
[0942]611、611’偏移信息解碼部(偏移解碼裝置、決定單元、偏移屬性設(shè)定單元、偏移解碼單元、偏移殘差解碼單元、預(yù)測(cè)值導(dǎo)出單元)
[0943]612QAOU結(jié)構(gòu)解碼部
[0944]613偏移屬性設(shè)定部(偏移屬性設(shè)定單元)
[0945]621偏移信息存儲(chǔ)部
[0946]622QAOU 控制部
[0947]623偏移類型導(dǎo)出部
[0948]624類別分類部(計(jì)算單元、比特移位單元、分類單元)
[0949]625偏移導(dǎo)出部(偏移逆移位單兀)
[0950]626偏移加法部(偏移單元)
[0951 ] 2運(yùn)動(dòng)圖像編碼裝置(編碼裝置)
[0952]33去區(qū)塊濾波器
[0953]70自適應(yīng)濾波器
[0954]80、80’ 自適應(yīng)偏移濾波器(圖像濾波器裝置)
[0955]811偏移計(jì)算部
[0956]812偏移裁剪部
[0957]813偏移信息選擇部
[0958]814偏移殘差導(dǎo)出部
[0959]815偏移屬性設(shè)定部(偏移屬性設(shè)定單元)
[0960]816偏移移位部(偏移移位單兀)
【權(quán)利要求】
1.一種圖像濾 波器裝置，對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移，其特征在于， 上述圖像濾波器裝置具備: 偏移屬性設(shè)定單元，其參考編碼數(shù)據(jù)，設(shè)定偏移值域； 偏移解碼單元，其解碼被限制在上述設(shè)定的偏移值域的偏移；和 濾波器單元，其對(duì)上述輸入圖像的各像素值加上上述偏移。
2.根據(jù)權(quán)利要求1所述的圖像濾波器裝置，其特征在于， 上述編碼數(shù)據(jù)包含上述輸入圖像的像素值的比特深度， 上述偏移屬性設(shè)定單元根據(jù)上述像素值的比特深度來設(shè)定上述偏移值域。
3.根據(jù)權(quán)利要求2所述的圖像濾波器裝置，其特征在于， 上述偏移屬性設(shè)定單元將作為上述偏移的比特寬度的偏移比特深度在所述像素值的比特深度為10比特以下的情況下設(shè)定為與像素值的比特深度相等的值，在所述像素值的比特深度為11比特以上的情況下設(shè)定為10，并且將上述偏移值域設(shè)為2μ._5以下的范圍。
4.根據(jù)權(quán)利要求1~3中的任意一項(xiàng)所述的圖像濾波器裝置，其特征在于， 上述解碼后的偏移是被量化的值， 上述濾波器單元對(duì)上述各像素值加上使用上述偏移屬性中包含的參數(shù)對(duì)上述偏移進(jìn)行了逆量化的值。
5.根據(jù)權(quán)利要求3所述的圖像濾波器裝置，其特征在于， 上述濾波器單元通過左移位從上述像素值的比特深度減去上述偏移比特深度所得的值即移位值，從而進(jìn)行所解碼的偏移的逆量化。
6.一種偏移解碼裝置，對(duì)由對(duì)輸入圖像的各像素值加上偏移的圖像濾波器所參考的各偏移進(jìn)行解碼，其特征在于，所述偏移解碼裝置具備: 偏移殘差解碼單元，其從編碼數(shù)據(jù)解碼各偏移殘差； 預(yù)測(cè)值導(dǎo)出單元，其根據(jù)已經(jīng)解碼的偏移，導(dǎo)出各偏移的預(yù)測(cè)值；和偏移計(jì)算單元，其根據(jù)由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值、以及由上述偏移殘差解碼單元所解碼的偏移殘差，計(jì)算各偏移。
7.根據(jù)權(quán)利要求6所述的偏移解碼裝置，其特征在于， 上述輸入圖像由多個(gè)單位區(qū)域構(gòu)成， 上述偏移殘差解碼單元將各偏移殘差與按每個(gè)單位區(qū)域而決定的偏移類型以及按每個(gè)像素而決定的偏移類別建立關(guān)聯(lián)地進(jìn)行解碼， 上述預(yù)測(cè)值導(dǎo)出單元將各偏移的預(yù)測(cè)值根據(jù)與和該偏移相同的偏移類型以及偏移類別建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出。
8.根據(jù)權(quán)利要求6所述的偏移解碼裝置，其特征在于， 上述輸入圖像由多個(gè)單位區(qū)域構(gòu)成， 上述偏移殘差解碼單元將各偏移殘差與按每個(gè)單位區(qū)域而決定的偏移類型以及按每個(gè)像素而決定的偏移類別建立關(guān)聯(lián)地進(jìn)行解碼， 上述預(yù)測(cè)值導(dǎo)出單元將各偏移的預(yù)測(cè)值，在與該偏移建立了關(guān)聯(lián)的偏移類型屬于第I偏移類型群的情況下，根據(jù)與和該偏移相同的偏移類型建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出，而在與該偏移建立了關(guān)聯(lián)的偏移類型屬于第2偏移類型群的情況下，根據(jù)與和該偏移相同的偏移類型以及偏移類別建立了關(guān)聯(lián)的已經(jīng)解碼的偏移進(jìn)行導(dǎo)出。
9.根據(jù)權(quán)利要求8所述的偏移解碼裝置，其特征在于， 上述偏移計(jì)算單元將各偏移作為由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值、以及由上述偏移殘差解碼單元所解碼的偏移殘差的線性函數(shù)來進(jìn)行計(jì)算， 上述預(yù)測(cè)值乘上的系數(shù)，在與上述偏移建立了關(guān)聯(lián)的偏移類型屬于第I偏移類型群的情況下、和在與上述偏移建立了關(guān)聯(lián)的偏移類型屬于第2偏移類型群的情況下是不同的。
10.根據(jù)權(quán)利要求6~9中的任意一項(xiàng)所述的偏移解碼裝置，其特征在于， 上述預(yù)測(cè)值導(dǎo)出單元通過取得已經(jīng)解碼的偏移與該已經(jīng)解碼的偏移的預(yù)測(cè)值的加權(quán)平均來導(dǎo)出各偏移的預(yù)測(cè)值。
11.根據(jù)權(quán)利要求6~10中的任意一項(xiàng)所述的偏移解碼裝置，其特征在于， 上述預(yù)測(cè)值導(dǎo)出單元具備裁剪單元，該裁剪單元利用與輸入圖像中的各像素值的比特深度相應(yīng)的上限值以及下限值，對(duì)所導(dǎo)出的各預(yù)測(cè)值進(jìn)行裁剪。
12.—種圖像濾波器裝置，作用于輸入圖像，其特征在于，所述圖像濾波器裝置具備: 計(jì)算單元，其計(jì)算輸入圖像中的對(duì)象像素的像素值與該對(duì)象像素的周邊像素的像素值的差分值； 比特移位單元，其使由上述計(jì)算單元所參考的像素值、或者由上述計(jì)算單元所計(jì)算出的差分值右比特移位給定移位值； 分類單元，其根據(jù)由上述比特移位`單元進(jìn)行了右比特移位的差分值與O的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別中的任一個(gè)；和 偏移單元，其對(duì)上述對(duì)象像素的像素值加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移。
13.根據(jù)權(quán)利要求12所述的圖像濾波器裝置，其特征在于， 上述給定移位值與上述對(duì)象像素的像素值的比特深度具有正相關(guān)。
14.一種圖像濾波器裝置，作用于輸入圖像，其特征在于，所述圖像濾波器裝置具備: 計(jì)算單元，其計(jì)算輸入圖像中的對(duì)象像素的像素值與該對(duì)象像素的周邊像素的像素值的差分值； 分類單元，其根據(jù)上述計(jì)算單元所計(jì)算出的差分值與預(yù)先決定的第I閾值以及第2閾值的大小關(guān)系，將上述對(duì)象像素分類為多個(gè)偏移類別中的任一個(gè)；和 偏移單元，其對(duì)上述對(duì)象像素的像素值加上與由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移。
15.根據(jù)權(quán)利要求14所述的圖像濾波器裝置，其特征在于， 上述第I閾值以及第2閾值的絕對(duì)值與上述對(duì)象像素的像素值的比特深度具有正相關(guān)。
16.一種圖像濾波器裝置，作用于由多個(gè)單位區(qū)域構(gòu)成的輸入圖像，其特征在于，所述圖像濾波器裝置具備: 決定單元，其從第I偏移類型以及第2偏移類型中決定包含輸入圖像中的對(duì)象像素的對(duì)象單位區(qū)域所屬的偏移類型； 分類單元，其根據(jù)上述對(duì)象單位區(qū)域所屬的偏移類型、以及上述對(duì)象像素的像素值，將上述對(duì)象像素分類為不加上偏移的偏移類別、以及加上偏移的多個(gè)偏移類別中的任一個(gè)；和 偏移單元，其對(duì)上述對(duì)象像素的像素值，加上與上述對(duì)象單位區(qū)域所屬的偏移類型以及由上述分類單元所分類的偏移類別建立了關(guān)聯(lián)的偏移， 上述分類單元在上述對(duì)象像素的像素值處于給定范圍內(nèi)時(shí)，無論包含上述對(duì)象像素的單位區(qū)域所屬的偏移類型是上述第I偏移類型以及上述第2偏移類型的哪一個(gè)，都將上述對(duì)象像素分類為加上偏移的偏移類別。
17.一種圖像濾波器裝置，對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移，其特征在于，所述圖像濾波器裝置具備: 決定單元，其從多個(gè)偏移類型中決定處理對(duì)象的單位區(qū)域所屬的偏移類型； 偏移編碼單元，其根據(jù)上述偏移類型，決定具有不同的比特寬度的偏移，并且對(duì)該偏移進(jìn)行編碼；和 濾波器單元，其對(duì)上述輸入圖像的各像素值加上上述決定的偏移。
18.一種偏移編碼裝置，對(duì)由對(duì)輸入圖像的各像素值加上偏移的圖像濾波器所參考的各偏移進(jìn)行編碼，其特征在于，所述偏移編碼裝置具備: 預(yù)測(cè)值導(dǎo)出單元，其根據(jù)已經(jīng)編碼的偏移，導(dǎo)出各偏移的預(yù)測(cè)值； 偏移殘差計(jì)算單元，其根據(jù)各偏移和由上述預(yù)測(cè)值導(dǎo)出單元所導(dǎo)出的預(yù)測(cè)值，計(jì)算偏移殘差；和 偏移殘差編碼單兀，其對(duì)由上述偏移殘差計(jì)算單兀所計(jì)算出的偏移殘差進(jìn)行編碼。
19.一種編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)，是由對(duì)由多個(gè)單位區(qū)域構(gòu)成的輸入圖像的各像素值加上偏移的圖像濾波器所參考的編碼數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)，其特征在于， 包含根據(jù)各單位區(qū)域所屬的偏移類型具有不同的比特寬度的偏移， 上述圖像濾波器參考上述編碼數(shù)據(jù)，決定處理對(duì)象的單位區(qū)域所屬的偏移類型，并且根據(jù)所決定的偏移類型對(duì)具有不同的比特寬度的偏移進(jìn)行解碼。
【文檔編號(hào)】H04N19/14GK103636210SQ201280030994
【公開日】2014年3月12日 申請(qǐng)日期:2012年6月22日 優(yōu)先權(quán)日:2011年6月23日
【發(fā)明者】山崎隆紀(jì), 豬飼知宏, 山本智幸, 八杉將伸 申請(qǐng)人:夏普株式會(huì)社