考慮場(chǎng)景剪切偽像的視頻質(zhì)量評(píng)估的制作方法
【專利摘要】一種特定的實(shí)施方案，其在不重建視頻的情況下檢測(cè)比特流中的場(chǎng)景剪切偽像。場(chǎng)景剪切偽像通常(1)當(dāng)原始視頻中的場(chǎng)景剪切圖像被部分接收或者(2)當(dāng)圖像涉及原始視頻中的丟失場(chǎng)景剪切圖像時(shí)在所解碼的視頻中被觀察到。為了檢測(cè)場(chǎng)景剪切偽像，首先選擇候選場(chǎng)景剪切圖像，并且然后在候選圖像上進(jìn)行場(chǎng)景剪切偽像檢測(cè)。當(dāng)一個(gè)塊被確定為具有場(chǎng)景剪切偽像時(shí)，將最低的質(zhì)量等級(jí)分配給該塊。
【專利說(shuō)明】考慮場(chǎng)景剪切偽像的視頻質(zhì)量評(píng)估
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及視頻質(zhì)量測(cè)量，并且更具體而言，涉及用于確定客觀(objective)視頻質(zhì)量度量的方法和設(shè)備。
【背景技術(shù)】
[0002]隨著IP網(wǎng)絡(luò)的發(fā)展，通過(guò)有線和無(wú)線IP網(wǎng)絡(luò)(例如，IPTV服務(wù))進(jìn)行的視頻通信變得普遍。不像通過(guò)線纜網(wǎng)絡(luò)進(jìn)行的常規(guī)視頻傳送，通過(guò)IP網(wǎng)絡(luò)的視頻輸送是較不可靠的。從而，除了來(lái)自視頻壓縮的質(zhì)量損失之外，當(dāng)視頻經(jīng)過(guò)IP網(wǎng)絡(luò)傳送時(shí)，視頻質(zhì)量進(jìn)一步劣化。除了由視頻壓縮造成的質(zhì)量劣化之外，成功的視頻質(zhì)量建模工具需要評(píng)價(jià)由網(wǎng)絡(luò)傳送虧損(例如，包丟失、傳送延遲和傳送抖動(dòng))造成的質(zhì)量劣化。

【發(fā)明內(nèi)容】

[0003]根據(jù)一個(gè)總的方面，訪問(wèn)包括編碼圖像的比特流，并且在不解碼比特流以獲取像素信息的情況下利用來(lái)自比特流的信息確定比特流中的場(chǎng)景剪切圖像。
[0004]根據(jù)另一總的方面，訪問(wèn)包括編碼圖像的比特流，并且響應(yīng)于來(lái)自比特流的圖像集合之間的運(yùn)動(dòng)向量、幀尺寸、預(yù)測(cè)殘差中的至少一個(gè)來(lái)確定各個(gè)差度量，其中，該圖像集合包括候選場(chǎng)景剪切圖像、在候選場(chǎng)景剪切圖像之前的圖像和在候選場(chǎng)景剪切圖像之后的圖像中的至少一個(gè)。如果這些差度量中的一個(gè)或多個(gè)超過(guò)其各自的預(yù)定閾值，則將該候選場(chǎng)景剪切圖像確定為場(chǎng)景剪切圖像。
[0005]根據(jù)另一總的方面，訪問(wèn)包括編碼圖像的比特流。如果幀內(nèi)圖像的至少一個(gè)塊的壓縮數(shù)據(jù)丟失則將該幀內(nèi)圖像選擇為隨候選場(chǎng)景剪切圖像，或者將涉及丟失圖像的圖像選擇為候選場(chǎng)景剪切圖像。響應(yīng)于來(lái)自比特流的圖像集合之間的運(yùn)動(dòng)向量、幀尺寸和預(yù)測(cè)殘差中的至少一個(gè)來(lái)確定各個(gè)差度量，其中，該圖像集合包括候選場(chǎng)景剪切圖像、在候選場(chǎng)景剪切圖像之前的圖像和在候選場(chǎng)景剪切圖像之后的圖像中的至少一個(gè)。如果這些差度量中的一個(gè)或多個(gè)超過(guò)其各自的預(yù)定閾值，則將候選場(chǎng)景剪切圖像確定為場(chǎng)景剪切圖像。
[0006]一個(gè)或多個(gè)實(shí)施方案的細(xì)節(jié)在附圖和下面的描述中闡明。即使按照一個(gè)特定方式描述過(guò)，應(yīng)清楚的是，實(shí)施方案可以按照不同的方式來(lái)配置或?qū)崿F(xiàn)。例如，一個(gè)實(shí)施方案可以作為方法來(lái)執(zhí)行，或者實(shí)現(xiàn)為設(shè)備，諸如，例如，配置為執(zhí)行一組操作的設(shè)備或者存儲(chǔ)用于執(zhí)行一組操作的指令的設(shè)備，或者實(shí)現(xiàn)為信號(hào)。其它方面和特征將在結(jié)合附圖和權(quán)利要求來(lái)考慮的情況下從下面的詳細(xì)描述中變得顯然。
【專利附圖】

【附圖說(shuō)明】
[0007]圖1A是圖不不例,其描繪了在場(chǎng)景到切巾貞處具有場(chǎng)景到切偽像的圖像，圖1B是圖示示例，其描繪了沒有場(chǎng)景剪切偽像的圖像，并且圖1C是圖示示例，其描繪了在并非場(chǎng)景剪切幀的幀處具有場(chǎng)景剪切偽像的圖像。
[0008]圖2A和2B是圖示示例，其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了場(chǎng)景剪切偽像如何與場(chǎng)景剪切關(guān)聯(lián)。
[0009]圖3是流程圖，其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了視頻質(zhì)量建模的一個(gè)示例。
[0010]圖4是流程圖，其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了場(chǎng)景剪切偽像檢測(cè)的一個(gè)示例。
[0011]圖5是圖示示例,其描繪了如何計(jì)算變量n1()SS。
[0012]圖6A和6C是圖示示例,其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了變量pk_num如何隨著幀索引變化，以及圖6B和6D是圖示示例，其根據(jù)當(dāng)前原理的該實(shí)施例描繪了變量bytes_num如何隨著幀索引變化。
[0013]圖7是流程圖，其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了確定候選場(chǎng)景剪切偽像位置的一個(gè)示例。
[0014]圖8是圖示示例，其描繪了具有99個(gè)宏塊的圖像。
[0015]圖9A和9B是圖示示例，其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了相鄰幀如何用于場(chǎng)景剪切偽像檢測(cè)。
[0016]圖10是流程圖，其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了場(chǎng)景剪切檢測(cè)的一個(gè)示例。
[0017]圖1lA和IlB是圖示示例，其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了相鄰的I幀如何用于偽像檢測(cè)。
[0018]圖12是框圖，其根據(jù)當(dāng)前原理的一個(gè)實(shí)施例描繪了視頻質(zhì)量監(jiān)測(cè)器的一個(gè)示例。
[0019]圖13是框圖，其描繪了可以以一個(gè)或多個(gè)實(shí)施方式來(lái)使用的視頻處理系統(tǒng)。
【具體實(shí)施方式】
[0020]視頻質(zhì)量測(cè)量工具可以在不同等級(jí)上操作。在一個(gè)實(shí)施例中，該工具可以取得所接收的比特流并且在不重建視頻的情況下測(cè)量視頻質(zhì)量。這樣的方法通常被稱為比特流等級(jí)視頻質(zhì)量測(cè)量。當(dāng)允許額外的計(jì)算復(fù)雜度時(shí)，視頻質(zhì)量測(cè)量可以從比特流重建一些或全部圖像，并且將所重建的圖像用于更精確地估計(jì)視頻質(zhì)量。
[0021]當(dāng)前的實(shí)施例涉及客觀視頻質(zhì)量模型，其(I)在不重建視頻的情況下并且(2)借助部分重建的視頻評(píng)估視頻質(zhì)量。尤其，當(dāng)前原理考慮圍繞場(chǎng)景剪切觀察到的特定類型的偽像，其被記做場(chǎng)景剪切偽像。
[0022]大多現(xiàn)有的視頻壓縮標(biāo)準(zhǔn)、例如H.264和MPEG-2將宏塊(MB)用作基本編碼單元。因此，下面的實(shí)施例將宏塊用作基本處理單元。然而，這些原理可以適配為使用不同尺寸的塊，例如8 X 8塊、16 X 8塊、32 X 32塊和64X 64塊。
[0023]當(dāng)所編碼的視頻比特流的一些部分在網(wǎng)絡(luò)傳送期間丟失時(shí)，解碼器可以采用錯(cuò)誤隱蔽技術(shù)來(lái)隱蔽與丟失部分對(duì)應(yīng)的宏塊。錯(cuò)誤隱蔽的目標(biāo)是估計(jì)丟失的宏塊以便將感知的質(zhì)量劣化最小化。所感知到的由傳送錯(cuò)誤產(chǎn)生的偽像強(qiáng)度很大程度上取決于所使用的錯(cuò)誤隱蔽技術(shù)。
[0024]可以將空間方法或者時(shí)間方法用于錯(cuò)誤隱蔽。在空間方法中，利用像素之間的空間關(guān)聯(lián)，并且丟失的宏塊通過(guò)插值技術(shù)從相鄰像素來(lái)恢復(fù)。在時(shí)間方法中，利用運(yùn)動(dòng)場(chǎng)的連貫性和像素的空間平滑度兩者來(lái)估計(jì)丟失宏塊的運(yùn)動(dòng)向量(MV)或者各個(gè)丟失像素的MV，然后根據(jù)所估計(jì)的運(yùn)動(dòng)向量利用之前的幀中的參考像素來(lái)隱蔽丟失的像素。
[0025]視覺偽像在錯(cuò)誤隱蔽之后仍能被感知到。圖1A-1C示出了示例性的所解碼的圖像，其中所編碼的比特流的一些包在傳送期間丟失。在這些示例中，將時(shí)間錯(cuò)誤隱蔽方法用于在解碼器處隱蔽丟失宏塊。具體地，將在之前的幀中的并置的宏塊拷貝至丟失宏塊。
[0026]在圖1A中，例如歸因于傳送錯(cuò)誤的包丟失在場(chǎng)景剪切幀(S卩，新場(chǎng)景中的第一幀)處發(fā)生。由于在當(dāng)前幀和之前的幀(來(lái)自另一場(chǎng)景)之間劇烈的內(nèi)容變化，所隱蔽的圖像包含在該所隱蔽的圖像中突出的區(qū)域。即，該區(qū)域具有與其相鄰宏塊非常不同的紋理。因此，該區(qū)域?qū)⑷菀妆桓兄獮橐曈X偽像。為了便于注釋，將該類型的圍繞場(chǎng)景剪切圖像的偽像記做場(chǎng)景剪切偽像。
[0027]相反，圖1B示出了位于場(chǎng)景內(nèi)的另一圖像。因?yàn)楫?dāng)前幀中的丟失內(nèi)容類似于在用于隱蔽當(dāng)前幀的之前幀中的、并置的宏塊中的內(nèi)容，所以時(shí)間錯(cuò)誤隱蔽合適地起作用并且難以在圖1B中感知到視覺偽像。
[0028]請(qǐng)注意，場(chǎng)景剪切偽像不一定要在場(chǎng)景的第一幀處發(fā)生。而是，它們可以在場(chǎng)景剪切幀處或在丟失場(chǎng)景剪切幀之后被看到，如通過(guò)圖2A和2B的示例示出那樣。
[0029]在圖2A的示例中，圖像210和220屬于不同的場(chǎng)景。圖像210被正確接收，并且圖像220是部分接收的場(chǎng)景剪切幀。圖像220的所接收的部分被恰當(dāng)?shù)亟獯a，其中丟失部分借助來(lái)自圖像210的并置的宏塊來(lái)隱蔽。當(dāng)在圖像210與220之間存在顯著變化時(shí)，所隱蔽的圖像220將具有場(chǎng)景剪切偽像。因此，在該示例中，場(chǎng)景剪切偽像在場(chǎng)景剪切幀處發(fā)生。
[0030]在圖2B的示例中，圖像250和260屬于一個(gè)場(chǎng)景，并且圖像270和280屬于另一場(chǎng)景。在壓縮期間，圖像270被用作用于運(yùn)動(dòng)補(bǔ)償?shù)膱D像280的參考。在傳送期間，與圖像260和270對(duì)應(yīng)的壓縮數(shù)據(jù)丟失。為了在解碼器處隱蔽所丟失的圖像，可以將所解碼的圖像250拷貝至圖像260和270。
[0031]用于圖像280的壓縮數(shù)據(jù)被正確接收。但是因?yàn)槠渖婕皥D像270，該圖像270現(xiàn)在為來(lái)自另一場(chǎng)景的所解碼的圖像250的副本，所以所解碼的圖像280也可能具有場(chǎng)景剪切偽像。因此，場(chǎng)景剪切偽像可以在丟失場(chǎng)景剪切幀(270)之后發(fā)生，在該示例中在場(chǎng)景的第二幀處發(fā)生。請(qǐng)注意，場(chǎng)景剪切偽像也可以在場(chǎng)景的其它位置發(fā)生。帶有在場(chǎng)景剪切幀之后發(fā)生的場(chǎng)景剪切偽像的示例圖像在圖1C中描述。
[0032]事實(shí)上，盡管場(chǎng)景在原始視頻中在圖像270處改變，該場(chǎng)景可以在所解碼的視頻中顯得以場(chǎng)景剪切偽像在圖像280處改變。除非明確聲明，則本申請(qǐng)中的場(chǎng)景剪切就涉及那些在原始視頻中看到的。
[0033]在圖1A中示出的示例中，之前的幀中的并置塊(即MV = O)被用于隱蔽當(dāng)前幀中的丟失塊。其它時(shí)間錯(cuò)誤隱蔽方法可以使用具有其它運(yùn)動(dòng)向量的塊并且可以例如在圖像等級(jí)或在像素等級(jí)中在不同的處理單元中處理。請(qǐng)注意，場(chǎng)景剪切偽像可以對(duì)于任意時(shí)間錯(cuò)誤隱蔽方法圍繞場(chǎng)景剪切出現(xiàn)。
[0034]從圖1A和IC中示出的示例中可以看到，場(chǎng)景剪切偽像對(duì)感知視頻質(zhì)量具有強(qiáng)烈負(fù)面影響。因此，為了精確預(yù)測(cè)客觀視頻質(zhì)量，重要的是在對(duì)視頻質(zhì)量建模時(shí)測(cè)量場(chǎng)景剪切偽像的效果。
[0035]為了檢測(cè)場(chǎng)景剪切偽像，首先需要檢測(cè)場(chǎng)景剪切幀是否被正確接收或者場(chǎng)景剪切圖像是否丟失?？紤]到在檢測(cè)偽像時(shí)僅解析比特流(并未重建圖像)，這是個(gè)困難問(wèn)題。當(dāng)與場(chǎng)景剪切幀對(duì)應(yīng)的壓縮數(shù)據(jù)丟失時(shí)，其變得更加困難。[0036]顯然，用于視頻質(zhì)量建模的場(chǎng)景剪切偽像檢測(cè)問(wèn)題與通常在像素域中工作并且有權(quán)使用圖像的常規(guī)場(chǎng)景剪切幀檢測(cè)問(wèn)題不同。
[0037]在圖3中示出了考慮場(chǎng)景剪切偽像的示例性視頻質(zhì)量建模方法300。將丟失數(shù)據(jù)所造成的偽像、例如在圖1A和2A中描述的偽像記做初始可見偽像。此外，還將該類型的來(lái)自場(chǎng)景中首個(gè)所接收的圖像的偽像、例如在圖1C和2B中描述的偽像分類為初始可見偽像。
[0038]如果具有初始可見偽像的塊被用作例如用于幀內(nèi)預(yù)測(cè)或幀間預(yù)測(cè)的參考，則初始可見偽像可以通過(guò)預(yù)測(cè)在空間上或時(shí)間上傳播至相同或其它圖像中的其它宏塊。這樣傳播的偽像記做所傳播的可見偽像。
[0039]在方法300中，視頻比特流在步驟310輸入并且與該比特流對(duì)應(yīng)的視頻的客觀質(zhì)量將被估計(jì)。在步驟320，計(jì)算初始可見偽像等級(jí)。初始可見偽像可以包括場(chǎng)景剪切偽像和其它偽像。初始可見偽像的等級(jí)可以根據(jù)偽像類型、幀類型和從比特流獲得的其它幀等級(jí)或MB等級(jí)特征來(lái)估計(jì)。在一個(gè)實(shí)施例中，如果在宏塊處檢測(cè)到場(chǎng)景剪切偽像，則將用于該宏塊的初始可見偽像等級(jí)設(shè)定為最聞偽像等級(jí)(即較低的質(zhì)量等級(jí))。
[0040]在步驟330，計(jì)算所傳播的偽像等級(jí)。例如，如果宏塊被標(biāo)記為具有場(chǎng)景剪切偽像，則涉及該宏塊的所有其它像素的所傳播的偽像等級(jí)也將被設(shè)定為最高偽像等級(jí)。在步驟340，可以將空間-時(shí)間偽像合并(pooling)算法用于將不同類型的偽像轉(zhuǎn)換為一個(gè)客觀M0S(平均意見得分)，其估計(jì)與輸入比特流對(duì)應(yīng)的視頻的總體可見質(zhì)量。在步驟350，輸出所估計(jì)的MOS。
[0041]圖4示出了用于場(chǎng)景剪切偽像檢測(cè)的一個(gè)示例性方法400。在步驟410處，其掃描比特流以確定用于場(chǎng)景剪切偽像的候選位置。在確定了候選位置之后，其在步驟420確定在候選位置中是否存在場(chǎng)景剪切偽像。
[0042]請(qǐng)注意，步驟420單獨(dú)地可以被用于比特流等級(jí)場(chǎng)景剪切幀檢測(cè)，例如在無(wú)包丟失的情況下。這可以被用于獲得場(chǎng)景邊界，其在確定場(chǎng)景等級(jí)特征時(shí)被需要。當(dāng)單獨(dú)地使用步驟420時(shí)，各個(gè)幀可以被看做候選場(chǎng)景剪切圖像，或者可以規(guī)定哪些幀應(yīng)被看做候選位置。
[0043]下面，更詳細(xì)地討論確定候選場(chǎng)景剪切偽像位置和檢測(cè)場(chǎng)景剪切偽像位置的步驟。
[0044]確定候選場(chǎng)景剪切偽像位置
[0045]如在圖2A和2B中討論的那樣，場(chǎng)景剪切偽像在部分接收的場(chǎng)景剪切幀處或者在涉及丟失場(chǎng)景剪切幀的幀處發(fā)生。因此，帶有或圍繞包丟失的幀可被看做潛在的場(chǎng)景剪切偽像位置。
[0046]在一個(gè)實(shí)施例中，當(dāng)解析比特流時(shí)，基于例如為RTP時(shí)間戳和MPEG-2PES時(shí)間戳的時(shí)間戳或者在壓縮比特流中的語(yǔ)法元素“frame_num”獲得對(duì)于各個(gè)幀接收的字節(jié)的數(shù)目、接收包的數(shù)目、丟失包的數(shù)目，并且還記錄所解碼的幀的幀類型。所獲得的包數(shù)目、字節(jié)數(shù)目和幀類型可以用于細(xì)化候選偽像位置確定。
[0047]下面，將用于RTP上的H.264的RFC3984用作示例性傳輸協(xié)議，示出如何確定候選場(chǎng)景剪切偽像位置。
[0048]對(duì)于每個(gè)所接收的RTP包，可以基于時(shí)間戳確定其屬于哪個(gè)視頻幀。S卩，將具有相同時(shí)間戳的視頻包看做屬于相同的視頻幀。對(duì)于部分或完全接收的視頻幀i，記錄下面的變量:
[0049](1)屬于幀i的第一所接收的RTP包的序號(hào)，記做sns (i)，
[0050](2)幀i的最后所接收的RTP包的序號(hào)，記做sne (i)，以及
[0051](3)在幀i的第一和最后所接收的RTP包之間的丟失RTP包的數(shù)目，記做n1()SJi)。
[0052]序號(hào)在RTP協(xié)議首部中定義，并且其對(duì)于每個(gè)RTP包增加I。因此，nloss(i)基于序號(hào)的不連續(xù)性通過(guò)計(jì)數(shù)序號(hào)在sns(i)和8~(1)之間的丟失RTP包的數(shù)目來(lái)計(jì)算。計(jì)算nloss(i)的示例在圖5中示出。在該示例中，sns(i) = 105并且sne(i) = 110。在幀i的起始包(帶有序號(hào)105)和結(jié)束包(帶有序號(hào)110)之間，帶有序號(hào)107和109的包丟失。因此，在該示例中nloss(i) = 2。
[0053]定義參數(shù)pk_num(i)以估計(jì)對(duì)于幀i傳送的包的數(shù)目，并且其可以計(jì)算為
[0054]pk_num(i) = [sne (i) _sne (i_k) ]/k (I)
[0055]其中，幀1-k是緊接在幀i之前的幀(即，在幀i和i_k之間的其它幀丟失)。對(duì)于具有包丟失或者丟失了緊接在前的(多個(gè))幀的幀i，通過(guò)對(duì)長(zhǎng)度為N(例如N = 6)的滑窗中的之前的(非I)幀的pk_num求平均來(lái)計(jì)算參數(shù)pk_num_avg(i),即,將pk_num_avg(i)定義為在當(dāng)前幀之前傳送的包的平均(估計(jì))數(shù)目:
[0056]
【權(quán)利要求】
1.一種方法，包括: 訪問(wèn)包括所編碼的圖像的比特流；以及 在不解碼所述比特流來(lái)獲取像素信息的情況下利用來(lái)自所述比特流的信息確定(1080)所述比特流中的場(chǎng)景剪切圖像。
2.根據(jù)權(quán)利要求1所述的方法，其中所述確定包括: 響應(yīng)于在來(lái)自所述比特流的圖像集合之間的運(yùn)動(dòng)向量、幀尺寸和預(yù)測(cè)殘差中的至少一個(gè)，確定(1020，1050, 1065)各個(gè)差度量，其中所述圖像集合包括候選場(chǎng)景剪切圖像、在所述候選場(chǎng)景剪切圖像之前的圖像以及在所述候選場(chǎng)景剪切圖像之后的圖像中的至少一個(gè)；以及 如果所述差度量中的一個(gè)或多個(gè)超過(guò)其各自的預(yù)定閾值(1025，1060, 1070)，則確定(1080)所述候選場(chǎng)景剪切圖像是場(chǎng)景剪切圖像。
3.根據(jù)權(quán)利要求2所述的方法，確定各個(gè)差度量還包括: 計(jì)算(1030)與所述圖像集合的圖像的塊位置相對(duì)應(yīng)的預(yù)測(cè)殘差能量因子；以及 利用所述預(yù)測(cè)殘差能量因子計(jì)算(1040)用于所述塊位置的差度量，其中，該用于所述塊位置的差度量被用于計(jì)算用于所述候選場(chǎng)景剪切圖像的差度量。
4.根據(jù)權(quán)利要求 2所述的方法，還包括: 如果用于幀內(nèi)圖像中的至少一個(gè)塊的壓縮數(shù)據(jù)丟失(730)，則選擇(735，780)該幀內(nèi)圖像作為所述候選場(chǎng)景剪切圖像。
5.根據(jù)權(quán)利要求4所述的方法，還包括: 確定所述場(chǎng)景剪切圖像中的至少一個(gè)塊具有場(chǎng)景剪切偽像。
6.根據(jù)權(quán)利要求5所述的方法，還包括: 將最低質(zhì)量等級(jí)分配給被確定為具有所述場(chǎng)景剪切偽像的所述至少一個(gè)塊。
7.根據(jù)權(quán)利要求2所述的方法，還包括: 將涉及丟失圖像的圖像選擇為所述候選場(chǎng)景剪切圖像。
8.根據(jù)權(quán)利要求7所述的方法，還包括: 確定(740)圖像的所傳送的包的估計(jì)數(shù)目以及在該圖像之前的圖像的所傳送的包的平均數(shù)目，其中，當(dāng)在所述圖像的所傳送的包的估計(jì)數(shù)目與在所述圖像之前的圖像的所傳送的包的平均數(shù)目之間的比率超過(guò)預(yù)定閾值時(shí)(750，780)，所述圖像被選擇為所述候選場(chǎng)景剪切圖像。
9.根據(jù)權(quán)利要求7所述的方法，還包括: 確定(760)圖像的所傳送的字節(jié)的估計(jì)數(shù)目以及在該圖像之前的圖像的所傳送的字節(jié)的平均數(shù)目，其中，當(dāng)在所述圖像的所傳送的字節(jié)的估計(jì)數(shù)目與在所述圖像之前的圖像的所傳送的字節(jié)的平均數(shù)目之間的比率超過(guò)預(yù)定閾值時(shí)(770，780)，所述圖像被選擇為所述候選場(chǎng)景剪切圖像。
10.根據(jù)權(quán)利要求9所述的方法，其中，所述圖像的所傳送的字節(jié)的估計(jì)數(shù)目是響應(yīng)于所述圖像的所接收的字節(jié)的數(shù)目和丟失字節(jié)的估計(jì)數(shù)目來(lái)確定的。
11.根據(jù)權(quán)利要求7所述的方法，還包括: 當(dāng)所述場(chǎng)景剪切圖像中的塊涉及丟失圖像時(shí)，確定該塊具有場(chǎng)景剪切偽像。
12.根據(jù)權(quán)利要求11所述的方法，還包括:將最低質(zhì)量等級(jí)分配給所述塊，其中所述塊被確定為具有場(chǎng)景剪切偽像。
13.根據(jù)權(quán)利要求2所述的方法，其中，所述圖像集合中的圖像是P-圖像(1010)。
14.一種設(shè)備，包括: 解碼器(210)，其訪問(wèn)包括所編碼的圖像的比特流；以及 場(chǎng)景剪切偽像檢測(cè)器(1230)，其在不解碼所述比特流以獲取像素信息的情況下利用來(lái)自所述比特流的信息確定所述比特流中的場(chǎng)景剪切圖像。
15.根據(jù)權(quán)利要求14所述的設(shè)備，其中，所述解碼器(1210)對(duì)于來(lái)自所述比特流的圖像集合的運(yùn)動(dòng)向量、幀尺寸和預(yù)測(cè)殘差中的至少一個(gè)進(jìn)行解碼，其中，所述圖像集合包括候選場(chǎng)景剪切圖像、在所述候選場(chǎng)景剪切圖像之前的圖像和在所述候選場(chǎng)景剪切圖像之后的圖像中的至少一個(gè)，并且其中，所述場(chǎng)景剪切偽像檢測(cè)器(1230)響應(yīng)于幀尺寸、預(yù)測(cè)殘差和運(yùn)動(dòng)向量中的至少一個(gè)來(lái)確定用于所述候選場(chǎng)景剪切圖像的各個(gè)差度量，并且如果所述差度量中的一個(gè)或多個(gè)超過(guò)其各自的預(yù)定閾值，則確定所述候選場(chǎng)景剪切圖像是場(chǎng)景剪切圖像。
16.根據(jù)權(quán)利要求15所述的設(shè)備，還包括: 候選場(chǎng)景剪切偽像檢測(cè)器(1220)，如果用于幀內(nèi)圖像中的至少一個(gè)塊的壓縮數(shù)據(jù)丟失，則該候選場(chǎng)景剪切偽像檢測(cè)器將該幀內(nèi)圖像選擇為候選場(chǎng)景剪切圖像。
17.根據(jù)權(quán)利要求16所述的設(shè)備，其中，所述場(chǎng)景剪切偽像檢測(cè)器(1230)確定在所述場(chǎng)景剪切圖像中的所述 至少一個(gè)塊具有場(chǎng)景剪切偽像。
18.根據(jù)權(quán)利要求17所述的設(shè)備，還包括: 質(zhì)量預(yù)測(cè)器(1240)，其將最低質(zhì)量等級(jí)分配給被確定為具有場(chǎng)景剪切偽像的所述至少一個(gè)塊。
19.根據(jù)權(quán)利要求15所述的設(shè)備，還包括: 候選場(chǎng)景剪切偽像檢測(cè)器(1220)，其將涉及丟失圖像的圖像選擇為所述候選場(chǎng)景剪切圖像。
20.根據(jù)權(quán)利要求19所述的設(shè)備，其中，所述候選場(chǎng)景剪切偽像檢測(cè)器(1220)確定圖像的所傳送的包的估計(jì)數(shù)目和在所述圖像之前的圖像的所傳送的包的平均數(shù)目，并且當(dāng)在所述圖像的所傳送的包的估計(jì)數(shù)目與所述圖像之前的圖像的所傳送的包的平均數(shù)目之間的比率超過(guò)預(yù)定閾值時(shí)將所述圖像選擇為所述候選場(chǎng)景剪切圖像。
21.根據(jù)權(quán)利要求19所述的設(shè)備，其中，所述候選場(chǎng)景剪切偽像檢測(cè)器(1220)確定圖像的所傳送的字節(jié)的估計(jì)數(shù)目和在所述圖像之前的圖像的所傳送的字節(jié)的平均數(shù)目，并且當(dāng)在所述圖像的所傳送的字節(jié)的估計(jì)數(shù)目與所述圖像之前的圖像的所傳送的字節(jié)的平均數(shù)目之間的比率超過(guò)預(yù)定閾值時(shí)將所述圖像選擇為所述候選場(chǎng)景剪切圖像。
22.根據(jù)權(quán)利要求21所述的設(shè)備，其中，所述候選場(chǎng)景剪切偽像檢測(cè)器(1220)響應(yīng)于所述圖像的所接收的字節(jié)的數(shù)目和丟失字節(jié)的估計(jì)數(shù)目來(lái)確定所述圖像的所傳送的字節(jié)的估計(jì)數(shù)目。
23.根據(jù)權(quán)利要求19所述的設(shè)備，其中，所述場(chǎng)景剪切偽像檢測(cè)器(1230)當(dāng)所述場(chǎng)景剪切圖像中的塊涉及丟失圖像時(shí)確定該塊具有場(chǎng)景剪切偽像。
24.根據(jù)權(quán)利要求23所述的設(shè)備，還包括: 質(zhì)量預(yù)測(cè)器(1240)，其將最低質(zhì)量等級(jí)分配給所述塊，其中所述塊被確定為具有場(chǎng)景剪切偽像。
25.—種處理器可讀的介質(zhì)，其具有存儲(chǔ)于其上的指令，用于使得一個(gè)或多個(gè)處理器共同地進(jìn)行: 訪問(wèn)包括所編碼的圖像的比特流；以及 在不解碼所述比特流以獲取像素信息的情況下利 用來(lái)自所述比特流的信息確定(1080)所述比特流中的場(chǎng)景剪切圖像。
【文檔編號(hào)】H04N19/89GK103988501SQ201180075069
【公開日】2014年8月13日 申請(qǐng)日期:2011年11月25日 優(yōu)先權(quán)日:2011年11月25日
【發(fā)明者】廖寧, 陳志波, 張帆, 謝凱 申請(qǐng)人:湯姆遜許可公司