專利名稱：用于傳送視頻信息的系統(tǒng)和方法
技術(shù)領(lǐng)域：
本發(fā)明的實(shí)施例涉及視頻編碼和傳送領(lǐng)域，具體地涉及用于立體成像的三維(3D)(或者立體視圖)視頻的編碼和傳送系統(tǒng)和方法。
背景技術(shù)：
對于在移動(dòng)設(shè)備上高質(zhì)量視頻成像的需求持續(xù)增長。消費(fèi)者現(xiàn)在期待他們的移動(dòng)設(shè)備生成復(fù)雜的圖形并且以適合于令人滿意的觀看的速率來遞送視頻影像。此外，許多消費(fèi)者期待可與他們的家庭觀看體驗(yàn)相媲美的來自移動(dòng)設(shè)備顯示器的能力。
例如，對于移動(dòng)設(shè)備顯示器上3D視頻的需求與日俱增。在典型的3D視頻生成中，可以對兩個(gè)單獨(dú)視頻流進(jìn)行編碼，一個(gè)針對觀看者的左眼而另一個(gè)針對觀看者的右眼。這兩個(gè)視頻流可以被組合形成3D視頻流。然而，所得的3D視頻流的比特速率通常為普通二維(2D)視頻流的比特速率的兩倍，因?yàn)?D視頻流由兩個(gè)單獨(dú)2D視頻流構(gòu)成。因此，對于3D視頻的數(shù)據(jù)處理要求通常是難以承受的并且經(jīng)常造成移動(dòng)設(shè)備上的不良視頻性能。

發(fā)明內(nèi)容
根據(jù)本發(fā)明的實(shí)施例，一種用于傳送視頻流的方法可以包括獲得多個(gè)視頻流；對多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣；以及將經(jīng)二次采樣的至少一個(gè)視頻流傳送到顯示器系統(tǒng)。該多個(gè)視頻流可以包括第一視頻流和第二視頻流。對多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣可以包括對第一視頻流和第二視頻流進(jìn)行二次采樣。另外，對多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣可以包括僅對第一視頻流或者僅對第二視頻流進(jìn)行二次采樣。二次采樣可以包括水平二次采樣。然而，實(shí)際的二次采樣速率并不關(guān)鍵并且可以根據(jù)本發(fā)明的各種實(shí)施例而變化。
顯示器系統(tǒng)可以包括顯示器電路和顯示器。該方法還可以包括組合經(jīng)二次采樣的第一視頻流和經(jīng)二次采樣的第二視頻流以形成三維視頻流。該方法還可以包括將尚未經(jīng)二次采樣的其余視頻流傳送到顯示器系統(tǒng)。顯示器可以例如是三維顯示器，比如視差柵格顯示器或者雙凸透鏡顯示器，并且可以被設(shè)置于移動(dòng)設(shè)備上。
多個(gè)視頻流可以被安排成單獨(dú)視頻流、合成視頻流或者交織視頻流。該方法還可以包括將經(jīng)二次采樣的至少一個(gè)視頻流的映射傳送到顯示器系統(tǒng)，其中傳送映射包括通過補(bǔ)充增強(qiáng)信息消息和/或畫面次序計(jì)數(shù)標(biāo)記來傳送映射。該方法還可以包括將與經(jīng)二次采樣的至少一個(gè)視頻流有關(guān)的二次采樣信息傳送到顯示器系統(tǒng)。傳送二次采樣信息可以包括通過補(bǔ)充增強(qiáng)信息消息來傳送二次采樣信息。補(bǔ)充增強(qiáng)信息消息可以隨經(jīng)二次采樣的至少一個(gè)視頻流一起傳送。二次采樣信息可以包括兩個(gè)一比特補(bǔ)充增強(qiáng)信息消息。
根據(jù)本發(fā)明的一個(gè)實(shí)施例，一種用于獲得和呈現(xiàn)視頻流的設(shè)備可以包括用于存儲多個(gè)視頻流的存儲單元；以及用于從存儲單元取回多個(gè)視頻流的處理器。處理器可以被配置用以對多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣并且將經(jīng)二次采樣的至少一個(gè)視頻流傳送到顯示器系統(tǒng)。多個(gè)視頻流可以包括第一視頻流和第二視頻流。
處理器可以被配置用以對第一視頻流和第二視頻流進(jìn)行二次采樣并且水平地進(jìn)行二次采樣。處理器可以被配置用以在等于視頻流數(shù)目的速率進(jìn)行二次采樣。
顯示器系統(tǒng)可以包括顯示器電路和顯示器。顯示器系統(tǒng)可以被配置用以組合經(jīng)二次采樣的第一視頻流和經(jīng)二次采樣的第二視頻流以形成三維視頻流。顯示器可以例如是三維顯示器，比如視差柵格顯示器，并且可以設(shè)置于移動(dòng)設(shè)備上。
處理器還可以例如被配置用以比如通過補(bǔ)充增強(qiáng)信息消息將經(jīng)二次采樣的至少一個(gè)視頻流的映射傳送到顯示器系統(tǒng)。處理器還可以被配置用以將畫面次序計(jì)數(shù)標(biāo)記傳送到顯示器系統(tǒng)。處理器還可以例如被配置用以比如通過補(bǔ)充增強(qiáng)信息消息將與經(jīng)二次采樣的至少一個(gè)視頻流有關(guān)的二次采樣信息傳送到顯示器系統(tǒng)。處理器還可以被配置用以隨經(jīng)二次采樣的至少一個(gè)視頻流一起傳送補(bǔ)充增強(qiáng)信息消息。二次采樣信息可以包括兩個(gè)一比特補(bǔ)充增強(qiáng)信息消息。
多個(gè)視頻流可以包括第一視頻流和第二視頻流。處理系統(tǒng)可以被配置用以對第一視頻流和第二視頻流進(jìn)行二次采樣。處理系統(tǒng)可以被配置用以組合經(jīng)二次采樣的第一視頻流和經(jīng)二次采樣的第二視頻流以形成三維視頻流。
本發(fā)明的實(shí)施例可以包括一種包括計(jì)算機(jī)可用介質(zhì)的計(jì)算機(jī)程序產(chǎn)品，該計(jì)算機(jī)可用介質(zhì)具有在其上記錄的計(jì)算機(jī)程序邏輯，該計(jì)算機(jī)程序邏輯用于使得處理器能夠傳送視頻流，其中該計(jì)算機(jī)程序邏輯可以包括獲得過程，使得處理器能夠傳送多個(gè)視頻流；二次采樣過程，使得處理器能夠?qū)Χ鄠€(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣；以及傳送過程，使得處理器能夠?qū)⒔?jīng)二次采樣的至少一個(gè)視頻流傳送到顯示器系統(tǒng)。多個(gè)視頻流可以包括第一視頻流和第二視頻流。計(jì)算機(jī)程序邏輯也可以包括組合過程，使得處理器能夠使經(jīng)二次采樣的第一視頻流和經(jīng)二次采樣的第二視頻流組合形成三維視頻流。


將參照附圖進(jìn)行本發(fā)明實(shí)施例的具體描述，在附圖中相似的標(biāo)號表示了數(shù)幅圖中的對應(yīng)部分。
圖1示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的3D觀看系統(tǒng)的示意圖；圖2示出了根據(jù)本發(fā)明一個(gè)實(shí)施例用以生成3D視頻圖像的方法的流程圖；圖3a示出了根據(jù)本發(fā)明一個(gè)實(shí)施例安排用于單獨(dú)編碼的畫面；圖3b示出了根據(jù)本發(fā)明一個(gè)實(shí)施例安排用于單獨(dú)編碼的畫面；圖3c示出了根據(jù)本發(fā)明一個(gè)實(shí)施例安排用于合成編碼的畫面；
圖3d示出了根據(jù)本發(fā)明一個(gè)實(shí)施例安排用于交織編碼的畫面；圖4a示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的全分辨率視頻流；圖4b示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的全分辨率視頻流；圖4c示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的半分辨率視頻流；圖4d示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的半分辨率視頻流；圖4e示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的組合視頻流。
具體實(shí)施例方式
在優(yōu)選實(shí)施例的以下描述中參照了附圖，這些附圖形成了該描述的部分，并且在其中示例性地示出了可以在其中實(shí)踐本發(fā)明的具體實(shí)施例。應(yīng)當(dāng)理解，在不脫離本發(fā)明優(yōu)選實(shí)施例的范圍的情況下可以利用其它實(shí)施例并且可以做出結(jié)構(gòu)上的改變。
本發(fā)明的實(shí)施例可以使用于各種應(yīng)用中。例如，本發(fā)明的實(shí)施例可以用于立體3D視頻編碼和傳送。本發(fā)明的實(shí)施例也可以與各種顯示器技術(shù)一起使用。雖然以下討論結(jié)合了視差柵格顯示器來描述本發(fā)明的實(shí)施例，但是這樣的討論僅僅作為例子而不應(yīng)當(dāng)被視為具有限制性的意義。
此外，本發(fā)明的實(shí)施例可以與諸如移動(dòng)設(shè)備、無線設(shè)備、家庭娛樂設(shè)備等各種設(shè)備一起使用。例如，本發(fā)明的實(shí)施例可以與如下移動(dòng)電話一起使用，這些移動(dòng)電話具有數(shù)據(jù)存儲能力如存儲器、例如一個(gè)或多個(gè)處理器、關(guān)聯(lián)電路、顯示器等。
本發(fā)明的實(shí)施例可以用各種方式生成3D視頻流。例如，根據(jù)本發(fā)明的一個(gè)實(shí)施例，為了生成3D視頻，可以對兩個(gè)單獨(dú)視頻流進(jìn)行編碼，一個(gè)針對觀看者的左眼而一個(gè)針對觀看者的右眼。通過將預(yù)定針對左眼的視頻流和預(yù)定針對右眼的視頻流顯示成屏幕或者顯示器上的立體圖像對，每只眼睛可以僅看到預(yù)定針對該眼的視頻幀或者流。觀看者的大腦然后可以組合視頻流，使觀看者將視頻流感知成3D表示。
圖1示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的3D觀看系統(tǒng)10的示意圖。圖1的3D觀看系統(tǒng)10包括但不限于為觀看者的左眼18a和右眼18b生成圖像的顯示器系統(tǒng)12。對于到觀看者眼睛的光路的控制可以用各種方式實(shí)施。例如，可以例如利用掩模(比如在視差柵格顯示器中)或者例如利用透鏡(比如在雙凸透鏡顯示器中)來實(shí)施對光路的控制。在圖1中，顯示器系統(tǒng)12顯示視頻流16并且包括視差柵格14和一個(gè)或多個(gè)光路15。在圖1中，通過控制從顯示器系統(tǒng)12到觀看者眼睛的光路15來生成3D效應(yīng)，使得略微不同的圖像到達(dá)觀看者的左眼18a和右眼18b。視差柵格14控制光路15，并且分離顯示器系統(tǒng)12的圖像，使得不同的圖像到達(dá)左眼和右眼；因此，左眼18a僅看到預(yù)定針對該眼的圖像而右眼18b僅看到預(yù)定針對該眼的圖像。通過將預(yù)定針對左眼18a的圖像和預(yù)定針對右眼18b的圖像顯示成屏幕上的立體圖像對，每只眼睛僅看到預(yù)定針對該眼的圖像，而大腦組合圖像并且將它們感知成3D表示。因此，視差柵格顯示器不需要專門的觀看鏡用來生成3D圖像。
圖2示出了根據(jù)本發(fā)明的一個(gè)實(shí)施例用以生成3D視頻圖像的方法的流程圖。在圖2中示出的方法可以與各種顯示器技術(shù)一起使用，例如與比如在圖1中示出的視差顯示器一起使用。在步驟20處，獲得視頻流?？梢詮脑谄渖显O(shè)置有顯示器的設(shè)備內(nèi)的各種位置獲得視頻流。例如，如果在其上使用本發(fā)明實(shí)施例的設(shè)備是具有顯示器的移動(dòng)設(shè)備，則可以由處理器從存儲器、視頻編碼器等獲得視頻流。
視頻流可以用各種配置來獲得。圖3a-圖3d示出了可以在其中根據(jù)本發(fā)明的實(shí)施例對視頻幀或者畫面進(jìn)行編碼的各種配置。圖3a和3b示出了可以單獨(dú)地進(jìn)行編碼以形成兩個(gè)單獨(dú)2D視頻流的兩個(gè)畫面。圖3c將圖3a和3b的兩個(gè)畫面表示為分組在一起以形成合成畫面的同步畫面。圖3c的編碼可以減少比特流處理的復(fù)雜度。
圖3d將圖3a和3b的兩個(gè)畫面表示為交織幀。在圖3d中，圖3a和3b的畫面已經(jīng)被交織，其中圖3a的畫面是頂場而圖3b的畫面是底場。圖3d的交織畫面可以用各種方式來編碼，例如利用比如ITU-TH.264視頻編碼標(biāo)準(zhǔn)的方法來編碼。圖3d的編碼可以獲得經(jīng)改進(jìn)的壓縮和比特流處理。
回到圖2，一旦已經(jīng)獲得視頻流，可以在步驟22中對視頻流進(jìn)行二次采樣。在視差柵格顯示器的情況下，由于視差柵格有效地阻止視頻流中特定像素的視圖到達(dá)觀看者的右眼或者左眼，所以可以從視頻流中消除所阻止的像素。對視頻流進(jìn)行二次采樣可以從流中消除像素。無論幀在3D流中如何安排都可以執(zhí)行二次采樣。在視差柵格顯示器的情況下，由于僅僅需要半分辨率的左和右視圖幀以便形成經(jīng)組合的立體視頻幀，所以不需要傳送全分辨率的流。通過對視頻流中每隔一幀水平地進(jìn)行二次采樣可以使視頻流的比特速率和像素處理速率減半。
圖4a-圖4d示出了根據(jù)本發(fā)明一個(gè)實(shí)施例的視頻流二次采樣的框圖。圖4a示出了第一視頻流而圖4b示出了第二視頻流。在圖4a和圖4b中的每個(gè)視頻流都是全分辨率流。在圖4a和圖4b的例子中，每個(gè)視頻流包括64個(gè)像素。
圖4c和圖4d示出了具有減半水平分辨率的幀的視頻流。圖4c和圖4d中的視頻流分別地通過對圖4a和圖4b中的視頻流進(jìn)行二次采樣來獲得。因此，在圖4c和圖4d的例子中，每個(gè)視頻流包括32幀，即分別地是圖4a和圖4b中視頻流的幀數(shù)目的一半。
根據(jù)本發(fā)明的實(shí)施例，也可以組合經(jīng)二次采樣的視頻流以形成用于3D觀看的視頻流。圖4d示出了圖4c和圖4d的經(jīng)二次采樣的視頻流組合形成用于3D觀看的視頻流?？梢酝ㄟ^交替地組合圖4c和圖4d中減半水平分辨率幀的每幀來形成圖4e例子中的組合視頻流。正如下文將要具體說明的，圖4e例子中的組合視頻流可以傳送到3D顯示器系統(tǒng)。
回到圖2，一旦已經(jīng)對原視頻流進(jìn)行二次采樣或者進(jìn)行二次采樣并且組合，視頻流可以在步驟24傳送到顯示器系統(tǒng)。根據(jù)本發(fā)明的實(shí)施例，為便于以3D格式在顯示器上呈現(xiàn)經(jīng)二次采樣的組合視頻流，可以利用二次采樣信息將視頻流的每幀映射和傳送到顯示器系統(tǒng)。
二次采樣信息的映射和供給可以用各種方式來實(shí)施。例如，根據(jù)本發(fā)明的一個(gè)實(shí)施例，在ITU-T H.264視頻編碼標(biāo)準(zhǔn)中可用的補(bǔ)充增強(qiáng)信息(SEI)消息可以在視頻流中用來攜帶映射和二次采樣信息。
根據(jù)本發(fā)明的一個(gè)實(shí)施例，可以利用單個(gè)SEI消息和對幀或者畫面的編號來實(shí)施幀的映射以便左眼和右眼交替觀看。例如可以通過使用ITU-T H.264標(biāo)準(zhǔn)中的畫面次序計(jì)數(shù)(POC)標(biāo)記對畫面進(jìn)行編號。SEI消息然后可以隨同視頻流一起發(fā)送以便指示具有偶數(shù)和奇數(shù)POC標(biāo)記的畫面如何映射到左和右視圖。例如，根據(jù)本發(fā)明的一個(gè)實(shí)施例，1比特消息可以稱為“even_frame_is_left_view_flag”并且可以解釋如下值“1”具有偶數(shù)POC標(biāo)記的所有畫面都針對左視圖具有奇數(shù)POC標(biāo)記的所有畫面都針對右視圖；值“0”具有偶數(shù)POC標(biāo)記的所有畫面都針對右視圖具有奇數(shù)POC標(biāo)記的所有畫面都針對左視圖。
二次采樣信息的發(fā)送也可以用各種方式來實(shí)施。例如，horizonally_sub_sampled_frames_flag可以用來發(fā)送二次采樣信息。根據(jù)本發(fā)明的一個(gè)實(shí)施例，如果horizonally_sub_sampled_frames_flag等于“1”，則可以按照因子二對一個(gè)或多個(gè)輸入幀水平地進(jìn)行二次采樣。如果horizonally_sub_sampled_frames_flag等于“1”并且左和右視圖的幀尺寸相等，則可以對來自兩個(gè)視圖的幀進(jìn)行二次采樣。如果horizonally_sub_sampled_frames_flag等于“1”并且左和右視圖的幀尺寸不相等，則左視圖或者右視圖的幀可以具有全分辨率，而另一視圖可以按照例如因子二進(jìn)行二次采樣。
另外，具有可變幀尺寸的3D視頻流也可以呈現(xiàn)在2D顯示器上，而不用通過從流中選擇全分辨率幀加以放大。例如，如果horizonally_sub_sampled_frames_flag等于“0”，則不對幀進(jìn)行二次采樣。
此外，根據(jù)本發(fā)明的實(shí)施例，可以實(shí)施不同的二次采樣組合。例如，二次采樣信息可以利用以下兩個(gè)1比特SEI消息來實(shí)施horizonally_sub_sampled_left_view值是“1”左視圖在水平方向上二次采樣；horizonally_sub_sampled_right_view值是“1”右視圖在水平方向上二次采樣；根據(jù)本發(fā)明的實(shí)施例，將二次采樣信息分離成兩個(gè)消息允許了在用于2D和3D顯示器的呈現(xiàn)準(zhǔn)確度之間的折衷。例如，通過對左和右視圖進(jìn)行二次采樣，可以在使用視差柵格技術(shù)的顯示器中實(shí)現(xiàn)3D呈現(xiàn)所需要的比特速率。作為另一例子，通過僅對一個(gè)視頻流進(jìn)行二次采樣，可以用全準(zhǔn)確度在2D顯示器上呈現(xiàn)另一視頻流，但是仍然可以為3D顯示器獲得比特速率和處理速率的節(jié)省，因?yàn)橐粋€(gè)視頻流已經(jīng)過二次采樣。如果不對視頻流進(jìn)行二次采樣，則可以用全準(zhǔn)確度在2D顯示器上呈現(xiàn)任一視頻流。
例如，如果移動(dòng)設(shè)備包括2D顯示器，則可以從3D視頻流中解碼左視頻流或者右視頻流中的僅一個(gè)視頻流并且在2D顯示器上顯示該視頻流。如果左和右視頻流都已經(jīng)過二次采樣，則視頻流的水平上采樣在呈現(xiàn)于2D顯示器上之前可能是合乎需要的。如果僅一個(gè)視頻流已經(jīng)過二次采樣，則可以用全分辨率在2D顯示器上呈現(xiàn)尚未二次采樣的視頻流。
盡管已經(jīng)示出和描述了本發(fā)明的特定實(shí)施例，但是對于本領(lǐng)域技術(shù)人員不言而喻，本發(fā)明不限于所示和所述的特定實(shí)施例，而且在不脫離所附權(quán)利要求書的精神和范圍的情況下可以做出變化和修改。
權(quán)利要求
1.一種用于傳送視頻流的方法，包括獲得多個(gè)視頻流；對所述多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣；以及將經(jīng)二次采樣的所述至少一個(gè)視頻流傳送到顯示器系統(tǒng)。
2.根據(jù)權(quán)利要求1所述的方法，其中所述多個(gè)視頻流包括第一視頻流和第二視頻流。
3.根據(jù)權(quán)利要求2所述的方法，其中對所述多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣包括對所述第一視頻流進(jìn)行二次采樣和對所述第二視頻流進(jìn)行二次采樣。
4.根據(jù)權(quán)利要求2所述的方法，其中對所述多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣包括僅對所述第一視頻流進(jìn)行二次采樣。
5.根據(jù)權(quán)利要求2所述的方法，其中對所述多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣包括僅對所述第二視頻流進(jìn)行二次采樣。
6.根據(jù)權(quán)利要求1所述的方法，其中所述二次采樣包括水平二次采樣。
7.根據(jù)權(quán)利要求1所述的方法，其中二次采樣的比特速率是所述多個(gè)視頻流的比特速率的一半。
8.根據(jù)權(quán)利要求1所述的方法，其中二次采樣的比特速率是所述多個(gè)視頻流的像素處理速率的一半。
9.根據(jù)權(quán)利要求1所述的方法，其中獲得所述多個(gè)視頻流包括從視頻編碼器獲得所述多個(gè)視頻流。
10.根據(jù)權(quán)利要求1所述的方法，其中所述顯示器系統(tǒng)包括顯示器電路和顯示器。
11.根據(jù)權(quán)利要求10所述的方法，還包括組合經(jīng)二次采樣的所述第一視頻流和經(jīng)二次采樣的所述第二視頻流以形成三維視頻流。
12.根據(jù)權(quán)利要求10所述的方法，還包括將尚未經(jīng)二次采樣的視頻流傳送到所述顯示器系統(tǒng)。
13.根據(jù)權(quán)利要求10所述的方法，其中所述顯示器是三維顯示器。
14.根據(jù)權(quán)利要求10所述的方法，其中所述顯示器是視差柵格顯示器。
15.根據(jù)權(quán)利要求10所述的方法，其中所述顯示器是雙凸透鏡顯示器。
16.根據(jù)權(quán)利要求10所述的方法，其中所述顯示器設(shè)置于移動(dòng)設(shè)備上。
17.根據(jù)權(quán)利要求1所述的方法，其中所述多個(gè)視頻流被安排成單獨(dú)視頻流。
18.根據(jù)權(quán)利要求1所述的方法，其中所述多個(gè)視頻流被安排成合成視頻流。
19.根據(jù)權(quán)利要求1所述的方法，其中所述多個(gè)視頻流被安排成交織視頻流。
20.根據(jù)權(quán)利要求1所述的方法，還包括將經(jīng)二次采樣的所述至少一個(gè)視頻流的映射傳送到所述顯示器系統(tǒng)。
21.根據(jù)權(quán)利要求20所述的方法，其中傳送映射包括通過補(bǔ)充增強(qiáng)信息消息來傳送映射。
22.根據(jù)權(quán)利要求21所述的方法，其中傳送映射還包括傳送畫面次序計(jì)數(shù)標(biāo)記。
23.根據(jù)權(quán)利要求20所述的方法，還包括將與經(jīng)二次采樣的所述至少一個(gè)視頻流有關(guān)的二次采樣信息傳送到所述顯示器系統(tǒng)。
24.根據(jù)權(quán)利要求23所述的方法，其中傳送二次采樣信息包括通過補(bǔ)充增強(qiáng)信息消息來傳送二次采樣信息。
25.根據(jù)權(quán)利要求24所述的方法，其中所述補(bǔ)充增強(qiáng)信息消息隨經(jīng)二次采樣的所述至少一個(gè)視頻流一起傳送。
26.根據(jù)權(quán)利要求23所述的方法，其中所述二次采樣信息包括兩個(gè)一比特補(bǔ)充增強(qiáng)信息消息。
27.根據(jù)權(quán)利要求24所述的方法，其中所述補(bǔ)充增強(qiáng)信息消息指示了經(jīng)二次采樣的所述至少一個(gè)視頻流為水平地二次采樣的。
28.根據(jù)權(quán)利要求24所述的方法，其中所述補(bǔ)充增強(qiáng)信息消息在經(jīng)二次采樣的所述至少一個(gè)視頻流的第一視圖的幀尺寸與經(jīng)二次采樣的所述至少一個(gè)視頻流的第二視圖的幀尺寸相等時(shí)指示了所述第一視圖和所述第二視圖都按照因子二水平地進(jìn)行二次采樣。
29.根據(jù)權(quán)利要求24所述的方法，其中所述補(bǔ)充增強(qiáng)信息消息在經(jīng)二次采樣的所述至少一個(gè)視頻流的第一視圖的幀尺寸與經(jīng)二次采樣的所述至少一個(gè)視頻流的第二視圖的幀尺寸不相等時(shí)指示了僅有所述第一視圖或者僅有所述第二視圖按照因子二水平地進(jìn)行二次采樣。
30.一種用于獲得并且傳送視頻流的設(shè)備，包括用于存儲多個(gè)視頻流的存儲單元；以及用于從所述存儲單元取回所述多個(gè)視頻流的處理器，其中所述處理器被配置用以對所述多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣；以及將經(jīng)二次采樣的所述至少一個(gè)視頻流傳送到顯示器系統(tǒng)。
31.根據(jù)權(quán)利要求30所述的設(shè)備，其中所述多個(gè)視頻流包括第一視頻流和第二視頻流。
32.根據(jù)權(quán)利要求31所述的設(shè)備，其中所述處理器被配置用以對所述第一視頻流和所述第二視頻流進(jìn)行二次采樣。
33.根據(jù)權(quán)利要求30所述的設(shè)備，其中所述處理器被配置用以水平地進(jìn)行二次采樣。
34.根據(jù)權(quán)利要求30所述的設(shè)備，其中所述處理器被配置用以以如下速率進(jìn)行二次采樣，所述速率是所述多個(gè)視頻流的比特速率的一半。
35.根據(jù)權(quán)利要求30所述的設(shè)備，其中所述處理器被配置用以以如下速率進(jìn)行二次采樣，所述速率是所述多個(gè)視頻流的像素處理速率的一半。
36.根據(jù)權(quán)利要求30所述的設(shè)備，其中所述顯示器系統(tǒng)包括顯示器電路和顯示器。
37.根據(jù)權(quán)利要求30所述的設(shè)備，其中所述顯示器系統(tǒng)被配置用以組合經(jīng)二次采樣的所述第一視頻流和經(jīng)二次采樣的所述第二視頻流以形成三維視頻流。
38.根據(jù)權(quán)利要求36所述的設(shè)備，其中所述顯示器是三維顯示器。
39.根據(jù)權(quán)利要求36所述的設(shè)備，其中所述顯示器是視差柵格顯示器。
40.根據(jù)權(quán)利要求36所述的設(shè)備，其中所述顯示器是雙凸透鏡顯示器。
41.根據(jù)權(quán)利要求36所述的設(shè)備，其中所述顯示器設(shè)置于移動(dòng)設(shè)備上。
42.根據(jù)權(quán)利要求30所述的設(shè)備，其中所述處理器還被配置用以將經(jīng)二次采樣的所述至少一個(gè)視頻流的映射傳送到所述顯示器系統(tǒng)。
43.根據(jù)權(quán)利要求42所述的設(shè)備，其中所述處理器還被配置用以通過補(bǔ)充增強(qiáng)信息消息來傳送映射。
44.根據(jù)權(quán)利要求43所述的設(shè)備，其中所述處理器還被配置用以將畫面次序計(jì)數(shù)標(biāo)記傳送到所述顯示器系統(tǒng)。
45.根據(jù)權(quán)利要求42所述的設(shè)備，其中所述處理器還被配置用以將與經(jīng)二次采樣的所述至少一個(gè)視頻流有關(guān)的二次采樣信息傳送到所述顯示器系統(tǒng)。
46.根據(jù)權(quán)利要求43所述的設(shè)備，其中所述處理器還被配置用以隨經(jīng)二次采樣的所述至少一個(gè)視頻流一起傳送所述補(bǔ)充增強(qiáng)信息消息。
47.根據(jù)權(quán)利要求45所述的設(shè)備，其中所述二次采樣信息包括兩個(gè)一比特補(bǔ)充增強(qiáng)信息消息。
48.根據(jù)權(quán)利要求43所述的設(shè)備，其中所述補(bǔ)充增強(qiáng)信息消息指示了經(jīng)二次采樣的所述至少一個(gè)視頻流為按照因子二水平地進(jìn)行了二次采樣。
49.根據(jù)權(quán)利要求43所述的設(shè)備，其中所述補(bǔ)充增強(qiáng)信息消息在經(jīng)二次采樣的所述至少一個(gè)視頻流的第一視圖的幀尺寸與經(jīng)二次采樣的所述至少一個(gè)視頻流的第二視圖的幀尺寸相等時(shí)指示了所述第一視圖和所述第二視圖都為按照因子二水平地進(jìn)行了二次采樣的。
50.根據(jù)權(quán)利要求43所述的設(shè)備，其中所述補(bǔ)充增強(qiáng)信息消息在經(jīng)二次采樣的所述至少一個(gè)視頻流的第一視圖的幀尺寸與經(jīng)二次采樣的所述至少一個(gè)視頻流的第二視圖的幀尺寸不相等時(shí)指示了僅有所述第一視圖或者僅有所述第二視圖為按照因子二水平地進(jìn)行了二次采樣的。
51.一種用于傳送視頻流的系統(tǒng)，包括用于存儲多個(gè)視頻流的存儲系統(tǒng)；以及用于從所述存儲單元取回所述多個(gè)視頻流的處理系統(tǒng)；以及用于顯示視頻流的顯示器系統(tǒng)，其中所述處理系統(tǒng)被配置用以對所述多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣；以及將經(jīng)二次采樣的所述至少一個(gè)視頻流傳送到所述顯示器系統(tǒng)。
52.根據(jù)權(quán)利要求51所述的系統(tǒng)，其中所述多個(gè)視頻流包括第一視頻流和第二視頻流。
53.根據(jù)權(quán)利要求52所述的系統(tǒng)，其中所述處理系統(tǒng)被配置用以對所述第一視頻流和所述第二視頻流進(jìn)行二次采樣。
54.根據(jù)權(quán)利要求51所述的系統(tǒng)，其中所述處理系統(tǒng)被配置用以在如下速率進(jìn)行二次采樣，所述速率是所述多個(gè)視頻流的比特速率的一半。
55.根據(jù)權(quán)利要求51所述的系統(tǒng)，其中所述處理系統(tǒng)被配置用以在如下速率進(jìn)行二次采樣，所述速率是所述多個(gè)視頻流的像素處理速率的一半。
56.根據(jù)權(quán)利要求51所述的系統(tǒng)，其中所述顯示器系統(tǒng)包括顯示器電路和顯示器。
57.根據(jù)權(quán)利要求51所述的系統(tǒng)，其中所述處理系統(tǒng)被配置用以組合經(jīng)二次采樣的所述第一視頻流和經(jīng)二次采樣的所述第二視頻流以形成三維視頻流。
58.根據(jù)權(quán)利要求56所述的系統(tǒng)，其中所述顯示器是三維顯示器。
59.根據(jù)權(quán)利要求56所述的系統(tǒng)，其中所述顯示器是視差柵格顯示器。
60.根據(jù)權(quán)利要求56所述的系統(tǒng)，其中所述顯示器是雙凸透鏡顯示器。
61.根據(jù)權(quán)利要求56所述的系統(tǒng)，其中所述顯示器設(shè)置于移動(dòng)設(shè)備上。
62.一種包括計(jì)算機(jī)可用介質(zhì)的計(jì)算機(jī)程序產(chǎn)品，所述計(jì)算機(jī)可用介質(zhì)具有在其上記錄的計(jì)算機(jī)程序邏輯，所述計(jì)算機(jī)程序邏輯用于使得處理器能夠傳送視頻流，所述計(jì)算機(jī)程序包括獲得過程，使得所述處理器能夠傳送多個(gè)視頻流；二次采樣過程，使得所述處理器能夠?qū)λ龆鄠€(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣；以及傳送過程，使得所述處理器能夠?qū)⒔?jīng)二次采樣的所述至少一個(gè)視頻流傳送到顯示器系統(tǒng)。
63.根據(jù)權(quán)利要求62所述的計(jì)算機(jī)程序產(chǎn)品，其中所述多個(gè)視頻流包括第一視頻流和第二視頻流。
64.根據(jù)權(quán)利要求63所述的計(jì)算機(jī)程序產(chǎn)品，其中所述二次采樣過程使得所述處理器能夠?qū)λ龅谝灰曨l流和所述第二視頻流進(jìn)行二次采樣。
65.根據(jù)權(quán)利要求63所述的計(jì)算機(jī)程序產(chǎn)品，其中所述傳送過程使得所述處理器能夠傳送所述第一視頻流和所述第二視頻流。
66.根據(jù)權(quán)利要求62所述的計(jì)算機(jī)程序產(chǎn)品，其中所述二次采樣過程使得所述處理器能夠以如下二次采樣速率進(jìn)行二次采樣，所述二次采樣速率是所述多個(gè)視頻流的比特速率的一半。
67.根據(jù)權(quán)利要求62所述的計(jì)算機(jī)程序產(chǎn)品，其中所述二次采樣過程使得所述處理器能夠以如下二次采樣速率進(jìn)行二次采樣，所述二次采樣速率是所述多個(gè)視頻流的像素處理速率的一半。
68.根據(jù)權(quán)利要求63所述的計(jì)算機(jī)程序產(chǎn)品，其中所述二次采樣過程使得所述處理器能夠?qū)λ龅谝灰曨l流和所述第二視頻流進(jìn)行二次采樣。
69.根據(jù)權(quán)利要求62所述的計(jì)算機(jī)程序產(chǎn)品，其中所述顯示器系統(tǒng)包括顯示器電路和顯示器。
70.根據(jù)權(quán)利要求63所述的計(jì)算機(jī)程序產(chǎn)品，還包括組合過程，使得所述處理器能夠使經(jīng)二次采樣的所述第一視頻流和經(jīng)二次采樣的所述第二視頻流組合形成三維視頻流。
71.根據(jù)權(quán)利要求62所述的計(jì)算機(jī)程序產(chǎn)品，其中所述顯示器是三維顯示器。
72.根據(jù)權(quán)利要求62所述的計(jì)算機(jī)程序產(chǎn)品，其中所述顯示器是視差柵格顯示器。
73.根據(jù)權(quán)利要求62所述的計(jì)算機(jī)程序產(chǎn)品，其中所述顯示器是雙凸透鏡顯示器。
74.根據(jù)權(quán)利要求62所述的計(jì)算機(jī)程序產(chǎn)品，其中所述顯示器設(shè)置于移動(dòng)設(shè)備上。
75.一種用于傳送視頻流的系統(tǒng)，包括用于獲得多個(gè)視頻流的裝置；用于對所述多個(gè)視頻流中的至少一個(gè)視頻流進(jìn)行二次采樣的裝置；以及用于將經(jīng)二次采樣的所述至少一個(gè)視頻流傳送到顯示器系統(tǒng)的裝置。
76.根據(jù)權(quán)利要求75所述的系統(tǒng)，其中所述多個(gè)視頻流包括第一視頻流和第二視頻流。
77.根據(jù)權(quán)利要求76所述的系統(tǒng)，其中所述用于進(jìn)行二次采樣的裝置對所述第一視頻流和所述第二視頻流進(jìn)行二次采樣。
78.根據(jù)權(quán)利要求75所述的系統(tǒng)，其中所述用于進(jìn)行二次采樣的裝置以如下速率進(jìn)行二次采樣，所述速率是所述多個(gè)視頻流的比特速率的一半。
79.根據(jù)權(quán)利要求75所述的系統(tǒng)，其中所述用于進(jìn)行二次采樣的裝置以如下速率進(jìn)行二次采樣，所述速率是所述多個(gè)視頻流的像素處理速率的一半。
80.根據(jù)權(quán)利要求77所述的系統(tǒng)，還包括用于組合經(jīng)二次采樣的所述第一視頻流和經(jīng)二次采樣的所述第二視頻流的裝置。
81.一種用于發(fā)送視頻流的設(shè)備，包括處理器，用于獲得至少一個(gè)視頻流；對所述至少一個(gè)視頻流進(jìn)行下采樣；以及創(chuàng)建補(bǔ)充增強(qiáng)信息消息；發(fā)送器，配置為用于發(fā)送所述至少一個(gè)視頻流和補(bǔ)充增強(qiáng)信息消息。
82.一種包括計(jì)算機(jī)可用介質(zhì)的計(jì)算機(jī)程序產(chǎn)品，所述計(jì)算機(jī)可用介質(zhì)具有在其上記錄的計(jì)算機(jī)程序邏輯，所述計(jì)算機(jī)程序邏輯用于實(shí)現(xiàn)視頻流的發(fā)送，所述計(jì)算機(jī)程序包括獲得至少一個(gè)視頻流；對所述至少一個(gè)視頻流進(jìn)行下采樣；創(chuàng)建補(bǔ)充增強(qiáng)信息消息；以及發(fā)送所述至少一個(gè)視頻流和補(bǔ)充增強(qiáng)信息消息。
全文摘要
一種用于對視頻信息進(jìn)行編碼和傳送的設(shè)備、系統(tǒng)和方法。本發(fā)明的實(shí)施例可以使用于三維視頻應(yīng)用中。根據(jù)本發(fā)明的實(shí)施例，可以獲得視頻流并且對這些視頻流進(jìn)行二次采樣。可以組合經(jīng)二次采樣的視頻流。經(jīng)二次采樣的組合視頻流然后可以被傳送到顯示器系統(tǒng)以形成三維圖像。
文檔編號H04N13/00GK101015219SQ200580029976
公開日2007年8月8日 申請日期2005年7月12日 優(yōu)先權(quán)日2004年7月13日
發(fā)明者H·卡爾普皮南, J·萊納馬 申請人:諾基亞公司