專利名稱：一種平面視頻立體化的深度圖生成方法及裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及計(jì)算機(jī)多媒體技術(shù)領(lǐng)域，特別涉及一種平面視頻立體化的深度圖生成方法及裝置。
背景技術(shù)：
立體視頻技術(shù)(也稱3D視頻技術(shù))是未來(lái)多媒體技術(shù)的發(fā)展方向，立體視頻能夠提供立體感的新型視頻技術(shù)。與單通道視頻相比，立體視頻一般有兩個(gè)視頻通道，數(shù)據(jù)量要遠(yuǎn)遠(yuǎn)大于單通道視頻。立體視頻可以提供人類視覺(jué)能感受到的立體感?，F(xiàn)如今，3D技術(shù)已經(jīng)被廣泛應(yīng)用在許多方面，包括通訊、廣播、醫(yī)療、教育、電腦游戲、動(dòng)畫(huà)等等。此外，3D顯示器的快速發(fā)展使得人們能感受到較好的立體感并且獲得眼睛的最大舒適度。傳統(tǒng)的2D視頻轉(zhuǎn)換成立體視頻的方法，是利用一幅圖像中單一的深度線索比如物體紋理信息、場(chǎng)景的空間幾何信息、物體相對(duì)大小信息等等，進(jìn)行深度信息的提取，最終獲得圖像在三維世界的投影。但是，大多數(shù)的視頻中的場(chǎng)景往往變化復(fù)雜，既包括動(dòng)態(tài)場(chǎng)景也包括靜態(tài)場(chǎng)景，因此單一的深度線索，并不能從開(kāi)始到結(jié)束適用于所有的鏡頭。此外，傳統(tǒng)運(yùn)動(dòng)視差信息是假設(shè)距離觀看者近的物體比距離遠(yuǎn)的物體運(yùn)動(dòng)的速度更快，因此利用物體之間的相對(duì)運(yùn)動(dòng)速度的快慢可以得到視差深度圖。但是一段視頻的場(chǎng)景往往是很多樣的。視頻中經(jīng)常會(huì)出現(xiàn)距離觀看者遠(yuǎn)的物體運(yùn)動(dòng)快，距離近的物體運(yùn)動(dòng)慢， 此時(shí)再采用傳統(tǒng)的方法處理，就會(huì)得到錯(cuò)誤的視差圖。

發(fā)明內(nèi)容
本發(fā)明的目的旨在至少解決上述技術(shù)缺陷之一。本發(fā)明的第一個(gè)目的在于提供一種平面視頻立體化的深度圖生成方法，該方法融合靜態(tài)模型和動(dòng)態(tài)模型，生成更加適應(yīng)場(chǎng)景真實(shí)情況的深度圖，從而獲得效果更加逼真的立體視頻。本發(fā)明的第二個(gè)目的在于提供一種平面視頻立體化的深度圖生成裝置。為實(shí)現(xiàn)上述目的，本發(fā)明第一方面的實(shí)施例提出了一種平面視頻立體化的深度圖生成方法，包括如下步驟對(duì)當(dāng)前幀圖像進(jìn)行基于場(chǎng)景靜態(tài)模型分布的圖像分割，包括利用所述當(dāng)前幀圖像中像素的特征向量構(gòu)建圖拓?fù)浣Y(jié)構(gòu)，根據(jù)所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)對(duì)所述當(dāng)前幀圖像進(jìn)行圖像分割以得到分割區(qū)域，將所述分割區(qū)域中屬于同一個(gè)區(qū)域的像素進(jìn)行標(biāo)記以生成所述當(dāng)前幀圖像的靜態(tài)模型深度圖；選擇所述當(dāng)前幀圖像和所述參考幀圖像的特征點(diǎn)，跟蹤所述特征點(diǎn)，計(jì)算所述當(dāng)前幀圖像和所述參考幀圖像中的運(yùn)動(dòng)物體的運(yùn)動(dòng)矢量，對(duì)所述運(yùn)動(dòng)矢量進(jìn)行運(yùn)動(dòng)分析以得到所述當(dāng)前幀圖像和所述參考幀圖像的運(yùn)動(dòng)分析結(jié)果；根據(jù)所述當(dāng)前幀圖像的分割區(qū)域和所述當(dāng)前幀圖像和所述參考幀圖像的運(yùn)動(dòng)分析結(jié)果，生成所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖；將所述當(dāng)前幀圖像的靜態(tài)模型深度圖和所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖進(jìn)行深度融合。根據(jù)本發(fā)明實(shí)施例的平面視頻立體化的深度圖生成方法，融合靜態(tài)模型和動(dòng)態(tài)模型，生成既適合運(yùn)動(dòng)場(chǎng)景也適合靜止場(chǎng)景的深度圖，從而獲得效果更加逼真的立體視頻，達(dá)到較好的立體效果。本發(fā)明第二方面的實(shí)施例提出一種平面視頻立體化的深度圖生成裝置，包括靜態(tài)模型深度圖生成模塊，所述靜態(tài)模型深度圖生成模塊用于利用所述當(dāng)前幀圖像中像素的特征向量構(gòu)建所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)，根據(jù)所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)對(duì)所述當(dāng)前幀圖像進(jìn)行圖像分割以得到分割區(qū)域，將所述分割區(qū)域中屬于同一個(gè)區(qū)域的像素進(jìn)行標(biāo)記生成所述當(dāng)前幀圖像的靜態(tài)模型深度圖；運(yùn)動(dòng)分析模塊，所述運(yùn)動(dòng)分析模塊用于選擇所述當(dāng)前幀圖像和所述參考幀圖像的特征點(diǎn)，并跟蹤所述特征點(diǎn)，計(jì)算所述當(dāng)前幀圖像和所述參考幀圖像中的運(yùn)動(dòng)物體的運(yùn)動(dòng)矢量，對(duì)所述運(yùn)動(dòng)矢量進(jìn)行運(yùn)動(dòng)分析以得到所述當(dāng)前幀圖像和所述參考幀圖像的運(yùn)動(dòng)分析結(jié)果；動(dòng)態(tài)模型深度圖生成模塊，所述動(dòng)態(tài)模型深度圖生成模塊分別與所述靜態(tài)模型深度圖生成模塊和所述運(yùn)動(dòng)分析模塊相連，用于根據(jù)所述當(dāng)前幀圖像的分割區(qū)域和所述當(dāng)前幀圖像和所述參考幀圖像的運(yùn)動(dòng)分析結(jié)果，生成所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖；深度融合模塊，所述深度融合模塊分別與所述靜態(tài)模型深度圖生成模塊和所述動(dòng)態(tài)模型深度圖生成模塊相連，用于將所述當(dāng)前幀圖像的靜態(tài)模型深度圖和所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖進(jìn)行自適應(yīng)的深度融合。根據(jù)本發(fā)明實(shí)施例的平面視頻立體化的深度圖生成裝置，融合靜態(tài)模型和動(dòng)態(tài)模型，生成既適合運(yùn)動(dòng)場(chǎng)景也適合靜止場(chǎng)景的深度圖，從而獲得效果更加逼真的立體視頻，達(dá)到較好的立體效果。本發(fā)明附加的方面和優(yōu)點(diǎn)將在下面的描述中部分給出，部分將從下面的描述中變得明顯，或通過(guò)本發(fā)明的實(shí)踐了解到。


本發(fā)明上述的和/或附加的方面和優(yōu)點(diǎn)從下面結(jié)合附圖對(duì)實(shí)施例的描述中將變得明顯和容易理解，其中圖1為根據(jù)本發(fā)明實(shí)施例的平面視頻立體化的深度圖生成方法的流程圖；圖2為根據(jù)本發(fā)明實(shí)施例的靜態(tài)模型深度圖的生成流程；圖3為根據(jù)本發(fā)明實(shí)施例的動(dòng)態(tài)模型深度圖的生成流程；圖4為根據(jù)本發(fā)明實(shí)施例的運(yùn)動(dòng)信息分析示意圖；圖5為根據(jù)本發(fā)明實(shí)施例的平面視頻立體化的深度圖生成裝置的示意圖。
具體實(shí)施例方式下面詳細(xì)描述本發(fā)明的實(shí)施例，所述實(shí)施例的示例在附圖中示出，其中自始至終相同或類似的標(biāo)號(hào)表示相同或類似的元件或具有相同或類似功能的元件。下面通過(guò)參考附圖描述的實(shí)施例是示例性的，僅用于解釋本發(fā)明，而不能解釋為對(duì)本發(fā)明的限制。本發(fā)明實(shí)施例提供的平面視頻立體化的深度圖生成方法，首先輸入平面視頻，然后將平面視頻分為當(dāng)前幀、當(dāng)前幀和參考幀兩個(gè)分支，分別生成當(dāng)前幀圖像的靜態(tài)模型深度圖和動(dòng)態(tài)模型深度圖，再將靜態(tài)模型深度圖和動(dòng)態(tài)模型深度圖進(jìn)行深度融合，從而得到當(dāng)前幀融合后的深度圖。下面參考圖1至圖4描述根據(jù)本發(fā)明實(shí)施例的平面視頻立體化的深度圖生成方法。如圖1所示，根據(jù)本發(fā)明實(shí)施例的平面視頻立體化的深度圖生成方法，包括如下步驟SlOl 對(duì)當(dāng)前幀圖像進(jìn)行基于場(chǎng)景靜態(tài)模型分布的圖像分割。如圖2所示，圖像分割包括如下幾個(gè)步驟SlOll 將當(dāng)前幀圖像輸入到內(nèi)存后，首先對(duì)該當(dāng)前幀圖像進(jìn)行灰度化處理?；叶然幚淼牟襟E包括將當(dāng)前幀圖像的每個(gè)像素RGB通道M位的顏色空間轉(zhuǎn)換為單通道8位顏色空間。通過(guò)對(duì)當(dāng)前幀圖像進(jìn)行灰度化處理，從而可以降低后續(xù)步驟中處理數(shù)據(jù)的數(shù)量。 然后對(duì)灰度化處理后的當(dāng)前幀圖像進(jìn)行聚類操作?？梢岳斫馐?，上述對(duì)當(dāng)前幀圖像進(jìn)行灰度化處理的步驟是可選的，即可以對(duì)當(dāng)前幀圖像不經(jīng)過(guò)灰度化處理而直接進(jìn)行聚類操作。S1012:圖像分割的過(guò)程可以當(dāng)作元素聚類問(wèn)題進(jìn)行處理，具體而言，將當(dāng)前幀圖像的基本元素(例如像素)或者其他的成分聚集分組在一個(gè)具有相似成分的組塊中，即對(duì)當(dāng)前幀圖像進(jìn)行聚類操作。根據(jù)圖像分割過(guò)程中處理圖像的數(shù)據(jù)結(jié)構(gòu)的不同，聚類操作包括以下兩種方式1)在向量空間中，將當(dāng)前幀圖像的元素作為一個(gè)獨(dú)立的的向量。將像素的部分特征分量作為特征向量，通過(guò)中央聚簇算法將上述特征向量進(jìn)行歸并分組。通過(guò)上述方法得到的當(dāng)前幀圖像的全局特征很有效。但是也存在下述缺點(diǎn)，該方法由于沒(méi)有利用向量的空間結(jié)構(gòu)信息，從而不能保存當(dāng)前幀圖像的很多細(xì)節(jié)信息，因此經(jīng)常會(huì)將實(shí)際不連通的區(qū)域錯(cuò)誤地歸并到一個(gè)組中。2)利用當(dāng)前幀圖像中元素的空間關(guān)系和連通邊界信息，在空間域中處理當(dāng)前幀圖像，然后將當(dāng)前幀圖像轉(zhuǎn)化為二維的圖拓?fù)浣Y(jié)構(gòu)。該方法利用了元素的空間關(guān)系和聯(lián)通邊界信息，從而可以保存當(dāng)前幀圖像的細(xì)節(jié)信息。優(yōu)選地，采用第二種方式對(duì)當(dāng)前幀圖像進(jìn)行聚類操作。將當(dāng)前幀圖像轉(zhuǎn)換為圖拓?fù)浣Y(jié)構(gòu)G (V，E)，其中，V是圖像中的節(jié)點(diǎn)，E是相鄰節(jié)點(diǎn)之間的邊的權(quán)重。Vi可以為單獨(dú)的像素也可以為一個(gè)有著均勻形狀、相似紋理或其他特征結(jié)構(gòu)的微小子區(qū)域，例如可以將一幅圖像分成若干個(gè)5X5的小塊，每個(gè)小塊作為一個(gè)基本節(jié)點(diǎn)。在本發(fā)明的一個(gè)實(shí)施例中，采用顏色向量作為特征向量表述因子。在特征空間中，Xi 為RGB顏色信息的向量，邊的代價(jià)Ei，j有一個(gè)正值的權(quán)重Wi，j，其中Wi，j反映了節(jié)點(diǎn)(i， j)之間的相似性程度。本發(fā)明采用兩個(gè)節(jié)點(diǎn)之間的歐幾里得距離衡量Wi，j的大小。
權(quán)利要求
1.一種平面視頻立體化的深度圖生成方法，其特征在于，包括如下步驟對(duì)當(dāng)前幀圖像進(jìn)行基于場(chǎng)景靜態(tài)模型分布的圖像分割，包括利用所述當(dāng)前幀圖像中像素的特征向量構(gòu)建圖拓?fù)浣Y(jié)構(gòu)，根據(jù)所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)對(duì)所述當(dāng)前幀圖像進(jìn)行圖像分割以得到分割區(qū)域，將所述分割區(qū)域中屬于同一個(gè)區(qū)域的像素進(jìn)行標(biāo)記以生成所述當(dāng)前幀圖像的靜態(tài)模型深度圖；選擇所述當(dāng)前幀圖像和所述參考幀圖像的特征點(diǎn)，跟蹤所述特征點(diǎn)，計(jì)算所述當(dāng)前幀圖像和所述參考幀圖像中的運(yùn)動(dòng)物體的運(yùn)動(dòng)矢量，對(duì)所述運(yùn)動(dòng)矢量進(jìn)行運(yùn)動(dòng)分析以得到所述當(dāng)前幀圖像和所述參考幀圖像的運(yùn)動(dòng)分析結(jié)果；根據(jù)所述當(dāng)前幀圖像的分割區(qū)域和所述當(dāng)前幀圖像和所述參考幀圖像的運(yùn)動(dòng)分析結(jié)果，生成所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖；將所述當(dāng)前幀圖像的靜態(tài)模型深度圖和所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖進(jìn)行自適應(yīng)的深度融合。
2.如權(quán)利要求1所述平面視頻立體化的深度圖生成方法，其特征在于，在所述構(gòu)建圖拓?fù)浣Y(jié)構(gòu)之前，還包括對(duì)所述當(dāng)前幀圖像進(jìn)行灰度化處理，包括將所述當(dāng)前幀圖像的像素RGB三通道M位的顏色空間轉(zhuǎn)化為單通道8位顏色空間。
3.如權(quán)利要求1所述的平面視頻立體化的深度圖生成方法，其特征在于，所述構(gòu)建所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)，包括如下步驟將所述當(dāng)前幀圖像的元素作為一個(gè)獨(dú)立的向量，將所述當(dāng)前幀圖像的像素的部分特征分量作為特征向量，構(gòu)造所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)。
4.如權(quán)利要求1所述的平面視頻立體化的深度圖生成方法，其特征在于，所述構(gòu)建所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)，包括如下步驟利用所述當(dāng)前幀圖像中元素的空間關(guān)系和連通邊界信息，在空間域中處理所述當(dāng)前幀圖像，將所述當(dāng)前幀圖像轉(zhuǎn)化為二維的圖拓?fù)浣Y(jié)構(gòu)。
5.如權(quán)利要求1所述的平面視頻立體化的深度圖生成方法，其特征在于，所述對(duì)所述當(dāng)前幀圖像進(jìn)行圖像分割，包括如下步驟采用最小生成樹(shù)方法將所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)進(jìn)行分割以將所述當(dāng)前幀圖像分割為多個(gè)有效區(qū)域。
6.如權(quán)利要求5所述的平面視頻立體化的深度圖生成方法，其特征在于，將所述多個(gè)有效區(qū)域中屬于同一個(gè)區(qū)域的像素進(jìn)行標(biāo)記之前還包括如下步驟設(shè)置所述每個(gè)有效區(qū)域中的至少包括的子區(qū)域的數(shù)量；根據(jù)設(shè)置的所述子區(qū)域的數(shù)量對(duì)所述多個(gè)有效區(qū)域進(jìn)行歸并融合。
7.如權(quán)利要求1所述的平面視頻立體化的深度圖生成方法，其特征在于，所述對(duì)運(yùn)動(dòng)矢量進(jìn)行運(yùn)動(dòng)分析包括如下步驟將所述當(dāng)前幀圖像和所述參考幀圖像劃分為中部區(qū)域和邊界區(qū)域，其中，所述中部區(qū)域?yàn)閳D像的中部區(qū)域，表示前景運(yùn)動(dòng)物體的所處區(qū)域；所述邊界區(qū)域包括圖像的頂部邊界區(qū)域、左部邊界區(qū)域和右部邊界區(qū)域，表示用于拍攝所述運(yùn)動(dòng)物體的相機(jī)的運(yùn)動(dòng)區(qū)域；對(duì)所述中部區(qū)域和所述邊界區(qū)域進(jìn)行分析得到所述運(yùn)動(dòng)分析結(jié)果。
8.如權(quán)利要求7所述的平面視頻立體化的深度圖生成方法，其特征在于，所述運(yùn)動(dòng)分析結(jié)果包括運(yùn)動(dòng)物體運(yùn)動(dòng)分量、相機(jī)運(yùn)動(dòng)分量和復(fù)雜運(yùn)動(dòng)分量，
9.如權(quán)利要求1所述的平面視頻立體化的深度圖生成方法，其特征在于，所述將當(dāng)前幀圖像的靜態(tài)模型深度圖和所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖進(jìn)行深度融合，包括如下步驟設(shè)置所述當(dāng)前幀圖像的靜態(tài)模型深度圖的權(quán)重和所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖的權(quán)重，計(jì)算所述當(dāng)前幀圖像深度融合后的深度圖Ddepth為其中，Dp為所述當(dāng)前幀圖像的靜態(tài)模型深度圖，Dm為所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖，wl為所述當(dāng)前幀圖像的靜態(tài)模型深度圖的權(quán)重，w2為所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖的權(quán)重，wl和w2滿足Wl+W2 = 1。
10.一種平面視頻立體化的深度圖生成裝置，其特征在于，包括靜態(tài)模型深度圖生成模塊，所述靜態(tài)模型深度圖生成模塊用于利用所述當(dāng)前幀圖像中像素的特征向量構(gòu)建所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)，根據(jù)所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)對(duì)所述當(dāng)前幀圖像進(jìn)行圖像分割以得到分割區(qū)域，將所述分割區(qū)域中屬于同一個(gè)區(qū)域的像素進(jìn)行標(biāo)記生成所述當(dāng)前幀圖像的靜態(tài)模型深度圖；運(yùn)動(dòng)分析模塊，所述運(yùn)動(dòng)分析模塊用于選擇所述當(dāng)前幀圖像和所述參考幀圖像的特征點(diǎn)，并跟蹤所述特征點(diǎn)，計(jì)算所述當(dāng)前幀圖像和所述參考幀圖像中的運(yùn)動(dòng)物體的運(yùn)動(dòng)矢量，對(duì)所述運(yùn)動(dòng)矢量進(jìn)行運(yùn)動(dòng)分析以得到所述當(dāng)前幀圖像和所述參考幀圖像的運(yùn)動(dòng)分析結(jié)果；動(dòng)態(tài)模型深度圖生成模塊，所述動(dòng)態(tài)模型深度圖生成模塊分別與所述靜態(tài)模型深度圖生成模塊和所述運(yùn)動(dòng)分析模塊相連，用于根據(jù)所述當(dāng)前幀圖像的分割區(qū)域和所述當(dāng)前幀圖像和所述參考幀圖像的運(yùn)動(dòng)分析結(jié)果，生成所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖；深度融合模塊，所述深度融合模塊分別與所述靜態(tài)模型深度圖生成模塊和所述動(dòng)態(tài)模型深度圖生成模塊相連，用于將所述當(dāng)前幀圖像的靜態(tài)模型深度圖和所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖進(jìn)行自適應(yīng)的深度融合。
11.如權(quán)利要求10所述的平面視頻立體化的深度圖生成裝置，其特征在于，所述靜態(tài)模型深度圖生成模塊在構(gòu)建所述圖拓?fù)浣Y(jié)構(gòu)之前，對(duì)所述當(dāng)前幀圖像進(jìn)行灰度化處理，包括將所述當(dāng)前幀圖像的像素RGB三通道M位的顏色空間轉(zhuǎn)化為單通道8位顏色空間。
12.如權(quán)利要求10所述的平面視頻立體化的深度圖生成裝置，其特征在于，所述靜態(tài)模型深度圖生成模塊采用以下兩種方式之一分割圖像圖拓?fù)浣Y(jié)構(gòu)1)將所述當(dāng)前幀圖像的元素作為一個(gè)獨(dú)立的向量，將所述當(dāng)前幀圖像的像素的部分特征分量作為特征向量，采用中央聚簇算法將所述特征向量歸并分組，分割圖像圖拓?fù)浣Y(jié)構(gòu)；2)利用所述當(dāng)前幀圖像中元素的空間關(guān)系和連通邊界信息，在空間域中處理所述當(dāng)前幀圖像，將所述當(dāng)前幀圖像轉(zhuǎn)化為二維的圖拓?fù)浣Y(jié)構(gòu)，基于所述圖拓?fù)浣Y(jié)構(gòu)分割圖像。
13.如權(quán)利要求10所述的平面視頻立體化的深度圖生成裝置，其特征在于，所述靜態(tài)模型深度圖生成模塊采用最小生成樹(shù)方法將所述當(dāng)前幀圖像的圖拓?fù)浣Y(jié)構(gòu)進(jìn)行圖像分割以將所述當(dāng)前幀圖像分割為多個(gè)有效區(qū)域。
14.如權(quán)利要求13所述的平面視頻立體化的深度圖生成裝置，其特征在于，所述靜態(tài)模型深度圖生成模塊設(shè)置所述每個(gè)有效區(qū)域中的至少要包括的子區(qū)域的數(shù)量，根據(jù)設(shè)置的所述子區(qū)域的數(shù)量對(duì)所述多個(gè)有效區(qū)域進(jìn)行歸并融合以生成所述當(dāng)前幀圖像的靜態(tài)模型深度圖。
15.如權(quán)利要求10所述的平面視頻立體化的深度圖生成裝置，其特征在于，所述動(dòng)態(tài)模型深度圖生成模塊將所述當(dāng)前幀圖像和所述參考幀圖像劃分為中部區(qū)域和邊界區(qū)域，并對(duì)所述中部區(qū)域和所述邊界區(qū)域進(jìn)行分析得到所述運(yùn)動(dòng)分析結(jié)果，其中，所述中部區(qū)域?yàn)閳D像的中部區(qū)域，表示前景運(yùn)動(dòng)物體的所處區(qū)域；所述邊界區(qū)域包括圖像的頂部邊界區(qū)域、 左部邊界區(qū)域和右部邊界區(qū)域，表示用于拍攝所述運(yùn)動(dòng)物體的相機(jī)的運(yùn)動(dòng)區(qū)域。
16.如權(quán)利要求15所述的平面視頻立體化的深度圖生成裝置，其特征在于，所述運(yùn)動(dòng)分析結(jié)果包括運(yùn)動(dòng)物體運(yùn)動(dòng)分量、相機(jī)運(yùn)動(dòng)分量和復(fù)雜運(yùn)動(dòng)分量，
17.如權(quán)利要求10所述的平面視頻立體化的深度圖生成裝置，其特征在于，所述深度融合模塊設(shè)置所述當(dāng)前幀圖像的靜態(tài)模型深度圖的權(quán)重和所述當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖的權(quán)重，計(jì)算所述當(dāng)前幀圖像深度融合后的深度圖Ddepth為
全文摘要
本發(fā)明公開(kāi)一種平面視頻立體化的深度圖生成方法，包括如下步驟對(duì)當(dāng)前幀圖像進(jìn)行基于場(chǎng)景靜態(tài)模型分布的圖像分割得到分割區(qū)域，標(biāo)記像素并將像素聚類到不同區(qū)域生成當(dāng)前幀圖像的靜態(tài)模型深度圖；選擇當(dāng)前幀圖像和參考幀圖像的特征點(diǎn)，計(jì)算運(yùn)動(dòng)物體的運(yùn)動(dòng)矢量，對(duì)運(yùn)動(dòng)矢量進(jìn)行運(yùn)動(dòng)分析以得到當(dāng)前幀圖像和參考幀圖像的運(yùn)動(dòng)分析結(jié)果；根據(jù)當(dāng)前幀圖像的分割區(qū)域和當(dāng)前幀圖像和參考幀圖像的運(yùn)動(dòng)分析結(jié)果，生成當(dāng)前幀圖像的動(dòng)態(tài)模型深度圖；將當(dāng)前幀圖像的靜態(tài)模型深度圖和動(dòng)態(tài)模型深度圖進(jìn)行自適應(yīng)的融合。本發(fā)明還公開(kāi)一種平面視頻立體化的深度圖生成裝置。本發(fā)明融合場(chǎng)景的靜態(tài)模型和動(dòng)態(tài)模型，獲得效果更加逼真的立體視頻，達(dá)到較好的立體效果。
文檔編號(hào)H04N9/77GK102263979SQ20111022380
公開(kāi)日2011年11月30日 申請(qǐng)日期2011年8月5日 優(yōu)先權(quán)日2011年8月5日
發(fā)明者戴瓊海, 李唯一 申請(qǐng)人:清華大學(xué)