專利名稱：根據(jù)輸入圖像特性創(chuàng)建立體圖像及其再現(xiàn)的方法及設(shè)備的制作方法
技術(shù)領(lǐng)域：
與本發(fā)明一致的設(shè)備和方法涉及立體圖像的創(chuàng)建，更具體地講，涉及自適應(yīng)地根據(jù)輸入圖像的特性來創(chuàng)建立體圖像以及再現(xiàn)創(chuàng)建的立體圖像。
背景技術(shù)：
最近，已對通過數(shù)字電視(DTV)來廣播三維(3D)圖像進行了研究。為了廣播與人的裸眼所看到的真實圖像相似的3D圖像，應(yīng)該通過3D顯示裝置創(chuàng)建、發(fā)送、接收并再現(xiàn)多視角3D圖像。然而，由于多視角3D圖像包含大量數(shù)據(jù)，因此現(xiàn)有數(shù)字廣播系統(tǒng)中使用的信道帶寬不能容納這些圖像。因而，應(yīng)優(yōu)先對立體圖像的發(fā)送和接收進行研究。
關(guān)于3D圖像相關(guān)技術(shù)，運動圖像專家組(MPEG)在1996年開發(fā)出MPEG-2多視角配置以及用于立體圖像的壓縮的標準，多視角圖像正逐步實現(xiàn)。研究3D圖像的相關(guān)組織也正對通過DTV廣播來發(fā)送和接收3D圖像進行積極地研究，目前正在研究高清晰(HD)立體圖像的發(fā)送和接收。應(yīng)該注意的是，HD立體圖像指的是具有1920×1080分辨率的隔行掃描(interlaced)圖像或者具有1024×720分辨率的逐行掃描(progressive)圖像。
然而，由于在DTV廣播中傳輸MPEG-2編碼的圖像的傳輸信道的帶寬局限于6MHz，因此通過一個信道僅能傳輸一個HD圖像。結(jié)果是，難以傳輸HD立體圖像(包括左視圖像和右視圖像)。
對上述問題的傳統(tǒng)解決方法是在通過以1∶2的比例對HD立體圖像，即左視圖像和右視圖像，進行采樣以將HD立體圖像的數(shù)據(jù)總量減少1/2來將HD立體圖像的數(shù)據(jù)量減少到HD單一圖像的數(shù)據(jù)量之后傳輸HD立體圖像。對上述問題的另一解決方法是在通過減小左視圖像和右視圖像之一的尺寸來減少HD立體圖像的數(shù)據(jù)量之后傳輸HD立體圖像。然而，由于這樣的傳統(tǒng)解決方法通過子采樣或尺寸減小來減小數(shù)據(jù)量，因此圖像質(zhì)量惡化不可避免。

發(fā)明內(nèi)容
本發(fā)明提供一種自適應(yīng)地創(chuàng)建立體圖像的方法和設(shè)備，其中，立體圖像的形式自適應(yīng)地根據(jù)輸入圖像的特性而改變，而不必在數(shù)據(jù)量的減少和圖像質(zhì)量的降低之間進行權(quán)衡，本發(fā)明還提供一種用于接收和再現(xiàn)創(chuàng)建的立體圖像的方法和設(shè)備。
根據(jù)本發(fā)明的一方面，提供一種創(chuàng)建立體圖像的方法。該方法包括選擇組成立體圖像的左視圖像和右視圖像之一；測量選擇的圖像的高頻分量的方向性；以及將左視圖像和右視圖像合成為具有取決于測量的方向性的形式的立體圖像。
所述測量高頻分量的方向性的步驟包括測量選擇的圖像的高頻分量以確定選擇的圖像是在水平方向上還是在垂直方向上具有較多高頻分量。
所述合成左視圖像和右視圖像的步驟包括如果選擇的圖像在水平方向上具有較多高頻分量，則創(chuàng)建上下形式的立體圖像；如果選擇的圖像在垂直方向上具有較多高頻分量，則創(chuàng)建并排形式的立體圖像。
根據(jù)本發(fā)明的另一方面，提供一種用于創(chuàng)建立體圖像的設(shè)備，該設(shè)備包括頻率測量單元、第一合成單元、第二合成單元和選擇單元。頻率測量單元選擇組成立體圖像的左視圖像和右視圖像之一，并測量選擇的圖像的高頻分量以確定選擇的圖像是在水平方向上還是在垂直方向上具有較多高頻分量。第一合成單元將左視圖像和右視圖像合成為具有并排形式的立體圖像。第二合成單元將左視圖像和右視圖像合成為具有上下形式的立體圖像。選擇單元根據(jù)頻率測量單元的輸出選擇從第一合成單元和第二合成單元之一輸出的立體圖像，并輸出選擇的立體圖像。
所述頻率測量單元包括水平頻率測量單元、垂直頻率測量單元、和比較單元。水平頻率測量單元在水平方向上測量選擇的圖像的頻率分量。垂直頻率測量單元在垂直方向上測量選擇的圖像的頻率分量。比較單元將在水平方向上測量的頻率分量與在垂直方向上測量的頻率分量進行比較，并確定立體圖像的方向性。
水平頻率測量單元計算在水平方向上對選擇的圖像進行1/2下采樣然后進行1/2上采樣的結(jié)果與延遲的選擇的圖像之間的絕對差和(SAD)。垂直頻率測量單元計算在垂直方向上對選擇的圖像進行1/2下采樣然后進行1/2上采樣的結(jié)果與延遲的選擇的圖像之間的SAD。
根據(jù)本發(fā)明的另一方面，提供一種發(fā)送立體圖像的方法。該方法包括接收由用于拍攝立體圖像的設(shè)備拍攝的左視圖像和右視圖像；選擇左視圖像和右視圖像之一；測量選擇的圖像的高頻分量的方向性；將左視圖像和右視圖像合成為具有取決于測量的方向性的形式的立體圖像；以及對創(chuàng)建的立體圖像進行編碼并發(fā)送創(chuàng)建的立體圖像。
根據(jù)本發(fā)明的另一方面，提供一種再現(xiàn)立體圖像的方法。該方法包括接收關(guān)于立體圖像中的高頻分量的方向性的信息；以及根據(jù)接收的信息將立體圖像分離為左視圖像和右視圖像。
通過選擇組成立體圖像的左視圖像和右視圖像之一并測量高頻分量以確定選擇的圖像是在水平方向上還是在垂直方向上具有較多高頻分量，來獲得所述關(guān)于立體圖像中的高頻分量的方向性的信息。
根據(jù)本發(fā)明的另一方面，提供一種用于再現(xiàn)立體圖像的設(shè)備。該設(shè)備包括分離單元和尺寸調(diào)節(jié)器。分離單元接收關(guān)于立體圖像的高頻分量的方向性的信息，并根據(jù)接收的信息將立體圖像分離為左視圖像和右視圖像。尺寸調(diào)節(jié)器根據(jù)所述關(guān)于方向性的信息將左視圖像和右視圖像按比例縮放到它們各自的原始尺寸。
根據(jù)本發(fā)明的另一方面，提供一種用于接收立體圖像的方法。該方法包括接收立體圖像并對立體圖像進行解碼；接收關(guān)于立體圖像的高頻分量的方向性的信息；以及將立體圖像分離為具有取決于接收的方向性信息的形式的左視圖像和右視圖像，并輸出左視圖像和右視圖像。


通過參照附圖對其示例性實施例進行詳細描述，本發(fā)明的上述和其他方面將會變得更加清楚，其中圖1是示出通常通過合成由立體攝像機拍攝的左視圖像和右視圖像來創(chuàng)建立體圖像的方框圖；圖2A至圖2D示出立體圖像的各種形式；圖3是用于發(fā)送立體圖像的通常設(shè)備的方框圖；圖4是用于接收立體圖像的通常設(shè)備的方框圖；
圖5A和圖5B分別示出在垂直方向和水平方向上具有較多高頻分量的圖像的示例；圖6是根據(jù)本發(fā)明示例性實施例的用于發(fā)送立體圖像的設(shè)備的方框圖；圖7A是圖6中示出的設(shè)備中所包括的水平頻率測量單元的詳細方框圖；圖7B是圖6中示出的設(shè)備中所包括的垂直頻率測量單元的詳細方框圖；圖8是根據(jù)本發(fā)明示例性實施例的用于接收立體圖像的設(shè)備的方框圖；圖9是示出根據(jù)本發(fā)明示例性實施例的發(fā)送立體圖像的方法的流程圖；和圖10是示出根據(jù)本發(fā)明示例性實施例的接收立體圖像的方法的流程圖。
具體實施例方式
圖1是示出通常通過合成由立體攝像機拍攝的左視圖像和右視圖像來創(chuàng)建立體圖像的方框圖。
參照圖1，立體攝像機110分別拍攝目標的左視圖像和右視圖像。當左視圖像和右視圖像是HD圖像時，通過對左視圖像和右視圖像進行子采樣來分別將左視圖像和右視圖像的數(shù)據(jù)量減小到1/2，以便通過帶寬為6MHz的信道傳輸。換言之，合成單元120對左視圖像和右視圖像進行子采樣，然后合成左視圖像和右視圖像以創(chuàng)建單個HD立體圖像。
當合成單元120對左視圖像和右視圖像進行子采樣并合成左視圖像和右視圖像時，合成單元120可將兩個圖像合成為各種形式。子采樣根據(jù)將被創(chuàng)建的立體圖像的形式而變化。以下，將參照圖2A至圖2D描述由合成單元120創(chuàng)建立體圖像。
圖2A至圖2D示出立體圖像的各種形式。
圖2A示出立體圖像的逐行形式。為了利用逐行形式創(chuàng)建立體圖像，在垂直方向上分別對左視圖像和右視圖像進行1/2子采樣，并且采樣的左視圖像的像素的每一行與采樣的右視圖像的像素的每一行彼此交替。圖2B示出立體圖像的逐像素形式。為了利用逐像素形式創(chuàng)建立體圖像，在水平方向上分別對左視圖像和右視圖像進行1/2子采樣，并且采樣的左視圖像的像素的每一列與采樣的右視圖像的像素的每一列彼此交替。圖2C示出立體圖像的上下形式。為了利用上下形式創(chuàng)建立體圖像，在垂直方向上分別對左視圖像和右視圖像進行1/2子采樣，然后采樣的左視圖像被置于立體圖像的上半部，采樣的右視圖像被置于立體圖像的下半部。換言之，N×M左視圖像和N×M右視圖像分別被子采樣為N×M/2圖像，采樣的N×M/2左視圖像被置于立體圖像的上半部，采樣的N×M/2右視圖像被置于立體圖像的下半部，從而創(chuàng)建N×M立體圖像。圖2D示出立體圖像的并排形式。在這種情況下，在水平方向上分別對左視圖像和右視圖像進行1/2子采樣，采樣的左視圖像被置于立體圖像的左半部，采樣的右視圖像被置于立體圖像的右半部。換言之，N×M左視圖像和N×M右視圖像分別被子采樣為N/2×M圖像，N/2×M采樣的左視圖像被置于立體圖像的左半部，N/2×M采樣的右視圖像被置于立體圖像的右半部，從而創(chuàng)建N×M立體圖像。
在立體圖像的各種形式中，圖2C所示的上下形式和圖2D所示的并排形式對MPEG壓縮圖像傳輸是有效的，因此已被廣泛使用。
圖3是用于發(fā)送立體圖像的通常設(shè)備的方框圖。
參照圖3，由合成單元120對由立體攝像機110拍攝的N×M左視圖像和N×M右視圖像進行子采樣并合成為具有參照圖2A至圖2D所描述的各種形式之一的N×M立體圖像。編碼器130根據(jù)MPEG或各種標準對創(chuàng)建的立體圖像進行編碼。發(fā)送單元140根據(jù)數(shù)字廣播標準或其他傳輸標準發(fā)送編碼的立體圖像。
圖4是用于接收立體圖像的通常設(shè)備的方框圖。
參照圖4，接收單元410接收從用于發(fā)送立體圖像的設(shè)備發(fā)送來的立體圖像。解碼器420根據(jù)該用于發(fā)送立體圖像的設(shè)備所使用的編碼標準來執(zhí)行解碼。例如，如果根據(jù)MPEG-2標準執(zhí)行編碼，則也根據(jù)MPEG-2標準執(zhí)行解碼。從解碼器420輸出的N×M立體圖像被輸入到分離單元430以將該立體圖像分離為左視圖像和右視圖像。由于在立體圖像的創(chuàng)建期間執(zhí)行子采樣以減小左視圖像和右視圖像的數(shù)據(jù)量，因此分離的左視圖像和右視圖像的尺寸小于它們的原始尺寸。因此，尺寸調(diào)節(jié)器440將分離的左視圖像和右視圖像按比例縮放到它們各自的原始尺寸。如果接收的立體圖像具有上下形式，則尺寸調(diào)節(jié)器440在垂直方向上將分離的左視圖像和右視圖像按比例放大。如果接收的立體圖像具有并排形式，則尺寸調(diào)節(jié)器440在水平方向上將分離的左視圖像和右視圖像按比例放大。換言之，獲得N×M左視圖像和N×M右視圖像。3D顯示裝置450顯示創(chuàng)建的左視圖像和右視圖像。
在用于發(fā)送或接收立體圖像的設(shè)備中，左視圖像和右視圖像的分辨率被減小了1/2以通過有限帶寬信道發(fā)送立體圖像。結(jié)果是，接收的立體圖像的分辨率也被減小了1/2。換言之，由于在立體圖像的創(chuàng)建期間合成單元120對左視圖像和右視圖像進行下采樣，因此即使尺寸調(diào)節(jié)器440將下采樣的左視圖像和右視圖像按比例縮放到它們的原始尺寸也不能克服圖像質(zhì)量的損失。
因此，在本發(fā)明的示例性實施例中，通過根據(jù)輸入圖像的特性來自適應(yīng)地改變將被創(chuàng)建的立體圖像的形式，使圖像質(zhì)量的損失最小化。換言之，代替創(chuàng)建具有如圖2A至圖2D所示的各種形式之一的立體圖像，合成單元確定輸入圖像具有較多高頻分量的方向，并根據(jù)確定的結(jié)果改變將被創(chuàng)建的立體圖像的形式。
圖5A和圖5B分別示出在水平方向上和垂直方向上具有較多高頻分量的圖像的示例。
圖5A示出在水平方向上具有較多高頻分量的圖像。參照圖5A，由于在垂直方向上比在水平方向上存在相對較少的像素值改變，因此從頻率分析可看出在水平方向上具有較多高頻分量。如果在水平方向上具有較多高頻分量，則當以上下形式創(chuàng)建立體圖像時，在通過按比例縮放的解壓縮期間圖像質(zhì)量的損失可較小。這是因為即使當左視圖像和右視圖像在垂直方向上被子采樣以便以上下形式創(chuàng)建立體圖像時數(shù)據(jù)損失也較小。如果如圖5B所示在垂直方向上具有較多高頻分量，則當以并排形式創(chuàng)建立體圖像時，在通過按比例縮放的解壓縮期間圖像質(zhì)量的損失可較小。換言之，在圖5B所示的圖像中，在垂直方向上像素值的改變相對大于在水平方向上像素值的改變。因此，即使當左視圖像和右視圖像被子采樣以便以并排形式創(chuàng)建立體圖像時數(shù)據(jù)損失也較小。
因而，在本發(fā)明的示例性實施例中，輸入圖像在水平方向上或垂直方向上的頻率特性被識別，并且根據(jù)識別的特性以不同的形式創(chuàng)建立體圖像。如圖5A所示，當輸入圖像在水平方向上具有較多高頻分量時，以上下形式創(chuàng)建立體圖像。如圖5B所示，當輸入圖像在垂直方向上具有較多高頻分量時，以并排形式創(chuàng)建立體圖像。換言之，識別每一輸入圖像的特性或者以預(yù)定時間間隔識別輸入圖像的特性，確定將被創(chuàng)建的立體圖像的形式，并以確定的形式創(chuàng)建立體圖像。
圖6是根據(jù)本發(fā)明示例性實施例的用于發(fā)送立體圖像的設(shè)備的方框圖。
參照圖6，立體攝像機610產(chǎn)生并輸出目標的左視圖像和右視圖像。輸出的左視圖像和右視圖像被輸入到第一合成單元650和第二合成單元660。輸出的左視圖像和右視圖像之一還被輸入到水平頻率測量單元620和垂直頻率測量單元630以識別輸入圖像的頻率特性。第一合成單元650將輸入的左視圖像和右視圖像合成為具有如圖2D所示的并排形式的立體圖像。第二合成單元660將輸入的左視圖像和右視圖像合成為具有如圖2C所示的上下形式的立體圖像。
水平頻率測量單元620接收輸入的左視圖像或右視圖像，并在水平方向上測量頻率分量。由于在相同的時間段左視圖像和右視圖像的頻率特性通常是相似的，因此僅需要測量左視圖像和右視圖像之一的頻率特性?？赏ㄟ^計算在沿水平方向?qū)斎雸D像進行子采樣之后獲得的解壓縮圖像的像素值與原始輸入圖像的像素值之間的差，來執(zhí)行在水平方向上頻率分量的測量。所述像素值之間的差可以是，例如絕對差和(SAD)。類似的，垂直頻率測量單元630接收左視圖像或右視圖像，并在垂直方向上測量接收的圖像的高頻分量?？赏ㄟ^計算在沿垂直方向?qū)斎雸D像進行子采樣之后獲得的解壓縮圖像的像素值與原始輸入圖像的像素值之間的差，來執(zhí)行在垂直方向上頻率分量的測量。比較單元640對從水平頻率測量單元620輸出的像素值之間的差與從垂直頻率測量單元630輸出的像素值之間的差進行比較，確定輸入圖像的具有較大差的頻率特性，并將該頻率特性輸出到選擇單元670。
選擇單元670根據(jù)從比較單元640接收的確定結(jié)果來選擇第一合成單元650和第二合成單元660之一的輸出，并輸出選擇的圖像。換言之，如果確定在水平方向上具有較多高頻分量，則選擇單元670選擇創(chuàng)建具有上下形式的立體圖像的第二合成單元660的輸出。如果確定在垂直方向上具有較多高頻分量，則選擇單元670選擇創(chuàng)建具有并排形式的立體圖像的第一合成單元650的輸出。
編碼器680對由選擇單元670輸出的選擇的圖像進行編碼?？筛鶕?jù)包括MPEG標準的各種編碼標準來執(zhí)行編碼。發(fā)送單元690發(fā)送編碼的圖像。
以下，將參照圖7A和圖7B詳細描述利用SAD的頻率分量的測量。
圖7A是水平頻率測量單元620的詳細方框圖。
水平頻率測量單元620包括水平下采樣單元710、水平上采樣單元720、延遲緩沖器730和差計算單元740。水平下采樣單元710在水平方向上對N×M輸入圖像進行1/2下采樣。因此，N×M輸入圖像被改變?yōu)镹/2×M圖像。水平上采樣單元720對N/2×M圖像進行上采樣以將圖像解壓縮為N×M圖像。應(yīng)該注意的是，所述上采樣方法與用于接收立體圖像的設(shè)備中所使用的上采樣方法相同。差計算單元740計算通過經(jīng)延遲緩沖器730對原始圖像進行延遲而獲得的圖像與由水平上采樣單元720輸出的解壓縮圖像之間的SAD。差計算單元740還可使用其他比較方法輸出結(jié)果。例如，通過對SAD或峰值信噪比(PSNR)歸一化而獲得的歸一化平均絕對差(MAD)可用于比較。
圖7B是垂直頻率測量單元630的詳細方框圖。
垂直頻率測量單元630包括垂直下采樣單元750、垂直上采樣單元760、延遲緩沖器770和差計算單元780。垂直下采樣單元750在垂直方向上對N×M輸入圖像進行1/2下采樣。因此，N×M輸入圖像被改變?yōu)镹×M/2圖像。垂直上采樣單元760對N×M/2圖像進行上采樣以將圖像解壓縮為N×M圖像。應(yīng)該注意的是，所述上采樣方法與用于接收立體圖像的設(shè)備中所使用的上采樣方法相同。差計算單元780計算通過經(jīng)延遲緩沖器770對原始圖像進行延遲而獲得的圖像與由垂直上采樣單元760輸出的解壓縮圖像之間的SAD。
這樣，可基于水平頻率測量單元620和垂直頻率測量單元630的輸出確定原始圖像具有較多高頻分量的方向。
圖8是根據(jù)本發(fā)明示例性實施例的用于接收立體圖像的設(shè)備的方框圖。
所述用于接收立體圖像的設(shè)備包括接收單元810、解碼器820、分離單元830、尺寸調(diào)節(jié)器840和3D顯示裝置850。接收單元810接收廣播的立體圖像。解碼器820根據(jù)用于發(fā)送立體圖像的設(shè)備中所使用的編碼標準來執(zhí)行解碼。例如，當根據(jù)MPEG-2標準執(zhí)行編碼時，也根據(jù)MPEG-2標準執(zhí)行解碼。從解碼器820輸出的N×M立體圖像被輸入到分離單元830以將該立體圖像分離為左視圖像和右視圖像。此時，分離單元830從解碼器820接收關(guān)于立體圖像的創(chuàng)建形式的信息，并根據(jù)接收的信息將立體圖像分離為左視圖像和右視圖像。
尺寸調(diào)節(jié)器840將左視圖像和右視圖像按比例縮放到它們的原始尺寸。此時，根據(jù)所述關(guān)于立體圖像的創(chuàng)建形式的信息來在垂直方向上或水平方向上執(zhí)行按比例縮放。因此，N×M左視圖像和N×M右視圖像被創(chuàng)建。3D顯示裝置850顯示創(chuàng)建的左視圖像和右視圖像。
圖9是示出根據(jù)本發(fā)明示例性實施例的發(fā)送立體圖像的方法的流程圖。
在操作S910，從立體攝像機輸出的左視圖像和右視圖像被合成為上下形式的立體圖像以及并排形式的立體圖像。在操作S920，選擇左視圖像和右視圖像之一，并通過在水平方向和垂直方向上測量頻率分量來確定選擇的視角圖像具有較多高頻分量的方向。在操作S930，根據(jù)在操作S920中測量的結(jié)果選擇上下形式的立體圖像和并排形式的立體圖像之一，根據(jù)MPEG或另一運動圖像編碼標準對選擇的立體圖像進行編碼，并發(fā)送編碼的立體圖像。換言之，如果在水平方向上具有較多高頻分量，則具有上下形式的立體圖像被選擇并被編碼。如果在垂直方向上具有較多高頻分量，則具有并排形式的立體圖像被選擇并被編碼。
圖10是示出根據(jù)本發(fā)明示例性實施例的接收立體圖像的方法的流程圖。
在操作S1010，從發(fā)送單元接收立體圖像并對該立體圖像進行解碼。在操作S1020，解碼的立體圖像被分離為左視圖像和右視圖像。為了分離該立體圖像，關(guān)于立體圖像的創(chuàng)建形式的信息也被接收，并基于接收的信息分離立體圖像。由于不能直接從解碼的立體圖像確定解碼的立體圖像是上下形式還是并排形式，因此基于關(guān)于立體圖像的創(chuàng)建形式的信息來將解碼的立體圖像分離為左視圖像和右視圖像。在操作S1030，分離的左視圖像和右視圖像通過按比例縮放被解壓縮為原始尺寸的圖像，并被輸出到3D顯示裝置。在按比例縮放期間，如果所述關(guān)于立體圖像的創(chuàng)建形式的信息指示上下形式，則在垂直方向上執(zhí)行上采樣。如果所述關(guān)于立體圖像的創(chuàng)建形式的信息指示并排形式，則在水平方向上執(zhí)行上采樣。
如上所述，根據(jù)本發(fā)明，通過根據(jù)輸入圖像的頻率特性自適應(yīng)地改變圖像形式，可減小由立體圖像的創(chuàng)建產(chǎn)生的圖像質(zhì)量損失。
所述用于自適應(yīng)地創(chuàng)建立體圖像的方法還可被實施為計算機程序。本領(lǐng)域的計算機程序員可容易地解釋構(gòu)成該計算機程序的代碼和代碼段。所述計算機程序存儲在計算機可讀介質(zhì)中并由計算機讀取和執(zhí)行，從而實現(xiàn)所述用于自適應(yīng)地創(chuàng)建立體圖像的方法。計算機可讀介質(zhì)的例子包括磁帶、光學(xué)數(shù)據(jù)存儲裝置和載波。
盡管已參照其示例性實施例具體地顯示和描述了本發(fā)明，但是本領(lǐng)域的普通技術(shù)人員應(yīng)該理解，在不脫離權(quán)利要求所限定的本發(fā)明的精神和范圍的情況下，可在其中進行各種形式和細節(jié)上的改變。
權(quán)利要求
1.一種創(chuàng)建立體圖像的方法，該方法包括選擇左視圖像和右視圖像之一作為選擇的圖像；測量選擇的圖像的高頻分量的方向性；以及將左視圖像和右視圖像合成為具有取決于測量的方向性的形式的立體圖像。
2.如權(quán)利要求1所述的方法，其中，所述測量高頻分量的方向性的步驟包括測量選擇的圖像的高頻分量以確定選擇的圖像是在水平方向上還是在垂直方向上具有較多高頻分量。
3.如權(quán)利要求2所述的方法，其中，所述立體圖像的形式是并排形式或上下形式。
4.如權(quán)利要求2所述的方法，其中，所述合成左視圖像和右視圖像的步驟包括如果選擇的圖像在水平方向上具有較多高頻分量，則創(chuàng)建上下形式的立體圖像；如果選擇的圖像在垂直方向上具有較多高頻分量，則創(chuàng)建并排形式的立體圖像。
5.一種用于創(chuàng)建立體圖像的設(shè)備，該設(shè)備包括頻率測量單元，選擇左視圖像和右視圖像之一作為選擇的圖像，并測量選擇的圖像的高頻分量以確定選擇的圖像是在水平方向上還是在垂直方向上具有較多高頻分量；第一合成單元，將左視圖像和右視圖像合成為具有并排形式的立體圖像；第二合成單元，將左視圖像和右視圖像合成為具有上下形式的立體圖像；和選擇單元，根據(jù)頻率測量單元的輸出選擇從第一合成單元輸出的具有并排形式的立體圖像和從第二合成單元輸出的具有上下形式的立體圖像中的一個，并輸出選擇的立體圖像。
6.如權(quán)利要求5所述的設(shè)備，其中，所述頻率測量單元包括水平頻率測量單元，在水平方向上測量選擇的圖像的高頻分量；垂直頻率測量單元，在垂直方向上測量選擇的圖像的高頻分量；和比較單元，將在水平方向上測量的高頻分量與在垂直方向上測量的高頻分量進行比較，并確定立體圖像的方向性。
7.如權(quán)利要求6所述的設(shè)備，其中，所述水平頻率測量單元計算在水平方向上對選擇的圖像進行1/2下采樣和上采樣的結(jié)果與延遲的選擇的圖像之間的絕對差和。
8.如權(quán)利要求6所述的設(shè)備，其中，所述垂直頻率測量單元計算在垂直方向上對選擇的圖像進行1/2下采樣和上采樣的結(jié)果與延遲的選擇的圖像之間的絕對差和。
9.如權(quán)利要求6所述的設(shè)備，其中，如果選擇的圖像在水平方向上具有較多高頻分量，則選擇單元選擇并輸出從第二合成單元輸出的上下形式的立體圖像；如果選擇的圖像在垂直方向上具有較多高頻分量，則選擇單元選擇并輸出從第一合成單元輸出的并排形式的立體圖像。
10.一種發(fā)送立體圖像的方法，該方法包括接收拍攝的左視圖像和右視圖像；選擇左視圖像和右視圖像之一作為選擇的圖像；測量選擇的圖像的高頻分量的方向性；將左視圖像和右視圖像合成為具有取決于測量的方向性的形式的立體圖像；以及對所述立體圖像進行編碼并發(fā)送所述立體圖像。
11.如權(quán)利要求10所述的方法，其中，所述合成立體圖像的步驟包括如果測量的方向性指示在水平方向上具有較多高頻分量，則創(chuàng)建具有上下形式的立體圖像；如果測量的方向性指示在垂直方向上具有較多高頻分量，則創(chuàng)建具有并排形式的立體圖像。
12.一種再現(xiàn)立體圖像的方法，該方法包括接收關(guān)于立體圖像中的高頻分量的方向性的信息；以及根據(jù)接收的信息將立體圖像分離為左視圖像和右視圖像。
13.如權(quán)利要求12所述的方法，其中，通過選擇左視圖像和右視圖像之一并測量高頻分量以確定選擇的圖像是在水平方向上還是在垂直方向上具有較多高頻分量，來獲得所述信息。
14.如權(quán)利要求13所述的方法，其中，所述分離立體圖像的步驟包括如果作為分析所述信息的結(jié)果，確定選擇的圖像在水平方向上具有較多高頻分量，則確定立體圖像是上下形式，并根據(jù)確定的結(jié)果分離立體圖像；如果作為分析所述信息的結(jié)果，確定選擇的圖像在垂直方向上具有較多高頻分量，則確定立體圖像是并排形式，并根據(jù)確定的結(jié)果分離立體圖像。
15.一種用于再現(xiàn)立體圖像的設(shè)備，該設(shè)備包括分離單元，接收關(guān)于立體圖像的高頻分量的方向性的信息，并根據(jù)接收的信息將立體圖像分離為左視圖像和右視圖像；以及尺寸調(diào)節(jié)器，根據(jù)所述關(guān)于方向性的信息，將左視圖像和右視圖像按比例縮放到它們的原始尺寸。
16.如權(quán)利要求15所述的設(shè)備，其中，所述分離單元選擇左視圖像和右視圖像之一作為選擇的圖像，如果所述方向性信息指示選擇的圖像在水平方向上具有較多高頻分量，則確定立體圖像是上下形式，并根據(jù)立體圖像是上下形式的確定的結(jié)果分離立體圖像，如果所述方向性信息指示選擇的圖像在垂直方向上具有較多高頻分量，則確定立體圖像是并排形式，并根據(jù)立體圖像是并排形式的確定的結(jié)果分離立體圖像。
17.一種用于接收立體圖像的方法，該方法包括接收立體圖像并對立體圖像進行解碼；接收關(guān)于立體圖像的高頻分量的方向性的信息；以及將立體圖像分離為具有取決于接收的方向性信息的形式的左視圖像和右視圖像，并輸出左視圖像和右視圖像。
18.如權(quán)利要求17所述的方法，其中，所述分離立體圖像的步驟包括如果所述方向性信息指示立體圖像在水平方向上具有較多高頻分量，則確定立體圖像是上下形式，并根據(jù)立體圖像是上下形式的確定的結(jié)果分離立體圖像；如果所述方向性信息指示立體圖像在垂直方向上具有較多高頻分量，則確定立體圖像是并排形式，并根據(jù)立體圖像是并排形式的確定的結(jié)果分離立體圖像。
全文摘要
提供了一種根據(jù)輸入圖像的特性自適應(yīng)地創(chuàng)建立體圖像的方法和設(shè)備以及再現(xiàn)創(chuàng)建的立體圖像的方法和設(shè)備。用于創(chuàng)建立體圖像的方法包括選擇組成立體圖像的左視圖像和右視圖像之一；測量選擇的圖像的高頻分量的方向性；以及將左視圖像和右視圖像合成為具有取決于測量的方向性的形式的立體圖像。
文檔編號H04N15/00GK1816160SQ200610001100
公開日2006年8月9日 申請日期2006年1月12日 優(yōu)先權(quán)日2005年2月4日
發(fā)明者河泰鉉 申請人:三星電子株式會社