視頻處理裝置、視頻顯示裝置以及視頻處理方法
【專利摘要】本發(fā)明的目的在于提供一種能夠很好地控制觀看區(qū)域的視頻處理裝置、視頻顯示裝置以及視頻處理方法。根據(jù)本發(fā)明的實(shí)施方式，提供一種用于視頻顯示裝置的視頻處理裝置，所述視頻顯示裝置包括可顯示立體視頻的顯示單元。該視頻處理裝置包括觀看者搜索單元、觀看者位置估計單元、觀看區(qū)域參數(shù)計算單元以及觀看區(qū)域控制單元。所述觀看者搜索單元利用攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者。所述觀看者位置估計單元估計所述搜索到的觀看者的觀看位置。所述觀看區(qū)域參數(shù)計算單元計算用于在所述估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)。并且，所述顯示單元顯示立體視頻時的所述搜索范圍小于所述顯示單元不顯示立體視頻時的所述搜索范圍。
【專利說明】視頻處理裝置、視頻顯示裝置以及視頻處理方法
[0001]相關(guān)申請的引用
[0002]本申請基于并且要求于2012年5月16日提交的日本在先專利申請第2012-112439號的優(yōu)先權(quán)，將其全部內(nèi)容通過弓I用結(jié)合于本文。
【技術(shù)領(lǐng)域】
[0003]本文中描述的實(shí)施方式總體上涉及視頻處理裝置和視頻處理方法。
【背景技術(shù)】
[0004]近年來，立體視頻顯示裝置(所謂的免眼鏡裸眼立體電視)被廣泛使用。觀看者可以在不使用特殊的眼鏡的情況下看見立體地顯示在免眼鏡裸眼立體電視上的視頻。該免眼鏡裸眼立體視頻顯示設(shè)備顯示具有不同視點(diǎn)的多個圖像。然后，那些圖像的光線的輸出方向由例如視差屏障、雙凸透鏡(lenticular lens,柱狀透鏡)等來控制并且被引導(dǎo)至觀看者的雙眼。當(dāng)觀看者的位置合適時，觀看者以右眼和左眼分別看到不同的視差圖像，因此將視頻識別為立體視頻。
[0005]然而，免眼鏡裸眼立體電視的問題是可能由于觀看者的位置而不能立體地觀看視頻。
[0006]然后，已知一種自動追蹤技術(shù)，其中對免眼鏡裸眼立體視頻顯示器的前面攝影的攝像機(jī)檢測觀看者并且控制觀看區(qū)域使得在觀看者的位置立體地看見視頻。然而，如果在顯示立體視頻期間檢測觀看者，那么處理量過大，這將引起延遲。因此，很可能不能順利地控制觀看區(qū)域。

【發(fā)明內(nèi)容】

[0007]本發(fā)明的一個方面涉及一種用于視頻顯示裝置的視頻處理裝置，所述視頻顯示裝置包括能夠顯示立體視頻的顯示單元，所述視頻處理裝置包括:觀看者搜索單元，利用通過攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者；觀看者位置估計單元，估計所搜索到的觀看者的觀看位置；觀看區(qū)域參數(shù)計算單元，計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)；以及觀看區(qū)域控制單元，在所述顯示單元顯示立體視頻時，基于所述觀看區(qū)域參數(shù)設(shè)定觀看區(qū)域；其中，所述顯示單元顯示立體視頻時的所述搜索范圍小于所述顯示單元不顯示立體視頻時的所述搜索范圍。
[0008]本發(fā)明的另一方面涉及一種用于視頻顯示裝置的視頻處理裝置，所述視頻顯示裝置包括能夠顯示立體視頻的顯示單元，所述視頻處理裝置包括:觀看者搜索單元，利用通過攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者；觀看者位置估計單元，估計所搜索到的觀看者的觀看位置；觀看區(qū)域參數(shù)計算單元，計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)；以及觀看區(qū)域控制單元，在所述顯示單元顯示立體視頻時，基于所述觀看區(qū)域參數(shù)設(shè)定觀看區(qū)域；其中，視頻處理裝置的負(fù)荷率大于等于預(yù)定值時的所述搜索范圍小于所述負(fù)荷率小于所述預(yù)定值時的所述搜索范圍。[0009]本發(fā)明的又一方面涉及一種視頻顯示裝置，包括:顯示單元，能夠顯示立體視頻；以及根據(jù)權(quán)利要求1所述的視頻處理裝置。
[0010]本發(fā)明的又一方面涉及一種視頻顯示裝置的視頻處理方法，所述視頻顯示裝置包括能夠顯示立體視頻的顯示單元，所述視頻處理方法包括:利用通過攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者；估計所搜索到的觀看者的觀看位置；計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)；當(dāng)所述顯示單元顯示立體視頻時，基于所述觀看區(qū)域參數(shù)設(shè)定觀看區(qū)域；其中，所述顯示單元顯示立體視頻時的所述搜索范圍小于所述顯示單元不顯示立體視頻時的所述搜索范圍。
[0011]本發(fā)明的再一方面涉及一種視頻顯示裝置的視頻處理方法，所述視頻顯示裝置包括能夠顯示立體視頻的顯示單元，所述視頻處理方法包括:利用通過攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者；估計所搜索到的觀看者的觀看位置；計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)；當(dāng)所述顯示單元顯示立體視頻時，基于所述觀看區(qū)域參數(shù)設(shè)定觀看區(qū)域；其中，視頻處理裝置的負(fù)荷率大于等于預(yù)定值時的所述搜索范圍小于所述負(fù)荷率小于所述預(yù)定值時的所述搜索范圍。
【專利附圖】

【附圖說明】
[0012]圖1是根據(jù)一個實(shí)施方式的視頻顯示設(shè)備100的外觀圖。
[0013]圖2是示出了視頻顯示設(shè)備100的示意性配置的框圖。
[0014]圖3A到圖3C是從上看的部分液晶面板I和雙凸透鏡2的示圖。
[0015]圖4是示意性地示出了觀看區(qū)域的示圖。
[0016]圖5A和圖5B是示出了觀看者搜索模塊13的搜索區(qū)域的示意圖。
[0017]圖6是示出了控制器10的處理操作的示例的流程圖。
[0018]圖7是示出了視頻顯示設(shè)備100的示意性配置的框圖。
【具體實(shí)施方式】
[0019]概括地，根據(jù)一個實(shí)施方式，用于具有配置為顯示立體視頻的顯示器的視頻顯示設(shè)備的視頻處理裝置包括觀看者搜索模塊、觀看者位置估計器、觀看區(qū)域參數(shù)計算器以及觀看區(qū)域控制器。觀看者搜索模塊被配置為使用由攝像機(jī)拍攝的視頻、在搜索區(qū)域內(nèi)的從顯示器到觀看者的距離來搜索觀看者。觀看者位置估計器被配置為估計搜索到的觀看者的觀看位置。觀看區(qū)域參數(shù)計算器被配置為計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)。觀看區(qū)域控制器被配置為在顯示器上顯示立體視頻時基于觀看區(qū)域參數(shù)來設(shè)定觀看區(qū)域。對于在顯示器上顯示立體視頻的搜索區(qū)域比對于顯示器上不顯示立體視頻的搜索區(qū)域窄。
[0020]現(xiàn)在將參考附圖來說明實(shí)施方式。
[0021]圖1是根據(jù)一個實(shí)施方式的視頻顯示設(shè)備100的外觀圖，而圖2是示出了它的示意性配置的框圖。視頻顯示設(shè)備100具有液晶面板1、雙凸透鏡2、攝像機(jī)3、光接收器4和控制器10。
[0022]液晶面板(顯示單元)I顯示能夠被位于觀看區(qū)域的觀看者觀看為立體視頻的多個視差圖像。液晶面板I是例如55英寸尺寸的面板并且具有4K2K (3840*2160)的像素。雙凸透鏡傾斜地布置在液晶面板I上，使得可以產(chǎn)生與水平方向上的11520 (=1280*9)個像素和垂直方向上的720個像素被布置為立體地顯示圖像的液晶面板相對應(yīng)的效果。在后文中，將描述以這種方式來擴(kuò)展在水平方向上的像素的數(shù)量的模型。在各個像素中，三個子像素，即R子像素、G子像素和B子像素在垂直方向上形成。用來自設(shè)置在背面的背光裝置(在圖1中未示出)的光來照射液晶面板I。各個像素發(fā)出具有根據(jù)從控制器10提供的圖像信號的亮度的光。
[0023]雙凸透鏡(開口控制器)2在預(yù)定方向上輸出在液晶面板I上顯示的多個視差圖像(顯示單元)。雙凸透鏡2具有沿著水平方向布置的多個凸起部分。在液晶面板I的水平方向上，凸起部分的數(shù)量是的像素數(shù)量的1/9。雙凸透鏡2附著至液晶面板I的表面使得一個凸起部分對應(yīng)于在水平方向上布置的9個像素。以從凸起部分的頂點(diǎn)附近向特定方向的方向性來輸出透過各個像素的光。
[0024]在以下描述中，將描述對于雙凸透鏡2的每個凸起部分設(shè)置9個像素以及能夠采用9個視差的多視差方式的示例。在多視差方式中，第一到第九視差圖像被分別地顯示在對應(yīng)于各個凸起部分的9個像素上。第一到第九視差圖像是分別通過從沿著液晶面板I的水平方向排列的九個視點(diǎn)來觀看對象而獲得的圖像。觀看者可以通過經(jīng)雙凸透鏡2以左眼來觀看在第一到第九視差圖像中的一個視差圖像并且以右眼來觀看另一視差圖像來立體地觀看視頻。根據(jù)多視差方式，視差的數(shù)量越大，觀看區(qū)域就越大。觀看區(qū)域是當(dāng)觀看者從液晶面板I的前面觀看液晶面板I時可以立體地觀看視頻的區(qū)域。
[0025]液晶面板I能夠通過由對應(yīng)于各個凸起部分的9個像素顯示相同的顏色來顯示二維圖像。
[0026]在本實(shí)施方式中，能夠根據(jù)雙凸透鏡2的突起部分與要顯示的視差圖像之間的相對位置關(guān)系(即，怎樣在對應(yīng)于各個凸起部分的9個像素上顯示視差圖像)來可變地控制觀看區(qū)域。在后文中將描述對觀看區(qū)域的控制。
[0027]圖3是從上看的部分液晶面板I和雙凸透鏡2的示圖。在圖3中的陰影區(qū)域表示觀看區(qū)域。當(dāng)從觀看區(qū)域觀看液晶面板I時，能夠立體地觀看視頻。在其他區(qū)域中，發(fā)生逆視(reverse view)或串?dāng)_,難以立體地觀看視頻。觀看者的位置離觀看區(qū)域的中心越近，觀看者就可以感受到越多的立體效果。然而，即使當(dāng)觀看者位于觀看區(qū)域中時，如果觀看者位于觀看區(qū)域的邊緣，那么觀看者可能不能感受到足夠的立體效果或可能發(fā)生逆視。
[0028]圖3示出了在液晶面板I和雙凸透鏡2之間的相對位置關(guān)系，更具體地，示出了觀看區(qū)域根據(jù)在液晶面板I和雙凸透鏡2之間的距離或根據(jù)在水平方向上的在液晶面板I和雙凸透鏡2之間的移動量而變化的情況。
[0029]在實(shí)踐中，通過對液晶面板I準(zhǔn)確地放置雙凸透鏡2而將雙凸透鏡2附著至液晶面板1，并且因此難以物理地改變液晶面板I和雙凸透鏡2的相對位置。
[0030]因此，在本實(shí)施方式中，移動在液晶面板I的像素上顯示的第一到第九視差圖像的顯示位置，使得在液晶面板I和雙凸透鏡2之間的相對位置關(guān)系明顯地改變。從而調(diào)整觀看區(qū)域。
[0031]例如，相比于在對應(yīng)于各個凸起部分的9個像素上分別顯示第一到第九視差圖像的情況(圖3A)，當(dāng)向右移動視差圖像集體時，觀看區(qū)域向左移動(圖3B)。另一方面，當(dāng)向左移動視差圖像集體時，觀看區(qū)域向右移動。[0032]當(dāng)在水平方向上的中心附近沒有移動視差圖像，并且視差圖像離液晶面板I的外部邊緣越近，視差圖像被向外移動越多時(圖3C)，觀看區(qū)域向液晶面板I移動。在被移動了的視差圖像和沒有被移動的視差圖像之間的像素和/或被移動了不同的量的視差圖像之間的像素可以通過根據(jù)附近像素的插值來產(chǎn)生。與圖3C相反，當(dāng)在水平方向上的中心附近沒有移動視差圖像，并且視差圖像離液晶面板I的外部邊緣越近，視差圖像被向中心移動越多時，觀看區(qū)域從液晶面板I向外移動。
[0033]以這種方式，通過移動和顯示所有視差圖像或部分視差圖像，能夠在關(guān)于液晶面板I的左右方向或前后方向上移動觀看區(qū)域。雖然為了描述的簡單而只在圖3中示出了一個觀看區(qū)域，但是實(shí)際上如圖4中所示在視聽區(qū)域P中存在多個觀看區(qū)域并且觀看區(qū)域彼此關(guān)聯(lián)地移動。以后描述由圖2中所示的控制器10來控制觀看區(qū)域。
[0034]參考回圖1，攝像機(jī)3以預(yù)定的仰角附著在液晶面板I的下部中心位置附近。攝像機(jī)3在液晶面板I前面的預(yù)定范圍中拍攝視頻。所拍攝的視頻被提供至控制器10并且用于檢測觀看者的位置和觀看者的面部等。攝像機(jī)3可以拍攝移動的圖像和靜止的圖像。此夕卜，能夠在任何位置和以任何角度來附著攝像機(jī)3，并且攝像機(jī)3至少拍攝包括在液晶面板I的前面觀看液晶面板I的觀看者的視頻。
[0035]光接收器4設(shè)置在例如液晶面板I的下部的左邊部分。光接收器4接收從用戶使用的遙控器發(fā)射的紅外信號。紅外信號包括指示是顯示立體視頻還是顯示二維視頻，是否顯示菜單顯示的信號。
[0036]隨后，將描述控制器10的組成要素的細(xì)節(jié)。如圖2中所示，控制器10包括調(diào)諧解碼器11、視差圖像轉(zhuǎn)換器12、觀看者搜索模塊13、觀看者位置估計器14、觀看區(qū)域參數(shù)計算器15、圖像調(diào)整器16、觀看區(qū)域計算器17和搜索區(qū)域計算器18。控制器10被安裝為例如一個IC (集成電路)并且被放置在液晶面板I的背面上。當(dāng)然，部分的控制器10可以實(shí)現(xiàn)為軟件。
[0037]調(diào)諧解碼器(接收器)11接收并且選擇輸入的放送波并且將編碼的輸入視頻信號解碼。當(dāng)諸如電子節(jié)目指南(EPG)的數(shù)據(jù)放送信號疊加在放送波上時，調(diào)諧解碼器11提取數(shù)據(jù)放送信號。或者，調(diào)諧解碼器11從諸如光盤再現(xiàn)裝置和個人計算機(jī)的視頻輸出裝置而非放送波接收編碼的輸入視頻信號并且將編碼的輸入視頻信號解碼。解碼的信號還成為基帶視頻信號并且被提供至視差圖像轉(zhuǎn)換器12。當(dāng)視頻顯示裝置100沒有接收放送波并且單獨(dú)地顯示從視頻輸出裝置接收的輸入視頻信號時，可以將只具有解碼功能的解碼器而不是調(diào)諧解碼器設(shè)置為接收器。
[0038]由調(diào)諧解碼器11接收的輸入視頻信號可以是二維視頻信號或三維視頻信號，三維視頻信號包括通過幀封裝(FP)方式、并排(SBS)方式、上和下(TAB)方式等而用于左眼和右眼的圖像。視頻信號可以是包括三個以上的視差的圖像的三維視頻信號。
[0039]視差圖像轉(zhuǎn)換器12為了立體地顯示視頻而將基帶視頻信號轉(zhuǎn)換為多個視差圖像信號。視差圖像轉(zhuǎn)換器12的處理取決于基帶信號是二維視頻信號還是三維視頻信號。
[0040]當(dāng)二維視頻信號或包括八個以下的視差的圖像的三維視頻信號輸入時，視差圖像轉(zhuǎn)換器12基于視頻信號中的各個像素的深度值來產(chǎn)生第一到第九視差圖像信號。深度值是表示各個像素看上去在液晶面板I的近側(cè)或遠(yuǎn)側(cè)的程度的值。深度值可以被預(yù)先加入輸入視頻信號或深度值可以基于輸入視頻信號的特性通過執(zhí)行動作檢測、構(gòu)圖識別、人臉檢測等來產(chǎn)生。另一方面，當(dāng)輸入包括9個視差的圖像的三維視頻信號時，視差圖像轉(zhuǎn)換器12通過使用該視頻信號來產(chǎn)生第一到第九視差圖像信號。
[0041]這樣產(chǎn)生的輸入視頻信號的視差圖像信號被提供至圖像調(diào)整器16。
[0042]觀看者搜索模塊13使用由攝像機(jī)3拍攝的視頻、在預(yù)定的搜索區(qū)域內(nèi)的在觀看者和液晶面板3之間的距離來搜索觀看者。更具體地，觀看者搜索模塊13通過用存儲在控制器10中的面部庫(face dictionary)來檢測觀看者的面部而搜索觀看者。面部庫的意思是表示諸如眼睛、鼻子和嘴的人臉的特征的信息。通過觀看者搜索模塊13的處理來計算在視頻中的觀看者的面部的位置(x，y)、作為與觀看距離相對應(yīng)的參數(shù)的面部的寬度等。
[0043]圖5A和圖5B是示出了觀看者搜索模塊13的搜索區(qū)域的示意性示圖。當(dāng)在液晶面板I上不顯示立體視頻而是顯示二維視頻或菜單畫面時，觀看者搜索模塊13將觀看者觀看液晶面板I應(yīng)采用的距離或在說明書中描述的觀看距離(例如1.5m到5.0m)設(shè)定為搜索區(qū)域來檢測觀看者的面部(圖5A)。另一方面，當(dāng)在液晶面板I上顯示立體視頻時，搜索區(qū)域比以上搜索區(qū)域窄例如2.0m到4.0m (圖5B)。
[0044]當(dāng)不顯示立體視頻時，通過將搜索區(qū)域設(shè)定得更寬，可以更精確地檢測觀看者的位置并且使由攝像機(jī)3拍攝的檢測到的人的數(shù)量盡可能多。此外，如下文所述，在液晶顯示器I上顯示立體視頻的搜索區(qū)域由搜索區(qū)域計算器18基于顯示器上不顯示立體視頻時所檢測到的觀看者的位置來計算。因此，即使搜索區(qū)域設(shè)定為較窄，觀看者的檢測準(zhǔn)確度也不會降低，并且只要觀看者不劇烈地移動就能夠檢測到能夠觀看立體視頻的觀看者。
[0045]一般地，當(dāng)顯示立體視頻時，控制器10的處理量變大。此外，如果觀看者搜索模塊的處理量大時，控制器10的操作速度可能下降，由此可能不能適當(dāng)?shù)乜刂朴^看區(qū)域。
[0046]在免眼鏡裸眼立體顯示器中，能夠立體地看到視頻的距離取決于觀看區(qū)域。因此，如果能夠至少檢測到在觀看區(qū)域內(nèi)的觀看者，那么即使面部搜索的區(qū)域被設(shè)定得較窄，能夠立體地看到視頻的觀看者的數(shù)量也是恒定的。因此，如上文所述，當(dāng)顯示立體視頻時，本實(shí)施方式通過將觀看者搜索模塊13的搜索區(qū)域設(shè)定為較窄而減少控制器10的處理量。
[0047]觀看者位置估計器14估計在實(shí)際空間中的觀看者的位置信息。例如，觀看者的位置信息表不為在X軸(水平方向)、Y軸(垂直方向)和Z軸(垂直于液晶顯不器I的方向)上的位置，它們的原點(diǎn)在液晶面板I的中心。觀看者位置估計器基于所計算的面部寬度“w”等來估計例如對應(yīng)于觀看距離的在Z軸上的位置，并且基于面部位置(x，y)和已知的攝像機(jī)3的攝像區(qū)域來估計在X軸和Y軸上的位置。
[0048]應(yīng)注意，不限制通過觀看者搜索模塊13和觀看者位置估計器14來檢測觀看者的位置的方式。攝像機(jī)3可以是紅外攝像機(jī)，并且也可以使用聲波來檢測觀看者的位置。
[0049]觀看區(qū)域信息計算器15通過使用從觀看者位置估計器14提供的觀看者的位置信息來計算用于設(shè)定適合檢測到的觀看者的觀看區(qū)域的觀看區(qū)域參數(shù)。例如，觀看區(qū)域參數(shù)是如圖3中所描述的視差圖像移動的量。觀看區(qū)域參數(shù)計算器15將所計算的觀看區(qū)域參數(shù)提供給圖像調(diào)整器16和觀看區(qū)域計算器17。
[0050]當(dāng)在液晶面板I上顯示立體視頻時，圖像調(diào)整器(觀看區(qū)域控制器)16為了控制觀看區(qū)域而根據(jù)所計算的觀看區(qū)域參數(shù)來進(jìn)行諸如移動和內(nèi)插視差圖像信號的調(diào)整，并且在此后將所調(diào)整的視差圖像信號提供給液晶面板I從而使液晶面板I顯示視差圖像。
[0051]觀看區(qū)域計算器17計算根據(jù)觀看區(qū)域參數(shù)而設(shè)定的觀看區(qū)域。更具體地，觀看區(qū)域計算器17計算距液晶面板I最近的位置和距液晶面板I最遠(yuǎn)的位置。觀看區(qū)域計算器17至少在不顯示立體視頻時計算觀看區(qū)域。當(dāng)顯示立體視頻時，觀看區(qū)域計算器可以計算或不計算觀看區(qū)域。
[0052]搜索區(qū)域計算器18基于在不顯示立體視頻時計算的觀看區(qū)域來計算顯示立體視頻的搜索區(qū)域。例如，如圖5B中所示，“N”(N是等于或低于100的正數(shù))％的計算出的觀看區(qū)域被設(shè)定為搜索區(qū)域。即從距液晶面板I最近的位置到距液晶面板最遠(yuǎn)的位置的區(qū)域的至少一部分被設(shè)定為搜索區(qū)域。
[0053]圖6是示出了控制器10的處理操作的示例的流程圖。
[0054]首先，觀看者搜索模塊13判斷在液晶面板I上是否顯示立體視頻(步驟SI)。觀看者搜索模塊13能夠基于表明視差圖像轉(zhuǎn)換器12是否產(chǎn)生用于顯示立體視頻的視差圖像的標(biāo)記來判斷。
[0055]當(dāng)沒顯示立體視頻時(步驟SI的否)，觀看者搜索模塊13如圖5A中所示在寬區(qū)域中搜索觀看者(步驟S2a)。然后，觀看者位置估計器14估計在實(shí)際空間中的觀看者的位置(步驟S3a)。此外，觀看區(qū)域參數(shù)計算器15計算觀看區(qū)域參數(shù)使得觀看區(qū)域被設(shè)定在所估計的觀看者的位置(步驟4a)。
[0056]然后，觀看區(qū)域計算器17計算根據(jù)計算出的觀看區(qū)域參數(shù)而設(shè)定的觀看區(qū)域(步驟S5a)?；谠撚^看區(qū)域，搜索區(qū)域計算器18計算用于顯示立體視頻的搜索區(qū)域(步驟S6)。應(yīng)注意，當(dāng)沒顯示立體視頻時，只是計算觀看區(qū)域參數(shù)和取決于觀看區(qū)域參數(shù)的搜索區(qū)域，而不需要實(shí)際控制觀看區(qū)域。
[0057]當(dāng)在液晶面板I上沒顯示立體視頻時，控制器10重復(fù)以上步驟S2a到步驟S6的處理操作(步驟S7)。
[0058]另一方面，當(dāng)顯示立體視頻時(步驟SI的是)，觀看者搜索模塊13在如圖5B中所示的相對窄的區(qū)域中，更具體地，在步驟S6中計算的搜索區(qū)域中搜索觀看者(步驟S2b)。因為可假設(shè)觀看者不劇烈地移動，所以可以通過設(shè)定窄的搜索區(qū)域來減少處理量。
[0059]此后，進(jìn)行估計觀看者的位置(步驟S3b)和計算觀看區(qū)域參數(shù)(步驟S4b)。然后，圖像調(diào)整器16根據(jù)觀看區(qū)域參數(shù)來調(diào)整視差圖像從而將觀看區(qū)域設(shè)定在觀看者的位置(步驟S5b)。
[0060]當(dāng)在液晶面板I上沒顯示立體視頻時，控制器10重復(fù)以上步驟S2b到S5b的處理操作。應(yīng)注意，當(dāng)持續(xù)顯示立體視頻時，可以持續(xù)地使用在步驟S6中計算的搜索區(qū)域，或可以基于在顯示立體視頻時在步驟S4b中計算的觀看區(qū)域參數(shù)來計算觀看區(qū)域從而基于該觀看區(qū)域來計算搜索區(qū)域。
[0061]如上所述，在本實(shí)施方式中，當(dāng)不顯示立體視頻時，能夠通過將搜索區(qū)域設(shè)定得較寬來準(zhǔn)確地檢測觀看者的位置。另一方面，當(dāng)顯示立體視頻時，基于檢測到的觀看者的位置而將搜索區(qū)域設(shè)定得較窄，從而在不減少觀看者檢測的準(zhǔn)確性的情況下減少處理量。因此，能夠順利地設(shè)定觀看區(qū)域。
[0062]應(yīng)注意，當(dāng)存在多個觀看者時，可以為了設(shè)定所有的觀看者的觀看區(qū)域而檢測所有的觀看者，或可以根據(jù)預(yù)定的優(yōu)先級而檢測一些觀看者。例如，對在顯示器的正面或在推薦的觀看距離(例如，液晶面板I的垂直長度的三倍)的觀看者設(shè)定更高的優(yōu)先級。
[0063]應(yīng)注意，在本實(shí)施方式中，示出了根據(jù)是否顯示立體視頻來控制搜索區(qū)域的示例。更一般地，也可以在負(fù)荷率低時搜索在更寬區(qū)域中的觀看者，并且在負(fù)荷率高時搜索在更窄區(qū)域內(nèi)的觀看者。更具體地，負(fù)荷率是例如CPU和/或存儲器的使用率。可以通過將使用率與預(yù)定的閾值相比較來控制搜索區(qū)域。
[0064]雖然，在各個實(shí)施方式中描述了使用雙凸透鏡2以及通過移動視差圖像來控制觀看區(qū)域的示例，但是也可以以其他方式來控制觀看區(qū)域。例如，代替雙凸透鏡2，視差屏障可以設(shè)置為開口控制器2’。圖7是示出了圖2中所示的實(shí)施方式的變形例的視頻顯示裝置100’的示意性配置的框圖。如圖7中所示，視頻顯示裝置100’的控制器10’具有觀看區(qū)域控制器16’而不是圖像調(diào)整器16。
[0065]觀看區(qū)域控制器16’根據(jù)由觀看區(qū)域信息計算器15計算的觀看區(qū)域參數(shù)來控制開口控制器2’。在本變形例中，觀看區(qū)域參數(shù)包括在液晶面板I和開口控制器2’之間的距離、在液晶面板I和開口控制器2’之間在水平方向上移動的量等。
[0066]在本變形例中，由開口控制器2’來控制在液晶面板I上顯示的視差圖像的輸出方向從而控制觀看區(qū)域。以這種方法，觀看區(qū)域控制器16’可以在不進(jìn)行用于移動視差圖像的處理的情況下控制開口控制器2’。
[0067]能夠用硬件或軟件來形成至少部分的在以上實(shí)施方式中說明的視頻處理系統(tǒng)。當(dāng)視頻處理系統(tǒng)部分地由軟件形成時，可以將實(shí)現(xiàn)至少部分的視頻處理系統(tǒng)的功能的程序存儲在諸如軟盤、CD-ROM等記錄介質(zhì)中，并且可以通過使計算機(jī)讀取該程序來執(zhí)行該程序。記錄介質(zhì)不限于諸如磁盤、光盤等可去除的介質(zhì)并且能夠是諸如硬盤裝置、存儲器等固定型的記錄介質(zhì)。
[0068]此外，實(shí)現(xiàn)至少部分的視頻處理系統(tǒng)的功能的程序能夠通過諸如因特網(wǎng)等的通信線(包括無線電通信)來分配。此外，加密的、調(diào)制的或壓縮的程序能夠通過有線的線路或諸如因特網(wǎng)等的無線電鏈路、或通過存儲該程序的記錄媒介來分發(fā)。
[0069]雖然描述了特定的實(shí)施方式，但是這些實(shí)施方式僅作為示例來提出，并且不用于限制本發(fā)明的范圍。實(shí)際上，在本文中描述的新穎的方法和系統(tǒng)可以以各種其他形式來實(shí)施；此外，在不偏離本發(fā)明的實(shí)質(zhì)的條件下可以進(jìn)行對本文中描述的方法和系統(tǒng)的各種省略、置換和改變。所附權(quán)利要求和它們的等同方案旨在覆蓋那些應(yīng)當(dāng)歸入本發(fā)明的范圍和實(shí)質(zhì)內(nèi)的形式或修改。
【權(quán)利要求】
1.一種用于視頻顯示裝置的視頻處理裝置，所述視頻顯示裝置包括能夠顯示立體視頻的顯示單元，所述視頻處理裝置包括: 觀看者搜索單元，利用通過攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者； 觀看者位置估計單元，估計所搜索到的觀看者的觀看位置； 觀看區(qū)域參數(shù)計算單元，計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)；以及 觀看區(qū)域控制單元，在所述顯示單元顯示立體視頻時，基于所述觀看區(qū)域參數(shù)設(shè)定觀看區(qū)域； 其中，所述顯示單元顯示立體視頻時的所述搜索范圍小于所述顯示單元不顯示立體視頻時的所述搜索范圍。
2.根據(jù)權(quán)利要求1所述的視頻處理裝置，其中， 所述顯示單元顯示立體視頻時的所述搜索范圍基于所述顯示單元不顯示立體視頻時的所估計的所述觀看位置。
3.根據(jù)權(quán)利要求1所述的視頻處理裝置，包括: 觀看區(qū)域計算單元，計算基于所述觀看區(qū)域參數(shù)設(shè)定的觀看區(qū)域；以及 搜索范圍計算單元，基于所述顯示單元不顯示立體視頻時計算出的觀看區(qū)域，計算所述顯示單元顯示立體視頻時的所述搜索范圍。
4.根據(jù)權(quán)利要求3所 述的視頻處理裝置，其中， 所述觀看區(qū)域計算單元計算所述觀看區(qū)域的與所述顯示單元距離最近的位置，以及所述觀看區(qū)域的與所述顯示單元距離最遠(yuǎn)的位置；并且 所述搜索范圍計算單元將計算出的與所述顯示單元距離最近的位置到與所述顯示單元距離最遠(yuǎn)的位置的范圍中的至少一部分計算作為所述顯示單元顯示立體視頻時的所述搜索范圍。
5.根據(jù)權(quán)利要求1所述的視頻處理裝置，其中， 所述觀看者搜索單元按照預(yù)先設(shè)定的優(yōu)先順序，搜索規(guī)定數(shù)量的所述觀看者。
6.一種用于視頻顯示裝置的視頻處理裝置，所述視頻顯示裝置包括能夠顯示立體視頻的顯示單元，所述視頻處理裝置包括: 觀看者搜索單元，利用通過攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者； 觀看者位置估計單元，估計所搜索到的觀看者的觀看位置； 觀看區(qū)域參數(shù)計算單元，計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)；以及 觀看區(qū)域控制單元，在所述顯示單元顯示立體視頻時，基于所述觀看區(qū)域參數(shù)設(shè)定觀看區(qū)域； 其中，視頻處理裝置的負(fù)荷率大于等于預(yù)定值時的所述搜索范圍小于所述負(fù)荷率小于所述預(yù)定值時的所述搜索范圍。
7.一種視頻顯示裝置，包括: 顯示單元，能夠顯示立體視頻；以及根據(jù)權(quán)利要求1所述的視頻處理裝置。
8.一種視頻顯示裝置的視頻處理方法，所述視頻顯示裝置包括能夠顯示立體視頻的顯示單元,所述視頻處理方法包括: 利用通過攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者； 估計所搜索到的觀看者的觀看位置； 計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)； 當(dāng)所述顯示單元顯示立體視頻時，基于所述觀看區(qū)域參數(shù)設(shè)定觀看區(qū)域； 其中，所述顯示單元顯示立體視頻時的所述搜索范圍小于所述顯示單元不顯示立體視頻時的所述搜索范圍。
9.一種視頻顯示裝置的視頻處理方法，所述視頻顯示裝置包括能夠顯示立體視頻的顯示單元,所述視頻處理方法包括: 利用通過攝像機(jī)拍攝到的視頻，搜索與所述顯示單元的距離在規(guī)定搜索范圍內(nèi)的觀看者； 估計所搜索到的觀看者的觀看位置； 計算用于在所估計的觀看位置設(shè)定觀看區(qū)域的觀看區(qū)域參數(shù)； 當(dāng)所述顯示單元顯示立體視頻時，基于所述觀看區(qū)域參數(shù)設(shè)定觀看區(qū)域； 其中，視頻處理裝置的負(fù)荷率大于等于預(yù)定值時的所述搜索范圍小于所述負(fù)荷率小于所述預(yù)定值時的所述搜索范圍。
【文檔編號】H04N13/02GK103428457SQ201310049478
【公開日】2013年12月4日 申請日期:2013年2月7日 優(yōu)先權(quán)日:2012年5月16日
【發(fā)明者】瀧本崇博 申請人:株式會社東芝