專利名稱：視頻信號處理設備和視頻信號處理方法
技術領域：
本發(fā)明涉及視頻信號處理設備和視頻信號處理方法，它們各自例如適用于被應用 到由利用兩個相機捕獲的圖像來產(chǎn)生三維(3D)圖像的情況。
背景技術：
以往已經(jīng)使用了將使用兩個相機捕獲的圖像混合從而獲得三維圖像的3D相機系 統(tǒng)。該3D相機系統(tǒng)使用了這樣的系統(tǒng)在該系統(tǒng)中，兩個相機被安裝在具有機械微調(diào)功能 的平臺(Rig)中，利用這兩個相機分別捕獲的圖像被混合，從而對應于這兩個相機的光軸。 另外，還已知這樣的系統(tǒng)其中，作為后處理，光軸之間發(fā)生偏移的圖像被從所拍攝的素材 中切割出來，以放大成原始視頻信號格式。圖15示出了現(xiàn)有的3D相機系統(tǒng)100的構造示例。該3D相機系統(tǒng)100包括兩個相機IOla和10lb、相機控制單元10 !和102b、3D圖 像算術運算單元103、控制面板10 和104b。在這種情況下，相機控制單元10 和10 分 別控制相機IOla和IOlb的操作。3D圖像算術運算單元103算術地從兩片圖像運算出3D 圖像。另外，控制面板10 和104b分別對相機IOla和IOlb的操作進行控制。參考信號 被直接輸入各個相機控制單元10 和102b。這樣，相機IOla和IOlb直接將關于所捕獲的 圖像的數(shù)據(jù)不僅輸出到相機控制單元10 和102b，而且通過3D圖像算術運算單元103輸 出到外部設備。日本專利早期公開No. 2002-77947公開了一種用于對具有視差(parallax)的兩 個或更多個圖像中產(chǎn)生的圖像間位置偏移和旋轉偏移進行調(diào)節(jié)、從而獲得三維圖像的技 術。

發(fā)明內(nèi)容
現(xiàn)在，即使使用了用于將光軸混合的系統(tǒng)或用于放大成原始視頻信號格式的系統(tǒng) 中的任何一種，也要為構建和配置該3D相機系統(tǒng)損失事件和金錢。另外，在將圖像的一部 分進行切割以放大時，在用這些相機拍攝圖像的時候具有高分辨率的原始圖像可能不能得 到有效利用，從而只獲得低分辨率的圖像。但是，如果沒有用這些系統(tǒng)校正圖像的光軸之間 的偏移，則3D圖像的質(zhì)量下降。另外，即使改變兩個相機的方向或高度以校正這些光軸之 間的偏移，也容易由于變焦(zoom)而再次產(chǎn)生光軸之間的偏移，因而沒有減少將這些圖像 混合所需的勞動。作出本發(fā)明以解決上述問題，因此希望提供一種視頻信號處理設備和視頻信號處 理方法，它們各自能夠使得對用兩個相機捕獲的圖像中產(chǎn)生的光軸之間的偏移進行校正所 需的工作容易執(zhí)行，從而使對圖像的混合容易執(zhí)行。為了實現(xiàn)上述希望，根據(jù)本發(fā)明的一種實施例，提供了 一種視頻信號處理設備，包 括圖像輸出部分，用于當?shù)谝幌鄼C和第二相機按照對標準視頻信號和放大區(qū)域視頻信號 進行傳送的預定傳輸格式傳送所述標準視頻信號、并將所述放大區(qū)域視頻信號疊加在所述
4預定傳輸格式的垂直消隱期和水平消隱期中的每一者上從而傳送所得的放大區(qū)域視頻信 號時向顯示部分輸出所述標準視頻信號和所述放大區(qū)域視頻信號，所述顯示部分用于在其 上顯示圖像，所述第一相機和所述第二相機各自具有圖像拾取元件，所述圖像拾取元件包 括用于輸出所述標準視頻信號的有效圖像區(qū)域以及在水平和垂直方向上比所述有效圖像 區(qū)域更寬的放大區(qū)域并從所述有效圖像區(qū)域輸出所述標準圖像信號以及從所述放大區(qū)域 輸出所述放大區(qū)域視頻信號；操縱部分，用于輸出操縱信號，根據(jù)所述操縱信號，基于所述 顯示部分上按照所述標準視頻信號顯示的圖像，來分別調(diào)節(jié)用所述第一相機和所述第二相 機捕獲的圖像的光軸之間的偏移；視頻信號提取部分，用于在按照所述操縱信號對所述 光軸之間的偏移進行調(diào)節(jié)時使所述標準視頻信號的區(qū)域在所述放大區(qū)域視頻信號的范圍 內(nèi)移動以對應于所述光軸之間的偏移，從移動的范圍中包含的放大區(qū)域視頻信號提取與所 述移動對應的所述標準視頻信號，并輸出這樣提取的所述標準視頻信號。根據(jù)本發(fā)明的另一實施例，提供了一種視頻信號處理方法，包括下列步驟在第一 相機和第二相機按照傳送標準視頻信號和放大區(qū)域視頻信號的預定傳輸格式傳送所述標 準視頻信號、并將所述放大區(qū)域視頻信號疊加在所述預定傳輸格式的垂直消隱期和水平消 隱期中的每一者上從而傳送所得的放大區(qū)域視頻信號時，向顯示部分輸出所述標準視頻信 號和所述放大區(qū)域視頻信號，所述顯示部分用于在其上顯示圖像，所述第一相機和所述第 二相機各自具有圖像拾取元件，所述圖像拾取元件包括用于輸出所述標準視頻信號的有效 圖像區(qū)域以及在水平和垂直方向上比所述有效圖像區(qū)域更寬的放大區(qū)域并從所述有效圖 像區(qū)域輸出所述標準視頻信號以及從所述放大區(qū)域輸出所述放大區(qū)域視頻信號；輸出操縱 信號，根據(jù)所述操縱信號，基于所述顯示部分上按照所述標準視頻信號顯示的圖像，來分別 調(diào)節(jié)用所述第一相機和所述第二相機捕獲的圖像的光軸之間的偏移；在按照所述操縱信號 對所述光軸之間的偏移進行調(diào)節(jié)時使所述標準視頻信號的區(qū)域在所述放大區(qū)域視頻信號 的范圍內(nèi)移動以對應于所述光軸之間的偏移，從移動的范圍中包含的放大區(qū)域視頻信號提 取與所述移動對應的所述標準視頻信號，并輸出這樣提取的所述標準視頻信號。通過采用這樣的構造，可以在不對使用相機分別捕獲的圖像的分辨率進行任何減 小的情況下，使兩片圖像的光軸彼此對準。如上所述，根據(jù)本發(fā)明，這些相機中的每一者傳送有效圖像區(qū)域和放大區(qū)域中各 自采集的視頻信號，對光軸之間的偏移的混合可以用所接收的視頻信號來執(zhí)行。此時，有效 圖像區(qū)域中光軸之間的偏移被伸展到放大區(qū)域，從而執(zhí)行該混合。因此，在圖像的調(diào)節(jié)期 間，不需要對各個相機進行機械調(diào)節(jié)。另外，成像區(qū)域的圖像區(qū)域被移動，從而對圖像進行 調(diào)節(jié)。因此，由于可以用兩個相機使鏡頭光軸的位置彼此對準，并且圖像不被放大，所以在 校正之前和之后，圖像的分辨率可以相等。


圖1的示意圖示出了根據(jù)本發(fā)明第一實施例的相機系統(tǒng)的外部構造和配置；圖2A和圖2B分別是示出本發(fā)明的第一實施例中安裝有兩個相機的安裝平臺 (Rig)的示意圖；圖3的框圖示出了根據(jù)本發(fā)明第一實施例的相機系統(tǒng)的內(nèi)部構造；圖4A和圖4B分別是示出本發(fā)明第一實施例中視頻處理器內(nèi)部構造的框5
圖5的示意圖示出了本發(fā)明的第一實施例中按照1，920個樣本X 1，080條線的像 素格式的示例；圖6的示意圖示出了本發(fā)明的第一實施例中數(shù)字式信號的傳輸格式的示例；圖7的示意圖示出了本發(fā)明的第一實施例中數(shù)字式信號的傳輸格式的示例，對于 該傳輸格式，圖像區(qū)域被放大以進行傳輸；圖8A、8B和8C分別是示出了本發(fā)明的第一實施例中像素內(nèi)插示例的示意圖；圖9的示意圖示出了本發(fā)明的第一實施例中根據(jù)光軸之間是否存在偏移而顯示 的圖像的示例；圖10AU0B和IOC分別是示出本發(fā)明的第一實施例中分別在取景器上顯示的圖像 的顯示示例；圖IlAUlB和IlC分別是示出本發(fā)明的第一實施例中分別在取景器上顯示的圖像 的顯示示例；圖12的示意圖示出了根據(jù)本發(fā)明第二實施例的相機系統(tǒng)的外部構造；圖13的示意圖示出了根據(jù)本發(fā)明第二實施例的相機系統(tǒng)的內(nèi)部構造；圖14的示意圖示出了根據(jù)本發(fā)明第三實施例的相機系統(tǒng)的內(nèi)部構造；圖15的示意圖示出了現(xiàn)有相機系統(tǒng)的外部構造和配置的示例。
具體實施例方式下面將參考附圖對本發(fā)明的優(yōu)選實施例進行說明。注意，說明將根據(jù)以下順序來 進行。1.第一實施例(對圖像的光軸之間的偏移的校正使用通過放大圖像區(qū)域而捕獲 的圖像來由相機適配器盒和相機頭彼此相結合對光軸之間的偏移進行校正的情形)2.第二實施例(對圖像的光軸之間的偏移的校正由相機控制單元和3D圖像算 術運算單元使用通過放大圖像區(qū)域而捕獲的圖像對光軸之間的偏移進行的校正)3.改變4.第三實施例(視頻信號處理方法)1.第一實施例3D相機系統(tǒng)的構造下文將參考圖1至圖1IA-IIC對本發(fā)明的第一實施例進行說明。在第一實施例中， 對于將本發(fā)明應用到3D相機系統(tǒng)10的情形進行說明，該3D相機系統(tǒng)10包括相機適配器 盒(CAB) 2，相機適配器盒2指示兩個相機頭Ia和Ib執(zhí)行圖像捕獲操作，并把與分別用相機 頭Ia和Ib捕獲的圖像有關的數(shù)據(jù)輸出到外部設備。圖1示出了 3D相機系統(tǒng)10的構造。3D相機系統(tǒng)10包括相機頭Ia和Ib，以及相機適配器盒2。相機適配器盒2包括 取景器部分6，該部分用于在其上顯示從相機頭Ia和Ib將分別通過取景器信號而接收的圖像。相機適配器盒2和該外部設備(未示出)通過相機電纜5彼此連接。另外，相機 適配器盒2收集分別從相機頭Ia和Ib向其輸入的關于圖像的視頻數(shù)據(jù)，并將所得的視頻 數(shù)據(jù)傳送到該外部設備(未示出)。相機電纜5中使用了寬帶數(shù)字光學傳輸路徑，該路徑能夠傳送大容量光學數(shù)字信號。在這種情形下，已有的數(shù)據(jù)率是1. 5(ibpS，而以3. 7Gbps的數(shù) 據(jù)率進行的光學傳輸也被允許。但是，也可以使視頻數(shù)據(jù)受到壓縮，并在窄帶中傳送經(jīng)過壓 縮的視頻數(shù)據(jù)(像過去的情形一樣)。根據(jù)可能的需要，相機適配器盒2執(zhí)行用于將從相機頭Ia和Ib向其輸入的圖像 進行翻轉的處理，或者執(zhí)行延遲以使輸出信號彼此同相。另外，相機適配器盒2的操作是用 由工程師操縱的控制面板7來控制的。圖2A和圖2B示出了平臺8的構造，相機頭Ia和Ib都安裝在該平臺中?；旧希阎斚鄼C頭Ia和Ib各自的變焦被設定在1倍放大率時從圖像獲得三 維圖像，相機頭Ia和Ib被布置成使得鏡頭的間距對應于自然看上去的人類眼睛。但是，由 于相機頭Ia和Ib的機架(chassis)各自尺寸較大，如果這些機架像本來那樣橫向布置，則 捕獲的對象圖像具有比人的視差更寬的視差。因而在三維圖像中造成不適感。因此，平臺 8設有半反射鏡9。另外，相機頭Ia被布置在這樣的位置對象的圖像光經(jīng)過半反射鏡9透 射到該位置以造成直接入射。另外，相機頭Ib被布置在這樣的位置對象的圖像光由半反 射鏡9反射到該位置以進行入射。結果，相機頭Ia和Ib被安裝成使得這些相機頭所分別 設置的鏡頭的光軸彼此垂直相交。圖2B示出了當從由圖2A的箭頭所示方向目視觀察時，半反射鏡9的可視性示例。相機頭Ia和Ib以從人類的視差獲得的寬度在橫向上偏移以安裝在平臺8中。因 此，圖2B示出相機頭Ia的鏡頭與相機頭Ib的鏡頭在橫向上有偏移，其中，對象的圖像光經(jīng) 過半反射鏡9透射以反射到相機頭Ia的鏡頭上，而對象的圖像光由半反射鏡9反射以反射 到相機頭Ib的鏡頭上。半反射鏡9以下述方式設置該平臺8 通過該方式，相機頭Ia和Ib 能夠安裝成與人類的視差對應。因而，在所得的三維圖像中不會造成不適感。圖3示出了 3D相機系統(tǒng)10的內(nèi)部構造。相機頭Ia設有用于輸出視頻信號的傳感器部分11。傳感器部分11由圖像拾取元 件(例如電荷耦合器件(CCD)成像器或互補金屬氧化物半導體(CM0Q成像器)組成。該 圖像拾取元件包括有效圖像區(qū)域和放大區(qū)域，有效圖像區(qū)域輸出標準視頻信號，放大區(qū)域 在水平方向和垂直方向上比有效圖像區(qū)域更寬。另外，圖像拾取元件還從有效圖像區(qū)域輸 出標準視頻信號，并從放大區(qū)域輸出放大區(qū)域視頻信號。另外，相機頭Ia還包括相機視頻處理器12和視頻處理器13。在此情形下，相機視 頻處理器12使從相機部分11輸出的視頻信號受到預定的處理，從而在完成該預定處理后 向相機適配器盒2輸出視頻信號。另外，相機處理器13將傳輸區(qū)域放大并將該視頻信號重 疊在該放大區(qū)域上。視頻處理器13包括水平/垂直濾波器15，用于使向其輸入的視頻信號 在水平方向和垂直方向受到濾波處理。另外，相機頭Ia還包括串行器(serializer) 14，用 于將從視頻處理器13輸出的并行視頻信號轉換成串行視頻信號，并將所得的串行視頻信 號輸出。在相機頭Ia與相機適配器盒2之間傳送的視頻信號根據(jù)SDI傳輸格式而被疊加 在有效圖像區(qū)域和放大區(qū)域中的每一者上。注意，由于相機頭Ib具有與相機頭Ia的構造相同的構造，因此與相機頭Ia的處 理框?qū)哪切┨幚砜蚍謩e由相同的標號表示，這里為簡化起見而略去其詳細說明。相機頭Ia和Ib包括圖像捕獲條件信息輸出部分16。在此情形下，相機捕獲條件 信息輸出部分16通過下文將要說明的狀態(tài)接口部分M而向視頻處理器發(fā)送捕獲對象圖像時相機頭Ia和Ib各自中設定的圖像捕獲條件信息。鏡頭狀態(tài)以及與平臺8的傾斜等有關 的信息被包含在該圖像捕獲條件信息中。圖像捕獲條件信息還從視頻處理器22向相機頭 Ia和Ib分別所包含的視頻處理器13發(fā)送。相機適配器盒2包括兩個解串行器(deserial) 21，并包括視頻處理器22和串行器 23。在此情形下，這兩個解串行器21分別把從相機頭Ia和Ib向其輸入的串行圖形信號轉 換成并行視頻信號。視頻處理器22根據(jù)從解串行器21輸入的相機頭Ia和Ib的并行視頻 信號而將這些圖像的光軸對準。另外，解串行器23還將執(zhí)行過光軸對準的視頻信號轉換成 串行視頻信號，從而輸出所得的串行視頻信號。另外，相機適配器盒2還包括狀態(tài)接口部分 M，用于從圖像捕獲條件信息輸出部分16接收該圖像捕獲條件信息。這樣，水平/垂直濾 波器25 (或水平/垂直濾波器1 根據(jù)經(jīng)過狀態(tài)接口部分M而向其輸入的圖像捕獲條件 信息，來提取標準視頻信號。下面將詳細說明3D相機系統(tǒng)10的各個部分的操作。相機頭la、Ib按照預定的傳輸格式(標準視頻信號和放大區(qū)域視頻信號都利用所 述格式來傳送)向相機適配器盒2傳送標準視頻信號，并將放大區(qū)域視頻信號疊加在該預 定傳輸格式的垂直消隱期(blanking interval)和水平消隱期中的每一者上，從而傳送所 得的視頻信號。用于將標準視頻信號和放大區(qū)域視頻信號各自疊加在預定傳輸格式上的處 理是由相機視頻處理器12執(zhí)行的。另外，視頻處理器13或視頻處理器22可以用作圖像輸 出部分，用于向取景器部分6輸出標準視頻信號和放大區(qū)域視頻信號。另外，水平/垂直濾波器15、25按照從控制面板7接收的操縱信號，對兩片圖像的 光軸之間的偏移進行調(diào)節(jié)。此時，水平/垂直濾波器15、25用作視頻信號提取部分。在此 情形下，視頻信號提取部分使標準視頻信號的區(qū)域在放大區(qū)域視頻信號的范圍內(nèi)移動以與 光軸之間的偏移相對應，從對于該移動量的所需范圍中所包含的放大區(qū)域視頻信號提取該 范圍中的標準視頻信號，并將這樣提取的標準視頻信號輸出。另外，水平/垂直濾波器15、 25還具有下述功能在相對于有效視頻區(qū)域的垂直方向、水平方向或旋轉方向切割出所包 含的放大區(qū)域視頻信號，從而提取該標準視頻信號。這里，在相機頭la、lb所設置的視頻處理器13的水平/垂直濾波器15對于光軸 之間的偏移執(zhí)行該調(diào)節(jié)時，視頻處理器22所設置的水平/垂直濾波器25被繞過(bypass)。 另一方面，在視頻處理器22所設置的水平/垂直濾波器25對于光軸之間的偏移執(zhí)行該調(diào) 節(jié)時，相機頭la、lb所設置的視頻處理器13的水平/垂直濾波器15被繞過。如前所述，水 平/垂直濾波器15和25具有這樣的關系當這些水平/垂直濾波器15和25中的一者執(zhí) 行該濾波操作時，另一者繞過該操作。另外，水平/垂直濾波器15、25還具有在水平和垂直 方向?qū)σ曨l信號進行濾波的偏置(offset)功能，從而將采樣階段轉換成像素單位或更小。從相機頭la、Ib輸出的視頻信號經(jīng)過視頻處理器13和串行器14而被轉換成串行 視頻信號，從而輸入到相機適配器盒2。這里，視頻處理器13所設置的水平/垂直濾波器 15使向器輸入的并行視頻信號受到水平/垂直濾波，并通過串行器14將所得的具有任意相 位的視頻信號轉換成串行視頻信號，從而輸出所得的串行視頻信號。相機適配器盒2通過解串行器21把從相機頭la、lb接收的串行視頻信號轉換成 并行視頻信號。視頻處理器22向取景器部分6輸出該并行視頻信號。另外，取景器部分6 在其上顯示用相機頭Ia和Ib分別捕獲的圖像。工程師在觀看取景器6上顯示的圖像的同時操縱控制面板7，從而對于這些圖像的光軸執(zhí)行對準。此時，控制面板7輸出操縱信號，用 相機頭Ia和Ib分別捕獲的圖像的光軸之間的偏移按照該操縱信號、基于取景器部分6上 按照從相機頭Ia和Ib分別輸出的標準視頻信號而顯示的圖像而受到調(diào)節(jié)。另外，圖像捕獲條件信息通過狀態(tài)接口部分M從各個相機頭Ia和Ib輸入到視頻 處理器22。因此，工程師可以知道相機頭Ia和Ib分別是在何種條件下捕獲對象的圖像。 另外，視頻處理器22還通過串行器23將與執(zhí)行光軸之間的對準所針對的圖像有關的數(shù)據(jù) 轉換成串行視頻信號，并將所得的串行視頻信號輸出到外部設備。注意，在執(zhí)行這些光軸之 間的對準時，但是取景器部分6上正在顯示的圖像的傾斜、水平位置等被合適地改變。另 外，由于取景器部分6上如下文所述顯示各種圖像(例如差異圖像)，所以工程師能夠容易 地執(zhí)行兩片圖像之間的對準。如前所述，控制面板7在圖像的光軸之間指定對準所依據(jù)的指令也可以被直接發(fā) 送到相機頭la、Ib所設置的視頻處理器13。在此情況下，從相機視頻處理器12輸入的視頻 信號的相位由視頻處理器13所設置的水平/垂直濾波器15所改變。另外，具有經(jīng)改變的 相位的視頻信號被輸入到相機適配器盒2，取景器部分6上顯示下述圖像相機頭Ia和Ib 已經(jīng)針對所述圖像執(zhí)行了圖像光軸之間的對準。相機頭la、Ib和相機適配器盒2分別設有水平/垂直濾波器15和25。因此，具有 在傳感器部分11中決定的寬效果圖像區(qū)域的視頻數(shù)據(jù)可以被重構，而從傳感器部分11接 收的視頻信號的分辨率可以維持。另外，視頻處理器13、22在圖像中心發(fā)生偏移的情況下 切割信號格式的有效圖像區(qū)域，從而使得可以對兩片圖像的光軸之間的偏移進行校正。另外，在如圖2所示平臺8的構造使用了要求圖像翻轉的平臺系統(tǒng)時，需要使相機 頭la、lb的圖像捕獲時機和圖像輸出時機都彼此相符。因此，相機適配器盒2不僅具有圖 像翻轉功能，而且具有圖像延遲功能。但是，相機頭la、Ib或相機適配器盒2中任一者都可 以不僅具有圖像翻轉功能，而且具有圖像延遲功能。另外，當傳感器部分11使用像CMOS傳感器那樣的線掃描圖像捕獲(CCD成像器使 用圖像面掃描系統(tǒng))時，相機頭la、lb中安裝有在圖像垂直翻轉時對垂直掃描順序進行改 變的功能。因此，相機適配器盒2可以對由于卷簾(rulling shutter)效果造成的圖像扭 曲方向進行對準。此時，視頻處理器22使從相機頭Ia和Ib之一接收的圖像對應于從相機頭Ia和 Ib中另一者接收的圖像，并在此狀態(tài)下對圖像執(zhí)行垂直翻轉，從而輸出關于所得圖像的數(shù) 據(jù)。另外，視頻處理器22還使針對一個圖片的圖像捕獲時機相對于另一相機延遲，從而輸 出圖像捕獲時機信號。圖4A和圖4B分別示出了水平/垂直濾波器15、25的內(nèi)部構造。圖4A示出了當水平濾波器系數(shù)為a而垂直濾波器系數(shù)為A時，水平/垂直濾波器 15、25的操作。水平/垂直濾波器15和25分別包括水平/垂直濾波器15和25。這里，水平/垂 直濾波器15、25由水平濾波器沈、存儲器27和垂直濾波器28組成。水平濾波器系數(shù)a被輸入到水平濾波器26。這樣，利用水平濾波器26，向器輸入 的視頻信號受到水平濾波，然后被寫入存儲器27。另外，垂直濾波器系數(shù)A被輸入到垂直濾 波器28。這樣，從存儲器27讀出的視頻信號受到垂直濾波，然后被輸出。
這里，水平/垂直濾波器15、25可以使向其輸入的視頻信號的采樣相位改變。在 模擬圖像方面考慮的話，者對應于在濾波處理時給出群延遲的情況。另外，水平/垂直濾波 器1536所執(zhí)行的處理成為這樣的濾波處理所述處理用于給出等于或小于時鐘單位的相 位改變。具體而言，水平/垂直濾波器15、25執(zhí)行多重過度采樣(multi-oversampling)，并 只從其提取與所需的樣本相位所對應的數(shù)據(jù)。因此，對樣本相位的位置進行的調(diào)節(jié)可以在 一個點或更小。實際上，水平/垂直濾波器15、25不提取過度采樣處理，而是根據(jù)濾波計算來直接 計算從樣本相位偏移的樣本相位的點位置。下面將對由現(xiàn)有的相機適配器盒所執(zhí)行的、用于切割出視頻信號的處理進行說 明?，F(xiàn)有的相機適配器盒改變?yōu)V波器系數(shù)，從而對所接收的視頻信號給予任意相位。 但是，現(xiàn)有的相機適配器盒只接收從相機頭的常規(guī)效果圖像區(qū)域輸出的視頻信號。因此，視 頻處理器13、22對于有效圖像區(qū)域范圍內(nèi)光軸之間的偏移執(zhí)行校正。為了切割出圖像區(qū)域，例如使用下述方法。·將圖像放大，然后切割出來?！な菇遣繄D像漸變(gradate)?！?zhí)行切割以對應于沒有圖像的部分。這里，在使用第一實施例中的相機頭la、lb所設置的視頻處理器13或相機適配器 盒2所設置的視頻處理器22中的任一者時，可以靈活地設定有效圖像區(qū)域的調(diào)節(jié)范圍。但 是，在標準視頻信號和放大區(qū)域視頻信號分別疊加在有效圖像區(qū)域和放大區(qū)域(傳感器部 分11和相機視頻處理器12將視頻信號輸入到這些區(qū)域然后輸出)上時，視頻處理器13、22 在不對圖像進行放大并執(zhí)行切割的情況下將這些圖像的光軸對準。因此，如果執(zhí)行的校正 超出了放大區(qū)域，則圖像的角部被切割。在此情況下，例如，通過使角部圖像漸變來執(zhí)行使 可視性不受影響的處理。圖4B示出了當水平濾波器系數(shù)為ζ、而垂直濾波器系數(shù)為Z時，水平/垂直濾波器 15、25的操作。圖4B所示水平/垂直濾波器15、25與圖4A所示水平/垂直濾波器15、25在結構 上相同，只是濾波器系數(shù)ζ和Z不同于濾波器系數(shù)a和A。水平濾波器系數(shù)ζ被輸入到水平濾波器26。這樣，利用水平濾波器26，向其輸出 的視頻信號受到水平濾波，然后被寫入存儲器27。另外，垂直濾波器系數(shù)Z被輸入垂直濾波 器觀。這樣，從存儲器27讀出的視頻信號受到垂直濾波，然后被輸出。圖5示出了一種像素格式示例，1920個樣本X 1080條線的視頻信號按照該格式而 受到調(diào)節(jié)。對于用于從傳感器部分11和相機視頻處理器12輸出的視頻信號的像素格式，現(xiàn) 有區(qū)域(該區(qū)域包含1920個樣本X 1080條線的視頻信號)被設定為有效圖像區(qū)域。另外， 通過將有效圖像區(qū)域的尺寸放大若干個樣本而獲得的區(qū)域被設定為放大區(qū)域。在這種示例 中，放大區(qū)域的尺寸本設定為1960個樣本X 1100條線?？傊糯髤^(qū)域的水平尺寸是通過 將有效圖像區(qū)域的右側和左側個放大20個樣本而獲得的。另外，放大區(qū)域的垂直尺寸是通過將有效圖像區(qū)域的上側和下側個放大10條線而獲得的。圖6示出了傳輸格式的一種示例，視頻信號按照該格式而傳送。用于對有效圖像區(qū)域中的1920個樣本X 1080條線的視頻信號進行傳輸?shù)膮^(qū)域以 這種傳輸格式來設置。另外，用于對放大區(qū)域中的視頻信號進行傳輸?shù)膮^(qū)域設在有效圖像 區(qū)域的周邊。圖7示出了數(shù)字式信號的傳輸格式示例。例如SDI格式被用作該數(shù)字式信號的傳輸格式。該傳輸格式中提供了用于對1920 個樣本X1080條線的視頻信號進行傳輸?shù)膮^(qū)域以及對時間參考碼(timing reference code，例如SAV或EVA)、音頻數(shù)據(jù)和AUX數(shù)據(jù)進行傳輸?shù)膮^(qū)域。在這種情況下，后一區(qū)域設 在前一區(qū)域的右側和左側。當相機頭la、lb輸出數(shù)字式視頻信號時，不向V消隱期施加消 隱。另一方面，H消隱期中的數(shù)據(jù)以疊加在補充數(shù)據(jù)區(qū)域上的狀態(tài)而被傳輸，從而不使時間 參考碼(例如SAV或EAV)和音頻數(shù)據(jù)變形。在這種示例中，與放大區(qū)域之間的差對應的視 頻信號疊加在圖7中由灰色填充的補充數(shù)據(jù)區(qū)域中，然后被傳送。圖8A、圖8B和圖8C分別示出了光軸之間的偏移示例。圖8A示出了相機頭Ia和Ib對對象51至53的圖像進行捕獲的情形示例。所示的是略去了平臺8而布置的相機頭Ia和Ib被分別賦予視差，并且在光軸方 面彼此不同。這里，對象51至53上繪有預定的標記和圖形。另外，相對于各個相機頭Ia 和lb，對象51至53在安裝位置方面彼此不同。圖8B示出了在光軸之間存在偏移的情況下圖像的顯示示例。相機頭Ia和Ib不僅在水平方向、而且在垂直方向發(fā)生彼此偏移。因此，在合成圖 像中，兩個圖像不僅在水平方向、而且在垂直方向發(fā)生彼此偏移。這樣，難以將合成圖像作 為3D圖像來觀看。圖8C示出了在光軸之間不存在偏移的情況下圖像的顯示示例。用相機頭Ia捕獲的右側通道圖像以及用相機頭Ib捕獲的左側通道圖像彼此在水 平方向上略微偏移，因為相機頭Ia和Ib彼此在視差方面不同。另外，可以理解，當右側通 道圖像和左側通道圖像被合成時，對象52 (光軸在該對象中交叉)上繪制的標記的圖像之 間的偏移以及距離較短那側的對象51上繪制的標記的圖像之間的偏移比距離較長那側的 對象53上繪制的標記的圖像之間的偏移更大。在此情況下，可以輸出適于作為3D圖像的 圖像。對于光軸之間偏移的校正例如是在工程師觀看合成圖像的同時通過使左側通道移動 以對應于固定的右側通道圖像來執(zhí)行的。圖9示出了由視頻處理器13、22所設置的水平濾波器沈?qū)D像的光軸之間的偏 移進行校正的濾波處理的示例。水平濾波器沈?qū)τ谝韵嗟乳g隔輸入的視頻信號執(zhí)行水平濾波處理，以對應于傳 感器部分11的圖像捕獲像素的布置，從而改變各個像素中視頻信號的相位。通過執(zhí)行該水 平濾波處理，從水平方向布置的這些像素輸出的視頻信號被轉換成相位彼此不同的像素位 置的視頻信號。因此，工程師能夠執(zhí)行圖像微調(diào)，在該微調(diào)中，圖像在垂直方向和水平方向 所移動的距離各自被設定在比單位像素更短的長度。圖IOA至圖IOC和圖IlA至圖IlC分別示出了取景器部分6上顯示的圖像的示例。相機適配器盒2可以從相機頭Ia的輸出圖像、相機頭Ib的輸出圖像、相機頭Ia和Ib的輸出圖像的混合圖像、相機頭Ia和Ib的輸出圖像之間的差異圖像等中選擇合適的 圖像作為取景器信號，從而在取景器部分6上顯示這樣選擇的圖像。另外，工程師可以從下列項選擇合適的一者對取景器部分6上顯示的菜單界面 進行操縱，使用安裝到相機適配器盒2的旋轉開關執(zhí)行選擇，根據(jù)按壓開關的分配來執(zhí)行 選擇，或者通過使用按壓開關依次執(zhí)行發(fā)送，從而對取景器部分6上顯示的圖像進行選擇。 另外，要在取景器部分6上顯示的圖像可以按照從相機控制單元(未示出)接收的請求等 而轉變成返回信號(參考圖13)，從而輸出該返回信號。此外，如果取景器部分6能在其上 顯示三維圖像，則從右側通道和左側通道輸出的用于兩個通道的圖像也可以被顯示，還可 以添加用于者兩個通道的圖像的選擇菜單。圖IOA示出了從相機頭Ia輸出的右側通道圖像的示例。圖IOB示出了從相機頭Ib輸出的左側通道圖像的示例。所示的是由于相機頭Ia和Ib布置在平臺8中以對應于用戶的視差，所以右側圖 像與左側圖像之間在水平方向產(chǎn)生了偏移。圖IOC示出了混合圖像的示例，該混合圖像是通過將分別從相機頭Ia和Ib輸出 的圖像混合地顯示而顯示的?；旌蠄D像是通過將來自相機頭Ib(左側通道)的亮度信號和色差信號(Lch_Y、 Lch_CB、Lch_CR)以及來自相機頭Ia (右側通道)的亮度信號和色差信號(Rch_Y、Rch_CB、 Rch_CR)彼此相加而獲得的。顏色被賦予該混合圖像。圖IlA示出了差異圖像的示例。該差異圖像是通過從相機頭Ib輸出的視頻信號減去相機頭Ia輸出的視頻信號而 獲得的灰度圖像。圖IlA顯示了在捕獲視頻圖表時的差異圖像。此時，按照用相機頭Ia捕 獲的圖像的亮度信號或色差信號與用相機頭Ib捕獲的圖像的亮度信號或色差信號之間的 差異，取景器部分6上顯示差異圖像。該差異圖像是通過從來自相機頭Ib (左側通道)的亮度信號(Lch_Vide0)減去來 自相機頭Ia(右側通道)的亮度信號(Rch_Vide0)而獲得的。注意，也可以通過從來自相 機頭Ia(右側通道)的亮度信號減去來自相機頭Ib(左側通道)的亮度信號而獲得該差異 圖像。此后，差異值除以“2”或者合適的數(shù)字以獲得偏置，具有合適的值的圖像水平(50_ video-Level)被加到該偏置。上述內(nèi)容以表達式(1)的形式表示如下(Lch_Video-Rch_Video)/2+50_Video_Level…(1)結果，可以在取景器部分6上顯示差異圖像，該差異圖像中只有亮度受到關注。同樣，也可以按照色差數(shù)據(jù)來創(chuàng)建差異數(shù)據(jù)。此時，通過從來自相機頭lb(左側通 道)的色差信號(Lch_CB、Lch_CR)減去來自相機頭Ia (右側通道)的色差信號(Rch_CB、 Rch_CR)來獲得該差異。這種關系由表達式(2)表示如下(Lch_CB-Rch_CB) /2 或者(Lch_CR-Rch_CB) /2 …O)但是，由于在色差數(shù)據(jù)的情況下，零點是中間點，所以不需要增加偏置值。另外，為 了執(zhí)行增強式顯示(intensified display)，來自相機頭Ia的色差與來自相機頭Ib的色差 之間的差異不被除以“2”，而是可以乘以合適的數(shù)字，從而執(zhí)行增強。根據(jù)上文，取景器部分6上可以顯示單色模式和彩色模式中的任一者，在單色模式下只有亮度作為差異圖像而 被顯示，而在彩色模式下添加了色差數(shù)據(jù)。當相機頭Ia和Ib在變焦和方向方面被合適地布置時，由于圖像之間不產(chǎn)生偏移， 所以提供了相同狀態(tài)，在該狀態(tài)下，差異圖像中沒有輪廓(outline)被顯示。但是，當相機 頭Ia和Ib的布置分別不同于合適的布置時，兩片圖像之間產(chǎn)生了偏移。因此，如圖IlA左 側所示，對象的輪廓被強調(diào)性地顯示。因此，在對平臺8中安裝的相機頭Ia和Ib合適地設 置變焦和方向時，這成為有效的信息。圖IlB示出了立體照片(anaglyph)圖像的示例。該立體照片圖像是這樣的圖像該圖像以傳統(tǒng)方式被使用，以觀看三維圖像。例 如，用戶佩戴專用的眼鏡，在該眼鏡中，紅色玻璃紙被粘附到左側鏡片而藍色玻璃紙被粘附 到右側晶片，從而可以確認該三維圖像。圖IlC示出了分段(segmented)圖像的示例。在此情況下，以分段狀態(tài)預備從相機頭Ia輸出的圖像的右側那一半、以及從相機 頭Ib輸出的圖像的左側那一半，這些分段圖像一起被結合在中心以進行顯示。結果，工程 師掌握相機頭Ia和Ib的安裝位置的扭曲等，因而容易對相機頭Ia和Ib的水平扭曲進行 調(diào)節(jié)。注意，盡管未示出，但是也可以以分段狀態(tài)預備從相機頭Ia輸出的圖像的上側那一 半以及從相機頭Ib輸出的圖像的下側那一半，并可以將這些分段圖像一起結合在中心以 進行顯示。在此情況下，容易對相機頭Ia和Ib的垂直扭曲進行調(diào)節(jié)。根據(jù)上述第一實施例的3D相機系統(tǒng)10，在用兩個相機捕獲3D圖像中，使用相機頭 Ia和lb，每個相機頭用傳感器部分11對全部像素執(zhí)行相機信息處理，其中，使圖像拾取元 件的有效圖像區(qū)域比信號格式更寬。此時，視頻處理器13和22從相機頭Ia和Ib接收視 頻信號，每個相機頭從包括有效圖像區(qū)域和放大區(qū)域的圖像拾取元件既輸出標準視頻信號 又輸出放大區(qū)域視頻信號。此時，放大區(qū)域視頻信號被疊加在垂直消隱間隔和水平消隱間 隔中的每一者中，然后在此狀態(tài)下被傳送。另外，視頻處理器13、22向取景器部分6既輸出 標準視頻信號又輸出放大區(qū)域視頻信號，并使取景器部分6在其上顯示圖像。此時，工程師 在觀看顯示在取景器部分6上的圖像的同時對控制面板7進行操縱，從而指令相機頭la、Ib 或相機適配器盒2對光軸之間的偏移進行調(diào)節(jié)。按照該指令，視頻處理器13、22所設有的水 平/垂直濾波器15、25使標準視頻信號的區(qū)域在放大區(qū)域視頻信號的范圍內(nèi)移動，以對應 于光軸的偏移。另外，水平/垂直濾波器15、25從該移動量范圍內(nèi)包含的放大區(qū)域視頻信 號提取與移動量對應的標準視頻信號，并輸出這樣提取的標準視頻信號，從而使相機頭la、 Ib或相機適配器盒2將圖像混合。因此，有效圖像區(qū)域和放大區(qū)域被彼此切換，從而使得可以對相機頭Ia和Ib之間 造成的鏡頭光程的誤差量進行校正。這樣，即使工程師不對安裝了相機頭Ia和Ib的平臺 8的高度、相機頭Ia和Ib的方向等進行調(diào)節(jié)，他/她也能在觀看顯示在取景器部分6上的 圖像的同時對光軸之間的偏移進行校正。因此，即使3D相機系統(tǒng)10具有用放大區(qū)域中儲 存的視頻信號對光軸之間的偏移進行校正、從而切割出對于光軸之間的偏移進行了校正的 區(qū)域的功能，也可以減小成本和勞動量。另外，視頻處理器22將圖像捕獲條件信息嵌入狀態(tài)信息中，所述狀態(tài)信息例如相 機頭la、Ib所設有的鏡頭(未示出)的變焦。另外，由于視頻處理器22執(zhí)行與圖像捕獲條件信息相對應的圖像輸出，所以可以執(zhí)行對于兩片圖像的reg.中心校正，以對應于該圖像 捕獲條件信息(例如鏡頭的狀態(tài))。另外，還可以相對于顯示在取景器部分6上的有效圖像區(qū)域沿垂直方向、水平方 向或旋轉方向來由控制面板7作出將圖像混合的指令。此時，水平/垂直濾波器15、25切 割出該指令方向所包含的放大區(qū)域視頻信號，從而提取該放大區(qū)域視頻信號作為標準視頻 信號。因此，獲得了工程師能夠?qū)⒎糯髤^(qū)域范圍內(nèi)的任意距離處的圖像混合的效果，因此增 強了 reg.中心校正的自由度。另外，水平/垂直濾波器15、25既在有效圖像區(qū)域的垂直方向也在水平方向執(zhí)行 濾波處理。這樣，可以使標準視頻信號沿垂直方向和水平方向的移動距離各自在長度上比 圖像拾取元件的單位像素更短。因此，reg.中心校正的精度得以增強，因此可以獲得具有 更號質(zhì)量的3D圖像，該圖像不會給用戶帶來不適感。2.第二實施例下面將參考圖12和圖13說明本發(fā)明的第二實施例。在第二實施例中，對于將本 發(fā)明應用到3D相機系統(tǒng)40的情形進行說明。在下面的說明中，第一實施例中已經(jīng)描述過的部分將分別由相同的標號表示，并 且為了簡化起見而在此略去其詳細說明。3D相機系統(tǒng)40包括相機頭Ia和lb、相機適配器盒2、相機控制單元(CXU) 3以及 3D圖像算術運算單元4。在此情形下，相機控制單元3執(zhí)行兩片圖像的光軸之間的對準。相 機控制單元3經(jīng)過相機電纜5連接到相機適配器盒2，3D圖像算術運算單元4連接到相機 控制單元3。相機電纜5被用作相機適配器盒2與相機控制單元3之間具有寬帶(寬度是現(xiàn)有 的頻帶的兩倍或更多)的通信接口。這樣，與分別從相機頭Ia和Ib輸出的圖像有關的數(shù) 據(jù)可以以包含標準視頻信號和放大區(qū)域視頻信號的狀態(tài)同時傳送。另外，相機控制單元3 例如包括與3G-HDI對應的通信接口，并能夠經(jīng)過該通信接口以高速向3D圖像算術運算單 元4傳輸視頻信號。相機控制單元3把從操縱部分35向其輸入的控制信號向相機適配器 盒2輸出，從而對相機頭Ia和Ib的操作進行控制。另外，相機控制單元3把從相機適配器 盒2接收的視頻信號向顯示裝置(未示出)輸出。同樣，3D圖像算術運算單元4的操作也 由工程師對操縱部分46進行操縱來控制。3D圖像算術運算單元4的操作例如包括如上所 述對兩片圖像的光軸之間的偏移進行校正的reg.中心校正處理。另外，相機適配器盒2設在相機頭la、lb中的每一者與相機控制單元3之間。因 此，相機適配器盒2看起來使一個相機的操作是針對相機適配器盒2而受到控制。兩片圖像(關于這些圖像的數(shù)據(jù)是從相機適配器盒2接收的)被顯示在監(jiān)視器部 分(未示出)上，該監(jiān)視器部分連接到相機控制單元3或3D圖像算術運算單元4。因此，工 程師能夠在觀看監(jiān)視器部分的同時確認這些圖像，并在觀看顯示在監(jiān)視器部分上的圖像的 同時通過對操縱部分35和46進行操縱來將這些圖像混合。圖13是假定捕獲3D圖像時的應用的框圖。在3D相機系統(tǒng)40中，相機控制單元3和3D圖像算術運算單元4對應于根據(jù)本發(fā) 明那些實施例的放大傳輸系統(tǒng)，用于既使用標準視頻信號又使用放大區(qū)域視頻信號來對光 軸之間的偏移進行調(diào)節(jié)。此時，相機適配器盒2指令各個相機頭Ia和Ib執(zhí)行圖像捕獲操
14作，而相機適配器盒2經(jīng)過其傳送標準視頻信號和放大區(qū)域視頻信號二者，以向隨后的相 機控制單元3既輸出標準視頻信號又輸出放大區(qū)域視頻信號。相機控制單元3包括解串行器31、視頻處理器32和串行器33。在此情況下，解串 行器31把從相機適配器盒2向其輸入的串行視頻信號轉換成并行視頻信號。視頻處理器 32使從解串行器31向其輸入的并行視頻信號受到預定的處理。另外，串行器33還將完成 該預定處理之后的并行視頻信號轉換成串行視頻信號，從而輸出所得的串行視頻信號。疊 加在放大區(qū)域上的視頻信號按照SDI傳輸格式在相機控制單元3與3D圖像算術運算單元 4之間傳輸。另外，相機控制單元3還包括連接到視頻處理器32的操縱部分35。操縱部分 35輸出操縱信號，用相機頭Ia和Ib捕獲的那些圖像的光軸之間的偏移按照該操縱信號、基 于顯示部分上按照標準視頻信號顯示的圖像而受到調(diào)節(jié)。這樣，工程師能夠通過對操縱部 分35進行操縱，來將監(jiān)視器部分(未示出)上顯示的圖像進行混合。3D算術運算單元4包括解串行器41和CPU 42。在此情形下，解串行器41把從相 機控制單元3向其輸入的串行視頻信號轉換成并行視頻信號。另外，CPU 42按照從相機控 制單元3向其輸入的鏡頭狀態(tài)以及一同輸入的串行視頻信號來執(zhí)行預定的算術運算處理。 另外，3D圖像算術運算單元4還包括視頻處理器43和串行器45。在此情形下，視頻處理器 將這些圖像混合。另外，串行器45還將這樣混合的圖像的并行圖像信號轉換成串行視頻信 號，并輸出所得的串行視頻信號。串行器45按照SDI傳輸格式將串行視頻信號疊加在標準 區(qū)域上，并輸出所得的串行視頻信號。另外，3D圖像算術運算單元4包括連接到視頻處理器 43的操縱部分46。這樣，工程師能夠通過對操縱部分46進行操縱，來將監(jiān)視器部分(未示 出)上顯示的圖像混合。這里，當相機控制單元3所設置的視頻處理器32的水平/垂直濾波器34對光軸 之間的偏移進行調(diào)節(jié)時，視頻處理器43所設置的水平/垂直濾波器44被繞過。另一方面， 當視頻處理器43所設置的水平/垂直濾波器44對光軸之間的偏移進行調(diào)節(jié)時，相機控制 單元3所設置的視頻處理器32的水平/垂直濾波器34被繞過，因此相機視頻信號和放大 區(qū)域視頻信號二者都經(jīng)過相機控制單元3。以此方式，水平/垂直濾波器34和44具有這樣 的關系當水平/垂直濾波器34和44中的一者執(zhí)行濾波操作時，另一者繞過該操作。由水 平/垂直濾波器34、44所執(zhí)行的濾波操作的示例與由上述第一實施例中的水平/垂直濾波 器15、25所執(zhí)行的處理相同。即，水平/垂直濾波器34、44用作視頻信號提取部分，在按照 操縱信號來對光軸之間的偏移進行調(diào)節(jié)時，該部分使標準視頻信號的區(qū)域在放大區(qū)域視頻 信號的區(qū)域內(nèi)移動以對應于光軸之間的偏移，從該移動量范圍中包含的放大區(qū)域視頻信號 提取與移動量對應的標準視頻信號，并輸出這樣提取的標準視頻信號。根據(jù)上述本發(fā)明第二實施例的3D相機系統(tǒng)40，當用多個相機頭Ia和Ib執(zhí)行系統(tǒng) 操作時，或者當希望把相機與控制面板或用于接收視頻信號的設備之間的距離加長到較長 距離時，3D相機系統(tǒng)40可以具有包括相機控制單元3和3D圖像算術運算單元4的系統(tǒng)配 置。這里，相機控制單元3和3D系統(tǒng)算術運算單元4按照從操縱部分35和46發(fā)出的指令， 用標準視頻信號和放大區(qū)域視頻信號二者來對兩片圖像的光軸之間的偏移進行校正，從而 將這兩片圖像混合，其中，所述標準視頻信號和放大區(qū)域視頻信號是被疊加在傳輸格式的 放大區(qū)域上并由相機頭Ia和Ib接收的。因此，可以減小對相機那方(相機頭Ia和lb、相 機適配器盒2)進行布線的導線數(shù)目。這樣，在使用多個相機(例如實時系統(tǒng)相機)的協(xié)作圖像捕獲中，可以更靈活地執(zhí)行操作。這使得即使在3D相機系統(tǒng)中，系統(tǒng)相機配置也可以 與已有的2D圖像捕獲類似。另外，相機頭Ia和lb、相機適配器盒2、相機控制單元3和3D圖像算術運算單元4 經(jīng)過信號線彼此連接。例如，當相機頭Ia和lb、相機適配器盒2、相機控制單元3和3D圖像 算術運算單元4彼此連接時，使用各種通信介質(zhì)或通信系統(tǒng)(例如同軸電纜、三線(triax) 電纜、光纖光纜和無線通信)。因此，可以執(zhí)行富有靈活性的系統(tǒng)操作。3.改變?nèi)缟纤?，由各個單元所設置的視頻處理器中的每一者來實現(xiàn)reg.中心校正處 理。這里，能夠執(zhí)行對每個AUX區(qū)域的記錄的記錄單元可以被布置在相機控制單元3與3D 視頻算術運算單元4之間。圖14示出了 3D相機系統(tǒng)50的配置示例，該系統(tǒng)包括相機控制單元3與3D視頻 算術運算單元4之間的大容量記錄單元55。記錄單元55既記錄標準視頻信號又記錄包含放大區(qū)域并原樣經(jīng)過相機控制單元 3的放大區(qū)域視頻信號。例如，硬盤驅(qū)動器(HDD)被用作記錄單元55。另外，3D視頻算術運 算單元4從記錄單元55既讀出標準視頻信號又讀出放大區(qū)域視頻信號，并向監(jiān)視器部分既 輸出標準視頻信號又輸出放大區(qū)域視頻信號。這樣，3D視頻算術運算單元4能夠從記錄單 元55讀出包含了放大區(qū)域的視頻信號。結果，3D視頻算術運算單元4能夠使用從記錄單元 陽讀出的視頻信號來執(zhí)行用于reg.校正的后處理。在此情形下，用于reg.校正的處理不 一定要對應于相機頭la、lb對對象的圖像進行捕獲的時機。這樣，這種情形適用于對無需 實時特性的對象的圖像進行捕獲和編輯。另外，相機頭la、lb可以以一體的形式使用。在此情形下，以一體形式使用的相機 頭la、lb可以用作能夠傳送寬圖像區(qū)域的3D相機系統(tǒng)。此時，對于對鏡頭的光軸之間的偏 移進行校正以及對像素數(shù)目進行轉換的階段的濾波處理，放大區(qū)域視頻信號可以用在用于 粘貼的標簽(tab)中。另外，上述第一和第二實施例各自中的一系列處理可以由軟件、也可以由硬件執(zhí) 行。當由軟件執(zhí)行一系列處理時，可以由在專用硬件中包含組成有關軟件的程序的計算機 來執(zhí)行一系列處理，也可以由安裝有用于執(zhí)行各種功能的程序的計算機來執(zhí)行。例如，組成 所需程序的程序可以安裝在通用個人計算機等中，以執(zhí)行一系列處理。另外，記錄了軟件的程序代碼(該程序代碼用于實現(xiàn)上述第一實施例和第二實施 例中每一者)的記錄介質(zhì)可以被提供給系統(tǒng)或設備。另外，無需多言，該系統(tǒng)或該設備的計 算機(或控制單元，例如CPU)也可以讀出并執(zhí)行該記錄介質(zhì)中儲存的程序代碼，從而實現(xiàn) 該功能。在此情形下，例如軟盤、硬盤、光盤、磁光盤、⑶-ROM、⑶-R、磁帶、非易失性存儲卡、 ROM等可以被用作記錄介質(zhì)，以提供該程序代碼。另外，由計算機讀出的程序代碼被執(zhí)行，從而實現(xiàn)上述第一實施例和第二實施例 的功能中的每一者。除此織物，計算機上運行的OS等按照該程序代碼的指令而執(zhí)行實際處 理的一部分或全部。本申請中也包含了通過有關處理來實現(xiàn)上述第一實施例和第二實施例 的功能中的每一者的情形。4.第三實施例
根據(jù)本發(fā)明第三實施例的視頻信號處理方法包括下述步驟在各自具有圖像拾取 元件的相機頭Ia和Ib按照傳送標準視頻信號和放大區(qū)域視頻信號的預定傳輸格式傳送標 準視頻信號、并將放大區(qū)域視頻信號疊加在所述預定傳輸格式的垂直消隱期和水平消隱期 中的每一者上從而傳送所得的放大區(qū)域視頻信號時，向用于顯示圖像的顯示部分輸出標準 視頻信號和放大區(qū)域視頻信號，所述圖像拾取元件包括用于輸出標準視頻信號的有效圖像 區(qū)域以及在水平和垂直方向上比有效圖像區(qū)域更寬的放大區(qū)域并從有效圖像區(qū)域輸出標 準視頻信號以及從放大區(qū)域輸出放大區(qū)域視頻信號；輸出操縱信號，分別用相機頭Ia和Ib 捕獲的圖像的光軸之間的偏移按照所述操縱信號、基于顯示部分上按照標準視頻信號顯示 的圖像而受到調(diào)節(jié)；在按照操縱信號對光軸之間的偏移進行調(diào)節(jié)時使標準視頻信號的區(qū)域 在放大區(qū)域視頻信號的范圍內(nèi)移動以對應于光軸之間的偏移，從移動的范圍中包含的放大 區(qū)域視頻信號提取與移動量對應的標準視頻信號，并輸出這樣提取的標準視頻信號。注意，3D相機系統(tǒng)中實際包含的本發(fā)明各種實施例的視頻信號處理設備是如3D 相機系統(tǒng)的第一、第二實施例或其改變中所述那樣實現(xiàn)的。另外，應當理解，本發(fā)明決不應限制為上述實施例，在不脫離本發(fā)明實質(zhì)的情況下 可以作出各種應用示例和改變。本申請包含與2009年12月28日向日本特許廳遞交的日本在先專利申請JP 2009-297929中公開的主題有關的主題，該申請的全部內(nèi)容通過引用方式結合于此。本領域技術人員應當理解，在所附權利要求或其等同含義的范圍內(nèi)，取決于設計 要求和其他因素，可以產(chǎn)生各種變更、組合、子組合和替換形式。
權利要求
1.一種視頻信號處理設備，包括圖像輸出部分，用于當?shù)谝幌鄼C和第二相機按照對標準視頻信號和放大區(qū)域視頻信號 進行傳送的預定傳輸格式傳送所述標準視頻信號、并將所述放大區(qū)域視頻信號疊加在所述 預定傳輸格式的垂直消隱期和水平消隱期中的每一者上從而傳送所得的放大區(qū)域視頻信 號時向顯示部分輸出所述標準視頻信號和所述放大區(qū)域視頻信號，所述顯示部分用于在其 上顯示圖像，所述第一相機和所述第二相機各自具有圖像拾取元件，所述圖像拾取元件包 括用于輸出所述標準視頻信號的有效圖像區(qū)域以及在水平和垂直方向上比所述有效圖像 區(qū)域更寬的放大區(qū)域并從所述有效圖像區(qū)域輸出所述標準圖像信號以及從所述放大區(qū)域 輸出所述放大區(qū)域視頻信號；操縱部分，用于輸出操縱信號，根據(jù)所述操縱信號，基于所述顯示部分上按照所述標準 視頻信號顯示的圖像，來分別調(diào)節(jié)用所述第一相機和所述第二相機捕獲的圖像的光軸之間 的偏移，以及視頻信號提取部分，用于在按照所述操縱信號對所述光軸之間的偏移進行調(diào)節(jié)時使 所述標準視頻信號的區(qū)域在所述放大區(qū)域視頻信號的范圍內(nèi)移動以對應于所述光軸之間 的偏移，從移動的范圍中包含的放大區(qū)域視頻信號提取與所述移動對應的所述標準視頻信 號，并輸出這樣提取的所述標準視頻信號。
2.根據(jù)權利要求1所述的視頻信號處理設備，其中，在對象的圖像被捕獲時，所述第一 相機和所述第二相機向所述視頻信號提取部分發(fā)送所述第一相機和所述第二相機中設定 的圖像捕獲條件信息；并且所述視頻信號提取部分按照所述圖像捕獲條件信息提取所述標準視頻信號，以對應于 所述第一相機和所述第二相機的光軸之間的偏移。
3.根據(jù)權利要求1所述的視頻信號處理設備，其中，所述視頻信號提取部分相對于所 述有效圖像區(qū)域在垂直方向、水平方向或旋轉方向中的任一者上切割出所包含的所述放大 區(qū)域視頻信號，從而提取所述標準視頻信號。
4.根據(jù)權利要求1所述的視頻信號處理設備，其中，所述視頻信號提取部分在所述有 效圖像區(qū)域的垂直方向和水平方向上都執(zhí)行濾波處理，所述標準視頻信號在所述垂直方向 和所述水平方向上的移動距離各自被設定成比所述圖像拾取元件的單位像素更短的長度。
5.一種視頻信號處理方法，包括下列步驟在第一相機和第二相機按照傳送標準視頻信號和放大區(qū)域視頻信號的預定傳輸格式 傳送所述標準視頻信號、并將所述放大區(qū)域視頻信號疊加在所述預定傳輸格式的垂直消隱 期和水平消隱期中的每一者上從而傳送所得的放大區(qū)域視頻信號時，向顯示部分輸出所述 標準視頻信號和所述放大區(qū)域視頻信號，所述顯示部分用于在其上顯示圖像，所述第一相 機和所述第二相機各自具有圖像拾取元件，所述圖像拾取元件包括用于輸出所述標準視頻 信號的有效圖像區(qū)域以及在水平和垂直方向上比所述有效圖像區(qū)域更寬的放大區(qū)域并從 所述有效圖像區(qū)域輸出所述標準視頻信號以及從所述放大區(qū)域輸出所述放大區(qū)域視頻信 號；輸出操縱信號，根據(jù)所述操縱信號，基于所述顯示部分上按照所述標準視頻信號顯示 的圖像，來分別調(diào)節(jié)用所述第一相機和所述第二相機捕獲的圖像的光軸之間的偏移；以及在按照所述操縱信號對所述光軸之間的偏移進行調(diào)節(jié)時使所述標準視頻信號的區(qū)域在所述放大區(qū)域視頻信號的范圍內(nèi)移動以對應于所述光軸之間的偏移，從移動的范圍中包 含的放大區(qū)域視頻信號提取與所述移動對應的所述標準視頻信號，并輸出這樣提取的所述 標準視頻信號。
6. 一種視頻信號處理設備，包括圖像輸出裝置，用于在第一相機和第二相機按照對標準視頻信號和放大區(qū)域視頻信號 進行傳送的預定傳輸格式傳送所述標準視頻信號、并將所述放大區(qū)域視頻信號疊加在所述 預定傳輸格式的垂直消隱期和水平消隱期中的每一者上從而傳送所得的放大區(qū)域視頻信 號時，向顯示部分輸出所述標準視頻信號和所述放大區(qū)域視頻信號，所述顯示部分在其上 顯示圖像，所述第一相機和所述第二相機各自具有圖像拾取元件，所述圖像拾取元件包括 用于輸出所述標準視頻信號的有效圖像區(qū)域以及在水平和垂直方向上比所述有效圖像區(qū) 域更寬的放大區(qū)域并從所述有效圖像區(qū)域輸出所述標準圖像信號以及從所述放大區(qū)域輸 出所述放大區(qū)域視頻信號；操縱裝置，用于輸出操縱信號，根據(jù)所述操縱信號，基于所述顯示部分上按照所述標準 視頻信號顯示的圖像，來分別調(diào)節(jié)用所述第一相機和所述第二相機捕獲的圖像的光軸之間 的偏移；以及視頻信號提取裝置，用于在按照所述操縱信號對所述光軸之間的偏移進行調(diào)節(jié)時使 所述標準視頻信號的區(qū)域在所述放大區(qū)域視頻信號的范圍內(nèi)移動以對應于所述光軸之間 的偏移，從移動的范圍中包含的放大區(qū)域視頻信號提取與移動對應的所述標準視頻信號， 并輸出這樣提取的所述標準視頻信號。
全文摘要
本發(fā)明涉及視頻信號處理設備和視頻信號處理方法。其中公開的視頻信號處理設備包括圖像輸出部分、操縱部分以及視頻信號提取部分。
文檔編號H04N13/02GK102111635SQ201010609030
公開日2011年6月29日 申請日期2010年12月21日 優(yōu)先權日2009年12月28日
發(fā)明者神谷浩二 申請人:索尼公司