專利名稱：攝像機(jī)控制設(shè)備、攝像機(jī)系統(tǒng)、電子會(huì)議系統(tǒng)以及攝像機(jī)控制方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于控制攝像機(jī)拍攝范圍的包括改變拍攝方向的驅(qū)動(dòng)設(shè)備的攝像機(jī)控制設(shè)備，包括攝像機(jī)控制設(shè)備的攝像機(jī)系統(tǒng)和電子會(huì)議系統(tǒng)，和攝像機(jī)控制方法。更具體而言，本發(fā)明涉及改變攝像機(jī)拍攝方向的操作更方便的攝像機(jī)控制設(shè)備、攝像機(jī)系統(tǒng)、電子會(huì)議系統(tǒng)、和攝像機(jī)控制方法。
背景技術(shù)：
近年來，通過經(jīng)由通信線路相互發(fā)送和接收在會(huì)議上所收集的音頻和拍攝圖像的信號(hào)而能夠在遠(yuǎn)程位置舉行會(huì)議的電視會(huì)議系統(tǒng)已經(jīng)引起注意。在這種系統(tǒng)中，優(yōu)選地拍攝發(fā)言的人以及能夠?qū)⑵鋱D像信號(hào)發(fā)送到其他方。為此，必須通過人的操作切換攝像機(jī)或者將攝像機(jī)指向發(fā)言的人。
同時(shí)，已經(jīng)在各種設(shè)備中使用了根據(jù)圖像信號(hào)自動(dòng)識(shí)別人等等的技術(shù)。例如，正如美國專利第2002-0142209號(hào)所公開的，存在用于根據(jù)時(shí)間相鄰的兩個(gè)幀之間的差以檢測運(yùn)動(dòng)體諸如人以及通過移動(dòng)攝像機(jī)的拍攝方向跟蹤運(yùn)動(dòng)體的已知的運(yùn)動(dòng)體圖像監(jiān)控設(shè)備。而且，正如在英國專利第2343945號(hào)中所公開的，存在一種檢測和跟蹤拍攝范圍內(nèi)人面部的已知的拍攝設(shè)備。而且，存儲(chǔ)該面部的特征信息，之后比較被拍攝人的特征信息與該存儲(chǔ)的特征信息，并且能夠給出有關(guān)危險(xiǎn)人物的警告。
在上述的電視會(huì)議系統(tǒng)中，優(yōu)選地利用簡單的操作或者自動(dòng)拍攝發(fā)言的人以及能夠?qū)⑵鋱D像信號(hào)發(fā)送到其他方。為此，應(yīng)該使用包括改變拍攝方向機(jī)制的攝像機(jī)來構(gòu)造用于通過電子控制將攝像機(jī)指向發(fā)言者方向的系統(tǒng)。但是，在逐步改變攝像機(jī)的拍攝方向和變焦放大比率的操作技術(shù)中，存在的問題是，為了迅速地移動(dòng)拍攝方向和在屏幕的中央部分中可靠地投影發(fā)言的人，操作員的負(fù)擔(dān)是巨大的。如果提前存儲(chǔ)發(fā)言者的位置信息以及通過操作按鈕等等讀取位置信息自動(dòng)地拍攝每個(gè)發(fā)言的人，則該操作變得簡化。但是，為此，必須在使用該系統(tǒng)之前預(yù)先存儲(chǔ)發(fā)言者的位置，此操作很麻煩。

發(fā)明內(nèi)容
考慮到這些問題而產(chǎn)生了本發(fā)明。期望提供一種攝像機(jī)控制設(shè)備，它能夠使用攝像機(jī)通過簡單的操作可靠地拍攝多個(gè)人中的一個(gè)人，而不執(zhí)行登記用于每人的拍攝方向的操作。
期望提供一種攝像機(jī)系統(tǒng)，它能夠使用攝像機(jī)通過簡單的操作可靠地拍攝多個(gè)人中的一個(gè)人，而不執(zhí)行登記用于每人的拍攝方向的操作。
期望提供一種包括攝像機(jī)系統(tǒng)的電子會(huì)議系統(tǒng)，該攝像機(jī)系統(tǒng)能夠使用攝像機(jī)通過簡單的操作可靠地拍攝多個(gè)人中的一個(gè)人，而不執(zhí)行登記用于每人的拍攝方向的操作。
期望提供一種攝像機(jī)控制方法，該方法能夠使用攝像機(jī)通過簡單的操作可靠地拍攝多個(gè)人中的一個(gè)人，而不執(zhí)行登記用于每人的拍攝方向的操作。
根據(jù)本發(fā)明的實(shí)施例，提供一種用于改變包括改變拍攝方向的驅(qū)動(dòng)設(shè)備的攝像機(jī)的拍攝范圍的攝像機(jī)控制設(shè)備，該攝像機(jī)控制設(shè)備包括存儲(chǔ)部件，當(dāng)攝像機(jī)所拍攝的多個(gè)人的每一面部位于攝像機(jī)拍攝范圍的中央部分時(shí)，為被拍攝的每個(gè)人存儲(chǔ)面部方向信息；面部位置檢測部件，根據(jù)攝像機(jī)的拍攝圖像檢測人面部的位置；登記部件，用于基于面部位置檢測部件的檢測結(jié)果和指示攝像機(jī)的當(dāng)前拍攝方向的信息計(jì)算面部方向信息，并將該面部方向信息登記在存儲(chǔ)部件中；以及驅(qū)動(dòng)控制部件，讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息并根據(jù)該面部方向信息控制驅(qū)動(dòng)設(shè)備，以改變攝像機(jī)的拍攝方向。
在這種攝像機(jī)控制設(shè)備中，所述存儲(chǔ)部件存儲(chǔ)對(duì)應(yīng)于拍攝的每一人的面部方向信息，所述驅(qū)動(dòng)控制部件從該存儲(chǔ)部件讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息，以根據(jù)面部方向信息控制驅(qū)動(dòng)設(shè)備。結(jié)果，僅通過例如通過用戶操作指定人，來改變攝像機(jī)的拍攝方向，以便使指定人的面部位于屏幕的中央。而且，所述面部位置檢測部件根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測人面部的位置。所述登記部件基于檢測結(jié)果和指示攝像機(jī)當(dāng)前拍攝方向的信息計(jì)算面部方向信息并將該面部方向信息存儲(chǔ)在存儲(chǔ)部件中。因而，在所述存儲(chǔ)部件中自動(dòng)地登記對(duì)應(yīng)于拍攝人的面部方向信息。
根據(jù)本發(fā)明的另一個(gè)實(shí)施例，提供了一種控制攝像機(jī)拍攝范圍的攝像機(jī)控制方法，其中攝像機(jī)包括改變拍攝方向的驅(qū)動(dòng)設(shè)備，該攝像機(jī)控制方法包括以下步驟根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測人面部的位置；基于檢測步驟的檢測結(jié)果和指示攝像機(jī)當(dāng)前拍攝方向的信息，當(dāng)該攝像機(jī)所拍攝的多個(gè)人的每一面部位于攝像機(jī)拍攝范圍的中央時(shí)計(jì)算面部方向信息，并且為每一檢測到的人，將該面部方向信息登記在數(shù)據(jù)庫中；并從該數(shù)據(jù)庫讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息以及根據(jù)面部方向信息控制驅(qū)動(dòng)設(shè)備，以便改變攝像機(jī)的拍攝方向。
在這種攝像機(jī)控制方法中，所述登記步驟在數(shù)據(jù)庫中存儲(chǔ)對(duì)應(yīng)于被拍攝的每一人的面部方向信息。所述驅(qū)動(dòng)控制步驟從該數(shù)據(jù)庫中讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息，以便根據(jù)該面部方向信息控制驅(qū)動(dòng)設(shè)備。結(jié)果，僅通過例如用戶操作指定人，可自動(dòng)地改變攝像機(jī)的拍攝方向，從而該指定人的面部位于屏幕的中央。而且，所述檢測步驟根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測人面部的位置?；谠摍z測結(jié)果和指示攝像機(jī)拍攝方向的信息，所述登記部件計(jì)算方向信息并將該面部方向信息登記在數(shù)據(jù)庫中。因而，在所述數(shù)據(jù)庫中自動(dòng)地登記對(duì)應(yīng)于被拍攝人的面部方向信息。


圖1示出了根據(jù)本發(fā)明第一實(shí)施例的攝像機(jī)系統(tǒng)的系統(tǒng)結(jié)構(gòu)；圖2的方框圖示出了在攝像機(jī)控制設(shè)備和CPU中提供的用于攝像機(jī)控制的功能；圖3A和3B示例了用于搖動(dòng)/俯仰/變焦操作的控制信息；圖4的流程圖示出了攝像機(jī)系統(tǒng)的全部處理流程；圖5的流程圖示出了面部位置數(shù)據(jù)庫的自動(dòng)登記處理的流程；圖6的流程圖示出了面部位置數(shù)據(jù)庫的更新處理的流程；圖7的流程圖示出了移動(dòng)攝像機(jī)方向到相鄰面部的處理流程；圖8示出了根據(jù)本發(fā)明第二實(shí)施例的攝像機(jī)系統(tǒng)的系統(tǒng)結(jié)構(gòu)；和圖9的流程圖示出了根據(jù)本發(fā)明第二實(shí)施例的攝像機(jī)系統(tǒng)的全部處理流程。
具體實(shí)施例方式
現(xiàn)在將參考附圖在下文中詳細(xì)描述本發(fā)明的實(shí)施例。在以下描述中，假設(shè)本發(fā)明應(yīng)用于電視會(huì)議系統(tǒng)所使用的攝像機(jī)系統(tǒng)中。
<第一實(shí)施例>
圖1示出了根據(jù)本發(fā)明第一實(shí)施例的攝像機(jī)系統(tǒng)的系統(tǒng)結(jié)構(gòu)。
圖1所示的攝像機(jī)系統(tǒng)被設(shè)計(jì)用于使用一個(gè)攝像機(jī)10拍攝出席會(huì)議的多個(gè)人。這種系統(tǒng)包括具有變焦距功能的攝像機(jī)10，改變攝像機(jī)10的拍攝方向的三腳架盤頭20，控制三腳架盤頭20的攝像機(jī)控制設(shè)備30，用于從遙控器40a接收紅外信號(hào)的紅外接收部件40，集中控制整個(gè)系統(tǒng)的CPU 50，顯示拍攝圖像等等的顯示器60，以及壓縮和編碼圖像信號(hào)的圖像編碼器70。
在攝像機(jī)10中，通過三腳架盤頭20在水平或垂直方向改變攝像機(jī)的拍攝方向，根據(jù)CPU 50的控制信號(hào)(變焦命令)控制變焦鏡頭的焦距。該攝像機(jī)10提供拍攝的圖像信號(hào)給攝像機(jī)控制設(shè)備30。三腳架盤頭20從攝像機(jī)控制設(shè)備30接收指示關(guān)于水平/垂直方向的拍攝方向的控制信息(Pdeg，Tdeg(以下將對(duì)此描述))并根據(jù)控制信息的值來驅(qū)動(dòng)該盤頭。能夠通知Pdeg和Tdeg的當(dāng)前值給攝像機(jī)控制設(shè)備30。
攝像機(jī)控制設(shè)備30根據(jù)來自CPU 50關(guān)于搖動(dòng)/俯仰操作的操作命令控制三腳架盤頭20的操作。而且，攝像機(jī)控制設(shè)備30提供攝像機(jī)10的拍攝圖像信號(hào)給顯示器60和圖像編碼器70。
除此之外，攝像機(jī)控制設(shè)備30具有保持多個(gè)人的面部位置作為數(shù)據(jù)庫和控制三腳架盤頭20以及變焦操作的功能，從而根據(jù)操作命令以指定的大小自動(dòng)地拍攝任何想要的面部，并且具有根據(jù)拍攝的圖像信號(hào)識(shí)別人的面部和登記/更新其位置信息的功能。為了這些功能，有可能從三腳架盤頭20獲得Pdeg和Tdeg的當(dāng)前值，以從CPU 50獲得變焦操作的當(dāng)前控制值(Zdeg(以下將對(duì)此描述))，并將Zdeg的該值輸出給CPU 50來控制攝像機(jī)10的變焦操作。
紅外接收部件40從遙控器40a接收控制三腳架盤頭20的驅(qū)動(dòng)的紅外信號(hào)和攝像機(jī)10的變焦功能，并提供對(duì)應(yīng)于這些信號(hào)的鍵操作信號(hào)給CPU 50。CPU 50根據(jù)所述鍵操作信號(hào)輸出關(guān)于搖動(dòng)/俯仰操作的操作命令給攝像機(jī)控制設(shè)備30，還輸出變焦控制信號(hào)給攝像機(jī)10，以便控制三腳架盤頭20的旋轉(zhuǎn)操作和攝像機(jī)10的變焦操作。而且，存在根據(jù)攝像機(jī)控制設(shè)備30的Zdeg值來控制攝像機(jī)10的變焦操作的情形。
顯示器60接收攝像機(jī)10的拍攝圖像信號(hào)并顯示會(huì)議室等等中的當(dāng)前拍攝圖像。圖像編碼器70壓縮和編碼來自攝像機(jī)控制設(shè)備30的拍攝圖像信號(hào)并生成圖像流。該生成的圖像流通過發(fā)送設(shè)備(未示出)與在會(huì)議室中同時(shí)收集的音頻流一起多路復(fù)用，該圖像流經(jīng)由通信線路發(fā)送到位于遠(yuǎn)程位置的會(huì)議室，以及實(shí)時(shí)重放在發(fā)送一側(cè)的會(huì)議室中的圖像和聲音。而且，通過接收設(shè)備(未示出)接收在遠(yuǎn)程位置的會(huì)議室中捕獲和收集的圖像和音頻流。分別通過顯示器60和揚(yáng)聲器同時(shí)重放解碼的圖像和聲音。這使得有可能舉行會(huì)議，同時(shí)觀看位于遠(yuǎn)程位置的會(huì)議室的屏幕。
圖2的方框圖示出了在攝像機(jī)控制設(shè)備30和CPU 50中提供的攝像機(jī)控制功能。
如圖2所示，攝像機(jī)控制設(shè)備30包括面部位置數(shù)據(jù)庫31、面部識(shí)別模塊32、數(shù)據(jù)庫更新模塊33、數(shù)據(jù)庫檢索模塊34、和搖動(dòng)/俯仰控制部件35。CPU 50包括變焦控制部件51、PTZ(搖動(dòng)、俯仰、變焦)命令控制部件52、以及Move_Next命令控制部件53。
面部位置數(shù)據(jù)庫31是這樣一種數(shù)據(jù)庫，其中當(dāng)會(huì)議參加者的面部以預(yù)定尺寸被投影在屏幕中央時(shí)，為每一參加者存儲(chǔ)用于三腳架盤頭20旋轉(zhuǎn)操作和攝像機(jī)10變焦操作的控制信息。正如參考圖3A和3B將在下文所描述的，所述控制信息由數(shù)據(jù)(Pdeg、Tdeg、Zdeg)構(gòu)成，其中攝像機(jī)10關(guān)于水平和垂直方向的拍攝方向以及攝像機(jī)10的變焦操作狀態(tài)用角度形式來表示。
面部識(shí)別模塊32使用圖像識(shí)別技術(shù)根據(jù)攝像機(jī)10拍攝的數(shù)字圖像信號(hào)檢測人面部的位置，并計(jì)算坐標(biāo)形式的面部位置信息(Ppx、Tpx、Zpx)。
數(shù)據(jù)庫更新模塊33將面部位置信息(Ppx、Tpx、Zpx)轉(zhuǎn)換成角度形式并在面部位置數(shù)據(jù)庫31中登記該面部位置信息。而且，即使當(dāng)攝像機(jī)10正在執(zhí)行拍攝時(shí)，數(shù)據(jù)庫更新模塊33也可以根據(jù)需要，基于來自面部識(shí)別模塊32的面部位置信息以更新面部位置數(shù)據(jù)庫31的內(nèi)容。
數(shù)據(jù)庫檢索模塊34是使用面部位置數(shù)據(jù)庫31的存儲(chǔ)信息控制攝像機(jī)10的拍攝方向和變焦操作的功能塊。數(shù)據(jù)庫檢索模塊34根據(jù)來自Move_Next命令控制部件53的方向指示信息，從面部位置數(shù)據(jù)庫31中提取對(duì)應(yīng)于參加者的面部位置信息(Pdeg、Tdeg、Zdeg)，該參加者與當(dāng)前正在顯示的參加者相鄰安置，并經(jīng)由搖動(dòng)/俯仰控制部件35和變焦控制部件51根據(jù)該信息控制所述拍攝方向和變焦操作。
搖動(dòng)/俯仰控制部件35根據(jù)來自PTZ命令控制部件52的操作命令或者根據(jù)來自數(shù)據(jù)庫檢索模塊34的控制信息(Pdeg、Tdeg)輸出控制信號(hào)給三腳架盤頭20，以便控制三腳架盤頭20的搖動(dòng)/俯仰操作。同理，變焦控制部件51輸出控制命令給攝像機(jī)10，以根據(jù)來自PTZ命令控制部件52的操作命令或者根據(jù)來自數(shù)據(jù)庫檢索模塊34的控制信息(Zdeg)控制所述變焦操作。
PTZ命令控制部件52根據(jù)來自紅外接收部件40的鍵操作信號(hào)產(chǎn)生操作命令，并輸出用于搖動(dòng)/俯仰操作的命令給搖動(dòng)/俯仰控制部件35，以及輸出用于變焦操作的命令給變焦控制部件51。同理，Move_Next命令控制部件53根據(jù)來自紅外接收部件40的鍵操作信號(hào)輸出操作命令并將它輸出到數(shù)據(jù)庫檢索模塊34。
這里，根據(jù)本實(shí)施例的遙控器40a包括逐步改變搖動(dòng)/俯仰方向以及變焦放大比率的PTZ鍵，用于指定方向的Move_Next鍵，在該方向中使用面部位置數(shù)據(jù)庫31指定與當(dāng)前正在拍攝的人相鄰的另一個(gè)人。
然后，作為向PTZ鍵執(zhí)行輸入操作的結(jié)果，指示搖動(dòng)/俯仰方向和變焦放大比率的放大/減小的鍵操作信號(hào)經(jīng)由紅外接收部件40提供給CPU 50。PTZ命令控制部件52根據(jù)這些信號(hào)發(fā)出PTZ命令。結(jié)果，搖動(dòng)/俯仰控制部件35控制三腳架盤頭20，以根據(jù)該P(yáng)TZ命令逐步地改變攝像機(jī)10的方向，以及變焦控制部件51根據(jù)該P(yáng)TZ命令逐步地放大或減小攝像機(jī)10的變焦放大比率。
另一方面，作為向Move_Next鍵執(zhí)行輸入操作的結(jié)果，指示左右方向中每一個(gè)方向的鍵操作信號(hào)經(jīng)由紅外接收部件40提供給CPU50。Move_Next命令控制部件53根據(jù)這些信號(hào)發(fā)出指示左方向或右方向的Move_Next命令。結(jié)果，數(shù)據(jù)庫檢索模塊34從面部位置數(shù)據(jù)庫31提取對(duì)應(yīng)于所指示方向中的相鄰人的面部位置信息，并輸出該信息到搖動(dòng)/俯仰控制部件35和變焦控制部件51，這使得能夠自動(dòng)地拍攝相鄰人的面部。
作為以這種方式操作Move_Next鍵的結(jié)果，對(duì)于攝像機(jī)系統(tǒng)的操作者來說，有可能從拍攝會(huì)議的一個(gè)參加者的狀態(tài)切換到通過簡單操作拍攝另一參加者的狀態(tài)。因此，變成了不必在觀看顯示器60的同時(shí)手動(dòng)地調(diào)節(jié)攝像機(jī)10的拍攝方向和變焦放大比率。
圖3A和3B示例了用于搖動(dòng)/俯仰/變焦操作的控制信息(Pdeg、Tdeg、Zdeg)。
在本實(shí)施例中，搖動(dòng)/俯仰/變焦操作的控制信息用Pdeg、Tdeg、Zdeg表示，其中攝像機(jī)10關(guān)于水平和垂直方向的拍攝方向以及攝像機(jī)10的變焦操作狀態(tài)用角度形式表示。關(guān)于在水平方向的旋轉(zhuǎn)操作(搖動(dòng)操作)，如圖3A所示，三腳架盤頭20的旋轉(zhuǎn)角度例如設(shè)置為最大180°，以及連接三腳架盤頭20的旋轉(zhuǎn)中心和被拍攝人面部中心點(diǎn)的直線的角度(-90.0°到+90.0°)是搖動(dòng)操作的控制信息(Pdeg)。同理，關(guān)于垂直方向的旋轉(zhuǎn)操作(俯仰操作)，如圖3B所示，三腳架盤頭20的旋轉(zhuǎn)角度設(shè)置為例如最大60°，以及連接三腳架盤頭20的旋轉(zhuǎn)中心和面部中心點(diǎn)的直線的角度(-30.0°到+30.0°)是俯仰操作的控制信息(Tdeg)。
而且，如圖3A所示，變焦操作的控制信息(Zdeg)表示為攝像機(jī)10的觀看角度。在圖3A中，該觀看角度位于1.0°到45.0°的范圍中。角度的值越小，變焦?fàn)顟B(tài)越變成朝向遠(yuǎn)距拍攝一側(cè)，并放大所述主題。
提供這些控制信息給用于控制搖動(dòng)/俯仰/變焦操作的搖動(dòng)/俯仰控制部件35和變焦控制部件51。與此一起，存儲(chǔ)在面部位置數(shù)據(jù)庫31中每一人的面部位置信息成為一組角度信息(Pdeg、Tdeg、Zdeg)。例如當(dāng)在屏幕上全屏顯示人的面部時(shí)，面部位置數(shù)據(jù)庫31中變焦操作的信息成為觀看角度。
接下來，將參考流程圖具體地描述攝像機(jī)系統(tǒng)的操作。圖4的流程圖示出了攝像機(jī)系統(tǒng)的全部處理流程。
執(zhí)行在面部位置數(shù)據(jù)庫31中自動(dòng)登記面部位置信息的處理。該處理是當(dāng)開始使用攝像機(jī)系統(tǒng)時(shí)，使用圖像識(shí)別技術(shù)自動(dòng)地識(shí)別在可拍攝范圍內(nèi)人的面部的處理，同時(shí)在例如CPU 50的控制下改變攝像機(jī)10的拍攝方向，這些面部位置信息登記在面部位置數(shù)據(jù)庫31中。以下將參考圖5描述該處理。
通過攝像機(jī)10輸出用于一幀的拍攝圖像信號(hào)，以及該處理等待面部識(shí)別模塊32接收該信號(hào)。當(dāng)接收到該信號(hào)時(shí)，處理進(jìn)行到步驟S103。
當(dāng)在執(zhí)行等待狀態(tài)中存在PTZ命令時(shí)，搖動(dòng)/俯仰控制部件35和變焦控制部件51從PTZ命令控制部件52接收PTZ命令。然后，該處理進(jìn)行到步驟S104。當(dāng)不存在PTZ命令時(shí)，該處理則進(jìn)行到步驟S105。
根據(jù)接收的該P(yáng)TZ命令，搖動(dòng)/俯仰控制部件35控制三腳架盤頭20，以便為一個(gè)步驟改變攝像機(jī)10的拍攝方向。而且，變焦控制部件51為一個(gè)步驟改變攝像機(jī)10的變焦放大比率。之后，該處理進(jìn)行到步驟S109。
當(dāng)在執(zhí)行等待狀態(tài)中存在Move_Next命令時(shí)，數(shù)據(jù)庫檢索模塊34從Move_Next命令控制部件53接收Move_Next命令，以及該處理然后進(jìn)行到步驟S106。當(dāng)不存在Move_Next命令時(shí)，該處理則進(jìn)行到步驟S107。
數(shù)據(jù)庫檢索模塊34執(zhí)行移動(dòng)攝像機(jī)10的方向的處理，以便拍攝在所述命令所指定方向中的相鄰人的面部。然后，在完成處理之后，該處理進(jìn)行到步驟S109。將參考圖7詳細(xì)地描述步驟S106的處理。
當(dāng)未接收到PTZ命令和Move_Next命令時(shí)，面部識(shí)別模塊32和數(shù)據(jù)庫更新模塊33使用圖像識(shí)別關(guān)于當(dāng)前正被拍攝的范圍執(zhí)行更新面部位置數(shù)據(jù)庫31的處理。將參考圖6詳細(xì)地描述這種處理。
數(shù)據(jù)庫檢索模塊34從更新的面部位置數(shù)據(jù)庫31中一次提取當(dāng)前正被拍攝的面部的更多面部位置信息，控制攝像機(jī)10的方向，以便該面部變成位于屏幕的中央，還控制變焦操作，以便屏幕上的面部變成預(yù)定的尺寸。在步驟S107的處理中，當(dāng)在正被拍攝的屏幕內(nèi)識(shí)別多個(gè)人的面部時(shí)，以這種方式執(zhí)行控制，即在這些面部中，拍攝Pdeg值最接近屏幕中心的面部。在完成上述處理之后，該處理進(jìn)行到步驟S109。
CPU 50確定是否通過例如關(guān)機(jī)操作請(qǐng)求完成所述處理。如果否，則該處理返回到步驟S102。
在參考流程圖的上述處理中，在一個(gè)實(shí)例中在用于一幀圖像信號(hào)的同步周期(垂直同步周期)中執(zhí)行對(duì)應(yīng)于一個(gè)操作命令的處理。當(dāng)接收PTZ命令時(shí)，根據(jù)該P(yáng)TZ命令改變用于一個(gè)步驟的搖動(dòng)/俯仰/變焦操作(步驟S104)。當(dāng)接收Move_Next命令時(shí)，自動(dòng)地控制搖動(dòng)/俯仰/變焦操作，從而拍攝在指定方向中相鄰人的面部(步驟S106)。
例如，當(dāng)三腳架盤頭20的旋轉(zhuǎn)速度低以及所述操作花費(fèi)比垂直同步周期更長的時(shí)間直到拍攝該相鄰的面部時(shí)，可以保持執(zhí)行步驟S107中對(duì)應(yīng)于接收下一命令的處理和數(shù)據(jù)庫更新處理，直到完成該操作。
當(dāng)在固定的時(shí)間周期內(nèi)沒有接收到PTZ命令和Move_Next命令時(shí)，即，當(dāng)攝像機(jī)10的拍攝方向和變焦鏡頭位置停止時(shí)，基于拍攝的圖像信號(hào)執(zhí)行圖像識(shí)別，關(guān)于拍攝范圍來更新在面部位置數(shù)據(jù)庫31中存儲(chǔ)的信息(步驟S107)。結(jié)果，當(dāng)會(huì)議參加者的座位移動(dòng)和/或參加者的數(shù)量增加或減少時(shí)，自動(dòng)地更新面部位置數(shù)據(jù)庫31。
而且，基于更新的面部位置信息校正攝像機(jī)10的方向和變焦放大比率，從而使當(dāng)前正被拍攝的面部移動(dòng)到屏幕的中央(步驟S108)。由于這種原因，攝像機(jī)10跟隨會(huì)議參加者的精確運(yùn)動(dòng)，可以在中央位置投影其面部，并因此提高了生成圖像的質(zhì)量。避免不能投影任何人的面部的狀態(tài)，而且不發(fā)送無用圖像信號(hào)。
圖5的流程圖示出了面部位置數(shù)據(jù)庫31的自動(dòng)登記處理的流程。
搖動(dòng)/俯仰控制部件35設(shè)置三腳架盤頭20的控制值成初始值，該控制值指示攝像機(jī)10的拍攝方向。例如，搖動(dòng)/俯仰控制部件35進(jìn)行控制，以便攝像機(jī)10指向拍攝范圍的上面最左側(cè)。在這種處理過程中，變焦控制部件51控制攝像機(jī)10，以達(dá)到最寬角度一側(cè)上的變焦?fàn)顟B(tài)。
面部識(shí)別模塊32和數(shù)據(jù)庫更新模塊33使用圖像識(shí)別關(guān)于當(dāng)前正被拍攝的范圍執(zhí)行更新面部位置數(shù)據(jù)庫31的處理。這里，最新登記有關(guān)對(duì)應(yīng)范圍的面部位置信息。步驟S202的處理與圖4的步驟S107相同，并且以下將參考圖6詳細(xì)地描述該處理。
搖動(dòng)/俯仰控制部件35使用圖像識(shí)別關(guān)于整個(gè)可拍攝的范圍執(zhí)行面部位置檢測，并確定是否更新面部位置信息。當(dāng)存在未進(jìn)行圖像識(shí)別的范圍時(shí)，該處理進(jìn)行到步驟S204。當(dāng)在整個(gè)范圍上完成面部位置檢測時(shí)，則完成初始的操作。然后，該處理進(jìn)行到圖4開始正常操作的步驟S102。
搖動(dòng)/俯仰控制部件35控制攝像機(jī)10的方向，以便拍攝未執(zhí)行面部位置檢測的下一拍攝范圍。之后，該處理返回到步驟S202，關(guān)于當(dāng)前的范圍執(zhí)行面部位置檢測并登記相應(yīng)的面部位置信息。
作為上述流程圖的處理結(jié)果，有可能使用攝像機(jī)10拍攝全部的可拍攝范圍，以自動(dòng)地檢測在該范圍內(nèi)所存在人的面部位置，并在面部位置數(shù)據(jù)庫31中登記該面部的面部位置信息。
圖6的流程圖示出了面部位置數(shù)據(jù)庫31的更新處理的流程。
數(shù)據(jù)庫更新模塊33經(jīng)由搖動(dòng)/俯仰控制部件35從三腳架盤頭20獲得當(dāng)前的Pdeg和Tdeg，并從變焦控制部件51獲得當(dāng)前的Zdeg。然后，基于這些控制信息，指定要更新的范圍(對(duì)應(yīng)于當(dāng)前正被拍攝的范圍)。
數(shù)據(jù)庫更新模塊33清除面部位置數(shù)據(jù)庫31中存儲(chǔ)的位于更新范圍內(nèi)的數(shù)據(jù)。
面部識(shí)別模塊32從攝像機(jī)10接收拍攝的圖像信號(hào)。當(dāng)在圖4的步驟S107中執(zhí)行該步驟時(shí)，由于已在上述的步驟S102中接收該拍攝的圖像信號(hào)，則可以省略該步驟。
面部識(shí)別模塊32使用接收的圖像信號(hào)執(zhí)行圖像識(shí)別處理，檢測面部的位置。這里，根據(jù)用于一幀的圖像信號(hào)檢測面部的位置。能夠應(yīng)用于本實(shí)施例的圖像識(shí)別技術(shù)的實(shí)例包括，基于圖像信號(hào)的色彩信息檢測肉色分布以指定包含面部輪廓的范圍，以及用于將該范圍中的輪廓線和諸如眼和嘴等等部位的位置與多個(gè)預(yù)先存儲(chǔ)的面部模板進(jìn)行比較，以確定是否存在該面部的技術(shù)。而且，通過在下述步驟S102和S303中接收用于多個(gè)幀的拍攝的圖像信號(hào)，能夠使用利用幀差的圖像識(shí)別技術(shù)。
當(dāng)檢測到一個(gè)或更多面部時(shí)，產(chǎn)生能夠獲得每一面部的方形幀，設(shè)置位于方形幀中央位置的屏幕上的坐標(biāo)(像素編號(hào))作為水平和垂直方向的面部位置信息(Ppx、Tpx)，以及設(shè)置方形幀一側(cè)的長度(像素?cái)?shù)量)為對(duì)應(yīng)于變焦操作的數(shù)據(jù)(Zpx)。然后，暫時(shí)地存儲(chǔ)該面部位置信息(Ppx、Tpx、Zpx)的列表。
例如，在大小為352×288像素的CIF(通用中分辨率圖像格式)圖像的情況下，Ppx取0到351之間的值，以及Tpx取0到287之間的值。例如，設(shè)置Zpx為20到200之間的值。
當(dāng)在步驟S304中檢測到一個(gè)或更多人的面部時(shí)，該處理進(jìn)行到步驟S306。如果否，則該處理進(jìn)行到步驟S308。
基于Pdeg、Tdeg、和Zdeg的當(dāng)前值，數(shù)據(jù)庫更新模塊33將存儲(chǔ)在面部識(shí)別模塊32中的坐標(biāo)形式的該面部位置信息(Ppx、Tpx、Zpx)轉(zhuǎn)換成角度形式的面部位置信息(Pdeg、Tdeg、Zdeg)。
例如，在當(dāng)前Pdeg、Tdeg、和Zdeg分別是-30.0、+10.0、和+40.0時(shí)，位于拍攝圖像左端的Pdeg是-30.0-40.0/2＝-50.0；位于右端的Pdeg是-30.0+40.0/2＝-10.0；位于上端的Tdeg是+10.0+(40.0×3/4)/2＝+25.0；以及位于下端的Tdeg是+10.0-(40.0×3/4)/2＝-5.0。所以，通過以線性的方式使這些值對(duì)應(yīng)于圖像端部的坐標(biāo)值，能夠?qū)⒆鴺?biāo)形式的面部位置信息(Ppx、Tpx、Zpx)轉(zhuǎn)換成角度形式的面部位置信息(Pdeg、Tdeg、Zdeg)。
數(shù)據(jù)庫更新模塊33在面部位置數(shù)據(jù)庫31中登記被轉(zhuǎn)換成角度形式的面部位置信息的列表。
面部位置數(shù)據(jù)庫31以Pdeg的升序?qū)λ鎯?chǔ)的面部位置信息進(jìn)行排序。
作為上述流程圖的處理結(jié)果，只更新包含在當(dāng)前正被拍攝范圍中的面部位置信息。例如，當(dāng)在該拍攝范圍內(nèi)檢測到多個(gè)面部時(shí)，在面部位置數(shù)據(jù)庫31中登記其全部的面部位置信息。當(dāng)通過圖像識(shí)別沒有檢測到面部時(shí)，則從面部位置數(shù)據(jù)庫31中刪除對(duì)應(yīng)于該范圍的面部位置信息。然后，由于以Pdeg的升序排序在更新之后的面部位置信息，在對(duì)應(yīng)于Move_Next命令的攝像機(jī)方向移動(dòng)處理中(以下將描述)，能夠有效地提取相鄰面部的面部位置信息。
圖7的流程圖示出了用于移動(dòng)攝像機(jī)方向到相鄰面部的處理流程。
數(shù)據(jù)庫檢索模塊34經(jīng)由搖動(dòng)/俯仰控制部件35從三腳架盤頭20獲得當(dāng)前的Pdeg和Tdeg值以及從變焦控制部件51獲得當(dāng)前的Zdeg值。
數(shù)據(jù)庫檢索模塊34檢索面部位置數(shù)據(jù)庫31并提取Pdeg最接近于當(dāng)前Pdeg值的面部位置信息。
數(shù)據(jù)庫檢索模塊34計(jì)算該提取的面部位置信息的Pdeg與當(dāng)前的Pdeg之差。
當(dāng)Pdeg之差的絕對(duì)值小于或等于預(yù)定的門限值時(shí)，該處理進(jìn)行到步驟S405。當(dāng)該絕對(duì)值超出門限值時(shí)，該處理進(jìn)行到步驟S406。
數(shù)據(jù)庫檢索模塊34提取關(guān)于Move_Next命令所指定的方向具有第二最接近于當(dāng)前Pdeg的Pdeg的面部位置信息。
數(shù)據(jù)庫檢索模塊34輸出在步驟S402或步驟S405中從面部位置數(shù)據(jù)庫31提取的Pdeg和Tdeg到搖動(dòng)/俯仰控制部件35，以控制三腳架盤頭20，從而將攝像機(jī)10指向?qū)?yīng)于該面部位置信息的面部的方向。
而且，使用同理提取的Zdeg控制攝像機(jī)10的變焦操作。這里，在本實(shí)施例中，位于面部位置數(shù)據(jù)庫31中的Zdeg是這樣的值，即以全屏拍攝近似等于圖像識(shí)別技術(shù)所檢測面部尺寸的方形幀。由于該原因，數(shù)據(jù)庫檢索模塊34轉(zhuǎn)換該提取的Zdeg的值，以便對(duì)應(yīng)的面部變成屏幕內(nèi)預(yù)定的尺寸，并輸出該值給變焦控制部件51，以控制變焦放大比率。例如，當(dāng)設(shè)置該面部的尺寸，從而方形幀一側(cè)的長度變成圖像寬度的1/4和變成縱向長度的1/3時(shí)，應(yīng)該將從面部位置數(shù)據(jù)庫31提取的Zdeg設(shè)置成四倍大并且應(yīng)該將它輸出到變焦控制部件51。
在上述流程圖的處理中，由于例如之前立即在垂直同步周期中執(zhí)行根據(jù)PTZ命令的攝像機(jī)方向的控制和變焦操作，甚至在當(dāng)前的Pdeg、Tdeg、和Zdeg不對(duì)應(yīng)于面部位置數(shù)據(jù)庫31中的面部位置信息時(shí)，能夠基于Move_Next命令執(zhí)行控制。
即，比較相鄰面部的Pdeg和當(dāng)前Pdeg之間的差值與門限值(步驟S404)。如果該差值小于門限值，確定Pdeg的偏移量位于誤差可允許的范圍內(nèi)，假設(shè)具有最接近于指定方向的Pdeg的面部位置信息是當(dāng)前的控制量，則執(zhí)行控制以便攝像機(jī)10指向該方向中下一個(gè)相鄰的面部(步驟S405和S406)。反之，當(dāng)Pdeg的偏移量較大時(shí)，通過使用具有最接近于指定方向的Pdeg的面部位置信息控制攝像機(jī)的方向，從而對(duì)于操作者來說變得有可能通過自然的感覺進(jìn)行操作。
正如已經(jīng)描述的，在根據(jù)第一實(shí)施例的攝像機(jī)系統(tǒng)中，攝像機(jī)10掃描全部的拍攝范圍，通過圖像識(shí)別處理檢測會(huì)議參加者的面部位置，并將該信息登記在面部位置數(shù)據(jù)庫31中。由于該原因，提前登記參加者面部的位置信息的操作變得沒有必要，從而能夠避免用戶的時(shí)間和努力，并提高便利性。
然后，通過根據(jù)Move_Next命令提取在面部位置數(shù)據(jù)庫31中登記的面部位置信息以及執(zhí)行控制，有可能利用簡單的操作，僅僅使用指示方向的Move_Next鍵將相鄰出現(xiàn)的人的面部以適當(dāng)?shù)某叽缤队霸谄聊坏木_位置。而且，例如，能夠提前將數(shù)字以Pdeg的降序分配給面部位置數(shù)據(jù)庫31的面部位置信息，從而只通過使用遙控器40a來指定數(shù)字就能夠拍攝任何想要的人的面部。
而且，當(dāng)在正常操作過程中不存在用于改變搖動(dòng)/俯仰/變焦操作的請(qǐng)求時(shí)，自動(dòng)地執(zhí)行控制，從而可以通過圖像識(shí)別將當(dāng)前正被拍攝的面部投影到屏幕的中央。所以，有可能在發(fā)送目標(biāo)的會(huì)議室中顯示自然的、高質(zhì)量的圖像。
<第二實(shí)施例>
圖8示出了根據(jù)本發(fā)明第二實(shí)施例的攝像機(jī)系統(tǒng)的系統(tǒng)結(jié)構(gòu)。圖8中對(duì)應(yīng)于圖1的功能用相同的附圖標(biāo)記表示，因此，省略了對(duì)它們的描述。
除了圖1所示系統(tǒng)的結(jié)構(gòu)之外，圖8所示的攝像機(jī)系統(tǒng)還包括話音信號(hào)分析設(shè)備80、以及兩個(gè)麥克風(fēng)81和82。麥克風(fēng)81和82收集會(huì)議室中參加者的話音，其中在該會(huì)議室中正通過攝像機(jī)10執(zhí)行拍攝，以及將收集的話音信號(hào)輸入到話音信號(hào)分析設(shè)備80。話音信號(hào)分析設(shè)備80從兩個(gè)輸入音頻信號(hào)中提取人的話音，估計(jì)產(chǎn)生話音的方向，并輸出指示該方向的話音方向信息給攝像機(jī)控制設(shè)備30。結(jié)果，攝像機(jī)控制設(shè)備30基于該話音方向信息指定正在發(fā)言的參加者的方向，從而能夠?qū)z像機(jī)10指向該方向。所述話音方向信息被例如給定為Pdeg和Tdeg的值。
圖9的流程圖示出了根據(jù)本發(fā)明第二實(shí)施例的攝像機(jī)系統(tǒng)的全部處理流程。
攝像機(jī)10輸出一幀的拍攝圖像信號(hào)，以及所述處理等待面部識(shí)別模塊32接收該信號(hào)。然后，當(dāng)接收到該信號(hào)時(shí)，該處理進(jìn)行到步驟S502。
這些步驟分別對(duì)應(yīng)于圖4的步驟S103和S104。即，當(dāng)在執(zhí)行等待狀態(tài)中存在PTZ命令時(shí)，該處理進(jìn)行到步驟S503。在該步驟中，搖動(dòng)/俯仰控制部件35和變焦控制部件51從PTZ命令控制部件52接收PTZ命令。根據(jù)該P(yáng)TZ命令控制三腳架盤頭20，為一個(gè)步驟改變攝像機(jī)10的拍攝方向，以及為一個(gè)步驟改變攝像機(jī)10的變焦放大比率。之后，該處理進(jìn)行到步驟S510。
這些步驟分別對(duì)應(yīng)于圖4的步驟S105和S106。即，當(dāng)在執(zhí)行等待狀態(tài)中存在Move_Next命令時(shí)，該處理進(jìn)行到步驟S505，在該步驟數(shù)據(jù)庫檢索模塊34從Move_Next命令控制部件53接收Move_Next命令，并移動(dòng)攝像機(jī)10的方向以拍攝通過該命令指定方向中的相鄰人的面部。之后，該處理進(jìn)行到步驟S510。
當(dāng)從話音信號(hào)分析設(shè)備80輸出話音方向信息時(shí)，搖動(dòng)/俯仰控制部件35接收該信息(Pdeg、Tdeg)，以及該處理然后進(jìn)行到步驟S507。當(dāng)不輸出該話音方向信息時(shí)，該處理進(jìn)行到步驟S508。
搖動(dòng)/俯仰控制部件35控制三腳架盤頭20，以使攝像機(jī)10指向所述話音方向信息所指定的方向。之后，該處理進(jìn)行到步驟S510。
這些步驟分別對(duì)應(yīng)于圖4的步驟S107和S108。即，在步驟S508中，面部識(shí)別模塊32和數(shù)據(jù)庫更新模塊33通過使用圖像識(shí)別技術(shù)，關(guān)于當(dāng)前正被拍攝的范圍執(zhí)行更新面部位置數(shù)據(jù)庫31的處理。然后，在步驟S509中，數(shù)據(jù)庫檢索模塊34從更新的面部位置數(shù)據(jù)庫31中提取當(dāng)前正被拍攝的面部的一個(gè)或更多的面部位置信息，控制攝像機(jī)10的方向，以便該面部定位于屏幕的中央，還控制變焦控制，以便屏幕上的該面部變成預(yù)定的尺寸。之后，該處理進(jìn)行到步驟S510。
CPU 50確定是否通過例如關(guān)機(jī)操作進(jìn)行完成處理的請(qǐng)求。如果否，則該處理返回到步驟S501。
在根據(jù)上述流程圖的處理中，除了圖4的處理之外，有可能根據(jù)來自話音信號(hào)分析設(shè)備80的話音方向信息自動(dòng)地將攝像機(jī)10指向發(fā)言者的方向并且有可能拍攝該發(fā)言者。在攝像機(jī)10指向發(fā)言者之后，如果沒有接收PTZ命令、Move_Next命令、和話音方向信息，則指向步驟S508和S509的處理。由于該原因，發(fā)言者和在發(fā)言者附近的人的面部位置信息自動(dòng)地登記在面部位置數(shù)據(jù)庫31中。而且，自動(dòng)地調(diào)節(jié)攝像機(jī)10的方向，以便發(fā)言者的面部定位于屏幕的中央。所以，以適當(dāng)?shù)某叽缇_地拍攝發(fā)言者的面部而不執(zhí)行用戶操作變成可能。而且，在根據(jù)話音方向信息自動(dòng)拍攝發(fā)言者的周圍之后，使用Move_Next鍵精確地調(diào)節(jié)拍攝方向，而且還能夠執(zhí)行更新面部位置數(shù)據(jù)庫31的處理。
而且，如果使用上述處理，作為例如所有參加者在會(huì)議開始時(shí)順序發(fā)言的結(jié)果，自動(dòng)地在面部位置數(shù)據(jù)庫31中登記每個(gè)參加者的面部位置信息變得有可能，在此之后，使用Move_Next鍵執(zhí)行攝像機(jī)方向切換處理和自動(dòng)將攝像機(jī)10指向任何想要的參加者面部的處理也變得有可能。
在上述每一實(shí)施例的攝像機(jī)系統(tǒng)中，可以經(jīng)由通信線路從遠(yuǎn)程位置接收PTZ命令和Move_Next命令，并且根據(jù)該接收的命令控制攝像機(jī)10的拍攝方向和變焦操作。這使得有可能經(jīng)由通信線路從另一個(gè)會(huì)議室容易地控制會(huì)議室中的攝像機(jī)操作。而且，變得有可能在一個(gè)地方容易地控制在每個(gè)位置會(huì)議室中的攝像機(jī)操作。
在上述實(shí)施例的每一實(shí)施例中，描述了在電子會(huì)議系統(tǒng)中使用應(yīng)用本發(fā)明的攝像機(jī)系統(tǒng)的例子。另外，能夠在利用簡單的操作執(zhí)行切換攝像機(jī)方向的應(yīng)用中，例如當(dāng)產(chǎn)生用于圖像記錄媒體和用于廣播的視頻內(nèi)容時(shí)，使用這種攝像機(jī)系統(tǒng)。
本領(lǐng)域的普通技術(shù)人員應(yīng)該理解，在附屬權(quán)利要求或其等同物的范圍內(nèi)，可以根據(jù)設(shè)計(jì)要求和其他因素產(chǎn)生各種修改、組合、子組合和改變。
權(quán)利要求
1.一種用于改變包括改變拍攝方向的驅(qū)動(dòng)設(shè)備的攝像機(jī)的拍攝范圍的攝像機(jī)控制設(shè)備，該攝像機(jī)控制設(shè)備包括存儲(chǔ)部件，當(dāng)攝像機(jī)要拍攝的多個(gè)人的每一面部位于該攝像機(jī)的拍攝范圍的中央部分時(shí)，為要拍攝的每個(gè)人存儲(chǔ)面部方向信息；面部位置檢測部件，根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測人面部的位置；登記部件，用于基于面部位置檢測部件的檢測結(jié)果和指示攝像機(jī)的當(dāng)前拍攝方向的信息計(jì)算面部方向信息，并將該面部方向信息登記在存儲(chǔ)部件中；以及驅(qū)動(dòng)控制部件，讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息，并根據(jù)該面部方向信息控制所述驅(qū)動(dòng)設(shè)備，以便改變?cè)摂z像機(jī)的拍攝方向。
2.根據(jù)權(quán)利要求1所述的攝像機(jī)控制設(shè)備，其中，當(dāng)所述驅(qū)動(dòng)控制部件接收用于切換攝像機(jī)的拍攝方向到當(dāng)前正被拍攝的人左側(cè)或右側(cè)相鄰的人的方向指示信號(hào)時(shí)，該驅(qū)動(dòng)控制部件從所述存儲(chǔ)部件提取關(guān)于指示方向與當(dāng)前正被拍攝的人最近的另一個(gè)人的面部方向信息，以及通過使用該提取的面部方向信息控制該驅(qū)動(dòng)設(shè)備。
3.根據(jù)權(quán)利要求1所述的攝像機(jī)控制設(shè)備，其中，當(dāng)通過所述面部位置檢測部件檢測到所述人面部的位置時(shí)，所述登記部件刪除位于存儲(chǔ)部件所存儲(chǔ)的面部方向信息內(nèi)包含在攝像機(jī)的當(dāng)前拍攝范圍內(nèi)的面部方向信息，基于所述面部位置檢測部件的檢測結(jié)果再次計(jì)算面部方向信息，和在所述存儲(chǔ)部件中登記該面部方向信息。
4.根據(jù)權(quán)利要求1所述的攝像機(jī)控制設(shè)備，還包括初始驅(qū)動(dòng)控制部件，用于以這樣一種方式來控制該驅(qū)動(dòng)設(shè)備，使得分割攝像機(jī)的可拍攝范圍并通過該攝像機(jī)順序地拍攝所分割的范圍，其中所述面部位置檢測部件根據(jù)攝像機(jī)的拍攝圖像信號(hào)關(guān)于該分割的范圍來檢測人的位置，所述登記部件計(jì)算在該分割范圍中所檢測到人的面部方向信息，以及在所述存儲(chǔ)部件中順序地登記該面部方向信息，借此自動(dòng)地登記在整個(gè)可拍攝范圍中存在的人的面部方向信息。
5.根據(jù)權(quán)利要求1所述的攝像機(jī)控制設(shè)備，其中，當(dāng)在固定時(shí)間內(nèi)不執(zhí)行用戶輸入的用于改變攝像機(jī)拍攝方向的操作時(shí)，所述面部位置檢測部件根據(jù)攝像機(jī)當(dāng)前拍攝的圖像信號(hào)檢測所述人面部的位置，所述登記部件從所述存儲(chǔ)部件中刪除包含在攝像機(jī)當(dāng)前拍攝范圍內(nèi)的面部方向信息，以及之后在該存儲(chǔ)部件中登記通過面部位置檢測部件所檢測到的人的面部方向信息，和所述驅(qū)動(dòng)控制部件從該存儲(chǔ)部件讀取對(duì)應(yīng)于最接近當(dāng)前拍攝范圍中央的面部的面部位置信息，并根據(jù)該面部位置信息控制該驅(qū)動(dòng)設(shè)備，以便校正攝像機(jī)的拍攝方向。
6.根據(jù)權(quán)利要求1所述的攝像機(jī)控制設(shè)備，其中所述面部方向信息包括相對(duì)于水平方向和垂直方向的角度信息，該信息指示通過所述面部位置檢測部件所檢測的人的面部的中央位置。
7.根據(jù)權(quán)利要求1所述的攝像機(jī)控制設(shè)備，還包括變焦控制部件，用于控制攝像機(jī)的變焦放大比率，其中所述登記部件以這樣一種方式以便對(duì)應(yīng)于該面部方向信息在所述存儲(chǔ)部件中登記面部尺寸信息，該信息指示通過所述面部位置檢測部件所檢測的人的面部尺寸，以及基于所述存儲(chǔ)部件中的面部尺寸信息，對(duì)應(yīng)于通過所述驅(qū)動(dòng)控制部件所讀取的面部方向信息，所述變焦控制部件控制攝像機(jī)的變焦放大比率，使得基于該面部方向信息將被拍攝的人的面部變成拍攝屏幕內(nèi)預(yù)定的尺寸。
8.根據(jù)權(quán)利要求7所述的攝像機(jī)控制設(shè)備，其中，當(dāng)攝像機(jī)在整個(gè)屏幕拍攝能夠包含所述面部位置檢測部件所檢測的人面部的最小方形范圍時(shí)，所述面部尺寸信息包括觀看角度信息。
9.根據(jù)權(quán)利要求1所述的攝像機(jī)控制設(shè)備，還包括自動(dòng)驅(qū)動(dòng)控制部件，用于從檢測攝像機(jī)要拍攝的人發(fā)出的話音的方向的話音檢測設(shè)備接收檢測信號(hào)，并控制所述驅(qū)動(dòng)設(shè)備，使得該攝像機(jī)拍攝該檢測信號(hào)所指示的方向，當(dāng)通過該自動(dòng)驅(qū)動(dòng)控制部件控制攝像機(jī)的拍攝方向時(shí)，所述面部位置檢測部件根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測所述人面部的位置，以及所述登記部件從所述存儲(chǔ)部件中刪除包含在攝像機(jī)的當(dāng)前拍攝范圍內(nèi)的面部方向信息，并且之后在該存儲(chǔ)部件中登記通過所述面部位置檢測部件所檢測的人的面部方向信息。
10.一種攝像機(jī)系統(tǒng)，包括拍攝多個(gè)人的攝像機(jī)；改變?cè)摂z像機(jī)拍攝方向的驅(qū)動(dòng)設(shè)備；以及控制該驅(qū)動(dòng)設(shè)備的攝像機(jī)控制設(shè)備，其中該攝像機(jī)控制設(shè)備包括存儲(chǔ)部件，當(dāng)攝像機(jī)要拍攝的人的每一面部位于該攝像機(jī)的拍攝范圍的中央部分時(shí)，為要拍攝的每個(gè)人存儲(chǔ)面部方向信息；面部位置檢測部件，根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測人的面部的位置；登記部件，用于基于面部位置檢測部件的檢測結(jié)果和指示攝像機(jī)的當(dāng)前拍攝方向的信息計(jì)算面部方向信息，并將該面部方向信息登記在存儲(chǔ)部件中；以及驅(qū)動(dòng)控制部件，從存儲(chǔ)部件讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息，并根據(jù)該面部方向信息控制所述驅(qū)動(dòng)設(shè)備，以便改變?cè)摂z像機(jī)的拍攝方向。
11.一種電子會(huì)議系統(tǒng)，包括拍攝多個(gè)人的攝像機(jī)系統(tǒng)；收集多個(gè)人所發(fā)出的話音的話音收集設(shè)備；以及發(fā)送設(shè)備，用于多路復(fù)用來自該攝像機(jī)系統(tǒng)的圖像信號(hào)和來自該話音收集設(shè)備的音頻信號(hào)并且經(jīng)由通信線路發(fā)送所述信號(hào)，其中所述攝像機(jī)系統(tǒng)包括攝像機(jī)；改變?cè)摂z像機(jī)拍攝方向的驅(qū)動(dòng)設(shè)備；和控制該驅(qū)動(dòng)設(shè)備的攝像機(jī)控制設(shè)備，其中該攝像機(jī)控制設(shè)備包括存儲(chǔ)部件，當(dāng)攝像機(jī)要拍攝的人的每一面部位于該攝像機(jī)的拍攝范圍的中央部分時(shí)，為要拍攝的每個(gè)人存儲(chǔ)面部方向信息；面部位置檢測部件，根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測人的面部的位置；登記部件，用于基于面部位置檢測部件的檢測結(jié)果和指示攝像機(jī)的當(dāng)前拍攝方向的信息計(jì)算面部方向信息；以及驅(qū)動(dòng)控制部件，從存儲(chǔ)部件讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息，并根據(jù)該面部方向信息控制所述驅(qū)動(dòng)設(shè)備，以便改變?cè)摂z像機(jī)的拍攝方向。
12.一種控制攝像機(jī)的拍攝范圍的攝像機(jī)控制方法，該攝像機(jī)包括改變拍攝方向的驅(qū)動(dòng)設(shè)備，該攝像機(jī)控制方法包括以下步驟根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測人面部的位置；當(dāng)該攝像機(jī)要拍攝的多個(gè)人的每一面部位于攝像機(jī)的拍攝范圍的中央部分時(shí)，基于檢測步驟的檢測結(jié)果和指示攝像機(jī)的當(dāng)前拍攝方向的信息計(jì)算面部方向信息，并且為每一檢測到的人將該面部方向信息登記在數(shù)據(jù)庫中；以及從該數(shù)據(jù)庫讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息，以及根據(jù)面部方向信息控制所述驅(qū)動(dòng)設(shè)備，以便改變攝像機(jī)的拍攝方向。
全文摘要
一種攝像機(jī)控制設(shè)備包括存儲(chǔ)部件，當(dāng)攝像機(jī)所拍攝的多個(gè)人的每一面部位于該攝像機(jī)的拍攝范圍的中央部分時(shí)，為被拍攝的每個(gè)人存儲(chǔ)面部方向信息；面部位置檢測部件，根據(jù)攝像機(jī)的拍攝圖像信號(hào)檢測人面部的位置；登記部件，用于基于面部位置檢測部件的檢測結(jié)果和指示攝像機(jī)的當(dāng)前拍攝方向的信息計(jì)算面部方向信息，并將該面部方向信息登記在存儲(chǔ)部件中；以及驅(qū)動(dòng)控制部件，讀取對(duì)應(yīng)于用戶輸入的操作所指定人的面部方向信息并根據(jù)該面部方向信息控制驅(qū)動(dòng)設(shè)備，以便改變?cè)摂z像機(jī)的拍攝方向。
文檔編號(hào)G06K9/00GK1809126SQ200610005088
公開日2006年7月26日 申請(qǐng)日期2006年1月17日 優(yōu)先權(quán)日2005年1月17日
發(fā)明者松井丈 申請(qǐng)人:索尼株式會(huì)社