專利名稱：構圖判定設備、構圖判定方法
技術領域：
本發(fā)明涉及對靜態(tài)圖像數(shù)據(jù)等等執(zhí)行關于圖像內容的構圖(composition)的處 理的構圖判定設備，并且涉及構圖判定方法。另外，本發(fā)明涉及由該設備執(zhí)行的程序。
背景技術：
拍攝留下良好印象的照片的技術因素之一是構圖設定。這里的術語“構圖”也被 稱為“取景”，并且是作為照片等等的圖像中的對象的布局。存在一些用于獲得良好構圖的典型和基本方法。但是，對于普通的相機用戶來說， 拍攝良好構圖的照片是很不容易的，除非他/她具有關于攝影的充足知識和技術。由于此 原因，需要一種使得用戶能夠快捷容易地獲得良好構圖的照片圖像的技術配置。例如，專利文獻1 (日本未實審專利申請公布No. 59-208983)公開了一種自動跟蹤 設備的技術配置。在此技術配置中，檢測固定時間間隔的圖像之間的差別，計算圖像之間的 差別的重心，通過基于重心的運動量和運動方向檢測對象圖像相對于成像屏幕的運動量和 運動方向來控制成像設備，并且將對象圖像設定在成像屏幕的基準區(qū)域中。另外，專利文獻2 (日本未實審專利申請公布No. 2001-268425)公開了一種關于自 動跟蹤設備的技術。在此技術中，在屏幕上的整個人的上部20%的區(qū)域位于屏幕中心以便 人的臉部位于屏幕中心的情況下，自動對人進行跟蹤，從而可以在對人的臉部進行可靠拍 攝的同時跟蹤該人。當從決定構圖的觀點來看這些技術配置時，可以自動搜索作為人的對象并且以預 定的構圖將該對象放置于成像屏幕中。

發(fā)明內容
最佳構圖可能取決于對象的預定狀況或條件而有所不同。但是，上述專利文獻中 公開的技術只能以某種固定的構圖來放置被跟蹤的對象。換言之，可能無法通過根據(jù)對象 狀況改變構圖來執(zhí)行拍攝。因此，本發(fā)明致力于建議一種技術，用于很容易地獲得作為照片等等的圖像的良 好構圖。具體而言，本發(fā)明致力于根據(jù)對象的狀況和條件的改變來更加適當和靈活地決定 構圖。根據(jù)本發(fā)明的一個實施例，提供了一種構圖判定設備，包括對象檢測裝置，用于 基于圖像數(shù)據(jù)來檢測圖像中的一個或多個特定對象；對象朝向檢測裝置，用于檢測指示出 由所述對象檢測裝置檢測到的對象在所述圖像中的朝向的對象朝向信息，對所述對象朝向 信息的檢測是針對每個檢測到的對象執(zhí)行的；以及構圖判定裝置，用于基于所述對象朝向 信息來判定構圖。當所述對象檢測裝置檢測到多個對象時，所述構圖判定裝置基于與所述多個對象相對應的多個對象朝向信息之間的關系來判定構圖。在上述配置中，可以檢測在圖像數(shù)據(jù)的屏幕中檢測到的對象的預定部分的朝向， 并且可以獲得指示出所檢測到的朝向的對象朝向信息。如果檢測到多個對象，則基于由與這多個檢測到的對象相對應的多個對象朝向信 息所指示的朝向之間的關系來判定構圖。例如，最佳構圖可能取決于每個對象的朝向而有所不同。根據(jù)本發(fā)明的實施例，當 存在多個對象時，可以根據(jù)這些對象的朝向之間的關系來獲得最佳構圖。當存在多個對象時，在各個對象的朝向之間發(fā)生一定的關系。在本發(fā)明的實施例 中，基于復雜到某種程度的條件(例如多個對象的朝向之間的關系)來決定構圖。也就是 說，比起以前來可以更加適當且靈活地自動決定構圖。因此，使用本發(fā)明實施例所應用到的 設備的用戶無需麻煩的操作就可獲得最佳構圖的圖像，從而可以提供更大的便利。


圖1是示出根據(jù)本發(fā)明實施例的包括數(shù)字靜態(tài)相機和云臺(pan/tilt head)的成 像系統(tǒng)的外觀配置示例的圖；圖2A和2B是示意性地示出根據(jù)該實施例的成像系統(tǒng)的運動的圖，即示出沿著附 接到云臺的數(shù)字靜態(tài)相機的搖動(pan)和傾動(tilt)方向的運動的示例的圖；圖3是示出根據(jù)該實施例的數(shù)字靜態(tài)相機的配置示例的圖；圖4是示出根據(jù)該實施例的云臺的配置示例的圖；圖5是示出在根據(jù)該實施例的數(shù)字靜態(tài)相機中設置的與構圖控制相對應的以塊 為單位的功能的圖；圖6A和6B是示出個體對象的重心和由多個個體對象構成的合成對象的重心的 圖；圖7是示出在攝得圖像數(shù)據(jù)的屏幕上設定的原點坐標的圖；圖8是示意性地示出在所檢測到的個體對象的數(shù)目為1的情況下第一構圖控制的 示例的圖；圖9A和9B是示意性地示出在所檢測到的個體對象的數(shù)目為2的情況下第一構圖 控制的示例的圖；圖10是示意性地示出在所檢測到的個體對象的數(shù)目為3的情況下第一構圖控制 的示例的圖；圖IlA和IlB示出第一構圖控制的處理過程的示例的流程圖；圖12是示意性地示出在所檢測到的個體對象的數(shù)目為3的情況下第二構圖控制 的示例的圖；圖13A和13B示出第二構圖控制的處理過程的示例的流程圖；圖14是示出作為對根據(jù)該實施例的成像系統(tǒng)的修改的配置示例的圖；圖15是示出作為對根據(jù)該實施例的成像系統(tǒng)的另一修改的配置示例的圖；圖16是示出基于本發(fā)明實施例的構圖判定的應用示例的圖；圖17是示出基于本發(fā)明實施例的構圖判定的應用示例的圖；圖18是示出基于本發(fā)明實施例的構圖判定的應用示例的圖19是示出基于本發(fā)明實施例的構圖判定的應用示例的圖；圖20是示出基于本發(fā)明實施例的構圖判定的應用示例的圖；圖21是示出基于本發(fā)明實施例的構圖判定的應用示例的圖；圖22是示出基于本發(fā)明實施例的構圖判定的應用示例的圖；以及圖23是示出基于本發(fā)明實施例的構圖判定的應用示例的圖。
具體實施例方式下面描述本發(fā)明的實施例。具體而言，給出關于這樣一種情況的描述，即基于本發(fā) 明實施例的配置被應用到包括數(shù)字靜態(tài)相機和附接有該數(shù)字靜態(tài)相機的云臺的成像系統(tǒng)。圖1是示出根據(jù)該實施例的成像系統(tǒng)的外觀配置示例的正視圖。如圖1所示，該實施例的成像系統(tǒng)包括數(shù)字靜態(tài)相機1和云臺10。數(shù)字靜態(tài)相機1能夠基于通過設置在主體的正面面板上的透鏡單元3獲得的成像 光來生成靜態(tài)圖像數(shù)據(jù)，并且將該靜態(tài)圖像數(shù)據(jù)存儲在裝載于其中的存儲介質中。也就是 說，數(shù)字靜態(tài)相機1具有將作為照片攝取的圖像以靜態(tài)圖像數(shù)據(jù)的形式存儲在存儲介質中 的功能。當手工執(zhí)行這種攝影時，用戶按下設置在主體的上表面上的快門(釋放)按鈕2。數(shù)字靜態(tài)相機1能夠通過對其進行固定而被附接到云臺10。也就是說，云臺10和 數(shù)字靜態(tài)相機1具有使能相互附接的機構部分。云臺10具有搖動/傾動機構，以使附接于其上的數(shù)字靜態(tài)相機1在搖動(水平) 和傾動兩個方向上運動。由云臺10的搖動/傾動機構所實現(xiàn)的數(shù)字靜態(tài)相機1在搖動和傾動方向上的運 動的示例在圖2A和2B中示出。圖2A和2B分別示出了從平面方向和從側面方向來看的附 接到云臺10的數(shù)字靜態(tài)相機1。關于搖動方向，數(shù)字靜態(tài)相機1的主體的水平方向與圖2A中的直線Xl匹配的位 置狀態(tài)被認為是基準狀態(tài)。例如，當執(zhí)行繞旋轉軸Ctl沿旋轉方向+α的旋轉時，給出向右 的搖動運動。當執(zhí)行沿旋轉方向_α的旋轉時，給出向左的搖動運動。另一方面，關于傾動方向，數(shù)字靜態(tài)相機1的主體的垂直方向與圖2Β中的直線Yl 匹配的位置狀態(tài)被認為是基準狀態(tài)。例如，當執(zhí)行繞旋轉軸Ct2沿旋轉方向+β的旋轉時， 給出向下的傾動運動。當執(zhí)行沿旋轉方向的旋轉時，給出向上的傾動運動。沒有提及圖2Α和2Β所示的各個士 α和士 β方向上的最大可動旋轉角。但是， 優(yōu)選地，最大可動旋轉角盡可能地大，以便用戶能夠有更多的機會來捕捉對象。圖3是示出根據(jù)該實施例的數(shù)字靜態(tài)相機1的內部配置示例的圖。參考圖3，光學系統(tǒng)單元21包括一組預定數(shù)目的成像透鏡，例如變焦透鏡和聚焦 透鏡；以及光圈。光學系統(tǒng)單元21基于作為成像光的入射光在圖像傳感器22的光接收表 面上形成圖像。另外，光學系統(tǒng)單元21包括用于驅動變焦透鏡、聚焦透鏡、光圈等等的驅動機構。 這些驅動機構的操作例如由控制單元27所執(zhí)行的所謂相機控制來控制，所述相機控制例 如是變焦(視角)控制、自動聚焦控制和自動曝光控制。圖像傳感器22執(zhí)行將在光學系統(tǒng)單元21中獲得的成像光轉換成電信號的所謂光 電轉換。為此，圖像傳感器22在光電轉換器件的光接收表面上接收來自光學系統(tǒng)單元21的成像光，并且在預定的定時順序輸出根據(jù)接收光的強度積累的信號電荷。因此，與成像光相 對應的電信號(成像信號)被輸出。對于用作圖像傳感器22的光電轉換器件(成像器件) 沒有特別限制。在當前的情況下，例如可以使用CMOS(互補金屬氧化物半導體)傳感器或 CCD(電荷偶合器件)。當采用CMOS傳感器時，與圖像傳感器22相對應的器件(組件)的 配置可包括與下述A/D轉換器23相對應的模數(shù)轉換器。從圖像傳感器22輸出的成像信號被輸入到A/D轉換器23，并且被轉換成數(shù)字信 號，然后數(shù)字信號被輸入到信號處理單元對。信號處理單元M以靜態(tài)圖像(幀圖像)為單位取入從A/D轉換器23輸出的數(shù)字 成像信號，并且以靜態(tài)圖像為單位對成像信號執(zhí)行必要的信號處理，從而生成攝得圖像數(shù) 據(jù)(攝得靜態(tài)圖像數(shù)據(jù))，其是與一個靜態(tài)圖像相對應的圖像信號數(shù)據(jù)。當由信號處理單元M以上述方式生成的攝得圖像數(shù)據(jù)要被作為圖像信息存儲在 充當存儲介質(存儲介質設備)的存儲卡40中時，與一個靜態(tài)圖像相對應的攝得圖像數(shù)據(jù) 被從信號處理單元M輸出到編碼/解碼單元25。編碼/解碼單元25對從信號處理單元M輸出的靜態(tài)圖像的攝得圖像數(shù)據(jù)執(zhí)行按 預定靜態(tài)圖像壓縮編碼方法的壓縮編碼，并且根據(jù)控制單元27進行的控制添加頭部等等， 從而將攝得圖像數(shù)據(jù)轉換成以預定格式壓縮的攝得圖像數(shù)據(jù)。然后，編碼/解碼單元25將 以這種方式生成的攝得圖像數(shù)據(jù)傳送到介質控制器26。介質控制器沈根據(jù)控制單元27進 行的控制將所傳送的攝得圖像數(shù)據(jù)寫在存儲卡40上，從而攝得圖像數(shù)據(jù)被存儲在存儲卡 40中。此情況下采用的存儲卡40是具有符合預定標準的卡外形并且包括諸如閃存之類 的非易失性半導體存儲設備的存儲介質。取代存儲卡40，另一種類型和格式的存儲介質可 被用于存儲圖像數(shù)據(jù)。根據(jù)該實施例的信號處理單元M能夠利用以上述方式獲得的攝得圖像數(shù)據(jù)來執(zhí) 行圖像處理，以檢測對象。該實施例中的對象檢測處理的細節(jié)在下文中描述。另外，數(shù)字靜態(tài)相機1能夠通過允許顯示單元33利用在信號處理單元M中獲得 的攝得圖像數(shù)據(jù)執(zhí)行圖像顯示，來顯示所謂的穿透圖像(through image)，該穿透圖像是當 前正被攝取的圖像。具體而言，信號處理單元M取入從A/D轉換器23輸出的成像信號，并 且生成與一個靜態(tài)圖像相對應的攝得圖像數(shù)據(jù)，如上所述。通過繼續(xù)此操作，信號處理單元 對順序地生成與運動圖像中的幀圖像相對應的攝得圖像數(shù)據(jù)。然后，信號處理單元對根據(jù) 控制單元27進行的控制將順序生成的攝得圖像數(shù)據(jù)傳送到顯示驅動器32。因此，穿透圖像 被顯示。顯示驅動器32基于以上述方式從信號處理單元M輸入的攝得圖像數(shù)據(jù)來生成驅 動顯示單元33的驅動信號并將驅動信號輸出到顯示單元33。因此，基于以靜態(tài)圖像為單位 的攝得圖像數(shù)據(jù)的圖像被順序顯示在顯示單元33中，從而用戶可以在顯示單元33中查看 當時正攝取的運動圖像。也就是說，監(jiān)視圖像被顯示。另外，數(shù)字靜態(tài)相機1能夠對記錄在存儲卡40上的攝得圖像數(shù)據(jù)進行再現(xiàn)并且將 圖像顯示在顯示單元33中。為此，控制單元27指定攝得圖像數(shù)據(jù)并指令介質控制器沈從存儲卡40讀取數(shù) 據(jù)。響應于指令，介質控制器沈訪問存儲卡40上記錄著所指定的攝得圖像數(shù)據(jù)的地址并且讀取數(shù)據(jù)，然后將讀取的數(shù)據(jù)傳送到編碼/解碼單元25。編碼/解碼單元25根據(jù)控制單元27進行的控制，從傳送自介質控制器沈的攝得 圖像數(shù)據(jù)中提取作為壓縮后靜態(tài)圖像數(shù)據(jù)的實質數(shù)據(jù)，并且對壓縮后靜態(tài)圖像數(shù)據(jù)執(zhí)行與 壓縮編碼相對應的解碼處理，從而獲得與一個靜態(tài)圖像相對應的攝得圖像數(shù)據(jù)。然后，編碼 /解碼單元25將攝得圖像數(shù)據(jù)傳送到顯示驅動器32。因此，記錄在存儲卡40上的攝得圖 像數(shù)據(jù)的圖像被再現(xiàn)和顯示在顯示單元33中。用戶界面圖像可與上述監(jiān)視圖像和攝得圖像數(shù)據(jù)的再現(xiàn)圖像一起被顯示在顯示 單元33中。在這種情況下，控制單元27根據(jù)當時的操作狀態(tài)生成要作為必要的用戶界面 圖像顯示的圖像數(shù)據(jù)，并且將所生成的圖像數(shù)據(jù)輸出到顯示驅動器32。因此，用戶界面圖像 被顯示在顯示單元33中。該用戶界面圖像可以與監(jiān)視圖像或者攝得圖像數(shù)據(jù)的再現(xiàn)圖像 相分離的作為特定的菜單屏幕等等被顯示在顯示單元33的顯示屏幕上?；蛘撸脩艚缑鎴D 像可以在被疊加在監(jiān)視圖像或者攝得圖像數(shù)據(jù)的再現(xiàn)圖像上或者結合為其一部分的同時 被顯示。控制單元27實際包括CPU(中央處理單元)，并且與R0M(只讀存儲器) 和 RAM(隨機訪問存儲器) 一起構成微計算機。ROM觀存儲要被作為控制單元27的CPU執(zhí) 行的程序、與數(shù)字靜態(tài)相機1的操作相關的各條設定信息，等等。RAM 29充當CPU的主存儲 設備。在此情況下，設置了閃存30，作為用于存儲應當根據(jù)用戶操作或操作歷史而改變 (改寫)的各條設定信息。當諸如閃存之類的非易失性存儲器被用作ROM觀時，ROM觀中 的一部分存儲區(qū)域可取代閃存30被使用。操作單元31包括設置在數(shù)字靜態(tài)相機1中的各種操作按鈕，以及用于生成與對這 些操作按鈕執(zhí)行的操作相對應的操作信息信號并將所生成的信號輸出到CPU的操作信息 信號輸出單元?？刂茊卧?7響應于從操作單元31輸入的每個操作信息信號而執(zhí)行預定的 處理。因此，數(shù)字靜態(tài)相機1根據(jù)用戶的操作而被操作。云臺兼容通信單元34根據(jù)預定的通信方法執(zhí)行云臺10和數(shù)字靜態(tài)相機1之間的 通信，并且具有物理層配置，該物理層配置使得在數(shù)字靜態(tài)相機1附接到云臺10的狀態(tài)中 能夠向/從云臺10的通信單元進行有線或無線的通信信號發(fā)送/接收；以及實現(xiàn)與預定的 更上層相對應的通信處理的配置。圖4是示出云臺10的配置示例的框圖。如上所述，云臺10包括搖動/傾動機構。作為與此機構相對應的元件，云臺10包 括搖動機構單元53、搖動電機M、傾動機構單元56和傾動電機57。搖動機構單元53具有向附接到云臺10的數(shù)字靜態(tài)相機1賦予在圖2A所示的搖 動(水平)方向上的運動的機構，并且此機構的運動可在搖動電機討在正向或反向方向上 旋轉時獲得。同樣地，傾動機構單元56具有向附接到云臺10的數(shù)字靜態(tài)相機1賦予在圖 2B所示的傾動(垂直)方向上的運動的機構，并且此機構的運動可在傾動電機57在正向或 反向方向上旋轉時獲得?？刂茊卧?1包括例如通過組合CPU、ROM和RAM而形成的微計算機，并且對搖動機 構單元53和傾動機構單元56的運動進行控制。具體而言，當對搖動機構單元53的運動進 行控制時，控制單元51向搖動驅動單元55輸出與搖動機構單元53所需的運動量和運動方向相對應的控制信號。搖動驅動單元55生成與輸入的控制信號相對應的電機驅動信號，并 將電機驅動信號輸出到搖動電機54。在必要的旋轉方向上，以必要的旋轉角度，通過電機驅 動信號來旋轉搖動電機54。結果，搖動機構單元53被驅動以在相應運動方向上以相應的運 動量進行運動。同樣地，當對傾動機構單元56的運動進行控制時，控制單元51向傾動驅動單元58 輸出與傾動機構單元56所需的運動量和運動方向相對應的控制信號。傾動驅動單元58生 成與輸入的控制信號相對應的電機驅動信號，并將電機驅動信號輸出到傾動電機57。在必 要的旋轉方向上，以必要的旋轉角度，通過電機驅動信號來旋轉傾動電機57。結果，傾動機 構單元56被驅動以在相應運動方向上以相應的運動量進行運動。通信單元52根據(jù)預定的通信方法與附接到云臺10的數(shù)字靜態(tài)相機1中的云臺兼 容通信單元34通信。與云臺兼容通信單元34 —樣，通信單元52包括物理層配置，該物理 層配置使得能夠向/從另一方的通信單元進行有線或無線的通信信號發(fā)送/接收；以及實 現(xiàn)與預定的更上層相對應的通信處理的配置。在包括具有上述配置的數(shù)字靜態(tài)相機1和云臺10的成像系統(tǒng)中，如果人被認為是 主對象(以下簡稱為對象)并且如果在搜索之后對象的存在被檢測到，則云臺10的搖動/ 傾動機構被驅動，以獲得包括對象的圖像的最佳構圖(執(zhí)行最佳取景)。然后，在獲得最佳 構圖的定時，當時攝取的圖像數(shù)據(jù)被記錄在存儲介質(存儲卡40)上。也就是說，在根據(jù)該實施例的成像系統(tǒng)中，在通過數(shù)字靜態(tài)相機1進行的攝影期 間，自動執(zhí)行為所找到的對象決定(判定)最佳構圖并且執(zhí)行拍攝和記錄的操作。這樣，可 以獲得具有適度良好的質量的照片圖像，而無需用戶進行構圖判定和拍攝。另外，在這種系 統(tǒng)中，不需要某人握持著相機就能夠執(zhí)行拍攝，從而拍攝地點中的每個人都可成為對象。此 外，即使作為對象的用戶沒有自覺地進入相機的視角范圍，對象也可被拍攝在照片中。也就 是說，增加了拍攝到存在于拍攝地點中的人的自然外表的機會，從而可以獲得許多具有空 前的氛圍的照片。最佳構圖可能取決于對象的朝向(orientation)而有所不同。但是，根據(jù)該實施 例，根據(jù)多個對象的朝向之間的關系來決定不同的最佳構圖。因此，使用具有根據(jù)該實施例 的配置的設備的用戶無需麻煩的操作就可獲得最佳構圖的圖像。下面，描述根據(jù)該實施例的構圖控制。圖5示出了在數(shù)字靜態(tài)相機1中設置的與根據(jù)該實施例的構圖控制相對應的功能 單元的配置示例。參考圖5，對象檢測塊61利用基于在圖像傳感器22中獲得的成像信號而在信號處 理單元M中獲得的攝得圖像數(shù)據(jù)，來執(zhí)行包括對象的搜索控制的對象檢測處理。這里，對 象檢測處理指的是辨別和檢測攝得圖像數(shù)據(jù)的圖像內容中的作為人的對象的處理。作為檢 測結果而獲得的信息(檢測信息)包括作為人的對象的數(shù)目、屏幕中的每個個體對象的位 置信息以及圖像中的每個個體對象的大小(占有面積)。在該實施例中，每個個體對象的臉 部朝向的信息(對象朝向信息)也作為檢測信息被獲得。在這里，臉部朝向被認為是在攝 得圖像數(shù)據(jù)的屏幕中的作為人的個體對象的朝向。為了簡單和易于理解，以下描述是基于下述假設來給出的臉部朝向的檢測結果 是在右和左兩個階段中獲得的。例如，即使能夠判定對象基本上是朝向正面的，也根據(jù)預定的算法來獲得右和左中的任何一個的檢測結果。取決于構圖判定算法的結構，根據(jù)該實施例的構圖控制可以通過只獲得對象的數(shù) 目和對象朝向信息作為檢測信息來實現(xiàn)。作為上述對象檢測處理的特定方法，可以使用臉部檢測技術。在相關技術中使用 了一些臉部檢測方法，但是對于該實施例中要采用的方法并沒有特別限制，可以考慮到檢 測準確性和設計難度來采用適當?shù)姆椒??？梢酝ㄟ^應用臉部檢測技術來檢測上述臉部朝向。例如，當基于使用特征點(例 如鼻子)的模式識別來執(zhí)行臉部檢測處理時，可以基于在整個檢測到的臉部中這些特征點 之間的位置和距離關系來識別臉部朝向。如果除了應用上述臉部檢測技術之外還存在用于檢測作為人的個體對象的朝向 的有用方法，例如檢測身體部分的朝向或者檢測視線，則可以使用該有用方法，而不會有特 別的問題。也就是說，作為用于檢測個體對象的朝向(對象朝向)或者檢測臉部朝向的方 法或算法，可以從包括相關技術中使用的那些方法在內的方法中選擇適當?shù)姆椒ǎ⑶铱?以采用所選擇的方法。對象檢測塊61所執(zhí)行的對象檢測處理可實現(xiàn)為信號處理單元M中的圖像信號處 理。在信號處理單元M如上所述由DSP(數(shù)字信號處理器)構成的情況下，對象檢測處理 是通過提供給作為信號處理單元M的DSP的程序和指令來實現(xiàn)的。在對象搜索控制期間，用于驅動上述搖動/傾動機構的控制信號經由通信控制塊 63被輸出，以控制云臺10的搖動/傾動機構。由對象檢測塊61生成的作為對象檢測處理的結果的檢測信息被輸入到構圖控制 塊62。構圖控制塊62利用輸入其中的關于對象的檢測信息來決定被認為是最佳的構圖 (最佳構圖)。然后，構圖控制塊62執(zhí)行控制以獲得所決定的最佳構圖(構圖控制)。此 情況下的構圖控制包括改變視角(在該實施例中，它指的是根據(jù)對變焦透鏡的控制而可改 變的視野)的控制、沿著搖動(右或左)方向的拍攝方向的控制(搖動控制)以及沿著傾 動(上或下)方向的拍攝方向的控制(傾動控制)。為了改變視角，執(zhí)行移動數(shù)字靜態(tài)相機 1的光學系統(tǒng)單元21中的變焦透鏡的控制，或者執(zhí)行裁剪攝得圖像數(shù)據(jù)上的圖像的圖像信 號處理。搖動控制和傾動控制是通過控制和移動云臺10的搖動/傾動機構來執(zhí)行的。當 對搖動/傾動機構的控制被執(zhí)行時，構圖控制塊62允許用于將搖動/傾動機構設定在所需 位置的控制信號經由通信控制塊63被發(fā)送到云臺10。由上述構圖控制塊62執(zhí)行的決定和控制構圖的處理可由控制單元27 (CPU)基于 程序來執(zhí)行?；蛘?，由信號處理單元對基于程序執(zhí)行的處理可以被一起使用。通信控制塊 63根據(jù)預定的協(xié)議與云臺10的通信單元52執(zhí)行通信處理，并且充當與云臺兼容通信單元 34相對應的功能單元。接下來，參考圖6A和6B描述對象檢測塊61執(zhí)行的對象檢測處理的示例。假定對象檢測塊61取入了具有圖6A所示的圖像內容的攝得圖像數(shù)據(jù)。攝得圖像 數(shù)據(jù)的圖像內容是通過攝取其中存在作為人的對象的圖像來獲得的。圖6A(和圖6B)示出 了屏幕按矩陣樣式被劃分的狀態(tài)。這示意性地說明了作為攝得圖像數(shù)據(jù)的屏幕是由一組預 定數(shù)目的水平和垂直像素構成的。
通過對具有圖6A所示的圖像內容的攝得圖像數(shù)據(jù)執(zhí)行對象檢測(臉部檢測)檢 測出圖中所示的個體對象SBJ的臉部。也就是說，通過臉部檢測處理對臉部的檢測等同于 對個體對象的檢測。作為對個體對象的檢測的結果，獲得個體對象的數(shù)目、朝向、位置和大 小的信息，如上所述。至于個體對象的數(shù)目，可以獲得通過臉部檢測而檢測到的臉部的數(shù)目。在圖6A所 示的情況中，檢測到的臉部的數(shù)目是1，從而個體對象的數(shù)目是1。作為每個個體對象的位置信息，至少獲得作為攝得圖像數(shù)據(jù)的圖像中的個體對象 SBJ的重心G(X，Y)。在此情況下，攝得圖像數(shù)據(jù)的屏幕上作為重心B(X，Y)的基準的X和Y 原點坐標P(0，0)是與屏幕大小相對應的X軸方向(水平方向)上的寬度(水平圖像大小) Cx的中點與Y軸方向(垂直方向)上的寬度(垂直圖像大小)Cy的中點的交點，如圖7所示?？梢圆捎酶鶕?jù)相關技術的用于檢測對象的重心的方法來定義圖像中的個體對象 的重心G的位置或設定重心G。可通過計算被臉部檢測處理等等指定和檢測為臉部部分的區(qū)域中的像素數(shù)目來 獲得每個個體對象的大小。每個個體對象的臉部朝向基于臉部檢測處理被檢測為右和左中的任何一個，如上 所述。另一方面，如果圖6B所示的攝得圖像數(shù)據(jù)被取入，并且對象檢測塊61執(zhí)行對象檢 測處理，則兩個臉部的存在通過臉部檢測被檢測到，從而指示出個體對象的數(shù)目為2的結 果可以被獲得。在這里，兩個個體對象被彼此辨別開來左邊那個是個體對象SBJO ；右邊那 個是個體對象SBJl。個體對象SBJO和SBJl的重心G的坐標分別是GO (X0，Y0)和Gl (XI， Yl)。在以這種方式檢測到兩個或更多個個體對象的情況下，計算由多個個體對象構成 的合成對象的重心，即合成對象的重心Gt (Xg, Yg)。存在一些方式來設定合成對象的重心Gt。在此情況下，采用最容易的方式連接 多個檢測到的個體對象中在屏幕上的最左邊和最右邊的個體對象的重心的線的中點被設 定為合成對象的重心Gt。合成對象的重心Gt是被用于構圖控制中的信息，如下所述，并且 是可通過在個體對象的重心的信息被獲得之后進行計算來獲得的信息。因此，合成對象的 重心Gt可由對象檢測塊61獲得，并且作為檢測信息被輸出?；蛘撸铣蓪ο蟮闹匦腉t可 由構圖控制塊62利用作為檢測信息獲得的指示個體對象的重心的位置的信息中關于最左 和最右個體對象的重心的信息來獲得。除了上述方法之外，也可使用以下設定方法。也就是說，根據(jù)多個個體對象的指派 加權系數(shù)，并且利用加權系數(shù)來進行安排，以便合成對象的重心Gt的位置接近個體對象中 的一個具有較大的大小的個體對象。個體對象SBJO和SBJl中的每一個的大小可通過計算由檢測到的該對象的臉部所
占有的像素數(shù)目來獲得。接下來，參考圖8至10來描述作為該實施例的第一示例的構圖控制能夠獲得的構 圖。圖8示出了這樣的情況，即作為對象搜索的結果，包括個體對象SBJO的圖像內容已經通過對象檢測作為攝得圖像數(shù)據(jù)被獲得。在該實施例中，當數(shù)字靜態(tài)相機1所附接到的云臺10被正常設定時，數(shù)字靜態(tài)相 機1的朝向被設定，以便水平朝向的圖像被攝取。從而，下面描述的第一示例和第二示例是 基于通過成像獲得水平朝向的圖像的假設的。在如圖8所示已檢測到一個個體對象的情況下，改變個體對象SBJO的大小，以便 個體對象SBJO在攝得圖像數(shù)據(jù)的屏幕中的占有率具有被視為最佳的預定值。例如，如果在 個體對象被檢測到的階段中個體對象在屏幕中的占有率低于預定值，則減小視角的變焦控 制被執(zhí)行以便個體對象的占有率增大到該預定值。如果個體對象在屏幕中的占有率高于該 預定值，則增大視角的變焦控制被執(zhí)行以便個體對象的占有率減小到該預定值。通過執(zhí)行 這種變焦控制，在檢測到的個體對象的數(shù)目為1的情況下，對象大小被改變到適當?shù)拇笮?。在檢測到的個體對象的數(shù)目為1情況下，通過以下方式來調整對象在屏幕上的位 置(對象位置)。對于對象位置，使用檢測到的臉部朝向的信息。圖8所示的個體對象SBJO被檢測 為臉部朝向左側。此時，當圖8所示的圖像內容的屏幕被實際觀看時，觀看者會看到個體對 象SBJO的臉部在屏幕中朝向左側。在現(xiàn)實世界中，作為個體對象SBJO的實際的人是面向 右的，其中面向執(zhí)行成像的成像裝置的那一側為正面。為了調整對象位置，虛擬地設定一經過圖像中的原點坐標P(0，0)的垂直線，即圖 像區(qū)域劃分線，它是與Y軸線相對應的直線并且是對象位置調整的基準線。如果像上述情況中那樣臉部朝向被檢測為向左，則個體對象SBJO的重心G被置于 相對于與圖像區(qū)域劃分線Ld相對應的位置(X = O)移動了一移動量的位置，該移動量由水 平偏移量ΘΧ(水平移位位置)表示。為此，執(zhí)行控制以驅動云臺10的搖動機構以便重心 G被定位在水平移位位置處。一般地，對象被定位在屏幕中心的構圖被認為是一般來說不宜的構圖。通過根據(jù) 由三分規(guī)則或者黃金分割表示的某種規(guī)則來使對象的位置相對于的屏幕中心位移，可以獲 得更好的構圖。根據(jù)該實施例，個體對象SBJO在屏幕的水平方向上的位置(重心G)根據(jù) 這種構圖決定方法被相對于屏幕中心移動預定的量(水平偏移量θχ)。另外，根據(jù)該實施例，當檢測到的個體對象的臉部朝向是向左時，在由沿著Y軸線 的圖像區(qū)域劃分線Ld所限定的右和左的兩個圖像區(qū)域(劃分區(qū)域)中，對象的重心G在水 平方向上的位置被置于右側的圖像區(qū)域，與臉部所朝向的左側相反，如圖8所示。因此，在 屏幕上檢測到的對象SBJO的臉部所朝向的左側可以獲得空間。這樣，與臉部朝向左的個體 對象SBJO的重心G被定位于屏幕在水平方向上的中心的情況或者重心G被定位在相對于 圖像區(qū)域劃分線Ld的左側圖像區(qū)域的情況相比，可以獲得更好的構圖。在該實施例中存在多種算法來決定水平偏移量θ χ的實際值，但是在該實施例中 決定是基于三分規(guī)則作出的。三分規(guī)則是最基本的構圖設定方法之一。在此方法中，對象 被定位在將矩形屏幕分別在水平和垂直方向上劃分成三段的虛擬線中的任何一條上，以便 獲得良好的構圖。例如，參考圖8，水平偏移量θ X被設定成使得重心G被定位在將水平圖像大小Cx 劃分成三段并且沿屏幕的垂直方向延伸的兩條虛擬線中的右虛擬線上。因此，可以獲得根 據(jù)個體對象的臉部朝向的針對對象在水平方向上的位置的最佳構圖。
雖然在圖中沒有示出，但如果已檢測到所檢測到的個體對象SBJ的臉部朝向為向 右，則個體對象SBJ的重心G被定位在圖8所示的位置的關于圖像區(qū)域劃分線Ld的水平線 對稱的位置處。也就是說，將通過顛倒圖8的情況中的值的正/負而獲得的值設定為此情 況下的水平偏移量θ X，并且基于水平偏移量θ χ來執(zhí)行搖動控制。在如圖9Α所示檢測到兩個個體對象SBJO和SBJl的情況下，按以下方式執(zhí)行構圖 控制。首先，執(zhí)行調整(變焦控制)以便由個體對象SBJO和SBJl的圖像部分的群組構成 的合成對象圖像部分的大小(對象圖像部分在整個屏幕中的占有率)具有與個體對象的數(shù) 目為2的情況相對應的最佳值。存在一些方法來定義合成對象圖像部分并計算其大小。例如，可以通過將多個檢 測到的個體對象的圖像部分的大小相加來計算該大小?；蛘撸梢詫⒃摯笮∮嬎銥橛蓢@ 所有的多個檢測到的個體對象的虛擬繪制線所限定的圖像部分的大小。至于兩個個體對象SBJO和SBJl的水平方向上的位置，使用兩個個體對象SBJO和 SBJl的臉部朝向的信息。假定圖9Α所示的兩個個體對象SBJO和SBJl的臉部朝向已被檢測為向左。換言 之，所有的兩個個體對象的臉部朝向都是相同的，即在此情況下為朝向左。在此情況下，與圖8中的個體對象SBJO的臉部朝向為向左的情況一樣，由個體對 象SBJO和SBJl構成的合成對象圖像部分被定位在圖像區(qū)域劃分線Ld的右側，與臉部所朝 向的左側相反，以便在屏幕的左側提供空間。為此，如圖9Α所示，設定用于向右位移預定量 的水平偏移量θ χ,并且執(zhí)行搖動控制以便合成對象的重心Gt被定位在相對于經過原點坐 標Ρ(0，0)的垂直線(Y軸線)移動了水平偏移量θ χ的位置處，其中合成對象的重心Gt是 由個體對象SBJO和SBJl構成的合成對象圖像部分的重心，所述垂直線是圖像區(qū)域劃分線 Ld。雖然在圖中沒有示出，但如果個體對象SBJO和SBJl的臉部朝向為向右，則執(zhí)行搖 動控制，使得合成對象的重心Bt被定位在圖9Α所示的位置的關于圖像區(qū)域劃分線Ld的線 對稱的位置處(在左側圖像區(qū)域中相對于Y軸線移動了水平偏移量θ χ的絕對值的位置)。注意，如果在個體對象的數(shù)目為兩個或更多個的情況下給出對于個體對象的數(shù)目 為1的情況下被視為最佳的水平偏移量θ X，則可能產生留下太靠右(或太靠左)的印象的 構圖。因此，在如圖9Α所示的個體對象的數(shù)目為2的情況下，比圖8所示的個體對象的數(shù) 目為1的情況的值更小的值(絕對值)根據(jù)預定規(guī)則被設定為水平偏移量θχ。圖9Β示出了檢測到的兩個個體對象SBJO和SBJl的臉部朝向分別是向左和向右 的情況的示例。這是個體對象的數(shù)目為2并且對象的臉部朝向彼此不同的情況的示例。在這種情況下，至于合成對象圖像部分在水平方向上的位置，執(zhí)行調整(搖動控 制)，使得由兩個個體對象SBJO和SBJl構成的合成對象的重心Bt被定位在圖像區(qū)域劃分 線Ld上，如圖9Β所示。在相應獲得的構圖中，由兩個個體對象SBJO和SBJl構成的合成對象圖像部分被 定位在屏幕的水平方向上的幾乎中心處。在這種對象數(shù)目為兩個或更多個并且這些對象的 朝向不同的情況下，即使合成對象圖像部分處于中心，也可相應地獲得良好的構圖。圖10示出檢測到三個個體對象SBJO、SBJl和SBJ2的情況。在這種情況下，按以下方式執(zhí)行構圖控制。首先，執(zhí)行調整(變焦控制)，使得由個體對象SBJO、SBJl和SBJ2構成的合成對象圖像部分的大小具有與個體對象的數(shù)目為3的 情況相對應的最佳值。然后，至于合成對象圖像部分的水平方向上的位置，使用為各個個體對象檢測到 的臉部朝向的信息。在圖10中，所有三個個體對象SBJO、SBJl和SBJ2的臉部朝向都是相 同的(向左)。在這種情況下，與圖9A中所示的情況一樣，執(zhí)行對水平偏移量θ χ的設定以及搖 動控制，以將合成對象的重心Gt移動到由水平偏移量θ χ確定的某個位置，以便將由個體 對象SBJ0、SBJ1和SBJ2構成的圖像區(qū)域部分位移到由圖像區(qū)域劃分線Ld限定的右側圖像 區(qū)域。如果所有三個個體對象SBJ0、SBJ1和SBJ2的臉部朝向都是相同的(向右)，則執(zhí)行 搖動控制，使得合成對象的重心Gt被定位在圖10所示的位置的關于圖像區(qū)域劃分線Ld的 水平線對稱的位置處。此時設定的水平偏移量θ χ具有比圖9Α的檢測到的個體對象的數(shù)目為2的情況 下的更小的絕對值。因此，對于個體對象的數(shù)目為3的情況進一步優(yōu)化了對象在水平方向 上的位置，從而可以獲得良好的構圖。在構圖控制的第一示例中，如果三個個體對象SBJO、SBJl和SBJ2的臉部朝向不相 同，則與圖9Β中一樣，獲得合成對象的重心Gt被定位在圖像區(qū)域劃分線Ld(Y軸線)上的 構圖。根據(jù)以上給出的描述，可以明白，構圖控制的第一示例中的水平方向上的位置調 整是基于為每個個體對象檢測到的臉部朝向來執(zhí)行的。也就是說，作為最基本的控制，當個 體對象的數(shù)目為1時，依據(jù)個體對象的臉部朝向是向右還是向左，將對象的重心G(合成對 象的重心Gt)向圖像區(qū)域劃分線Ld(Y軸線)的右側或左側位移一預定的量以執(zhí)行重心G 的水平偏移，從而在屏幕中與臉部朝向相同的一側提供了空間。當個體對象的數(shù)目為多個(兩個或更多個)時，如果所有個體對象的臉部朝向都 相同，則根據(jù)上述位置調整來執(zhí)行合成對象的重心Gt的水平偏移。如果臉部朝向不同，則 不執(zhí)行水平偏移，并且將合成對象的重心Gt定位在與圖像區(qū)域劃分線Ld相對應的X坐標 處，使得合成對象圖像部分被定位在屏幕的幾乎中心處。然后，當執(zhí)行合成對象的重心Gt的水平偏移時(當個體對象的數(shù)目為1時重心G 被視為合成對象的重心Gt)，如以上參考圖8至10所述根據(jù)個體對象的數(shù)目來改變水平偏 移量ΘΧ。這樣，進行了布置，使得可以根據(jù)個體對象的數(shù)目來獲得合成對象圖像部分在屏 幕中的水平方向上的最佳位置。圖1IA和1IB示出了由圖5所示的對象檢測塊61、構圖控制塊62和通信控制塊63 執(zhí)行的、以上參考圖8至10描述的構圖控制的第一示例的過程示例。圖IlA和IlB所示的 處理是在作為DSP的信號處理單元M和控制單元27中的CPU執(zhí)行程序時實現(xiàn)的。這種程 序是在制造期間被寫入和存儲在ROM等等之中的。或者，該程序可被存儲在非易失性存儲 介質中，然后被從存儲介質安裝(包括更新)，以便被存儲在與DSP兼容的非易失性存儲區(qū) 域中，或者被存儲在閃存30中。另外，該程序可在另一主機設備的控制下經由諸如USB或 IEEE 1394之類的數(shù)據(jù)接口來安裝。另外，在允許數(shù)字靜態(tài)相機1具有網絡功能時，可以將 該程序存儲在網絡上的服務器等等的存儲設備中并且通過從服務器下載程序來獲得程序。在以下參考流程圖進行的描述中，以上使用的術語“合成對象的重心Gt”和“合成對象圖像部分”不僅被應用到檢測到的個體對象的數(shù)目為2個或更多個的情況，而且也應用 到檢測到的個體對象的數(shù)目為1的情況。也就是說，在檢測到的個體對象的數(shù)目為1的情 況下，圖8所示的重心G相當于合成對象的重心Gt。另外，圖8所示的僅由個體對象SBJO 構成的圖像部分相當于檢測到的個體對象的數(shù)目為1的情況下的合成對象圖像部分。步驟SlOl至S106對應于搜索和檢測對象的過程，并且主要由對象檢測塊61執(zhí) 行。在步驟SlO1中，取入并獲得基于來自圖像傳感器22的成像信號的攝得圖像數(shù)據(jù)。 在步驟S102中，利用在步驟SlOl中獲得的攝得圖像數(shù)據(jù)來執(zhí)行對象檢測處理。在對象檢 測處理中，利用上述臉部檢測方法等等來判定在作為攝得圖像數(shù)據(jù)的圖像內容中是否存在 個體對象。如果存在個體對象，則至少獲得個體對象的數(shù)目以及每個個體對象的位置(重 心)、大小和臉部朝向來作為檢測信息。在步驟S103中，判定作為步驟S102中的對象檢測處理的結果是否檢測到了個體 對象的存在。如果獲得否定的判定結果，也就是說，如果尚未檢測到個體對象的存在(檢測 到的個體對象的數(shù)目為0)，則處理前進到步驟S104，在該步驟中執(zhí)行增大視角的變焦透鏡 運動控制(拉遠(zoom-out)控制)。通過增大視角，可以攝取更寬范圍的圖像，從而相應地 可以很容易地捕捉個體對象。同時，在步驟S105中，執(zhí)行移動云臺10的搖動/傾動機構的 控制(搖動/傾動控制)，以便搜索對象。此時，執(zhí)行控制，以便對象檢測塊61向通信控制 塊63提供用于搖動/傾動控制的控制信號，并且該控制信號被發(fā)送到云臺10的通信單元 52。在搖動/傾動控制中移動云臺10的搖動/傾動機構以搜索對象的樣式可以被決 定為使得搜索被高效地執(zhí)行。在步驟S106中，模式標志“f”被設定為0(f = 0)，并且處理返回到步驟S101。這樣，重復步驟SlOl至S106的過程，直到在攝得圖像數(shù)據(jù)的圖像內容中檢測到至 少一個個體對象為止。此時，包括數(shù)字靜態(tài)相機1和云臺10的系統(tǒng)處于數(shù)字靜態(tài)相機1被 在搖動和傾動方向上移動以搜索對象的狀態(tài)中。如果在步驟S103中獲得肯定的判定結果，即如果檢測到了個體對象的存在，則處 理前進到步驟S107。從步驟S107起的過程主要由構圖控制塊62執(zhí)行。在步驟S107中，判定當前在模式標志“f”中設定的值。如果判定f == 0，則該值指示出應當執(zhí)行初始粗略對象捕捉模式來作為構圖控 制，從而執(zhí)行從步驟S108開始的過程，如圖IlA和IlB所示。在步驟S108中，判定合成對象的重心Gt是否被定位在攝得圖像數(shù)據(jù)的屏幕(通 過顯示攝得圖像數(shù)據(jù)的圖像內容而獲得的屏幕)上的原點坐標p(0，0)處(見圖7)。如果 獲得否定的判定結果，也就是說，如果合成對象的重心Gt尚未被定位在原點坐標處，則處 理前進到步驟S109，在該步驟中，執(zhí)行移動云臺10的搖動/傾動機構的控制以便合成對象 的重心Gt被定位在原點坐標處，然后處理返回到步驟SlOl。如上所述，在作為個體對象的 存在已被檢測到的狀態(tài)中的構圖控制的第一過程的捕捉模式中，執(zhí)行云臺10的搖動/傾動 機構，以便合成對象的重心Gt被定位在作為初始基準位置的原點坐標處，從而包括檢測到 的個體對象的圖像區(qū)域被定位在屏幕的中心?，F(xiàn)在，描述步驟S109中用于實際執(zhí)行搖動/傾動控制的算法的示例。
在個體對象被檢測到并且模式標志f == 0的狀態(tài)中，對象檢測塊61根據(jù)以下式
(1)來執(zhí)行計算，以獲得搖動方向上的必要運動量Span和傾動方向上的必要運動量Milt。
在以下式(1)中，“η”表示檢測到的個體對象的數(shù)目，“P(Xi，Yi) ”表示被指派以號碼0至
n-1的個體對象中的第i個個體對象的重心的X和Y坐標。為了確認，此情況下的原點坐標
(0,0)位于屏幕的水平方向上的中點與垂直方向上的中點的交點處，如圖7所示。
權利要求
1.一種圖像處理裝置，包括對象檢測部件，其基于輸入圖像數(shù)據(jù)來檢測圖像中的預定對象；朝向檢測部件，其檢測對象朝向信息，所述對象朝向信息指示出在所述圖像中所述對 象的一部分面向的朝向；以及構圖判定部件，其基于所述對象朝向信息判定所述圖像的構圖。
2.如權利要求1所述的圖像處理裝置，其中， 當所述對象檢測部件檢測到多個對象時，所述構圖判定部件基于與所述多個對象相對 應的多個對象朝向信息之間的關系來判定構圖。
3.如權利要求2所述的圖像處理裝置，其中，當由所述多個對象朝向信息所指示的所有朝向都相同時，所述構圖判定部件獲 得下述構圖來作為判定結果在所述構圖中，在由所述圖像中所有檢測到的對象構成的圖 像部分中設定的重心被定位在由在所述圖像中設定的圖像區(qū)域劃分線所限定的所述圖像 中的區(qū)域之中的、與所述多個對象朝向信息所指示的朝向相反的一側的區(qū)域中。
4.如權利要求3所述的圖像處理裝置，其中，所述構圖判定部件基于檢測到的對象的數(shù)目，來設定在作為判定結果獲得的所 述構圖中所述圖像區(qū)域劃分線與所述重心之間的距離。
5.如權利要求2所述的圖像處理裝置，其中，當由所述多個對象朝向信息指示的所有朝向不是都相同時，所述構圖判定部件 可以獲得下述構圖來作為判定結果在所述構圖中，至少在由多個檢測到的對象構成的圖 像部分中設定的重心被基于指示不同朝向的多個對象朝向信息之間的關系而定位在與所 述圖像中設定的圖像區(qū)域劃分線相對應的位置處。
6.如權利要求5所述的圖像處理裝置，其中，當在所述指示不同朝向的多個對象朝向信息之間的關系中，一組最大數(shù)目的、指 示相同朝向的對象朝向信息不占所有對象朝向信息中的預定百分比或更多時，所述構圖判 定部件判定下述構圖來作為最佳構圖在所述構圖中，在由所述圖像中的所有檢測到的對 象構成的圖像部分中設定的重心被定位在與在所述圖像中設定的圖像區(qū)域劃分線相對應 的位置處。
7.如權利要求6所述的圖像處理裝置，其中，當在所述指示不同朝向的多個對象朝向信息之間的關系中，一組最大數(shù)目的、指 示相同朝向的對象朝向信息占了所有對象朝向信息中的預定百分比或更多時，所述構圖判 定部件獲得下述構圖來作為判定結果在所述構圖中，在由所述圖像中所有檢測到的對象 構成的圖像部分中設定的重心，被定位在由在所述圖像中設定的圖像區(qū)域劃分線所限定的 所述圖像中的區(qū)域之中的、與所述一組最大數(shù)目的對象朝向信息所指示的朝向相反的一側 的區(qū)域中。
8.如權利要求7所述的構圖判定設備，其中，所述構圖判定部件基于檢測到的對象的數(shù)目，來設定在作為判定結果獲得的所 述構圖中所述圖像區(qū)域劃分線與所述重心之間的距離。
9.一種圖像處理方法，包括以下步驟基于輸入圖像數(shù)據(jù)來檢測圖像中的預定對象；檢測對象朝向信息，所述對象朝向信息指示出在所述圖像中所述對象的一部分面向的 朝向；以及基于所述對象朝向信息判定所述圖像的構圖。
10.如權利要求9所述的圖像處理方法，其中，當在對象檢測步驟中檢測到多個對象時，構圖判定步驟基于與所述多個對象相對應的 多個對象朝向信息之間的關系來判定構圖。
全文摘要
本發(fā)明提供了構圖判定設備、構圖判定方法和程序。一種構圖判定設備包括對象檢測單元，被配置為基于圖像數(shù)據(jù)來檢測圖像中的一個或多個特定對象；對象朝向檢測單元，被配置為檢測指示出由所述對象檢測單元檢測到的對象在所述圖像中的朝向的對象朝向信息，對所述對象朝向信息的檢測是針對每個檢測到的對象執(zhí)行的；以及構圖判定單元，被配置為基于所述對象朝向信息來判定構圖。當所述對象檢測單元檢測到多個對象時，所述構圖判定單元基于與所述多個對象相對應的多個對象朝向信息之間的關系來判定構圖。
文檔編號H04N5/232GK102148935SQ20111009324
公開日2011年8月10日 申請日期2008年10月15日 優(yōu)先權日2007年10月17日
發(fā)明者善積真吾, 山脅央樹 申請人:索尼株式會社