圖像處理設(shè)備和方法和程序的制作方法
【專利摘要】一種圖像處理設(shè)備包括被攝體區(qū)域檢測(cè)器和被攝體區(qū)域確定器。被攝體區(qū)域檢測(cè)器被構(gòu)造成執(zhí)行被攝體檢測(cè)處理以檢測(cè)輸入圖像中的被攝體區(qū)域。被攝體區(qū)域確定器被構(gòu)造成通過(guò)多數(shù)決定處理確定最終被攝體區(qū)域,所述多數(shù)決定處理是基于在多次執(zhí)行被攝體檢測(cè)處理中檢測(cè)到的被攝體。
【專利說(shuō)明】圖像處理設(shè)備和方法和程序
[0001]相關(guān)申請(qǐng)的交叉引用
[0002]本申請(qǐng)要求2013年9月27日提交的日本優(yōu)先權(quán)專利申請(qǐng)JP2013-202438的權(quán)益,該專利申請(qǐng)的全部?jī)?nèi)容以引用方式并入本文。
【技術(shù)領(lǐng)域】
[0003]本公開(kāi)涉及圖像處理設(shè)備和方法和程序,更具體地,涉及能夠以較高準(zhǔn)確度檢測(cè)被攝體(subject)的圖像處理設(shè)備和方法和程序。
【背景技術(shù)】
[0004]近年來(lái)的相機(jī)實(shí)現(xiàn)了通過(guò)各種識(shí)別技術(shù)識(shí)別拍攝者的主要被攝體并且支持使主要被攝體位于中心進(jìn)行各種類型的拍攝的功能。例如,這種拍攝支持包括聚焦控制、亮度調(diào)節(jié)和顏色調(diào)節(jié)。
[0005]另外,至于檢測(cè)拍攝圖像中的被攝體的技術(shù),還提出了以下的技術(shù):在多個(gè)幀中檢測(cè)被攝體,使用通過(guò)檢測(cè)得到的穩(wěn)定存在程度,確定圖像上的主要被攝體(參見(jiàn)例如日本專利申請(qǐng)?zhí)亻_(kāi)N0.2013-120949)。
【發(fā)明內(nèi)容】
[0006]順帶一提,在上述的拍攝支持功能中,正確地檢測(cè)被攝體的區(qū)域直接造成性能提聞。
[0007]然而,在上述技術(shù)中,難以在各種情形下正確地提取被攝體的區(qū)域。這種難度限制了造成附加值增大的自動(dòng)功能和顯示用戶界面的表現(xiàn)范圍。為此原因,期望的是提高被攝體的檢測(cè)準(zhǔn)確度。
[0008]本公開(kāi)是依據(jù)這種情形作出的并且可用較高準(zhǔn)確度檢測(cè)被攝體。
[0009]根據(jù)本發(fā)明的實(shí)施例,提供了一種圖像處理設(shè)備,所述圖像處理設(shè)備包括:被攝體檢測(cè)單元(被攝體區(qū)域檢測(cè)器)和被攝體區(qū)域確定單元(確定器)。被攝體檢測(cè)單元被構(gòu)造成執(zhí)行被攝體區(qū)域檢測(cè)處理,以檢測(cè)輸入圖像中的被攝體區(qū)域。被攝體區(qū)域確定單元被構(gòu)造成通過(guò)基于多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)的被攝體區(qū)域的多數(shù)決定處理,確定最終被攝體區(qū)域。
[0010]被攝體區(qū)域確定單元可以包括重疊確定單元和多數(shù)決定單元(處理器)。重疊確定單元針對(duì)多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的各被攝體區(qū)域,計(jì)算兩個(gè)被攝體區(qū)域之間的重疊度。多數(shù)決定單元被構(gòu)造成基于所述重疊度,通過(guò)所述多數(shù)決定處理確定所述最終被攝體區(qū)域。
[0011]所述重疊確定單元可以被構(gòu)造成基于重疊度,確定被攝體區(qū)域是否重疊,所述多數(shù)決定單元可以被構(gòu)造成基于通過(guò)一個(gè)被攝體檢測(cè)處理得到的被攝體區(qū)域和通過(guò)另一個(gè)被攝體檢測(cè)處理得到的被攝體區(qū)域之間的重疊的數(shù)量,執(zhí)行所述多數(shù)決定處理,所述重疊的數(shù)量是通過(guò)所述重疊確定單元進(jìn)行確定來(lái)得到的。
[0012]所述多數(shù)決定單元可以被構(gòu)造成確定具有最大重疊數(shù)量的被攝體作為所述最終被攝體區(qū)域。
[0013]所述多數(shù)決定單元可以被構(gòu)造成基于所述重疊的數(shù)量排除具有低可靠程度的被攝體區(qū)域并且基于保留而未排除的被攝體區(qū)域計(jì)算所述最終被攝體區(qū)域。
[0014]多次執(zhí)行的被攝體檢測(cè)處理可以包括對(duì)具有不同分辨率的輸入圖像執(zhí)行的相同的被攝體檢測(cè)處理。
[0015]多次執(zhí)行的被攝體檢測(cè)處理可以包括對(duì)同一輸入圖像執(zhí)行的不同類型的被攝體檢測(cè)處理。
[0016]所述圖像處理設(shè)備還可以包括:可靠程度確定單元,其被構(gòu)造成在通過(guò)多數(shù)決定處理沒(méi)有得到所述最終被攝體區(qū)域的情況下,基于多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的被攝體區(qū)域的可靠程度,根據(jù)被攝體區(qū)域確定最終被攝體區(qū)域。
[0017]根據(jù)本公開(kāi)的另一個(gè)實(shí)施例,提供了一種圖像處理方法或程序,所述方法或程序包括:執(zhí)行被攝體檢測(cè)處理,以根據(jù)輸入圖像檢測(cè)被攝體區(qū)域;通過(guò)基于多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的被攝體區(qū)域的多數(shù)決定處理,確定最終被攝體區(qū)域。
[0018]根據(jù)本公開(kāi)的實(shí)施例,執(zhí)行被攝體檢測(cè)處理,以檢測(cè)輸入圖像中的被攝體區(qū)域,通過(guò)基于多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的被攝體區(qū)域的多數(shù)決定處理,確定最終被攝體區(qū)域。
[0019]根據(jù)本公開(kāi)的實(shí)施例,可以用更高的準(zhǔn)確度檢測(cè)被攝體。
[0020]應(yīng)該注意,上述效果不一定是限制性的并且可以是本公開(kāi)中描述的任何效果。
[0021]如附圖中所示的,根據(jù)下面對(duì)本公開(kāi)的最佳模式實(shí)施例的詳細(xì)描述,本公開(kāi)的這些和其它目的、特征和優(yōu)點(diǎn)將變得更清楚。
【專利附圖】
【附圖說(shuō)明】
[0022]圖1是示出成像設(shè)備的構(gòu)造示例的示圖;
[0023]圖2是相機(jī)信號(hào)處理單元的構(gòu)造示例的示圖;
[0024]圖3是用于描述被攝體信息輸出處理的流程圖;
[0025]圖4是用于描述計(jì)算重疊程度的示圖;
[0026]圖5是用于描述被攝體信息輸出處理的流程圖;
[0027]圖6是示出相機(jī)信號(hào)處理單元的構(gòu)造示例的示圖;
[0028]圖7是用于描述被攝體信息輸出處理的流程圖;
[0029]圖8是示出計(jì)算機(jī)的構(gòu)造示例的示圖。
【具體實(shí)施方式】
[0030]下文中,將參照附圖描述本公開(kāi)的實(shí)施例。
[0031](第一實(shí)施例)
[0032](成像設(shè)備的構(gòu)造示例)
[0033]首先,將描述本公開(kāi)的概要。
[0034]在本公開(kāi)中,對(duì)作為被攝體檢測(cè)目標(biāo)的圖像,多次執(zhí)行從圖像中檢測(cè)被攝體的被攝體檢測(cè)處理。例如,當(dāng)多次執(zhí)行被攝體檢測(cè)處理時(shí),對(duì)具有不同分辨率的多個(gè)圖像執(zhí)行同樣的被攝體檢測(cè)處理。
[0035]這里,由于對(duì)具有不同分辨率的圖像執(zhí)行同樣的被攝體檢測(cè)處理,因此,通常,預(yù)期對(duì)于具有不同分辨率的所有圖像而言被攝體檢測(cè)結(jié)果是相同的。然而,實(shí)際上,根據(jù)被攝體和被攝體周圍的情形,具有預(yù)定分辨率的圖像中會(huì)遭受錯(cuò)誤檢測(cè)。通常,難以確定一個(gè)被攝體檢測(cè)結(jié)果正確與否。
[0036]在這點(diǎn)上,在本公開(kāi)中,針對(duì)各分辨率執(zhí)行同樣的被攝體檢測(cè)處理,通過(guò)對(duì)檢測(cè)結(jié)果應(yīng)用多數(shù)決定,檢測(cè)并且去除錯(cuò)誤的檢測(cè)結(jié)果或錯(cuò)誤檢測(cè)。因此,可以按比正常被攝體檢測(cè)處理中高的準(zhǔn)確度檢測(cè)被攝體。
[0037]接下來(lái),將描述根據(jù)本公開(kāi)的特定實(shí)施例。圖1是根據(jù)本公開(kāi)的實(shí)施例的成像設(shè)備的構(gòu)造示例的示圖。例如,成像設(shè)備由數(shù)碼靜止相機(jī)、數(shù)碼攝像機(jī)等構(gòu)成。
[0038]圖1中示出的成像設(shè)備11包括光學(xué)系統(tǒng)21、成像裝置22、AFE (模擬前端)單元23、相機(jī)DSP (數(shù)字信號(hào)處理器)單元24、存儲(chǔ)器裝置25、監(jiān)視器26、記錄介質(zhì)27、控制器28、操作單元29、閃光燈30和驅(qū)動(dòng)器31。在成像設(shè)備11中,經(jīng)由光學(xué)系統(tǒng)21輸入的圖像經(jīng)過(guò)數(shù)字處理并且被記錄。
[0039]光學(xué)系統(tǒng)21包括:鏡頭,其用于將來(lái)自被攝體的光收集到成像裝置22的成像表面上;驅(qū)動(dòng)機(jī)構(gòu),其用于移動(dòng)鏡頭以執(zhí)行聚焦和縮放;快門機(jī)構(gòu),其用于在預(yù)定的時(shí)間段內(nèi)通過(guò)開(kāi)和關(guān)操作將來(lái)自被攝體的光輸入到成像裝置22;光圈(孔徑)機(jī)構(gòu),其用于限制來(lái)自被攝體的光束的方向和范圍等。
[0040]驅(qū)動(dòng)器31基于來(lái)自控制器28的控制信號(hào),控制光學(xué)系統(tǒng)21中各機(jī)構(gòu)的驅(qū)動(dòng)。例如,驅(qū)動(dòng)器31控制對(duì)被攝體的聚焦和光圈的驅(qū)動(dòng)。
[0041]成像裝置22由諸如CXD (電荷耦合器件)或CMOS (互補(bǔ)型金屬氧化物半導(dǎo)體)的固態(tài)成像裝置構(gòu)成。成像裝置22借助光學(xué)系統(tǒng)21接收來(lái)自被攝體的光以執(zhí)行光電轉(zhuǎn)換,并且將所得的電信號(hào)供應(yīng)到AFE單元23。
[0042]AFE單元23包括CDS/AGC/ADC塊41、定時(shí)發(fā)生器42和V驅(qū)動(dòng)器43。例如,AFE單元23被構(gòu)造為一個(gè)IC (集成電路)芯片。
[0043]⑶S/AGC/ADC塊41對(duì)成像裝置22供應(yīng)的電信號(hào)執(zhí)行諸如相關(guān)雙采樣、采樣保持處理、自動(dòng)增益控制、AD(模擬/數(shù)字)轉(zhuǎn)換的處理,并且輸出所得的數(shù)字圖像信號(hào)。由此得到的數(shù)字圖像信號(hào)是成像設(shè)備11拍攝的拍攝圖像的圖像數(shù)據(jù)。
[0044]定時(shí)發(fā)生器42產(chǎn)生用于驅(qū)動(dòng)成像裝置22的定時(shí)脈沖信號(hào)。根據(jù)該定時(shí)脈沖信號(hào),V驅(qū)動(dòng)器43輸出驅(qū)動(dòng)信號(hào),所述驅(qū)動(dòng)信號(hào)用于以逐行為基礎(chǔ)在垂直方向上輸出成像裝置22的各像素的電荷。
[0045]相機(jī)DSP單元24包括相機(jī)信號(hào)處理單元44、分辨率轉(zhuǎn)換單元45、圖像編解碼器處理單元46、存儲(chǔ)器控制器47、顯示器控制器48、媒體控制器49和總線接口單元(BIU) 50。
[0046]相機(jī)信號(hào)處理單元44對(duì)AFE單元23供應(yīng)的圖像數(shù)據(jù)執(zhí)行諸如缺陷像素校正、數(shù)字箝位和數(shù)字增益控制的預(yù)處理,隨后執(zhí)行白平衡調(diào)節(jié)、亮度調(diào)節(jié)和對(duì)比度調(diào)節(jié)。
[0047]分辨率轉(zhuǎn)換單元45根據(jù)(例如)拍攝圖像是作為監(jiān)視器26上的直通圖像(through image)來(lái)輸出和顯示還是作為移動(dòng)圖像或靜止圖像被存儲(chǔ)在記錄介質(zhì)27中,改變圖像的大小。
[0048]圖像編解碼器處理單元46通過(guò)預(yù)定的編碼方法對(duì)拍攝圖像的圖像數(shù)據(jù)執(zhí)行壓縮編碼處理。存儲(chǔ)器控制器47將拍攝圖像等的數(shù)據(jù)寫入用作幀緩沖器的存儲(chǔ)器裝置25中并且控制用于從存儲(chǔ)器裝置25讀取數(shù)據(jù)的訪問(wèn)操作。
[0049]媒體控制器49將數(shù)據(jù)寫入記錄介質(zhì)27并且從記錄介質(zhì)27讀取數(shù)據(jù)。具體地,媒體控制器49記錄并且再現(xiàn)移動(dòng)圖像數(shù)據(jù)或者靜止圖像數(shù)據(jù)。
[0050]監(jiān)視器26由(例如)液晶面板構(gòu)成。顯示器控制器48控制監(jiān)視器26的驅(qū)動(dòng)以將從相機(jī)信號(hào)處理單元44輸出的圖像數(shù)據(jù)(直通圖像)或存儲(chǔ)器裝置25中存儲(chǔ)的圖像數(shù)據(jù)轉(zhuǎn)換成顯示在監(jiān)視器26上的信號(hào),并且將該信號(hào)輸出到監(jiān)視器26。
[0051]相機(jī)DSP單元24經(jīng)由BIU 50連接到控制器28??刂破?8由CPU (中央處理單元)51、作為主存儲(chǔ)器的RAM(隨機(jī)存取存儲(chǔ)器)52、以非易失性方式存儲(chǔ)各種類型信息的EEPROM (電可擦除可編程ROM (只讀存儲(chǔ)器))53構(gòu)成。
[0052]CPU 51根據(jù)用戶操作總地控制整體成像設(shè)備11的操作。例如,CPU 51控制閃光燈30發(fā)光以向被攝體施用光并且控制驅(qū)動(dòng)器31執(zhí)行聚焦控制。另外,CPU 51連接到操作單元29,操作單元29具有供用戶輸入指令的操作功能和諸如揚(yáng)聲器和LED(發(fā)光二極管)燈等的輸出功能。
[0053](相機(jī)信號(hào)處理單元的構(gòu)造示例)
[0054]另外,相機(jī)信號(hào)處理單元44檢測(cè)通過(guò)拍攝得到的拍攝圖像中的被攝體,以執(zhí)行輸出檢測(cè)結(jié)果的處理。例如,在圖2中示出執(zhí)行這種被攝體檢測(cè)的相機(jī)信號(hào)處理單元44的功能構(gòu)造。
[0055]圖2是示出相機(jī)信號(hào)處理單元44的功能構(gòu)造的示圖。在圖2中,相機(jī)信號(hào)處理單元44包括被攝體檢測(cè)單元81-1、81-2和81-3、被攝體區(qū)域確定單元82、可靠程度確定單元83和輸出單元84。
[0056]具有不同分辨率或大小的拍攝圖像被作為輸入圖像供應(yīng)到被攝體檢測(cè)單元81-1至 81-3。
[0057]例如,通過(guò)拍攝從AFE單元23獲取的拍攝圖像(下文中,也稱為高分辨率圖像)被供應(yīng)到被攝體檢測(cè)單元81-1。另外,當(dāng)分辨率轉(zhuǎn)換單元45對(duì)拍攝圖像執(zhí)行分辨率轉(zhuǎn)換時(shí)獲取的并且其分辨率低于用作原始拍攝圖像的高分辨率圖像的分辨率的圖像(下文中,也稱為中間分辨率圖像)被供應(yīng)到被攝體檢測(cè)單元81-2。
[0058]另外,當(dāng)分辨率轉(zhuǎn)換單元45對(duì)拍攝圖像執(zhí)行分辨率轉(zhuǎn)換時(shí)獲取的并且其分辨率低于中間分辨率圖像的分辨率的圖像(下文中,也稱為低分辨率圖像)被供應(yīng)到被攝體檢測(cè)單元81-3。
[0059]被攝體檢測(cè)單元81-1至81-3對(duì)供應(yīng)的高分辨率圖像、中間分辨率圖像和低分辨率圖像執(zhí)行被攝體檢測(cè)處理以檢測(cè)這些圖像中的被攝體并且將檢測(cè)結(jié)果供應(yīng)到被攝體區(qū)域確定單元82和可靠程度確定單元83。
[0060]應(yīng)該注意,當(dāng)在下面的描述中被攝體檢測(cè)單元81-1至81-3不必特別區(qū)分開(kāi)時(shí),被攝體檢測(cè)單元81-1至81-3中的每個(gè)被簡(jiǎn)稱為被攝體檢測(cè)單元81。這里,在各被攝體檢測(cè)單元81中,通過(guò)同一算法執(zhí)行被攝體檢測(cè)。換句話講,在被攝體檢測(cè)單元81中,待處理的圖像的分辨率不同,但對(duì)這些圖像執(zhí)行同樣的被攝體檢測(cè)處理。
[0061]被攝體區(qū)域確定單元82基于對(duì)具有各個(gè)分辨率的圖像進(jìn)行被攝體檢測(cè)的結(jié)果,通過(guò)多數(shù)決定處理在拍攝圖像上確定最終被攝體區(qū)域,所述結(jié)果是被攝體檢測(cè)單元81供應(yīng)的。隨后,被攝體區(qū)域確定單元82將最終被攝體區(qū)域供應(yīng)到輸出單元84。應(yīng)該注意,在下文中,圖像上的被攝體區(qū)域也被稱為被攝體區(qū)域。
[0062]被攝體區(qū)域確定單元82包括重疊確定單元91和多數(shù)決定單元92。
[0063]重疊確定單元91基于被攝體檢測(cè)單元81供應(yīng)的被攝體檢測(cè)結(jié)果,執(zhí)行重疊確定處理。
[0064]例如,針對(duì)具有各個(gè)分辨率的圖像之中的兩個(gè)任選圖像,重疊確定單元91計(jì)算在這兩個(gè)任選圖像中檢測(cè)到的被攝體區(qū)域的重疊程度,所述重疊程度被稱為重疊度。重疊確定單元91執(zhí)行確定兩個(gè)圖像上的被攝體區(qū)域是否重疊的重疊確定處理。重疊確定單元91對(duì)可以是具有不同分辨率的兩個(gè)圖像的組合的所有集合執(zhí)行重疊確定處理,并且將對(duì)具有各個(gè)分辨率的圖像執(zhí)行的被攝體檢測(cè)的結(jié)果和確定的結(jié)果供應(yīng)到多數(shù)決定單元92。
[0065]當(dāng)存在具有不同分辨率的N個(gè)圖像時(shí),將重疊確定處理執(zhí)行NC2次。這里,具有三個(gè)不同分辨率的圖像(也就是說(shuō),高分辨率圖像、中間分辨率圖像和低分辨率圖像)經(jīng)處理,因此N = 3并且將重疊確定處理執(zhí)行3C2次,也就是說(shuō),三次。
[0066]多數(shù)決定單元92基于重疊確定單元91供應(yīng)的重疊確定的結(jié)果和被攝體檢測(cè)的結(jié)果執(zhí)行多數(shù)決定,并且計(jì)算將供應(yīng)到輸出單元84的最終被攝體區(qū)域。另外,當(dāng)通過(guò)多數(shù)決定沒(méi)有得到最終被攝體區(qū)域時(shí),多數(shù)決定單元92指示可靠度確定單元83基于被攝體檢測(cè)的可靠程度執(zhí)行確定被攝體區(qū)域的處理。
[0067]根據(jù)多數(shù)決定單元92的指令,可靠程度確定單元83基于被攝體檢測(cè)單元81中的被攝體檢測(cè)結(jié)果的可靠程度確定最終被攝體區(qū)域并且將確定的結(jié)果供應(yīng)到輸出單元84??煽砍潭却_定單元83包括低分辨率確定單元93、中間分辨率確定單元94和高分辨率確定單元95。
[0068]根據(jù)多數(shù)決定單元92的指令,基于來(lái)自低分辨率圖像的被攝體檢測(cè)結(jié)果(所述結(jié)果是由被攝體檢測(cè)單元81-3供應(yīng)的),低分辨率確定單元93確定檢測(cè)結(jié)果的可靠程度。在低分辨率圖像中的被攝體檢測(cè)結(jié)果充分可靠(也就是說(shuō),因?qū)煽砍潭鹊拇_定而得到的充分大的可靠程度)的情況下,低分辨率確定單元93將低分辨率圖像中的被攝體檢測(cè)結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。另外,在確定可靠程度的結(jié)果是對(duì)低分辨率圖像的被攝體檢測(cè)的結(jié)果并非充分可靠的情況下,低分辨率確定單元93指示中間分辨率確定單元94確定可靠程度。
[0069]根據(jù)低分辨率確定單元93的指令,中間分辨率確定單元94基于來(lái)自中間分辨率圖像的被攝體檢測(cè)結(jié)果確定可靠程度,所述結(jié)果是由被攝體檢測(cè)單元81-2供應(yīng)的。在結(jié)果充分可靠的情況下,中間分辨率確定單元94將對(duì)中間分辨率圖像的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。另外,在確定可靠程度的結(jié)果是對(duì)中間分辨率圖像的被攝體檢測(cè)的結(jié)果并非充分可靠的情況下,中間分辨率確定單元94指示高分辨率確定單元95確定可靠程度。
[0070]根據(jù)中間分辨率確定單元94的指令,高分辨率確定單元95基于來(lái)自高分辨率圖像的被攝體檢測(cè)的結(jié)果確定可靠程度,所述結(jié)果是由被攝體檢測(cè)單元81-1供應(yīng)的。在結(jié)果充分可靠的情況下,高分辨率確定單元95將對(duì)高分辨率圖像的被攝體檢測(cè)結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。另外,在確定可靠程度的結(jié)果是對(duì)高分辨率圖像的被攝體檢測(cè)的結(jié)果并非充分可靠的情況下,高分辨率確定單元95將指示沒(méi)有以充分可靠的程度在拍攝圖像中檢測(cè)到被攝體的信息供應(yīng)到輸出單元84。
[0071]輸出單元84將多數(shù)決定單元92或可靠程度確定單元83供應(yīng)的、指示被攝體區(qū)域的信息作為指示最終被攝體區(qū)域的被攝體信息。
[0072](對(duì)被攝體信息輸出處理的描述)
[0073]隨后,將描述成像設(shè)備11的操作。
[0074]例如,當(dāng)用戶指示成像設(shè)備11對(duì)被攝體進(jìn)行拍攝時(shí),成像設(shè)備11拍攝被攝體的圖像以得到拍攝圖像。具體地,光學(xué)系統(tǒng)21收集來(lái)自被攝體的將輸入成像裝置22的光,成像裝置22接收經(jīng)由光學(xué)系統(tǒng)21輸入的光以執(zhí)行光電轉(zhuǎn)換并且將由此得到的信號(hào)供應(yīng)到⑶S/AGC/ADC 塊 41。
[0075]⑶S/AGC/ADC塊41對(duì)成像裝置22供應(yīng)的信號(hào)執(zhí)行諸如相關(guān)雙采樣的處理,然后將已經(jīng)經(jīng)受各種類型處理的信號(hào)轉(zhuǎn)換成作為數(shù)字信號(hào)的圖像數(shù)據(jù),以向相機(jī)信號(hào)處理單元44供應(yīng)圖像數(shù)據(jù)。另外,相機(jī)信號(hào)處理單元44對(duì)CDS/AGC/ADC塊41供應(yīng)的拍攝圖像的圖像數(shù)據(jù)合適地執(zhí)行預(yù)處理,然后將拍攝圖像供應(yīng)到被攝體檢測(cè)單元81-1和分辨率轉(zhuǎn)換單元45。
[0076]在以此方式得到拍攝圖像之后,成像設(shè)備11檢測(cè)拍攝圖像中的被攝體區(qū)域并且開(kāi)始輸出被攝體信息的被攝體信息輸出處理。被攝體信息指示檢測(cè)結(jié)果。下文中,將參照?qǐng)D3的流程圖描述成像設(shè)備11進(jìn)行的被攝體信息輸出處理。
[0077]在步驟Sll中,分辨率轉(zhuǎn)換單元45對(duì)相機(jī)信號(hào)處理單元44供應(yīng)的拍攝圖像執(zhí)行分辨率轉(zhuǎn)換。
[0078]例如,分辨率轉(zhuǎn)換單元45對(duì)作為高分辨率圖像的拍攝圖像執(zhí)行下采樣,以產(chǎn)生分辨率比高分辨率圖像的分辨率低(即,具有較小大小)的中間分辨率圖像,并且將中間分辨率圖像供應(yīng)到被攝體檢測(cè)單元81-2。另外,分辨率轉(zhuǎn)換單元45對(duì)作為高分辨率圖像的拍攝圖像執(zhí)行下采樣,以產(chǎn)生分辨率比中間分辨率圖像的分辨率低的低分辨率圖像,并且將低分辨率圖像供應(yīng)到被攝體檢測(cè)單元81-3。
[0079]在步驟S12中,被攝體檢測(cè)單元81-1至81-3對(duì)供應(yīng)的高分辨率圖像、中間分辨率圖像和低分辨率圖像執(zhí)行被攝體檢測(cè)處理并且將檢測(cè)的結(jié)果供應(yīng)到重疊確定單元91和可靠程度確定單元83。
[0080]例如,在針對(duì)各分辨率的圖像進(jìn)行的被攝體檢測(cè)處理中,從各分辨率的圖像的各區(qū)域中提取特征量,并且產(chǎn)生指示被攝體在各區(qū)域中的可能性的被攝體地圖。另外,產(chǎn)生指示被攝體在被攝體圖中的可能性的變化程度的梯度圖,使得通過(guò)使用兩個(gè)不同的閾值在通過(guò)對(duì)梯度圖執(zhí)行閾值處理而得到的圖中檢測(cè)被攝體區(qū)域。例如,在日本專利申請(qǐng)?zhí)亻_(kāi)N0.2010-266982中公開(kāi)了以此方式使用被攝體圖檢測(cè)被攝體的技術(shù)。
[0081]應(yīng)該注意,檢測(cè)各個(gè)分辨率的圖像中的被攝體的方法不限于使用被攝體地圖的方法并且可以使用任何其它方法。例如,各個(gè)分辨率的圖像可以被轉(zhuǎn)換成在用作色空間的經(jīng)轉(zhuǎn)換HSV (色調(diào)飽和值)空間中的圖像,在所述空間中,調(diào)節(jié)低值區(qū)域中的飽和度,可以基于經(jīng)轉(zhuǎn)換HSV空間中的色距離檢測(cè)被攝體。另外,可以通過(guò)利用鑒別器進(jìn)行的面部檢測(cè),執(zhí)行被攝體檢測(cè)。
[0082]被攝體檢測(cè)單元81-1將對(duì)高分辨率圖像的被攝體檢測(cè)結(jié)果供應(yīng)到重疊確定單元91和高分辨率確定單元95。例如,被攝體檢測(cè)結(jié)果是,輸出指示高分辨率圖像上的圍繞被攝體區(qū)域的矩形區(qū)域的信息(也就是說(shuō),指示被攝體區(qū)域的信息)。另外,被攝體檢測(cè)單元81-1還將指示被攝體在各區(qū)域中的可能性的值(諸如,從高分辨率圖像的各區(qū)域中提取的用于檢測(cè)被攝體的特征量)供應(yīng)到高分辨率確定單元95。指示被攝體在高分辨率圖像的各區(qū)域中的可能性的值用于確定可靠程度。
[0083]類似地,被攝體檢測(cè)單元81-2將對(duì)中間分辨率圖像的被攝體檢測(cè)結(jié)果供應(yīng)到重疊確定單元91和中間分辨率確定單元94并且還將指示被攝體在中間分辨率圖像的各區(qū)域中的可能性的值供應(yīng)到中間分辨率確定單元94。另外,被攝體檢測(cè)單元81-3將低分辨率圖像上的被攝體檢測(cè)結(jié)果供應(yīng)到重疊確定單元91和低分辨率確定單元93并且還將指示被攝體在低分辨率圖像的各區(qū)域中的可能性的值供應(yīng)到低分辨率確定單元94。
[0084]在步驟S13中,重疊確定單元91基于被攝體檢測(cè)單元81供應(yīng)的被攝體檢測(cè)結(jié)果,執(zhí)行重疊確定處理。
[0085]具體地,重疊確定單元91計(jì)算具有不同分辨率的三個(gè)圖像(也就是說(shuō),高分辨率圖像、中間分辨率圖像和低分辨率圖像)之中的兩個(gè)任選圖像的重疊程度。在這種情況下,針對(duì)可以是具有不同分辨率的兩個(gè)圖像的組合的所有集合,執(zhí)行重疊度的計(jì)算。
[0086]例如,假設(shè)當(dāng)具有不同分辨率的兩個(gè)圖像被布置成使得同一被攝體彼此重疊時(shí),被攝體區(qū)域部分重疊,如圖4中所示。
[0087]這里,被攝體區(qū)域HRll代表因?qū)哂胁煌直媛实膬蓚€(gè)目標(biāo)圖像中的一個(gè)的被攝體檢測(cè)而得到的被攝體區(qū)域。被攝體區(qū)域HR12代表因?qū)哂胁煌直媛实膬蓚€(gè)目標(biāo)圖像中的另一個(gè)的被攝體檢測(cè)而得到的被攝體區(qū)域。
[0088]應(yīng)該注意的是,當(dāng)致使兩個(gè)圖像重疊時(shí),執(zhí)行使這些圖像大小(分辨率)相等的放大處理。例如,為了將圖像變成與高分辨率圖像的大小具有相同的大小,對(duì)中間分辨率圖像和低分辨率圖像執(zhí)行上采樣。
[0089]在圖4中,被攝體區(qū)域HRll的部分和被攝體區(qū)域HR12的部分重疊。在這個(gè)示例中,在被攝體區(qū)域HRll中,沒(méi)有與被攝體區(qū)域HR12重疊的區(qū)域被表達(dá)為區(qū)域Rl,與被攝體區(qū)域HR12重疊的區(qū)域被表達(dá)為區(qū)域R3。另外,在被攝體區(qū)域HR12中,沒(méi)有與被攝體區(qū)域HRll重疊的區(qū)域被表達(dá)為區(qū)域R2。
[0090]重疊確定單元91計(jì)算重疊度F_度量,重疊度F_度量指示用作重疊區(qū)域的區(qū)域R3的尺寸相對(duì)于被攝體區(qū)域HRll或被攝體區(qū)域HR12有多大,也就是說(shuō),被攝體區(qū)域HRll與被攝體區(qū)域HR12有多少重疊。
[0091 ] 更具體地,重疊確定單元91基于區(qū)域Rl至R3的尺寸計(jì)算下面的表達(dá)式(I),以計(jì)算重疊度F—度量。
[0092]Γ 度量=2 X (R3/ (R3+R1)) X (R3/ (R3+R2)) / (R3/ (R3+R1) +R3/ (R3+R2))…(I)
[0093]應(yīng)該注意,在表達(dá)式⑴中,RU R2和R3分別代表圖4中的區(qū)域Rl的尺寸、區(qū)域R2的尺寸和區(qū)域R3的尺寸。
[0094]重疊確定單元91針對(duì)分辨率的所有組合計(jì)算重疊度。在這個(gè)示例中,針對(duì)高分辨率圖像和中間分辨率圖像的集合、高分辨率圖像和低分辨率圖像的集合、中間分辨率圖像和低分辨率圖像的集合,計(jì)算重疊度。
[0095]在得到的重疊度中的各個(gè)重疊度等于或大于預(yù)定閾值的情況下,重疊確定單元91確定用作重疊度計(jì)算目標(biāo)的兩個(gè)圖像,更具體地,這些圖像的被攝體區(qū)域重疊。重疊確定單元91將關(guān)于各個(gè)分辨率的圖像的重疊數(shù)量信息作為對(duì)各個(gè)分辨率的圖像進(jìn)行的重疊確定的結(jié)果供應(yīng)到多數(shù)決定單元92。重疊數(shù)量信息指示與一個(gè)圖像重疊的具有不同分辨率的圖像的數(shù)量。
[0096]例如,現(xiàn)在重點(diǎn)放在高分辨率圖像,在高分辨率圖像和中間分辨率圖像重疊而高分辨率圖像和低分辨率圖像沒(méi)有重疊的情況下,高分辨率圖像的重疊數(shù)量信息是指示“I”的信息。
[0097]重疊確定單元91將各個(gè)分辨率的圖像的重疊數(shù)量信息和被攝體檢測(cè)的結(jié)果(也就是說(shuō),指示被攝體區(qū)域的信息)供應(yīng)到多數(shù)決定單元92。
[0098]在步驟S14中,多數(shù)決定單元92基于重疊確定單元91供應(yīng)的重疊數(shù)量信息確定具有不同分辨率的圖像的被攝體區(qū)域是否重疊。
[0099]例如,在具有不同分辨率的所有圖像的重疊數(shù)量信息指示“O”的情況下,多數(shù)決定單元92確定具有不同分辨率的圖像的被攝體區(qū)域沒(méi)有重疊并且其間沒(méi)有重疊。
[0100]當(dāng)在步驟S14中確定有重疊時(shí),多數(shù)決定單元92基于重疊確定單元91供應(yīng)的重疊數(shù)量信息和被攝體檢測(cè)結(jié)果執(zhí)行步驟S15中的多數(shù)決定處理。
[0101]具體地,在具有不同分辨率的圖像的重疊數(shù)量信息之中,多數(shù)決定單元92將具有以最大數(shù)量作為重疊數(shù)量信息的分辨率的圖像的被攝體視為在被攝體(高分辨率圖像)中檢測(cè)到的最終被攝體區(qū)域。
[0102]隨后,多數(shù)決定單元92將指示最終被攝體區(qū)域的信息供應(yīng)到輸出單元84。例如,多數(shù)決定單元92將關(guān)于被攝體區(qū)域的位置和大小的信息作為指示被攝體區(qū)域的信息輸出。具體地,指示被攝體區(qū)域的信息包括代表圖像上的被攝體區(qū)域的矩形中的一點(diǎn)的坐標(biāo)、指示代表被攝體區(qū)域的矩形的每條邊的長(zhǎng)度的信息等。
[0103]可以說(shuō),在具有不同分辨率的圖像之中,在與具有不同分辨率的其它圖像的重疊數(shù)量最大的圖像中檢測(cè)到的被攝體區(qū)域具有最大可能性在具有不同分辨率的圖像中檢測(cè)到的被攝體區(qū)域中。在這點(diǎn)上,在多數(shù)決定處理中,采用具有最大重疊數(shù)量信息的圖像的被攝體區(qū)域作為最終被攝體區(qū)域。換句話講,基于重疊數(shù)量信息通過(guò)多數(shù)決定確定被攝體區(qū)域。
[0104]在存在多個(gè)圖像具有最大重疊數(shù)量信息的情況下,多數(shù)決定單元92采用具有最大重疊數(shù)量信息的圖像之中的具有最低分辨率的圖像的被攝體區(qū)域作為最終被攝體區(qū)域。例如,在高分辨率圖像的重疊數(shù)量信息和中間分辨率圖像的重疊數(shù)量信息在具有不同分辨率的圖像中是最大的情況下,采用中間分辨率圖像的被攝體區(qū)域作為最終被攝體區(qū)域。
[0105]這是因?yàn)?,圖像的分辨率越低,執(zhí)行分辨率轉(zhuǎn)換可以導(dǎo)致的噪聲降低更多,從而被攝體區(qū)域的檢測(cè)準(zhǔn)確度更進(jìn)一步增加。已知的是,在具有較高分辨率的圖像中,小被攝體的檢測(cè)準(zhǔn)確度高,而對(duì)大被攝體的檢測(cè)并不好,并且在具有較低分辨率的圖像中,可以以某種高準(zhǔn)確度水平穩(wěn)定地檢測(cè)被攝體區(qū)域,而不管被攝體區(qū)域的大小如何。另外,出于相同的原因,同樣在隨后將描述的確定可靠程度的過(guò)程中,從具有較低分辨率的圖像起,順序地執(zhí)行處理。
[0106]在執(zhí)行多數(shù)決定處理之后,處理前進(jìn)至步驟S22。
[0107]同時(shí),當(dāng)在步驟S14中確定沒(méi)有重疊時(shí),由于在多數(shù)決定處理中沒(méi)有確定被攝體區(qū)域,因此多數(shù)決定單元92指示低分辨率確定單元93基于被攝體檢測(cè)的可靠程度執(zhí)行確定被攝體區(qū)域的處理,處理前進(jìn)至步驟S16。在所有重疊數(shù)量信息具有預(yù)定閾值或更小的情況下,可以構(gòu)造成不允許用多數(shù)決定處理確定被攝體區(qū)域。
[0108]在步驟S16中,低分辨率確定單元93確定低分辨率圖像的可靠程度是否等于或大于閾值。
[0109]具體地,低分辨率確定單元93基于指示被攝體在被攝體檢測(cè)單元81-3供應(yīng)的低分辨率圖像的各區(qū)域中的可能性的值,計(jì)算對(duì)低分辨率圖像進(jìn)行的被攝體區(qū)域檢測(cè)的可靠程度。例如,用以下這樣的方式計(jì)算可靠程度:隨著指示被攝體在低分辨率圖像中檢測(cè)到的被攝體區(qū)域內(nèi)各區(qū)域中的可能性的值和指示被攝體在靠近被攝體區(qū)域的各區(qū)域中但在被攝體區(qū)域之外的可能性的值之差變得越大,可靠程度變得越高。
[0110]在由此得到的可靠程度等于或大于閾值的情況下,認(rèn)為對(duì)低分辨率圖像進(jìn)行被攝體檢測(cè)的結(jié)果是充分可靠的。
[0111]當(dāng)在步驟S16中確定低分辨率圖像的可靠程度等于或大于閾值時(shí),在步驟S17中,低分辨率確定單元93將低分辨率圖像的被攝體檢測(cè)結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。換句話講,指示被攝體區(qū)域的信息被供應(yīng)到輸出單元84。在輸出被攝體區(qū)域之后,處理前進(jìn)至步驟S22。
[0112]同時(shí),當(dāng)在步驟S16中確定可靠程度不是等于或大于閾值時(shí),由于對(duì)低分辨率圖像進(jìn)行的被攝體檢測(cè)的結(jié)果并非充分可靠,因此低分辨率確定單元93指示中間分辨率確定單元94執(zhí)行可靠程度的確定并且處理前進(jìn)至步驟S18。
[0113]在步驟S18中,中間分辨率確定單元94確定中間分辨率圖像的可靠程度是否等于或大于閾值。
[0114]具體地,中間分辨率確定單元94基于指示被攝體在被攝體檢測(cè)單元81-2供應(yīng)的中間分辨率圖像的各區(qū)域中的可能性的值,通過(guò)與低分辨率圖像中相同的計(jì)算來(lái)計(jì)算可靠程度,并且將得到的可靠程度與預(yù)定的閾值進(jìn)行比較。
[0115]當(dāng)在步驟S18中確定可靠程度等于或大于閾值時(shí),在步驟S19中,中間分辨率確定單元94將中間分辨率圖像的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。在輸出被攝體區(qū)域之后,處理前進(jìn)至步驟S22。
[0116]相比于此,當(dāng)在步驟S18中確定可靠程度不是等于或大于閾值時(shí),由于對(duì)中間分辨率圖像進(jìn)行的被攝體檢測(cè)的結(jié)果并非充分可靠,因此中間分辨率確定單元94指示高分辨率確定單元95執(zhí)行可靠程度的確定并且處理前進(jìn)至步驟S20。
[0117]在步驟S20中,高分辨率確定單元95確定高分辨率圖像的可靠程度是否等于或大于閾值。
[0118]具體地,高分辨率確定單元95基于指示被攝體在被攝體檢測(cè)單元81-1供應(yīng)的高分辨率圖像的各區(qū)域中的可能性的值,通過(guò)與低分辨率圖像中相同的計(jì)算來(lái)計(jì)算可靠程度,并且將得到的可靠程度與預(yù)定的閾值進(jìn)行比較。
[0119]當(dāng)在步驟S20中確定可靠程度等于或大于閾值時(shí),在步驟S21中,高分辨率確定單元95將高分辨率圖像的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。在輸出被攝體區(qū)域之后,處理前進(jìn)至步驟S22。
[0120]相比于此,當(dāng)在步驟S20中確定可靠程度不是等于或大于閾值時(shí),由于對(duì)具有不同分辨率的所有圖像進(jìn)行的被攝體檢測(cè)的結(jié)果并非充分可靠,因此高分辨率確定單元95向輸出單元84供應(yīng)信息,所述信息指示沒(méi)有以充分可靠程度在拍攝圖像中檢測(cè)到被攝體。隨后,處理前進(jìn)至步驟S22。
[0121]當(dāng)在步驟S15、步驟S17、步驟S19或步驟S21中輸出被攝體區(qū)域時(shí),或者當(dāng)在步驟20中確定可靠程度不是等于或大于閾值并且輸出指示沒(méi)有以充分可靠程度檢測(cè)到被攝體的的信息時(shí),執(zhí)行步驟S22的處理。
[0122]具體地,在步驟S22中,輸出單元84輸出多數(shù)決定單元92、低分辨率確定單元93、中間分辨率確定單元94、或高分辨率確定單元95供應(yīng)的指示被攝體區(qū)域的信息作為指示最終被攝體區(qū)域的被攝體信息,并且被攝體輸出處理終止。應(yīng)該注意,當(dāng)供應(yīng)指示沒(méi)有以充分可靠程度檢測(cè)到被攝體的信息時(shí),輸出單元84輸出指示沒(méi)有檢測(cè)到被攝體的信息。
[0123]在成像設(shè)備11的各單元中使用從輸出單元84輸出的被攝體信息。
[0124]例如,基于輸出單元84供應(yīng)的被攝體信息,CPU 51控制驅(qū)動(dòng)器31執(zhí)行聚焦控制,以便聚焦到拍攝圖像上的被攝體。另外,例如,基于從輸出單元84輸出的被攝體信息,相機(jī)信號(hào)處理單元44對(duì)拍攝圖像執(zhí)行亮度調(diào)節(jié)和白平衡調(diào)節(jié),使得拍攝圖像的被攝體區(qū)域中的亮度和白平衡是恒定的。隨后,相機(jī)信號(hào)處理單元44將被執(zhí)行了這些調(diào)節(jié)的拍攝圖像輸出到顯示控制器48和媒體控制器49。除此之外,被攝體信息可以用于任何處理,例如,在被攝體區(qū)域中進(jìn)行的顏色調(diào)節(jié)。
[0125]如上所述,成像設(shè)備11對(duì)具有不同分辨率的多個(gè)圖像執(zhí)行被攝體檢測(cè)處理以得到檢測(cè)結(jié)果的重疊度并且基于得到的重疊度執(zhí)行多數(shù)決定,以確定最終被攝體區(qū)域。另外,在通過(guò)多數(shù)決定沒(méi)有確定被攝體區(qū)域的情況下,成像設(shè)備11基于具有各個(gè)分辨率的圖像的可靠程度,確定最終被攝體區(qū)域。
[0126]通過(guò)以此方式執(zhí)行多數(shù)決定,可以通過(guò)多數(shù)決定消除指示與具有不同分辨率的其它圖像的重疊數(shù)量較少的檢測(cè)結(jié)果(也就是說(shuō),錯(cuò)誤檢測(cè))并因此可以用更高準(zhǔn)確度檢測(cè)被攝體。另外,同樣,當(dāng)通過(guò)多數(shù)決定沒(méi)有確定被攝體區(qū)域時(shí),基于各分辨率的可靠程度確定被攝體區(qū)域,使得可以用足夠的準(zhǔn)確度檢測(cè)被攝體。
[0127]因此,在被攝體難以檢測(cè)的場(chǎng)景中,諸如,在前景和背景的顏色類似的場(chǎng)景以及一些被攝體重疊的場(chǎng)景中,可以用高準(zhǔn)確度檢測(cè)被攝體。
[0128]另外,由于可以用高準(zhǔn)確度檢測(cè)被攝體,因此還允許在難以得到聚焦的場(chǎng)景中實(shí)現(xiàn)高準(zhǔn)確度自動(dòng)聚焦并且還允許在顏色難以調(diào)節(jié)的場(chǎng)景中實(shí)現(xiàn)自動(dòng)顏色校正。這樣,用戶可以更容易地得到好的圖像。
[0129]另外,由于可以用高準(zhǔn)確度檢測(cè)被攝體,因此允許檢測(cè)結(jié)果以積極方式用于顯示用戶界面和將提供給用戶的智能界面。
[0130](第二實(shí)施例)
[0131](對(duì)被攝體信息輸出處理的描述)
[0132]在以上的描述中,已經(jīng)描述了通過(guò)多數(shù)決定單元92的多數(shù)決定從對(duì)具有各個(gè)分辨率的圖像進(jìn)行被攝體檢測(cè)的結(jié)果中選擇可能結(jié)果的示例,但可以基于某些檢測(cè)結(jié)果計(jì)算被攝體區(qū)域。換句話講,可以通過(guò)多數(shù)決定去除具有低可靠程度的檢測(cè)結(jié)果并且可以使用剩余的檢測(cè)結(jié)果來(lái)計(jì)算最終被攝體區(qū)域。
[0133]在這種情況下,例如,成像設(shè)備11執(zhí)行圖5中示出的被攝體信息輸出處理。下文中,將參照?qǐng)D5的流程圖描述成像設(shè)備11進(jìn)行的被攝體信息輸出處理。步驟S51至步驟S54的處理與圖3的步驟Sll至步驟S14的處理相同并且將省略對(duì)其的描述。
[0134]當(dāng)在步驟S54中確定存在重疊時(shí),在步驟S55中,多數(shù)決定單元92通過(guò)多數(shù)決定排除沒(méi)有重疊的檢測(cè)結(jié)果。
[0135]具體地,多數(shù)決定單元92基于重疊確定單元91供應(yīng)的重疊數(shù)量信息,在對(duì)具有各個(gè)分辨率的圖像進(jìn)行被攝體檢測(cè)的結(jié)果中排除指示重疊數(shù)量信息是“O”的檢測(cè)結(jié)果。這里,具有其重疊數(shù)量信息是“O”的分辨率的圖像中檢測(cè)到的被攝體區(qū)域與具有各個(gè)分辨率的其它圖像中檢測(cè)到的任何被攝體區(qū)域不重疊。這樣,被攝體區(qū)域的檢測(cè)結(jié)果是錯(cuò)誤檢測(cè)的可能性高。
[0136]相反地,指示與具有不同分辨率的另一個(gè)圖像中檢測(cè)到的被攝體區(qū)域存在重疊的被攝體檢測(cè)結(jié)果是錯(cuò)誤檢測(cè)的可能性較低。這樣,多數(shù)決定單元92基于重疊數(shù)量信息通過(guò)多數(shù)決定排斥具有低可靠程度的被攝體檢測(cè)結(jié)果并且基于保留的而未排除的并且指示與具有不同分辨率的另一個(gè)圖像中檢測(cè)到的被攝體區(qū)域存在重疊的被攝體檢測(cè)結(jié)果計(jì)算最終被攝體區(qū)域。
[0137]在步驟S56中,多數(shù)決定單元92基于保留而未排除的被攝體檢測(cè)結(jié)果計(jì)算檢測(cè)結(jié)果的加權(quán)平均,以計(jì)算最終被攝體區(qū)域。換句話講,通過(guò)對(duì)不排除的被攝體區(qū)域求加權(quán)平均而新得到的一個(gè)矩形區(qū)域被視為最終被攝體區(qū)域。在計(jì)算加權(quán)平均的過(guò)程中,計(jì)算被攝體區(qū)域的對(duì)應(yīng)邊的位置的加權(quán)平均值并且得到的位置被視為最終被攝體區(qū)域的對(duì)應(yīng)邊的位置。這里,例如,在具有通過(guò)重疊數(shù)量信息指示的具有大值(數(shù)量)的被攝體區(qū)域中,對(duì)各被攝體區(qū)域的加權(quán)變大。
[0138]當(dāng)以此方式計(jì)算最終的被攝體區(qū)域時(shí),多數(shù)決定單元92將指示最終被攝體區(qū)域的信息供應(yīng)到輸出單元84,處理前進(jìn)至步驟S63。
[0139]在步驟S56中通過(guò)加權(quán)平均計(jì)算被攝體區(qū)域之后,執(zhí)行步驟S57至步驟S63的處理并且被攝體信息輸出處理終止。步驟S57至步驟S63的那些處理與圖3的步驟S16至S22的處理相同并且將省略對(duì)其的描述。
[0140]如上所述,成像設(shè)備11對(duì)具有不同分辨率的多個(gè)圖像執(zhí)行被攝體檢測(cè)處理以得到檢測(cè)結(jié)果的重疊度,并且基于通過(guò)多數(shù)決定得到的重疊度計(jì)算被攝體檢測(cè)的結(jié)果的加權(quán)平均以確定最終被攝體區(qū)域。另外,在通過(guò)多數(shù)決定沒(méi)有確定被攝體區(qū)域的情況下,成像設(shè)備11基于具有各個(gè)分辨率的圖像的可靠程度確定最終被攝體區(qū)域。
[0141]另外,通過(guò)以此方式通過(guò)加權(quán)平均計(jì)算最終被攝體區(qū)域,可以通過(guò)只使用可能的檢測(cè)結(jié)果用更高的準(zhǔn)確度檢測(cè)被攝體。另外,同樣,當(dāng)通過(guò)多數(shù)決定沒(méi)有確定被攝體區(qū)域時(shí),基于各個(gè)分辨率的可靠程度確定被攝體區(qū)域,使得可以用足夠的準(zhǔn)確度檢測(cè)被攝體。
[0142]應(yīng)該注意,這里,描述計(jì)算加權(quán)平均的情況作為使用被攝體檢測(cè)的一些結(jié)果計(jì)算最終被攝體區(qū)域的示例,但可以通過(guò)任何其它方法計(jì)算最終被攝體區(qū)域。
[0143]例如,基于保留而未排除的多個(gè)檢測(cè)結(jié)果,包含所有被攝體區(qū)域作為檢測(cè)結(jié)果的一個(gè)矩形區(qū)域可以被視為最終被攝體區(qū)域。另外,例如,只有其中保留而未排除的所有被攝體區(qū)域相互重疊的區(qū)域(也就是說(shuō),只有具有各個(gè)分辨率的所有圖像中都被視為被攝體區(qū)域的區(qū)域)可以被視為最終被攝體區(qū)域。
[0144]另外,只有在具有其重疊數(shù)量信息等于或大于預(yù)定數(shù)量的分辨率的圖像中檢測(cè)到的被攝體區(qū)域可以用于計(jì)算最終被攝體區(qū)域。另外,可以按重疊數(shù)量信息的降序選擇預(yù)定數(shù)量的被攝體區(qū)域,以基于這些被攝體區(qū)域計(jì)算最終被攝體區(qū)域。
[0145](第三實(shí)施例)
[0146](相機(jī)信號(hào)處理單元的構(gòu)造示例)
[0147]在以上描述中,已經(jīng)描述了對(duì)具有不同分辨率的圖像執(zhí)行同樣的被攝體檢測(cè)處理的示例作為對(duì)被攝體檢測(cè)的目標(biāo)圖像多次執(zhí)行的被攝體檢測(cè)處理。然而,可以對(duì)具有單個(gè)分辨率的圖像執(zhí)行互不相同的多種類型的被攝體檢測(cè)處理作為多次執(zhí)行的被攝體檢測(cè)處理。
[0148]在這種情況下,例如,如圖6中所示,構(gòu)造相機(jī)信號(hào)處理單元44。應(yīng)該注意,在圖6中,用相同的參考標(biāo)號(hào)表示與圖2的部分對(duì)應(yīng)的部分并且將適當(dāng)省略對(duì)其的描述。
[0149]圖6中示出的相機(jī)信號(hào)處理單元44包括被攝體檢測(cè)單元121-1、121-2和121_3、被攝體區(qū)域確定單元82、可靠程度確定單元83和輸出單元84。
[0150]具有單個(gè)分辨率的拍攝圖像(也就是說(shuō),單個(gè)高分辨率圖像)被供應(yīng)到被攝體檢測(cè)單元121-1至121-3。
[0151]被攝體檢測(cè)單元121-1至121-3對(duì)供應(yīng)的拍攝圖像執(zhí)行被攝體檢測(cè)處理,以檢測(cè)拍攝圖像中的被攝體區(qū)域并且將檢測(cè)結(jié)果供應(yīng)到被攝體區(qū)域確定單元82和可靠程度確定單元83。
[0152]應(yīng)該注意,當(dāng)在下面的描述中不必特別將被攝體檢測(cè)單元121-1至121-3區(qū)分開(kāi)時(shí),被攝體檢測(cè)單元121-1至121-3中的每個(gè)被簡(jiǎn)稱為被攝體檢測(cè)單元121。
[0153]這里,在各被攝體檢測(cè)單元121中,通過(guò)不同算法對(duì)同一拍攝圖像執(zhí)行被攝體檢測(cè)。換句話講,在各被攝體檢測(cè)單元121中,待處理的拍攝圖像相同,但對(duì)圖像執(zhí)行不同類型的被攝體檢測(cè)處理。預(yù)期這些不同類型的被攝體檢測(cè)處理提供與被攝體檢測(cè)的結(jié)果相同的結(jié)果。
[0154]在下面的描述中,為了區(qū)分通過(guò)各個(gè)被攝體檢測(cè)單元121執(zhí)行的被攝體檢測(cè)處理,被攝體檢測(cè)單元121-1進(jìn)行的被攝體檢測(cè)處理、被攝體檢測(cè)單元121-2進(jìn)行的被攝體檢測(cè)處理和被攝體檢測(cè)單元121-3進(jìn)行的被攝體檢測(cè)處理也被分別稱為被攝體檢測(cè)處理D1、被攝體檢測(cè)處理D2和被攝體檢測(cè)處理D3。
[0155]另外,圖6中示出的可靠程度確定單元83包括檢測(cè)處理確定單元122、檢測(cè)處理確定單元123和檢測(cè)處理確定單元124。
[0156]根據(jù)多數(shù)決定單元92的指令,基于被攝體檢測(cè)單元121-3供應(yīng)的被攝體檢測(cè)處理D3進(jìn)行的被攝體檢測(cè)的結(jié)果,檢測(cè)處理確定單元122確定檢測(cè)結(jié)果的可靠程度。在確定可靠程度的結(jié)果是按照被攝體檢測(cè)處理D3進(jìn)行的被攝體檢測(cè)的結(jié)果充分可靠的情況下,檢測(cè)處理確定單元122將按照被攝體檢測(cè)處理D3進(jìn)行的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。另外,在確定可靠程度的結(jié)果是按照被攝體檢測(cè)處理D3進(jìn)行的被攝體檢測(cè)的結(jié)果并非充分可靠的情況下,檢測(cè)處理確定單元122指示檢測(cè)處理確定單元123執(zhí)行可靠程度的確定。
[0157]根據(jù)檢測(cè)處理確定單元122的指令,基于被攝體檢測(cè)單元121-2供應(yīng)的被攝體檢測(cè)處理D2進(jìn)行的被攝體檢測(cè)的結(jié)果,檢測(cè)處理確定單元123確定檢測(cè)結(jié)果的可靠程度。在確定可靠程度的結(jié)果是按照被攝體檢測(cè)處理D2進(jìn)行的被攝體檢測(cè)的結(jié)果充分可靠的情況下,檢測(cè)處理確定單元123將按照被攝體檢測(cè)處理D2進(jìn)行的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。另外,在確定可靠程度的結(jié)果是按照被攝體檢測(cè)處理D2進(jìn)行的被攝體檢測(cè)的結(jié)果并非充分可靠的情況下,檢測(cè)處理確定單元123指示檢測(cè)處理確定單元124執(zhí)行可靠程度的確定。
[0158]根據(jù)檢測(cè)處理確定單元123的指令,基于被攝體檢測(cè)單元121-1供應(yīng)的被攝體檢測(cè)處理Dl進(jìn)行的被攝體檢測(cè)的結(jié)果,檢測(cè)處理確定單元124確定檢測(cè)結(jié)果的可靠程度。在確定可靠程度的結(jié)果是按照被攝體檢測(cè)處理Dl進(jìn)行的被攝體檢測(cè)的結(jié)果充分可靠的情況下,檢測(cè)處理確定單元124將按照被攝體檢測(cè)處理Dl進(jìn)行的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。另外,在確定可靠程度的結(jié)果是按照被攝體檢測(cè)處理Dl進(jìn)行的被攝體檢測(cè)的結(jié)果并非充分可靠的情況下,檢測(cè)處理確定單元124將指示沒(méi)有以充分可靠程度在拍攝圖像中檢測(cè)到被攝體的信息供應(yīng)到輸出單元84。
[0159](對(duì)被攝體信息輸出處理的描述)
[0160]隨后,將描述在相機(jī)信號(hào)處理單元44具有圖6中示出的構(gòu)造的情況下成像設(shè)備11的操作。在這種情況下,成像設(shè)備11執(zhí)行圖7中示出的被攝體信息輸出處理。下文中,將參照?qǐng)D7的流程圖描述成像設(shè)備11進(jìn)行的被攝體信息輸出處理。
[0161]在步驟S91中,被攝體檢測(cè)單元121-1至121_3對(duì)供應(yīng)的拍攝圖像(即,高分辨率圖像)執(zhí)行被攝體檢測(cè)處理并且將檢測(cè)的結(jié)果供應(yīng)到重疊確定單元91和可靠程度確定單元83。
[0162]具體地,被攝體檢測(cè)單元121-1執(zhí)行被攝體檢測(cè)處理Dl以檢測(cè)拍攝圖像中的被攝體,被攝體檢測(cè)單元121-2執(zhí)行被攝體檢測(cè)處理D2以檢測(cè)拍攝圖像中的被攝體,被攝體檢測(cè)單元121-3執(zhí)行被攝體檢測(cè)處理D3以檢測(cè)拍攝圖像中的被攝體。
[0163]例如,被攝體檢測(cè)處理Dl是其中被攝體地圖用于檢測(cè)被攝體的處理,被攝體檢測(cè)處理D2是基于經(jīng)轉(zhuǎn)換HSV空間中的顏色距離檢測(cè)被攝體的處理,被攝體檢測(cè)處理D3是使用鑒別器進(jìn)行的處理。應(yīng)該注意,被攝體檢測(cè)處理Dl至D3可以是任何類型的處理,只要預(yù)先合適地確定這些處理。
[0164]另外,被攝體檢測(cè)單元121-1至121-3均將指示被攝體在各區(qū)域中的可能性的值(諸如,從拍攝圖像的各區(qū)域中提取的用于檢測(cè)被攝體的特征量)供應(yīng)到檢測(cè)處理確定單元 122 至 124。
[0165]在步驟S91中檢測(cè)被攝體之后,執(zhí)行步驟S92至步驟S94的處理。這些處理與圖3的步驟S13至步驟S15的處理相同并且將省略對(duì)其的描述。
[0166]然而,在步驟S94的多數(shù)決定中,在多個(gè)圖像具有最大重疊數(shù)量信息的情況下,多數(shù)決定單元92采用具有最大重疊數(shù)量信息的圖像之中的被執(zhí)行以預(yù)定次序確定的被攝體檢測(cè)處理的圖像的被攝體作為最終被攝體區(qū)域。這里,所述預(yù)定次序是指被攝體檢測(cè)處理D3、被攝體檢測(cè)處理D2和被攝體檢測(cè)處理Dl的次序。因此,以被攝體檢測(cè)處理D3至被攝體檢測(cè)處理Dl的次序,選擇被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域。只需要根據(jù)針對(duì)被攝體或使用應(yīng)用的檢測(cè)準(zhǔn)確度預(yù)先確定被攝體檢測(cè)處理的次序。
[0167]在執(zhí)行步驟S94的處理之后,處理前進(jìn)至步驟S101。
[0168]同時(shí),當(dāng)在步驟S93中確定沒(méi)有重疊時(shí),多數(shù)決定單元92指示指示檢測(cè)處理確定單元122基于被攝體檢測(cè)的可靠程度執(zhí)行確定被攝體區(qū)域的處理,處理前進(jìn)至步驟S95。
[0169]在步驟S95中,檢測(cè)處理確定單元122確定被攝體檢測(cè)處理D3進(jìn)行的被攝體檢測(cè)的可靠程度是否等于或大于閾值。
[0170]具體地,檢測(cè)處理確定單元122基于被攝體檢測(cè)單元121-3供應(yīng)的被攝體在拍攝圖像的各區(qū)域中的可能性的值,計(jì)算通過(guò)被攝體檢測(cè)處理D3進(jìn)行的被攝體區(qū)域檢測(cè)的可靠程度。例如,如圖3的步驟S16中一樣,通過(guò)同樣的計(jì)算來(lái)計(jì)算可靠程度。
[0171]當(dāng)在步驟S95中確定可靠程度等于或大于閾值時(shí),在步驟S96中,檢測(cè)處理確定單元122將通過(guò)被攝體檢測(cè)處理D3進(jìn)行的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。換句話講,指示被攝體區(qū)域的信息被供應(yīng)到輸出單元84。在輸出被攝體區(qū)域之后,處理前進(jìn)至步驟S101。
[0172]同時(shí),當(dāng)在步驟S95中確定可靠程度不是等于或大于閾值時(shí),檢測(cè)處理確定單元122指示檢測(cè)處理確定單元123執(zhí)行對(duì)可靠程度的確定并且處理前進(jìn)至步驟S97。
[0173]在步驟S97中,檢測(cè)處理確定單元123確定通過(guò)被攝體檢測(cè)處理D2進(jìn)行的被攝體檢測(cè)的可靠程度是否等于或大于閾值。
[0174]具體地,檢測(cè)處理確定單元123基于指示被攝體檢測(cè)單元121-2供應(yīng)的被攝體在各區(qū)域中的可能性的值,通過(guò)與被攝體檢測(cè)處理D3計(jì)算可靠程度相同的計(jì)算來(lái)計(jì)算可靠程度,并且將得到的可靠程度與預(yù)定閾值進(jìn)行比較。
[0175]當(dāng)在步驟S97中確定可靠程度等于或大于閾值時(shí),在步驟S98中,檢測(cè)處理確定單元123將通過(guò)被攝體處理檢測(cè)處理D2進(jìn)行的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。在輸出被攝體區(qū)域之后,處理前進(jìn)至步驟S101。
[0176]相比于此,當(dāng)在步驟S97中可靠程度不是等于或大于閾值時(shí),由于被攝體檢測(cè)處理D2進(jìn)行的被攝體檢測(cè)的結(jié)果并非充分可靠,因此檢測(cè)處理確定單元123指示檢測(cè)處理確定單元124執(zhí)行可靠程度的確定并且處理前進(jìn)至步驟S99。
[0177]在步驟S99中,檢測(cè)處理確定單元124確定通過(guò)被攝體檢測(cè)處理Dl進(jìn)行的被攝體檢測(cè)的可靠程度是否等于或大于閾值。
[0178]具體地,檢測(cè)處理確定單元124基于被攝體檢測(cè)單元121-1供應(yīng)的被攝體在各區(qū)域中的可能性的值,通過(guò)與被攝體檢測(cè)處理D3計(jì)算可靠程度相同的計(jì)算來(lái)計(jì)算可靠程度,并且將得到的可靠程度與預(yù)定的閾值進(jìn)行比較。
[0179]當(dāng)在步驟S99中確定可靠程度等于或大于閾值時(shí),在步驟SlOO中,檢測(cè)處理確定單元124將通過(guò)被攝體檢測(cè)處理Dl進(jìn)行的被攝體檢測(cè)的結(jié)果作為最終被攝體區(qū)域供應(yīng)到輸出單元84。在輸出被攝體區(qū)域之后,處理前進(jìn)至步驟S101。
[0180]相比于此,當(dāng)在步驟S99中確定可靠程度不是等于或大于閾值時(shí),由于通過(guò)所有被攝體檢測(cè)處理進(jìn)行的被攝體檢測(cè)的結(jié)果并非充分可靠,因此檢測(cè)處理確定單元124將信息供應(yīng)到輸出單元84,所述信息指示沒(méi)有以充分的可靠程度在拍攝圖像中檢測(cè)到被攝體。隨后,處理前進(jìn)至步驟S101。
[0181]當(dāng)在步驟S94、步驟S96、步驟S98或步驟SlOO中輸出被攝體區(qū)域時(shí),或者當(dāng)步驟S99中確定可靠程度沒(méi)有等于或大于的閾值并且輸出指示沒(méi)有以充分的可靠程度檢測(cè)到被攝體的信息時(shí),執(zhí)行步驟SlOl的處理。
[0182]具體地,在步驟SlOl中,輸出單元輸出指示多數(shù)決定單元92、檢測(cè)處理確定單元122、檢測(cè)處理確定單元123或檢測(cè)處理確定單元124供應(yīng)的被攝體區(qū)域的信息作為指示最終被攝體區(qū)域的被攝體信息,并且被攝體信息輸出處理終止。應(yīng)該注意,當(dāng)供應(yīng)指示沒(méi)有以足夠的可靠程度檢測(cè)到被攝體的信息時(shí),輸出單元84輸出指示沒(méi)有檢測(cè)到被攝體的信息。
[0183]如上所述,成像設(shè)備11對(duì)拍攝圖像執(zhí)行多種類型的被攝體檢測(cè)處理以得到檢測(cè)結(jié)果的重疊度并且基于得到的重疊度執(zhí)行多數(shù)決定以確定最終被攝體區(qū)域。另外,在沒(méi)有通過(guò)多數(shù)決定確定被攝體區(qū)域的情況下,成像設(shè)備11基于各個(gè)類型的被攝體檢測(cè)處理的可靠程度確定最終被攝體區(qū)域。
[0184]通過(guò)以此方式執(zhí)行多數(shù)決定,可以通過(guò)多數(shù)決定去除指示與具有各個(gè)分辨率的其它圖像的重疊數(shù)量較少的檢測(cè)結(jié)果并因此可以用更高的準(zhǔn)確度檢測(cè)被攝體。另外,同樣,當(dāng)通過(guò)多數(shù)決定沒(méi)有確定被攝體區(qū)域時(shí),基于各類型的被攝體檢測(cè)處理的可靠程度確定被攝體區(qū)域,使得可以用充分的準(zhǔn)確度檢測(cè)被攝體。
[0185]另外,在相機(jī)信號(hào)處理單元44具有如圖6中所示的構(gòu)造的情況下,可以通過(guò)第二實(shí)施例中描述的多數(shù)決定確定最終被攝體區(qū)域。
[0186]順帶一提,可以通過(guò)硬件或軟件執(zhí)行上述的一系列處理。在通過(guò)軟件執(zhí)行這一系列處理的情況下,構(gòu)成軟件的程序被安裝在計(jì)算機(jī)中。這里,計(jì)算機(jī)包括裝入專用硬件的計(jì)算機(jī)和通用計(jì)算機(jī),這些計(jì)算機(jī)例如通過(guò)在其內(nèi)安裝各種程序來(lái)執(zhí)行各種功能。
[0187]圖8是示出用程序執(zhí)行上述一系列處理的計(jì)算機(jī)的硬件構(gòu)造示例的框圖。
[0188]在計(jì)算機(jī)中,CPU 501、ROM 502和RAM 503通過(guò)總線504相互連接。
[0189]總線504還連接到輸入和輸出接口 505。輸入和輸出接口 505連接到輸入單元506、輸出單元507、記錄單元508、通信單元509和驅(qū)動(dòng)器510。
[0190]輸入單元506包括鍵盤、鼠標(biāo)、麥克風(fēng)、成像裝置等。輸出單元507包括顯示器、揚(yáng)聲器等。記錄單元508包括硬盤、非易失性存儲(chǔ)器等。通信單元509包括網(wǎng)絡(luò)接口等。驅(qū)動(dòng)器510驅(qū)動(dòng)諸如磁盤、光盤、磁-光盤或半導(dǎo)體存儲(chǔ)器的可移動(dòng)介質(zhì)511。
[0191]在如上所述構(gòu)造的計(jì)算機(jī)中,負(fù)載501經(jīng)由輸入和輸出接口 505和總線504加載(例如)存儲(chǔ)在記錄單元508中的程序以執(zhí)行程序,使得執(zhí)行上述一系列處理。
[0192]例如,計(jì)算機(jī)(CPU 501)執(zhí)行的程序可以通過(guò)被記錄在作為封裝介質(zhì)的可移動(dòng)介質(zhì)511上來(lái)提供。另外,可以經(jīng)由諸如局域網(wǎng)、互聯(lián)網(wǎng)和數(shù)字衛(wèi)星廣播的有線或無(wú)線傳輸介質(zhì)提供程序。
[0193]在計(jì)算機(jī)中,可以通過(guò)將可移動(dòng)介質(zhì)511安裝到驅(qū)動(dòng)器510,將程序經(jīng)由輸入和輸出接口 505安裝在記錄單元508中。另外,程序可以經(jīng)由有線或無(wú)線傳輸介質(zhì)被通信單元509接收并且被安裝在記錄單元508中。除此之外,程序可以預(yù)先被安裝在ROM 502或記錄單元508中。
[0194]應(yīng)該注意,計(jì)算機(jī)執(zhí)行的程序可以是遵循本說(shuō)明書中描述的次序按定時(shí)執(zhí)行處理的程序或者可以是諸如當(dāng)并行執(zhí)行處理或者執(zhí)行調(diào)用的必要時(shí)間執(zhí)行處理的程序。
[0195]另外,本公開(kāi)的實(shí)施例不限于上述的實(shí)施例并且可以在不脫離本公開(kāi)的主旨的情況下進(jìn)行各種修改。
[0196]例如,本公開(kāi)可以具有云計(jì)算的構(gòu)造,在該構(gòu)造中,多個(gè)設(shè)備共用一個(gè)功能并且借助網(wǎng)絡(luò)進(jìn)行協(xié)作以執(zhí)行處理。
[0197]此外,上述流程圖中描述的步驟可以由一個(gè)設(shè)備執(zhí)行或者由多個(gè)設(shè)備共用和執(zhí)行。
[0198]另外,在一個(gè)步驟包括多個(gè)處理步驟的情況下,一個(gè)步驟中的多個(gè)處理步驟可以由一個(gè)設(shè)備執(zhí)行或者由多個(gè)設(shè)備共用和執(zhí)行。
[0199]另外,本說(shuō)明書中描述的效果只是示例并且不限于這些示例,可以產(chǎn)生其它效果。
[0200]此外,本公開(kāi)可以具有以下構(gòu)造。
[0201](I) 一種圖像處理設(shè)備,所述圖像處理設(shè)備包括:
[0202]被攝體檢測(cè)單元,其被構(gòu)造成執(zhí)行被攝體檢測(cè)處理以根據(jù)輸入圖像檢測(cè)被攝體區(qū)域;以及
[0203]被攝體區(qū)域確定單元,其被構(gòu)造成通過(guò)多數(shù)決定處理確定最終被攝體區(qū)域,所述多數(shù)決定處理是基于在多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的被攝體。
[0204](2)根據(jù)⑴所述的圖像處理設(shè)備,其中,
[0205]所述被攝體區(qū)域確定單元包括
[0206]重疊確定單元,其被構(gòu)造成針對(duì)在多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的各被攝體區(qū)域,計(jì)算兩個(gè)被攝體區(qū)域之間的重疊度,
[0207]多數(shù)決定單元,其被構(gòu)造成基于所述重疊度通過(guò)所述多數(shù)決定處理確定所述最終被攝體區(qū)域。
[0208](3)根據(jù)⑵所述的圖像處理設(shè)備,其中,
[0209]所述重疊確定單元被構(gòu)造成基于所述重疊度確定被攝體區(qū)域是否重疊,以及
[0210]所述多數(shù)決定單元被構(gòu)造成基于通過(guò)一個(gè)被攝體檢測(cè)處理得到的被攝體區(qū)域和通過(guò)另一個(gè)被攝體檢測(cè)處理得到的被攝體區(qū)域之間的重疊的數(shù)量,執(zhí)行所述多數(shù)決定處理,所述重疊的數(shù)量是通過(guò)所述重疊確定單元進(jìn)行確定來(lái)得到的。
[0211](4)根據(jù)(3)所述的圖像處理設(shè)備,其中,
[0212]所述多數(shù)決定單元被構(gòu)造成確定具有最大重疊數(shù)量的被攝體區(qū)域作為所述最終被攝體區(qū)域。
[0213](5)根據(jù)(3)所述的圖像處理設(shè)備,其中,
[0214]所述多數(shù)決定單元被構(gòu)造成基于所述重疊的數(shù)量排除具有低可靠度的被攝體區(qū)域并且基于保留而未排除的被攝體區(qū)域計(jì)算所述最終被攝體區(qū)域。
[0215](6)根據(jù)⑴至(5)中的任一項(xiàng)所述的圖像處理設(shè)備,其中,
[0216]多次執(zhí)行的被攝體檢測(cè)處理包括對(duì)具有不同分辨率的輸入圖像執(zhí)行的相同的被攝體檢測(cè)處理。
[0217](7)根據(jù)⑴至(5)中的任一項(xiàng)所述的圖像處理設(shè)備,其中,
[0218]多次執(zhí)行的被攝體檢測(cè)處理包括對(duì)同一輸入圖像執(zhí)行的不同類型的被攝體檢測(cè)處理。
[0219](8)根據(jù)(I)至(7)中的任一項(xiàng)所述的圖像處理設(shè)備,還包括:
[0220]可靠程度確定單元,其被構(gòu)造成在通過(guò)多數(shù)決定處理沒(méi)有得到所述最終被攝體區(qū)域的情況下,基于多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的被攝體區(qū)域的可靠程度,根據(jù)被攝體區(qū)域確定最終被攝體區(qū)域。
[0221](9) 一種圖像處理方法,所述圖像處理方法包括:
[0222]執(zhí)行被攝體檢測(cè)處理,以檢測(cè)輸入圖像中的被攝體區(qū)域;以及
[0223]通過(guò)基于多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的被攝體區(qū)域的多數(shù)決定處理,確定最終被攝體區(qū)域。
[0224](10) 一種致使計(jì)算機(jī)執(zhí)行包括以下步驟的處理的程序:
[0225]執(zhí)行被攝體檢測(cè)處理,以檢測(cè)輸入圖像中的被攝體區(qū)域;以及
[0226]通過(guò)基于多次執(zhí)行的被攝體檢測(cè)處理中檢測(cè)到的被攝體區(qū)域的多數(shù)決定處理,確定最終被攝體區(qū)域。
[0227](11) 一種圖像處理設(shè)備,所述圖像處理設(shè)備包括:
[0228]被攝體區(qū)域檢測(cè)器,對(duì)輸入圖像多次執(zhí)行被攝體區(qū)域檢測(cè)處理,以通過(guò)對(duì)所述輸入圖像執(zhí)行的多個(gè)處理來(lái)檢測(cè)各個(gè)被攝體區(qū)域;
[0229]被攝體區(qū)域確定器,通過(guò)各個(gè)被攝體區(qū)域的多數(shù)決定處理,確定所述輸入圖像的最終被攝體區(qū)域。
[0230](12)根據(jù)(11)所述的圖像處理設(shè)備,其中,
[0231 ] 所述電路還被構(gòu)造成實(shí)現(xiàn)
[0232]重疊確定器,計(jì)算各個(gè)被攝體區(qū)域中每一對(duì)被攝體區(qū)域的重疊度,
[0233]多數(shù)決定處理器,被構(gòu)造成基于各個(gè)被攝體區(qū)域中每一對(duì)被攝體區(qū)域的重疊度,通過(guò)所述多數(shù)決定處理確定所述最終被攝體區(qū)域。
[0234](13)根據(jù)(12)所述的圖像處理設(shè)備,其中,
[0235]所述重疊確定器被構(gòu)造成:
[0236]基于各個(gè)被攝體區(qū)域中特定的一對(duì)被攝體區(qū)域的重疊度,針對(duì)該特定的一對(duì)確定各個(gè)被攝體區(qū)域是否重疊,和
[0237]針對(duì)對(duì)所述輸入圖像執(zhí)行的每個(gè)處理,追蹤針對(duì)對(duì)所述輸入圖像執(zhí)行的每個(gè)處理的被攝體區(qū)域而識(shí)別的重疊數(shù),以及
[0238]所述多數(shù)決定處理器被構(gòu)造成基于所述重疊數(shù)執(zhí)行所述多數(shù)決定處理。
[0239](14)根據(jù)(13)所述的圖像處理設(shè)備,其中,
[0240]所述多數(shù)決定處理器被構(gòu)造成確定對(duì)輸入圖像執(zhí)行的多個(gè)處理中具有最大重疊數(shù)的處理的被攝體區(qū)域作為所述最終被攝體區(qū)域。
[0241](15)根據(jù)(13)所述的圖像處理設(shè)備,其中,
[0242]所述多數(shù)決定處理器被構(gòu)造成:
[0243]基于特定被攝體區(qū)域的所述重疊數(shù)排除具有低可靠程度的特定被攝體區(qū)域,并且
[0244]基于沒(méi)有被排除的被攝體區(qū)域,計(jì)算所述最終被攝體區(qū)域。
[0245](16)根據(jù)(11)所述的圖像處理設(shè)備,其中,
[0246]對(duì)所述輸入圖像執(zhí)行的多個(gè)處理中的各個(gè)處理以不同分辨率對(duì)所述輸入圖像進(jìn)行處理。
[0247](17)根據(jù)(11)所述的圖像處理設(shè)備,其中,
[0248]對(duì)所述輸入圖像執(zhí)行的多個(gè)處理是對(duì)所述輸入圖像執(zhí)行的不同類型的被攝體檢測(cè)處理。
[0249](18)根據(jù)(11)所述的圖像處理設(shè)備,其中,所述電路被進(jìn)一步構(gòu)造成實(shí)現(xiàn)
[0250]可靠程度確定器,在所述多數(shù)決定處理無(wú)法可靠地識(shí)別所述最終被攝體區(qū)域的情況下,基于各個(gè)被攝體區(qū)域的可靠程度確定所述最終被攝體區(qū)域。
[0251](19) 一種圖像處理方法,所述圖像處理方法包括:
[0252]用電路對(duì)輸入圖像多次執(zhí)行被攝體區(qū)域檢測(cè)處理,以通過(guò)對(duì)所述輸入圖像執(zhí)行的多個(gè)處理檢測(cè)各個(gè)被攝體區(qū)域;以及
[0253]通過(guò)各個(gè)被攝體區(qū)域的多數(shù)決定處理,確定所述輸入圖像的最終被攝體區(qū)域。
[0254](20)根據(jù)(19)所述的圖像處理方法,還包括
[0255]計(jì)算各個(gè)被攝體區(qū)域中每一對(duì)被攝體區(qū)域的重疊度,其中
[0256]確定步驟包括基于各個(gè)被攝體區(qū)域中每一對(duì)被攝體區(qū)域的重疊度,通過(guò)所述多數(shù)決定處理確定所述最終被攝體區(qū)域。
[0257](21)根據(jù)(20)所述的圖像處理方法,其中,
[0258]確定步驟包括基于各個(gè)被攝體區(qū)域中特定的一對(duì)被攝體區(qū)域的重疊度,針對(duì)該特定的一對(duì)確定各個(gè)被攝體區(qū)域是否重疊,
[0259]針對(duì)對(duì)所述輸入圖像執(zhí)行的每個(gè)處理,追蹤針對(duì)對(duì)所述輸入圖像執(zhí)行的每個(gè)處理的被攝體區(qū)域而識(shí)別的重疊數(shù),以及
[0260]基于所述重疊數(shù)執(zhí)行所述多數(shù)決定處理。
[0261](22)根據(jù)(21)所述的圖像處理方法,其中,
[0262]確定步驟包括確定對(duì)所述輸入圖像執(zhí)行的多個(gè)處理中具有最大重疊數(shù)的處理的被攝體區(qū)域作為最終被攝體區(qū)域。
[0263](23)根據(jù)(21)所述的圖像處理方法,還包括:
[0264]基于所述特定被攝體區(qū)域的重疊數(shù)而排除具有低可靠程度的特定被攝體區(qū)域,以及
[0265]基于沒(méi)有被排除的被攝體區(qū)域,計(jì)算所述最終被攝體區(qū)域。
[0266](24)根據(jù)(19)所述的圖像處理方法,其中對(duì)所述輸入圖像執(zhí)行的多個(gè)處理中的各個(gè)處理具有不同的分辨率。
[0267](25)根據(jù)(19)所述的圖像處理方法,其中對(duì)所述輸入圖像執(zhí)行的多個(gè)處理是對(duì)所述輸入圖像執(zhí)行的不同類型的被攝體檢測(cè)處理。
[0268](26)根據(jù)(19)所述的圖像處理方法,還包括:
[0269]在所述多數(shù)決定處理無(wú)法可靠地識(shí)別所述最終被攝體區(qū)域的情況下,基于各個(gè)被攝體區(qū)域的可靠程度確定所述最終被攝體區(qū)域。
[0270](27) 一種存儲(chǔ)有程序的非暫態(tài)存儲(chǔ)介質(zhì),當(dāng)處理電路執(zhí)行所述程序時(shí)使得所述處理電路執(zhí)行一種方法,所述方法包括:
[0271]對(duì)輸入圖像多次執(zhí)行被攝體區(qū)域檢測(cè)處理,以通過(guò)對(duì)所述輸入圖像執(zhí)行的多個(gè)處理檢測(cè)各個(gè)被攝體區(qū)域;以及
[0272]通過(guò)各個(gè)被攝體區(qū)域的多數(shù)決定處理,確定所述輸入圖像的最終被攝體區(qū)域。
[0273]本領(lǐng)域的技術(shù)人員應(yīng)該理解,根據(jù)設(shè)計(jì)要求和其它因素,可以想到各種修改形式、組合形式、子組合形式和替代形式,只要這些形式在所附權(quán)利要求書或其等同物的范圍內(nèi)。
【權(quán)利要求】
1.一種圖像處理設(shè)備,包括: 電路,所述電路被構(gòu)造成實(shí)現(xiàn): 被攝體區(qū)域檢測(cè)器,對(duì)輸入圖像多次執(zhí)行被攝體區(qū)域檢測(cè)處理,以通過(guò)對(duì)所述輸入圖像執(zhí)行的多個(gè)處理來(lái)檢測(cè)各個(gè)被攝體區(qū)域; 被攝體區(qū)域確定器,通過(guò)各個(gè)被攝體區(qū)域的多數(shù)決定處理,確定所述輸入圖像的最終被攝體區(qū)域。
2.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中, 所述電路還被構(gòu)造成實(shí)現(xiàn): 重疊確定器,計(jì)算各個(gè)被攝體區(qū)域中每一對(duì)被攝體區(qū)域的重疊度, 多數(shù)決定處理器,被構(gòu)造成基于各個(gè)被攝體區(qū)域中每一對(duì)被攝體區(qū)域的重疊度,通過(guò)所述多數(shù)決定處理確定所述最終被攝體區(qū)域。
3.根據(jù)權(quán)利要求2所述的圖像處理設(shè)備,其中 所述重疊確定器被構(gòu)造成: 基于各個(gè)被攝體區(qū)域中特定的一對(duì)被攝體區(qū)域的重疊度,針對(duì)該特定的一對(duì)確定各個(gè)被攝體區(qū)域是否重疊,和 針對(duì)對(duì)所述輸入圖像執(zhí)行的每個(gè)處理,追蹤針對(duì)對(duì)所述輸入圖像執(zhí)行的每個(gè)處理的被攝體區(qū)域而識(shí)別的重疊數(shù),以及 所述多數(shù)決定處理器被構(gòu)造成基于所述重疊數(shù)執(zhí)行所述多數(shù)決定處理。
4.根據(jù)權(quán)利要求3所述的圖像處理設(shè)備,其中, 所述多數(shù)決定處理器被構(gòu)造成確定對(duì)輸入圖像執(zhí)行的多個(gè)處理中具有最大重疊數(shù)的處理的被攝體區(qū)域作為所述最終被攝體區(qū)域。
5.根據(jù)權(quán)利要求3所述的圖像處理設(shè)備,其中, 所述多數(shù)決定處理器被構(gòu)造成: 基于特定被攝體區(qū)域的所述重疊數(shù)排除具有低可靠程度的特定被攝體區(qū)域,并且 基于沒(méi)有被排除的被攝體區(qū)域,計(jì)算所述最終被攝體區(qū)域。
6.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中, 對(duì)所述輸入圖像執(zhí)行的多個(gè)處理中的各個(gè)處理以不同分辨率對(duì)所述輸入圖像進(jìn)行處理。
7.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中, 對(duì)所述輸入圖像執(zhí)行的多個(gè)處理是對(duì)所述輸入圖像執(zhí)行的不同類型的被攝體檢測(cè)處理。
8.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其中,所述電路被進(jìn)一步構(gòu)造成實(shí)現(xiàn): 可靠程度確定器,在所述多數(shù)決定處理無(wú)法可靠地識(shí)別所述最終被攝體區(qū)域的情況下,基于各個(gè)被攝體區(qū)域的可靠程度確定所述最終被攝體區(qū)域。
9.一種圖像處理方法,包括: 用電路對(duì)輸入圖像多次執(zhí)行被攝體區(qū)域檢測(cè)處理,以通過(guò)對(duì)所述輸入圖像執(zhí)行的多個(gè)處理檢測(cè)各個(gè)被攝體區(qū)域;以及 通過(guò)各個(gè)被攝體區(qū)域的多數(shù)決定處理,確定所述輸入圖像的最終被攝體區(qū)域。
10.根據(jù)權(quán)利要求9所述的圖像處理方法,還包括: 計(jì)算各個(gè)被攝體區(qū)域中每一對(duì)被攝體區(qū)域的重疊度,其中 確定步驟包括基于各個(gè)被攝體區(qū)域中每一對(duì)被攝體區(qū)域的重疊度,通過(guò)所述多數(shù)決定處理確定所述最終被攝體區(qū)域。
11.根據(jù)權(quán)利要求10所述的圖像處理方法,其中, 確定步驟包括基于各個(gè)被攝體區(qū)域中特定的一對(duì)被攝體區(qū)域的重疊度,針對(duì)該特定的一對(duì)確定各個(gè)被攝體區(qū)域是否重疊, 針對(duì)對(duì)所述輸入圖像執(zhí)行的每個(gè)處理,追蹤針對(duì)對(duì)所述輸入圖像執(zhí)行的每個(gè)處理的被攝體區(qū)域而識(shí)別的重疊數(shù),以及 基于所述重疊數(shù)執(zhí)行所述多數(shù)決定處理。
12.根據(jù)權(quán)利要求11所述的圖像處理方法,其中, 確定步驟包括確定對(duì)所述輸入圖像執(zhí)行的多個(gè)處理中具有最大重疊數(shù)的處理的被攝體區(qū)域作為最終被攝體區(qū)域。
13.根據(jù)權(quán)利要求11所述的圖像處理方法,還包括: 基于所述特定被攝體區(qū)域的重疊數(shù)而排除具有低可靠程度的特定被攝體區(qū)域,以及 基于沒(méi)有被排除的被攝體區(qū)域,計(jì)算所述最終被攝體區(qū)域。
14.根據(jù)權(quán)利要求9所述的圖像處理方法,其中對(duì)所述輸入圖像執(zhí)行的多個(gè)處理中的各個(gè)處理具有不同的分辨率。
15.根據(jù)權(quán)利要求9所述的圖像處理方法,其中對(duì)所述輸入圖像執(zhí)行的多個(gè)處理是對(duì)所述輸入圖像執(zhí)行的不同類型的被攝體檢測(cè)處理。
16.根據(jù)權(quán)利要求9所述的圖像處理方法,還包括: 在所述多數(shù)決定處理無(wú)法可靠地識(shí)別所述最終被攝體區(qū)域的情況下,基于各個(gè)被攝體區(qū)域的可靠程度確定所述最終被攝體區(qū)域。
17.一種存儲(chǔ)有程序的非暫態(tài)存儲(chǔ)介質(zhì),當(dāng)處理電路執(zhí)行所述程序時(shí)使得所述處理電路執(zhí)行一種方法,所述方法包括: 對(duì)輸入圖像多次執(zhí)行被攝體區(qū)域檢測(cè)處理,以通過(guò)對(duì)所述輸入圖像執(zhí)行的多個(gè)處理檢測(cè)各個(gè)被攝體區(qū)域;以及 通過(guò)各個(gè)被攝體區(qū)域的多數(shù)決定處理,確定所述輸入圖像的最終被攝體區(qū)域。
【文檔編號(hào)】H04N5/232GK104519271SQ201410482394
【公開(kāi)日】2015年4月15日 申請(qǐng)日期:2014年9月19日 優(yōu)先權(quán)日:2013年9月27日
【發(fā)明者】中尾優(yōu)太 申請(qǐng)人:索尼公司