專利名稱：電子設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及攝像裝置、便攜式信息終端、個(gè)人計(jì)算機(jī)等電子設(shè)備。
背景技術(shù)：
一種通過(guò)圖像處理來(lái)調(diào)整拍攝圖像的合焦?fàn)顟B(tài)的功能已經(jīng)被提出，實(shí)現(xiàn)該功能的處理的一種也被稱作數(shù)字聚焦(例如參照下述專利文獻(xiàn)1 3)。專利文獻(xiàn)1 JP特開(kāi)2009-2M982號(hào)公報(bào)專利文獻(xiàn)2 JP特開(kāi)2008-271241號(hào)公報(bào)專利文獻(xiàn)3 JP特開(kāi)2002-M7439號(hào)公報(bào)經(jīng)過(guò)數(shù)字聚焦而得到的輸出圖像的景深(被寫界深度)應(yīng)該遵循用戶的希望。但是，作為對(duì)景深的設(shè)定操作或確認(rèn)進(jìn)行支援的用戶界面，還沒(méi)有充分地提供。只要適當(dāng)?shù)剡M(jìn)行這些支援，則能夠容易地設(shè)定期望的景深。

發(fā)明內(nèi)容
因此，本發(fā)明的目的在于，提供一種對(duì)利用了圖像處理的景深調(diào)整時(shí)的操作的容易化等做出貢獻(xiàn)的電子設(shè)備。本發(fā)明所涉及的第1電子設(shè)備的特征在于，具備對(duì)象輸出圖像生成部，其通過(guò)圖像處理來(lái)變更對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像；監(jiān)視器，其在顯示畫(huà)面上顯示距離直方圖、以及能夠沿著所述距離直方圖中的距離軸移動(dòng)的選擇標(biāo)志，其中所述距離直方圖表示所述對(duì)象輸入圖像上的各位置上的物體與拍攝了所述對(duì)象輸入圖像的設(shè)備之間的距離的分布；和景深設(shè)定部，其基于通過(guò)用于使所述選擇標(biāo)志沿著所述距離軸移動(dòng)的操作而規(guī)定的所述選擇標(biāo)志的位置，來(lái)設(shè)定所述對(duì)象輸出圖像的景深。由此，能夠在與距離直方圖之間的關(guān)系中設(shè)定景深，用戶能夠容易地設(shè)定希望的景深。具體來(lái)說(shuō)，例如，在所述第1電子設(shè)備中，所述景深設(shè)定部可以按照使與所述選擇標(biāo)志的位置對(duì)應(yīng)的所述距離軸上的距離屬于所述對(duì)象輸出圖像的景深的方式，來(lái)設(shè)定所述對(duì)象輸出圖像的景深。此外，例如，在所述第1電子設(shè)備中，所述景深設(shè)定部，也可以根據(jù)所述距離直方圖中的度數(shù)來(lái)設(shè)定代表距離，并且從所述對(duì)象輸入圖像的圖像數(shù)據(jù)中提取與所述代表距離對(duì)應(yīng)的物體的圖像數(shù)據(jù)，并將基于提取圖像數(shù)據(jù)的代表距離物體圖像與所述距離直方圖上的代表距離對(duì)應(yīng)起來(lái)顯示在所述顯示畫(huà)面上。由此，用戶容易地將景深設(shè)定為希望的景深。本發(fā)明所涉及的第2電子設(shè)備的特征在于，具備對(duì)象輸出圖像生成部，其通過(guò)圖像處理來(lái)變更對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像；觸控面板監(jiān)視器，具有顯示畫(huà)面且接受通過(guò)由操作體觸碰所述顯示畫(huà)面而進(jìn)行的觸控面板操作，該觸控面板監(jiān)視器在將所述對(duì)象輸入圖像或基于所述對(duì)象輸入圖像的圖像顯示于所述顯示畫(huà)面的狀態(tài)下，作為
4所述觸控面板操作接受指定所述顯示畫(huà)面上的多個(gè)特定物體的指定操作；和景深設(shè)定部， 其基于所述指定操作來(lái)設(shè)定所述對(duì)象輸出圖像的景深。由此，例如，能夠按照使希望的特定物體全部收納于景深內(nèi)的方式，容易且迅速地設(shè)定對(duì)象輸出圖像的景深。S卩，例如，在所述第2電子設(shè)備中，所述景深設(shè)定部可以按照使所述多個(gè)特定物體收納于所述對(duì)象輸出圖像的景深內(nèi)的方式來(lái)設(shè)定所述對(duì)象輸出圖像的景深。此外，具體來(lái)說(shuō)，例如，在所述第2電子設(shè)備中，所述景深設(shè)定部，也可以根據(jù)距離圖來(lái)提取各特定物體與所述設(shè)備之間的距離，其中所述距離圖表示所述對(duì)象輸入圖像上的各位置上的物體與拍攝了所述對(duì)象輸入圖像的設(shè)備之間的距離，并基于提取出的距離來(lái)設(shè)定所述對(duì)象輸出圖像的景深中的兩端距離。本發(fā)明所涉及的第3電子設(shè)備的特征在于，具備對(duì)象輸出圖像生成部，其通過(guò)圖像處理來(lái)變更對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像；觸控面板監(jiān)視器，具有顯示畫(huà)面且接受通過(guò)由操作體觸碰所述顯示畫(huà)面而進(jìn)行的觸控面板操作，該觸控面板監(jiān)視器在將所述對(duì)象輸入圖像或基于所述對(duì)象輸入圖像的圖像顯示于所述顯示畫(huà)面的狀態(tài)下，作為所述觸控面板操作接受指定所述顯示畫(huà)面上的特定物體的指定操作；和景深設(shè)定部，其按照使所述物體收納于所述對(duì)象輸出圖像的景深內(nèi)的方式來(lái)設(shè)定所述對(duì)象輸出圖像的景深， 所述景深設(shè)定部根據(jù)在所述指定操作中所述操作體觸碰所述顯示畫(huà)面上的所述特定物體的時(shí)間的長(zhǎng)度，來(lái)設(shè)定所述對(duì)象輸出圖像的景深的深度。由此，能夠通過(guò)容易且迅速的操作而生成使希望的物體收納于景深內(nèi)的、具有希望的景深的深度的對(duì)象輸出圖像。本發(fā)明所涉及的第4電子設(shè)備的特征在于，具備對(duì)象輸出圖像生成部，其通過(guò)圖像處理來(lái)變更對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像；景深設(shè)定部，其按照被施加的操作，來(lái)設(shè)定所述對(duì)象輸出圖像的景深；和監(jiān)視器，其顯示表示設(shè)定的景深的信息。由此，用戶容易判斷對(duì)象輸出圖像的景深是否被設(shè)定成了希望的景深。S卩，對(duì)對(duì)象輸出圖像的景深的設(shè)定進(jìn)行支援。具體來(lái)說(shuō)，例如，所述信息包括與設(shè)定的景深對(duì)應(yīng)的光圈值。(發(fā)明的效果)根據(jù)本發(fā)明，能夠提供一種對(duì)利用了圖像處理的調(diào)整景深時(shí)的操作的容易化等做出貢獻(xiàn)的電子設(shè)備。


圖1是本發(fā)明的實(shí)施方式所涉及的攝像裝置的概略整體框圖。圖2是圖1所示的攝像部的內(nèi)部構(gòu)成圖。圖3是圖1所示的監(jiān)視器的概略分解圖。圖4是XY坐標(biāo)面與顯示畫(huà)面之間的關(guān)系圖(a)、和XY坐標(biāo)面與二維圖像之間的關(guān)系圖(b)。圖5是本發(fā)明的實(shí)施方式所涉及的、參與數(shù)字聚焦功能的部位的框圖。圖6是表示應(yīng)用數(shù)字聚焦的對(duì)象輸入圖像的例子的圖(a)、表示該對(duì)象輸入圖像的距離圖的圖(b)、和表示攝像裝置與被攝體之間的距離關(guān)系的圖(C)。
圖7是表示景深、合焦基準(zhǔn)距離、近點(diǎn)距離以及遠(yuǎn)點(diǎn)距離的關(guān)系的圖。圖8是用于說(shuō)明景深、合焦基準(zhǔn)距離、近點(diǎn)距離以及遠(yuǎn)點(diǎn)距離的意義的圖。圖9是圖5所示的各部位的動(dòng)作流程圖。圖10是表示能夠顯示在圖1的監(jiān)視器上的滑動(dòng)條的構(gòu)成的圖。圖11是表示滑動(dòng)條與對(duì)象輸入圖像一起被顯示的樣態(tài)的圖。圖12是表示距離直方圖的例子的圖。圖13是表示距離直方圖與滑動(dòng)條的組合的圖。圖14是表示距離直方圖、滑動(dòng)條、和代表距離物體圖像的組合的圖。圖15是表示顯示畫(huà)面上的各被攝體和各被攝體的顯示位置的圖。圖16是表示在顯示畫(huà)面上顯示光圈值(F值F-number)的樣態(tài)的圖。圖17是表示能夠顯示在顯示畫(huà)面上的確認(rèn)用圖像的例子的圖。符號(hào)說(shuō)明1攝像裝置11攝像部15監(jiān)視器33攝像元件51顯示畫(huà)面52觸控檢測(cè)部61距離圖取得部62景深設(shè)定部63設(shè)定用UI生成部64合焦?fàn)顟B(tài)確認(rèn)用圖像生成部65數(shù)字聚焦部
具體實(shí)施例方式以下，參照附圖對(duì)本發(fā)明的實(shí)施方式的例子具體地進(jìn)行說(shuō)明。在參照的各圖中，對(duì)相同的部分賦予相同的符號(hào)，原則上省略關(guān)于相同部分的重復(fù)的說(shuō)明。后面將對(duì)第1 第6 實(shí)施例進(jìn)行說(shuō)明，但首先對(duì)在各實(shí)施例中共通的事項(xiàng)或在各實(shí)施例中被參照的事項(xiàng)進(jìn)行說(shuō)明。圖1是本發(fā)明的實(shí)施方式所涉及的攝像裝置1的概略整體框圖。攝像裝置1是能夠拍攝及記錄靜止圖像的數(shù)字靜像照相機(jī)、或者能夠拍攝及記錄靜止圖像以及運(yùn)動(dòng)圖像的數(shù)字?jǐn)z像機(jī)。攝像裝置1也可以搭載于便攜式電話機(jī)等便攜式終端。攝像裝置1具備攝像部11、AFE (Analog Front End) 12、主控制部13、內(nèi)部存儲(chǔ)器 14、監(jiān)視器15、記錄介質(zhì)16、和操作部17。此外，也可以認(rèn)為監(jiān)視器15是設(shè)置于攝像裝置1 的外部的顯示裝置的監(jiān)視器。在圖2中示出攝像部11的內(nèi)部構(gòu)成圖。攝像部11具有光學(xué)系統(tǒng)35 ；光圈32 ； 1 CCD(Charge Coupled Device) 5 CMOS(Complementary Metal Oxide Semiconductor) 圖像傳感器等構(gòu)成的攝像元件33 ；和用于對(duì)光學(xué)系統(tǒng)35或光圈32進(jìn)行驅(qū)動(dòng)控制的驅(qū)動(dòng)器 34。光學(xué)系統(tǒng)35由包括變焦透鏡30以及聚焦透鏡31在內(nèi)的多枚透鏡形成。變焦透鏡30以及聚焦透鏡31能夠在光軸方向上移動(dòng)。驅(qū)動(dòng)器34基于來(lái)自主控制部13的控制信號(hào)來(lái)對(duì)變焦透鏡30以及聚焦透鏡31的各位置以及光圈32的開(kāi)度進(jìn)行驅(qū)動(dòng)控制，由此來(lái)控制攝像部11的焦點(diǎn)距離(視角)和焦點(diǎn)位置、以及向攝像元件33的入射光量。攝像元件33對(duì)經(jīng)由光學(xué)系統(tǒng)35以及光圈32而入射的、表示被攝體的光學(xué)圖像進(jìn)行光電變換，并將通過(guò)該光電變換而得到的電信號(hào)輸出到AFE12。更具體來(lái)說(shuō)，攝像元件33 具備二維排列為矩陣狀的多個(gè)受光像素，在各拍攝中，各受光像素蓄積與曝光時(shí)間相應(yīng)的電荷量的信號(hào)電荷。具有與蓄積的信號(hào)電荷的電荷量成正比的大小的來(lái)自各受光像素的模擬信號(hào)，按照在攝像裝置1內(nèi)生成的驅(qū)動(dòng)脈沖而依次被輸出到AFE12。AFE12對(duì)從攝像部11 (攝像元件3 輸出的模擬信號(hào)進(jìn)行放大，并將放大后的模擬信號(hào)變換為數(shù)字信號(hào)。AFE12將該數(shù)字信號(hào)作為RAW數(shù)據(jù)輸出到主控制部13。AFE12中的信號(hào)放大的放大幅度由主控制部13來(lái)控制。主控制部13 由 CPU (Central Processing Unit)、ROM (Read Only Memory)以及 RAM (Random Access Memory)等構(gòu)成。主控制部13基于來(lái)自AFE12的RAW數(shù)據(jù)，來(lái)生成表示由攝像部11拍攝到的圖像(以下，也稱作拍攝圖像)的圖像數(shù)據(jù)。在此生成的圖像數(shù)據(jù)中含有例如亮度信號(hào)以及色差信號(hào)。其中，RAW數(shù)據(jù)本身也是圖像數(shù)據(jù)的一種，從攝像部11 輸出的模擬信號(hào)也是圖像數(shù)據(jù)的一種。此外，主控制部13還具有對(duì)監(jiān)視器15的顯示內(nèi)容進(jìn)行控制的顯示控制部的功能，對(duì)監(jiān)視器15進(jìn)行顯示所需的控制。內(nèi)部存儲(chǔ)器 14 由 SDRAM (Synchronous Dynamic Random Access Memory)等形成， 暫時(shí)存儲(chǔ)在攝像裝置1內(nèi)生成的各種數(shù)據(jù)。監(jiān)視器15是具有液晶顯示面板等顯示畫(huà)面的顯示裝置，在主控制部13的控制下，顯示拍攝到的圖像或記錄在記錄介質(zhì)16中的圖像等。記錄介質(zhì)16是卡片狀半導(dǎo)體存儲(chǔ)器或磁盤等非易失性存儲(chǔ)器，在主控制部13的控制下，存儲(chǔ)拍攝圖像等。操作部17具有接受靜止圖像的拍攝指示的快門按鈕20等，接受來(lái)自外部的各種操作。為了與觸控面板操作進(jìn)行區(qū)分，將對(duì)操作部17的操作也稱作按鈕操作。對(duì)操作部17的操作內(nèi)容被傳遞給主控制部13。監(jiān)視器15設(shè)有觸控面板。圖3是監(jiān)視器15的概略分解圖。在作為觸控面板監(jiān)視器的監(jiān)視器15上，設(shè)有由液晶顯示器等構(gòu)成的顯示畫(huà)面51、和檢測(cè)操作體在顯示畫(huà)面51上觸碰的位置(施加了壓力的位置)的觸控檢測(cè)部52。用戶能通過(guò)用操作體觸碰監(jiān)視器15 的顯示畫(huà)面51來(lái)對(duì)攝像裝置1發(fā)出特定的指示。將通過(guò)用操作體來(lái)觸碰顯示畫(huà)面51而進(jìn)行的操作稱作觸控面板操作。將操作體和顯示畫(huà)面51的接觸位置稱作觸控位置。在操作體觸碰顯示畫(huà)面51時(shí)，觸控檢測(cè)部52將表示該觸碰的位置(即觸控位置)的觸控位置信息實(shí)時(shí)地輸出到主控制部13。操作體是手指或筆等，但下面主要假定操作體為手指的情況。 此外，在本說(shuō)明書(shū)中，僅僅說(shuō)了 “顯示”的情況下，是指顯示畫(huà)面51上的顯示。如圖4(a)所示，顯示畫(huà)面51上的位置被定義為二維的XY坐標(biāo)面上的位置。而且， 如圖4(b)所示，在攝像裝置1中，任意的二維圖像300也作為XY坐標(biāo)面上的圖像來(lái)處理。 XY坐標(biāo)面作為坐標(biāo)軸具有在顯示畫(huà)面51以及二維圖像300的水平方向上延伸的X軸、和在顯示畫(huà)面51以及二維圖像300的垂直方向上延伸的Y軸。在本說(shuō)明書(shū)中所說(shuō)的圖像只要沒(méi)有特別說(shuō)明全部是二維圖像。將顯示畫(huà)面51以及二維圖像300上的某關(guān)注點(diǎn)的位置表示為(χ，y)。χ表示該關(guān)注點(diǎn)的X軸坐標(biāo)值，同時(shí)表示顯示畫(huà)面51以及二維圖像300上的該關(guān)注點(diǎn)的水平位置。y表示該關(guān)注點(diǎn)的Y軸坐標(biāo)值，同時(shí)表示顯示畫(huà)面51以及二維圖像300上的該關(guān)注點(diǎn)的垂直位置。在將二維圖像300顯示于顯示畫(huà)面51時(shí)(利用顯示畫(huà)面51的整體來(lái)顯示二維圖像300時(shí))，二維圖像300上的位置(x，y)上的圖像顯示在顯示畫(huà)面51上的位置(x，y)上。在攝像裝置1中設(shè)有在拍攝圖像的圖像數(shù)據(jù)取得后，變更拍攝圖像的景深的功能。在此，將此功能稱作數(shù)字聚焦功能。在圖5中示出參與數(shù)字聚焦功能的部位的框圖?？梢詫⑼ㄟ^(guò)符號(hào)61 65來(lái)參照的各部位設(shè)置于例如圖1的主控制部13中。將景深變更前的拍攝圖像稱作對(duì)象輸入圖像，將景深變更后的拍攝圖像稱作對(duì)象輸出圖像。對(duì)象輸入圖像是基于RAW數(shù)據(jù)的拍攝圖像，對(duì)RAW數(shù)據(jù)實(shí)施規(guī)定的圖像處理(例如，去馬賽克(demosaicing)處理或降噪處理)而得到的圖像也可以是對(duì)象輸入圖像。此外，也可以在將對(duì)象輸入圖像的圖像數(shù)據(jù)暫時(shí)記錄在記錄介質(zhì)16中之后，在任意的時(shí)刻從記錄介質(zhì)16中讀出對(duì)象輸入圖像的圖像數(shù)據(jù)，并將對(duì)象輸入圖像的圖像數(shù)據(jù)提供給圖5所示的各部位。距離圖取得部距離圖取得部61執(zhí)行對(duì)收納于攝像裝置1的拍攝范圍內(nèi)的各被攝體的被攝體距離進(jìn)行檢測(cè)的被攝體距離檢測(cè)處理，由此來(lái)生成表示對(duì)象輸入圖像上的各位置上的被攝體的被攝體距離的距離圖(被攝體距離信息)。關(guān)于某被攝體的被攝體距離是指該被攝體和攝像裝置1 (更具體來(lái)說(shuō)是攝像元件33)之間的實(shí)際空間上的距離?？梢灾芷谛缘鼗蛘咴谙Ｍ臅r(shí)刻執(zhí)行被攝體距離檢測(cè)處理。距離圖可以說(shuō)是形成自身的各像素值具有被攝體距離的檢測(cè)值的距離圖像。圖6(a)的圖像310是對(duì)象輸入圖像的例子，圖6(b)的距離圖像 320是基于對(duì)象輸入圖像310的距離圖。在表示距離圖像的附圖中，被攝體距離越小的部分被表示得越白，被攝體距離越大的部分被表示得越黑。對(duì)象輸入圖像310可以通過(guò)拍攝包括被攝體SUB1 S 3的被攝體群而得到。如圖6(c)所示，將被攝體SUB1-Sra3W被攝體距離分別表示為L(zhǎng)1 L3。在此，0 < L1 < L2 < L3成立。也可以在拍攝對(duì)象輸入圖像時(shí)執(zhí)行被攝體距離檢測(cè)處理，并將由此得到的距離圖與對(duì)象輸入圖像的圖像數(shù)據(jù)關(guān)聯(lián)對(duì)應(yīng)之后與對(duì)象輸入圖像的圖像數(shù)據(jù)一起記錄在記錄介質(zhì)16中。由此，距離圖取得部61能夠在任意的時(shí)刻從記錄介質(zhì)16中取得距離圖。此外， 上述的關(guān)聯(lián)對(duì)應(yīng)例如通過(guò)在保存對(duì)象輸入圖像的圖像數(shù)據(jù)的圖像文件的頭(header)區(qū)域中保存距離圖來(lái)實(shí)現(xiàn)。作為被攝體距離的檢測(cè)方法以及距離圖的生成方法，可以利用包括公知的方法在內(nèi)的任意方法。既可以利用對(duì)象輸入圖像的圖像數(shù)據(jù)來(lái)生成距離圖，也可以利用對(duì)象輸入圖像的圖像數(shù)據(jù)以外的信息來(lái)生成距離圖。例如，也可以根據(jù)利用兩個(gè)攝像部拍攝到的圖像，通過(guò)立體法(立體視覺(jué)法)來(lái)生成距離圖。兩個(gè)攝像部中的一方可以是攝像部11?；蛘呃缫部梢岳脤?duì)各被攝體的被攝體距離進(jìn)行測(cè)定的測(cè)距傳感器(未圖示)來(lái)生成距離圖。作為測(cè)距傳感器，可以使用基于三角測(cè)量法的測(cè)距傳感器、或有源式的測(cè)距傳感器等。 有源式的測(cè)距傳感器具備發(fā)光元件，能夠測(cè)量從發(fā)光元件向位于攝像裝置1的拍攝范圍內(nèi)的被攝體照射的光被被攝體反射回來(lái)為止的時(shí)間，并基于測(cè)量結(jié)果來(lái)檢測(cè)各被攝體的被攝體距離?；蛘?，例如也可以按照在RAW數(shù)據(jù)中含有表示被攝體距離的信息的方式來(lái)形成攝像部11，并根據(jù)RAW數(shù)據(jù)來(lái)生成距離圖。為了實(shí)現(xiàn)這種方式，例如也可以利用被稱作"Light Field Photography”的方法(例如，國(guó)際公開(kāi)第06/039486號(hào)小冊(cè)子或JP特開(kāi) 2009-224982號(hào)公報(bào)中記載的方法；以下，稱作Light Field法)。在Light Field法中， 通過(guò)利用具有孔徑光闌(aperture stop)的攝像透鏡和微透鏡陣列，從而從攝像元件得到的圖像信號(hào)除了包括攝像元件的受光面上的光的強(qiáng)度分布之外，也包括光的前進(jìn)方向的信息。因此，雖然在圖2中沒(méi)有表示，但在利用Light Field法的情況下，在攝像部11設(shè)置有實(shí)現(xiàn)Light Field法所需的光學(xué)部件。在該光學(xué)部件中，包括微透鏡陣列等，來(lái)自被攝體的入射光經(jīng)由微透鏡陣列等而入射到攝像元件33的受光面(即攝像面)。微透鏡陣列由多個(gè)微透鏡構(gòu)成，對(duì)攝像元件33上的1個(gè)或多個(gè)受光像素分配1個(gè)微透鏡。由此，攝像元件33 的輸出信號(hào)除了包括攝像元件33的受光面上的光的強(qiáng)度分布之外，還包括向攝像元件33 的入射光的前進(jìn)方向的信息?；蛘?，例如也可以利用光學(xué)系統(tǒng)35的軸向色差，如JP特開(kāi)2010-81002號(hào)公報(bào)中記載的方法那樣，根據(jù)對(duì)象輸入圖像的圖像數(shù)據(jù)(RAW數(shù)據(jù))來(lái)生成距離圖。景深設(shè)定部圖5的景深設(shè)定部62被提供距離圖以及對(duì)象輸入圖像的圖像數(shù)據(jù)，而且設(shè)置有設(shè)定用UI生成部63。但是，設(shè)定用UI生成部63也可以考慮設(shè)置于景深設(shè)定部62之外。設(shè)定用UI生成部63生成設(shè)定用UI (用戶界面，User Interface)，并使設(shè)定用UI與任意的圖像一起顯示于顯示畫(huà)面51。景深設(shè)定部62基于用戶的指示內(nèi)容來(lái)生成深度設(shè)定信息。對(duì)深度設(shè)定信息產(chǎn)生影響的用戶的指示通過(guò)觸控面板操作或按鈕操作來(lái)實(shí)現(xiàn)。按鈕操作包括對(duì)設(shè)置于操作部17的任意的操作用部件(按鈕、十字鍵、撥號(hào)盤(dial)、控制桿等)的操作。在深度設(shè)定信息中含有指定對(duì)象輸出圖像的景深的信息，根據(jù)該信息來(lái)指定屬于對(duì)象輸出圖像的景深的合焦基準(zhǔn)距離、近點(diǎn)距離以及遠(yuǎn)點(diǎn)距離。景深的近點(diǎn)距離和景深的遠(yuǎn)點(diǎn)距離的差被稱作景深的深度。因此，根據(jù)深度設(shè)定信息，對(duì)象輸出圖像中的景深的深度也被指定。如圖7所示，將任意的關(guān)注圖像的合焦基準(zhǔn)距離表示為記號(hào)Lo，并且將關(guān)注圖像的景深的近點(diǎn)距離以及遠(yuǎn)點(diǎn)距離分別表示為記號(hào)Ln以及Lf。關(guān)注圖像例如是對(duì)象輸入圖像或?qū)ο筝敵鰣D像。參照?qǐng)D8(a) (c)，對(duì)景深、合焦基準(zhǔn)距離Lo、近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf的意義進(jìn)行說(shuō)明。如圖8(a)所示，假想如下?tīng)顟B(tài)在攝像部11的拍攝范圍內(nèi)含有理想的點(diǎn)光源 330作為被攝體。在攝像部11中，來(lái)自點(diǎn)光源330的入射光經(jīng)由光學(xué)系統(tǒng)35而在成像點(diǎn)上成像，但在該成像點(diǎn)位于攝像元件33的攝像面上時(shí)，攝像面上的點(diǎn)光源330的像的直徑實(shí)際上為零，比攝像元件33的容許彌散圓直徑小。另一方面，在該成像點(diǎn)不位于攝像元件 33的攝像面上的情況下，在攝像面上點(diǎn)光源330的光學(xué)圖像模糊，結(jié)果，攝像面上的點(diǎn)光源 330的像的直徑有可能大于容許彌散圓直徑。在攝像面上的點(diǎn)光源330的像的直徑為容許彌散圓直徑以下時(shí)，作為點(diǎn)光源330的被攝體在攝像面上合焦，在攝像面上的點(diǎn)光源330的像的直徑比容許彌散圓直徑大時(shí)，作為點(diǎn)光源330的被攝體沒(méi)有在攝像面上合焦。同樣地考慮，如圖8(b)所示，在關(guān)注圖像340中作為被攝體的像包括點(diǎn)光源330 的像330’的情況下，在像330’的直徑為與容許彌散圓直徑相當(dāng)?shù)幕鶞?zhǔn)徑Rkef以下時(shí)，在關(guān)注圖像340中作為點(diǎn)光源330的被攝體合焦，在像330’的直徑大于該基準(zhǔn)徑Rkef時(shí)，在關(guān)注圖像340中作為點(diǎn)光源330的被攝體沒(méi)有合焦。在關(guān)注圖像340中，將合焦的被攝體稱作合焦被攝體，將沒(méi)有合焦的被攝體稱作非合焦被攝體。在某被攝體位于關(guān)注圖像340的景深內(nèi)的情況(換言之，某被攝體的被攝體距離屬于關(guān)注圖像340的景深的情況)下，該被攝體在關(guān)注圖像340上是合焦被攝體。在某被攝體不位于關(guān)注圖像340的景深內(nèi)的情況(換言之，某被攝體的被攝體距離不屬于關(guān)注圖像340的景深的情況)下，該被攝體在關(guān)注圖像 340上是非合焦被攝體。如圖8(c)所示，像330’的直徑為基準(zhǔn)徑Rkef以下的被攝體距離的范圍是關(guān)注圖像340的景深，關(guān)注圖像340的合焦基準(zhǔn)距離Lo、近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf屬于關(guān)注圖像340的景深。對(duì)像330’的直徑賦予最小值的被攝體距離是關(guān)注圖像340的合焦基準(zhǔn)距離Lo，關(guān)注圖像340的景深內(nèi)的、最小的距離以及最大的距離分別是近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf。合焦?fàn)顟B(tài)確認(rèn)用圖像生成部圖5的合焦?fàn)顟B(tài)確認(rèn)用圖像生成部64 (以下，有時(shí)簡(jiǎn)記為確認(rèn)用圖像生成部64或生成部64)生成確認(rèn)用圖像，該確認(rèn)用圖像用于將根據(jù)深度設(shè)定信息而生成的對(duì)象輸出圖像的合焦?fàn)顟B(tài)通知給用戶。生成部64能夠基于深度設(shè)定信息以及對(duì)象輸入圖像的圖像數(shù)據(jù)來(lái)生成確認(rèn)用圖像。生成部64根據(jù)需要也可以將距離圖以及對(duì)象輸出圖像的圖像數(shù)據(jù)利用于確認(rèn)用圖像的生成。通過(guò)將確認(rèn)用圖像顯示在顯示畫(huà)面51中，用戶能夠識(shí)別已經(jīng)生成的對(duì)象輸出圖像的合焦?fàn)顟B(tài)、或者將來(lái)生成的預(yù)定的對(duì)象輸出圖像的合焦?fàn)顟B(tài)。數(shù)字聚焦部圖5的數(shù)字聚焦部(對(duì)象輸出圖像生成部)65能夠?qū)崿F(xiàn)變更對(duì)象輸入圖像的景深的圖像處理。將該圖像處理稱作數(shù)字聚焦。通過(guò)數(shù)字聚焦能夠根據(jù)對(duì)象輸入圖像來(lái)生成具有任意的景深的對(duì)象輸出圖像。數(shù)字聚焦部65通過(guò)基于對(duì)象輸入圖像的圖像數(shù)據(jù)、距離圖以及深度設(shè)定信息的數(shù)字聚焦，能夠按照使對(duì)象輸出圖像的景深與在深度設(shè)定信息中規(guī)定的景深一致的方式來(lái)生成對(duì)象輸出圖像。能夠?qū)⑸傻膶?duì)象輸出圖像顯示在監(jiān)視器15上， 并且也能將對(duì)象輸出圖像的圖像數(shù)據(jù)記錄在記錄介質(zhì)16中。對(duì)象輸入圖像是理想的或模擬的全合焦圖像。全合焦圖像是指對(duì)在全合焦圖像上存在圖像數(shù)據(jù)的所有的被攝體合焦的圖像。在關(guān)注圖像上的全部被攝體為合焦被攝體時(shí)， 關(guān)注圖像為全合焦圖像。具體而言，例如通過(guò)在攝像部11中利用所謂泛焦(深焦)來(lái)拍攝對(duì)象輸入圖像，能夠使對(duì)象輸入圖像成為理想的或模擬的全合焦圖像。即，只要使拍攝對(duì)象輸入圖像時(shí)的攝像部11的景深足夠深，來(lái)拍攝對(duì)象輸入圖像即可。只要攝像部11的拍攝范圍中包括的全部被攝體收納于拍攝對(duì)象輸入圖像時(shí)的攝像部11的景深內(nèi)，則對(duì)象輸入圖像起到理想的全合焦圖像的作用。在以下的說(shuō)明中，只要沒(méi)有特別說(shuō)明，則假設(shè)攝像部11 的拍攝范圍中包括的全部被攝體被收納于拍攝對(duì)象輸入圖像時(shí)的攝像部11的景深內(nèi)。此外，在以下的說(shuō)明中，在只說(shuō)了景深、合焦基準(zhǔn)距離、近點(diǎn)距離以及遠(yuǎn)點(diǎn)距離的情況下，它們是指對(duì)象輸出圖像的景深、合焦基準(zhǔn)距離、近點(diǎn)距離以及遠(yuǎn)點(diǎn)距離。此外，認(rèn)為與景深的內(nèi)和外的邊界距離相當(dāng)?shù)慕c(diǎn)距離以及遠(yuǎn)點(diǎn)距離是景深內(nèi)的距離(換言之，屬于景深)。數(shù)字聚焦部65從距離圖中提取與對(duì)象輸入圖像的各像素對(duì)應(yīng)的被攝體距離，并基于深度設(shè)定信息來(lái)將對(duì)象輸入圖像的各像素分類為與對(duì)象輸出圖像的景深外的被攝體距離對(duì)應(yīng)的模糊對(duì)象像素；和與對(duì)象輸出圖像的景深內(nèi)的被攝體距離對(duì)應(yīng)的非模糊對(duì)象像素。將包括所有的模糊對(duì)象像素的圖像區(qū)域稱作模糊對(duì)象區(qū)域，將包括所有的非模糊對(duì)象像素的圖像區(qū)域稱作非模糊對(duì)象區(qū)域。像這樣，數(shù)字聚焦部65基于距離圖以及深度設(shè)定信息，能夠?qū)?duì)象輸入圖像的整體圖像區(qū)域分類為模糊對(duì)象區(qū)域和非模糊對(duì)象區(qū)域。例如，在圖6(a)的對(duì)象輸入圖像310中存在被攝體SUB1的圖像數(shù)據(jù)的圖像區(qū)域，若被攝體距離L1 位于對(duì)象輸出圖像的景深外，則分類為模糊對(duì)象區(qū)域，若被攝體距離L1位于對(duì)象輸出圖像的景深內(nèi)，則分類為非模糊對(duì)象區(qū)域(還參照?qǐng)D6(c))。數(shù)字聚焦部65能夠只對(duì)對(duì)象輸入圖像的模糊對(duì)象區(qū)域?qū)嵤┠：幚?，并生成該模糊處理后的?duì)象輸入圖像作為對(duì)象輸出圖像。模糊處理是將實(shí)施模糊處理的圖像區(qū)域(即，模糊對(duì)象區(qū)域)內(nèi)的圖像模糊化的處理。通過(guò)二維的空間濾波能夠?qū)崿F(xiàn)模糊處理。在模糊處理的空間濾波中使用的濾波器是適合圖像的平滑化的任意的空間濾波器(例如，平均化濾波器、加權(quán)平均濾波器或高斯濾波器)。具體來(lái)說(shuō)，例如，數(shù)字聚焦部65按照每個(gè)模糊對(duì)象像素來(lái)從距離圖中提取與模糊對(duì)象像素對(duì)應(yīng)的被攝體距離Lbliik，根據(jù)提取出的被攝體距離Lbuik和深度設(shè)定信息按照每個(gè)模糊對(duì)象像素設(shè)定模糊量。關(guān)于某模糊對(duì)象像素，在提取出的被攝體距離Lbuik比近點(diǎn)距離 Ln小的情況下，按照距離差(Lii-Lblm)越大則使針對(duì)該模糊對(duì)象像素的模糊量越大的方式來(lái)設(shè)定模糊量，并且，在提取出的被攝體距離Lbuik比遠(yuǎn)點(diǎn)距離Lf大的情況下，按照距離差 (LBLUE-Lf)越大則使針對(duì)該模糊對(duì)象像素的模糊量越大的方式來(lái)設(shè)定模糊量。然后，通過(guò)按照每個(gè)模糊對(duì)象像素，利用與模糊量對(duì)應(yīng)的空間濾波器來(lái)將模糊對(duì)象像素的像素信號(hào)平滑化，能夠?qū)崿F(xiàn)模糊處理。此時(shí)，模糊量越大則越增大使用的空間濾波器的濾波器尺寸即可。由此，模糊量越大則對(duì)應(yīng)的像素信號(hào)被越大地模糊化。結(jié)果，在對(duì)象輸出圖像中不收納于景深內(nèi)的被攝體， 越遠(yuǎn)離景深則越大地被模糊化。此外，也可以通過(guò)頻率濾波來(lái)實(shí)現(xiàn)模糊處理。模糊處理也可以是使模糊對(duì)象區(qū)域內(nèi)的圖像的空間頻率分量中的、比較高的空間頻率分量減小的低通濾波器處理。圖9是表示對(duì)象輸出圖像的生成動(dòng)作的流程的流程圖。首先，在步驟Sll以及S12 中，通過(guò)拍攝來(lái)取得對(duì)象輸入圖像的圖像數(shù)據(jù)，并且通過(guò)上述方法來(lái)取得距離圖。在步驟 S13中，進(jìn)行景深的初始設(shè)定。在該初始設(shè)定中，將針對(duì)所有的被攝體距離的模糊量設(shè)定為零。將針對(duì)所有的被攝體距離的模糊量設(shè)定為零相當(dāng)于將對(duì)象輸入圖像的整體圖像區(qū)域設(shè)定為非模糊對(duì)象區(qū)域。在接下來(lái)的步驟S14中，將對(duì)象輸入圖像顯示于顯示畫(huà)面51中。在顯示對(duì)象輸入圖像的同時(shí)也可以顯示任意的標(biāo)志。該標(biāo)志例如是文件名、拍攝日期和時(shí)間、由設(shè)定用UI 生成部63生成的設(shè)定用UI (關(guān)于設(shè)定用UI的具體例見(jiàn)后述)。在步驟S14中，也可以不顯示對(duì)象輸入圖像本身，而顯示基于對(duì)象輸入圖像的圖像。這里的基于對(duì)象輸入圖像的圖像包括對(duì)對(duì)象輸入圖像實(shí)施分辨率變換而得到的圖像、對(duì)對(duì)象輸入圖像實(shí)施特定的圖像處理而得到的圖像。接下來(lái)，在步驟S15中，攝像裝置1接受用戶所進(jìn)行的指示景深的變更的調(diào)整指示 (變更指示)或者指示景深的調(diào)整完成的確定指示。調(diào)整指示以及確定指示分別通過(guò)規(guī)定的觸控面板操作或按鈕操作來(lái)進(jìn)行。在進(jìn)行了調(diào)整指示的情況下從步驟S15轉(zhuǎn)移到步驟S16，另一方面，在進(jìn)行了確定指示的情況下從步驟S15轉(zhuǎn)移到步驟S18。在步驟S16中，景深設(shè)定部62按照調(diào)整指示的內(nèi)容來(lái)變更深度設(shè)定信息，在接下來(lái)的步驟S17中，確認(rèn)用圖像生成部64利用變更后的深度設(shè)定信息來(lái)生成基于對(duì)象輸入圖像的圖像即確認(rèn)用圖像(確認(rèn)用圖像的具體例在第4實(shí)施例等中說(shuō)明)。在步驟S17中生成的確認(rèn)用圖像被顯示在顯示畫(huà)面51中，保持進(jìn)行該顯示的狀態(tài)，返回到步驟S15。S卩，在顯示著確認(rèn)用圖像的狀態(tài)下，再次接受步驟S15中的調(diào)整操作。此時(shí)，若進(jìn)行了確定指示則執(zhí)行步驟S18以及S19的處理，而若再次進(jìn)行了調(diào)整指示則按照再次的調(diào)整指示來(lái)再次執(zhí)行步驟S16以及S17的處理。此外，也可以將由設(shè)定用UI生成部63生成的設(shè)定用UI與確認(rèn)用圖像一起顯示在顯示畫(huà)面51中。在步驟S18中，數(shù)字聚焦部65通過(guò)基于深度設(shè)定信息的數(shù)字聚焦來(lái)根據(jù)對(duì)象輸入圖像生成對(duì)象輸出圖像。生成的對(duì)象輸出圖像被顯示于顯示畫(huà)面51中。在步驟S15中調(diào)整指示一次都沒(méi)有進(jìn)行的情況下，可以將對(duì)象輸入圖像本身生成為對(duì)象輸出圖像。在步驟 S15中進(jìn)行了調(diào)整指示的情況下，基于按照調(diào)整指示變更后的深度設(shè)定信息來(lái)生成對(duì)象輸出圖像。此后，在步驟S19中，將對(duì)象輸出圖像的圖像數(shù)據(jù)記錄在記錄介質(zhì)16中。在對(duì)象輸入圖像的圖像數(shù)據(jù)記錄在記錄介質(zhì)16中的情況下，在記錄對(duì)象輸出圖像的圖像數(shù)據(jù)時(shí)， 既可以將對(duì)象輸入圖像的圖像數(shù)據(jù)從記錄介質(zhì)16中刪除，也可以保持對(duì)象輸入圖像的圖像數(shù)據(jù)的記錄。此外，在接受了調(diào)整指示后，也可以不等待確定指示的輸入而直接生成對(duì)象輸出圖像。與此類似，在步驟S16中變更了景深變更信息之后，也可以不進(jìn)行確認(rèn)用圖像的生成以及顯示，而直接進(jìn)行基于變更后的深度設(shè)定信息的對(duì)象輸出圖像的生成以及顯示，并在進(jìn)行著對(duì)象輸出圖像的顯示的狀態(tài)下再次接受步驟S15中的調(diào)整操作。以下，作為與數(shù)字聚焦的實(shí)現(xiàn)等相關(guān)的具體例，對(duì)第1 第6實(shí)施例進(jìn)行說(shuō)明。只要沒(méi)有矛盾，則也可以將某實(shí)施例中記載的事項(xiàng)和其他實(shí)施例中記載的事項(xiàng)進(jìn)行組合。只要沒(méi)有特別說(shuō)明，在第1 第6實(shí)施例中，假定圖6(a)的對(duì)象輸入圖像310被提供給了圖 5所示的各部位，且距離圖是指針對(duì)對(duì)象輸入圖像310的距離圖。(第1實(shí)施例)對(duì)本發(fā)明所涉及的第1實(shí)施例進(jìn)行說(shuō)明。在圖10(a)中示出了作為設(shè)定用UI的滑動(dòng)條410。滑動(dòng)條410由如下部分構(gòu)成在顯示畫(huà)面51上在固定方向上延伸的長(zhǎng)方形的距離軸圖標(biāo)411 ；和能夠沿著上述固定方向在距離軸圖標(biāo)411上移動(dòng)的條形圖標(biāo)(選擇標(biāo)志)412以及413。距離軸圖標(biāo)411上的位置代表被攝體距離。如圖10 (b)所示，距離軸圖標(biāo)411的長(zhǎng)邊方向的兩端中的一端415與零的被攝體距離對(duì)應(yīng)，另一端416與無(wú)限遠(yuǎn)的被攝體距離或者足夠大的被攝體距離對(duì)應(yīng)。距離軸圖標(biāo)411上的條形圖標(biāo)412以及413的位置分別與近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf對(duì)應(yīng)，因此條形圖標(biāo)412與條形圖標(biāo)413相比總是位于端415側(cè)。此外，距離軸圖標(biāo)411的形狀既可以為長(zhǎng)方形，也可以例如如圖10(c)或(d) 所示，為平行四邊形或梯形。在滑動(dòng)條410被顯示時(shí)，用戶通過(guò)觸控面板操作或按鈕操作能夠在距離軸圖標(biāo) 411上使條形圖標(biāo)412以及413移動(dòng)。例如，在用手指觸碰了條形圖標(biāo)412之后，保持手指和顯示畫(huà)面51的接觸狀態(tài)，同時(shí)使該手指在顯示畫(huà)面51上沿著距離軸圖標(biāo)411延伸的方向移動(dòng)，由此能夠使條形圖標(biāo)412在距離軸圖標(biāo)411上移動(dòng)。對(duì)于條形圖標(biāo)413也是同樣。
12此外，在操作部17設(shè)置有由第1 第4方向鍵構(gòu)成的十字鍵(未圖示)的情況下，例如，也可以通過(guò)第1方向鍵的按下操作來(lái)使條形圖標(biāo)412向端415側(cè)移動(dòng)，通過(guò)第2方向鍵的按下操作來(lái)使條形圖標(biāo)412向端416側(cè)移動(dòng)，通過(guò)第3方向鍵的按下操作來(lái)使條形圖標(biāo)413 向端415側(cè)移動(dòng)，通過(guò)第4方向鍵的按下操作來(lái)使條形圖標(biāo)413向端416側(cè)移動(dòng)。此外，例如，在操作部17設(shè)置有轉(zhuǎn)盤式按鈕的情況下，也可以通過(guò)對(duì)轉(zhuǎn)盤式按鈕的轉(zhuǎn)盤操作來(lái)實(shí)現(xiàn)條形圖標(biāo)412以及413的移動(dòng)。如圖11所示，攝像裝置1在顯示對(duì)象輸入圖像310或基于對(duì)象輸入圖像310的圖像時(shí)，還顯示滑動(dòng)條410，在此狀態(tài)下，接受用戶所進(jìn)行的景深的調(diào)整指示或確定指示(參照?qǐng)D9)。用戶所進(jìn)行的變更條形圖標(biāo)412以及413的位置的觸控面板操作或按鈕操作，相當(dāng)于調(diào)整指示。在距離軸圖標(biāo)411上相互不同的位置對(duì)應(yīng)于相互不同的被攝體距離。景深設(shè)定部62，若通過(guò)調(diào)整指示而變更了條形圖標(biāo)412的位置，則根據(jù)變更后的條形圖標(biāo)412的位置來(lái)變更近點(diǎn)距離Ln，若通過(guò)調(diào)整指示而變更了條形圖標(biāo)413的位置，則根據(jù)變更后的條形圖標(biāo)413的位置來(lái)變更遠(yuǎn)點(diǎn)距離Lf。此外，可以基于近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf來(lái)設(shè)定合焦基準(zhǔn)距離Lo (關(guān)于距離Lo的導(dǎo)出方法見(jiàn)后述)。通過(guò)調(diào)整指示而變更或設(shè)定的距離Ln、Lf以及Lo被反映到深度設(shè)定信息中(圖9的步驟S16)。此外，雖然在圖11中，滑動(dòng)條410的長(zhǎng)邊方向向著顯示畫(huà)面51的水平方向，但可以使滑動(dòng)條410的長(zhǎng)邊方向向著顯示畫(huà)面51上的任意方向。此外，在圖9的步驟S15 S17中，也可以如圖10(e)所示，將表示合焦基準(zhǔn)距離Lo的條形圖標(biāo)418與條形圖標(biāo)412以及413 —起顯示在距離軸圖標(biāo)411上。用戶若確認(rèn)了條形圖標(biāo)412以及413已配置于希望的位置上，則可以進(jìn)行上述確定指示。若進(jìn)行了確定指示，則基于進(jìn)行確定指示的時(shí)間點(diǎn)上的深度設(shè)定信息來(lái)生成對(duì)象輸出圖像(圖9的步驟S18)。此外，將對(duì)象輸入圖像的各像素位置上的被攝體距離作為變量來(lái)使用而求出的直方圖稱作距離直方圖。在圖12中示出與對(duì)象輸入圖像310對(duì)應(yīng)的距離直方圖430。距離直方圖430示出了對(duì)象輸入圖像310的各像素位置上的被攝體距離的分布。攝像裝置1(例如，景深設(shè)定部62或設(shè)定用UI生成部63)能夠基于對(duì)象輸入距離310的距離圖來(lái)生成距離直方圖430。在距離直方圖430中，橫軸是表示被攝體距離的距離軸431。距離直方圖430 的縱軸與距離直方圖430的度數(shù)對(duì)應(yīng)。例如，在具有被攝體距離L1的像素值的像素在距離圖中存在Q個(gè)的情況下，在距離直方圖430中針對(duì)被攝體距離L1的度數(shù)(像素?cái)?shù))為(KQ 為整數(shù))?？梢詫⒕嚯x直方圖430包括于設(shè)定用UI中，在顯示圖10(a)的滑動(dòng)條410時(shí)，還顯示距離直方圖430。此時(shí)，如圖13(a)所示，可以將滑動(dòng)條410上的距離軸圖標(biāo)411和距離直方圖430上的距離軸431對(duì)應(yīng)關(guān)聯(lián)起來(lái)，使條形圖標(biāo)412以及413能夠沿著距離軸431 移動(dòng)。例如，使距離軸圖標(biāo)411的長(zhǎng)邊方向以及距離軸431的方向與顯示畫(huà)面51的水平方向一致，并且使與顯示畫(huà)面51上的任意的水平位置Hp對(duì)應(yīng)的距離軸圖標(biāo)411上的被攝體距離、和與該水平位置Hp對(duì)應(yīng)的距離軸431上的被攝體距離一致。由此，距離軸圖標(biāo)411上的條形圖標(biāo)412以及413的移動(dòng)成為沿著距離軸431的移動(dòng)。在圖13(a)所示的例子中， 距離直方圖430和滑動(dòng)條410在垂直方向上并列顯示，但也可以在距離直方圖430中嵌入滑動(dòng)條410。S卩，例如如圖13(b)所示，也可以將距離軸圖標(biāo)411顯示為距離軸431。
攝像裝置1在顯示對(duì)象輸入圖像310或基于對(duì)象輸入圖像310的圖像時(shí)，還顯示包括距離直方圖430以及滑動(dòng)條410的設(shè)定用UI，在此狀態(tài)下，能夠接受用戶所進(jìn)行的景深的調(diào)整指示或者確定指示(參照?qǐng)D9)。在此情況下的調(diào)整指示，與只有滑動(dòng)條410包括于設(shè)定用UI中的情況相同，是變更條形圖標(biāo)412以及413的位置的觸控面板操作或按鈕操作，伴隨條形圖標(biāo)412以及413的位置變更的、距離Ln、Lf以及Lo的設(shè)定動(dòng)作等與上述情況相同。用戶若確認(rèn)了條形圖標(biāo)412以及413已配置于希望的位置，則可以進(jìn)行上述確定指示。若進(jìn)行了確定指示，則基于進(jìn)行確定指示的時(shí)間點(diǎn)上的深度設(shè)定信息來(lái)生成對(duì)象輸出圖像(圖9的步驟S18)。通過(guò)利用上述那樣的滑動(dòng)條，能夠通過(guò)直觀且簡(jiǎn)單的操作來(lái)設(shè)定景深。此時(shí)，通過(guò)與距離直方圖一起顯示，用戶能夠在把握了被攝體距離的分布的狀態(tài)下設(shè)定景深。例如，將位于攝像裝置1的附近且度數(shù)較多的代表性的被攝體距離(例如，與被攝體SUBji應(yīng)的被攝體距離L1)包括于景深內(nèi)，或者，將雖然度數(shù)較多但相當(dāng)大的被攝體距離(例如，相當(dāng)于背景的、與被攝體SU&對(duì)應(yīng)的被攝體距離L3)從景深中除去這樣的調(diào)整變得容易，用戶容易設(shè)定希望的景深。在進(jìn)行使條形圖標(biāo)412以及413在距離軸圖標(biāo)411上或距離直方圖430的距離軸 431上移動(dòng)的觸控面板操作或按鈕操作時(shí)，既可以使滑動(dòng)條412以及413的位置連續(xù)地變化，也可以使滑動(dòng)條412以及413的位置從在距離軸圖標(biāo)411上或距離軸431上離散地存在的某代表距離階段性地變化為其他代表距離。由此，特別是在通過(guò)按鈕操作來(lái)指示條形圖標(biāo)412以及413的移動(dòng)的情況下，能夠更容易且迅速地設(shè)定景深。例如，考慮針對(duì)距離直方圖430只將被攝體距離L1 L3設(shè)定為代表距離的情況。在此情況下，與第1 第3代表距離L1 L3對(duì)應(yīng)的第1 第3代表位置被設(shè)定于距離軸圖標(biāo)411上或距離軸431上。然后， 在條形圖標(biāo)412配置于第2代表位置時(shí)，用戶若進(jìn)行了使條形圖標(biāo)412移動(dòng)1個(gè)單位量的操作，則條形圖標(biāo)412的位置向第1或第3代表位置移動(dòng)(對(duì)于條形圖標(biāo)413也是同樣)。設(shè)定用UI生成部63可以根據(jù)距離直方圖430上的各被攝體距離的度數(shù)來(lái)設(shè)定代表距離。例如，在距離直方圖430中，可以將度數(shù)集中的被攝體距離設(shè)定為代表距離。更具體來(lái)說(shuō)，例如，在距離直方圖430中，可以將具有規(guī)定的閾值以上的度數(shù)的被攝體距離設(shè)定為代表距離。在距離直方圖430中，在具有規(guī)定的閾值以上的度數(shù)的被攝體距離在一定距離范圍內(nèi)連續(xù)存在的情況下，可以將該一定距離范圍的中心距離設(shè)定為代表距離。也可以將具有一定距離寬度的窗設(shè)定于距離直方圖430上，并在屬于窗內(nèi)的度數(shù)的合計(jì)為規(guī)定的閾值以上的情況下，將該窗的中心距離設(shè)定為代表距離。此外，也可以從對(duì)象輸入圖像310的圖像數(shù)據(jù)中提取作為被攝體距離具有代表距離的被攝體的圖像數(shù)據(jù)，并在接受到調(diào)整指示或確定指示時(shí)，將基于提取出的圖像數(shù)據(jù)的圖像(以下，稱作代表距離物體圖像)與距離直方圖430上的代表距離對(duì)應(yīng)起來(lái)顯示。也可以認(rèn)為代表距離物體圖像也包括于設(shè)定用UI中。假定被攝體距離L1 L3被設(shè)定為第1 第3代表距離的情況，來(lái)對(duì)代表距離物體圖像的生成以及顯示方法進(jìn)行說(shuō)明。設(shè)定用UI生成部63基于距離圖來(lái)檢測(cè)作為被攝體距離具有代表距離L1或代表距離L1的附近距離的圖像區(qū)域，并從對(duì)象輸入圖像310中提取檢測(cè)出的圖像區(qū)域內(nèi)的圖像數(shù)據(jù)作為第1代表距離物體圖像的圖像數(shù)據(jù)。代表距離L1的附近距離是指例如與代表距離L1之間的距離差為規(guī)定值以下的距離。同樣，還提取與代表距離L2以及L3對(duì)應(yīng)的第2以及第3代表距離物體圖像的圖像數(shù)據(jù)。代表距離L1 L3分別與第1 第3代表距離物體圖像對(duì)應(yīng)關(guān)聯(lián)。然后，如圖14所示，可以按照使用戶明了距離軸圖標(biāo)411上或距離直方圖430的距離軸431上的代表距離L1 L3、與第1 第3代表距離物體圖像之間的對(duì)應(yīng)關(guān)系的方式，將第1 第3代表距離物體圖像與滑動(dòng)條410以及距離直方圖430 —起顯示。在圖14中，圖像441 443分別為第1 第3代表距離物體圖像， 分別顯示于與代表距離L1 L3對(duì)應(yīng)的位置。通過(guò)將代表距離物體圖像與滑動(dòng)條410以及距離直方圖430 —起顯示，用戶能夠直觀且容易地識(shí)別收納于對(duì)象輸出圖像的景深內(nèi)的被攝體、以及位于對(duì)象輸出圖像的景深外的被攝體，更容易將景深設(shè)定為希望的景深。此外，也可以在設(shè)定用UI中包括滑動(dòng)條410以及代表距離物體圖像，而另一方面從設(shè)定用UI中去掉距離直方圖430，并與圖14同樣地，在接受到調(diào)整指示或確定指示時(shí)，將各代表距離物體圖像與距離軸圖標(biāo)411上的代表距離對(duì)應(yīng)關(guān)聯(lián)來(lái)顯示。此外，設(shè)定用UI的顯示位置是任意的。既可以按照將設(shè)定用UI重疊于對(duì)象輸入圖像310上的方式來(lái)顯示，也可以將設(shè)定用UI和對(duì)象輸入圖像310在顯示畫(huà)面上并列顯示。 此外，距離軸圖標(biāo)411的長(zhǎng)邊方向以及距離軸431的方向也可以為顯示畫(huà)面51的水平方向以外。對(duì)合焦基準(zhǔn)距離Lo的計(jì)算方法進(jìn)行說(shuō)明。已知通過(guò)拍攝而得到的關(guān)注圖像的合焦基準(zhǔn)距離Lo，滿足下述式(1)以及O)。在此，δ是預(yù)先設(shè)定的攝像元件33的容許彌散圓直徑，f是拍攝關(guān)注圖像時(shí)的攝像部11的焦點(diǎn)距離，F(xiàn)是拍攝關(guān)注圖像時(shí)的攝像部11的光圈值。式(1)以及⑵中的Ln以及Lf分別為關(guān)注圖像的近點(diǎn)距離以及遠(yuǎn)點(diǎn)距離。δ = (f2 . (Lo-Ln)) / (F · Lo · Ln) · · · (1)δ = (f2 . (Lf-Lo)) / (F · Lo · Lf) · · · (2)根據(jù)式⑴以及⑵能夠得到下述式(3)。Lo = 2 · Ln · Lf/(Ln+Lf)· · ·⑶因此，景深設(shè)定部62通過(guò)在設(shè)定對(duì)象輸出圖像的近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf之后，將設(shè)定的距離Ln以及Lf代入到式(3)中，能夠求出對(duì)象輸出圖像的合焦基準(zhǔn)距離Lo。 此外，景深設(shè)定部62也可以在設(shè)定對(duì)象輸出圖像的近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf之后，簡(jiǎn)單地將距離((Ln+Lf)/2)設(shè)定為對(duì)象輸出圖像的合焦基準(zhǔn)距離Lo。(第2實(shí)施例)對(duì)本發(fā)明所涉及的第2實(shí)施例進(jìn)行說(shuō)明。在第2實(shí)施例中，對(duì)在圖9的步驟S15 中可能進(jìn)行的調(diào)整指示的另一具體方法進(jìn)行說(shuō)明。在步驟S15中進(jìn)行調(diào)整指示時(shí)在顯示畫(huà)面51中顯示的圖像，是對(duì)象輸入圖像310本身或基于對(duì)象輸入圖像310的圖像，而在此，為了說(shuō)明的簡(jiǎn)單化，假定在步驟S15中進(jìn)行調(diào)整指示時(shí)，顯示對(duì)象輸入圖像310本身(在后述的第3實(shí)施例中也是同樣)。第2實(shí)施例中的調(diào)整指示通過(guò)指定顯示畫(huà)面51上的多個(gè)特定物體的指定操作來(lái)實(shí)現(xiàn)，用戶可以將該指定操作作為觸控面板操作的一種來(lái)進(jìn)行。景深設(shè)定部62按照使通過(guò)指定操作而指定的多個(gè)特定物體收納于對(duì)象輸出圖像的景深內(nèi)的方式來(lái)生成深度設(shè)定信息。更具體來(lái)說(shuō)，從對(duì)象輸入圖像310的距離圖中提取指定的各特定物體的被攝體距離，并按照使提取出的所有的被攝體距離屬于對(duì)象輸出圖像的景深的方式，基于提取出的被攝體距離來(lái)設(shè)定對(duì)象輸出圖像的景深中的兩端距離(即，近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf)。并且， 與第1實(shí)施例同樣地，基于近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf來(lái)設(shè)定合焦基準(zhǔn)距離Lo。設(shè)定內(nèi)容被反映到深度設(shè)定信息中。具體來(lái)說(shuō)，例如，用戶通過(guò)用手指觸碰顯示畫(huà)面51上的被攝體SUB1的顯示位置 501以及被攝體SU&的顯示位置502(參照?qǐng)D15)，能夠?qū)⒈粩z體SUB1以及SUB2指定為多個(gè)特定物體。用手指觸碰多個(gè)顯示位置的觸控面板操作既可以同時(shí)進(jìn)行，也可以不同時(shí)進(jìn)行。在被攝體SUB1以及5皿2被指定為多個(gè)特定物體的情況下，從距離圖中提取與顯示位置501以及502對(duì)應(yīng)的像素位置的被攝體距離、即被攝體SUB1以及SUB2的被攝體距離L1 以及L2,按照使提取出的被攝體距離L1以及L2屬于對(duì)象輸出圖像的景深的方式來(lái)設(shè)定近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf，并且計(jì)算出合焦基準(zhǔn)距離Lo。因?yàn)長(zhǎng)1 < L2，所以可以將被攝體距離L1以及L2分別設(shè)定為近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf。由此，被攝體SUB1以及SUB2將收納于對(duì)象輸出圖像的景深內(nèi)。或者，也可以將距離(L1-ALn)以及(L2+ALf)分別設(shè)定為近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf。其中，ALn > 0且ALf > 0。在指定3個(gè)以上的被攝體作為多個(gè)特定物體的情況下，可以根據(jù)與3個(gè)以上的特定物體對(duì)應(yīng)的被攝體距離中的最小距離來(lái)設(shè)定近點(diǎn)距離Ln，并且根據(jù)與3個(gè)以上的特定物體對(duì)應(yīng)的被攝體距離中的最大距離來(lái)設(shè)定遠(yuǎn)點(diǎn)距離Lf。例如，若用戶除了顯示位置501 以及502之外還用手指觸碰了顯示畫(huà)面51上的被攝體SUB3的顯示位置503，則將被攝體 SUB1 SUB3指定為多個(gè)特定物體。在指定了被攝體SUB1 SUB3作為多個(gè)特定物體的情況下，從距離圖中提取與顯示位置501 503對(duì)應(yīng)的像素位置的被攝體距離、即被攝體SUB1 SUB3的被攝體距離L1 L3。提取出的被攝體距離L1 L3中的最小距離為被攝體距離L1, 最大距離為被攝體距離L3。因此，在此情況下，可以將被攝體距離L1以及L3分別設(shè)定為近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf。由此，被攝體SUBi S 3將收納于對(duì)象輸出圖像的景深內(nèi)。 或者，也可以將距離(L1-ALn)以及(L3+ALf)分別設(shè)定為近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf。根據(jù)第2實(shí)施例，能夠按照使希望的被攝體收納于景深內(nèi)的方式，容易且迅速地設(shè)定對(duì)象輸出圖像的景深。此外，在接受指定多個(gè)特定物體的指定操作時(shí)，也可以將在第1實(shí)施例中說(shuō)明了的滑動(dòng)條410(參照?qǐng)D10 (a))、或者滑動(dòng)條410和距離直方圖430的組合(參照?qǐng)D13(a)或 (b))、或者滑動(dòng)條410和距離直方圖430以及代表距離物體圖像的組合(參照?qǐng)D14)與對(duì)象輸入圖像310 —起顯示，并將通過(guò)指定操作而設(shè)定的近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf反映到條形圖標(biāo)412以及413的位置上。并且，也可以將通過(guò)指定操作而設(shè)定的合焦基準(zhǔn)距離 Lo反映到條形圖標(biāo)418的位置上(參照?qǐng)D10(e))。此外，為了使用戶所進(jìn)行的指定操作變得容易，也可以通過(guò)在第1實(shí)施例中說(shuō)明了的方法來(lái)求出代表距離，并在接受指定多個(gè)特定物體的指定操作時(shí)，將位于代表距離的被攝體增強(qiáng)顯示。例如，在被攝體距離L1 L3被設(shè)定為第1 第3代表距離的情況下， 也可以在顯示了對(duì)象輸入圖像310的顯示畫(huà)面51上，將與代表距離L1 L3對(duì)應(yīng)的被攝體 SUB1 SUB3增強(qiáng)顯示。被攝體SUB1的增強(qiáng)顯示通過(guò)顯示畫(huà)面51上的被攝體SUB1的亮度的增加或被攝體SUB1的輪廓增強(qiáng)(輪郭強(qiáng)調(diào))等能夠?qū)崿F(xiàn)(關(guān)于被攝體SUB2以及SUB3也是同樣)。
(第3實(shí)施例)對(duì)本發(fā)明所涉及的第3實(shí)施例進(jìn)行說(shuō)明。在第3實(shí)施例中，對(duì)在圖9的步驟S15 中可能進(jìn)行的調(diào)整指示的又一具體方法進(jìn)行說(shuō)明。第3實(shí)施例中的調(diào)整指示通過(guò)指定顯示畫(huà)面51上的特定物體的指定操作來(lái)實(shí)現(xiàn)， 用戶可以將該指定操作作為觸控面板操作的一種來(lái)進(jìn)行。景深設(shè)定部62按照使通過(guò)指定操作而指定的特定物體收納于對(duì)象輸出圖像的景深內(nèi)的方式來(lái)生成深度設(shè)定信息。此時(shí)， 在指定操作中根據(jù)用手指觸碰顯示畫(huà)面51上的特定物體的時(shí)間的長(zhǎng)度TL來(lái)決定對(duì)象輸出圖像的景深的深度。具體來(lái)說(shuō)，例如，在想要得到使被攝體SUB1收納于景深內(nèi)的對(duì)象輸出圖像的情況下，用戶通過(guò)用手指觸碰顯示畫(huà)面51上的被攝體SUB1的顯示位置501 (參照?qǐng)D1 ，能夠?qū)⒈粩z體SUB1指定為特定物體。該手指在顯示位置501上觸碰顯示畫(huà)面51的時(shí)間長(zhǎng)度為長(zhǎng)度TL。在指定了被攝體SUB1作為特定物體的情況下，從距離圖中提取與顯示位置501對(duì)應(yīng)的像素位置的被攝體距離、即被攝體SUB1的被攝體距離L1,并按照使提取出的被攝體距離L1屬于對(duì)象輸出圖像的景深的方式，根據(jù)時(shí)間長(zhǎng)度TL來(lái)設(shè)定近點(diǎn)距離Lru遠(yuǎn)點(diǎn)距離Lf 以及合焦基準(zhǔn)距離Lo。設(shè)定內(nèi)容被反映到深度設(shè)定信息中。由此，被攝體SUA將處于對(duì)象輸出圖像的景深內(nèi)。近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf間的距離差(Lf-Ln)代表對(duì)象輸出圖像的景深的深度。在第3實(shí)施例中，距離差(Lf-Ln)根據(jù)時(shí)間長(zhǎng)度TL來(lái)決定。具體來(lái)說(shuō)，例如，可以隨著時(shí)間長(zhǎng)度TL從零開(kāi)始增大，而使距離差(Lf-Ln)從比零大的初始值開(kāi)始增大。此時(shí)，可以隨著時(shí)間長(zhǎng)度TL從零開(kāi)始增大而使遠(yuǎn)點(diǎn)距離Lf增加，或者使近點(diǎn)距離Ln減小，或者在使遠(yuǎn)點(diǎn)距離Lf增加的同時(shí)使近點(diǎn)距離Ln減小。反之，也可以隨著時(shí)間長(zhǎng)度TL從零開(kāi)始增大， 使距離差(Lf-Ln)從一定的初始值開(kāi)始向下限值減小。此時(shí)，隨著時(shí)間長(zhǎng)度TL從零開(kāi)始增大而使遠(yuǎn)點(diǎn)距離Lf減小，或者使近點(diǎn)距離Ln增加，或者在使遠(yuǎn)點(diǎn)距離Lf減小的同時(shí)使近點(diǎn)距離Ln增加。在指定了被攝體SUB1作為特定物體的情況下，可以按照使"L1 = (Lf+Ln)/2”成立的方式來(lái)設(shè)定近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf，并基于設(shè)定的距離Ln以及Lf來(lái)求出合焦基準(zhǔn)距離Lo?；蛘?，也可以使合焦基準(zhǔn)距離Lo與被攝體距離L1 一致。但是，只要被攝體距離 L1屬于對(duì)象輸出圖像的景深，則被攝體距離L1也可以為“(Lf+Ln)/2”以及合焦基準(zhǔn)距離Lo 以外。根據(jù)第3實(shí)施例，能夠通過(guò)容易且迅速的操作來(lái)生成使希望的被攝體收納于于景深內(nèi)的、具有希望的景深的深度的對(duì)象輸出圖像。此外，在接受指定特定物體的指定操作時(shí)，也可以將在第1實(shí)施例中說(shuō)明了的滑動(dòng)條410 (參照?qǐng)D10 (a))、或者滑動(dòng)條410和距離直方圖430的組合(參照?qǐng)D13 (a)或(b))、 或者滑動(dòng)條410和距離直方圖430以及代表距離物體圖像的組合(參照?qǐng)D14)與對(duì)象輸入圖像310 —起顯示，并將通過(guò)指定操作而設(shè)定的近點(diǎn)距離Ln以及遠(yuǎn)點(diǎn)距離Lf反映到條形圖標(biāo)412以及413的位置上。并且，也可以將通過(guò)指定操作而設(shè)定的合焦基準(zhǔn)距離Lo反映到條形圖標(biāo)418的位置上(參照?qǐng)D10(e))。此外，為了使用戶所進(jìn)行的指定操作變得容易，也可以通過(guò)在第1實(shí)施例中說(shuō)明了的方法來(lái)求出代表距離，并在接受指定特定物體的指定操作時(shí)，通過(guò)與第2實(shí)施例相同的方法來(lái)將位于代表距離的被攝體增強(qiáng)顯示。(第4實(shí)施例)對(duì)本發(fā)明所涉及的第4實(shí)施例進(jìn)行說(shuō)明?？梢詫⒌?實(shí)施例以及后述的第5實(shí)施例與第1 第3實(shí)施例進(jìn)行組合來(lái)實(shí)施。在第4實(shí)施例中，對(duì)能夠由圖5的確認(rèn)用圖像生成部64生成的確認(rèn)用圖像進(jìn)行說(shuō)明。如上所述，可以將確認(rèn)用圖像作為基于對(duì)象輸入圖像的圖像。在第4實(shí)施例中，將由深度設(shè)定信息規(guī)定的表示對(duì)象輸出圖像的景深的信息JJ包括于確認(rèn)用圖像中。信息JJ例如是與對(duì)象輸出圖像的景深對(duì)應(yīng)的光圈值(F值；F-number)。 可以將假定對(duì)象輸出圖像的圖像數(shù)據(jù)不是經(jīng)過(guò)數(shù)字聚焦而得到而是僅通過(guò)攝像元件33上的光學(xué)圖像的取樣而得到的情況下的、拍攝對(duì)象輸出圖像時(shí)的光圈值Fot作為信息JJ而求
出ο按照上述方法求出的距離Ln、Lf以及Lo包括于深度設(shè)定信息中之后被送往確認(rèn)用圖像生成部64。生成部64可以通過(guò)將深度設(shè)定信息中包括的距離Ln、Lf以及Lo代入到上述式⑴或⑵中，來(lái)算出式⑴或⑵的“F”的值，并將算出的值作為拍攝對(duì)象輸出圖像時(shí)的光圈值Fott (即作為信息JJ)來(lái)求出。此時(shí)，式⑴或⑵的焦點(diǎn)距離f的值根據(jù)攝像部11的透鏡設(shè)計(jì)值和拍攝對(duì)象輸入圖像時(shí)的光學(xué)變焦倍率來(lái)決定，并且式(1)或(2) 的容許彌散圓直徑δ的值被預(yù)先設(shè)定。此外，在計(jì)算式(1)或O)中的“F”的值時(shí)，需要統(tǒng)一焦點(diǎn)距離f和容許彌散圓直徑S的單位系統(tǒng)(例如，將它們統(tǒng)一為35mm膠片(film) 換算時(shí)的單位系統(tǒng)或?qū)嶋H的比例尺的單位系統(tǒng))。確認(rèn)用圖像生成部64在被提供了深度設(shè)定信息時(shí)，可以求出光圈值Fqut,并生成將光圈值Fott重疊于對(duì)象輸入圖像而得到的圖像作為確認(rèn)用圖像。可以在圖9的步驟S17 中生成及顯示第4實(shí)施例所示的確認(rèn)用圖像。在圖16中示出顯示了光圈值Fott的顯示畫(huà)面51的例子。雖然在圖16的例子中，在對(duì)象輸入圖像上重疊顯示了光圈值Fott，但也可以將對(duì)象輸入圖像和光圈值Fott并列顯示。此外，在圖16的例子中，將光圈值Fott表示為數(shù)值，但光圈值Fot的表現(xiàn)方法不限定于此。例如，也可以通過(guò)能夠表現(xiàn)光圈值Fot的圖標(biāo)的顯示等來(lái)實(shí)現(xiàn)光圈值Fott的顯示。此外，也可以生成及顯示在基于深度設(shè)定信息的對(duì)象輸出圖像上重疊了光圈值 Fqut而得到的圖像作為確認(rèn)用圖像。也可以不在對(duì)象輸出圖像上重疊顯示光圈值Fot，而是將對(duì)象輸出圖像和光圈值Fott并列顯示。此外，在圖9的步驟S19等中，在將對(duì)象輸出圖像記錄于記錄介質(zhì)16中時(shí)，可以按照依據(jù)Exif (Exchangeable image file format)等文件格式的方式來(lái)將信息JJ保存在對(duì)象輸出圖像的圖像文件內(nèi)。通過(guò)顯示光圈值Fott，用戶能夠在與通常攝像機(jī)的拍攝條件之間的關(guān)系中把握對(duì)象輸出圖像的景深的狀態(tài)，容易進(jìn)行對(duì)象輸出圖像的景深是否被設(shè)定成了希望的景深的判斷。即，對(duì)對(duì)象輸出圖像的景深的設(shè)定進(jìn)行支援。(第5實(shí)施例)對(duì)本發(fā)明所涉及的第5實(shí)施例進(jìn)行說(shuō)明。在第5實(shí)施例中，對(duì)在圖5的確認(rèn)用圖像生成部64中能夠生成的另一確認(rèn)用圖像進(jìn)行說(shuō)明。
在第5實(shí)施例中，在對(duì)確認(rèn)用圖像生成部64提供了深度設(shè)定信息的情況下，確認(rèn)用圖像生成部64通過(guò)利用了距離圖以及深度設(shè)定信息的上述方法，來(lái)將對(duì)象輸入圖像的各像素分類為與對(duì)象輸出圖像的景深外的被攝體距離對(duì)應(yīng)的深度外像素、和與對(duì)象輸出圖像的景深內(nèi)的被攝體距離對(duì)應(yīng)的深度內(nèi)像素。通過(guò)同樣的方法，對(duì)象輸出圖像的各像素也能夠分類為深度外像素和深度內(nèi)像素。將包括所有的深度外像素的圖像區(qū)域稱作深度外區(qū)域，將包括所有的深度內(nèi)像素的圖像區(qū)域稱作深度內(nèi)區(qū)域。深度外像素以及深度外區(qū)域相當(dāng)于數(shù)字聚焦中的模糊對(duì)象像素以及模糊對(duì)象區(qū)域，深度內(nèi)像素以及深度內(nèi)區(qū)域相當(dāng)于數(shù)字聚焦中的非模糊對(duì)象像素以及非模糊對(duì)象區(qū)域。確認(rèn)用圖像生成部64可以對(duì)對(duì)象輸入圖像實(shí)施使深度外區(qū)域中的圖像的亮度、 色相或者彩度變化的圖像處理IPA、或使深度內(nèi)區(qū)域中的圖像的亮度、色彩或彩度變化的圖像處理HV并且，可以生成圖像處理IPa后的對(duì)象輸入圖像、圖像處理II3b后的對(duì)象輸入圖像、或者圖像處理IPa以及II3b后的對(duì)象輸入圖像作為確認(rèn)用圖像。在圖17中示出基于圖 6(a)的對(duì)象輸入圖像310的確認(rèn)用圖像的例子。假設(shè)在圖17的確認(rèn)用圖像生成時(shí)的深度設(shè)定信息中，規(guī)定了僅被攝體3皿2收納于景深內(nèi)，被攝體SUB1以及SU&位于景深外。降低了對(duì)象輸入圖像的深度外區(qū)域中的圖像的亮度或彩度的圖像是圖17的確認(rèn)用圖像。也可以對(duì)降低了對(duì)象輸入圖像的深度外區(qū)域中的圖像的亮度或彩度的圖像，進(jìn)一步實(shí)施增強(qiáng)深度內(nèi)區(qū)域的圖像的邊緣的處理，并生成該處理后的圖像作為確認(rèn)用圖像?？梢栽趫D9的步驟S17中生成及顯示第5實(shí)施例所涉及的確認(rèn)用圖像。由此，每當(dāng)通過(guò)調(diào)整指示而變更了深度設(shè)定信息時(shí)，實(shí)時(shí)地顯示該變更內(nèi)容如何反映在圖像中，用戶能夠容易地確認(rèn)調(diào)整指示的結(jié)果。例如，在將第1以及第5實(shí)施例進(jìn)行了組合的情況下， 每當(dāng)通過(guò)調(diào)整指示而變更了滑動(dòng)條412或413的位置時(shí)(參照?qǐng)D11)，根據(jù)變更后的位置， 顯示畫(huà)面51上的確認(rèn)用圖像也發(fā)生變化。此外，確認(rèn)用圖像生成部64也可以取代對(duì)象輸入圖像而根據(jù)對(duì)象輸出圖像來(lái)生成確認(rèn)用圖像。即，也可以對(duì)對(duì)象輸出圖像實(shí)施上述圖像處理IPa以及II3b的至少一方，并生成圖像處理IPa后的對(duì)象輸出圖像、圖像處理II3b后的對(duì)象輸出圖像、或者圖像處理IPa以及II3b后的對(duì)象輸出圖像作為確認(rèn)用圖像。(第6實(shí)施例)對(duì)本發(fā)明所涉及的第6實(shí)施例進(jìn)行說(shuō)明。為了將對(duì)象輸入圖像作為全合焦圖像來(lái)取得，上面說(shuō)明了利用所謂泛焦的方法，但對(duì)象輸入圖像的取得方法不限定于此。例如，也可以按照使RAW數(shù)據(jù)含有表示被攝體距離的信息的方式來(lái)形成攝像部 11，并根據(jù)RAW數(shù)據(jù)來(lái)構(gòu)筑作為全合焦圖像的對(duì)象輸入圖像。為了實(shí)現(xiàn)該目的，可以利用上述的Light Field法。根據(jù)Light Field法，攝像元件33的輸出信號(hào)除了包括攝像元件33 的受光面上的光的強(qiáng)度分布之外，還包括向攝像元件33的入射光的前進(jìn)方向的信息，也可以根據(jù)包括該信息的RAW數(shù)據(jù)來(lái)構(gòu)筑作為全合焦圖像的對(duì)象輸入圖像。此外，在利用Light Field法的情況下，由于數(shù)字聚焦部65通過(guò)Light Field法來(lái)生成對(duì)象輸出圖像，因此基于RAW數(shù)據(jù)的對(duì)象輸入圖像也可以不是全合焦圖像。這是因?yàn)?，在利用?Light Field法的情況下，即使不存在全合焦圖像，在得到了 RAW數(shù)據(jù)后也能夠自由地構(gòu)筑具有任意的景深的對(duì)象輸出圖像。此外，也可以利用沒(méi)有被分類為L(zhǎng)ight Field法的方法(例如，JP特開(kāi)2007-181193號(hào)公報(bào)中記載的方法)，根據(jù)RAW數(shù)據(jù)來(lái)生成理想的或模擬的全合焦圖像作為對(duì)象輸入圖像。例如，既可以利用相位板(wavefront coding optical element)來(lái)生成對(duì)象輸入圖像作為全合焦圖像，也可以利用消除攝像元件33上的像的模糊的圖像復(fù)原處理來(lái)生成作為全合焦圖像的對(duì)象輸入圖像。(變形等)本發(fā)明的實(shí)施方式在權(quán)利要求所公開(kāi)的技術(shù)思想的范圍內(nèi)，可以適當(dāng)進(jìn)行各種變更。以上的實(shí)施方式只不過(guò)是本發(fā)明的實(shí)施方式的例子，本發(fā)明乃至各構(gòu)成要件的用語(yǔ)的意義不限制于以上實(shí)施方式中記載的內(nèi)容。上述說(shuō)明書(shū)中所公開(kāi)的具體數(shù)值僅僅是例示， 當(dāng)然可以將它們變更為各種各樣的數(shù)值。作為能夠適用于上述實(shí)施方式的注釋事項(xiàng)，以下， 記載注釋1 注釋4。各注釋中記載的內(nèi)容只要沒(méi)有矛盾則能夠任意地進(jìn)行組合。[注釋1]前面說(shuō)明了在圖9的步驟S13的初始設(shè)定中，將針對(duì)所有的被攝體距離的模糊量設(shè)定為零的方法，但初始設(shè)定的方法不限定于此。例如，在步驟S13中，也可以按照上述方法根據(jù)距離圖來(lái)設(shè)定1個(gè)或多個(gè)代表距離，并按照滿足各代表距離屬于對(duì)象輸出圖像的景深這一條件，同時(shí)對(duì)象輸出圖像的景深盡量淺的方式，來(lái)設(shè)定深度設(shè)定信息。此外，也可以對(duì)對(duì)象輸入圖像應(yīng)用公知的場(chǎng)景判定，并利用場(chǎng)景判定的結(jié)果來(lái)設(shè)定景深的初始值。例如， 若對(duì)象輸入圖像被判定為拍攝了風(fēng)景的場(chǎng)景，則按照使調(diào)整指示前的對(duì)象輸出圖像的景深比較深的方式來(lái)進(jìn)行步驟S13的初始設(shè)定，并且，若對(duì)象輸入圖像被判定為拍攝了人物的場(chǎng)景，則按照使調(diào)整指示前的對(duì)象輸出圖像的景深比較淺的方式，來(lái)進(jìn)行步驟S13的初始設(shè)定。[注釋2]圖5所示的各部位也可以設(shè)置于攝像裝置1以外的電子設(shè)備(未圖示)，并且也可以在該電子設(shè)備上實(shí)現(xiàn)上述各動(dòng)作。電子設(shè)備例如是個(gè)人計(jì)算機(jī)、便攜式信息終端、便攜式電話機(jī)。此外，攝像裝置1也是電子設(shè)備的一種。[注釋3]在上述實(shí)施方式中，說(shuō)明了以攝像裝置1為主體的動(dòng)作，因此將圖像或顯示畫(huà)面上的物體主要稱作被攝體?？梢哉f(shuō)圖像或顯示畫(huà)面上的被攝體、和圖像或顯示畫(huà)面上的物體是相同意義。[注釋4]可以通過(guò)硬件、或硬件和軟件的組合來(lái)構(gòu)成圖1的攝像裝置1以及上述電子設(shè)備。 在利用軟件來(lái)構(gòu)成攝像裝置1以及電子設(shè)備的情況下，關(guān)于用軟件實(shí)現(xiàn)的部位的框圖，成為表示該部位的功能框圖。特別是，也可以通過(guò)將由圖5所示的各部位(但是，除了監(jiān)視器 15)實(shí)現(xiàn)的功能的全部或一部分記述為程序，并在程序執(zhí)行裝置(例如計(jì)算機(jī))上執(zhí)行該程序，由此來(lái)實(shí)現(xiàn)該功能的全部或一部分。
權(quán)利要求
1.一種電子設(shè)備，其特征在于，具備對(duì)象輸出圖像生成部，其通過(guò)圖像處理來(lái)變更對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像；監(jiān)視器，其在顯示畫(huà)面上顯示距離直方圖、以及能夠沿著所述距離直方圖中的距離軸移動(dòng)的選擇標(biāo)志，其中所述距離直方圖表示所述對(duì)象輸入圖像上的各位置上的物體與拍攝了所述對(duì)象輸入圖像的設(shè)備之間的距離的分布；和景深設(shè)定部，其基于通過(guò)用于使所述選擇標(biāo)志沿著所述距離軸移動(dòng)的操作而決定的所述選擇標(biāo)志的位置，來(lái)設(shè)定所述對(duì)象輸出圖像的景深。
2.根據(jù)權(quán)利要求1所述的電子設(shè)備，其特征在于，所述景深設(shè)定部按照使與所述選擇標(biāo)志的位置對(duì)應(yīng)的所述距離軸上的距離屬于所述對(duì)象輸出圖像的景深的方式，來(lái)設(shè)定所述對(duì)象輸出圖像的景深。
3.根據(jù)權(quán)利要求1或2所述的電子設(shè)備，其特征在于，所述景深設(shè)定部，根據(jù)所述距離直方圖中的度數(shù)來(lái)設(shè)定代表距離，并且從所述對(duì)象輸入圖像的圖像數(shù)據(jù)中提取與所述代表距離對(duì)應(yīng)的物體的圖像數(shù)據(jù)，并將基于提取圖像數(shù)據(jù)的代表距離物體圖像與所述距離直方圖上的代表距離對(duì)應(yīng)起來(lái)顯示在所述顯示畫(huà)面上。
4.一種電子設(shè)備，其特征在于，具備對(duì)象輸出圖像生成部，其通過(guò)圖像處理來(lái)變更對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像；觸控面板監(jiān)視器，具有顯示畫(huà)面且接受通過(guò)由操作體觸碰所述顯示畫(huà)面而進(jìn)行的觸控面板操作，該觸控面板監(jiān)視器在將所述對(duì)象輸入圖像或基于所述對(duì)象輸入圖像的圖像顯示于所述顯示畫(huà)面的狀態(tài)下，作為所述觸控面板操作接受對(duì)所述顯示畫(huà)面上的多個(gè)特定物體進(jìn)行指定的指定操作；和景深設(shè)定部，其基于所述指定操作來(lái)設(shè)定所述對(duì)象輸出圖像的景深。
5.根據(jù)權(quán)利要求4所述的電子設(shè)備，其特征在于，所述景深設(shè)定部按照使所述多個(gè)特定物體收納于所述對(duì)象輸出圖像的景深內(nèi)的方式來(lái)設(shè)定所述對(duì)象輸出圖像的景深。
6.根據(jù)權(quán)利要求4或5所述的電子設(shè)備，其特征在于，所述景深設(shè)定部，根據(jù)距離圖來(lái)提取各特定物體與所述設(shè)備之間的距離，其中所述距離圖表示所述對(duì)象輸入圖像上的各位置上的物體與拍攝了所述對(duì)象輸入圖像的設(shè)備之間的距離，并基于提取出的距離來(lái)設(shè)定所述對(duì)象輸出圖像的景深中的兩端距離。
7.一種電子設(shè)備，其特征在于，具備對(duì)象輸出圖像生成部，其通過(guò)圖像處理來(lái)變更對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像；觸控面板監(jiān)視器，具有顯示畫(huà)面且接受通過(guò)由操作體觸碰所述顯示畫(huà)面而進(jìn)行的觸控面板操作，該觸控面板監(jiān)視器在將所述對(duì)象輸入圖像或基于所述對(duì)象輸入圖像的圖像顯示于所述顯示畫(huà)面的狀態(tài)下，作為所述觸控面板操作接受對(duì)所述顯示畫(huà)面上的特定物體進(jìn)行指定的指定操作；和景深設(shè)定部，其按照使所述物體收納于所述對(duì)象輸出圖像的景深內(nèi)的方式來(lái)設(shè)定所述對(duì)象輸出圖像的景深，所述景深設(shè)定部根據(jù)在所述指定操作中所述操作體觸碰所述顯示畫(huà)面上的所述特定物體的時(shí)間的長(zhǎng)度，來(lái)設(shè)定所述對(duì)象輸出圖像的景深的深度。
8.一種電子設(shè)備，其特征在于，具備對(duì)象輸出圖像生成部，其通過(guò)圖像處理來(lái)變更對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像；景深設(shè)定部，其按照被施加的操作，來(lái)設(shè)定所述對(duì)象輸出圖像的景深；和監(jiān)視器，其顯示表示所設(shè)定的景深的信息。
9.根據(jù)權(quán)利要求8所述的電子設(shè)備，其特征在于， 所述信息包括與設(shè)定的景深對(duì)應(yīng)的光圈值。
全文摘要
本發(fā)明的課題在于，提供一種在能夠通過(guò)圖像處理來(lái)調(diào)整景深的電子設(shè)備中，景深設(shè)定用的優(yōu)異的用戶界面。為此，攝像裝置通過(guò)圖像處理來(lái)變更拍攝到的對(duì)象輸入圖像的景深，由此來(lái)生成對(duì)象輸出圖像。根據(jù)將對(duì)象輸入圖像上的各位置上的被攝體的被攝體距離映射而得到的距離圖來(lái)作成表示被攝體距離的分布的距離直方圖(430)，并將距離直方圖(430)顯示在監(jiān)視器上。此時(shí)，還顯示能夠沿著距離直方圖(430)的距離軸(431)移動(dòng)的條形圖標(biāo)(412)以及(413)。條形圖標(biāo)(412)以及(413)的位置通過(guò)觸控面板操作等而變更為用戶的希望位置，并根據(jù)條形圖標(biāo)(412)以及(413)的位置來(lái)變更對(duì)象輸入圖像的景深。
文檔編號(hào)H04N5/232GK102572262SQ20111033217
公開(kāi)日2012年7月11日 申請(qǐng)日期2011年10月27日 優(yōu)先權(quán)日2010年10月28日
發(fā)明者古山貫一, 山田晶彥, 津田佳行, 福本晉平 申請(qǐng)人:三洋電機(jī)株式會(huì)社