圖像處理設(shè)備、方法和程序的制作方法
【專利摘要】本發(fā)明涉及圖像處理設(shè)備、方法和程序。提供一種圖像處理設(shè)備，包括環(huán)境光白平衡增益生成部件，所述環(huán)境光白平衡增益生成部件被配置成根據(jù)在環(huán)境光下拍攝的圖像，生成環(huán)境光白平衡增益，合成白平衡增益生成部件，所述合成白平衡增益生成部件被配置成合成與輔助光的色溫對應(yīng)的輔助光白平衡增益和環(huán)境光白平衡增益，從而生成合成白平衡增益，和白平衡增益校正部件，所述白平衡增益校正部件被配置成按照環(huán)境光和輔助光的比率，校正合成的白平衡增益。校正的合成白平衡增益被應(yīng)用于在包括輔助光和環(huán)境光的混合光下拍攝的圖像。
【專利說明】圖像處理設(shè)備、方法和程序
【技術(shù)領(lǐng)域】
[0001]本技術(shù)涉及一種用于圖像處理的設(shè)備和方法，以及使計算機執(zhí)行所述方法的程序。更具體地，本技術(shù)涉及用于包括白平衡處理的執(zhí)行的圖像處理的設(shè)備和方法，以及使計算機執(zhí)行所述方法的程序。
【背景技術(shù)】
[0002]在成像設(shè)備中，常常利用白平衡處理調(diào)整圖像的色澤(color shade)，以致在成像時的光源下，獲得正確的顏色表現(xiàn)。在白平衡處理中，成像設(shè)備按照作為攝影環(huán)境中的光的環(huán)境光的色溫，確定恰當?shù)陌灼胶庠鲆?，并根?jù)確定的白平衡增益，調(diào)整色澤。色溫以溫度的形式，表不來自各個光源的光束的顏色。
[0003]在成像設(shè)備利用諸如閃光之類的輔助光的發(fā)光，拍攝圖像的情況下，不僅環(huán)境光，而且輔助光都入射到成像設(shè)備中。因而，如果原樣使用環(huán)境光下的白平衡增益，那么難以進行正確的調(diào)整。因而，提出了一種成像設(shè)備，以便利用輔助光的發(fā)光，拍攝圖像，其中計算輔助光和環(huán)境光之間的光量比，并根據(jù)計算的比率，確定適當?shù)陌灼胶庠鲆?例如，參見日本專利公開 N0.2010-193002)

【發(fā)明內(nèi)容】

[0004]在上述現(xiàn)有技術(shù)中，利用環(huán)境光和輔助光之間的光量比，合成輔助光中的白平衡增益和環(huán)境光中的白平衡增益，把合成的增益用作對于利用輔助光的發(fā)光拍攝的圖像的適當增益。然而，在上述現(xiàn)有技術(shù)中，利用輔助光的發(fā)光拍攝的圖像可能具有不自然的色澤。例如，當與輔助光相比，環(huán)境光的光量和色溫極低時，環(huán)境光顯得比輔助光暗。因而，按它們的光量比合成的增益不能提供環(huán)境光的足夠色澤。相反，當環(huán)境光的色澤不足時，會提供環(huán)境光的氛圍受損的色澤不自然的圖像。
[0005]鑒于這樣的情況，在本技術(shù)中，理想的是把利用輔助光的發(fā)光拍攝的圖像的色澤調(diào)整成自然的色澤。
[0006]按照本公開的第一實施例，提供一種圖像處理設(shè)備，圖像處理方法和使計算機執(zhí)行所述方法的程序，圖像處理設(shè)備包括環(huán)境光白平衡增益生成部件，所述環(huán)境光白平衡增益生成部件被配置成根據(jù)在環(huán)境光下拍攝的圖像，生成環(huán)境光白平衡增益，合成白平衡增益生成部件，所述合成白平衡增益生成部件被配置成合成與輔助光的色溫對應(yīng)的輔助光白平衡增益和環(huán)境光白平衡增益，從而生成合成白平衡增益，和白平衡增益校正部件，所述白平衡增益校正部件被配置成按照環(huán)境光和輔助光的比率，校正合成的白平衡增益。校正的合成白平衡增益被應(yīng)用于在包括輔助光和環(huán)境光的混合光下拍攝的圖像。這產(chǎn)生按照環(huán)境光和輔助光的比率，對白平衡增益進行校正的功能。
[0007]按照本公開的第一實施例，白平衡增益校正部件可對合成的白平衡增益進行校正，以按照環(huán)境光和輔助光的光量比，改變基準色溫。這產(chǎn)生按照環(huán)境光量和輔助光的光量比率，進行校正，以改變基準色溫的功能。[0008]按照本公開的第一實施例，白平衡增益校正部件可對合成的白平衡增益進行校正，以根據(jù)環(huán)境光白平衡增益生成環(huán)境光的色溫，并按照獲得的環(huán)境光的色溫和輔助光的色溫的比率，改變基準色溫。這產(chǎn)生根據(jù)環(huán)境光白平衡增益，生成環(huán)境光色溫，并且當環(huán)境光和輔助光的色溫比較低時，進行校正，以使基準色溫變高的功能。
[0009]按照本公開的第一實施例，白平衡增益校正部件可判斷當?shù)皆诃h(huán)境光下拍攝的圖像中的被攝對象的深度越小時，環(huán)境光與輔助光的比率越低。這產(chǎn)生判斷深度越小，環(huán)境光與輔助光的比率越低的功能。
[0010]按照本公開的第一實施例，圖像可具有多個區(qū)域。白平衡增益校正部件可分別獲得所述多個區(qū)域中的每一個中，環(huán)境光與輔助光的比率，并分別校正所述多個區(qū)域中的每一個的合成白平衡。這產(chǎn)生分別校正多個區(qū)域中的每一個中的合成白平衡的功能。
[0011]按照本公開的第一實施例，圖像處理設(shè)備還包括白平衡處理部件，所述白平衡處理部件被配置成通過利用校正的白平衡增益，執(zhí)行在混合光下拍攝的圖像的白平衡處理。這產(chǎn)生通過利用校正的白平衡增益，對在混合光下拍攝的圖像進行白平衡處理的功能。
[0012]本技術(shù)可以實現(xiàn)能夠把借助輔助光的發(fā)光拍攝的圖像的色澤調(diào)整為自然色澤的優(yōu)異效果。
【專利附圖】

【附圖說明】
[0013]圖1是表示第一實施例中的成像設(shè)備的一種結(jié)構(gòu)例子的方框圖；
[0014]圖2是表示第一實施例中的圖像處理設(shè)備的一種結(jié)構(gòu)例子的方框圖；
[0015]圖3是表示第一實施例中的環(huán)境光白平衡增益生成部件的一種結(jié)構(gòu)例子的方框圖；
[0016]圖4是表示第一實施例中的合成白平衡增益生成部件的一種結(jié)構(gòu)例子的方框圖；
[0017]圖5是表示第一實施例中的白平衡增益校正部件的一種結(jié)構(gòu)例子的方框圖；
[0018]圖6是表示第一實施例中的白平衡處理部件的一種結(jié)構(gòu)例子的方框圖；
[0019]圖7是表示第一實施例中的實時取景圖像數(shù)據(jù)的一個例子的示圖；
[0020]圖8是表示第一實施例中，被分成多個塊的實時取景圖像數(shù)據(jù)的一個例子的示圖；
[0021]圖9是表不第一實施例中，環(huán)境光貢獻率與曝光值的差值之間的關(guān)系的一個例子的示圖；
[0022]圖10是表示第一實施例中，校正系數(shù)和環(huán)境光曝光值之間的關(guān)系的一個例子的示圖；
[0023]圖11是表示第一實施例中的校正前后的白平衡增益的一個例子的示圖；
[0024]圖12是表示第一實施例中的圖像處理設(shè)備的操作的一個例子的流程圖；
[0025]圖13是表示第二實施例中的圖像處理設(shè)備的一種結(jié)構(gòu)例子的方框圖；
[0026]圖14是表示第二實施例中的白平衡增益校正部件的一種結(jié)構(gòu)例子的方框圖；
[0027]圖15是表示第二實施例的變形例中校正系數(shù)和色溫之間的關(guān)系的一個例子的示圖；
[0028]圖16是表示第三實施例中的圖像處理設(shè)備的一種結(jié)構(gòu)例子的方框圖；
[0029]圖17是表示第三實施例中的白平衡增益校正部件的一種結(jié)構(gòu)例子的方框圖；[0030]圖18是表不第三實施例中，輔助光覆蓋的范圍的一個例子的不圖；
[0031]圖19是表示第三實施例的變形例中，校正系數(shù)和深度信息之間的關(guān)系的一個例子的不圖。
【具體實施方式】
[0032]下面參考附圖，詳細說明本公開的優(yōu)選實施例。注意在說明書和附圖中，功能和結(jié)構(gòu)基本相同的構(gòu)成元件用相同的附圖標記表示，這些構(gòu)成元件的重復(fù)說明被省略。
[0033]下面將說明實現(xiàn)本技術(shù)的結(jié)構(gòu)(下面稱為實施例)。將按照以下順序進行說明。
[0034]1.第一實施例(按照環(huán)境光的光量，校正白平衡增益的例子)
[0035]2.第二實施例(按照環(huán)境光的色溫，校正白平衡增益的例子)
[0036]3.第三實施例(按照從深度獲得的環(huán)境光的光量或色溫，校正白平衡增益的例子)
[0037]〈1.第一實施例>
[0038][成像設(shè)備的結(jié)構(gòu)例子]
[0039]圖1是表示本技術(shù)的第一實施例中的成像設(shè)備100的一種結(jié)構(gòu)例子的方框圖。成像設(shè)備100包括成像透鏡110、圖像傳感器120、測光和測距傳感器130、信號處理部分140、圖像存儲器150、透鏡控制部分160、閃光燈170、發(fā)光控制部分180和操作部分190。成像設(shè)備100還包括圖像處理設(shè)備200和照相機控制設(shè)備300。
[0040]成像透鏡110是在圖像傳感器120上，形成成像對象的圖像的透鏡。成像透鏡110包括諸如聚焦透鏡和變焦透鏡之類的透鏡。當閃光燈170不發(fā)光時，環(huán)境光入射到成像透鏡110中，而當閃光燈170發(fā)光時，混合光入射到成像透鏡110中。環(huán)境光是來自除閃光燈170外的光源的光,而混合光是輔助光和環(huán)境光的混合物,輔助光是來自閃光燈170的光。
[0041]圖像傳感器120光電轉(zhuǎn)換來自成像透鏡110的光，通過信號線129向信號處理部分140輸出電信號。圖像傳感器120可用CCD (電荷耦合器件)和CMOS (互補金屬氧化物半導(dǎo)體)傳感器等實現(xiàn)。
[0042]測光和測距傳感器130被配置成在照相機控制設(shè)備300的控制下，測量通過圖像傳感器120入射的光的數(shù)量。測得的光量被用于獲得曝光值或者到被攝對象的深度。測光和測距傳感器130通過信號線139，把測量的光量值提供給照相機控制設(shè)備300。
[0043]信號處理部分140被配置成對從圖像傳感器120供給的電信號,進行⑶S (相關(guān)雙采樣)處理和AGC(自動增益控制)處理。⑶S處理用于保持足夠的信噪比(S/N比)，而AGC處理用于控制增益。信號處理部分140進行這樣獲得的信號的A/D(模/數(shù))轉(zhuǎn)換，利用獲得的數(shù)字信號形成圖像數(shù)據(jù)，并通過信號線149，把圖像數(shù)據(jù)輸出給圖像處理設(shè)備200。
[0044]圖像處理設(shè)備200被配置成對來自信號處理部分140的圖像數(shù)據(jù)，進行包括白平衡處理在內(nèi)的各種圖像處理。圖像處理設(shè)備200從照相機控制設(shè)備300接收曝光值，利用所述曝光值進行白平衡處理。白平衡處理的細節(jié)將在后面說明。圖像處理設(shè)備200通過信號線209，把經(jīng)過圖像處理的圖像數(shù)據(jù)輸出給圖像存儲器150。圖像存儲器150被配置成保存圖像數(shù)據(jù)。
[0045]透鏡控制部分160被配置成在照相機控制設(shè)備300的控制下，控制成像透鏡110的位置。例如，可根據(jù)變焦倍率或聚焦位置的變化，控制成像透鏡110的位置。[0046]閃光燈170被配置成在發(fā)光控制部分180的控制下發(fā)光，從而產(chǎn)生輔助光。輔助光的光量被配置成固定值。發(fā)光控制部分180在照相機控制設(shè)備300的控制下，控制閃光燈170的發(fā)光操作。
[0047]操作部分190被配置成按照用戶對于觸摸面板、快門釋放按鈕等的操作，生成操作信號，并通過信號線199，把所述信號輸出給照相機控制設(shè)備300。
[0048]照相機控制設(shè)備300被配置成控制整個成像設(shè)備100。照相機控制設(shè)備300控制測光和測距傳感器130分別在閃光燈170發(fā)光時，和在閃光燈170不發(fā)光時測光。照相機控制設(shè)備300隨后按照利用測光和測距傳感器130測得的光量，確定適當?shù)钠毓庵?。當存在多個測光區(qū)域時，根據(jù)這些測光量的統(tǒng)計量(例如，平均值)，確定曝光值。照相機控制設(shè)備300根據(jù)曝光值，確定快門速度和光圈量。照相機控制設(shè)備300通過信號線309，把分別與在閃光燈170發(fā)光時，和在閃光燈170不發(fā)光時的光量對應(yīng)的曝光值提供給圖像處理設(shè)備 200。
[0049]照相機控制設(shè)備300還根據(jù)當閃光燈170不發(fā)光時，利用測光和測距傳感器130測量的光量，獲得到被攝對象的深度。照相機控制設(shè)備300根據(jù)所述深度，確定成像透鏡110的聚焦位置，并使透鏡控制部分160改變成像透鏡110的位置。
[0050]此外，照相機控制設(shè)備300根據(jù)來自操作部分190的操作信號，判斷快門釋放按鈕是否被按下。在理想的是閃光燈170發(fā)光的情況下，更具體地，在快門釋放按鈕被按下的情況下，照相機控制設(shè)備300控制發(fā)光控制部分180使閃光燈170發(fā)光。照相機控制設(shè)備300隨后從圖像存儲器150，讀取在閃光燈170發(fā)光時，或者在閃光燈170不發(fā)光時拍攝的圖像數(shù)據(jù)，并把所述圖像數(shù)據(jù)輸出給顯示裝置、記錄裝置等。
[0051 ] 雖然成像設(shè)備100對A/D轉(zhuǎn)換后的圖像數(shù)據(jù)進行白平衡處理，不過，在信號處理部分140中，在A/D轉(zhuǎn)換前的模擬電信號可以受到白平衡處理。
[0052]雖然圖像處理設(shè)備200被配置成設(shè)置在成像設(shè)備100中，不過，本技術(shù)并不局限于這種結(jié)構(gòu)。圖像處理設(shè)備200可設(shè)置在諸如個人計算機之類的信息處理設(shè)備中。
[0053][圖像處理設(shè)備的結(jié)構(gòu)例子]
[0054]圖2是表示第一圖像處理設(shè)備200的結(jié)構(gòu)例子的方框圖。圖像處理設(shè)備200包括環(huán)境光白平衡增益生成部件210、環(huán)境光白平衡增益保持部分220、環(huán)境光曝光值保持部分230、混合光曝光值保持部分240和輔助光白平衡增益存儲部分250。圖像處理設(shè)備200還包括合成白平衡增益生成部件260、白平衡增益校正部件270和白平衡處理部件280。
[0055]環(huán)境光白平衡增益生成部件210被配置成生成以環(huán)境光的色溫作為基準色溫的白平衡增益，作為環(huán)境光白平衡增益WB_e。環(huán)境光白平衡增益生成部件210從來自信號處理部分140的圖像數(shù)據(jù)之中，獲得在環(huán)境光下拍攝的圖像數(shù)據(jù)。例如，環(huán)境光白平衡增益生成部件210獲得實時取景圖像數(shù)據(jù)，實時取景圖像數(shù)據(jù)是按實時取景模式獲得的圖像數(shù)據(jù)。環(huán)境光白平衡增益生成部件210隨后計算該實時取景圖像數(shù)據(jù)中的每種顏色的亮度值的統(tǒng)計量(例如，和數(shù)或平均值)，并根據(jù)這些統(tǒng)計量，計算環(huán)境光白平衡增益WB_e。不過，如果在統(tǒng)計量的計算中，利用色飽和度高的被攝對象的亮度值作為統(tǒng)計對象，那么可能出現(xiàn)涉及色偏的顏色不合格現(xiàn)象。因而，環(huán)境光白平衡增益生成部件210可從統(tǒng)計對象中排除色飽和度相當高的被攝對象的亮度值。
[0056]例如，在由包括R(紅)、G(綠)和B(藍)的三種顏色構(gòu)成的圖像中，環(huán)境光白平衡增益生成部件210計算相應(yīng)顏色的亮度值的和數(shù)，作為Rsum、Gsum和Bsum。環(huán)境光白平衡增益生成部件210通過利用所述和數(shù)任意之一(例如，Gsum)作為基準值，計算作為相應(yīng)顏色的增益的R增益、G增益和B增益，以致利用所述增益放大的值等于基準值。更具體地，環(huán)境光白平衡增益生成部件210通過利用以下的公式I和公式2，獲得環(huán)境光白平衡增益中的R增益WBR_e和B增益WBB_e。G增益的值被設(shè)定為“ I”。G分量的統(tǒng)計量被用作基準，因為與其它顏色相比，綠色往往在圖像中占據(jù)更大的區(qū)域。
[0057]WBR_e=Gsum/Rsum 公式 I
[0058]WBB_e=Gsum/Bsum 公式 2
[0059]環(huán)境光白平衡增益生成部件210把包括獲得的R增益WBR_e和B增益WBB_e的環(huán)境光白平衡增益WB_e保持在環(huán)境光白平衡增益保持部分220中。
[0060]環(huán)境光白平衡增益保持部分220被配置成保持由環(huán)境光白平衡增益生成部件210生成的環(huán)境光白平衡增益WB_e。
[0061]環(huán)境光曝光值保持部分230被配置成保持從照相機控制設(shè)備300供給的環(huán)境光曝光值EV_e。在這種情況下，環(huán)境光曝光值EV_e是與在閃光燈170不發(fā)光時測得的光量，即，環(huán)境光的光量對應(yīng)的曝光值。
[0062]混合光曝光值保持部分240被配置成保持從照相機控制設(shè)備300供給的混合光曝光值EV_m。在這種情況下，混合光曝光值EV_m是與在閃光燈170發(fā)光時測得的光量，即，混合光的光量對應(yīng)的曝光值。
[0063]這些環(huán)境光曝光值EV_e和混合光曝光值EV_m是分別與環(huán)境光和混合光的光量對應(yīng)的值。由于每當光量減半時，曝光值加“1”，因此根據(jù)環(huán)境光曝光值EV_e和混合光曝光值EV_m,可以計算混合光中的環(huán)境光和輔助光之間的光量比。
[0064]輔助光白平衡增益存儲部分250被配置成保存具有作為基準色溫的預(yù)定輔助光色溫的輔助光白平衡增益WB_f。例如，具有6000K的基準色溫的白平衡增益被設(shè)定為輔助光白平衡增益WB_f。
[0065]合成白平衡增益生成部件260被配置成按環(huán)境光和輔助光之間的光量比，合成環(huán)境光白平衡增益WB_e和輔助光白平衡增益WB_f。更具體地，合成白平衡增益生成部件260從環(huán)境光曝光值保持部分230和混合光曝光值保持部分240，讀取環(huán)境光曝光值EV_e和混合光曝光值EV_m。合成白平衡增益生成部件260還從環(huán)境光白平衡增益保持部分220和輔助光白平衡增益存儲部分250，讀取環(huán)境光白平衡增益WB_e和輔助光白平衡增益WB_f。
[0066]合成白平衡增益生成部件260隨后根據(jù)環(huán)境光曝光值EV_e和混合光曝光值EV_m,獲得環(huán)境光和輔助光之間的光量比。合成白平衡增益生成部件260按獲得的光量比，合成環(huán)境光白平衡增益WB_e和輔助光白平衡增益WB_f。合成白平衡增益生成部件260通過信號線260，把合成的白平衡增益提供給白平衡增益校正部件270，作為合成白平衡增益WB_m0
[0067]白平衡增益校正部件270被配置成按照環(huán)境光和輔助光的光量比，校正合成的白平衡增益WB_m。例如，白平衡增益校正部件270對合成白平衡增益WB_m進行校正，以使基準色溫隨著環(huán)境光和輔助光的光量比的降低而變高。白平衡增益校正部件270從環(huán)境光白平衡增益保持部分220，讀取環(huán)境光白平衡增益WB_e，并從環(huán)境光曝光值保持部分230，讀取環(huán)境光曝光值EV_e。由于如上所述，輔助光的光量被固定，因此白平衡增益校正部件270僅僅根據(jù)環(huán)境光曝光值EV_e,就能夠計算環(huán)境光和輔助光的相對光量。
[0068]白平衡增益校正部件270對合成白平衡增益WB_m進行校正，以使基準色溫隨著環(huán)境光和輔助光的相對光量的降低而變高。不過，當環(huán)境光的相對光量等于或大于閾值時，環(huán)境光足夠明亮，于是不需要校正。因而，當環(huán)境光的光量等于或大于閾值時，白平衡增益校正部件270把校正量設(shè)定成固定值，而不管環(huán)境光的光量。
[0069]在校正操作中，白平衡增益校正部件270通過校正R增益和B增益至少之一，以致R增益和B增益的比率增大，升高基準色溫。一般地，光量低的環(huán)境光具有比輔助光低的色溫，與輔助光的色澤相比，其色澤接近于紅色。因而，通過增大R增益和B增益的比率，強調(diào)接近于紅色的環(huán)境光的色澤。白平衡增益校正部件270通過信號線278和279，把校正的增益提供給白平衡處理部件280，作為將被應(yīng)用于在混合光下獲得的圖像數(shù)據(jù)的適當白平衡增益WB_p。所述適當白平衡增益WB_p包括B增益WBB_p和R增益WBR_p。
[0070]當環(huán)境光的相對光量較低時，由于環(huán)境光的亮度不足，圖像中的環(huán)境光的色澤可能不足。然而，使基準色溫更高的校正強調(diào)環(huán)境光的色澤，以致圖像可獲得自然的色澤。
[0071]注意白平衡增益校正部件270在環(huán)境光的色溫比輔助光低的假定之下進行校正。然而相反地，在一些情況下，環(huán)境光色溫可能比輔助光色溫高。例如，當藍色照明光是環(huán)境光時，環(huán)境光的色溫比輔助光低。白平衡增益校正部件270根據(jù)與環(huán)境光白平衡增益WB_e對應(yīng)的色溫，判斷環(huán)境光色溫是否高于輔助光色溫。如果確定環(huán)境光色溫高于輔助光色溫，那么白平衡增益校正部件270對合成白平衡增益WB_m進行校正，以使基準色溫隨著環(huán)境光與輔助光的光量比的降低而降低。結(jié)果，強調(diào)環(huán)境光的色澤，以致圖像獲得自然的色澤。
[0072]白平衡處理部件280被配置成對在混合光下獲得的圖像數(shù)據(jù)，進行利用適當白平衡增益WB_p的白平衡處理。白平衡處理部件280把白平衡處理后的圖像數(shù)據(jù)保持在圖像存儲器150中。
[0073]雖然圖像處理設(shè)備200把RGB顏色模型圖像數(shù)據(jù)作為處理對象，不過除RGB顏色模型外的圖像數(shù)據(jù)，比如CMYK(青色、洋紅色、黃色、黑色)顏色模型圖像數(shù)據(jù)也可被作為處
理對象。
[0074]雖然圖像處理設(shè)備200根據(jù)曝光值，獲得環(huán)境光和輔助光之間的光量比，不過可以根據(jù)其它參數(shù)計算光量比。例如，圖像處理設(shè)備200可根據(jù)照度或亮度，獲得光量比。
[0075]除了白平衡處理之外，圖像處理設(shè)備200還可進行諸如Y校正處理和去馬賽克之類的圖像處理。在這種情況下，可在諸如去馬賽克之類的其它處理之前，進行白平衡處理，或者可在其它處理之后進行白平衡處理。
[0076][環(huán)境光白平衡增益生成部件的結(jié)構(gòu)例子]
[0077]圖3是表示第一實施例中的環(huán)境光白平衡增益生成部件210的一種結(jié)構(gòu)例子的方框圖。環(huán)境光白平衡增益生成部件210包括塊內(nèi)總亮度值計算部分211、塊內(nèi)色飽和度計算部分212、總亮度值計算部分213、和環(huán)境光白平衡增益計算部分214。
[0078]塊內(nèi)總亮度值計算部分211被配置成計算實時取景圖像數(shù)據(jù)中的每個塊中的各種顏色的亮度值的和數(shù)。術(shù)語“塊”是指示通過把實時取景圖像數(shù)據(jù)分割成多個區(qū)域而獲得的每個區(qū)域的名稱。例如，就具有在行方向排列的r個像素，和在列方向排列的c個像素，從而形成二維格子結(jié)構(gòu)的圖像數(shù)據(jù)來說，行方向的r個像素被分割成M個塊，列方向的c個像素被分割成N個塊。這里，變量r和c是等于或大于2的整數(shù)。變量M是小于r，并且等于或大于I的整數(shù)，而變量N是等于C，并且等于或大于I的整數(shù)。塊內(nèi)總亮度值計算部分211計算每個塊中的每個R、G和B顏色的亮度值的和數(shù)，并把所述和數(shù)作為Bk (i，j)、BG(i, j)和BB(i，j)提供給塊內(nèi)色飽和度計算部分212和總亮度值計算部分213。這里，變量i是I~M的整數(shù)，變量j是I~N的整數(shù)。
[0079]塊內(nèi)色飽和度計算部分212被配置成計算每個塊中的色飽和度。塊內(nèi)色飽和度計算部分212通過利用例如以下的公式3~公式5，根據(jù)Bk(i，j) ,BG(i, j)和Bb(i，j)，計算每個塊的色飽和度Sb(i，j)。
[0080]Mb(i, j)=max{BE(i, j), BG(i, j), BB(i, j)}公式 3
[0081]mb(i, j)=min{BE(i, j), BG(i, j), BB(i, j)}公式 4
[0082]Sb(i, j) = {Mb(i, j)_mb(i, j)}/Mb(i, j)公式 5
[0083]在公式3中，“maxO”是返回圓括號中的值之中的最大值的函數(shù)。在公式4中，“minO”是返回圓括號中的值之中的最小值的函數(shù)。在公式5中，如果Mb(i，j)和mb(i，j)的兩個值都取“O”，那么右手側(cè)變得不定。因而，采用例外處理在Sb (i，j)中設(shè)定“O”。
[0084]塊內(nèi)色飽和度計算部分212生成隨著色飽和度Sb (i，j)取值越小而取值越大的系數(shù)，作為飽和系數(shù)Ks (i，j)。例如，塊內(nèi)色飽和度計算部分212生成當色飽和度Sb(i，j)小于規(guī)定閾值時，取值為“1”，而當色飽和度Sb(i，j)等于或大于所述閾值時，取值為“O”的系數(shù)，作為飽和系數(shù)Ks (i，j)。塊內(nèi)色飽和度計算部分212把生成的飽和系數(shù)Ks (i，j)提供給總亮度值計算部分213。
[0085]總亮度值計算部分213被配置成根據(jù)每個塊中的總亮度值和飽和系數(shù)，計算圖像數(shù)據(jù)中的每種顏色的總亮度值?？偭炼戎涤嬎悴糠?13通過利用例如以下的公式6~8，根據(jù)每個塊中的總亮度值Bk (i，j)、Be(i，j)和8“1，j)，以及飽和系數(shù)Ks (i，j)，計算總亮度值。總亮度值計算部分213把計算的總亮度值提供給環(huán)境光白平衡增益計算部分214。
【權(quán)利要求】
1.一種圖像處理設(shè)備，包括: 環(huán)境光白平衡增益生成部件，所述環(huán)境光白平衡增益生成部件被配置成根據(jù)在環(huán)境光下拍攝的圖像，生成環(huán)境光白平衡增益； 合成白平衡增益生成部件，所述合成白平衡增益生成部件被配置成合成與輔助光的色溫對應(yīng)的輔助光白平衡增益和所述環(huán)境光白平衡增益，從而生成合成白平衡增益；以及白平衡增益校正部件，所述白平衡增益校正部件被配置成根據(jù)環(huán)境光與輔助光的比率，校正所述合成白平衡增益， 其中校正后的合成白平衡增益被應(yīng)用于在包括輔助光和環(huán)境光的混合光下拍攝的圖像。
2.按照權(quán)利要求1所述的圖像處理設(shè)備， 其中白平衡增益校正部件對所述合成白平衡增益進行校正，所述校正根據(jù)環(huán)境光與輔助光的光量比改變基準色溫。
3.按照權(quán)利要求1所述的圖像處理設(shè)備， 其中白平衡增益校正部件對所述合成白平衡增益進行校正，所述校正根據(jù)環(huán)境光白平衡增益生成環(huán)境光的色溫，并根據(jù)所獲得的環(huán)境光的色溫和輔助光的色溫的比率，改變基準色溫。
4.按照權(quán)利要求1所述的圖像處理設(shè)備， 其中白平衡增益校正部件判斷當?shù)皆诃h(huán)境光下拍攝的圖像中的被攝對象的深度越小時，環(huán)境光與輔助光的比率越低。`
5.按照權(quán)利要求1所述的圖像處理設(shè)備， 其中圖像具有多個區(qū)域，并且 白平衡增益校正部件獲得所述多個區(qū)域中的每一個中的環(huán)境光與輔助光的比率，并校正所述多個區(qū)域中的每一個中的合成白平衡增益。
6.按照權(quán)利要求1所述的圖像處理設(shè)備，還包括: 白平衡處理部件，所述白平衡處理部件被配置成通過利用校正后的白平衡增益，執(zhí)行對在混合光下拍攝的圖像的白平衡處理。
7.一種圖像處理方法，包括: 環(huán)境光白平衡增益生成部件根據(jù)在環(huán)境光下拍攝的圖像，生成環(huán)境光白平衡增益的環(huán)境光白平衡增益生成步驟； 合成白平衡增益生成部件合成與輔助光的色溫對應(yīng)的輔助光白平衡增益和環(huán)境光白平衡增益，從而生成合成白平衡增益的合成白平衡增益生成步驟； 白平衡增益校正部件按照環(huán)境光和輔助光的比率，校正所述合成白平衡增益的白平衡增益校正步驟；以及 把校正后的合成白平衡增益應(yīng)用于在包括輔助光和環(huán)境光的混合光下拍攝的圖像的步驟。
8.一種使計算機執(zhí)行以下步驟的程序: 環(huán)境光白平衡增益生成部件根據(jù)在環(huán)境光下拍攝的圖像，生成環(huán)境光白平衡增益的環(huán)境光白平衡增益生成步驟； 合成白平衡增益生成部件合成與輔助光的色溫對應(yīng)的輔助光白平衡增益和環(huán)境光白平衡增益，從而生成合成白平衡增益的合成白平衡增益生成步驟； 白平衡增益校正部件按照環(huán)境光和輔助光的比率，校正合成的白平衡增益的白平衡增益校正步驟；和 把校正的合成白平衡增益應(yīng)用于在包括輔助光和環(huán)境光的混合光下拍攝的圖像的步驟。
【文檔編號】H04N9/73GK103533316SQ201310264506
【公開日】2014年1月22日 申請日期:2013年6月28日 優(yōu)先權(quán)日:2012年7月5日
【發(fā)明者】吉田卓司 申請人:索尼公司