原生的三色圖像和高動(dòng)態(tài)范圍圖像的制作方法
【專(zhuān)利摘要】多種實(shí)現(xiàn)提供包括例如RGB圖像和/或HDR圖像的彩色圖像。在一種具體的實(shí)現(xiàn)中，使用捕獲自多個(gè)傳感器的顏色值的第一集合創(chuàng)建彩色圖像。彩色圖像的多個(gè)像素位置具有針對(duì)捕獲自所述多個(gè)傳感器的三種顏色的顏色值。透鏡組件將光傳到所述多個(gè)傳感器。使用捕獲自所述多個(gè)傳感器的顏色值的第二集合創(chuàng)建HDR圖像。另一實(shí)現(xiàn)包括透鏡組件和被布置為通過(guò)透鏡組件接收光的多個(gè)傳感器。能夠聚集捕獲自所述多個(gè)傳感器的顏色值的第一集合，以針對(duì)多個(gè)像素位置提供三種顏色值。能夠?qū)Σ东@自多個(gè)傳感器的顏色值的第二集合進(jìn)行內(nèi)插，以提供HDR圖像。
【專(zhuān)利說(shuō)明】原生的二色圖像和局動(dòng)態(tài)范圍圖像
[0001]相關(guān)申請(qǐng)的交叉引用
[0002]本申請(qǐng)要求享有2012年5月18日遞交的標(biāo)題為“Apparatus to ProvideNative RGB and High Dynamic Range Images with a Single Lens” 的美國(guó)臨時(shí)申請(qǐng)N0.61/688，657的優(yōu)先權(quán)，在這里針對(duì)所有目的通過(guò)引用將其內(nèi)容加入。

【技術(shù)領(lǐng)域】
[0003]所描述的實(shí)現(xiàn)涉及圖像捕獲和/或處理。各種具體實(shí)現(xiàn)涉及捕獲和/或處理原生的三色圖像和高動(dòng)態(tài)范圍(“HDR”)圖像。

【背景技術(shù)】
[0004]電影制作者和其它內(nèi)容創(chuàng)作者在捕獲內(nèi)容方面有一系列可用的選擇。一種選擇是使用紅-綠-藍(lán)(“RGB”)圖像。RGB圖像可以是例如經(jīng)過(guò)內(nèi)插處理的或原生的。另一選擇是使用HDR圖像。通常，內(nèi)容創(chuàng)作者期望在內(nèi)容的不同部分中使用不同類(lèi)型的圖像。例如，電影制作者可能期望使用HDR圖像拍攝電影中的一些選擇的場(chǎng)景。為了實(shí)現(xiàn)該期望，內(nèi)容創(chuàng)作者通常不得不針對(duì)每種類(lèi)型的圖像使用不同的攝像機(jī)。例如，電影制作者可使用第一攝像機(jī)來(lái)捕獲原生的RGB圖像并使用第二攝像機(jī)和第三攝像機(jī)來(lái)捕獲HDR圖像。


【發(fā)明內(nèi)容】

[0005]根據(jù)一般的方面，使用從多個(gè)傳感器捕獲的顏色值的第一集合創(chuàng)建彩色圖像。彩色圖像的多個(gè)像素位置具有針對(duì)三種顏色的顏色值。三種顏色值是從多個(gè)傳感器捕獲的，以及透鏡組件將光傳到多個(gè)傳感器。使用從多個(gè)傳感器捕獲的顏色值的第二集合創(chuàng)建HDR圖像。
[0006]根據(jù)另一個(gè)一般的方面，一種裝置包括透鏡組件和被布置為通過(guò)透鏡組件接收光的多個(gè)傳感器?？蓪?duì)從多個(gè)傳感器捕獲的顏色值的第一集合進(jìn)行聚集，以針對(duì)多個(gè)像素位置提供三種顏色值。可對(duì)從多個(gè)傳感器捕獲的顏色值的第二集合進(jìn)行內(nèi)插，以提供HDR圖像。
[0007]在以下的附圖和【具體實(shí)施方式】中對(duì)一個(gè)或多個(gè)實(shí)現(xiàn)的細(xì)節(jié)進(jìn)行描述。即使通過(guò)一種具體的方式進(jìn)行了描述，應(yīng)該清楚的是，也可以通過(guò)各種方式來(lái)進(jìn)行配置或?qū)崿F(xiàn)。例如，實(shí)現(xiàn)可被執(zhí)行為方法或?qū)崿F(xiàn)為裝置(比如被配置為執(zhí)行一組操作的裝置或存儲(chǔ)了用于執(zhí)行一組操作的指令的裝置)或?qū)崿F(xiàn)于信號(hào)中。結(jié)合附圖和權(quán)利要求考慮以下【具體實(shí)施方式】，其它方面和特征將是明顯的。

【專(zhuān)利附圖】

【附圖說(shuō)明】
[0008]圖1提供了示出攝像機(jī)的示例的框圖；
[0009]圖2提供了示出三個(gè)RGB傳感器的示例的示意圖；
[0010]圖3提供了示出圖2中的三個(gè)RGB傳感器進(jìn)行組合的示例的示意圖；
[0011]圖4示出了用于形成原生的RGB圖像的處理的示例的流程圖；
[0012]圖5提供了示出圖2中的傳感器2和3進(jìn)行組合的示例的示意圖；
[0013]圖6提供了示出將在圖5中的組合的更大版本的四個(gè)像素位置中對(duì)顏色進(jìn)行內(nèi)插的示例的示意圖；
[0014]圖7提供了針對(duì)在圖6中將被內(nèi)插的每個(gè)顏色示出可在內(nèi)插中使用的四個(gè)像素位置的示例的示意圖；
[0015]圖8提供了示出用于形成HDR圖像的處理的示例的流程圖；
[0016]圖9提供了示出用于形成原生的RGB圖像和HDR圖像的處理的示例的流程圖；
[0017]圖10提供了示出發(fā)送系統(tǒng)的示例的框圖；
[0018]圖11提供了示出接收系統(tǒng)的示例的框圖。

【具體實(shí)施方式】
[0019]本申請(qǐng)中的至少一個(gè)實(shí)現(xiàn)涉及一種用于使用相同的透鏡組件(在本申請(qǐng)中經(jīng)常簡(jiǎn)稱(chēng)為透鏡)創(chuàng)建原生的RGB圖像和HDR圖像的方法和裝置。在所述實(shí)現(xiàn)中，透鏡組件將光傳至三個(gè)傳感器，以及捕獲自三個(gè)傳感器的數(shù)據(jù)用來(lái)生成原生的RGB圖像和HDR圖像兩者。在一種實(shí)現(xiàn)中，具體地，本申請(qǐng)描述如何通過(guò)使用三個(gè)傳感器和提出的3X2X4矩陣(參見(jiàn)圖2)(而不是經(jīng)典的2X2 Bayer矩陣)使得攝像機(jī)能夠使用單個(gè)透鏡組件在相同設(shè)備內(nèi)提供原生的RGB以及非常高質(zhì)量的HDR圖像。
[0020]Bayer矩陣(或“Bayer圖案”)是一種濾鏡圖案，其通常具有25%的紅、50%的綠和25%的藍(lán)。Bayer圖案通常是2 X 2矩陣，它們按照需要進(jìn)行重復(fù)(也被稱(chēng)為拼接(tile))以覆蓋具體的分辨率。以下通過(guò)圖2中的傳感器I的最上方的2X2部分示出了一個(gè)示例。該2X2部分一個(gè)紅(位于第一行第二列)、兩個(gè)綠(位于第一行第一列和第二行第二列)和I個(gè)藍(lán)(位于第一行第一列)。Bayer圖案?jìng)鞲衅饕话阒甘褂胋ayer圖案對(duì)進(jìn)入傳感器的光進(jìn)行過(guò)濾的傳感器。在多種實(shí)現(xiàn)中，通過(guò)本領(lǐng)域技術(shù)人員熟知的方式將Bayer圖案應(yīng)用或附加到傳感器。
[0021]“原生的RGB”(或“完全原生的RGB”)圖像指的是所捕獲的數(shù)據(jù)針對(duì)圖像中的每個(gè)像素或基本上每個(gè)像素包括紅色組分、綠色組分和藍(lán)色組分的圖像。顏色組分還被稱(chēng)為“顏色值”或“值”。在多種實(shí)現(xiàn)中，針對(duì)紅、綠和藍(lán)中的每一個(gè)，顏色值是從O到255的8比特整數(shù)。
[0022]術(shù)語(yǔ)“原生的”指的是所有組分(例如R、G和B)是捕獲的，與例如被內(nèi)插的相對(duì)照。結(jié)果，術(shù)語(yǔ)“原生的”可以應(yīng)用到其它類(lèi)型的圖像，比如原生的三色圖像指的是被捕獲的任意三種顏色。其它示例包括原生的YUV圖像.
[0023]HDR圖像指的是與通常的可能情況相比在最亮和最暗區(qū)域之間具有更大的動(dòng)態(tài)范圍的圖像。動(dòng)態(tài)范圍通常涉及圖像的亮度值的范圍。
[0024]具有高動(dòng)態(tài)范圍的源內(nèi)容經(jīng)常會(huì)經(jīng)歷在亮區(qū)域或暗區(qū)域中丟失細(xì)節(jié)。HDR圖像能夠提供一些這種丟失的細(xì)節(jié)。通常，通過(guò)將在不同的亮度水平下捕獲的組分圖像(或圖像的一部分)縫合(stitch)在一起來(lái)生成HDR圖像。
[0025]許多實(shí)現(xiàn)產(chǎn)生實(shí)際不增加可表現(xiàn)的亮度值(例如，通過(guò)8比特值來(lái)表現(xiàn)亮度，而不管是否使用HDR處理)的范圍的HDR圖像。然而，這些實(shí)現(xiàn)中的一些使用處理技巧(例如過(guò)濾)來(lái)將某一范圍的亮度值(例如高亮度值)移動(dòng)到可以更好的表現(xiàn)亮度中的差別的不同的亮度范圍。例如，高亮度經(jīng)?？梢允箓鞲衅黠柡?，從而整個(gè)區(qū)域具有在亮度范圍的高亮度端處或附近的給定亮度值(例如255)。一些實(shí)現(xiàn)應(yīng)用濾鏡來(lái)降低亮度，并且結(jié)果是亮度值不再集中在單一數(shù)值(255)附近，而是擴(kuò)散到一定的范圍。從而，得以提供更多的細(xì)節(jié)。
[0026]可使用三個(gè)傳感器捕獲完全原生的RGB圖像，其中每個(gè)傳感器獨(dú)立地捕獲紅、綠和藍(lán)信息。在透鏡組件和傳感器之間應(yīng)用分束器機(jī)構(gòu)，從而，通常地，每個(gè)傳感器針對(duì)三原色中的每一種顏色接收相同量的亮度。
[0027]通過(guò)使用這種設(shè)備，看起來(lái)不太可能創(chuàng)建HDR圖像，至少如果到達(dá)每個(gè)傳感器的亮度水平相同的話不太可能。為了具有多個(gè)亮度值，需要具有不同的亮度水平的多個(gè)三傳感器設(shè)備。然而，使用多個(gè)設(shè)備是昂貴且不現(xiàn)實(shí)的。
[0028]還可使用單個(gè)透鏡組件在使用裝備有Bayer類(lèi)型有色濾鏡的三個(gè)傳感器的單個(gè)設(shè)備內(nèi)通過(guò)在每個(gè)傳感器的前方應(yīng)用多個(gè)中性(neutral)密度(“ND”)濾鏡來(lái)創(chuàng)建HDR圖像。這種設(shè)備本身就具有很大的價(jià)值。然而，如果使用這種系統(tǒng)，則不太可能使用同一設(shè)備獲得原生RGB圖像，這是因?yàn)锽ayer圖案要求像素內(nèi)插并且不能在針對(duì)每個(gè)像素的完全原生RGB組合中進(jìn)行組合。也就是說(shuō)，即使存儲(chǔ)三個(gè)Bayer圖案,這三個(gè)Bayer圖案也是相同的。添加第二和第三個(gè)Bayer圖案?jìng)鞲衅鞑粫?huì)提供任何附加或新的信息。反而，第二和第三Bayer圖案?jìng)鞲衅髦貜?fù)來(lái)自第一 Bayer圖案?jìng)鞲衅鞯念伾畔?。從而，給定的像素位置不會(huì)從第二和第三Bayer圖案?jìng)鞲衅鳙@得任何新的顏色信息。結(jié)果，使用Bayer圖案?jìng)鞲衅?，沒(méi)有任何像素位置具有多于一種顏色值，并且根據(jù)定義不是原生RGB。反而，將針對(duì)給定的顏色的所捕獲的顏色值用于內(nèi)插算法中，以便為所有像素位置提供內(nèi)插顏色值(針對(duì)給定顏色)。
[0029]然而，內(nèi)插不會(huì)導(dǎo)致原生RGB，這是因?yàn)閮?nèi)插的顏色值并不是捕獲的顏色值。
[0030]然而，本申請(qǐng)中描述的各個(gè)實(shí)現(xiàn)提供了使得電影制作者(或其它內(nèi)容創(chuàng)作者)能夠在相同設(shè)備(通常是攝像機(jī))內(nèi)使用單個(gè)透鏡組件獲得HDR和原生RGB能力兩者。與使用兩個(gè)或更多不同的單一目的攝像機(jī)相比，這一能力使得這些類(lèi)型的效果(HDR和原生RGB)更能負(fù)擔(dān)得起并且更高產(chǎn)。
[0031]參見(jiàn)圖1，示出了允許對(duì)HDR圖像和原生RGB圖像兩者都進(jìn)行捕獲的攝像機(jī)100。攝像機(jī)100包括透鏡組件110。透鏡組件110包括(在一些實(shí)現(xiàn)中)單個(gè)透鏡。然而，其它實(shí)現(xiàn)在透鏡組件110中包括多個(gè)透鏡。
[0032]透鏡組件110將光傳到分束器115。分束器115將光傳到三個(gè)傳感器，包括第一傳感器120、第二傳感器130和第三傳感器140。所傳播的光可根據(jù)不同的實(shí)現(xiàn)而有所不同。然而，在至少一種實(shí)現(xiàn)中，將光等量地傳到傳感器120、130和140中的每一個(gè)。
[0033]攝像機(jī)100包括布置在分束器115和第一傳感器120之間的ND濾鏡145。ND濾鏡145在不同的實(shí)現(xiàn)中具有不同的過(guò)濾強(qiáng)度。ND濾鏡如所熟知的一樣基本均等地降低和/或修改所有波長(zhǎng)或顏色的光的強(qiáng)度。其它濾鏡用于不同的實(shí)現(xiàn)中，但非ND濾鏡通常將對(duì)由下游傳感器(比如第一傳感器120)捕獲的顏色有所影響。
[0034]由傳感器120、130和140捕獲的數(shù)據(jù)提供到下游設(shè)備。攝像機(jī)100中的下游設(shè)備被示為處理器或存儲(chǔ)設(shè)備150。對(duì)攝像機(jī)100的一些實(shí)現(xiàn)只捕獲數(shù)據(jù)，并且在這種實(shí)現(xiàn)中，下游設(shè)備是存儲(chǔ)設(shè)備150。其它實(shí)現(xiàn)同樣或附加地對(duì)所捕獲的數(shù)據(jù)執(zhí)行一些處理，并且在這種實(shí)現(xiàn)中，下游設(shè)備是處理器150或組合處理器和存儲(chǔ)設(shè)備150。
[0035]攝像機(jī)100還能夠選擇性地移除和插入ND濾鏡145。這一控制由雙向箭頭160指示。可通過(guò)具有供攝像機(jī)操作者移除和插入ND濾鏡145的插槽或具有用來(lái)將ND濾鏡145從對(duì)射向傳感器I 120的光進(jìn)行濾波的位置移入和移出的位于攝像機(jī)100內(nèi)部的轉(zhuǎn)軸(hinge)來(lái)實(shí)現(xiàn)這種控制。
[0036]在將ND濾鏡145從攝像機(jī)100移除的情況下，攝像機(jī)100能夠捕獲可用來(lái)創(chuàng)建原生RGB圖像的數(shù)據(jù)，下文將結(jié)合圖2-4進(jìn)行詳述。此外，在將ND濾鏡145插入攝像機(jī)100的情況下，攝像機(jī)100能夠捕獲可用來(lái)創(chuàng)建HDR圖像的數(shù)據(jù)，下文將結(jié)合圖2和5-8進(jìn)行詳述。結(jié)合圖6-9描述了用來(lái)選擇性地捕獲用于在生產(chǎn)原生RGB圖像或HDR圖像時(shí)使用的數(shù)據(jù)的能力。
[0037]如上所述，為了在攝像機(jī)中提供完全原生RGB和HDR，圖1的實(shí)現(xiàn)使用具有分束器機(jī)構(gòu)115的三個(gè)傳感器120、130和140，其中分束器機(jī)構(gòu)115將入射光分成三個(gè)均等強(qiáng)度的光束?？梢?jiàn)，攝像機(jī)100與只包括單個(gè)傳感器的標(biāo)準(zhǔn)攝像機(jī)有所不同。
[0038]此外，攝像機(jī)100與只使用經(jīng)典單個(gè)傳感器、2X2 Bayer圖案的標(biāo)準(zhǔn)攝像機(jī)有所不同。反而，攝像機(jī)100使用新的三傳感器、3X2X4有色像素圖案。
[0039]參見(jiàn)圖2，示出新的3X2X4圖案。“3 X 2X4”中的“3”反映出圖2中包括3個(gè)傳感器圖案(包括第一傳感器圖案210、第二傳感器圖案220、第三傳感器圖案230)這一事實(shí)。“2X4”反映出通過(guò)重復(fù)的2X4矩陣(或圖案)來(lái)描述傳感器圖案210、220和230這一事實(shí)。從而，第一傳感器圖案210 (傳感器圖案220和230也類(lèi)似)將在整個(gè)傳感器上重復(fù)。
[0040]例如，在攝像機(jī)100的一種實(shí)現(xiàn)中，第一傳感器圖案210在整個(gè)第一傳感器120上重復(fù)，并且第一傳感器圖案210充當(dāng)將具有對(duì)應(yīng)于第一傳感器圖案210上所示的顏色的波長(zhǎng)的光傳到第一傳感器120的濾鏡。具體地，在這一實(shí)現(xiàn)中，第一傳感器圖案210包括左上部分215，其中用G來(lái)表示“綠”，第二傳感器圖案220包括用R來(lái)表示“紅”的左上部分225，以及第三傳感器圖案包括用B來(lái)表示“藍(lán)”的左上部分235。在這一實(shí)現(xiàn)中，(i)第一傳感器120將在由左上部分215所覆蓋的區(qū)域中接收綠光，(ii)第二傳感器130將在由左上部分225所覆蓋的區(qū)域中接收紅光，(iii)第三傳感器140將在由左上部分235所覆蓋的區(qū)域中接收藍(lán)光。在多種實(shí)現(xiàn)中，傳感器120、130和140的由左上部分215、225和235分別覆蓋的區(qū)域?qū)?duì)應(yīng)于由傳感器120、130和140捕獲的圖像中的像素。
[0041]應(yīng)該清楚的是，實(shí)際上通過(guò)重復(fù)的2X2圖案來(lái)描述第一傳感器圖案210。然而，為了方便，使用了 2X4的區(qū)域，這是因?yàn)榈诙鞲衅鲌D案220和第三傳感器圖案230是通過(guò)圖2中所示的2X4區(qū)域描述的。還應(yīng)清楚的是，第一傳感器圖案210是Bayer圖案。從而，在這種實(shí)現(xiàn)中，由包括2X2Bayer圖案的3X2X4圖案來(lái)替代標(biāo)準(zhǔn)攝像機(jī)的2X2 Bayer圖案。
[0042]參見(jiàn)圖3，再次示出了三個(gè)傳感器圖案210、220和230。圖3還包括組合圖案310。在組合圖案310中，三個(gè)傳感器圖案210、220和230的相應(yīng)位置被組合?！敖M合”指的是聚集或集中或聚合來(lái)自三個(gè)傳感器圖案210、220和230的顏色值。從而，傳感器圖案210、220和230的左上部分215、225和235中的每一個(gè)中的顏色值分別被包括在組合圖案310的左上部分315中。左上部分315列出了 GRB，這是因?yàn)槠浒?組合)了來(lái)自第一傳感器圖案210的左上部分215的G、來(lái)自第二傳感器圖案220的左上部分225的R和來(lái)自第三傳感器圖案230的左上部分235的B。
[0043]左上部分215、225和235均從入射在透鏡組件110上的源圖像的相同區(qū)域(“左上”區(qū)域)捕獲光。從而，被攝像機(jī)錄制的源圖像的“左上”區(qū)域由三個(gè)傳感器210、220和230分別以綠、紅和藍(lán)來(lái)捕獲。組合圖案310通過(guò)在左上部分315中列出GRB反映了這一事實(shí)。
[0044]組合圖案310的其它部分是通過(guò)類(lèi)似地方式得到的。具體地，從三個(gè)傳感器圖案210,220和230中的相應(yīng)位置得到的顏色值在組合圖案310的相應(yīng)位置中進(jìn)行組合。通過(guò)檢驗(yàn)組合圖案310，清楚的是，組合圖案310的每個(gè)位置都具有紅、綠和藍(lán)三原色。從而，通過(guò)對(duì)由三個(gè)傳感器120、130和140(分別具有傳感器圖案210、220和230)中的每一個(gè)捕獲的圖像進(jìn)行組合，能夠生成原生RGB圖像。
[0045]可在例如處理器150中執(zhí)行對(duì)單個(gè)傳感器圖像進(jìn)行組合以形成原生RGB圖像的處理。這一處理包括例如將針對(duì)每個(gè)像素位置的所有紅、綠和藍(lán)顏色值都集中到數(shù)據(jù)結(jié)構(gòu)中，所述數(shù)據(jù)結(jié)構(gòu)可被訪問(wèn)以顯示得到的原生RGB圖像。從而，如上所述，通過(guò)使用例如采用這-3X2X4圖案的有色像素大小濾鏡來(lái)組合三個(gè)傳感器值，可以看出，每個(gè)組合的像素具有對(duì)R、G和B的一個(gè)捕獲，因此提供了原生RGB捕獲。
[0046]其它實(shí)現(xiàn)使用與圖3中所示不同的第二傳感器圖案和第三傳感器圖案。多種實(shí)現(xiàn)使用多種傳感器圖案中的可被組合以提供標(biāo)準(zhǔn)Bayer圖案所丟失的顏色的任意圖案(如傳感器圖案210中所示的一樣)。多種實(shí)現(xiàn)不針對(duì)所有的傳感器模式使用三色傳感器圖案，比如通過(guò)將來(lái)自第二傳感器圖案220的G(或R、或B)放入第三傳感器圖案230中。另一實(shí)現(xiàn)可使用2 X 2傳感器圖案來(lái)完成，其中第二傳感器圖案只是第二傳感器圖案220的上半部分，第三傳感器圖案只是第三傳感器圖案230的上半部分。
[0047]參見(jiàn)圖4，提供了用于形成原生的RGB圖像的處理400。上文中已經(jīng)基本上參照?qǐng)D2-3描述了用于形成原生RGB圖像的處理?，F(xiàn)在，針對(duì)一般處理提供具體的處理流程。
[0048]處理400包括不使用任何ND濾鏡從三個(gè)傳感器捕獲傳感器數(shù)據(jù)(410)。在至少一種實(shí)現(xiàn)中，操作410由移除了 ND濾鏡145的攝像機(jī)100來(lái)執(zhí)行。在一種這樣的實(shí)現(xiàn)中，通過(guò)分別經(jīng)由傳感器圖案210、220和230從傳感器120、130和140捕獲圖像數(shù)據(jù)來(lái)執(zhí)行操作410。
[0049]處理400包括組合所捕獲的傳感器數(shù)據(jù)以形成原生RGB圖像(420)。繼續(xù)以上參照操作410討論的實(shí)現(xiàn)，通過(guò)例如組合來(lái)自傳感器120、130和140的所捕獲的圖像數(shù)據(jù)以形成原生RGB圖像來(lái)執(zhí)行操作420。
[0050]參見(jiàn)圖5-8 (以及之前描述的圖1-3)，現(xiàn)在描述用于創(chuàng)建HDR圖像的一個(gè)或多個(gè)實(shí)現(xiàn)。多個(gè)這種實(shí)現(xiàn)可在將ND濾鏡145插入攝像機(jī)100的情況下由攝像機(jī)100執(zhí)行。
[0051]在一些實(shí)現(xiàn)中，認(rèn)為具有第一傳感器圖案210的第一傳感器120是“自主”傳感器。這是由于具有第一傳感器圖案210的第一傳感器120可被用來(lái)生成內(nèi)插RGB圖像。這源自第一傳感器圖案210是經(jīng)典Bayer圖案的一個(gè)版本并且可像本領(lǐng)域已知的那樣通過(guò)像素內(nèi)插提供完全(但不是原生的)RGB圖像這一事實(shí)。
[0052]在一些實(shí)現(xiàn)中，認(rèn)為第二傳感器130和第三傳感器140是“補(bǔ)充”傳感器。這是由于可通過(guò)補(bǔ)充的方式對(duì)分別從使用傳感器圖案220和230的傳感器130和140捕獲的圖像進(jìn)行組合，以?xún)?nèi)插完全分辨率圖像。在多種實(shí)現(xiàn)中，這些捕獲的圖像的組合使得與不對(duì)所捕獲的圖像進(jìn)行組合的情況下的可能相比能夠更好地內(nèi)插(例如，針對(duì)所有三種顏色進(jìn)行五點(diǎn)內(nèi)插)。
[0053]然而，其它實(shí)現(xiàn)將第二傳感器130用作自主傳感器并且對(duì)第二傳感器130進(jìn)行內(nèi)插以生成經(jīng)過(guò)內(nèi)插的完全RGB圖像。類(lèi)似地，在多種實(shí)現(xiàn)中，第三傳感器140用作自主傳感器并且進(jìn)行內(nèi)插以生成經(jīng)過(guò)內(nèi)插的完全RGB圖像。
[0054]參見(jiàn)圖5，再次示出了傳感器圖案220和230。此外，提供了作為傳感器圖案220和230的組合的組合圖案510。例如，組合圖案510的左上部分515列出了代表“紅”和“藍(lán)”的顏色值RB。之所以包括了左上部分515的“R”，是因?yàn)榈诙鞲衅?20的左上部分225列出了顏色值R。之所以包括了左上部分515的“B”，是因?yàn)榈谌齻鞲衅?30的左上部分235列出了顏色值B。通過(guò)類(lèi)似的方式得到組合圖案510的其它部分。具體地，來(lái)自?xún)蓚€(gè)傳感器圖案220和230中的相應(yīng)位置的顏色值在組合圖案510的相應(yīng)位置中進(jìn)行組合。
[0055]參見(jiàn)圖6，提供了擴(kuò)展圖案600。擴(kuò)展圖案600包括重復(fù)出現(xiàn)兩次的組合圖案510?？梢?jiàn)，組合圖案510的第一次出現(xiàn)包括擴(kuò)展圖案600的左邊兩列，組合圖案510的第二次出現(xiàn)包括擴(kuò)展圖案600的右邊兩列。
[0056]擴(kuò)展圖案600包括內(nèi)部位置620、630、640和650，其均對(duì)應(yīng)于各種實(shí)現(xiàn)中的單獨(dú)像素。本例中的“內(nèi)部”位置是非邊緣像素的像素位置。檢驗(yàn)內(nèi)部位置620-650，可以看出每個(gè)內(nèi)部位置都具有兩個(gè)顏色值。從而，為了產(chǎn)生完全RGB圖像,為內(nèi)部位置620-650內(nèi)插一個(gè)顏色值。如圖所示，(i)針對(duì)內(nèi)部位置620，內(nèi)插G，(ii)針對(duì)內(nèi)部位置630，內(nèi)插B，(iii)針對(duì)內(nèi)部位置640，內(nèi)插R，(iv)針對(duì)內(nèi)部位置650，內(nèi)插G?？梢葬槍?duì)所有位置繼續(xù)這一標(biāo)識(shí)丟失的顏色值的方式。此外，通過(guò)更多次重復(fù)(拼接)組合圖案510，擴(kuò)展圖案600的尺寸可增加，以對(duì)應(yīng)任意尺寸的傳感器。
[0057]參見(jiàn)圖7，提供了擴(kuò)展圖案600的四個(gè)不同版本，這四個(gè)版本指示內(nèi)插策略。四個(gè)版本包括(i)對(duì)應(yīng)于內(nèi)部位置620的第一內(nèi)插圖案720，(ii)對(duì)應(yīng)于內(nèi)部位置630的第二內(nèi)插圖案730，(iii)對(duì)應(yīng)于內(nèi)部位置640的第三內(nèi)插圖案740，(iv)對(duì)應(yīng)于內(nèi)部位置650的第四內(nèi)插圖案750。
[0058]如內(nèi)插圖案720-750中的每一個(gè)所示，在左、右、上和下方向緊鄰的位置中存在內(nèi)部位置620-650所丟失的顏色值。針對(duì)內(nèi)插圖案720，通過(guò)圓圈722、724、726和728示出了這一點(diǎn)，其中在相應(yīng)的位置(例如像素)強(qiáng)調(diào)了 G。針對(duì)內(nèi)插圖案730，通過(guò)圓圈732、734、736和738示出了這一點(diǎn)，其中在相應(yīng)的位置強(qiáng)調(diào)了 B。針對(duì)內(nèi)插圖案740，通過(guò)圓圈742、744、746和748示出了這一點(diǎn)，其中在相應(yīng)的位置強(qiáng)調(diào)了 R。針對(duì)內(nèi)插圖案750，通過(guò)圓圈752、754、756和758示出了這一點(diǎn)，其中在相應(yīng)的位置強(qiáng)調(diào)了 G。
[0059]清楚的是，至少針對(duì)內(nèi)插圖案730和740，可以在包括對(duì)角線相鄰的位置的所有相鄰位置中在丟失的顏色值附近劃圓圈。也就是說(shuō)，例如，在內(nèi)插圖案730中，圍繞內(nèi)插位置630的所有八個(gè)相鄰位置都具有B顏色值。這同樣適用于內(nèi)插圖案740，其中圍繞內(nèi)插位置640的所有八個(gè)相鄰位置都具有R顏色值。
[0060]然而，同樣清楚的是，即使針對(duì)擴(kuò)展圖案600 (基于組合圖案510)的更大版本以及內(nèi)插圖案720、730、740和750的更大版本，所有的內(nèi)部位置都將在其鄰近的左、右、上和下方的位置中存在其丟失的顏色值。
[0061]從而，能夠?qū)木哂薪M合圖案510的一個(gè)版本的傳感器捕獲的圖像中的所有內(nèi)部位置使用公共內(nèi)插算法。公共內(nèi)插算法可以基于例如左、右、上和下方的相鄰位置。一種這樣的內(nèi)插算法是五點(diǎn)像素內(nèi)插算法，其可被用來(lái)內(nèi)插丟失的顏色值。然而，任何使用左、右、上和下方的四分相鄰位置的算法都可被使用。
[0062]與使用Bayer圖案相比，這一實(shí)現(xiàn)(使用圖5-7的圖案)的好處在于，針對(duì)R、G和B中的每個(gè)丟失的像素值，完全五點(diǎn)圖案對(duì)于像素內(nèi)插是可用的。作為對(duì)比，當(dāng)使用Bayer圖案時(shí)，只有在針對(duì)G時(shí)，完全五點(diǎn)圖案對(duì)于像素內(nèi)插才是可用的，針對(duì)R和B則不是。與只使用Bayer圖案相比，使得完全五點(diǎn)圖案針對(duì)所有三種顏色對(duì)于像素內(nèi)插都是可用的將導(dǎo)致更高質(zhì)量的內(nèi)插圖像。可通過(guò)使用單個(gè)內(nèi)插算法來(lái)實(shí)現(xiàn)這一質(zhì)量，與使用多個(gè)內(nèi)插算法的實(shí)現(xiàn)相比，這同樣提供了復(fù)雜度的優(yōu)點(diǎn)。這一比較涉及使用Bayer圖案的單個(gè)傳感器，但即使所使用的三個(gè)傳感器都具有Bayer圖案，結(jié)果也會(huì)是一樣的，這是因?yàn)锽ayer圖案將是相同的且不會(huì)提供任何附加顏色信息。
[0063]在HDR的情況中，雖然多個(gè)場(chǎng)景能夠在應(yīng)用了不同的ND濾鏡的情況下捕獲整個(gè)亮度范圍，但至少一個(gè)具體實(shí)現(xiàn)允許創(chuàng)新的可能性。第一傳感器圖案210(至少在與第二傳感器圖案220和第三傳感器圖案230的組合相比較時(shí))具有較低的分辨率，這是因?yàn)槠涫褂媒?jīng)典的Bayer方案內(nèi)插像素。因此，第一傳感器圖案210可與高值ND濾鏡(濾除亮度)一起使用，以便在圖像的通常將使傳感器飽和的高亮度區(qū)域中提供清楚的像素(即，在一個(gè)范圍內(nèi)分布具有有用亮度信息的像素值，使得觀看者能夠看見(jiàn)細(xì)節(jié)和差別)。此外，第二傳感器圖案220和第三傳感器圖案230的組合(不使用任何ND濾鏡)能夠提供設(shè)置攝像機(jī)所針對(duì)的高分辨率的“參考”圖像。由于兩個(gè)傳感器圖案220和230用來(lái)捕獲這一“參考”圖像，所以可以生成組合圖案510，而且完全五點(diǎn)像素內(nèi)插針對(duì)所有三種原色都是可用的。
[0064]在這一具體實(shí)現(xiàn)中，基于三個(gè)捕獲的圖像生成了較低分辨率的圖像和較高分辨率的“參考”圖像。這兩種不同分辨率的圖像然后進(jìn)行組合，以形成HDR圖像。這一組合的HDR圖像將具有更高的亮度，并且與使用三個(gè)不同的Bayer類(lèi)型傳感器相比具有更高的分辨率。由于ND濾鏡使得能夠?qū)Ω蟮牧炼确秶M(jìn)行有意義地捕獲并且為圖像提供更多的有用亮度信息，所以提供了更高的亮度。由于(與能夠使用Bayer圖案的標(biāo)準(zhǔn)內(nèi)插相比)經(jīng)過(guò)改進(jìn)的內(nèi)插，所以提供了更高的分辨率。
[0065]參見(jiàn)圖8，提供了用于形成HDR圖像的處理800。上文中參照?qǐng)D5_7基本上描述了用于形成HDR圖像的處理?，F(xiàn)在，針對(duì)一般處理提供具體的處理流程。
[0066]處理800包括從三個(gè)傳感器捕獲傳感器數(shù)據(jù)，其中將一個(gè)ND濾鏡應(yīng)用到傳感器之一 (810)。在至少一種實(shí)現(xiàn)中，由插入了 ND濾鏡145的攝像機(jī)100來(lái)執(zhí)行操作810。在一種這樣的實(shí)現(xiàn)中，通過(guò)分別經(jīng)由傳感器圖案210、220和230從傳感器120、130和140捕獲圖像數(shù)據(jù)來(lái)執(zhí)行操作810，其中ND濾鏡145插入于分束器115和第一傳感器120之間。
[0067]處理800包括對(duì)從ND過(guò)濾傳感器捕獲的圖像數(shù)據(jù)進(jìn)行內(nèi)插以形成輸出的高亮度區(qū)域(“HLA”)數(shù)據(jù)(820)。“數(shù)據(jù)”可以是例如整個(gè)幀的全部或一部分?！案吡炼葏^(qū)域”指的是原始源內(nèi)容的在ND過(guò)濾之前具有高亮度值的區(qū)域。當(dāng)然，這些區(qū)域在原始源內(nèi)容的ND過(guò)濾版本中與ND過(guò)濾版本的其余部分相比同樣具有高亮度值。通常，HLA “數(shù)據(jù)”被認(rèn)為是HLA的原始顏色值的重映射，從而這些值占用可用的動(dòng)態(tài)范圍的更大部分。
[0068]ND濾鏡將降低輸入的源內(nèi)容的總體亮度，這將降低傳感器所捕獲到的顏色值。這一降低通常引起輸入的源內(nèi)容的低顏色值被壓縮到傳感器的動(dòng)態(tài)范圍的低端。這一降低通常還引起輸入的源內(nèi)容的高顏色值在傳感器的動(dòng)態(tài)范圍上擴(kuò)散。
[0069]繼續(xù)上文中參照操作810討論的實(shí)現(xiàn)，由例如處理器150來(lái)執(zhí)行操作820。在這一實(shí)現(xiàn)中，處理器150執(zhí)行例如用于Bayer圖案圖像的標(biāo)準(zhǔn)內(nèi)插算法。對(duì)通過(guò)第一傳感器圖案210從第一傳感器120捕獲的圖像或數(shù)據(jù)進(jìn)行內(nèi)插。在這種實(shí)現(xiàn)中，輸出的圖像是整個(gè)內(nèi)插的圖像。在這一實(shí)現(xiàn)中，HLA數(shù)據(jù)是內(nèi)插的圖像的一部分。
[0070]處理800包括組合從其它傳感器捕獲的數(shù)據(jù)(830)。繼續(xù)上文中參照操作810-820討論的實(shí)現(xiàn)，由例如處理器150來(lái)執(zhí)行操作830。在這一實(shí)現(xiàn)中，處理器150對(duì)通過(guò)傳感器圖案220和230從傳感器130和140捕獲的圖像數(shù)據(jù)進(jìn)行組合。在傳感器130或140之前沒(méi)有使用任何ND濾鏡，但在其它實(shí)現(xiàn)中使用具有各種強(qiáng)度的ND濾鏡。結(jié)果是具有由組合圖案510指示的顏色的值的圖像或圖像數(shù)據(jù)。
[0071]處理800包括對(duì)來(lái)自操作830的組合傳感器數(shù)據(jù)進(jìn)行內(nèi)插，以形成低亮度區(qū)域(“LLA”)數(shù)據(jù)(840)。“數(shù)據(jù)”可以是例如整個(gè)圖像的一部分或簡(jiǎn)單地是數(shù)據(jù)的獨(dú)立集合?！暗土炼葏^(qū)域”指的是原始源內(nèi)容的具有低亮度值的區(qū)域，如果沒(méi)有任何ND濾鏡的話，其也是捕獲的圖像數(shù)據(jù)。在通常的實(shí)現(xiàn)中，LLA將具有使用傳感器的動(dòng)態(tài)范圍有效地表現(xiàn)的顏色值。
[0072]繼續(xù)上文中參照操作810-830討論的實(shí)現(xiàn)，由例如處理器150來(lái)執(zhí)行操作840。在這一實(shí)現(xiàn)中，處理器150如圖7所討論的那樣執(zhí)行例如五點(diǎn)內(nèi)插算法，以便產(chǎn)生針對(duì)最終HDR圖像的參考圖像。在這一實(shí)現(xiàn)中，LLA數(shù)據(jù)是參考圖像的一部分。
[0073]處理800包括合并HLA數(shù)據(jù)和LLA數(shù)據(jù)，以形成HDR圖像(850)。HLA數(shù)據(jù)包括針對(duì)原始內(nèi)容源的具有高亮度的部分的重映射(由于ND濾鏡)顏色值。LLA數(shù)據(jù)包括針對(duì)原始內(nèi)容源的具有低亮度的部分的顏色值。合并這兩個(gè)數(shù)據(jù)集合提供具有標(biāo)識(shí)原始源內(nèi)容的低亮度部分和原始源內(nèi)容的高亮度部分兩者的顏色值。此外，由于ND濾鏡，通常在大的動(dòng)態(tài)范圍上表示高亮度部分，從而對(duì)于觀看者來(lái)講，高亮度部分的細(xì)節(jié)是更加可見(jiàn)的。
[0074]繼續(xù)上文中參照操作810-840討論的實(shí)現(xiàn)，由例如處理器150來(lái)執(zhí)行操作850。處理器150可以通過(guò)多種方式執(zhí)行操作850中的合并。在一種實(shí)現(xiàn)中，處理器150確定原始內(nèi)容源的哪部分是“高”亮度區(qū)域，比如天空或窗外的景色。這些標(biāo)識(shí)的區(qū)域包括例如具有高于特定閾值的平均亮度的對(duì)象或特征。所述實(shí)現(xiàn)然后從這些“高”亮度位置提取HLA數(shù)據(jù)并且將所提取的數(shù)據(jù)拷貝到LLA數(shù)據(jù)的共位位置。其它實(shí)現(xiàn)從LLA數(shù)據(jù)(非高亮度區(qū)域或所標(biāo)識(shí)的低亮度區(qū)域)提取數(shù)據(jù)并將其拷貝到HLA數(shù)據(jù)中以形成HDR圖像。其它實(shí)現(xiàn)從LLA數(shù)據(jù)和HLA數(shù)據(jù)都提取數(shù)據(jù)，并在新的圖像中合并兩個(gè)提取。
[0075]在多個(gè)實(shí)現(xiàn)中，HLA數(shù)據(jù)和/或LLA數(shù)據(jù)包括整個(gè)幀。然而，在其它實(shí)現(xiàn)中，HLA數(shù)據(jù)和/或LLA數(shù)據(jù)只是幀的一小部分。
[0076]參見(jiàn)圖9，提供了用于形成原生的三色圖像和HDR圖像的處理900。在多種實(shí)現(xiàn)中，三色圖像是RGB圖像。然而，如本申請(qǐng)中所討論的一樣，在不同的實(shí)現(xiàn)中使用其它顏色。上文中參照?qǐng)D2-8基本上描述了用于形成這兩種圖像的處理的示例?，F(xiàn)在，針對(duì)一般處理提供具體的處理流程。
[0077]處理900包括從多個(gè)傳感器和單個(gè)透鏡組件創(chuàng)建原生三色圖像(910)。在至少一種實(shí)現(xiàn)中，操作910包括使用從多個(gè)傳感器捕獲的顏色值的第一集合創(chuàng)建RGB圖像。在這一實(shí)現(xiàn)中，RGB圖像的多個(gè)像素位置具有針對(duì)R、G和B的顏色值，其中所述顏色值是從多個(gè)傳感器捕獲的，以及單個(gè)透鏡組件將光傳到多個(gè)傳感器。
[0078]在另一實(shí)現(xiàn)中，使用移除了 ND濾鏡145的攝像機(jī)100來(lái)執(zhí)行操作910，其中傳感器圖案210,220和230分別用于傳感器120、130和140。攝像機(jī)100使用例如處理400執(zhí)行操作910。
[0079]處理900包括從多個(gè)傳感器創(chuàng)建HDR圖像(920)。在至少一種實(shí)現(xiàn)中，操作920包括使用從多個(gè)傳感器捕獲的顏色值的第二集合創(chuàng)建HDR圖像。在一些這種實(shí)現(xiàn)中，HDR圖像包括高亮度區(qū)域組分和低亮度區(qū)域組分。
[0080]在另一實(shí)現(xiàn)中，由插入了 ND濾鏡145的攝像機(jī)100來(lái)執(zhí)行操作920，其中傳感器圖案210,220和230分別用于傳感器120、130和140。攝像機(jī)100使用例如處理800執(zhí)行操作920。處理900能夠使用相同的傳感器集合創(chuàng)建原生RGB圖像和HDR圖像兩者。應(yīng)該清楚的是，這也使得單個(gè)攝像機(jī)(包括傳感器的集合和單個(gè)透鏡組件)能夠被用來(lái)捕獲原生RGB和HDR圖像兩者。這種攝像機(jī)具有用來(lái)選擇性地捕獲用于在生成原生RGB圖像或HDR圖像時(shí)使用的數(shù)據(jù)的能力。
[0081]實(shí)現(xiàn)了涉及向處理900添加附加特征的多種實(shí)現(xiàn)。處理900的一些變形包括以下實(shí)現(xiàn)中的一個(gè)或多個(gè)特征。
[0082]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得所述多個(gè)傳感器包括被配置為獲得多種顏色且使用具有彼此不同的顏色圖案的濾鏡的三個(gè)傳感器。
[0083]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得三種不同的顏色圖案包括:⑴包括紅(“R”)、綠(“G”)和藍(lán)(“B”)的第一圖案，(ii)包括R、G和B的第二圖案，
(iii)包括R、G和B的第三圖案。
[0084]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得創(chuàng)建HDR圖像包括對(duì)顏色值的第二集合進(jìn)行內(nèi)插以使得HDR圖像的多個(gè)像素位置具有R、G和B。
[0085]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得創(chuàng)建HDR圖像包括對(duì)顏色值的第二集合進(jìn)行內(nèi)插以使得HDR圖像的所有內(nèi)部像素位置具有R、G和B。
[0086]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得HDR圖像包括具有從第一圖像中的相應(yīng)位置得到的像素值的高亮度區(qū)域組分，以及包括具有從第二圖像中的相應(yīng)位置得到的像素值的低亮度區(qū)域組分。
[0087]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得(i)多個(gè)傳感器包括Bayer圖案?jìng)鞲衅鳎??)顏色值的第二集合包括從Bayer圖案?jìng)鞲衅鞑东@的顏色值，(iii)創(chuàng)建HDR圖像包括創(chuàng)建高亮度區(qū)域組分，以及(iv)創(chuàng)建高亮度區(qū)域組分包括對(duì)從Bayer圖案?jìng)鞲衅鞑东@的顏色值的第二集合中的顏色值進(jìn)行內(nèi)插。
[0088]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得(i)多個(gè)傳感器包括第一傳感器和第二傳感器，(?)第一和第二傳感器被配置為獲得多種顏色，(iii)創(chuàng)建HDR圖像包括創(chuàng)建低亮度區(qū)域組分，以及(iv)創(chuàng)建低亮度區(qū)域組分包括從第二集合聚集捕獲自第一傳感器和第二傳感器的R、G和B顏色值，以形成可使用五點(diǎn)算法內(nèi)插的R、G和B圖案。
[0089]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得創(chuàng)建低亮度區(qū)域組分還包括使用五點(diǎn)算法對(duì)所形成的R、G和B圖案進(jìn)行內(nèi)插。
[0090]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得創(chuàng)建高亮度區(qū)域組分還包括在多個(gè)傳感器中的至少一個(gè)前使用中性密度濾鏡。
[0091]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得(i)多個(gè)傳感器包括第一傳感器、第二傳感器和第三傳感器，(?)第一傳感器、第二傳感器和第三傳感器被配置為獲得多種顏色，以及(iii)創(chuàng)建彩色圖像還包括針對(duì)至少所述多個(gè)像素位置從第一集合聚集捕獲自第一傳感器、第二傳感器和第三傳感器的R、G和B顏色值。
[0092]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得第一傳感器是Bayer圖案?jìng)鞲衅鳌?br> [0093]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得多個(gè)傳感器包括不多于三個(gè)傳感器。
[0094]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得顏色值的第一集合與顏色值的第二集合重疊。
[0095]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得三種顏色是相加色。
[0096]在另一實(shí)現(xiàn)中，對(duì)處理900進(jìn)一步進(jìn)行限定，以使得⑴三種顏色是R、G和B，以及(ii)彩色圖像是RGB圖像。
[0097]在另一實(shí)現(xiàn)中，由包括透鏡組件和多個(gè)傳感器的攝像機(jī)執(zhí)行處理900。
[0098]在另一實(shí)現(xiàn)中，提供了一種裝置，該裝置包括被共同配置為執(zhí)行處理900或處理900的變形的一個(gè)或多個(gè)處理器。
[0099]在另一實(shí)現(xiàn)中，提供了一種裝置，該裝置包括用于執(zhí)行處理900或處理900的變形的操作的結(jié)構(gòu)。所述結(jié)構(gòu)包括例如一個(gè)或多個(gè)處理器。
[0100]在另一實(shí)現(xiàn)中，提供了一種處理器可讀介質(zhì)。處理器可讀介質(zhì)存儲(chǔ)用于使得一個(gè)或多個(gè)處理器共同執(zhí)行處理900或處理900的變形的指令。
[0101]在另一實(shí)現(xiàn)中，裝置包括透鏡組件和被布置為通過(guò)透鏡組件接收光的多個(gè)傳感器?？蓪?duì)從多個(gè)傳感器捕獲的顏色值的第一集合進(jìn)行聚集，以針對(duì)多個(gè)像素位置提供三種顏色值。可對(duì)從多個(gè)傳感器捕獲的顏色值的第二集合進(jìn)行內(nèi)插，以提供HDR圖像。所述裝置可被用來(lái)執(zhí)行例如處理900或處理900的變形。
[0102]在一種變形中，多個(gè)傳感器包括第一傳感器、第二傳感器和第三傳感器。第一傳感器被配置為使用三色圖案獲得三種顏色。第二傳感器使用與第一傳感器的圖案不同的三色圖案。第三傳感器使用與第一傳感器的圖案和第二傳感器的圖案不同的三色圖案。
[0103]在一種變形中，HDR圖像包括(i)高亮度區(qū)域組分，具有從第一圖像中的相應(yīng)位置得到的像素值，(ii)低亮度區(qū)域組分，具有從第二圖像中的相應(yīng)位置得到的像素值。第一傳感器圖案使得能夠?qū)牡谝粋鞲衅鞑东@的顏色值進(jìn)行內(nèi)插，以針對(duì)高亮度區(qū)域組分的所有內(nèi)部像素提供R、G和B顏色值。第二傳感器圖案和第三傳感器圖案使得能夠?qū)牡诙鞲衅骱偷谌齻鞲衅鞑东@的顏色值進(jìn)行聚集并使用五點(diǎn)算法進(jìn)行內(nèi)插，以針對(duì)低亮度區(qū)域組分的所有內(nèi)部像素提供R、G和B顏色值。第二傳感器圖案和第三傳感器圖案使得能夠?qū)牡谝粋鞲衅?、第二傳感器和第三傳感器捕獲的顏色值進(jìn)行聚集，以針對(duì)RGB圖像的所有內(nèi)部像素提供捕獲的R、G和B顏色值。
[0104]在一種變形中，第二傳感器圖案是3/8的R、2/8的G和3/8的B。
[0105]在一種變形中，第三傳感器圖案是3/8的R、2/8的G和3/8的B。
[0106]在一種變形中，第二傳感器圖案和第三傳感器圖案進(jìn)行組合，以提供從Bayer圖案丟失的顏色。
[0107]在一種變形中，第一傳感器的三色圖案是Bayer圖案。
[0108]在一種變形中，裝置包括布置在透鏡組件和多個(gè)傳感器之一之間的中性密度濾鏡。
[0109]在一種變形中，裝置包括布置在透鏡組件和第一傳感器之間的中性密度濾鏡。
[0110]在一種變形中，三種顏色是R、G和B，以及可對(duì)顏色值進(jìn)行聚集以形成RGB圖像。
[0111]圖10提供了示出在處理和發(fā)送圖像的過(guò)程中使用的發(fā)送系統(tǒng)的示例的框圖。參見(jiàn)圖10，示出了一種視頻發(fā)送系統(tǒng)或裝置1600，其中上述特征和原理可以應(yīng)用到該視頻發(fā)送系統(tǒng)或裝置1600。視頻發(fā)送系統(tǒng)或裝置1600可以是例如頭端或用于使用多種媒介(比如衛(wèi)星、電纜、電話線或陸地廣播)中的任意一種發(fā)送信號(hào)的發(fā)送系統(tǒng)。視頻發(fā)送系統(tǒng)或裝置1600還(或備選地)可被用來(lái)例如提供用于存儲(chǔ)的信號(hào)。可以在因特網(wǎng)或一些其它網(wǎng)絡(luò)上提供所述發(fā)送。視頻發(fā)送系統(tǒng)或裝置1600能夠生成并遞送例如視頻內(nèi)容和其他內(nèi)容(比如元數(shù)據(jù))。還應(yīng)清楚的是，圖10中的方框除了提供了視頻發(fā)送系統(tǒng)或裝置的框圖之外，還提供了視頻發(fā)送處理的流程圖。
[0112]視頻發(fā)送系統(tǒng)或裝置1600從處理器1601接收輸入的視頻。在一種實(shí)現(xiàn)中，處理器1601簡(jiǎn)單地向視頻發(fā)送系統(tǒng)或裝置1600提供視頻圖像，比如來(lái)自節(jié)目的圖像。然而，在另一實(shí)現(xiàn)中，作為備選或附加，處理器1601向視頻發(fā)送系統(tǒng)或裝置1600提供來(lái)自其它源的內(nèi)容。處理器1601還可向視頻發(fā)送系統(tǒng)或裝置1600提供元數(shù)據(jù)，其中元數(shù)據(jù)與例如一個(gè)或多個(gè)輸入的圖像有關(guān)，并且可以包括例如對(duì)用來(lái)編碼所述數(shù)據(jù)的編碼方法的描述。
[0113]視頻發(fā)送系統(tǒng)或裝置1600包括編碼器1602和能夠發(fā)送編碼信號(hào)的發(fā)射機(jī)1604。編碼器1602從處理器1601接收視頻信息。視頻信息可包括例如視頻圖像和/或其它內(nèi)容。編碼器1602基于視頻和/或其它信息生成編碼信號(hào)。在多種實(shí)現(xiàn)中，編碼器1602是源編碼器、信道編碼器、或源編碼器和信道編碼器的組合。在多種實(shí)現(xiàn)中，編碼器1602是例如AVC編碼器(本申請(qǐng)中其它地方已定義)。
[0114]編碼器1602可以包括子模塊，其中包括例如用于接收多段信息并將其聚集到用于存儲(chǔ)或發(fā)送的結(jié)構(gòu)化格式中的聚集單元。所述多段信息可包括例如編碼或未編碼的視頻、其它內(nèi)容、元數(shù)據(jù)或信息、以及多種元素(比如運(yùn)動(dòng)向量、編碼模式指示符和句法元素)。在一些實(shí)現(xiàn)中，編碼器1602包括處理器1601并因此執(zhí)行處理器1601的操作。
[0115]發(fā)射機(jī)1604從編碼器1602接收編碼信號(hào)并在一個(gè)或多個(gè)輸出信號(hào)中發(fā)送編碼信號(hào)。發(fā)射機(jī)1604可以是例如適于發(fā)送具有表示編碼圖像和/或與之相關(guān)的信息的一個(gè)或多個(gè)比特流的節(jié)目信號(hào)。通常的發(fā)射機(jī)執(zhí)行諸如以下中的一項(xiàng)或多項(xiàng)的功能:提供糾錯(cuò)編碼(作為備選或附加，其可在編碼器1602中執(zhí)行)，交織信號(hào)中的數(shù)據(jù)(作為備選或附加，其可在編碼器1602中執(zhí)行)，對(duì)信號(hào)中的能量進(jìn)行隨機(jī)化，以及使用調(diào)制器1606將信號(hào)調(diào)制到一個(gè)或多個(gè)載波上。發(fā)射機(jī)1604可以包括天線(未示出)或與天線對(duì)接。此外，發(fā)射機(jī)1604的實(shí)現(xiàn)可限于調(diào)制器1606。
[0116]視頻發(fā)送系統(tǒng)或裝置1600還通信耦合到存儲(chǔ)單元1608。在一種實(shí)現(xiàn)中，存儲(chǔ)單元1608耦合到編碼器1602并且可選地向發(fā)射機(jī)1604提供存儲(chǔ)的比特流。在另一實(shí)現(xiàn)中，存儲(chǔ)單元1608耦合到發(fā)射機(jī)1604并存儲(chǔ)來(lái)自發(fā)射機(jī)1604的比特流。來(lái)自發(fā)射機(jī)1604的比特流可包括例如已經(jīng)由發(fā)射機(jī)1604進(jìn)一步處理的一個(gè)或多個(gè)編碼比特流。在不同的實(shí)現(xiàn)中，存儲(chǔ)單元1608是標(biāo)準(zhǔn)DVD、藍(lán)光盤(pán)、硬盤(pán)或一些其它存儲(chǔ)設(shè)備中的一個(gè)或多個(gè)。
[0117]圖10還包括用戶(hù)接口 1610和顯示器1620，兩者都通信耦合到處理器1601。處理器1601通信耦合到用于接受來(lái)自例如操作者的輸入的用戶(hù)接口 1610。處理器1601通信耦合到用于顯示例如數(shù)字圖像的顯示器1620。在多種實(shí)現(xiàn)中，在由處理器1601處理之前、期間和/或之后，對(duì)圖像進(jìn)行顯示。
[0118]在多種實(shí)現(xiàn)中，顯示器1620包括用戶(hù)接口 1610。一種實(shí)現(xiàn)針對(duì)用戶(hù)接口 1610和顯示器1620都使用觸摸屏。
[0119]圖11提供了示出在接收和處理圖像的過(guò)程中使用的接收系統(tǒng)的示例的框圖。參見(jiàn)圖11，示出了一種視頻接收系統(tǒng)或裝置1700，其中上述特征和原理可以應(yīng)用到該視頻接收系統(tǒng)或裝置1700。視頻接收系統(tǒng)或裝置1700可被配置為通過(guò)多種媒介(比如衛(wèi)星、電纜、電話線或陸地廣播)接收信號(hào)?？梢栽谝蛱鼐W(wǎng)或一些其它網(wǎng)絡(luò)上接收信號(hào)。還應(yīng)清楚的是，圖11中的方框除了提供了視頻接收系統(tǒng)或裝置的框圖之外，還提供了視頻接收處理的流程圖。
[0120]視頻接收系統(tǒng)或裝置1700可以包括例如手機(jī)、計(jì)算機(jī)、平板、路由器、網(wǎng)關(guān)、機(jī)頂盒、電視或接收編碼視頻并提供例如用于顯示(例如，向用戶(hù)顯示)、處理或存儲(chǔ)的解碼視頻信號(hào)的其它設(shè)備。從而，視頻接收系統(tǒng)或裝置1700可將其輸出提供到例如電視屏幕、手機(jī)屏幕、平板屏幕、計(jì)算機(jī)顯示器、計(jì)算機(jī)(用于存儲(chǔ)、處理或顯式)或一些其它的存儲(chǔ)、處理或顯式設(shè)備。
[0121]視頻接收系統(tǒng)或裝置1700能夠接收并處理視頻信息。視頻信息可以包括例如視頻圖像、其它內(nèi)容和/或元數(shù)據(jù)。視頻接收系統(tǒng)或裝置1700包括用于接收編碼信號(hào)(比如本申請(qǐng)的實(shí)現(xiàn)中描述的信號(hào))的接收機(jī)1702。接收機(jī)1702可以接收例如⑴為節(jié)目中的圖像序列提供編碼層的信號(hào)，或(ii)從圖10的視頻發(fā)送系統(tǒng)1600(例如從存儲(chǔ)單元1608或發(fā)射機(jī)1604)輸出的信號(hào)。
[0122]接收機(jī)1702可以是例如適于接收具有表示編碼圖像(例如視頻圖像或深度圖像)的多個(gè)比特流的節(jié)目信號(hào)。通常的接收機(jī)執(zhí)行諸如以下中的一項(xiàng)或多項(xiàng)的功能:接收經(jīng)過(guò)調(diào)制和編碼的數(shù)據(jù)信號(hào)，使用解調(diào)器1704對(duì)來(lái)自一個(gè)或多個(gè)載波的數(shù)據(jù)信號(hào)進(jìn)行解調(diào)，對(duì)信號(hào)中的能量進(jìn)行去隨機(jī)化，解交織信號(hào)中的數(shù)據(jù)(作為備選或附加，其可在解碼器中執(zhí)行)，對(duì)信號(hào)進(jìn)行糾錯(cuò)解碼(作為備選或附加，其可在解碼器中執(zhí)行)。接收機(jī)1702可以包括天線(未示出)或與天線對(duì)接。接收機(jī)1702的實(shí)現(xiàn)可限于解調(diào)器1704。
[0123]視頻接收系統(tǒng)或裝置1700包括解碼器1706。在多種實(shí)現(xiàn)中，解碼器1706是源解碼器、信道解碼器、或源解碼器和信道解碼器的組合。在一種實(shí)現(xiàn)中，解碼器1706包括圖1中的信道解碼器155和源解碼器160。
[0124]接收機(jī)1702向解碼器1706提供接收的信號(hào)。由接收機(jī)1702提供到解碼器1706的信號(hào)可包括一個(gè)或多個(gè)編碼比特流。解碼器1706輸出解碼信號(hào)，比如包括視頻信息、其他內(nèi)容或元數(shù)據(jù)的解碼視頻信號(hào)。解碼器1706可以是例如AVC解碼器(本申請(qǐng)中其它地方已定義)O
[0125]視頻接收系統(tǒng)或裝置1700還通信耦合到存儲(chǔ)單元1707。在一種實(shí)現(xiàn)中，存儲(chǔ)單元1707耦合到接收機(jī)1702，以及接收機(jī)1702接入來(lái)自存儲(chǔ)單元1707的比特流和/或?qū)⑺邮盏谋忍亓鞔鎯?chǔ)到存儲(chǔ)單元1707。在另一實(shí)現(xiàn)中，存儲(chǔ)單元1707耦合到解碼器1706，以及解碼器1706接入來(lái)自存儲(chǔ)單元1707的比特流和/或?qū)⒔獯a比特流存儲(chǔ)到存儲(chǔ)單元1707。在不同實(shí)現(xiàn)中，從存儲(chǔ)單元1707接入的比特流包括一個(gè)或多個(gè)編碼比特流。在不同的實(shí)現(xiàn)中，存儲(chǔ)單元1707是標(biāo)準(zhǔn)DVD、藍(lán)光盤(pán)、硬盤(pán)或一些其它存儲(chǔ)設(shè)備中的一個(gè)或多個(gè)。
[0126]在一種實(shí)現(xiàn)中，將來(lái)自解碼器1706的輸出視頻提供到處理器1708。在一種實(shí)現(xiàn)中，處理器1708是被配置用于呈現(xiàn)解碼數(shù)字圖像的處理器。在一些實(shí)現(xiàn)中，解碼器1706包括處理器1708并且因此執(zhí)行處理器1708的操作。在其它實(shí)現(xiàn)中，處理器1708是下游設(shè)備(比如機(jī)頂盒或電視)的一部分。
[0127]圖11還包括用戶(hù)接口 1710和顯示器1720，兩者都通信耦合到處理器1708。處理器1708通信耦合到用于接受來(lái)自例如家中的用戶(hù)或電纜集線器處的操作者的輸入的用戶(hù)接口 1710。處理器1708通信耦合到用于顯示例如數(shù)字圖像的顯示器1720。在多種實(shí)現(xiàn)中，在由處理器1708處理之前、期間和/或之后，對(duì)圖像進(jìn)行顯示。
[0128]在多種實(shí)現(xiàn)中，顯示器720包括用戶(hù)接口 1710。一種實(shí)現(xiàn)針對(duì)用戶(hù)接口 1710和顯示器1720都使用觸摸屏。此外，進(jìn)一步的實(shí)現(xiàn)將用戶(hù)接口 1710和/或顯示器1720包括在視頻接收系統(tǒng)1700中。
[0129]在多種實(shí)現(xiàn)中，圖10-11能被用來(lái)執(zhí)行處理400、800和/或900中的全部或部分以及關(guān)于處理900所描述的任意附加特征。在多種這樣的實(shí)現(xiàn)中，處理器1601和/或1708能夠接收來(lái)自攝像機(jī)的圖像信息或可被集成到攝像機(jī)中。
[0130]在多種實(shí)現(xiàn)中，顯示器1620和/或顯示器1720包括以下中的一項(xiàng)或多項(xiàng):計(jì)算機(jī)顯示器、膝上顯示器、平板顯示器、手機(jī)顯示器、電視顯示器、或本申請(qǐng)中提及的或本領(lǐng)域已知的任意其它類(lèi)型的顯示器，其中包括可在任意表面(比如墻壁、屋頂、地板或走廊)上可見(jiàn)的投影顯示器。
[0131]在多種實(shí)現(xiàn)中，用戶(hù)接口 1610和/或用戶(hù)接口 1710包括以下中的一項(xiàng)或多項(xiàng):鼠標(biāo)、追蹤板、鍵盤(pán)、觸摸屏、用于接受由處理器1601和/或處理器1708解譯的語(yǔ)音命令的麥克風(fēng)、遠(yuǎn)程控制、收集、遠(yuǎn)程或本地的單獨(dú)計(jì)算機(jī)、或本申請(qǐng)中提及的或本領(lǐng)域已知的任意其它輸入設(shè)備。
[0132]在多種實(shí)現(xiàn)中，存儲(chǔ)設(shè)備1608和/或存儲(chǔ)設(shè)備1707包括本申請(qǐng)中提及的或本領(lǐng)域已知的存儲(chǔ)設(shè)備中的任意存儲(chǔ)設(shè)備。
[0133]在多種實(shí)現(xiàn)中，編碼器1602包括AVC或H.264編碼器(本申請(qǐng)中其它地方已定義)、用于任意其它標(biāo)準(zhǔn)的編碼器、或本申請(qǐng)中提及的或本領(lǐng)域已知的任意其它編碼設(shè)備。
[0134]在多種實(shí)現(xiàn)中，發(fā)射機(jī)1604包括任意集成電路的輸出管腳、通用異步接收機(jī)/發(fā)射機(jī)(UART)、廣播發(fā)射機(jī)、衛(wèi)星發(fā)射機(jī)、電纜發(fā)射機(jī)或本申請(qǐng)中提及的或本領(lǐng)域已知的任意其它發(fā)送設(shè)備。發(fā)射機(jī)1604可以例如適于發(fā)送具有表示編碼圖像和/或與之相關(guān)的信息的一個(gè)或多個(gè)比特流的節(jié)目信號(hào)。通常的發(fā)射機(jī)執(zhí)行諸如以下中的一項(xiàng)或多項(xiàng)的功能:提供糾錯(cuò)編碼(作為備選或附加，其可在編碼器1602中執(zhí)行)，交織信號(hào)中的數(shù)據(jù)(作為備選或附加，其可在編碼器1602中執(zhí)行)，對(duì)信號(hào)中的能量進(jìn)行隨機(jī)化，以及使用調(diào)制器將信號(hào)調(diào)制到一個(gè)或多個(gè)載波上。發(fā)射機(jī)1604可以包括天線(未示出)或與天線對(duì)接。此外，發(fā)射機(jī)1604的實(shí)現(xiàn)可限于調(diào)制器。
[0135]本申請(qǐng)?zhí)峁┝硕鄠€(gè)附圖，包括圖2_3和5_7中的不意圖、圖4和8_9中的流程圖以及圖1和圖10-11中的框圖。如在下面的示例中簡(jiǎn)要說(shuō)明的一樣，這些附圖中的每一個(gè)為多個(gè)實(shí)現(xiàn)提供公開(kāi)。
[0136]作為第一示例，注意到示意圖確定地示出多個(gè)傳感器圖案。然而，還應(yīng)清楚的是，示意圖描述一個(gè)或多個(gè)處理流程。例如，至少圖3和5還描述了從各個(gè)傳感器確定組合圖案的處理。此外，至少圖6-7還描述了內(nèi)插丟失的顏色值的處理。
[0137]作為第二示例，注意到流程圖確定地描述了流程處理。然而，還應(yīng)清楚的是，流程圖提供用于執(zhí)行流程處理的系統(tǒng)或裝置的功能方框之間的互連。例如，圖8還呈現(xiàn)了用于執(zhí)行處理800的功能的框圖。例如，(i)參考元素810還表示用于執(zhí)行捕獲傳感器數(shù)據(jù)的功能的方框，(?)參考元素820表示用于執(zhí)行內(nèi)插功能的方框，以及(iii)元素810和820之間的互連表示用于捕獲傳感器數(shù)據(jù)的組件和用于在捕獲的傳感器數(shù)據(jù)上執(zhí)行內(nèi)插的組件之間的耦合。通過(guò)描述該系統(tǒng)/裝置可以類(lèi)似地解釋圖8的其它方框。
[0138]作為第三示例，注意到框圖確定地描述裝置或系統(tǒng)的功能方框的互連。然而，還應(yīng)清楚的是，框圖提供對(duì)各種處理流程的描述。例如，圖1還呈現(xiàn)了用于執(zhí)行包括圖1的方框的功能的各種處理的流程圖。例如，(i)傳感器120、130和140還表示用于執(zhí)行捕獲傳感器數(shù)據(jù)的處理操作的方框，(ii)ND濾鏡145還表示用于執(zhí)行中性密度過(guò)濾的處理操作的方框，以及(iii)ND濾鏡145和第一傳感器120之間的互連表示將過(guò)濾的圖像提供到傳感器進(jìn)行數(shù)據(jù)捕獲的處理操作。通過(guò)描述該流程處理可以類(lèi)似地解釋圖1的其它方框。
[0139]從而，本文提供了多種實(shí)現(xiàn)。但應(yīng)該注意的是，還設(shè)想了所描述的實(shí)現(xiàn)的變形以及附加應(yīng)用，并認(rèn)為它們都在本公開(kāi)的范圍內(nèi)。此外，所描述的實(shí)現(xiàn)的特征和方面可以適于其它實(shí)現(xiàn)。
[0140]作為一些設(shè)想的變形的一個(gè)示例，一些實(shí)現(xiàn)在單個(gè)攝像機(jī)中包括兩個(gè)不同的傳感器陣列。傳感器的第一陣列用來(lái)捕獲用于生成原生RGB圖像的數(shù)據(jù)。傳感器的第二陣列用來(lái)捕獲用于生成RGB圖像的數(shù)據(jù)。分束器可被控制為將光指向傳感器的第一陣列或傳感器的第二陣列。
[0141]作為一些設(shè)想的變形的另一示例，一些實(shí)現(xiàn)向圖1的配置添加一個(gè)或多個(gè)傳感器。一個(gè)或多個(gè)添加的傳感器捕獲用來(lái)生成HDR圖像或用來(lái)生成原生RGB圖像(但不生成兩者)的數(shù)據(jù)。
[0142]作為一些設(shè)想的變形的另一示例，一些實(shí)現(xiàn)提供是原生RGB和HDR兩者的輸出圖像。這通過(guò)例如在圖1的配置中使用第四傳感器來(lái)實(shí)現(xiàn)。第四傳感器是例如Bayer圖案?jìng)鞲衅?，并且與傳感器130和140 —起使用，以產(chǎn)生原生RGB圖像。傳感器120用來(lái)提供將被插入到例如從其它三個(gè)傳感器創(chuàng)建的原生RGB圖像中的高亮度區(qū)域組分。
[0143]作為一些設(shè)想的變形的另一示例，一些實(shí)現(xiàn)可提及自動(dòng)化的或可自動(dòng)執(zhí)行的特征。然而，這種實(shí)現(xiàn)的變形不是自動(dòng)化的和/或不自動(dòng)地執(zhí)行特征中的全部或一些。
[0144]作為一些設(shè)想的變形的另一示例，一些實(shí)現(xiàn)是在數(shù)字圖像的語(yǔ)境中描述的。例如，傳感器120、130和140能夠捕獲數(shù)字圖像數(shù)據(jù)。然而，其它實(shí)現(xiàn)使用傳感器來(lái)捕獲可以以模擬格式存儲(chǔ)和/或處理的模擬數(shù)據(jù)。當(dāng)然，在多種實(shí)現(xiàn)中還將模擬信息轉(zhuǎn)換為數(shù)字信息。
[0145]作為一些設(shè)想的變形的另一示例，在多種實(shí)現(xiàn)中，傳感器圖案顏色指示應(yīng)用于像素。然而，在其它實(shí)現(xiàn)中，顏色指示應(yīng)用于另一大小的區(qū)域，比如子像素、分區(qū)、宏塊或切片。
[0146]一些實(shí)現(xiàn)能夠選擇性地插入或移除ND濾鏡。一個(gè)這樣的實(shí)現(xiàn)是攝像機(jī)100，其可以選擇性地移除和插入ND濾鏡145。通過(guò)例如使用允許用戶(hù)人工插入和移除ND濾鏡145的插槽來(lái)完成插入和/或移除(即對(duì)濾鏡的控制)。在另一實(shí)現(xiàn)中，ND濾鏡145集成到攝像機(jī)100，攝像機(jī)100包括用于控制集成的ND濾鏡145的開(kāi)關(guān)(例如人工的或電子的)。開(kāi)關(guān)通過(guò)例如將集成的ND濾鏡145的位置放置在第一傳感器120之前或不在之前來(lái)進(jìn)行操作。其它實(shí)現(xiàn)還提供了與ND濾鏡不同的濾鏡，該濾鏡也通過(guò)類(lèi)似的方式來(lái)控制。
[0147]多種實(shí)現(xiàn)描述了提供HDR圖像，其中在相同時(shí)間點(diǎn)捕獲所有亮度組分。例如對(duì)使用攝像機(jī)100的操作410的實(shí)現(xiàn)將通常針對(duì)傳感器120、130和140中的每一個(gè)在相同時(shí)間點(diǎn)在傳感器120、130和140處捕獲圖像數(shù)據(jù)。從而，通常的實(shí)現(xiàn)將使用來(lái)自第一傳感器120的圖像數(shù)據(jù)來(lái)生成高亮度區(qū)域數(shù)據(jù)，并且將使用來(lái)自傳感器130和140的圖像數(shù)據(jù)來(lái)生成低亮度區(qū)域數(shù)據(jù)。然而，由于高亮度區(qū)域數(shù)據(jù)和低亮度區(qū)域數(shù)據(jù)是從在相同時(shí)間點(diǎn)捕獲的圖像數(shù)據(jù)生成的，所以高亮度區(qū)域數(shù)據(jù)和低亮度區(qū)域數(shù)據(jù)也與相同時(shí)間點(diǎn)相關(guān)聯(lián)。然而，其它實(shí)現(xiàn)在不同的時(shí)間點(diǎn)捕獲針對(duì)HDR圖像的圖像數(shù)據(jù)。類(lèi)似地，對(duì)于多個(gè)實(shí)現(xiàn)，為了產(chǎn)生原生RGB圖像而捕獲的圖像數(shù)據(jù)是在相同時(shí)間點(diǎn)捕獲的，但對(duì)于其它實(shí)現(xiàn)則是在不同時(shí)間點(diǎn)捕獲的。
[0148]本申請(qǐng)中描述的一些實(shí)現(xiàn)和特征可用于AVC標(biāo)準(zhǔn)、和/或具有MVC(多視圖視頻編碼)擴(kuò)展的AVC(附錄H)、和/或具有SVC(可縮放視頻編碼)擴(kuò)展的AVC(附錄G)。此外，這些實(shí)現(xiàn)和特征可用于另一標(biāo)準(zhǔn)(現(xiàn)有的或?qū)?lái)的)的語(yǔ)境中或用于不涉及標(biāo)準(zhǔn)的語(yǔ)境中。注意的是，AVC指的是現(xiàn)有的國(guó)際標(biāo)準(zhǔn)組織/國(guó)際電子技術(shù)委員會(huì)(“IS0/IEC”移動(dòng)圖像專(zhuān)家組_4( “MPEG-4”))部分10高級(jí)視頻編碼(“AVC”)標(biāo)準(zhǔn)/國(guó)際電信聯(lián)盟電信部(“ ITU-T” ) H.264推薦(本文中，被稱(chēng)作“H.264/MPEG-4AVC標(biāo)準(zhǔn)”或其變形，比如“AVC標(biāo)準(zhǔn)'“H.264標(biāo)準(zhǔn)”或簡(jiǎn)單地是“AVC”或“H.264”)。
[0149]對(duì)本原理的“一個(gè)實(shí)施例”或“實(shí)施例”或“一個(gè)實(shí)現(xiàn)”或“實(shí)現(xiàn)”以及其它的變形的提及意味著結(jié)合實(shí)施例描述的具體特征、結(jié)構(gòu)、特性等被包括在本原理的至少一個(gè)實(shí)施例中。從而，短語(yǔ)“在一個(gè)實(shí)施例中”或“在實(shí)施例中”或“在一個(gè)實(shí)現(xiàn)中”或“在實(shí)現(xiàn)中”以及任意其它變形在說(shuō)明書(shū)中的多個(gè)地方的出現(xiàn)不必都指相同的實(shí)施例。
[0150]此外，本申請(qǐng)或其權(quán)利要求可提及“確定”多段信息。確定信息可包括例如以下中的一項(xiàng)或多項(xiàng):估計(jì)信息、計(jì)算信息、預(yù)測(cè)信息或從存儲(chǔ)器獲取信息。
[0151]此外，本申請(qǐng)或其權(quán)利要求可提及“訪問(wèn)”多段信息。訪問(wèn)信息可包括例如以下中的一項(xiàng)或多項(xiàng):接收消息、獲取信息(例如存儲(chǔ)器)、存儲(chǔ)信息、處理信息、發(fā)送信息、移動(dòng)信息、拷貝息、擦除息、計(jì)算息、確定息、預(yù)測(cè)息或估計(jì)息。
[0152]此外，本申請(qǐng)或其權(quán)利要求可提及“接收”多段信息。接收與“訪問(wèn)”一樣都是廣義的術(shù)語(yǔ)。接收信息可包括例如以下中的一項(xiàng)或多項(xiàng):訪問(wèn)信息或獲取信息(例如從存儲(chǔ)器)。
[0153]此外，在諸如以下各項(xiàng)的操作期間通常都會(huì)涉及“接收”:存儲(chǔ)信息、處理信息、發(fā)送信息、移動(dòng)信息、拷貝信息、擦除信息、計(jì)算信息、確定信息、預(yù)測(cè)信息或估計(jì)信息。
[0154]多種實(shí)現(xiàn)提及“圖像”和/或“圖片”。術(shù)語(yǔ)“圖像”和“圖片”在本文中可互換使用，并且是廣義的術(shù)語(yǔ)?！皥D像”或“圖片”可以是例如幀或字段的全部或部分。術(shù)語(yǔ)“視頻”指的是圖像(或圖片)序列。圖像或圖片可包括例如多種視頻組分中的任意一個(gè)或它們的組合。這種組分或它們的組合包括例如亮度、色度、(YUV或YCbCr或YPbPr中的)Y、(YUV中的)U、(YUV 中的)V、(YCbCr 中的)Cb、(YCbCr 中的)Cr、(YPbPr 中的)Pb、(YPbPr 中的)Pr、(RGB中的)紅、(RGB中的)綠、(RGB中的)藍(lán)、S-視頻以及任意這些分量的正值或負(fù)值?！皥D像”或“圖片”還(或備選地)可指多種不同類(lèi)型的內(nèi)容，其中包括例如通常的二維視頻、2D視頻圖片的視差圖、對(duì)應(yīng)于2D視頻圖片的深度圖、或邊緣圖。“圖像”或“圖片”還指例如由傳感器捕獲的數(shù)據(jù)集合或指在對(duì)這樣的數(shù)據(jù)集合進(jìn)行處理后的輸出。這種處理包括例如對(duì)數(shù)據(jù)集合進(jìn)行過(guò)濾、對(duì)數(shù)據(jù)集合進(jìn)行內(nèi)插和/或?qū)?shù)據(jù)集合與另一數(shù)據(jù)集合合并。
[0155]此外，許多實(shí)現(xiàn)可以提及“幀”。然而，這種實(shí)現(xiàn)被假定為同樣地適用于“圖片”或“圖像”。此外，各種實(shí)現(xiàn)提供不同于RGB圖像的圖像。具體地，多個(gè)實(shí)現(xiàn)使用不同于RGB的三個(gè)相加色的集合。例如，紅、綠和藍(lán)具有特殊的頻率，其它實(shí)現(xiàn)將這些頻率移位到與紅、綠和藍(lán)不同的三個(gè)不同顏色。還由其它的實(shí)現(xiàn)只將一種或兩種顏色移位。在這些實(shí)現(xiàn)中，三種顏色仍能加在一起來(lái)產(chǎn)生其它顏色(正如一般使用RGB進(jìn)行的那樣)。還有其它的實(shí)現(xiàn)使用相減色，并且這種實(shí)現(xiàn)不使用RGB，而是使用例如CMY (青、品紅、黃)。還有其它的實(shí)現(xiàn)基于色差，并且這種實(shí)現(xiàn)不使用RGB，而是使用例如YUV或YPbPr。
[0156]“深度圖”、“視差圖”或“邊緣圖”或類(lèi)似的術(shù)語(yǔ)也是廣義的術(shù)語(yǔ)。圖一般指例如包括特殊類(lèi)型的信息的圖。然而，圖可以包括未由其名稱(chēng)所指示的其它類(lèi)型的信息。例如，深度圖通常包括深度信息，但還可包括其它信息(比如視頻或邊緣信息)。
[0157]本應(yīng)用在多個(gè)實(shí)現(xiàn)中提及了“編碼器”和“解碼器”。應(yīng)該清楚的是，編碼器可以包括例如一個(gè)或多個(gè)(或不包括任何)源編碼器和/或一個(gè)或多個(gè)(或不包括任何)信道編碼器，以及一個(gè)或多個(gè)(或不包括任何)調(diào)制器。類(lèi)似地，應(yīng)清楚的是，解碼器可以包括例如一個(gè)或多個(gè)(或不包括任何)調(diào)制器以及一個(gè)或多個(gè)(或不包括任何)信道編碼器和/或一個(gè)或多個(gè)(或不包括任何)源編碼器。
[0158]應(yīng)認(rèn)識(shí)到，“/”、“和/或”和“......中的至少一個(gè)”中任一個(gè)的使用，例如在“A/
B”/“A和/或B”和“A和B中的至少一個(gè)”的情況下，意在包括僅選擇第一個(gè)所列選項(xiàng)(A)、僅選擇第二個(gè)所列選項(xiàng)(B)、或選擇兩個(gè)選項(xiàng)(A和B)。作為另一示例，在“A、B和/或C”以及“A、B和C中的至少一個(gè)”以及“A、B或C中的至少一個(gè)”的情況下，這樣的表示意在包括僅選擇第一個(gè)所列選項(xiàng)(A)、僅選擇第二個(gè)所列選項(xiàng)(B)、僅選擇第三個(gè)所列選項(xiàng)(C)、僅選擇第一個(gè)和第二個(gè)所列選項(xiàng)(A和B)、僅選擇第一個(gè)和第三個(gè)所列選項(xiàng)(A和C)、僅選擇第二個(gè)和第三個(gè)所列選項(xiàng)(B和C)、或選擇所有三個(gè)選項(xiàng)(A和B和C)。對(duì)于本領(lǐng)域和相關(guān)領(lǐng)域的普通技術(shù)人員來(lái)講顯而易見(jiàn)的是，所列的選項(xiàng)的數(shù)量是可以擴(kuò)展的。
[0159]此外，許多實(shí)現(xiàn)可以在處理器(例如，后處理器或預(yù)處理器)中實(shí)現(xiàn)。在多種實(shí)現(xiàn)中，本申請(qǐng)中討論的處理器包括被統(tǒng)一配置為執(zhí)行例如處理、功能或操作的多個(gè)處理器(子處理器)。例如，在多種實(shí)現(xiàn)中，處理器150、1601和1708以及諸如編碼器1602、發(fā)射機(jī)1604、接收機(jī)1702和解碼器1706的其它處理組件可以包括多個(gè)被統(tǒng)一配置為執(zhí)行該組件的操作的子處理器。
[0160]本文描述的實(shí)現(xiàn)可以例如以方法或處理、裝置、軟件程序、數(shù)據(jù)流或信號(hào)來(lái)實(shí)現(xiàn)。即使僅在單一形式的實(shí)現(xiàn)的語(yǔ)境中進(jìn)行討論(例如，僅討論了方法)，所討論的特征的實(shí)現(xiàn)同樣可以以其他形式來(lái)實(shí)現(xiàn)(例如，裝置或程序)。裝置可以以例如合適的硬件、軟件和固件來(lái)實(shí)現(xiàn)。方法可以例如以諸如處理器之類(lèi)的裝置來(lái)實(shí)現(xiàn)，所述處理器指的是一般的處理設(shè)備，包括例如計(jì)算機(jī)、微處理器、集成電路或可編程邏輯器件。處理器還包括通信設(shè)備，例如，計(jì)算機(jī)、蜂窩電話、平板電腦、便攜式/個(gè)人數(shù)字助理(“PDA”)以及便于在終端用戶(hù)之間傳送信息的其他設(shè)備。
[0161]本文描述的各種過(guò)程和特征的實(shí)現(xiàn)可以體現(xiàn)在多種不同的設(shè)備或應(yīng)用中。這種設(shè)備的示例包括編碼器、解碼器、后處理器、預(yù)處理器、視頻編碼器、視頻解碼器、視頻編解碼器、網(wǎng)絡(luò)服務(wù)器、電視、機(jī)頂盒、路由器、網(wǎng)關(guān)、調(diào)制解調(diào)器、膝上計(jì)算機(jī)、個(gè)人數(shù)字電腦、平板電腦、蜂窩電話、PDA以及其他通信設(shè)備。應(yīng)清楚，設(shè)備可以是移動(dòng)的和甚至安裝在移動(dòng)車(chē)輛中的。
[0162]此外，方法可以由處理器執(zhí)行的指令來(lái)實(shí)現(xiàn)，這樣的指令(或由實(shí)現(xiàn)產(chǎn)生的數(shù)據(jù)值)可以存儲(chǔ)在處理器可讀介質(zhì)上，例如，集成電路、軟件載體或其他存儲(chǔ)設(shè)備，例如，硬盤(pán)、壓縮盤(pán)(“CD”)、光盤(pán)(例如，DVD，通常稱(chēng)作數(shù)字通用盤(pán)或數(shù)字視頻盤(pán))、隨機(jī)存取存儲(chǔ)器(“RAM”)、或只讀存儲(chǔ)器(“ROM”)。指令可以形成有形地體現(xiàn)在處理器可讀介質(zhì)上的應(yīng)用程序。指令可以例如在硬件、固件、軟件或其組合中。指令可以存在于例如操作系統(tǒng)、單獨(dú)的應(yīng)用或二者的組合中。因此，處理器可以表征為用于執(zhí)行處理的設(shè)備和包括處理器可讀介質(zhì)的設(shè)備(如，存儲(chǔ)設(shè)備)，所述可讀介質(zhì)具有用于執(zhí)行所述處理的指令。此外，除了指令之外或代替指令，處理器可讀介質(zhì)可以存儲(chǔ)由實(shí)現(xiàn)產(chǎn)生的數(shù)據(jù)值。
[0163]本領(lǐng)域技術(shù)人員將清楚，實(shí)現(xiàn)可以產(chǎn)生多種信號(hào)，所述信號(hào)被格式化以承載可以例如存儲(chǔ)或發(fā)送的信息。信息可以包括例如用于執(zhí)行方法的指令或者由上述實(shí)現(xiàn)之一產(chǎn)生的數(shù)據(jù)。例如，信號(hào)可以被格式化以將用于執(zhí)行平滑操作的代碼作為數(shù)據(jù)來(lái)承載，或?qū)⑼ㄟ^(guò)執(zhí)行平滑操作而產(chǎn)生的實(shí)際平滑后的立體視頻序列作為數(shù)據(jù)來(lái)承載。這樣的信號(hào)可以被格式化為例如電磁波(例如，使用頻譜的射頻部分)或格式化為基帶信號(hào)。格式化可以包括例如對(duì)數(shù)據(jù)流進(jìn)行編碼并用編碼的數(shù)據(jù)流來(lái)調(diào)制載波。信號(hào)承載的信息可以是例如模擬或數(shù)字信息。如已知的那樣，可以在多種不同的有線或無(wú)線鏈路上傳輸信號(hào)。信號(hào)可以存儲(chǔ)在處理器可讀介質(zhì)上。
[0164]描述了多種實(shí)現(xiàn)。然而，將理解的是，可以做出各種修改。例如，可以對(duì)不同實(shí)現(xiàn)的元素進(jìn)行組合、補(bǔ)充、修改或移除以產(chǎn)生其他實(shí)現(xiàn)。此外，本領(lǐng)域技術(shù)人員將理解，可以用其他結(jié)構(gòu)和過(guò)程來(lái)替代所公開(kāi)的過(guò)程，相較于所公開(kāi)的實(shí)現(xiàn)，得到的實(shí)現(xiàn)將至少以大致相同的方式執(zhí)行大致相同的功能以達(dá)到大致相同的結(jié)果。因此，本申請(qǐng)覆蓋這些和其他實(shí)現(xiàn)。
【權(quán)利要求】
1.一種方法，包括: 使用捕獲自多個(gè)傳感器的顏色值的第一集合創(chuàng)建彩色圖像，其中彩色圖像的多個(gè)像素位置具有針對(duì)三種顏色的顏色值，三種顏色值是從所述多個(gè)傳感器捕獲的，以及透鏡組件將光傳到所述多個(gè)傳感器；以及 使用捕獲自所述多個(gè)傳感器的顏色值的第二集合創(chuàng)建高動(dòng)態(tài)范圍“HDR”圖像。
2.根據(jù)權(quán)利要求1所述的方法，其中所述多個(gè)傳感器包括被配置為獲得多種顏色且使用具有彼此不同的顏色圖案的濾鏡的三個(gè)傳感器。
3.根據(jù)權(quán)利要求1-2中的任一項(xiàng)所述的方法，其中三個(gè)不同的顏色圖案包括:(i)包括紅“R”、綠“G”和藍(lán)“B”的第一圖案，(ii)包括R、G和B的第二圖案，(iii)包括R、G和B的第二圖案。
4.根據(jù)權(quán)利要求1-3中的任一項(xiàng)所述的方法，其中創(chuàng)建HDR圖像包括對(duì)顏色值的第二集合進(jìn)行內(nèi)插以獲得針對(duì)HDR圖像的多個(gè)像素位置的R、G和B。
5.根據(jù)權(quán)利要求1-4中的任一項(xiàng)所述的方法，其中創(chuàng)建HDR圖像包括對(duì)顏色值的第二集合進(jìn)行內(nèi)插以獲得針對(duì)HDR圖像的所有非邊緣像素位置的R、G和B。
6.根據(jù)權(quán)利要求1-5中的任一項(xiàng)所述的方法，其中HDR圖像包括: 高亮度區(qū)域組分，具有從第一圖像中的相應(yīng)位置得到的像素值；以及 低亮度區(qū)域組分，具有從第二圖像中的相應(yīng)位置得到的像素值。
7.根據(jù)權(quán)利要求6所述的方法，其中: 所述多個(gè)傳感器包括Bayer圖案?jìng)鞲衅鳎? 顏色值的第二集合包括捕獲自Bayer圖案?jìng)鞲衅鞯念伾担? 創(chuàng)建HDR圖像包括創(chuàng)建高亮度區(qū)域組分，以及 創(chuàng)建高亮度區(qū)域組分包括對(duì)捕獲自Bayer圖案?jìng)鞲衅鞯念伾档牡诙现械念伾颠M(jìn)行內(nèi)插。
8.根據(jù)權(quán)利要求6或7所述的方法，其中 所述多個(gè)傳感器包括第一傳感器和第二傳感器， 第一和第二傳感器被配置為獲得多種顏色， 創(chuàng)建HDR圖像包括創(chuàng)建低亮度區(qū)域組分，以及 創(chuàng)建低亮度區(qū)域組分包括從第二集合聚集捕獲自第一傳感器和第二傳感器的R、G和B顏色值，以形成能夠使用五點(diǎn)算法內(nèi)插的R、G和B圖案。
9.根據(jù)權(quán)利要求8所述的方法，其中: 創(chuàng)建低亮度區(qū)域組分還包括使用五點(diǎn)算法對(duì)所形成的R、G和B圖案進(jìn)行內(nèi)插。
10.根據(jù)權(quán)利要求7-9中的任一項(xiàng)所述的方法，其中創(chuàng)建高亮度區(qū)域組分還包括在所述多個(gè)傳感器中的至少一個(gè)傳感器前使用中性濾鏡。
11.根據(jù)權(quán)利要求1-10中的任一項(xiàng)所述的方法，其中: 所述多個(gè)傳感器包括第一傳感器、第二傳感器和第三傳感器， 第一傳感器、第二傳感器和第三傳感器被配置為獲得多種顏色，以及 創(chuàng)建彩色圖像還包括針對(duì)至少所述多個(gè)像素位置從第一集合聚集捕獲自第一傳感器、第二傳感器和第三傳感器的R、G和B顏色值。
12.根據(jù)權(quán)利要求11所述的方法，其中第一傳感器是Bayer圖案?jìng)鞲衅鳌?br> 13.根據(jù)權(quán)利要求1-12中的任一項(xiàng)所述的方法，其中所述多個(gè)傳感器包括不多于三個(gè)傳感器。
14.根據(jù)權(quán)利要求1-13中的任一項(xiàng)所述的方法，其中顏色值的第一集合與顏色值的第二集合重疊。
15.根據(jù)權(quán)利要求1-14中的任一項(xiàng)所述的方法，其中三種顏色是相加色。
16.根據(jù)權(quán)利要求1-15中的任一項(xiàng)所述的方法，其中: 三種顏色是R、G和B，以及 彩色圖像是RGB圖像。
17.根據(jù)權(quán)利要求1-16中的任一項(xiàng)所述的方法，其中所述方法由包括所述透鏡組件和所述多個(gè)傳感器在內(nèi)的攝像機(jī)來(lái)執(zhí)行。
18.一種方法，包括: 使用捕獲自多個(gè)傳感器的顏色值的第一集合創(chuàng)建紅-綠-藍(lán)“RGB”圖像，其中RGB圖像的多個(gè)像素位置具有針對(duì)捕獲自所述多個(gè)傳感器的紅“R”、綠“G”和藍(lán)“B”的顏色值，以及透鏡組件將光傳至所述多個(gè)傳感器；以及 使用捕獲自所述多個(gè)傳感器的顏色值的第二集合創(chuàng)建高動(dòng)態(tài)范圍“HDR”圖像。
19.一種裝置，包括一個(gè)或多個(gè)處理器，該一個(gè)或多個(gè)處理器共同被配置為執(zhí)行: 使用捕獲自多個(gè)傳感器的顏色值的第一集合創(chuàng)建彩色圖像，其中彩色圖像的多個(gè)像素位置具有針對(duì)三種顏色的顏色值，三種顏色值捕獲自所述多個(gè)傳感器，以及透鏡組件將光傳至所述多個(gè)傳感器；以及 使用捕獲自所述多個(gè)傳感器的顏色值的第二集合創(chuàng)建HDR圖像。
20.一種裝置，包括: 用于使用捕獲自多個(gè)傳感器的顏色值的第一集合創(chuàng)建彩色圖像的裝置，其中彩色圖像的多個(gè)像素位置具有針對(duì)三種顏色的顏色值，三種顏色值捕獲自所述多個(gè)傳感器，以及透鏡組件將光傳至所述多個(gè)傳感器；以及 用于使用捕獲自所述多個(gè)傳感器的顏色值的第二集合創(chuàng)建HDR圖像的裝置。
21.一種具有存儲(chǔ)在其上的指令的處理器可讀介質(zhì)，所述指令用于使得一個(gè)或多個(gè)處理器共同執(zhí)行: 使用捕獲自多個(gè)傳感器的顏色值的第一集合創(chuàng)建彩色圖像，其中彩色圖像的多個(gè)像素位置具有針對(duì)三種顏色的顏色值，三種顏色值捕獲自所述多個(gè)傳感器，以及透鏡組件將光傳至所述多個(gè)傳感器；以及 使用捕獲自所述多個(gè)傳感器的顏色值的第二集合創(chuàng)建HDR圖像。
22.—種裝置，包括: 透鏡組件；以及 多個(gè)傳感器，被布置為通過(guò)所述透鏡組件接收光，其中: 能夠聚集捕獲自所述多個(gè)傳感器的顏色值的第一集合，以提供針對(duì)多個(gè)像素位置的三種顏色值，以及 能夠?qū)Σ东@自多個(gè)傳感器的顏色值的第二集合進(jìn)行內(nèi)插，以提供HDR圖像。
23.根據(jù)權(quán)利要求22所述的裝置，其中: 所述多個(gè)傳感器包括第一傳感器、第二傳感器和第三傳感器， 第一傳感器被配置為使用三色圖案獲得三種顏色， 第二傳感器使用與第一傳感器的圖案不同的三色圖案，以及 第三傳感器使用與第一傳感器的圖案和第二傳感器的圖案不同的三色圖案。
24.根據(jù)權(quán)利要求23所述的裝置，其中: HDR圖像包括⑴高亮度區(qū)域組分，具有從第一圖像中的相應(yīng)位置得到的像素值，以及(?)低亮度區(qū)域組分，具有從第二圖像中的相應(yīng)位置得到的像素值， 第一傳感器圖案使得能夠?qū)Σ东@自第一傳感器的顏色值進(jìn)行內(nèi)插，以便為高亮度區(qū)域組分的所有內(nèi)部像素提供R、G和B顏色值， 第二傳感器圖案和第三傳感器圖案使得能夠?qū)Σ东@自第二傳感器和第三傳感器的顏色值進(jìn)行聚集并使用五點(diǎn)算法進(jìn)行內(nèi)插，以便為低亮度區(qū)域組分的所有內(nèi)部像素提供R、G和B顏色值，以及 第二傳感器圖案和第三傳感器圖案使得能夠?qū)Σ东@自第一傳感器、第二傳感器和第三傳感器的顏色值進(jìn)行聚集，以便為RGB圖像的所有內(nèi)部像素提供捕獲的R、G和B顏色值。
25.根據(jù)權(quán)利要求23-24中的任一項(xiàng)所述的裝置，其中: 第二傳感器圖案是3/8的R、2/8的G和3/8的B。
26.根據(jù)權(quán)利要求23-25中的任一項(xiàng)所述的裝置，其中: 第三傳感器圖案是3/8的R、2/8的G和3/8的B。
27.根據(jù)權(quán)利要求23-26中的任一項(xiàng)所述的裝置，其中: 第二傳感器圖案和第三傳感器圖案進(jìn)行組合，以提供Bayer圖案缺失的顏色。
28.根據(jù)權(quán)利要求22-27中的任一項(xiàng)所述的裝置，其中: 第一傳感器的三色圖案是Bayer圖案。
29.根據(jù)權(quán)利要求22-28中的任一項(xiàng)所述的裝置，還包括布置在所述透鏡組件和所述多個(gè)傳感器之一之間的中性濾鏡。
30.根據(jù)權(quán)利要求23-29中的任一項(xiàng)所述的裝置，還包括布置在所述透鏡組件和第一傳感器之間的中性濾鏡。
31.根據(jù)權(quán)利要求22-30中的任一項(xiàng)所述的裝置，其中: 三種顏色是R、G和B，以及能夠?qū)︻伾颠M(jìn)行聚集以形成RGB圖像。
【文檔編號(hào)】H04N5/235GK104285434SQ201380025073
【公開(kāi)日】2015年1月14日 申請(qǐng)日期:2013年5月17日 優(yōu)先權(quán)日:2012年5月18日
【發(fā)明者】皮爾·休斯·魯?shù)侔? 蒂埃里·博雷爾 申請(qǐng)人:湯姆遜許可公司