專利名稱：攝像裝置的制作方法
技術領域：
本發(fā)明涉及一種能夠對可見光像和基于紅外熒光物質形成的紅外光 像的合成圖像進行攝影的攝像裝置。
背景技術：
熒光體被利用在對"可見光像中不明確的對象物的構造"或"對象物內存在特定的物質"進行檢測的技術中。例如，特開平10—325798號公 報所公開的顯微鏡裝置被應用在將結合了 "被稱作靛青綠(Y乂K、乂7二 y夕、']j一y、 indocyaninegreen)(下面稱作ICG)的熒光體"的抗體作為 探針(probe)而使用的"生物組織切片的觀察"中。通過利用該顯微鏡裝 置觀察從"具有容易積聚于癌組織的性質的該探針"發(fā)出的熒光，來檢測 生物組織切片中的微小癌的存在。ICG是吸收約800nrn的近紅外光而被激勵，從而發(fā)出約850nrn的近 紅外光的熒光的色素。ICG還可以作為造影劑投入到人體，基于ICG而得 到的紅外光像被利用于疾病的診斷和治療。例如，通過血管注射ICG，可 以觀察血管的像。另外，ICG與血中的蛋白質結合而被肝臟選擇性地吸入 的性質被利用在肝功能的檢查中。在手術等中，醫(yī)師需要在視覺上能夠掌握手術的對象部位。此時，在 作為可見光像而得到的通常圖像的基礎上，能夠得到可掌握"對象部位的 表面或其下部"存在的血管位置的圖像，有時會起到良好的效果。從該觀 點出發(fā)，期望獲得在可見光像中合成顯示了由熒光造影劑得到的紅外光像 的圖像(紅外合成圖像)。紅外合成圖像的生成需要能夠對可見光像和紅外光像進行攝影的攝 像裝置。其中，CCD圖像傳感器等固體攝像元件不僅對于可見光具有靈敏 度，而且對于近紅外光也具有靈敏度。因此，考慮利用固體攝像元件對紅 外合成圖像進行攝影的方案。上述的顯微鏡裝置利用"反射對ICG的激勵光、透射ICG的熒光" 的二向色鏡，將"由光源發(fā)出的激勵光"朝向試樣反射并照射，另一方 面，使來自試樣的光中所含有的"熒光成分及激勵光成分"中的熒光成分 選擇性透過，入射到固體攝像元件中。在該顯微鏡裝置中，為了與由熒光 形成的紅外光像同時進行可見光像的觀察，二向色鏡被設定成反射可見光 的一部分、透過剩余的可見光的特性。這里，通過將可見光的反射率、透過率分別設定為50%，可以在理論上使由光源發(fā)出的可見光中到達固體攝像元件的比率最大。其中，在該最大的狀態(tài)下，從試樣到達固體攝像元件 的可見光的強度成為"不經由二向色鏡地將來自光源的可見光直接照射到試樣上，并使其反射光直接入射到固體攝像元件中時"的強度的25%。作為能夠同時觀察可見光像和紅外光像雙方的裝置，如上所述，有特 開平10 — 32579S號公報所公開的裝置，該裝置是顯微鏡裝置，將該構成 應用到手術中對象部位的觀察或其他的攝像用途中經常是不可能的。例如 在手術中，有時在手術對象部位的周圍需要確保比較大的手術空間、或確 保手術者在手術時能夠直接目視對象部位的空間。在這樣的情況下，具有 接近攝像對象的構成要素的攝像裝置難以確保必要的空間。而且，用于觀 察手術部位的攝像裝置為了能夠從不妨礙作業(yè)的任意位置進行攝影，希望 形成照明機構或攝像機構相對觀察對象的配置自由度高的構成。發(fā)明內容本發(fā)明涉及一種能夠對被攝體的可見光像和紅外光像的合成圖像進 行攝影的攝像裝置，提供一種能夠獲得簡單、便利性高的結構。本發(fā)明的攝像裝置具有光源，其對含有發(fā)出紅外熒光的紅外熒光物 質的被攝體，照射可見光波段的第一成分光及所述紅外熒光物質的激勵波 長的第二成分光；光學濾光器，其透過來自所述被攝體的光中與所述第一成分光對應的波段的成分及所述紅外熒光，阻止"與所述第二成分光對應的波段的成分"透過；固體攝像元件，其能夠基于所述光學濾光器的透過 光，攝影可見光像及紅外光像；和信號處理電路，其對從所述固體攝像元 件的各受光像素讀出的信號進行處理，生成表示基于所述可見光像和所述 紅外光像的合成圖像的圖像信號。


圖1是表示本發(fā)明的實施方式所涉及的攝像裝置的概略構成的框圖。圖2是表示光學濾光器的分光透過特性的示意圖。 圖3是表示CCD圖像傳感器的概略構成的示意俯視圖。 圖4是表示RGB各濾光器的分光透過特性、及光電二極管的分光靈 敏度特性的曲線圖。
具體實施方式
下面參照附圖，對本發(fā)明的實施方式(以下稱作實施方式)進行說明。本實施方式涉及一種對將ICG作為熒光造影劑來進行血管投入的人 體等被攝體，拍攝可見光像和紅外光像的合成圖像的攝像裝置，例如該裝 置在手術中使用。圖1是表示本實施方式的攝像裝置的概略構成的框圖。 該攝像裝置例如被劃分成攝像部2和顯示部4，攝像部2包括光源6、光 學系統(tǒng)8、光學濾光器10、 CCD圖像傳感器12、驅動電路14、信號處理 電路16及控制電路18。光源6由可見光源20和激勵光源22構成，該可見光源20射出跨過R (紅)、G (綠)、B (藍)各色的波段比較寬的可見光；激勵光源22射 出包括ICG的激勵波長的波段比較窄的光。作為可見光源20，例如可以 采用氙燈或白色LED (Light Emitting Diode)等。激勵光源22對應ICG 的激勵波長，例如可以采用"在780nm處具有峰值波長的LED"等半導 體發(fā)光器件。尤其是作為780nm頻帶的發(fā)光器件，GaAs系等的激光二極 管(LD)可應用于CD (Compact Disc)的讀取，且在本裝置中也能夠采 用。另外，為了鮮明地對ICG發(fā)出的熒光進行攝像，優(yōu)選熒光波長附近的 光源6的發(fā)光成分少。由于白色LED能夠抑制紅外區(qū)域的發(fā)光強度，因 此，單獨使用白色LED能夠實現這一點。另一方面，在將"如氙燈那樣 的在紅外區(qū)域也具有比較大的發(fā)光強度的光源"作為可見光源20時，利 用紅外削減濾光器來除去含有熒光波長的紅外波段成分。來自被攝體的光經由光學系統(tǒng)8被取入到該攝像裝置中。光學系統(tǒng)8 由透鏡等構成，在CCD圖像傳感器12的受光面形成光學像。光學濾光器10被配置在朝向CCD圖像傳感器12的入射光路上。圖2 是表示光學濾光器10的分光透過特性的示意圖。光學濾光器IO具有適當 阻止激勵波長為780nm的附近波段的光透過，且適當使熒光波長為850nrn 的附近波段的光透過的特性30。由此，能夠防止"通過CCD圖像傳感器 12拍攝因被攝體反射的激勵光而形成的不要的圖像"，可恰當地對熒光所 形成的紅外光像進行攝影。而且，光學濾光器10還具有透過可見光的特性32。這里，在可見光波段下的透過率與紅外波段下的透過率之間設置差異。該透過率之差的設 置目的在于在入射到CCD圖像傳感器12之前對來自被攝體的"可見光 與紅外熒光"之間存在的強度差進行調整，來實現合成圖像中可見光像與 紅外光像的期望合成平衡。具體而言，由于ICG發(fā)出的熒光一般比較微弱、 如后述的圖4所示CCD圖像傳感器12在紅外波段中的分光靈敏度特性比 可見光波段低，所以，通過將光學濾光器10在可見光波段下的透過特性 32設定為比紅外波段下的透過特性30低的透過率，可以相對提高紅外光 像的強度，使其在合成圖像上鮮明地顯示。這里論述的光學濾光器10的特性，例如可以基于真空蒸鍍反復層疊 二氧化硅層或二氧化鈦層等，通過形成層疊了 10 60層左右的薄膜而實 現。CCD圖像傳感器12根據來自驅動電路14的各種時鐘而動作，生成與 被攝體對應的圖像信號。圖3是表示CCD圖像傳感器12的概略構成的示 意俯視圖。圖3所示的CCD圖像傳感器12是幀傳輸型的傳感器，包括在 半導體基板上形成的攝像部12i、蓄積部12s、水平傳送部12h及輸出部 12d。構成攝像部12i的垂直移位寄存器的各位(bit)，分別作為構成像素 的受光像素而發(fā)揮功能。各受光像素配置有彩色濾光器，對應該彩色濾光 器的透過特性可確定受光像素具有靈敏度的光成分。攝像部12i配置有層 排列的彩色濾光器陣列。彩色濾光器例如由著色的有機材料形成，分別使對應顏色的可見光透 過，在其材質上還透過紅外光。例如，圖4是表示RGB各濾光器的分光 透過特性的示意曲線圖。圖4還一并表示了光電二極管的分光靈敏度特性。各色的彩色濾光器的透過率在可見光區(qū)域中對應各自的著色表示固有的 分光特性，但在紅外光區(qū)域中表示大致相同的分光特性。另一方面，除了波長為780nm左右的整個可見光區(qū)域之外，光電二極 管還在波長比780nm左右長的近紅外區(qū)域具有靈敏度。因此，如果紅外光 成分入射到受光像素中，則該紅外光成分會透過彩色濾光器，基于光電二 極管而產生信號電荷。即，在各受光像素中合成蓄積有入射光中與"該像 素中配置的彩色濾光器的顏色"對應的可見光成分所對應的信號電荷、和 與紅外光成分對應的信號電荷。由攝像部12i的各受光像素產生的信號電荷經由蓄積部12s、水平傳 送部12h而輸送到輸出部12d。輸出部12d由在電氣上孤立的電容及取出 其電位變化的放大器構成，將由水平傳送部12h輸出的信號電荷以一位 (bit)單位接收到電容中，轉換為電壓值，并作為時間系列的圖像信號而 輸出。驅動電路14接收來自控制電路18的定時控制信號等，生成對CCD 圖像傳感器12進行驅動的各種時鐘信號，并提供給CCD圖像傳感器12。 而且，驅動電路14從控制電路18接收指示，例如與CCD圖像傳感器12 中的攝像動作聯動，使光源6接通/斷開。信號處理電路16根據"CCD圖像傳感器12所輸出的圖像信號"，生 成表示"可見光像與紅外光像合成后的合成圖像"的圖像信號。信號處理 電路16包括模擬信號處理電路、A/D變換電路及數字信號處理電路。模擬信號處理電路針對輸出部12d所輸出的模擬信號的圖像信號，實 施放大或采樣保持等處理。A/D變換電路通過將由模擬信號處理電路輸出 的圖像信號變換成規(guī)定量化位數的數字數據，來生成圖像數據，并將其輸 出。數字信號處理電路從A/D變換電路取入圖像數據，進行各種處理。例 如，數字信號處理電路針對由RGB各受光像素采樣的RGB各數據進行濾 波處理。作為該濾波處理，針對在相互不同的采樣點處得到的RGB各數 據進行插補處理，通過該插補處理，分別在構成圖像的各采樣點處定義 RGB各數據。而且，在濾波處理中，還進行除去像素缺陷與隨機噪聲的處 理。該濾波處理后的RGB各數據分別表示為〈R〉、 <G〉、 <B>。數字信號處理電路利用<尺>、<G>、 <B>，進行表示合成圖像的圖像 信號的生成處理，生成各采樣點的亮度數據(亮度信號)Y及色差數據(色差信號)Cr、 Cb。例如，可以根據下述公式算出Y、 Cr、 Cb。 Ysa 〈R〉 +0 (G〉 +y 〈B) (1) Cr=" 〈R) —Y) (2) Cbs" 〈B〉 一Y) (3)其中，ou p、 Y、 ？u p是系數，尤其在，(x、 |3、 Y之間存在著 a+|3+Y=l(4)的關系。<R〉、 <G>、 <8>含有來自被攝體的"可見光成分和紅外熒光成分"， 若將向CCD圖像傳感器12的入射光中含有的與本來的R、 G、 B成分對 應的信號成分設為R。、 G。、 B。，另外將與之重疊的紅外光所對應的信號成 分設為Ir、 Ig、 Ib,則下述公式成立。 (R〉 =R0+ Ir 〈G〉 =G0+Ig (5) 〈B〉 -B0+Ib如上所述，RGB各受光像素中配置的彩色濾光器在紅外光區(qū)域中具有基本相同的分光特性，Ir、 Ig、 Ib成為相同程度。若為了簡化說明，設 !r-T產Ib- (IR〉 (6〉則(5)式成為<formula>formula see original document page 8</formula>當利用公式(4) 、 (7)時，(1) (3)式的Y、 Cr、 Cb表示如下。<formula>formula see original document page 8</formula>(8)式表示了由信號處理電路16得到的亮度信號Y成為在不入射紅 外光成分時的亮度值中加上紅外熒光的成分(IR)的值。即，對于由信號 處理電路16生成的合成圖像的圖像信號而言，越是紅外熒光強的部分， 明亮度越增加。由信號處理電路16生成的合成圖像的圖像信號被輸入到顯示部4，在
液晶顯示器等顯示器件上進行圖像顯示。例如，在向血管中注入ICG來進 行手術的情況下，可得到在由"與RQ、 Go、 Bo對應的彩色圖像"表示的 手術部位的可見光像中合成了 "ICG的濃度高的血管等浮現白色的紅外光 像"的合成圖像。
另外，合成圖像中的可見光像與紅外光像的平衡可如上所述，基于光 學濾光器10的透過特性預先設定為規(guī)定狀態(tài)。這里，光學濾光器10在可 見光波段的透過率及在紅外波段的透過率可以為了實現食成圖像中的期 望合成平衡而自由調整。例如，該調整能夠通過更換光學濾光器10來實 現。并且，在本裝置中，能夠分別獨立地控制可見光源20和激勵光源22 的發(fā)光強度，基于該發(fā)光強度平衡的調節(jié)，能夠對合成圖像中的可見光像 與紅外光像的平衡進行可變控制。具體而言，驅動電路14在控制電路18 的控制之下，對分別提供給可見光源20、激勵光源22的電源的電壓值、 電流量進行增減，來調節(jié)各光源20、 22的發(fā)光強度。
另一方面，可以構成由公共的光源提供可見光和激勵光的結構。該情 況下，無法獨立控制各自的發(fā)光強度，例如，可使得可見光相對激勵光的 發(fā)光強度固定。但是，即便在該情況下，通過如上所述對光學濾光器10 的特性進行調整，也能夠調整合成圖像的平衡。尤其在本發(fā)明的構成中， 可以在由被攝體反射的可見光強度的0 100%的范圍中，自由調整透過光 學濾光器10而到達CCD圖像傳感器12的可見光的強度。
而且，攝像部2例如可以一體構成在一個框體內，該攝像部2可配置 到能夠面對被攝體的任意位置。攝像部2可配置成比較難以遠離被攝體， 例如，能夠確保手術中的手術空間等。另外，可以形成將攝像部2中的光 源6與攝像部2的其他構成分離配置的結構、或單獨設置與光源6同樣的 照明機構的結構。并且，顯示部4可以與攝像部2構成一體，也可以作為 獨立的個體通過線纜等與攝像部2連接。
如以上說明那樣，本裝置不需要多個固體攝像元件，能夠通過一個 CCD圖像傳感器12對可見光像與紅外光像以期望的平衡合成后的紅外合 成圖像進行攝影。由此，可避免可見光像與紅外光像的圖像重合錯位。通 過單體的固體攝像元件進行攝影的該構成，不需要用于將來自被攝體的輸入光在空間上分離成可見光成分和紅外光成分的二向色鏡等光學機構。因 此，可防止在該光學機構中熒光的衰減，能夠實現對紅外熒光的高靈敏度。 并且，對于由單體的固體攝像元件構成的結構而言，由于不需要上述的在 空間上分離可見光成分和紅外光成分的光學機構，相應地可實現攝像裝置 的小型化。進而，通過實現裝置的小型化，在手術等作業(yè)中使用該裝置時 不會引起麻煩，提高了便利性。
根據本發(fā)明，由光源發(fā)出的光可以直接照射到被攝體上。而且，來自 被攝體的光可不分離為可見光成分及紅外熒光的成分地入射到固體攝像 元件中。并且，固體攝像元件以單體檢測可見光成分及紅外光成分。艮口， 根據本發(fā)明，在從光源向被攝體、從被攝體向固體攝像元件的光路中不需 要分支或反射、折射用的構成，由此，可提高光源、固體攝像元件的配置 自由度，進而，容易在被攝體與光源及固體攝像元件之間確?？臻g，鑒于 此，可實現結構的簡化和提高便利性。
另外，作為實施例記載了將本發(fā)明應用于CCD圖像傳感器的內容，
但本發(fā)明也能夠應用于CMOS傳感器。
權利要求
1、一種攝像裝置，具有光源，其對含有發(fā)出紅外熒光的紅外熒光物質的被攝體，照射可見光波段的第一成分光及所述紅外熒光物質的激勵波長的第二成分光；光學濾光器，其透過來自所述被攝體的光中與所述第一成分光對應的波段的成分及所述紅外熒光，阻止與所述第二成分光對應的波段的成分透過；固體攝像元件，其能夠基于所述光學濾光器的透過光，攝影可見光像及紅外光像；和信號處理電路，其對從所述固體攝像元件的各受光像素讀出的信號進行處理，生成表示基于所述可見光像和所述紅外光像的合成圖像的圖像信號。
2、 根據權利要求1所述的攝像裝置，其特征在于， 所述固體攝像元件是將對特定顏色的可見光及紅外光具有靈敏度的多種顏色受光像素進行二維排列的彩色攝像元件。
3、 根據權利要求1所述的攝像裝置，其特征在于， 所述光學濾光器具有根據所述合成圖像中的所述可見光像與所述紅外光像的期望的合成平衡，來調整來自所述被攝體的所述第一成分光的反 射光與所述紅外熒光之間的強度差的透過特性。
4、 根據權利要求1所述的攝像裝置，其特征在于， 所述光源具有發(fā)出所述第一成分光的第一發(fā)光部；和 發(fā)出所述第二成分光的第二發(fā)光部，上述光源能夠獨立控制所述第一發(fā)光部及所述第二發(fā)光部各自的發(fā) 光強度。
全文摘要
本發(fā)明涉及一種能夠對被攝體的可見光像與紅外光像的合成圖像進行攝影的攝像裝置，可實現結構的簡化并提高便利性。作為對含有紅外熒光物質的被攝體的光源(6)，具備可見光源(20)和激勵熒光物質的激勵光源(22)。來自被攝體的光通過光學濾光器(10)入射到CCD圖像傳感器(12)。光學濾光器(10)阻止激勵光并透過熒光。而且，為了在可見光像上清楚地顯示由微弱的熒光形成的紅外光像，將光學濾光器(10)相對可見光的透過率設定得比相對熒光的低。由于CCD圖像傳感器(12)不僅對可見光中具有靈敏度，而且對紅外光也具有靈敏度，所以，可通過來自光學濾光器(10)的入射光來輸出合成圖像的圖像信號。
文檔編號A61B5/00GK101238974SQ20081000530
公開日2008年8月13日 申請日期2008年1月30日 優(yōu)先權日2007年2月5日
發(fā)明者佐藤隆幸, 谷本孝司 申請人:三洋電機株式會社;三洋半導體株式會社;國立大學法人高知大學