專利名稱:圖像抓取裝置、圖像抓取方法和圖像抓取程序的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及圖像抓取裝置、圖像抓取方法和圖像抓取程序。更具體地說,本發(fā)明涉
及圖像抓取裝置,如相機(jī)和攝像機(jī)。
背景技術(shù):
—般來說,在使用圖像抓取裝置(如相機(jī)或攝像機(jī))的攝影中,當(dāng)出現(xiàn)其操作者想 要拍攝照片的情形時(shí),他或她按下在操作部件中提供的操作按鈕等,以便向相機(jī)或攝像機(jī) 給出記錄開始指令。 例如,當(dāng)操作者想要使用相機(jī)來拍攝孩子的笑時(shí),操作者必須在持有相機(jī)的同時(shí) 注意孩子以便他或她面向相機(jī),并且必須等孩子笑,以按下拍攝按鈕。結(jié)果,操作者經(jīng)常由 于晚操作而導(dǎo)致錯(cuò)過拍攝。 當(dāng)操作者想要使用攝像機(jī)來拍攝孩子的笑時(shí),如在相機(jī)的情況下那樣,存在太晚 以不能執(zhí)行操作的可能性。即使當(dāng)操作者在合適的定時(shí)進(jìn)行操作時(shí),通??赡懿荒芘臄z孩 子笑的起因和面部表情改變的狀態(tài)。 因此,操作者可以較早地按下拍攝按鈕以便防止晚操作,因此浪費(fèi)了電源、記錄介 質(zhì)的資源等。為了解決上述問題,已經(jīng)構(gòu)思了一些方法。 例如,日本待審查專利申請公開No. 2008-42319公開了這樣的相機(jī)和攝像機(jī)其 基于被攝體的面部信息來計(jì)算指示面部表情的程度的評估值,并且當(dāng)評估值超過預(yù)定閾值 時(shí)自動地開始記錄。 例如,日本待審查專利申請公開No. 2006-166184公開了這樣的攝像機(jī)其可以在 執(zhí)行拍攝開始操作之前幾秒開始記錄,以便防止由于晚的拍攝開始操作而導(dǎo)致錯(cuò)過拍攝。
發(fā)明內(nèi)容
當(dāng)將日本待審查專利申請公開No. 2008-42319中公開的圖像抓取裝置應(yīng)用于攝 像機(jī)時(shí),可能在出現(xiàn)特定情形之后記錄被攝體的視頻。然而,存在的問題在于,通??赡懿?能記錄引起所述情形發(fā)生的事件和所述情形中改變的過程。 關(guān)于日本待審查專利申請公開No. 2006-166184中公開的攝像機(jī),當(dāng)拍攝者在合 適的定時(shí)執(zhí)行拍攝開始操作時(shí),可以拍攝特定情形中的被攝體和所述情形中改變的過程。
然而,存在的問題在于,當(dāng)拍攝者的拍攝開始操作太晚或拍攝者未能執(zhí)行操作時(shí) 通??赡懿荒苡涗浧谕膱鼍啊A硗?,拍攝者注意拍攝開始操作和被攝體兩者也是晚操作 和未能執(zhí)行操作的一個(gè)原因。 因此,期望提供新穎的且改進(jìn)的圖像抓取裝置,其可以自動地記錄特定情形中的 被攝體的圖像以及所述情形中改變的起因和過程。 根據(jù)本發(fā)明的實(shí)施例,提供了圖像抓取裝置。所述圖像抓取裝置包括圖像抓取部 件,其抓取被攝體的圖像;檢測器,其從由所述圖像抓取部件抓取的圖像中檢測所述被攝體 的一部分,所述部分具有特定特征;評估器,其確定由所述檢測器檢測到的部分的特定特征的數(shù)字表示的評估值;緩沖器部件,其臨時(shí)地存儲與預(yù)定時(shí)間量對應(yīng)的延遲圖像;以及記 錄操作控制器,其在確定所述評估值滿足預(yù)定條件時(shí),控制所述圖像抓取裝置以記錄包括 所述緩沖器部件中的預(yù)定延遲圖像的圖像數(shù)據(jù)。 通過該布置,圖像抓取裝置在緩沖器部件中保存通過圖像抓取而獲得的圖像,同 時(shí)不變地重寫與預(yù)定時(shí)間量對應(yīng)的圖像。因此,當(dāng)開始拍攝時(shí)可以記錄先前圖像。
基于評估值檢測期望的場景,并且自動地執(zhí)行記錄開始操作。該布置可以防止錯(cuò) 過拍攝。 記錄操作控制器可以基于緩沖器部件中存儲的評估值來確定緩沖器部件中圖像 的記錄開始點(diǎn)。 通過該布置,在緩沖器部件中的延遲圖像中,基于評估值可以選擇想要記錄的部 分。該布置使得可以更高效地僅記錄期望場景的圖像。 可以與評估值相關(guān)聯(lián)地任意設(shè)置開始記錄的預(yù)定條件。例如,可以將預(yù)定條件設(shè) 置為評估值改變到大于或等于第一閾值的條件。 也可以將開始記錄的預(yù)定條件設(shè)置為評估值的增大速率改變到大于或等于預(yù)定 閾值的條件。 可以與緩沖器部件中記錄的評估值相關(guān)聯(lián)地以各種方式設(shè)置緩沖器部件中圖像 的記錄開始時(shí)間。例如,可以將緩沖器部件中的圖像的記錄開始點(diǎn)設(shè)置為當(dāng)評估值大于或 等于第二閾值時(shí)的時(shí)間點(diǎn)。 可以任意地設(shè)置要由圖像抓取裝置拍攝的被攝體以及被攝體的屬性的數(shù)字表示 的評估值。例如,當(dāng)將被攝體被設(shè)置為人時(shí),評估值可以是通過評估面部表情而獲得的值。
要評估的面部表情可以是笑、生氣的臉或哭泣的臉。通過該布置,可以檢測并記錄 被攝體的面部表情(如,笑、生氣的臉或哭泣的臉)。 記錄操作控制器可以設(shè)置用于停止記錄的條件??梢曰谠u估值的增大或減小速
率來設(shè)置條件,或者可以基于時(shí)間來設(shè)置。也可以組合地使用所述條件。 例如,用于停止記錄的條件可以是在開始記錄之后,在評估值落在第一閾值以下
之后經(jīng)過了某一時(shí)間量的條件。由于以這種方式設(shè)置記錄停止條件,所以也自動地執(zhí)行記
錄的停止。該布置允許圖像抓取裝置的操作者執(zhí)行拍攝而無需注意其操作。 記錄操作控制器可以控制圖像抓取裝置以連同將要記錄的圖像一起記錄與所述
圖像對應(yīng)的評估值。通過該布置,在記錄之后,也可以基于評估值來執(zhí)行控制。 根據(jù)本發(fā)明的另一實(shí)施例,提供了用于圖像抓取裝置的圖像抓取方法。所述方法
包括如下步驟抓取被攝體的圖像;檢測所述被攝體的一部分,所述部分具有特定特征;確
定檢測到的部分的特定特征的數(shù)字表示的評估值;確定所述評估值是否滿足預(yù)定條件;確
定記錄開始時(shí)間;以及從記錄開始時(shí)間記錄圖像數(shù)據(jù)。 根據(jù)本發(fā)明的再一實(shí)施例,提供了使得圖像抓取裝置執(zhí)行以下步驟的圖像抓取程 序抓取被攝體的圖像;檢測所述被攝體的一部分,所述部分具有特定特征;確定檢測到的 部分的特定特征的數(shù)字表示的評估值;確定所述評估值是否滿足預(yù)定條件;確定記錄開始 時(shí)間;以及從記錄開始時(shí)間記錄圖像數(shù)據(jù)。 如上所述,本發(fā)明使得可以防止由于晚操作或操作的失敗而引起錯(cuò)過拍攝,并且 還使得可以自動地記錄在特定情形下的被攝體的圖像以及在該情形下改變的起因和過程。
圖1是示出了可應(yīng)用本發(fā)明的圖像抓取裝置的整體配置的一個(gè)示例的框圖;
圖2是示出了根據(jù)本發(fā)明的一個(gè)實(shí)施例的圖像抓取裝置的記錄功能配置的框圖;
圖3是示出了根據(jù)本實(shí)施例的圖像抓取裝置的記錄功能的操作的流程圖;
圖4是示出了根據(jù)本實(shí)施例的圖像抓取裝置的報(bào)告功能配置的框圖;
圖5是示出了使用根據(jù)本實(shí)施例的圖像抓取裝置的拍攝的第一說明性操作的操 作的圖; 圖6是示出了在圖5中所示的拍攝期間的操作的流程圖; 圖7A和圖7B圖示了根據(jù)本實(shí)施例的圖像抓取裝置的顯示器上顯示的圖像的示 例; 圖8是圖示了使用根據(jù)本實(shí)施例的圖像抓取裝置的拍攝的第二說明性操作的操 作的圖; 圖9是示出了在圖8中所示的拍攝期間的操作的流程圖; 圖10是在圖9中所示的子流程圖的一個(gè)示例; 圖11是示出了在圖10中所示的示例的修改的流程圖;以及 圖12A和圖12B圖示了根據(jù)本實(shí)施例的圖像抓取裝置的顯示器上顯示的示例圖 像。
具體實(shí)施例方式
參照附圖,將在下面詳細(xì)描述本發(fā)明的優(yōu)選實(shí)施例。這里以及附圖中,由相同的附 圖標(biāo)記表示具有基本上相同功能配置的元件,并且未給出冗余描述。
以如下順序給出下面的描述 1.根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的整體配置
2.根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的記錄功能配置
3.根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的顯示功能配置
4.第一說明性示例(基于時(shí)間固定記錄開始時(shí)間)
5.第二說明性示例(基于評估值確定記錄開始時(shí)間)
6.結(jié)論 〈1.根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的整體配置〉 首先將參照圖1描述根據(jù)本發(fā)明的一個(gè)實(shí)施例的圖像抓取裝置的整體配置。盡管 根據(jù)本實(shí)施例的圖像抓取裝置的主要特征在于下面圖2及后面的圖中所述的內(nèi)部功能配 置,但是現(xiàn)在將描述整體配置以有助于整體理解。
圖1是示出了根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的整體配置的框圖。圖1中所
示的圖像抓取裝置ioo具有用于抓取靜態(tài)圖像或運(yùn)動圖像的功能,并且實(shí)現(xiàn)為(例如)數(shù)
碼相機(jī)或數(shù)碼攝像機(jī)。 不必說,圖像抓取裝置100可以實(shí)現(xiàn)為移動電話中包括的數(shù)碼相機(jī)或攝像機(jī)。圖 像抓取裝置100也可以實(shí)現(xiàn)為在個(gè)人計(jì)算機(jī)提供的相機(jī)或攝像機(jī)。 圖像抓取裝置100也可以實(shí)現(xiàn)在數(shù)字電子設(shè)備中。替代地,圖像抓取裝置100可以實(shí)施為監(jiān)視相機(jī)(surveillance camera)。 [OO53][圖像抓取裝置的整體配置] 圖像抓取裝置100總的來說包括圖像抓取部件10、處理器20、控制器30、記錄部件 40、顯示部件50和輸入/輸出部件60。 圖像抓取部件10通過使用圖像抓取元件13來抓取被攝體的圖像。處理器20對 由圖像抓取部件IO抓取的圖像執(zhí)行各種類型的處理??刂破?0中心地控制圖像抓取裝置 100的各種功能?;趶奶幚砥?0接收到的圖像以及從控制器30接收到的控制信號,記錄 部件40將圖像記錄到記錄介質(zhì)。 顯示部件50在由操作者觀看的顯示器52上顯示各種類型的報(bào)告信息以及由圖像 抓取部件10抓取的圖像。輸入/輸出部件60允許操作者執(zhí)行用于設(shè)置和/或操作的輸入, 并向操作者、被攝體等輸出報(bào)告信息。將在下面描述各部件的細(xì)節(jié)。
[圖像抓取部件的配置] 首先,將給出圖像抓取部件10的主要配置的描述,所述圖像抓取部件IO具有通過 使用圖像抓取元件13來抓取被攝體的圖像的功能。圖像抓取部件10 —般包括光學(xué)單元 11、驅(qū)動器12、圖像抓取元件13和定時(shí)發(fā)生器14。 光學(xué)單元11用作用于將來自被攝體的光收集到圖像抓取元件13上的光學(xué)系統(tǒng), 并具有透鏡、用于移動透鏡以執(zhí)行對焦和變焦的驅(qū)動機(jī)構(gòu)、快門機(jī)構(gòu)、光圈機(jī)構(gòu)等(未示 出)。 基于來自微計(jì)算機(jī)31的控制信號,驅(qū)動器12控制光學(xué)單元11中的每一個(gè)機(jī)構(gòu)的 驅(qū)動。 圖像抓取元件13是用于將被攝體的圖像作為數(shù)字信號抓取到圖像抓取裝置100 中的元件。例如,圖像抓取元件13是CCD(電荷耦合器件)或CMOS(互補(bǔ)金屬氧化物半導(dǎo) 體)固態(tài)圖像抓取元件。 基于從定時(shí)發(fā)生器14輸出的定時(shí)信號來驅(qū)動圖像抓取元件13,并且圖像抓取元 件13將來自被攝體的入射光轉(zhuǎn)換為電信號。 定時(shí)發(fā)生器14是用于將定時(shí)信號輸出到與定時(shí)控制有關(guān)的各部件的元件。在本 實(shí)施例中,定時(shí)發(fā)生器14將定時(shí)信號輸出到圖像抓取元件13。
[處理器的配置] 接下來,給出用于對由圖像抓取部件IO抓取的圖像執(zhí)行各種類型的處理的處理 器20的描述。處理器20—般具有AFE(模擬前端)電路21和相機(jī)信號處理電路22。
AFE電路21采樣并保持從圖像抓取元件13輸出的圖像信號,以便維持有利的S/ N(信噪)比,控制增益,執(zhí)行諸如A/D(模數(shù))轉(zhuǎn)換之類的處理,并輸出所產(chǎn)生的數(shù)字圖像數(shù) 據(jù)。 相機(jī)信號處理電路22對圖像數(shù)據(jù)執(zhí)行各種類型的處理。在本實(shí)施例中,相機(jī)信號 處理電路22對從AFE電路21接收的圖像數(shù)據(jù)執(zhí)行AF(自動對焦)、AE(自動曝光)、用于
各種類型的圖像質(zhì)量校正處理的檢測處理、基于檢測信息的圖像質(zhì)量校正處理等。 [ooes][控制器的配置] 接下來,將給出用于中心地控制圖像抓取裝置100的各種功能的控制器30的描 述??刂破?0—般具有微計(jì)算機(jī)31。
微計(jì)算機(jī)31包括CPU (中央處理單元)和存儲器(如ROM (只讀存儲器)和RAM (隨 機(jī)存取存儲器)),并通過執(zhí)行存儲器中存儲的程序來中心地控制圖像抓取裝置100。 [OO71][記錄部件的配置] 接下來,將給出具有用于將抓取的圖像記錄到記錄介質(zhì)的功能的記錄部件40的 描述。記錄部件40 —般具有圖像編碼器41和記錄裝置42。 圖像編碼器41壓縮并編碼從相機(jī)信號處理電路22輸出的圖像數(shù)據(jù),并將已編碼 數(shù)據(jù)輸出到記錄裝置42。當(dāng)不需要壓縮和編碼圖像數(shù)據(jù)時(shí),可以消除圖像編碼器41。
記錄裝置42是用于記錄和保存各種類型數(shù)據(jù)的記錄介質(zhì),并將從圖像編碼器41 輸出的已編碼數(shù)據(jù)記錄為圖像文件。當(dāng)未提供圖像編碼器41時(shí),記錄裝置42直接地記錄 圖像數(shù)據(jù),而非已編碼數(shù)據(jù)。 記錄裝置42可以在其中具有磁記錄介質(zhì)(如,硬盤),或者可以是外部記錄裝置。 外部記錄裝置的示例包括便攜式記錄介質(zhì)(如,磁帶或光盤)或非易失性存儲器(如,閃 存)。[顯示部件的配置] 接下來,將給出具有允許操作者觀看正在拍攝的圖像的顯示器52的顯示部件50 的描述。顯示部件50 —般具有圖形控制電路51和顯示器52。 圖形控制電路51將要在顯示器52上顯示的信息轉(zhuǎn)換為適于顯示的信號。在本實(shí) 施例中,圖形控制電路51將從相機(jī)信號處理電路22或微計(jì)算機(jī)31輸出的圖像數(shù)據(jù)轉(zhuǎn)換為 要在顯示器52上顯示的信號。 響應(yīng)于來自微計(jì)算機(jī)31的請求,圖形控制電路51還在圖像上顯示諸如面部表情 分?jǐn)?shù)(下面描述)之類的信息。 顯示器52是這樣的裝置其執(zhí)行顯示,以便正在拍攝的圖像和各種類型的報(bào)告信 息可以由拍攝者等觀看。在本實(shí)施例中,顯示器52基于從圖形控制電路51輸出的圖像數(shù) 據(jù)來顯示圖像等。 顯示器52可以實(shí)施為(例如)液晶顯示(LCD)裝置或有機(jī)EL(電致發(fā)光)顯示
裝置,但不限于此。[輸入/輸出部件的配置] 接下來,將給出用于向圖像抓取裝置100輸入指示操作者的操作的信號以及用于 向操作者執(zhí)行輸出的輸入/輸出部件60的描述。輸入/輸出部件60 —般具有輸入部件 61、 LED(發(fā)光二極管)發(fā)光部件62和聲音輸出部件63。 輸入部件61用作操作部件,所述操作部件用于向微計(jì)算機(jī)31輸出與拍攝者通過 各種輸入開關(guān)執(zhí)行的操作輸入對應(yīng)的控制信號。輸入部件61可以實(shí)施為(例如)快門釋 放按鈕、十字鍵(cross key)或觸摸板,以用于執(zhí)行各種菜單操作和操作模式設(shè)置等,但不 限于此。 LED發(fā)光部件62基于來自微計(jì)算機(jī)31的控制信號而打開LED。例如,在自動拍照 器(self-timer)功能的操作期間打開LED。 聲音輸出部件63基于來自微計(jì)算機(jī)31的控制信號而輸出聲音(如,操作確認(rèn)聲 音)。當(dāng)提供用于音頻數(shù)據(jù)的編碼器/解碼器時(shí),聲音輸出部件63可以輸出通過再現(xiàn)音頻 數(shù)據(jù)而獲得的聲音。
7
如上所述,圖像抓取裝置100中的圖像抓取元件13通過光學(xué)單元11接收光,光電 地將光轉(zhuǎn)換為信號,并順序地將信號提供到AFE電路21。通過各種類型的處理將信號轉(zhuǎn)換 為數(shù)字圖像數(shù)據(jù),并將所產(chǎn)生的數(shù)字圖像數(shù)據(jù)發(fā)送到相機(jī)信號處理電路22。
〈2.根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的記錄功能〉 現(xiàn)在將參照圖2和圖3描述根據(jù)本實(shí)施例的圖像抓取裝置的記錄功能。圖2是示
出了根據(jù)本實(shí)施例的圖像抓取裝置的記錄功能配置的框圖。 [oogo][記錄功能配置] 現(xiàn)在將參照圖2描述相機(jī)信號處理電路22和微計(jì)算機(jī)31 (其為根據(jù)本實(shí)施例的 用于記錄功能的主要部件,并且在以上參照圖l進(jìn)行了描述)的功能配置的一個(gè)示例。
適用根據(jù)本實(shí)施例的圖像抓取裝置,使得它可以在緩沖器等中存儲抓取的圖像長 達(dá)某一時(shí)間段,以便允許響應(yīng)于用于開始記錄的指令從先前圖像開始記錄,使得可以檢測 最想拍攝的場景,并且使得可以自動地發(fā)布記錄開始指令。 將由圖像抓取部件10抓取的圖像數(shù)據(jù)經(jīng)歷處理器20和控制器30執(zhí)行的處理,然 后由記錄部件40記錄。下面的描述給出了如上所述可以記錄先前圖像、可以檢測最想拍攝 的場景并且可以自動地發(fā)布開始記錄的指令的功能配置。 相機(jī)信號處理電路22具有檢測器221和局部圖像發(fā)生器222,以便檢測最想拍攝 的場景。 檢測器221是用于檢測特殊被攝體的部件,并分析輸入圖像數(shù)據(jù),并檢測諸如被 攝體的一部分的位置和大小之類的信息,所述部分具有特定特征。例如,除了位置和大小之 外,在這種情況下檢測到的信息可以包括朝向。 局部圖像發(fā)生器222是用于裁減出所抓取的圖像的特殊局部圖像的部件。局部圖 像發(fā)生器222從圖像抓取部件10接收圖像數(shù)據(jù),從檢測器221接收諸如已檢測到的特定部 分的位置和大小之類的信息,從圖像數(shù)據(jù)中裁減出特定部分的圖像,并將裁減出的圖像輸 出到微計(jì)算機(jī)31。 微計(jì)算機(jī)31具有評估器311、緩沖器部件312、記錄操作控制器313和確定軸信息 314等。 評估器311是用于確定被攝體的特定特征部分的屬性的數(shù)字表示的評估值的功 能部件。基于確定軸信息314和從局部圖像發(fā)生器222接收到的局部圖像的歸一化圖像 數(shù)據(jù),評估器311評估輸入圖像的特定特征,并將所確定的評估值發(fā)送到記錄操作控制器 313。 由評估器311確定的評估值可以被直接發(fā)送到記錄操作控制器313,以便用作開 始記錄操作的確定信息。由評估器311確定的評估值可以被發(fā)送到記錄操作控制器313和 緩沖器部件312,以便在緩沖器部件312中存儲某一時(shí)間段的評估值。 當(dāng)在緩沖器部件312中存儲評估值時(shí),記錄操作控制器313可以從評估器311接 收當(dāng)前點(diǎn)處的評估值,并接收緩沖器部件312中存儲的評估值歷史,以便使用接收到的評 估值和評估值歷史作為記錄開始操作的確定信息。 緩沖器部件312用作臨時(shí)存儲部件,其可以對于特定量的時(shí)間存儲特定量的數(shù) 據(jù),并且不變地保存所抓取的圖像、聲音等。 由于提供緩沖器部件312,所以除了當(dāng)前圖像之外,記錄操作控制器313可以從緩沖器部件312中存儲的先前圖像開始記錄。因此,存在防止由于晚的記錄開始操作引起的 錯(cuò)過拍攝的優(yōu)點(diǎn)。 如上所述,緩沖器部件312還可以存儲評估值。由于存儲了所存儲的評估值,所以 可以基于評估值確定記錄開始點(diǎn)。 記錄操作控制器313是用于控制整體記錄操作的功能部件。在本實(shí)施例中,一旦 檢測到從評估器311接收到的評估值滿足預(yù)定條件,記錄操作控制器313發(fā)布開始記錄操 作的指令。 除了當(dāng)前拍攝的圖像之外,記錄操作控制器313還可以記錄緩沖器部件312中存 儲的、且早于記錄開始點(diǎn)的圖像。 不必說,記錄操作控制器313可以首先記錄處于記錄開始時(shí)間的圖像,而非先前 圖像。該布置允許執(zhí)行設(shè)置以便一旦檢測到某一條件就自動地開始記錄。因此,可以期望, 能夠防止由于記錄操作的失敗而引起錯(cuò)過拍攝。 確定軸信息314是評估部件311使用以執(zhí)行用于確定被攝體的特定特征的數(shù)字表 示的評估值的評估的信息。例如,確定軸信息314被預(yù)先存儲在內(nèi)部存儲器(如R0M)中。
本實(shí)施例中的描述已經(jīng)給出了這樣的示例其中相機(jī)信號處理電路22中的檢測 器221和局部圖像發(fā)生器222由硬件實(shí)現(xiàn),并且將微計(jì)算機(jī)31的功能部件實(shí)現(xiàn)為軟件功 能。 然而,不必說,那些功能可以由硬件和/或軟件實(shí)現(xiàn)。 對于軟件,例如,可以通過使微計(jì)算機(jī)31的CPU執(zhí)行存儲器(如,ROM或RAM(未 示出))中存儲的程序來實(shí)現(xiàn)。例如,基于ROM中存儲的程序,CPU可以使用RAM作為工作區(qū)來操作。
[記錄功能操作的流程] 接下來,將給出由圖2中所示的記錄功能配置實(shí)現(xiàn)的記錄操作的流程的描述。圖
3是示出了根據(jù)本實(shí)施例的圖像抓取裝置的記錄功能的操作的流程圖。 首先,在步驟S100,檢測器221從圖像抓取部件10抓取的圖像檢測具有特定特征
的部分。接下來,在步驟S102,評估器311確定由檢測器221檢測到的部分的特定特征的數(shù)
字表示的評估值。 例如,在這種情況下檢測到的部分可以是人臉,并且評估值可以是人的面部表情 的數(shù)字表示值。在這種情況下,將要評估的面部表情可以是笑、生氣的臉或哭泣的臉,并且 可以將這樣的面部表情表示為評估值。 例如,在這種情況下檢測到的部分也可以是螢火蟲,并且評估值可以是螢火蟲的 光強(qiáng)度的數(shù)字表示值。例如,可以檢測光強(qiáng)度,并抓取在螢火蟲開始發(fā)光之后或之前的場景 的圖像。 在這種情況下檢測到的部分可以是動物、昆蟲等,并且評估值可以是運(yùn)動的數(shù)字 表示值(在一狀態(tài)下的改變量)。例如,可以當(dāng)大象在動物公園中移動長樹干時(shí)的時(shí)刻拍攝 圖像。 檢測到的部分可以是可識別的、且具有可數(shù)字表示的特征的任意其他部分。
在步驟S104中,進(jìn)行關(guān)于評估值是否滿足預(yù)定記錄開始條件的確定。當(dāng)滿足所述 條件時(shí),在步驟S106開始記錄。
9
在這種情況下,可以將任意條件設(shè)置為記錄開始條件。任意條件可以是(但不限 于)評估值大于或等于某一閾值的條件,或者評估值的增大速率大于或等于某一閾值的條 件。 在記錄開始期間,可以從緩沖器部件312中保存的延遲圖像開始記錄,并且可以 任意地設(shè)置記錄開始圖像。 記錄開始圖像可以是在時(shí)間的基礎(chǔ)上早于預(yù)定時(shí)間的圖像,或者可以是當(dāng)基于所 存儲的評估值的歷史的評估值滿足預(yù)定條件時(shí)的圖像。 接下來,在步驟S108,進(jìn)行關(guān)于是否發(fā)布了停止指令的確定。繼續(xù)記錄直到發(fā)布了 停止指令為止。當(dāng)發(fā)布了停止指令時(shí),在步驟S110停止記錄。 可以通過拍攝者按下停止按鈕等來發(fā)布停止指令,或者可以通過任意停止條件的 設(shè)置來發(fā)布停止指令??商娲兀?dāng)經(jīng)過預(yù)定時(shí)間時(shí)可以發(fā)布停止指令,或者當(dāng)基于評估值 滿足某一條件時(shí)可以發(fā)布停止指令,但不限于此。 雖然已經(jīng)在上文中描述了記錄的操作,但將在下文中聯(lián)系特定示例詳細(xì)描述第一 和第二說明性示例,在所述特定示例中,檢測到的部分是人臉,并且評估值是笑的程度的數(shù)
字表示值。 〈3.根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的顯示功能配置〉 接下來將參照圖4描述根據(jù)本實(shí)施例的用于顯示的功能配置。圖4是除了圖2中 所示的記錄功能配置之外還示出了顯示功能配置的框圖。在下文中不描述與參照圖2所述 的那些相同的部件。 圖4中所示的微計(jì)算機(jī)31具有報(bào)告控制器315?;趶脑u估器311接收到的評估 值,報(bào)告控制器315根據(jù)預(yù)定報(bào)告方法,向圖形控制電路51發(fā)布指令以便通過使用圖形、圖 標(biāo)等向操作者報(bào)告特定面部表情的程度。 也可以在顯示器52上顯示由檢測器21檢測到的諸如被攝體的特定部分的位置和 大小之類的信息,以便基于其可以識別出將要評估的部分。 盡管未示出,但是當(dāng)評估值超過某一閾值時(shí)可以以聲音通知操作者,或者可以以 發(fā)光通知操作者。 響應(yīng)于來自報(bào)告控制器315的指令,圖形控制電路51控制用于在顯示器52上顯 示來自緩沖器部件312的延遲圖像以及來自處理器20的當(dāng)前圖像的方法。聯(lián)系第一和第 二說明性示例,將在下文中詳細(xì)描述顯示的特定示例。
〈4.第一說明性示例> 接下來,參照圖5到圖7B,將描述使用根據(jù)本實(shí)施例的圖像抓取裝置的運(yùn)動圖像 拍攝的第一說明性示例的一系列流程。 圖5是圖示了使用根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的拍攝的第一說明性示 例中所抓取的圖像以及面部表情評估值的改變的圖。圖6是示出了在這種情況下圖像抓取 裝置的操作的流程圖。 第一說明性示例中的描述將給出這樣的示例其中,檢測到人臉并且確定用于評 估面部表情在哪種程度上更接近于笑的面部表情評估值,并且當(dāng)確定面部表情評估值超過 第一閾值時(shí),從早了預(yù)定時(shí)間量N的圖像開始記錄。 下面參照圖5和圖6給出描述,其中t指示笑檢測時(shí)間,N指示緩沖時(shí)間,而Th 1指
10示面部評估值的第一閾值。 首先,拍攝者打開圖像抓取裝置的電源以執(zhí)行開始拍攝的操作。將通過圖像抓取 而抓取的圖像存儲為延遲圖像70,直到達(dá)到最大時(shí)間N為止。當(dāng)經(jīng)過了時(shí)間量N時(shí),不變地 存儲與時(shí)間量N對應(yīng)的圖像,同時(shí)由此順序地重寫較老的圖像。 同時(shí),在步驟S200,檢測器221對當(dāng)前正在抓取的圖像執(zhí)行面部檢測。在步驟 S202,評估器311確定面部表情評估值。在步驟S204,做出關(guān)于面部表情評估值是否大于或 等于第一閾值Thl的確定。 可以使用已經(jīng)可用的方法作為用于確定評估值的方法。例如,可以使用日本待審 查專利申請公開No. 2008-42319中公開的方案。 在圖5中所示的圖像71和72的時(shí)間,面部表情評估值未達(dá)到第一閾值Thl,使得 重復(fù)在步驟S200到步驟S204的操作。在圖像73的時(shí)間,面部表情評估值達(dá)到第一閾值 Thl,使得滿足記錄開始條件。因此,在步驟S206,在時(shí)間t-N從圖像71開始記錄。
盡管記錄開始圖像75是早了預(yù)定時(shí)間量的圖像,并且首先記錄在緩沖器部件312 中存儲的圖像中的最老的一個(gè)(在t-N),但是這樣的布置使得拍攝者可以在緩沖時(shí)間內(nèi)預(yù) 設(shè)記錄開始圖像75。 在開始記錄之后,繼續(xù)記錄直到發(fā)布停止指令為止。當(dāng)在步驟S208確定發(fā)布停止 指令時(shí),處理進(jìn)行到步驟S210,其中停止記錄。 當(dāng)操作者按下停止按鈕等時(shí)可以發(fā)布停止指令。可替代地,例如,當(dāng)從面部表情評
估值達(dá)到第一閾值Thl的時(shí)間t起經(jīng)過了預(yù)定量時(shí)間時(shí)或者當(dāng)從開始記錄之后面部表情評
估值落在第一閾值Thl以下的時(shí)間t起經(jīng)過了預(yù)定量時(shí)間時(shí)可以自動地停止記錄。 雖然已經(jīng)在上文中描述了根據(jù)第一實(shí)施例的圖像抓取裝置的記錄操作,但是,由
于圖像抓取裝置可以檢測最想記錄的面部表情,可以記錄檢測到的面部表情的圖像之前和
之后的圖像,并且可以自動地確定記錄的開始以執(zhí)行操作,因此圖像抓取裝置的使用使得
可以可靠地防止錯(cuò)過拍攝。[顯示的示例] 現(xiàn)在將參照圖7A和圖7B描述在操作期間的顯示的一個(gè)示例。待機(jī)屏幕70 (圖7A 中所示)是在待機(jī)狀態(tài)下(如,在圖5中所示的圖像71和72的時(shí)間)同時(shí)正在運(yùn)行面部 檢測的顯示的一個(gè)示例。在檢測時(shí)顯示的屏幕71(圖7B中所示)是當(dāng)開始記錄時(shí)(如,在 圖5中所示的圖像73的時(shí)間)的顯示的一個(gè)示例。 在待機(jī)狀態(tài)下,當(dāng)檢測到面部時(shí),可以顯示指定所檢測部分的框81、指示正在執(zhí)行 面部檢測/評估的標(biāo)記82以及表示當(dāng)前評估值的狀態(tài)的圖表83。 在記錄開始期間,類似地,除了指定檢測到的面部的位置的框81、指示正在執(zhí)行面 部檢測/評估的標(biāo)記82以及表示面部表情評估值的狀態(tài)的圖表83之外,還顯示示出正在 記錄的延遲圖像的窗口 84和指示正在記錄圖像的圖標(biāo)85。
〈5.第二說明性示例> 接下來將描述第二說明性示例。第二說明性示例與第一說明性示例的相同之處在 于,當(dāng)面部表情評估值達(dá)到第一閾值Thl時(shí)首先記錄先前圖像,但不同之處在于,在記錄開 始期間基于評估值來確定記錄開始圖像。 由于在記錄開始條件的檢測期間基于評估值來確定記錄開始圖像,因此第二說明
11性示例具有也在緩沖器部件312中存儲評估值歷史的配置。 下面將參照圖8到圖12B給出描述,其中t指示笑檢測時(shí)間,N指示緩沖時(shí)間,Thl
指示面部評估值的第一閾值,Th2指示面部評估值的第二閾值,而t-M指示記錄開始時(shí)間。 圖8是圖示了使用根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置、根據(jù)第二說明性示例的
圖像抓取的流程的圖。圖9是示出了在這種情況下的圖像抓取的流程的流程圖。 首先,拍攝者打開圖像抓取裝置的電源以執(zhí)行開始拍攝的操作。將通過圖像抓取
而抓取的圖像存儲為延遲圖像70,直到達(dá)到最大時(shí)間N為止。當(dāng)經(jīng)過時(shí)間量N時(shí),不變地存
儲與時(shí)間量N對應(yīng)的圖像,同時(shí)由此順序地重寫較老的圖像。 同時(shí),在步驟S300,檢測器221對當(dāng)前正在抓取的圖像執(zhí)行面部檢測。在步驟 S302,評估器311確定面部表情評估。在當(dāng)在緩沖器部件312中存儲所確定的面部表情評估 值時(shí)的同時(shí),在步驟S304做出關(guān)于面部表情評估值是否大于或等于第一閾值Thl的確定。
在圖8中所示的圖像71和72的時(shí)間,面部表情評估值未達(dá)到第一閾值Thl,使得 重復(fù)步驟S300到S304的操作。在圖像73的時(shí)間,面部表情評估值達(dá)到第一閾值Thl,使得 滿足記錄開始條件。因此,在步驟S306,檢測到記錄開始時(shí)間。 下面參照圖10和圖11詳細(xì)描述記錄開始時(shí)間檢測的特定示例。盡管第一說明性 示例中的記錄開始圖像是在預(yù)定時(shí)間之前獲得的圖像并且基于時(shí)間來確定,但是第二說明 性示例中的記錄開始圖像基于緩沖器部件312中的評估值來確定的。 在步驟S308,在記錄開始時(shí)間t-M開始記錄。繼續(xù)記錄直到發(fā)布停止指令為止。 當(dāng)在步驟S310確定發(fā)布了停止指令時(shí),在步驟S312停止記錄。
[記錄開始時(shí)間檢測] 接下來,將參照圖8、圖9和圖10描述記錄開始時(shí)間檢測的操作流程。首先,將給 出使用面部表情評估值和第二閾值Th2的記錄開始時(shí)間檢測的描述。圖10是圖9中所示 的記錄開始時(shí)間檢測的一部分的子流程圖。 當(dāng)在圖9中的步驟S304確定面部表情評估值大于或等于第一閾值Thl時(shí),處理進(jìn) 行到圖10中的步驟S400。在步驟S400,順序地掃描緩沖器部件312中存儲的評估值。可 以從笑檢測時(shí)間t返回到較早時(shí)間順序地執(zhí)行掃描,或者可以從t-N順序地掃描。
在步驟S402,進(jìn)行關(guān)于所掃描的面部表情評估值是否大于或等于第二閾值Th2的 確定。當(dāng)面部表情評估值大于或等于第二閾值Th2時(shí),處理進(jìn)行到步驟S404,其中對于M設(shè) 置與時(shí)間對應(yīng)的值。 在這種情況下,t-M是記錄開始時(shí)間,并且比當(dāng)前時(shí)間t早了 M。由于從與緩沖器 部件312中存儲的圖像和評估值對應(yīng)的時(shí)間中選擇M,所以M具有小于或等于最大緩沖時(shí)間 N的值。 當(dāng)以上述方式在記錄開始期間基于評估值確定記錄開始圖像時(shí),可以執(zhí)行更精細(xì) 的控制器,并且可以更高效地僅記錄期望的圖像。 根據(jù)第二說明性示例(其中使用第二閾值Th2),當(dāng)要拍攝孩子的笑時(shí),也可以記
錄孩子的面部表情開始改變的時(shí)間點(diǎn)處的圖像。[記錄時(shí)間檢測的修改] 接下來,將參照圖11描述圖10中所示的記錄時(shí)間檢測的修改。圖11示出了圖9 中所示的記錄時(shí)間檢測的特定示例。該特定示例也是圖10中的子流程圖中所示的處理的修改。 由于步驟S400到S404與圖10中的那些類似,所以在下文中未給出其描述。在步 驟S404對于M設(shè)置與面部表情評估值大于或等于第二閾值Th2的時(shí)間對應(yīng)的值之后,在步 驟S406進(jìn)行關(guān)于M是否小于預(yù)定閾值的確定。 在本實(shí)施例中,例如,當(dāng)M具有小于2秒的值時(shí),在步驟S408對于M設(shè)置N。緩沖 時(shí)間N是可以在緩沖器部件312中存儲面部表情評估值的最大時(shí)間。 例如,該設(shè)置更優(yōu)選地用于當(dāng)面部表情快速改變時(shí)極短時(shí)間段中的拍攝不合適的 情況。例如,當(dāng)從笑檢測起已經(jīng)經(jīng)過了預(yù)定時(shí)間之后的時(shí)間的條件用作停止條件時(shí),所述設(shè) 置也可以是有用的。 盡管已經(jīng)在上文中描述了當(dāng)M具有小于2秒的值時(shí)以緩沖時(shí)間替換M的示例,但 不必說M可以具有另一值。例如,可以將M設(shè)置為具有圖像抓取裝置中的固定值,或者可以
由操作者預(yù)先設(shè)置。
[顯示的示例] 現(xiàn)在將參照圖12A和圖12B描述在操作期間顯示的一個(gè)示例。待機(jī)屏幕120 (圖 12A中所示)是待機(jī)狀態(tài)下(如,圖8中所示的圖像71和72的時(shí)間)同時(shí)正在運(yùn)行面部檢 測的顯示的一個(gè)示例。在檢測時(shí)顯示的屏幕121(圖12B中所示)是當(dāng)開始記錄時(shí)(如,在 圖8中所示的圖像73的時(shí)間)的顯示的一個(gè)示例。 圖示了待機(jī)狀態(tài)下的示例,以便與開始記錄期間的顯示進(jìn)行比較,并且與圖7A中 圖示的第一說明性示例相同,因此在下文中未給出其描述。 在記錄開始期間,如在待機(jī)狀態(tài)的情況中那樣,除了指示檢測到的面部的位置的 框81、指示正在執(zhí)行面部檢測/評估的標(biāo)記82和表示面部表情評估值的狀態(tài)的圖表83之 外,進(jìn)一步顯示一些延遲圖像84。 顯示的延遲圖像84可以是具有基于評估值確定的特征(如,大改變)的提取的圖 像。延遲圖像84也可以以規(guī)則的間隔顯示。 可以以高亮方式顯示記錄開始圖像87,以便可以進(jìn)行區(qū)分。
〈6.結(jié)論> 聯(lián)系示例,已經(jīng)在上文中描述了根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置的配置和功 能操作以及使用根據(jù)本實(shí)施例的圖像抓取裝置的圖像抓取的流程。 在上述說明性示例中的任意一個(gè)中,當(dāng)顯示實(shí)況圖像時(shí),檢測被攝體的特定特征 并在緩沖器部件312中不變地存儲延遲圖像。因此,當(dāng)開始拍攝時(shí),除了當(dāng)前正在抓取的圖 像之外,可以記錄先前圖像。 通過該布置,當(dāng)拍攝者操作拍攝開始按鈕并將圖像抓取裝置引導(dǎo)至被攝體時(shí),根 據(jù)檢測到的情形自動地開始記錄。例如,當(dāng)拍攝者要拍攝孩子時(shí),由于他或她可以全身貫注 于孩子,所以減小了與拍攝相關(guān)的負(fù)擔(dān)。 例如,在被攝體是動物或昆蟲并且當(dāng)特定情形出現(xiàn)不清楚時(shí)的情況下,由于在保
護(hù)和設(shè)置圖像抓取裝置時(shí)可以自動地開始拍攝,因此可以減少拍攝者的負(fù)擔(dān)。 由于可以僅記錄期望情形的圖像而不記錄不想要的部分的圖像,因此不需要之后
從所記錄的圖像中搜索期望部分,從而使得編輯更容易。也可以減小記錄介質(zhì)的浪費(fèi)的資
源的量。
在典型的圖像抓取裝置中,將其引導(dǎo)至被攝體不意味著正在執(zhí)行記錄。因此,被攝
體可能變得緊張從而看起來不自然。然而,通過根據(jù)本發(fā)明的實(shí)施例的圖像抓取裝置,直到
出現(xiàn)特定情形時(shí)才開始記錄,從而使得可以獲得被攝體的更自然的圖像。 盡管已經(jīng)參照附圖在上文中詳細(xì)描述了根據(jù)本發(fā)明的優(yōu)選實(shí)施例,但是本發(fā)明不
限于所述實(shí)施例。對于本領(lǐng)域的技術(shù)人員來說,可以在本發(fā)明的精神或范圍內(nèi)進(jìn)行各種修
改和改變,并且不必說,這樣的修改和改變同樣由本發(fā)明的技術(shù)范圍所包括。 例如,盡管已經(jīng)聯(lián)系笑的檢測的示例給出了以上實(shí)施例,但是本發(fā)明不限于此。例
如,本發(fā)明不僅可以應(yīng)用于笑,而且還可以應(yīng)用于生氣的臉或哭泣的臉。 另外,被攝體不限于在本實(shí)施例中示例性的人,并且根據(jù)本發(fā)明的圖像抓取裝置 可以應(yīng)用于能夠表示為被攝體的特定屬性的數(shù)字評估值的任意被攝體。 如上所述,例如,檢測到的部分可以是螢火蟲,并且評估值可以是螢火蟲的光強(qiáng)度 的數(shù)字表示值。 類似地,如上所述,檢測到的部分可以是動物、昆蟲等,并且評估值可以是運(yùn)動的 數(shù)字表示值( 一狀態(tài)下的改變程度),并且不限于這種示例,只要該部分可檢測到并且其特 征可數(shù)字表示即可。 盡管在上述實(shí)施例中將圖像和聲音記錄到記錄介質(zhì),但所確定的評估值也可以被 與圖像和聲音一起記錄。在這種情況下,例如,圖像抓取裝置可以被配置為使得,在記錄之 后,可以基于評估值來搜索圖像。該布置使得更容易地回放在笑的時(shí)刻抓取的圖像。
在上述實(shí)施例中,當(dāng)基于評估值確定記錄開始點(diǎn)時(shí)盡管已經(jīng)描述了用于使用第二 閾值的方法,但是可以組合多個(gè)條件來執(zhí)行控制。 例如,盡管在上述實(shí)施例中已經(jīng)描述了記錄運(yùn)動圖像的情況,但是可以從緩沖器 部件中存儲的圖像記錄每一預(yù)定時(shí)間量的連續(xù)靜態(tài)圖像。 類似地,基于評估值從在緩沖器部件中存儲的圖像檢測具有特征的點(diǎn),使得可以 記錄一個(gè)或多個(gè)檢測到的靜態(tài)圖像。 本申請包含與在2009年1月14日向日本專利局提交的日本優(yōu)先權(quán)專利申請JP 2009-006098中公開的主題有關(guān)的主題,將其全部內(nèi)容通過引用的方式合并在此。
本領(lǐng)域的技術(shù)人員應(yīng)該理解,根據(jù)設(shè)計(jì)要求和其他因素可能出現(xiàn)各種修改、組合、 部分組合和變更,只要它們落在所附權(quán)利要求及其等價(jià)物的范圍內(nèi)即可。
1權(quán)利要求
一種圖像抓取裝置,包括圖像抓取部件,其抓取被攝體的圖像;檢測器,其從由所述圖像抓取部件抓取的圖像檢測所述被攝體的部分,所述部分具有特定特征;評估器,其確定由所述檢測器檢測到的所述部分的特定特征的數(shù)字表示的評估值;緩沖器部件,其臨時(shí)地存儲與預(yù)定時(shí)間量對應(yīng)的延遲圖像;以及記錄操作控制器,其在確定所述評估值滿足預(yù)定條件時(shí),控制所述圖像抓取裝置以記錄包括所述緩沖器部件中的預(yù)定延遲圖像的圖像數(shù)據(jù)。
2. 根據(jù)權(quán)利要求1所述的圖像抓取裝置,其中所述記錄操作控制器基于所述評估值確定所述緩沖器部件中圖像的記錄開始點(diǎn)。
3. 根據(jù)權(quán)利要求1或2所述的圖像抓取裝置,其中所述預(yù)定條件是所述評估值大于或等于第一閾值。
4. 根據(jù)權(quán)利要求1或2所述的圖像抓取裝置,其中所述預(yù)定條件是所述評估值的增大速率大于或等于預(yù)定閾值。
5. 根據(jù)權(quán)利要求2到4的其中之一所述的圖像抓取裝置,其中所述記錄開始點(diǎn)是當(dāng)所述緩沖器部件中的所述評估值大于或等于第二閾值時(shí)的時(shí)間點(diǎn)。
6. 根據(jù)權(quán)利要求1到5的其中之一所述的圖像抓取裝置,其中所述被攝體是人,并且所述評估值是通過評估面部表情而獲得的值。
7. 根據(jù)權(quán)利要求3到6的其中之一所述的圖像抓取裝置,其中在開始記錄之后,當(dāng)在所述評估值落在所述第一閾值以下之后經(jīng)過了一定時(shí)間量時(shí),所述記錄操作控制器控制所述圖像抓取裝置以停止記錄。
8. 根據(jù)權(quán)利要求2到7的其中之一所述的圖像抓取裝置,其中所述記錄操作控制器控制所述圖像抓取裝置以連同將要記錄的圖像一起記錄與所述圖像對應(yīng)的評估值。
9. 一種用于圖像抓取裝置的圖像抓取方法,所述方法包括如下步驟抓取被攝體的圖像;檢測所述被攝體的部分,所述部分具有特定特征;確定檢測到的部分的特定特征的數(shù)字表示的評估值;確定所述評估值是否滿足預(yù)定條件;確定記錄開始時(shí)間;以及從記錄開始時(shí)間記錄圖像數(shù)據(jù)。
10. —種使得圖像抓取裝置執(zhí)行以下步驟的圖像抓取程序抓取被攝體的圖像;檢測所述被攝體的一部分,所述部分具有特定特征;確定檢測到的部分的特定特征的數(shù)字表示的評估值;確定所述評估值是否滿足預(yù)定條件;確定記錄開始時(shí)間;以及從記錄開始時(shí)間記錄圖像數(shù)據(jù)。
全文摘要
提供了圖像抓取裝置、圖像抓取方法和圖像抓取程序。所述圖像抓取裝置包括圖像抓取部件,其抓取被攝體的圖像;檢測器,其從由圖像抓取部件抓取的圖像檢測所述被攝體的一部分,所述部分具有特定特征;評估器,其確定由檢測器檢測到的部分的特定特征的數(shù)字表示的評估值;緩沖器部件,其臨時(shí)地存儲與預(yù)定時(shí)間量對應(yīng)的延遲圖像;以及記錄操作控制器,其在確定所述評估值滿足預(yù)定條件時(shí),控制圖像抓取裝置以記錄包括所述緩沖器部件中的預(yù)定延遲圖像的圖像數(shù)據(jù)。
文檔編號H04N5/225GK101795356SQ20101000367
公開日2010年8月4日 申請日期2010年1月14日 優(yōu)先權(quán)日2009年1月14日
發(fā)明者福田憲一郎 申請人:索尼公司