專利名稱：圖像處理設(shè)備、圖像處理方法和程序的制作方法
技術(shù)領(lǐng)域：
本申請(qǐng)涉及圖像處理設(shè)備、圖像處理方法和程序。
背景技術(shù)：
近年來，能夠拍攝運(yùn)動(dòng)圖像的攝像功能被例如裝設(shè)在諸如數(shù)字靜態(tài)攝像機(jī)的各種設(shè)備和諸如便攜式電話的通信設(shè)備上，增加了用戶拍攝運(yùn)動(dòng)圖像的機(jī)會(huì)。在這種情況下，當(dāng)例如通過卷簾快門(rolling shutter)系統(tǒng)實(shí)現(xiàn)攝像功能時(shí)，即，當(dāng)由順次拍攝每根線的圖像的攝像元件拍攝圖像時(shí)，存在在圖像中發(fā)生畸變(被稱為焦平面畸變)的可能性。在這種情況下，已經(jīng)發(fā)展出了用于減小在運(yùn)動(dòng)圖像中發(fā)生的畸變的可能性的技術(shù)。作為用于減小在運(yùn)動(dòng)圖像中發(fā)生的畸變的可能性的技術(shù)，可以使用在日本專利申請(qǐng)公 報(bào)No. 2006-148496中描述的技術(shù)。

發(fā)明內(nèi)容
根據(jù)在日本專利申請(qǐng)公報(bào)No. 2006-148496中描述用于減小在運(yùn)動(dòng)圖像中發(fā)生的畸變的可能性的在先技術(shù)(下文中，也常作為“過去的技術(shù)”)，例如，當(dāng)發(fā)生焦平面畸變時(shí)，構(gòu)成運(yùn)動(dòng)圖像的、在時(shí)間上連續(xù)的兩個(gè)巾貞圖像(frame image)的信息被混合。因此,在使用過去的技術(shù)時(shí)，存在可以減小在運(yùn)動(dòng)圖像中發(fā)生的焦平面畸變的可能性。根據(jù)過去的技術(shù)，例如，兩個(gè)幀圖像的信息通過簡單的線性插值而混合，插值比率對(duì)于每根線而改變。然而，根據(jù)過去的技術(shù)，線性插值是通過使用下述圖像信號(hào)來執(zhí)行的該信號(hào)對(duì)應(yīng)于與兩個(gè)幀圖像相同的位置處的像素。因此，難以基于運(yùn)動(dòng)圖像中包含的對(duì)象(subject)的運(yùn)動(dòng)來高精確度地執(zhí)行插值。因此，即使使用這種過去的技術(shù)，可能也不能充分地減小焦平面畸變。在本申請(qǐng)中，提出了新穎的并經(jīng)改善的圖像處理設(shè)備、圖像處理方法和程序，能夠校正焦平面畸變。根據(jù)本申請(qǐng)，提供了一種圖像處理設(shè)備，包括運(yùn)動(dòng)檢測單元，該單元基于圖像信號(hào)(表示包括幀圖像的運(yùn)動(dòng)圖像)以及延遲時(shí)間信息(表示攝像中的延遲時(shí)間)，通過多個(gè)幀圖像來檢測運(yùn)動(dòng)圖像中包含的對(duì)象的運(yùn)動(dòng)；校正單元，其基于圖像信號(hào)和運(yùn)動(dòng)信息(表示所檢測到的對(duì)象的運(yùn)動(dòng))來校正圖像信號(hào)。以上構(gòu)造實(shí)現(xiàn)了校正焦平面畸變的效果。該圖像處理設(shè)備還可以包括延遲時(shí)間計(jì)算單元，該單元基于攝像設(shè)備的攝像參數(shù)來計(jì)算對(duì)于每個(gè)像素的延遲時(shí)間，該攝像設(shè)備具有對(duì)于每根線順次拍攝圖像的攝像元件。該運(yùn)動(dòng)檢測單元可以基于延遲時(shí)間信息來指定拍攝運(yùn)動(dòng)圖像的時(shí)間相位(timephase)，并且基于所指定的時(shí)間相位來檢測對(duì)于每個(gè)像素的對(duì)象的運(yùn)動(dòng)。該運(yùn)動(dòng)檢測單元可以基于延遲時(shí)間信息來調(diào)整所指定的時(shí)間相位。該運(yùn)動(dòng)檢測單元可以包括參照比率(reference ratio)計(jì)算單元和第一檢測單元，該參照比率計(jì)算單元基于延遲時(shí)間信息來計(jì)算參照比率(表示用于對(duì)多個(gè)幀圖像中每一者進(jìn)行參照的比率)，并且第一檢測單元基于所計(jì)算的參照比率來檢測對(duì)象的運(yùn)動(dòng)。該運(yùn)動(dòng)檢測單元可以包括第二檢測單元和第三檢測單元，該第二檢測單元基于圖像信號(hào)來檢測對(duì)象的運(yùn)動(dòng)，該第三檢測單元基于運(yùn)動(dòng)信息(表示由第一檢測單元檢測到的運(yùn)動(dòng))、圖像信號(hào)和延遲時(shí)間信息來重新檢測對(duì)象的運(yùn)動(dòng)。該校正單元可以基于一個(gè)或多個(gè)運(yùn)動(dòng)信息來校正圖像信號(hào)。該運(yùn)動(dòng)信息可以包括參照比率，該參照比率表示用于對(duì)多個(gè)幀圖像中每一者進(jìn)行參照的比率。該圖像處理設(shè)備還可以包括取得攝像參數(shù)的參數(shù)取得單元。該參數(shù)取得單元可以從圖像信號(hào)或者從存儲(chǔ)了識(shí)別信息的記錄介質(zhì)取得用于識(shí)別攝像設(shè)備的識(shí)別信息，并且從與識(shí)別信息和攝像參數(shù)相關(guān)的數(shù)據(jù)庫取得與所取得的識(shí)別 信息相對(duì)應(yīng)的攝像參數(shù)?；谟蛇\(yùn)動(dòng)檢測單元檢測到的運(yùn)動(dòng)信息，該參數(shù)取得單元可以通過估計(jì)攝像參數(shù)來取得攝像參數(shù)。該參數(shù)取得單元可以從圖像信號(hào)取得攝像參數(shù)。該圖像處理設(shè)備還可以包括拍攝運(yùn)動(dòng)圖像的攝像單元。根據(jù)本申請(qǐng)的實(shí)施例，還提供了一種圖像處理方法，包括基于圖像信號(hào)(表示包括幀圖像的運(yùn)動(dòng)圖像)以及延遲時(shí)間信息(表示攝像中的延遲時(shí)間)，通過多個(gè)幀圖像來檢測運(yùn)動(dòng)圖像中包含的對(duì)象的運(yùn)動(dòng)；基于圖像信號(hào)和運(yùn)動(dòng)信息(表示所檢測到的對(duì)象的運(yùn)動(dòng))來校正圖像信號(hào)。通過使用這種方法，可以校正焦平面畸變。根據(jù)本申請(qǐng)的實(shí)施例，還提供了一種使得計(jì)算機(jī)執(zhí)行的程序，其使得計(jì)算機(jī)執(zhí)行下述操作基于圖像信號(hào)(表示包括幀圖像的運(yùn)動(dòng)圖像)以及延遲時(shí)間信息(表示攝像中的延遲時(shí)間)，通過多個(gè)幀圖像來檢測運(yùn)動(dòng)圖像中包含的對(duì)象的運(yùn)動(dòng)；基于圖像信號(hào)和運(yùn)動(dòng)信息(表示所檢測到的對(duì)象的運(yùn)動(dòng))來校正圖像信號(hào)。通過使用這種程序，可以校正焦平面畸變。根據(jù)本申請(qǐng)，可以校正焦平面畸變。


圖I是用于解釋焦平面畸變的說明圖；圖2是用于解釋焦平面畸變的說明圖；圖3的A到圖3的D是用于解釋焦平面畸變的說明圖；圖4是用于解釋焦平面畸變的說明圖；圖5是示出了根據(jù)本實(shí)施例的圖像處理方法的概述的說明圖；圖6是示出了根據(jù)本實(shí)施例的圖像處理設(shè)備的構(gòu)造示例的框圖；圖7是用于解釋根據(jù)本實(shí)施例的，估計(jì)基于運(yùn)動(dòng)信息攝像參數(shù)的方法的示例的說明圖；圖8是用于解釋在根據(jù)本實(shí)施例的圖像處理設(shè)備中計(jì)算延遲時(shí)間的方法的示例的說明圖；圖9是示出了在根據(jù)本實(shí)施例的圖像處理設(shè)備中包括的運(yùn)動(dòng)檢測單元的第一構(gòu)造示例中的處理的概述的說明圖；圖10是示出了包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的運(yùn)動(dòng)檢測單元的第一構(gòu)造示例的框圖；圖11是用于解釋由按照包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的第一構(gòu)造示例的運(yùn)動(dòng)檢測單元進(jìn)行的參照比率的計(jì)算處理的示例的說明圖；圖12是用于解釋由按照包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的第一構(gòu)造示例的運(yùn)動(dòng)檢測單元進(jìn)行的參照比率的計(jì)算處理的其他示例的說明圖；圖13是用于解釋根據(jù)本實(shí)施例的攝像延遲時(shí)間的其他示例的說明圖；圖14是用于解釋根據(jù)本實(shí)施例的攝像延遲時(shí)間的其他示例的說明圖；圖15是用于解釋由按照包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的第一構(gòu)造示例 的運(yùn)動(dòng)檢測單元進(jìn)行的參照比率的計(jì)算處理的其他示例的說明圖；圖16是用于解釋按照包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的第一構(gòu)造示例的運(yùn)動(dòng)檢測單元的運(yùn)動(dòng)檢測處理的示例的說明圖；圖17是示出了包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的運(yùn)動(dòng)檢測單元的第二構(gòu)造示例中的處理的概述的說明圖；圖18是示出了包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的運(yùn)動(dòng)檢測單元的第二構(gòu)造示例的框圖；圖19是用于解釋由按照包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的第二構(gòu)造示例的運(yùn)動(dòng)檢測單元進(jìn)行的參照比率的計(jì)算處理的示例的說明圖；圖20的A和圖20的B是示出了由按照包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的第二構(gòu)造示例的運(yùn)動(dòng)檢測單元進(jìn)行的參照比率的計(jì)算處理的處理中發(fā)生困難的可能性的示例的說明圖；圖21是用于解釋由按照包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的第二構(gòu)造示例的運(yùn)動(dòng)檢測單元進(jìn)行的參照比率的計(jì)算處理的其他示例的說明圖；圖22是示出了由包括在根據(jù)本實(shí)施例的圖像處理設(shè)備中的校正單元進(jìn)行的處理的示例的說明圖；以及圖23的A和圖23的B是示出了由根據(jù)本實(shí)施例的圖像處理設(shè)備進(jìn)行的處理的結(jié)果示例的說明圖。
具體實(shí)施例方式下文中，將會(huì)具體參照附圖詳細(xì)描述本發(fā)明的優(yōu)選實(shí)施例。注意，在該說明書和附圖中，具有基本相同功能和結(jié)構(gòu)的結(jié)構(gòu)元件由相同的附圖標(biāo)記表示，并且省略對(duì)于這些結(jié)構(gòu)元件的重復(fù)解釋。在下文中按照以下順序進(jìn)行解釋。I.根據(jù)本實(shí)施例的圖像處理方法2.根據(jù)本實(shí)施例的圖像處理設(shè)備3.根據(jù)本實(shí)施例的程序(根據(jù)本實(shí)施例的圖像處理方法)在解釋根據(jù)本實(shí)施例的圖像處理設(shè)備(下文中也稱為“圖像處理設(shè)備100”)之前，解釋根據(jù)本實(shí)施例的圖像處理方法的概述。下文中的解釋假設(shè)按照根據(jù)本實(shí)施例的圖像處理方法的處理由圖像處理設(shè)備100執(zhí)行。下文中的解釋也假設(shè)圖像 處理設(shè)備100處理表示包括幀圖像的運(yùn)動(dòng)圖像的圖像信號(hào)。在以下的解釋中，由通過圖像處理設(shè)備100處理的圖像信號(hào)表示的每個(gè)幀圖像也被表述為“輸入圖像”，并且通過對(duì)圖像信號(hào)進(jìn)行校正而獲得的圖像也被表述為“經(jīng)校正的圖像”。在這種情況下，作為根據(jù)本實(shí)施例的圖像信號(hào)，存在這樣的圖像信號(hào)(模擬信號(hào)/數(shù)字信號(hào))該信號(hào)表示由使用攝像設(shè)備拍攝圖像的人獲得的運(yùn)動(dòng)圖像。然而，根據(jù)本實(shí)施例的圖像信號(hào)不局限于該圖像。例如，根據(jù)本實(shí)施例的圖像信號(hào)可以是這樣的信號(hào)該信號(hào)表示由被安裝在車輛等中的攝像設(shè)備拍攝的運(yùn)動(dòng)圖像，或者由安裝在固定位置的攝像設(shè)備(諸如被稱為安保相機(jī))拍攝的運(yùn)動(dòng)圖像。此外，作為根據(jù)本實(shí)施例的圖像信號(hào)，存在這樣的圖像信號(hào)該信號(hào)例如是通過由圖像處理設(shè)備100由于接收(直接地、或經(jīng)由機(jī)頂盒等而間接地)從電視塔等發(fā)射的廣播電波并且將所接收到的廣播電波進(jìn)行解碼而獲得的圖像。圖像處理設(shè)備100也可以處理從外部設(shè)備經(jīng)由網(wǎng)絡(luò)(或直接地)發(fā)送的圖像信號(hào)。圖像處理設(shè)備100也可以處理通過將存儲(chǔ)在記錄單元(下文中進(jìn)行描述)或(可以從圖像處理設(shè)備100卸下的)外部記錄介質(zhì)中的圖像數(shù)據(jù)解碼而獲得的圖像信號(hào)。此外，當(dāng)圖像處理設(shè)備100包括可以拍攝的運(yùn)動(dòng)圖像的攝像單元(對(duì)應(yīng)于攝像設(shè)備的裝置，下文中進(jìn)行描述)時(shí)，即，當(dāng)圖像處理設(shè)備100具有攝像設(shè)備的功能時(shí)，圖像處理設(shè)備100可以被布置為處理與由攝像單元拍攝的運(yùn)動(dòng)圖像相對(duì)應(yīng)的圖像信號(hào)。[關(guān)于焦平面畸變]首先，解釋由根據(jù)本實(shí)施例的圖像處理設(shè)備100校正的焦平面畸變。圖I到圖4是用于解釋焦平面畸變的說明圖。當(dāng)CMOS(互補(bǔ)金屬氧化物半導(dǎo)體)被用作多個(gè)攝像元件(構(gòu)成攝像設(shè)備的圖像傳感器)時(shí)，在許多情況下采用卷簾快門系統(tǒng)(線曝光順次讀取系統(tǒng))。在這種情況下，卷簾快門系統(tǒng)是以光柵(raster)順序從攝像元件的左上起曝光并且傳遞數(shù)據(jù)的系統(tǒng)。在使用卷簾快門系統(tǒng)時(shí)，攝像設(shè)備順次針對(duì)每根線(例如，沿著水平方向的線)拍攝圖像。因此，當(dāng)如由卷簾快門系統(tǒng)所執(zhí)行的那樣對(duì)于每根線順次拍攝圖像時(shí)，例如，如圖I所示獲得了在相同幀內(nèi)對(duì)于每根線時(shí)間不同的幀圖像。因?yàn)槿鐖DI所示拍攝了在相同幀內(nèi)對(duì)于每根線時(shí)間不同的幀圖像，所以當(dāng)使用CMOS的攝像元件來拍攝例如從左向右運(yùn)動(dòng)的矩形物體(運(yùn)動(dòng)物體，作為對(duì)象的示例)的運(yùn)動(dòng)圖像時(shí)，物體在幀圖像中被表現(xiàn)為平行四邊形的物體，例如如圖2所示。當(dāng)使用CMOS的攝像元件來拍攝例如從上向下運(yùn)動(dòng)的矩形物體(運(yùn)動(dòng)物體)的運(yùn)動(dòng)圖像時(shí)，物體在幀圖像中被表現(xiàn)為比實(shí)際物體具有更長的橫向長度的物體。在例如上述運(yùn)動(dòng)圖像中拍攝的物體(下文中稱為“對(duì)象”)中發(fā)生的畸變是根據(jù)本實(shí)施例的“焦平面畸變”。不僅在被攝像的物體如上所述地運(yùn)動(dòng)時(shí)，而且在攝像設(shè)備運(yùn)動(dòng)時(shí)，也存在發(fā)生焦平面畸變的可能性。圖3的A到圖3的D示出了當(dāng)攝像設(shè)備(例如，當(dāng)攝像設(shè)備搖攝(pan)或傾斜時(shí))運(yùn)動(dòng)時(shí)可能發(fā)生的焦平面畸變的示例。即，如圖2和圖3的A到圖3的D所示，存在當(dāng)對(duì)象相對(duì)于攝像元件運(yùn)動(dòng)時(shí)發(fā)生焦平面畸變的可能性。
另一方面，當(dāng)CCD (電荷耦合器件)被用作為構(gòu)成攝像設(shè)備的圖像傳感器的多個(gè)攝像元件時(shí)，采用全局快門系統(tǒng)(同時(shí)曝光批讀取系統(tǒng))。全局快門系統(tǒng)是同時(shí)地傳輸相同幀內(nèi)的數(shù)據(jù)的系統(tǒng)，例如如圖4所示。因此，當(dāng)使用全局快門系統(tǒng)時(shí)，不發(fā)生焦平面畸變。如上所述，在由能夠?qū)崿F(xiàn)全局快門系統(tǒng)的攝像元件(例如CCD)實(shí)現(xiàn)由攝像設(shè)備所具有的攝像功能時(shí)，可以由自身防止焦平面畸變的發(fā)生。然而，CMOS的攝像元件相比于例如CCD的攝像元件具有以下優(yōu)點(diǎn)節(jié)省能量、能夠以高速讀取并且成本較低。因此，CMOS被用作為普及的許多攝像設(shè)備中的攝像元件。因此，為了實(shí)現(xiàn)運(yùn)動(dòng)圖像的高質(zhì)量的再現(xiàn)，期望通過校正畸變來減小可能發(fā)生的焦平面畸變，而不是自身防止焦平面畸變的發(fā)生。作為通過校正減小焦平面畸變的方法，存在通過使用由 攝像設(shè)備所包括的傳感器來檢測運(yùn)動(dòng)信息以校正焦平面畸變的方法。然而，在使用上述方法時(shí)，只能校正由于相機(jī)機(jī)件(work)所引起的全局畸變,該畸變表示拍攝運(yùn)動(dòng)圖像的攝像設(shè)備的運(yùn)動(dòng)。此外，如上所述，即使在使用這種過去的技術(shù)時(shí)，也存在不能充分地減小焦平面畸變的風(fēng)險(xiǎn)。[根據(jù)本實(shí)施例的圖像處理方法的概述]根據(jù)本實(shí)施例的圖像處理設(shè)備100通過考慮攝像延遲時(shí)間來從多個(gè)幀圖像檢測容納在運(yùn)動(dòng)圖像中的對(duì)象的運(yùn)動(dòng)。圖像處理設(shè)備100通過基于所檢測的運(yùn)動(dòng)校正圖像信號(hào)來補(bǔ)償所檢測到的運(yùn)動(dòng)。因?yàn)閳D像處理設(shè)備100考慮到了攝像延遲時(shí)間，所以圖像處理設(shè)備100可以校正每個(gè)像素對(duì)于局部運(yùn)動(dòng)的畸變。因?yàn)閳D像處理設(shè)備100通過如上所述地考慮攝像延遲時(shí)間來校正圖像信號(hào)，所以圖像處理設(shè)備100可以處理全局畸變和局部畸變。S卩，因?yàn)閳D像處理設(shè)備100通過如上所述地考慮攝像延遲時(shí)間來校正圖像信號(hào)，所以即使運(yùn)動(dòng)圖像中的運(yùn)動(dòng)是攝像機(jī)件的運(yùn)動(dòng)或者物體(對(duì)象)的運(yùn)動(dòng)，圖像處理設(shè)備100也可以校正運(yùn)動(dòng)。因此，包括在由根據(jù)本實(shí)施例的圖像處理設(shè)備100檢測的運(yùn)動(dòng)圖像中的對(duì)象的運(yùn)動(dòng)不僅包括物體(對(duì)象)自身的運(yùn)動(dòng)，還包括攝像機(jī)件的運(yùn)動(dòng)。因此，圖像處理設(shè)備100可以僅校正在運(yùn)動(dòng)圖像中可能發(fā)生的焦平面畸變。圖像處理設(shè)備100通過基于攝像設(shè)備的攝像參數(shù)來計(jì)算對(duì)于每個(gè)像素拍攝圖像的延遲時(shí)間，并通過獲得延遲時(shí)間信息(延遲時(shí)間數(shù)據(jù))來規(guī)定延遲時(shí)間，該信息例如表示攝像中的延遲時(shí)間。根據(jù)本實(shí)施例的攝像參數(shù)是表示具有順次拍攝每根線(例如，水平方向上的線，并且在下文中類似地適用)的圖像的攝像元件的攝像設(shè)備的攝像特性的值。攝像參數(shù)例如包括表示關(guān)于每個(gè)像素的曝光和讀出的延遲時(shí)間的值(下文中也稱為“延遲時(shí)間Rpix”)，以及對(duì)于每根線的延遲時(shí)間的值(下文中也稱為“延遲時(shí)間Rlin/’)。根據(jù)本實(shí)施的攝像延遲時(shí)間例如是用于每個(gè)像素的曝光和讀出的延遲時(shí)間。通過例如使用攝像參數(shù)來計(jì)算在幀像素中的任意位置(例如，由像素的坐標(biāo)表示的位置)處的延遲時(shí)間。圖像處理設(shè)備100可以例如通過所獲得的延遲時(shí)間信息來規(guī)定在幀圖像中的任意位置處的延遲時(shí)間。之后描述根據(jù)本實(shí)施例的計(jì)算延遲時(shí)間的方法的示例。圖5是示出了根據(jù)本實(shí)施例的圖像處理方法的概述的示例的說明圖。例如，如圖5所示，圖像處理設(shè)備100通過基于多個(gè)幀圖像(輸入圖像)產(chǎn)生經(jīng)校正的圖像來校正可能發(fā)生的焦平面畸變。下文中解釋根據(jù)本實(shí)施例的圖像處理設(shè)備100的構(gòu)造的示例，并且也在下文中解釋按照根據(jù)本實(shí)施例的圖像處理方法的處理的具體示例。在下文中，通過主要采用圖像處理設(shè)備100基于攝像參數(shù)來計(jì)算攝像延遲時(shí)間的示例，描述了根據(jù)本實(shí)施例的圖像處理設(shè)備100的構(gòu)造的示例以及按照根據(jù)本實(shí)施例的圖像處理方法的處理的具體示例。在以下的解釋中，輸入到圖像處理設(shè)備100的圖像信號(hào)，即，要被處理的圖像信號(hào)，也被描述為“輸入圖像信號(hào)”。(根據(jù)本實(shí)施例的圖像處理設(shè)備)圖6是示出了根據(jù)本實(shí)施例的圖像處理設(shè)備100的構(gòu)造的示例的框圖。圖像處理設(shè)備100例如包括參數(shù)取得單元102、延遲時(shí)間計(jì)算單元104、運(yùn)動(dòng)檢測單元106和校正單元 108。圖像處理設(shè)備100也可以被布置為包括控制單元(未示出)、R0M(只讀存儲(chǔ)器，未示出)、RAM(隨機(jī)訪問存儲(chǔ)器，未示出)、存儲(chǔ)單元(未示出)、用戶可以操作的操作單元(未示出)、在顯示屏上顯示各種屏幕的顯示單元(未示出)以及與外部設(shè)備通信的通信單元(未示出)。圖像處理設(shè)備100使得上文中描述的構(gòu)成元件通過例如總線作為數(shù)據(jù)傳輸 路徑而彼此連接。由MPU(微處理單元)和各種處理電路構(gòu)成的控制單元(未示出)控制圖像處理設(shè)備100的整體。控制單元(未示出)可以被設(shè)置為具有參數(shù)取得單元102、延遲時(shí)間計(jì)算單元104、運(yùn)動(dòng)檢測單元106和校正單元108的作用?？刂茊卧?未示出)也可以設(shè)置為對(duì)于圖像信號(hào)執(zhí)行由根據(jù)本實(shí)施例中的圖像處理方法的處理所執(zhí)行的處理的作用，諸如對(duì)由校正單元108處理的圖像信號(hào)進(jìn)行編碼(輸出圖像信號(hào))、在記錄單元(未示出)中記錄經(jīng)編碼的圖像信號(hào)和/或使得由圖像信號(hào)表示的圖像顯示在顯示單元(未示出)上或外部顯示設(shè)備的顯示屏上。ROM(未示出)存儲(chǔ)了控制數(shù)據(jù)，例如由控制單元(未示出)使用的程序和算法參數(shù)。RAM(未示出)臨時(shí)地存儲(chǔ)由控制單元(未示出)執(zhí)行的程序等。存儲(chǔ)單元(未示出)是包括在圖像處理設(shè)備100中的存儲(chǔ)單元并且存儲(chǔ)例如圖像數(shù)據(jù)和應(yīng)用的各種數(shù)據(jù)。存儲(chǔ)單元(未示出)包括諸如硬盤的磁性記錄介質(zhì)以及諸如EEPROM(電可擦除可編程只讀存儲(chǔ)器)和閃存存儲(chǔ)器的非易失性存儲(chǔ)器。存儲(chǔ)單元(未示出)可以被布置為可以從圖像處理設(shè)備100卸下。操作單元(未示出)包括諸如按鈕、方向鍵和搖桿的旋轉(zhuǎn)式選擇器或者這些單元的組合。圖像處理設(shè)備100也可以被連接到作為圖像處理設(shè)備100的外部設(shè)備的操作輸入裝置(例如，鍵盤和鼠標(biāo))。顯示單元(未示出)例如包括液晶顯示器(IXD)、有機(jī)EL顯示器(有機(jī)電致發(fā)光顯示器，或者也被稱作為OLED顯示器(有機(jī)發(fā)光二極管顯示器))。顯示單元(未示出)也可以是進(jìn)行顯示并且用戶可以在其上進(jìn)行操作的裝置，例如觸摸屏。圖像處理設(shè)備100也可以連接到作為圖像處理設(shè)備100的外部設(shè)備的顯示裝置(例如，外部顯示器)，而不論是否存在顯示單元(未示出)。通信單元(未示出)是包括在圖像處理設(shè)備100中的通信單元并且通過有線或無線方式經(jīng)由網(wǎng)絡(luò)(或者直接地)與外部設(shè)備執(zhí)行通信。通信單元(未示出)例如包括通信天線及RF (射頻)電路(無線通信)、ΙΕΕΕ802· 15. I端口及發(fā)射/接收電路(無線通信)、IEEE 802. Ilb端口及發(fā)射/接收電路(無線通信)或者LAN(局域網(wǎng))端子及發(fā)射/接收電路(有線通信)。根據(jù)本實(shí)施例的網(wǎng)絡(luò)包括諸如LAN和WAN (廣域網(wǎng))的有線網(wǎng)絡(luò)、諸如無線WAN(WffAN :無線廣域網(wǎng))的無線網(wǎng)絡(luò)或者使用諸如TCP/IP (傳輸控制協(xié)議/互聯(lián)網(wǎng)協(xié)議)通信協(xié)議的互聯(lián)網(wǎng)。下文中通過解釋根據(jù)圖6中示出的本實(shí)施例的圖像處理設(shè)備100的構(gòu)造示例，來解釋圖像處理設(shè)備100的處理的示例。 參數(shù)取得單元102取得攝像參數(shù)。[取得攝像參數(shù)的處理的示例]⑴第一示例參數(shù)取得單元102例如從存儲(chǔ)輸入圖像信號(hào)或識(shí)別信息的記錄介質(zhì)取得用于識(shí)別攝像設(shè)備的識(shí)別信息。參數(shù)取得單元102例如從與識(shí)別信息和攝像參數(shù)相關(guān)的數(shù)據(jù)庫取得與所取得的識(shí)別信息相對(duì)應(yīng)的攝像參數(shù)。作為從輸入圖像信號(hào)取得識(shí)別信息的方法，存在參數(shù)取得單元102例如對(duì)容納在輸入圖像信號(hào)中(或嵌入在輸入圖像信號(hào)中)的元數(shù)據(jù)或水印進(jìn)行解碼(或者使得解碼器進(jìn)行解碼)的方法。根據(jù)本實(shí)施例的識(shí)別信息包括識(shí)別攝像設(shè)備的類型的型號(hào)數(shù)字。任意的信息可以被用作為識(shí)別信息，只要該信息可以識(shí)別攝像設(shè)備。雖然參數(shù)取得單元102從存儲(chǔ)在存儲(chǔ)單元(未示出)中的數(shù)據(jù)庫取得對(duì)應(yīng)與識(shí)別信息的攝像參數(shù)，但是參數(shù)取得單元102的處理不局限于該處理。例如，參數(shù)取得單元102可以被設(shè)置為從諸如服務(wù)器的外部設(shè)備獲得與識(shí)別信息相對(duì)應(yīng)的攝像參數(shù)。在這種情況下，在從外部設(shè)備取得攝像參數(shù)時(shí)，參數(shù)取得單元102經(jīng)由通信單元(未示出)與外部設(shè)備通信，將識(shí)別信息和要求發(fā)送攝像參數(shù)的發(fā)送請(qǐng)求發(fā)送給外部設(shè)備，并且從而獲得例如攝像參數(shù)。在圖像處理設(shè)備100中，參數(shù)取得單元102可以具有例如通信功能。在以上情況中，參數(shù)取得單元102通過與外部設(shè)備通信來取得攝像參數(shù)，而不論圖像處理設(shè)備100是否包括通信單元(未示出)。存儲(chǔ)識(shí)別信息的記錄介質(zhì)例如包括存儲(chǔ)單元(未示出)或R0M(未示出)。然而，存儲(chǔ)識(shí)別信息的記錄介質(zhì)不局限于這些單元。例如，存儲(chǔ)識(shí)別信息的記錄介質(zhì)可以是能夠從圖像處理設(shè)備100卸下的外部記錄介質(zhì)。外部記錄介質(zhì)包括諸如閃存的非易失性存儲(chǔ)器。記錄在記錄介質(zhì)中的識(shí)別信息可以被預(yù)先記錄，或者可以根據(jù)例如用戶操作來記錄。(ii)第二示例參數(shù)取得單元102可以被設(shè)置為例如從輸入圖像信號(hào)取得攝像參數(shù)。作為從輸入圖像信號(hào)取得攝像參數(shù)的方法，存在參數(shù)取得單元102例如對(duì)容納在輸入圖像信號(hào)中(或嵌入在輸入圖像信號(hào)中)的元數(shù)據(jù)或水印進(jìn)行解碼(或者使得解碼器進(jìn)行解碼)的方法。(iii)第三示例由根據(jù)本實(shí)施例的參數(shù)取得單元102取得攝像參數(shù)的處理不局限于在第一和第二示例中解釋的這些。例如，參數(shù)取得單元102可以被設(shè)置為基于表示所檢測到的對(duì)象運(yùn)動(dòng)的運(yùn)動(dòng)信息來估計(jì)攝像參數(shù)并且獲得所估計(jì)的攝像參數(shù)來作為攝像參數(shù)。圖7是用于解釋根據(jù)本實(shí)施例的基于運(yùn)動(dòng)信息來估計(jì)攝像參數(shù)的方法的示例的說明圖。當(dāng)如圖7中的A所示發(fā)生焦平面畸變時(shí)，例如，在幀圖像中首先拍攝的圖像的線與最后拍攝的圖像的線之間迅速廣生偏差時(shí)間Δ t。圖像處理設(shè)備100例如基于偏差時(shí)間At和線的數(shù)目來估計(jì)延遲時(shí)間Rline。更具體地，圖像處理設(shè)備100通過例如計(jì)算“ At/線的數(shù)目”來估計(jì)延遲時(shí)間Rline。根據(jù)本實(shí)施例的估計(jì)攝像參數(shù)的方法不局限于上述方法。例如，圖像處理設(shè)備100可以被設(shè)置為從表示畸變的任意信息估計(jì)攝像參數(shù)。再次參照?qǐng)D6解釋根據(jù)本實(shí)施例的圖像處理設(shè)備100的構(gòu)造的示例。參數(shù)取得單元102例如通過執(zhí)行在上文中的第一示例到第三示例中解釋的處理來取得攝像參數(shù)。更不必說由根據(jù)本實(shí)施例的參數(shù)取得單元102取得的攝像參數(shù)的處理不局限于在第一示例到第三示例中解釋的那些。雖然參數(shù)取得單元102可以通過具有任意構(gòu)造以執(zhí)行如上所述的取得攝像參數(shù)的處理的專用處理電路來實(shí)現(xiàn)，但是參數(shù)取得單元102的構(gòu)造不局限于上述構(gòu)造。在圖像處理設(shè)備100中，控制單元(未示出)也可以被布置為具有參數(shù)取得單元102的作用，并且參數(shù)取得單元102可以是能夠執(zhí)行例如其他處理的通用目的處理電路。雖然圖6示出了圖像處理設(shè)備100包括參數(shù)取得單元102的構(gòu)造，但是根據(jù)本實(shí)施例的圖像處理設(shè)備100的構(gòu)造不局限于上述構(gòu)造。例如，圖像處理設(shè)備100可以被設(shè)置 為通過使用由與圖像處理設(shè)備100分離的參數(shù)取得設(shè)備所取得的攝像參數(shù)來執(zhí)行處理，而不包括參數(shù)取得單元102。雖然圖6示出了圖像處理設(shè)備100包括取得攝像參數(shù)的參數(shù)取得單元102的示例，但是根據(jù)本實(shí)施例的圖像處理設(shè)備100的構(gòu)造不局限于上述構(gòu)造。例如，圖像處理設(shè)備100可以被設(shè)置為包括獲取延遲時(shí)間信息的延遲時(shí)間信息獲取單元(未示出)，以代替參數(shù)取得單元102。在這種情況下,延遲時(shí)間信息取得單元(未示出)通過執(zhí)行與取得攝像參數(shù)的處理的第一示例和第二示例相似的處理來取得延遲時(shí)間信息。然而，根據(jù)本實(shí)施例的用于取得延遲時(shí)間信息的處理不局限于上述處理。更不必說根據(jù)本實(shí)施例的圖像處理設(shè)備100可以被布置為除了圖6中示出的構(gòu)造之外還包括延遲時(shí)間信息去的單元(未示出)?；谟蓞?shù)取得單元102取得的攝像參數(shù)，延遲時(shí)間計(jì)算單元104計(jì)算對(duì)于每個(gè)像素的攝像延遲時(shí)間。圖8是用于解釋在根據(jù)本實(shí)施例的圖像處理設(shè)備100中計(jì)算延遲時(shí)間的方法的示例的說明圖。當(dāng)攝像設(shè)備以光柵掃描順序執(zhí)行掃描和讀出時(shí)，在圖8中示出的左上側(cè)處的像素中的延遲可以被設(shè)置為“O”。在以上情況下，當(dāng)像素坐標(biāo)為例如(x，y)時(shí)，通過下文中示出的公式I來計(jì)算任意像素的延遲時(shí)間。在這種情況下，公式I中示出的“Rpix”是相同線中的相鄰像素之間的延遲時(shí)間，并且公式I中示出的“Rline”是相鄰線之間的延遲時(shí)間。r(x, y) = RpixX x+RlineX y 公式 I延遲時(shí)間計(jì)算單元104例如通過公示I來計(jì)算每個(gè)像素的延遲時(shí)間，并且將表示所計(jì)算的延遲時(shí)間的延遲時(shí)間信息發(fā)送到運(yùn)動(dòng)檢測單元106。由延遲時(shí)間計(jì)算單元104計(jì)算延遲時(shí)間的方法不局限于以上所述的方法。例如，當(dāng)參數(shù)取得單元102取得表示攝像元件開始曝光和讀出的位置的攝像參數(shù)(例如表示從攝像元件的左上側(cè)和從攝像元件的左下側(cè)起執(zhí)行曝光和讀出的攝像參數(shù))時(shí)，延遲時(shí)間計(jì)算單元104可以被設(shè)置為通過將對(duì)應(yīng)于該位置的多個(gè)像素中每一者的延遲設(shè)置為“O”來計(jì)算延遲時(shí)間r(x，y)。延遲時(shí)間計(jì)算單元104可以通過具有專用于執(zhí)行根據(jù)上述計(jì)算延遲時(shí)間的方法的處理的構(gòu)造的專用處理電路來實(shí)現(xiàn)。然而，延遲時(shí)間計(jì)算單元104的構(gòu)造不局限于以上構(gòu)造。例如，在圖像處理設(shè)備100中，控制單元(未示出)可以被布置為具有延遲時(shí)間計(jì)算單元104的作用，或者可以是能夠執(zhí)行其他處理的一般用途處理電路。雖然圖6示出了圖像處理設(shè)備100包括由圖像處理設(shè)備100對(duì)于每個(gè)像素的攝像延遲時(shí)間的延遲時(shí)間計(jì)算單元104的示例，但是根據(jù)本實(shí)施例的圖像處理設(shè)備100的構(gòu)造不局限于上述構(gòu)造。例如，當(dāng)圖像處理設(shè)備100包括延遲時(shí)間信息取得單元(未示出)時(shí)，圖像處理設(shè)備100可以被設(shè)置為不包括延遲時(shí)間計(jì)算單元104。在上述構(gòu)造的情況下，在圖像處理設(shè)備100中，延遲時(shí)間信息取得單元(未示出)將延遲時(shí)間信息例如發(fā)送到運(yùn)動(dòng)檢測單元106?；谳斎雸D像信號(hào)和延遲時(shí)間信息，運(yùn)動(dòng)檢測單元106通過多個(gè)幀圖像檢測包括在運(yùn)動(dòng)圖像中的對(duì)象的運(yùn)動(dòng)。運(yùn)動(dòng)檢測單元106所使用的延遲時(shí)間信息包括從延遲時(shí)間計(jì)算單元104發(fā)送的延遲時(shí)間信息和從延遲時(shí)間信息取得單元(未示出)發(fā)送的延遲時(shí)間信
肩、O
(I)第一構(gòu)造示例根據(jù)第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106基于延遲時(shí)間信息來指定拍攝運(yùn)動(dòng)圖像的時(shí)間相位，并且基于所指定的時(shí)間相位來對(duì)于每個(gè)像素檢測對(duì)象的運(yùn)動(dòng)。根據(jù)第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106的處理對(duì)應(yīng)于基于經(jīng)校正的圖像來檢測運(yùn)動(dòng)的處理。圖9是示出了在根據(jù)本實(shí)施例的圖像處理設(shè)備100中包括的運(yùn)動(dòng)檢測單元106的第一構(gòu)造示例中的處理的概述的說明圖。對(duì)于例如與連續(xù)的兩個(gè)幀相對(duì)應(yīng)的兩個(gè)幀圖像，根據(jù)第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106把針對(duì)每個(gè)像素對(duì)兩個(gè)幀圖像中的每一者進(jìn)行參照的參照比率(I α)指定為時(shí)間相位。之后，根據(jù)第一構(gòu)造的運(yùn)動(dòng)檢測單元106通過使用所指定的參照比率來檢測對(duì)象。雖然圖9示出了根據(jù)第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106將用于對(duì)對(duì)應(yīng)于連續(xù)兩個(gè)幀的兩個(gè)幀圖像進(jìn)行參照的參照比率指定為時(shí)間相位的示例，但是根據(jù)第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106的處理不局限于如上所述的處理。例如，根據(jù)第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106也可以將用于對(duì)對(duì)應(yīng)于連續(xù)三個(gè)以上幀的三個(gè)以上幀圖像進(jìn)行參照的參照比率指定為時(shí)間相位。在下文中例如如圖9所示，解釋了根據(jù)第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106將用于對(duì)對(duì)應(yīng)于連續(xù)兩個(gè)幀的兩個(gè)幀圖像進(jìn)行參照的參照比率指定為時(shí)間相位的示例。圖10是示出了包括在根據(jù)本實(shí)施例的圖像處理設(shè)備100中的運(yùn)動(dòng)檢測單元106的第一構(gòu)造示例的框圖。根據(jù)第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106例如包括參照比率計(jì)算單元110和檢測單元112 (第一檢測單元)。參照比率計(jì)算單元110基于輸入圖像信號(hào)和從延遲時(shí)間計(jì)算單元104發(fā)送的延遲時(shí)間信息來對(duì)每個(gè)像素計(jì)算參照比率。參照比率計(jì)算單元110把表示所計(jì)算的參照比率的信息(數(shù)據(jù))發(fā)送到檢測單元112。圖11是用于解釋由按照包括在根據(jù)本實(shí)施例的圖像處理設(shè)備100中的第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106進(jìn)行的參照比率的計(jì)算處理的示例的說明圖。圖11中示出的經(jīng)校正的像素是在經(jīng)校正的圖像中的像素(下文中也類似適用)。下文中，存在輸入圖像(幀圖像)中的經(jīng)校正的像素相對(duì)應(yīng)的像素被表示為“參照像素”的情況，其中，該輸入圖像與該經(jīng)校正的像素相對(duì)應(yīng)。用在例如幀速率轉(zhuǎn)換等中的一般的運(yùn)動(dòng)檢測是在全局快門系統(tǒng)中以時(shí)間相位的方式執(zhí)行的。另一方面，按照根據(jù)本實(shí)施例的第一構(gòu)造示例的運(yùn)動(dòng)檢測單元106 (更嚴(yán)格地說，例如參照比率計(jì)算單元110)通過把攝像設(shè)備(該設(shè)備使用延遲時(shí)間信息來拍攝與輸入圖像信號(hào)相對(duì)應(yīng)的運(yùn)動(dòng)圖像)中的延遲時(shí)間考慮在內(nèi)，對(duì)于每個(gè)像素檢測對(duì)象的運(yùn)動(dòng)。例如，假設(shè)如圖11所示，從經(jīng)校正的像素到輸入圖像A的參照像素的時(shí)間與從經(jīng)校正的像素到輸入圖像B的參照像素的時(shí)間的比率為“I α ”，并且從經(jīng)校正的像素到輸入圖像A的參照像素的向量為“(xSMh，Ysrch) ”?；谶@些假設(shè)，由以下的公式2到5表示輸入圖像A的參照像素的坐標(biāo)(xMf，yMf)、輸入圖像B的參照像素的坐標(biāo)(xto，ytJ、輸入圖像A的參照像素的延遲時(shí)間rref以及輸入圖像B的參照像素的延遲時(shí)間rm。(xrefJ yref) — (x+xsrchj y+ysrch)公式 2(Xtar，ytar) = (χ-α Xxsrch, X-a Xysrch)公式 3rref = r (x+xsrch, y+ysrch)公式 4
rtar = r (x- α X Xsrch, y-a X ysrch) 公式 5在這種情況下，假設(shè)輸入圖像信號(hào)的幀周期為“ Λ Tref",則輸入圖像B的參照像素的延遲時(shí)間例如由以下示出的公式6表示。rtar = ( A TrefTref) X a公式 6此外，通過公式1、3、4和6，涉及從經(jīng)校正的像素到輸入圖像B的參照像素的時(shí)間的比率的“ a ”由以下示出的公式7表示。
權(quán)利要求
1.ー種圖像處理設(shè)備，包括 運(yùn)動(dòng)檢測單元，其基于圖像信號(hào)和延遲時(shí)間信息，通過多個(gè)幀圖像來檢測運(yùn)動(dòng)圖像中包含的對(duì)象的運(yùn)動(dòng)，所述圖像信號(hào)表示包括所述幀圖像的所述運(yùn)動(dòng)圖像，所述延遲時(shí)間信息表示攝像中的延遲時(shí)間；以及 校正単元，其基于所述圖像信號(hào)和運(yùn)動(dòng)信息來校正所述圖像信號(hào)，所述運(yùn)動(dòng)信息表示所檢測到的對(duì)象的運(yùn)動(dòng)。
2.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備，還包括 延遲時(shí)間計(jì)算単元，其基于攝像設(shè)備的攝像參數(shù)來計(jì)算對(duì)于每個(gè)像素的所述延遲時(shí)間，所述攝像設(shè)備具有對(duì)于每根線順次拍攝圖像的攝像元件。
3.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備， 其中，所述運(yùn)動(dòng)檢測單元基于所述延遲時(shí)間信息來指定拍攝所述運(yùn)動(dòng)圖像的時(shí)間相位，并且基于所指定的時(shí)間相位來針對(duì)每個(gè)像素檢測所述對(duì)象的運(yùn)動(dòng)。
4.根據(jù)權(quán)利要求3所述的圖像處理設(shè)備， 其中，所述運(yùn)動(dòng)檢測單元對(duì)基于所述延遲時(shí)間信息而指定的時(shí)間相位進(jìn)行調(diào)整。
5.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備， 其中，所述運(yùn)動(dòng)檢測單元包括 參照比率計(jì)算單元，其基于所述延遲時(shí)間信息來計(jì)算參照比率，所述參照比率表示用于對(duì)多個(gè)幀圖像中每ー者進(jìn)行參照的比率，以及 第一檢測單元，其基于所計(jì)算的參照比率來檢測所述對(duì)象的運(yùn)動(dòng)。
6.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備， 其中，所述運(yùn)動(dòng)檢測單元包括 第二檢測單元，其基于所述圖像信號(hào)來檢測所述對(duì)象的運(yùn)動(dòng)，以及第三檢測單元，其基于運(yùn)動(dòng)信息、所述圖像信號(hào)和所述延遲時(shí)間信息來重新檢測所述對(duì)象的運(yùn)動(dòng)，所述運(yùn)動(dòng)信息表示由所述第一檢測單元檢測到的運(yùn)動(dòng)。
7.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備， 其中，所述校正単元基于ー個(gè)或多個(gè)運(yùn)動(dòng)信息來校正所述圖像信號(hào)。
8.根據(jù)權(quán)利要求7所述的圖像處理設(shè)備， 其中，所述運(yùn)動(dòng)信息包括參照比率，所述參照比率表示用于對(duì)多個(gè)幀圖像中的每ー者進(jìn)行參照的比率。
9.根據(jù)權(quán)利要求2所述的圖像處理設(shè)備，還包括 參數(shù)取得単元，其取得所述攝像參數(shù)。
10.根據(jù)權(quán)利要求9所述的圖像處理設(shè)備， 其中，所述參數(shù)取得單元 從所述圖像信號(hào)或者從存儲(chǔ)了識(shí)別信息的記錄介質(zhì)取得用于識(shí)別所述攝像設(shè)備的所述識(shí)別信息，并且 從與所述識(shí)別信息和所述攝像參數(shù)相關(guān)的數(shù)據(jù)庫取得與所取得的識(shí)別信息相對(duì)應(yīng)的攝像參數(shù)。
11.根據(jù)權(quán)利要求9所述的圖像處理設(shè)備， 其中，所述參數(shù)取得単元基于由所述運(yùn)動(dòng)檢測單元檢測到的運(yùn)動(dòng)信息，通過估計(jì)所述攝像參數(shù)來取得所述攝像參數(shù)。
12.根據(jù)權(quán)利要求9所述的圖像處理設(shè)備， 其中，所述參數(shù)取得單元從所述圖像信號(hào)取得所述攝像參數(shù)。
13.根據(jù)權(quán)利要求I所述的圖像處理設(shè)備，還包括拍攝所述運(yùn)動(dòng)圖像的攝像單元。
14.ー種圖像處理方法，包括 基于圖像信號(hào)以及延遲時(shí)間信息，通過多個(gè)幀圖像來檢測運(yùn)動(dòng)圖像中包含的對(duì)象的運(yùn)動(dòng)，所述圖像信號(hào)表示包括所述巾貞圖像的所述運(yùn)動(dòng)圖像，所述延遲時(shí)間信息表示攝像中的延遲時(shí)間；以及 基于所述圖像信號(hào)和運(yùn)動(dòng)信息來校正所述圖像信號(hào)，所述運(yùn)動(dòng)信息表示所檢測到的對(duì)象的運(yùn)動(dòng)。
15.—種程序，其使得計(jì)算機(jī)執(zhí)行下述操作 基于圖像信號(hào)以及延遲時(shí)間信息，通過多個(gè)幀圖像來檢測運(yùn)動(dòng)圖像中包含的對(duì)象的運(yùn)動(dòng)，所述圖像信號(hào)表示包括所述巾貞圖像的所述運(yùn)動(dòng)圖像，所述延遲時(shí)間信息表示攝像中的延遲時(shí)間；以及 基于所述圖像信號(hào)和運(yùn)動(dòng)信息來校正所述圖像信號(hào)，所述運(yùn)動(dòng)信息表示所檢測到的對(duì)象的運(yùn)動(dòng)。
全文摘要
本申請(qǐng)?zhí)峁┝藞D像處理設(shè)備、圖像處理方法和程序。該圖像處理設(shè)備包括運(yùn)動(dòng)檢測單元，基于表示包括幀圖像的運(yùn)動(dòng)圖像的圖像信號(hào)以及表示攝像延遲時(shí)間的延遲時(shí)間信息，所述運(yùn)動(dòng)檢測單元通過多個(gè)幀圖像來檢測包括在運(yùn)動(dòng)圖像中的對(duì)象的運(yùn)動(dòng)；校正單元，其基于所述圖像信號(hào)和表示所檢測的對(duì)象的運(yùn)動(dòng)的運(yùn)動(dòng)信息來校正所述圖像信號(hào)。
文檔編號(hào)H04N5/21GK102739923SQ20121009876
公開日2012年10月17日 申請(qǐng)日期2012年3月31日 優(yōu)先權(quán)日2011年4月8日
發(fā)明者安藤裕司, 小林剛也 申請(qǐng)人:索尼公司