專(zhuān)利名稱(chēng)：圖像信號(hào)處理裝置和圖像信號(hào)處理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及 一 種對(duì)與圖像信號(hào)對(duì)應(yīng)的預(yù)定才各式的圖像數(shù)據(jù)進(jìn) 行圖像信號(hào)處理的圖像信號(hào)處理裝置，和一種圖像信號(hào)處理方法。
背景技術(shù)：
圖^f象處理裝置一皮配置為依照4吏用目的對(duì)圖傳^言號(hào)4丸行一種或 多種預(yù)定的處理(圖像信號(hào)處理)。舉例來(lái)說(shuō)，在用于將所拍攝的圖像記錄為運(yùn)動(dòng)圖像或靜止圖像 的圖像拍攝裝置中，首先進(jìn)行用于執(zhí)行信號(hào)處理從而由圖像拍攝單 元(相機(jī))獲得的信號(hào)生成作為運(yùn)動(dòng)圖像和靜止圖像的圖像數(shù)據(jù)的 相機(jī)信號(hào)處理，然后依次進(jìn)行包括圖像大小的轉(zhuǎn)換和壓縮/編碼的其 他類(lèi)型的圖像信號(hào)處理。然后，通過(guò)這些類(lèi)型的圖像信號(hào)處理最終 生成的要被記錄的圖像數(shù)據(jù)被寫(xiě)入到預(yù)定格式的介質(zhì)中，并存于其 中。專(zhuān)利文獻(xiàn)1 (日本未審查專(zhuān)利申"i青^^開(kāi)第2000-92349號(hào))描述 了一種關(guān)于被執(zhí)行為圖像信號(hào)處理的分辨率轉(zhuǎn)換的結(jié)構(gòu)
發(fā)明內(nèi)容與例如聲音數(shù)據(jù)相比，每單位再生時(shí)間的圖像數(shù)據(jù)具有相當(dāng)大 的數(shù)據(jù)量。相應(yīng)地，大規(guī)^莫電路被用來(lái)進(jìn)行圖像信號(hào)處理，使得為控制圖像信號(hào)處理而施加在CPU (中央處理單元)上的處理負(fù)荷也較重。由于這些原因，優(yōu)選使用于執(zhí)行圖像信號(hào)處理的裝置盡可能 有效地以小型電3各進(jìn)行配置。考慮到上面所述的問(wèn)題，根據(jù)本發(fā)明的實(shí)施例的圖像信號(hào)處理裝置包括局部圖像lt據(jù)塊獲得裝置，用于通過(guò)在預(yù)定位置將與具 有預(yù)定凄t目的水平<象素和垂直<象素的預(yù)定畫(huà)面相對(duì)應(yīng)的圖傳4t據(jù) 劃分成多個(gè)圖像數(shù)據(jù)部分來(lái)獲得局部圖像數(shù)據(jù)塊，這些圖像數(shù)據(jù)部 分具有預(yù)定數(shù)目的局部水平像素和局部垂直像素；包生成裝置，用 于生成分別存儲(chǔ)局部圖傳4t據(jù)塊中的 一個(gè)的包；以及一個(gè)或多個(gè)信 號(hào)處理裝置，用于從圖傳K據(jù)通過(guò)其^皮傳輸?shù)膫鬏斅窂浇邮瞻?存儲(chǔ)在包中的局部圖像數(shù)據(jù)塊為單位執(zhí)行信號(hào)處理，并將圖像數(shù)據(jù) 以包的形式輸出到傳輸路徑。在所述的結(jié)構(gòu)中，當(dāng)要對(duì)圖像數(shù)據(jù)執(zhí)行圖像信號(hào)處理時(shí)，基于 一個(gè)畫(huà)面的圖像數(shù)據(jù)形成每一個(gè)都包括預(yù)定數(shù)目的局部水平像素 和局部垂直^f象素的局部圖^象^:據(jù)塊。這里，局部水平〗象素和局部垂 直像素表示在組成一個(gè)畫(huà)面的圖像數(shù)據(jù)的水平像素和垂直像素的 總數(shù)中的一部分中連續(xù)水平像素和連續(xù)垂直像素的數(shù)目。然后，生 成分別存儲(chǔ)有局部圖<象數(shù)據(jù)塊的包，并以包的形式將圖像數(shù)據(jù)輸入 到圖像信號(hào)處理裝置或者從圖像信號(hào)處理裝置輸出圖像數(shù)據(jù)。在這種情況下，各個(gè)局部圖傳4t據(jù)塊通過(guò)提取一個(gè)畫(huà)面的圖<象 數(shù)據(jù)的矩形部分而獲得。其大小要小于整個(gè)畫(huà)面的圖像數(shù)據(jù)的大 小，并且因此每個(gè)包的大小都較小。相應(yīng)地，存儲(chǔ)在各個(gè)包中的局 部圖〗象數(shù)據(jù)塊可以用來(lái)作為信號(hào)處理裝置中圖傳_數(shù)據(jù)的最小處理單位。而且，與整個(gè)畫(huà)面的圖像數(shù)據(jù)#皮用作圖{象信號(hào)處理單位的情 況相比，用于保存將被信號(hào)處理裝置處理的凄t據(jù)的區(qū)域的大小也會(huì) 小很多。這能減小硬件的規(guī)模。此外，對(duì)應(yīng)于更小的數(shù)據(jù)大小，一 個(gè)信號(hào)處理單位的圖J象^t據(jù)的信號(hào)處理所占用的時(shí)間大大縮短，這 提高了信號(hào)處理的效率。通過(guò)以上所述的方式，根據(jù)本發(fā)明的實(shí)施例，可以提高圖像信 號(hào)處理在電^各結(jié)構(gòu)和處理歲丈率方面的歲丈率。


圖1是根據(jù)本發(fā)明的一個(gè)實(shí)施例的圖像拍攝裝置的結(jié)構(gòu)的例子的框圖；圖2示出了根據(jù)該實(shí)施例生成數(shù)據(jù)塊的處理概念； 圖3根據(jù)重疊區(qū)域分類(lèi)型示出了數(shù)據(jù)塊；圖4示出了在根據(jù)該實(shí)施例的圖像拍攝裝置中生成的包的結(jié)構(gòu) 的例子；圖5示出了包含于根據(jù)該實(shí)施例的圖像拍攝裝置中的信號(hào)處理 i夾100的結(jié)構(gòu)的例子；圖6示出了在運(yùn)動(dòng)/靜止圖像的同時(shí)拍攝過(guò)程中拍攝運(yùn)動(dòng)圖像 和靜止圖像的定時(shí)(圖像數(shù)據(jù)獲得定時(shí))的例子；圖7示出了在根據(jù)該實(shí)施例的運(yùn)動(dòng)/靜止圖像的同時(shí)拍攝過(guò)程 中處理運(yùn)動(dòng)圖像和靜止圖像的定時(shí)(timing);圖8示意性示出了才艮據(jù)該實(shí)施例重建包的過(guò)程；
圖9示出了根據(jù)變型例的信號(hào)處理塊； 圖IO示出了根據(jù)另一變型例的信號(hào)處理塊；以及 圖11示出了根據(jù)變型例的圖像拍攝裝置的結(jié)構(gòu)；具體實(shí)施方式
下面描述本發(fā)明的實(shí)施例。在該實(shí)施例中，基于本發(fā)明的圖像 信號(hào)處理裝置的結(jié)構(gòu)被應(yīng)用于能夠拍攝并記錄運(yùn)動(dòng)和靜止圖像的 圖像拍攝裝置中。在圖1所示的圖像拍攝裝置1中，圖像拍攝單元11包括光學(xué) 系統(tǒng)單元和成像設(shè)備單元。該光學(xué)系統(tǒng)單元包括透鏡光學(xué)系統(tǒng)、聚 焦機(jī)構(gòu)、快門(mén)機(jī)構(gòu)和光圈機(jī)構(gòu)。進(jìn)入光學(xué)系統(tǒng)單元的光作為拍攝光 被聚焦到成像設(shè)備單元的光接收表面上。該成像設(shè)備單元包括諸如 CCD (電荷耦合器件)和CMOS (互補(bǔ)金屬氧化物半導(dǎo)體)傳感器 的光電轉(zhuǎn)換設(shè)備，對(duì)由光接收表面接收的拍攝光進(jìn)行光電轉(zhuǎn)換，以 預(yù)定的定時(shí)輸出與依照由光接收表面接收的拍攝光而聚積的信號(hào) 電祠^十應(yīng)的電4言號(hào)。在這種情況下，相一幾信號(hào)處理單元12進(jìn)行;故稱(chēng)作預(yù)處理的信 號(hào)處理。在這個(gè)預(yù)處理過(guò)程中，相機(jī)信號(hào)處理單元12接收從圖像拍攝 單元ll中輸出的信號(hào)，執(zhí)行CDS(相關(guān)雙重采樣)處理和AGC(自 動(dòng)增益控制)處理，并通過(guò)A/D (模擬-數(shù)字)轉(zhuǎn)換器將該信號(hào)轉(zhuǎn)換 成數(shù)字圖像信號(hào)。相應(yīng)地，就能被獲得作為運(yùn)動(dòng)圖像或靜止圖像的 圖像數(shù)據(jù)。 然后，在該實(shí)施例中，通過(guò)上述預(yù)處理得到的圖^f象數(shù)據(jù)在控制單元16的控制下經(jīng)由內(nèi)部總線21傳輸?shù)酵獠看鎯?chǔ)器17中，并保 存于其中。在當(dāng)前情況下，外部存+者器17可以是以DRAM (動(dòng)態(tài) 隨才幾存取存儲(chǔ)器)和SDRAM (同步DRAM )為代表的易失性存儲(chǔ)裝置。然后，在該實(shí)施例中，包處J里單元13只寸/人相積H言號(hào)處理單元 12傳輸、并保存在外部存儲(chǔ)器17中的圖像數(shù)據(jù)進(jìn)行打包處理。通 過(guò)包處理單元13生成包的方法的細(xì)節(jié)和所生成的包的結(jié)構(gòu)將在下 文中描述。簡(jiǎn)單來(lái)說(shuō)，對(duì)應(yīng)于一個(gè)畫(huà)面(運(yùn)動(dòng)圖像的一幀)的二維 圖像數(shù)據(jù)區(qū)域被分成多個(gè)單位的局部矩形區(qū)域數(shù)據(jù)(數(shù)據(jù)塊)，每 一個(gè)lt據(jù)塊都包括預(yù)定數(shù)目的水平/垂直像素，并纟合每一個(gè)數(shù)據(jù)塊都 力口上一個(gè)才艮頭(header), 乂人而生成包。之后，在把以上述方式生成的每個(gè)包中的數(shù)據(jù)塊(局部圖像數(shù) 據(jù))當(dāng)作最小處理單位的情況下，根據(jù)該實(shí)施例的圖像拍攝裝置1 進(jìn)行圖像信號(hào)處理。在圖l所示的結(jié)構(gòu)中，對(duì)包進(jìn)行圖像信號(hào)處理 的功能單元包括設(shè)置在相才幾信號(hào)處理單元12中用于對(duì)凄t字信號(hào)(圖 1象凄史據(jù))進(jìn)行預(yù)處理的單元、分辨率轉(zhuǎn)換單元14和編碼單元15。因此，當(dāng)相積/f言號(hào)處理單元12、分辨率4爭(zhēng)4奐單元14和編石馬單 元15進(jìn)行信號(hào)處理時(shí)，數(shù)據(jù)從內(nèi)部總線21以包的形式輸入到上述 單元中，并對(duì)所輸入的包中存儲(chǔ)的數(shù)據(jù)塊進(jìn)行預(yù)定的處理。在這些 數(shù)據(jù)塊被處理之后，它們被重新打包并輸出到內(nèi)部總線21。通過(guò)這 種結(jié)構(gòu)，在根據(jù)該實(shí)施例的圖像拍4聶裝置1中，將^皮進(jìn)行處理的圖 像數(shù)據(jù)以包的形式在進(jìn)行圖像信號(hào)處理的單元之間傳輸。相才幾信號(hào)處理單元12、分辨率轉(zhuǎn)換單元14和編碼單元15對(duì)包 中的數(shù)據(jù)塊進(jìn)行以下類(lèi)型的圖像信號(hào)處理。
首先，通過(guò)相4幾信號(hào)處理單元12為處理lt據(jù)塊而對(duì)數(shù)字信號(hào) (圖像數(shù)據(jù))進(jìn)行的預(yù)處理包括含有AWB (自動(dòng)白平衡)的顏色平衡、沒(méi)置處理。相機(jī)信號(hào)處理單元12還能對(duì)已經(jīng)進(jìn)行了數(shù)字信號(hào)預(yù)處理的信 號(hào)進(jìn)行預(yù)定的信號(hào)處理。也就是說(shuō)，相機(jī)信號(hào)處理單元12能進(jìn)行 數(shù)字信號(hào)階段的預(yù)處理，并能對(duì)預(yù)處理后的圖像信號(hào)數(shù)據(jù)進(jìn)行預(yù)定 的相機(jī)信號(hào)處理。相機(jī)信號(hào)處理包括應(yīng)用特殊效果的處理，如轉(zhuǎn)換 到 一 種非彩色的顏色的圖^f象，例如單色或深褐色。分辨率轉(zhuǎn)換單元14進(jìn)行用于將已通過(guò)相才幾信號(hào)處理單元12進(jìn) 行了預(yù)處理和相才幾信號(hào)處理的數(shù)據(jù)的分辨率轉(zhuǎn)換為其他的期望分 辨率的信號(hào)處理。本文中，分辨率對(duì)應(yīng)于圖像的尺寸，并由構(gòu)成一 個(gè)畫(huà)面的水平像素的數(shù)目和垂直像素的數(shù)目來(lái)表示。作為代表，圖像拍攝單元11將通過(guò)使用在成像設(shè)備單元中給 出的所有像素進(jìn)行的圖像拍攝所獲得的信號(hào)傳輸給相機(jī)信號(hào)處理 單元12。相應(yīng)地，在相枳4言號(hào)處理單元12的預(yù)處理階革殳中，對(duì)與 成像設(shè)備單元中的像素?cái)?shù)目對(duì)應(yīng)的完整尺寸的圖像數(shù)據(jù)進(jìn)行信號(hào) 處理。另一方面，當(dāng)要記錄所拍才聶的運(yùn)動(dòng)或靜止圖像時(shí)，通常才艮據(jù) 初始i殳置值或用戶的設(shè)置，來(lái)設(shè)定不同于上述完整尺寸的圖像尺 寸。在這種情況下，進(jìn)行改變圖像尺寸的處理。分辨率轉(zhuǎn)換單元14 通過(guò)轉(zhuǎn)換分辨率來(lái)進(jìn)^f亍改變圖^象尺寸的處理。分辨率轉(zhuǎn)換單元14例如通過(guò)依照基于減少或增加圖像尺寸的 比率的預(yù)定規(guī)則，進(jìn)行稀化或內(nèi)插構(gòu)成圖像數(shù)據(jù)的像素?cái)?shù)據(jù)的處 理，來(lái)執(zhí)行用于改變圖像尺寸(轉(zhuǎn)換分辨率)的處理，這樣就能獲 得對(duì)應(yīng)于期望圖像尺寸(水平/垂直像素的數(shù)目)的分辨率。
編碼單元15通過(guò)預(yù)定的方法進(jìn)4亍用于壓縮和編碼圖傳4t據(jù)作 為運(yùn)動(dòng)圖^f象或靜止圖像的信號(hào)處理。對(duì)應(yīng)于編碼單元15的壓縮和 編碼方法沒(méi)有限制，但能依照要記錄的運(yùn)動(dòng)圖像數(shù)據(jù)或靜止圖像數(shù) 據(jù)的格式或者用于存儲(chǔ)拍攝圖像的存儲(chǔ)介質(zhì)的格式而適當(dāng)?shù)馗淖儭＿M(jìn)行由相機(jī)信號(hào)處理單元12、分辨率轉(zhuǎn)換單元14和編碼單元 15進(jìn)行的一系列圖像信號(hào)處理，從而將捕捉圖像作為運(yùn)動(dòng)圖像數(shù)據(jù) 或靜止圖像數(shù)據(jù)記錄在設(shè)于存儲(chǔ)單元19中的存儲(chǔ)介質(zhì)中。因此， 在通過(guò)相一幾信號(hào)處理單元12、分辨率轉(zhuǎn)4灸單元14和編;馬單元15進(jìn) 行圖像信號(hào)處理之后緊接著進(jìn)行將處理后的圖像數(shù)據(jù)存儲(chǔ)在存儲(chǔ) 介質(zhì)的處理。圖像數(shù)據(jù)可通過(guò)基于包的形式指定唯一的格式而^皮記錄在存 儲(chǔ)介質(zhì)上。作為選擇，圖像數(shù)據(jù)能依照將要對(duì)應(yīng)于標(biāo)準(zhǔn)化存儲(chǔ)介質(zhì) 的格式而記錄的數(shù)據(jù)的形式來(lái)記錄。在該實(shí)施例中，考慮到多功能性，圖像數(shù)據(jù)依照將要對(duì)應(yīng)于標(biāo) 準(zhǔn)化存儲(chǔ)介質(zhì)的才各式而記錄的^:據(jù)的形式來(lái)纟皮記錄。在這種情況 下，由于在圖像信號(hào)處理階段中圖像數(shù)據(jù)以包的形式存在，所以圖 像數(shù)據(jù)需要被轉(zhuǎn)化為對(duì)應(yīng)于存儲(chǔ)介質(zhì)格式的數(shù)據(jù)記錄形式，來(lái)將圖 像數(shù)據(jù)存儲(chǔ)在存儲(chǔ)介質(zhì)中。為了這個(gè)目的，在該實(shí)施例中，進(jìn)行解包以提取數(shù)據(jù)塊，并將 提取出的數(shù)據(jù)塊組合在一起，這樣，對(duì)應(yīng)于打包前的圖像數(shù)據(jù)的一 個(gè)畫(huà)面的圖像數(shù)據(jù)被恢復(fù)。然后，要記錄的已恢復(fù)圖像數(shù)據(jù)被傳輸 到存儲(chǔ)單元19中，并存儲(chǔ)到存儲(chǔ)介質(zhì)中。這種包括解包處理在內(nèi)的圖傳H據(jù)的恢復(fù)通過(guò)包處理單元13 在控制單元16的控制下利用外部存儲(chǔ)器17作為工作區(qū)進(jìn)行。也就 是說(shuō)，例如，已經(jīng)進(jìn)行了必要圖像信號(hào)處理的包被傳輸?shù)酵獠看鎯?chǔ)
器17并^皮保存在其中，然后包處理單元13對(duì)保存在外部存儲(chǔ)器17 中的包進(jìn)行恢復(fù)圖像數(shù)據(jù)的處理。在圖l所示的結(jié)構(gòu)中，外部存儲(chǔ)器17可只為包處理單元13進(jìn) 行的圖像數(shù)據(jù)的打包和解包而設(shè)置，但也可以用作其它目的。例如， 當(dāng)相才幾信號(hào)處理單元12進(jìn)4亍預(yù)定信號(hào)處理時(shí)，當(dāng)分辨率轉(zhuǎn)換單元 14進(jìn)行分辨率轉(zhuǎn)換時(shí)或者當(dāng)編碼單元15進(jìn)4亍壓縮/編碼或解碼時(shí)， 外部存儲(chǔ)器17就可用作處理圖像數(shù)據(jù)的工作區(qū)。將圖像數(shù)據(jù)以上文所述方式記錄到存儲(chǔ)介質(zhì)的存儲(chǔ)單元19包 括預(yù)定格式的存儲(chǔ)介質(zhì)和能夠?qū)?shù)據(jù)寫(xiě)入存儲(chǔ)介質(zhì)并能從存儲(chǔ)介 質(zhì)中讀出數(shù)據(jù)的驅(qū)動(dòng)。包含于存儲(chǔ)單元19的存儲(chǔ)介質(zhì)沒(méi)有被指定， 而可以是當(dāng)前環(huán)境下的硬盤(pán)、DVD (數(shù)字化視頻光盤(pán))或者閃存。 該存儲(chǔ)介質(zhì)能與驅(qū)動(dòng)一起被固定在圖像拍攝裝置中，或者以可去除 的方式纟是供給存〗諸單元19的驅(qū)動(dòng)。存〗諸單元19對(duì)應(yīng)于預(yù)定文件系 統(tǒng)的標(biāo)準(zhǔn)進(jìn)行被存儲(chǔ)數(shù)據(jù)的管理，這樣存儲(chǔ)在存儲(chǔ)介質(zhì)中的運(yùn)動(dòng)圖 像數(shù)據(jù)或者靜止圖像數(shù)據(jù)能以文件為單位進(jìn)行管理。圖像拍攝裝置1還包括顯示單元18。顯示單元18包括例如顯 示面纟反和具有^"應(yīng)于該顯示面纟反的馬區(qū)動(dòng)方法的結(jié)構(gòu)的顯示馬區(qū)動(dòng)電 路系統(tǒng)。例如，相機(jī)信號(hào)處理單元12也進(jìn)行用于在監(jiān)視器上顯示 拍攝圖像的信號(hào)處理，并且該經(jīng)過(guò)處理得到的將被顯示的圖像數(shù)據(jù) 通過(guò)內(nèi)部總線21輸入到顯示單元18中。顯示單元18基于將#1顯 示的輸入圖像數(shù)據(jù)驅(qū)動(dòng)顯示面板。相應(yīng)地，該圖像就顯示在顯示單 元18的顯示面纟反的畫(huà)面上。記錄在存儲(chǔ)單元19中的存儲(chǔ)介質(zhì)上的運(yùn)動(dòng)圖像或者靜止圖像 的文件可在控制單元16的控制下被讀出。從該存儲(chǔ)介質(zhì)中讀出的 數(shù)據(jù)可在顯示單元18中顯示為再生圖^f象。為此，才艮據(jù)需要處理乂人 該存儲(chǔ)介質(zhì)中讀出的數(shù)據(jù)。例如，編碼單元15進(jìn)行相對(duì)于壓縮/編
碼的解調(diào)(解壓)，或者分辨率轉(zhuǎn)換單元14轉(zhuǎn)4奐分辨率。相應(yīng)地， 獲得將被顯示的圖像數(shù)據(jù)并傳輸?shù)斤@示單元18中。
控制單元16控制圖像拍攝裝置1中的每個(gè)單元，并且實(shí)際上 用作包>^經(jīng)由總線相互連4妄的CPU (中央處理單元器)、RAM (隨 機(jī)存取存儲(chǔ)器)和ROM (只讀存儲(chǔ)器)的微型計(jì)算機(jī)。控制單元 16中的RAM主要用作CPU的工作區(qū)。例如，將被CPU執(zhí)行的程 序在RAM中被擴(kuò)展，或者CPU的操作結(jié)果被臨時(shí)存儲(chǔ)在RAM中。 ROM存^f諸一個(gè)將一皮CPU扭^亍的禾呈序和在各種處理中所需要的"i殳置 數(shù)據(jù)。
操作單元20用作輸入操作單元，包括設(shè)置在圖像拍攝裝置1 殼體的預(yù)定位置的各種操作按鈕和觸摸面板。操作單元20將根據(jù) 所進(jìn)行的操作的結(jié)果的操作信息信號(hào)輸出給控制單元16 (CPU)。 控制單元16依照該l敘入的纟喿作信息信號(hào)進(jìn)^f于控制和處理。
通過(guò)參照?qǐng)D1的描述可知，在根據(jù)本實(shí)施例的圖像拍攝裝置1 中， 一個(gè)畫(huà)面的圖像數(shù)據(jù)^皮分割并打包，打包后的數(shù)據(jù)在包括相枳j 4言號(hào)處理單元12、分辨率4爭(zhēng)才奐單元14和編石馬單元15的圖傳3言號(hào)處 理單元中傳輸。在4巴從每個(gè)輸入的包中^是取的凄t據(jù)塊(局部圖l象數(shù) 據(jù))當(dāng)作處理單位的情況下，這些圖像信號(hào)處理單元進(jìn)行預(yù)定類(lèi)型 的圖像信號(hào)處理。
在該實(shí)施例中，圖像信號(hào)處理以包為單位進(jìn)行傳輸和輸入/輸 出，這樣，提高了圖像信號(hào)處理的效率。這將在下文詳細(xì)描述。
首先，描述由包處理單元13進(jìn)4亍的圖像數(shù)據(jù)的打包。
圖2通過(guò)沿著水平和垂直方向的像素?cái)?shù)據(jù)段的陣列示意性示出 了的一個(gè)畫(huà)面的圖像凌t據(jù)。這里， 一個(gè)畫(huà)面的圖〗象凄t據(jù)指的是運(yùn)動(dòng) 圖像的 一幀的圖像數(shù)據(jù)或一幅靜止圖像的圖像數(shù)據(jù)。在一個(gè)畫(huà)面的圖像數(shù)據(jù)中，水平像素的數(shù)目用p表示，垂直像素的數(shù)目用q表示。 也就是說(shuō)，p x q的像素?cái)?shù)據(jù)針列構(gòu)成一個(gè)畫(huà)面的圖像數(shù)據(jù)。在該實(shí)施例中，該一個(gè)畫(huà)面的圖俜Jt才居凈皮包處理單元13打包 并被保存到外部存儲(chǔ)器17中。在包處理單元13進(jìn)4亍打包以前，圖2所示的圖傳Jt據(jù)^皮分成 預(yù)定數(shù)目的圖像數(shù)據(jù)部分，其中每個(gè)圖像數(shù)據(jù)部分都包括預(yù)定數(shù)目 的局部水平像素和局部垂直^象素。因此所生成的圖像數(shù)據(jù)部分4皮當(dāng) 作數(shù)據(jù)塊。更具體來(lái)說(shuō)，如圖2所述，包括水平像素?cái)?shù)目N/垂直像素?cái)?shù)目 N的各個(gè)正方形圖像數(shù)據(jù)部分相當(dāng)于數(shù)據(jù)塊。在這種情況下，如圖 2所示，該畫(huà)面并不是基于水平像素?cái)?shù)目N/垂直像素?cái)?shù)目N被平均目"a"的重疊區(qū)域的形式(重疊分割)。作為重疊分割的結(jié)果，可 在一個(gè)畫(huà)面的圖像數(shù)據(jù)中生成nxm個(gè)數(shù)據(jù)塊(歹ij C廣歹ll Cn的n 列，4亍~ 4亍Lm的m 4亍)。以上述方式生成的數(shù)據(jù)塊依照由<象素#:目"a"限定的重疊區(qū) 域Aro在整個(gè)畫(huà)面中的布置狀態(tài)可^皮分成9種類(lèi)型。作為參考，這 9種類(lèi)型的數(shù)據(jù)塊在圖3的(a) ~ (i)中示出。在這里，每一個(gè)數(shù) 據(jù)塊在畫(huà)面上的位置通過(guò)由圖2所示的各個(gè)凄t據(jù)塊所對(duì)應(yīng)的列號(hào) d ~ Cn和行號(hào)" Lm表示的坐標(biāo)來(lái)表示。首先，在圖3的(a)中，示出了位于最頂4亍和最左列的坐標(biāo) 為(d, L,)的數(shù)據(jù)塊。在該坐標(biāo)為(d， L。的數(shù)據(jù)塊中，沿其 上邊和左邊的<象素相當(dāng)于4立于初始畫(huà)面的端部的<象素。在上邊和左
邊有相鄰數(shù)據(jù)塊，因此在相鄰數(shù)據(jù)塊之間存在重疊了l象素?cái)?shù)目"a" 的重疊區(qū)i或ARo。在圖3的(b)中，示出了位于畫(huà)面的最頂4亍中除了最左列和 最右列的、坐標(biāo)為(C2, Li) ~ ( Cn —,， L!)的數(shù)據(jù)塊。在這些數(shù) 據(jù)塊中，重疊區(qū)域ARo存在于右邊、左邊和下邊。在圖3的(c)中，示出了位于畫(huà)面的最頂ff和最右列的、坐 標(biāo)為(Cn， LJ的數(shù)據(jù)塊。在該凄t據(jù)塊中，重疊區(qū)域ARo存在于左 邊和下邊。在圖3的(d)中，示出了在畫(huà)面的最左列中除了最頂行和最 底行之外的、坐標(biāo)為(d, L2) ~ ( d， Lm-!)的數(shù)據(jù)塊。在這些 凄t據(jù)塊中，重疊區(qū)i或ARo存在于上邊、下邊和右邊。在圖3的(e)中，示出了除畫(huà)面的外邊》彖(畫(huà)面的最左列、 最右列、最頂行和最底行)上的lt據(jù)塊以外的、坐標(biāo)為(C2， L2) ~ (Cn-,， Lm-,)的數(shù)據(jù)塊。在這些數(shù)據(jù)塊中，重疊區(qū)域ARo存在 于整個(gè)4邊右邊、左邊、上邊和下邊。在圖3的(f)中，示出了在畫(huà)面的最右列中除了最頂行和最底 行的、坐標(biāo)為(Cn, L2) ~ ( Cn， Lm —。的數(shù)據(jù)塊。在這些數(shù)據(jù)塊 中，重疊區(qū)域ARo存在于上邊、下邊和左邊。在圖3的(g)中，示出了在畫(huà)面的最底4亍和最左列的、坐標(biāo) 為(d， Lm)的數(shù)據(jù)塊。在該數(shù)據(jù)塊中，重疊區(qū)域ARo存在于右 邊和上邊。
在圖3的(h)中，示出了在畫(huà)面的最底4亍中除了最左列和最 右列之外的、坐標(biāo)為(C2, Lm) ~ ( Cn， Lm)的數(shù)據(jù)塊。在這 些數(shù)據(jù)塊中，重疊區(qū)i或ARo存在于右邊、左邊和上邊。在圖3的(i)中，示出了位于畫(huà)面的最底4亍和最右列的、坐標(biāo) 為(Cn, Lm)數(shù)據(jù)塊。在這個(gè)數(shù)據(jù)塊中，重疊區(qū)域ARo存在于左 邊和上邊。重疊區(qū)^或ARo由于以下原因"i殳置。例如，在包括"像素內(nèi)插和壓縮/編碼的某些圖《象信號(hào)處理中，位 于基準(zhǔn)位置的像素?cái)?shù)據(jù)和與基準(zhǔn)位置相距預(yù)定距離的像素?cái)?shù)據(jù)可 被用來(lái)對(duì)像素位置進(jìn)行處理。如下文所述，在本實(shí)施例中，在4巴存 儲(chǔ)在各個(gè)包中的數(shù)據(jù)塊當(dāng)作處理單位的情況下，進(jìn)行圖像信號(hào)處 理。在這種情況下，如果數(shù)據(jù)塊是通過(guò)簡(jiǎn)單地對(duì)一個(gè)畫(huà)面的圖像數(shù) 據(jù)進(jìn)4亍不形成重疊區(qū)域的分割而形成，并且如果信號(hào)處理通過(guò)利用 處在數(shù)據(jù)塊外圍的像素作為基準(zhǔn)來(lái)進(jìn)行，則由于缺少必要的相鄰像 素，而無(wú)法得到合適的信號(hào)處理結(jié)果。為了避免這種不便，提供了 象素在水平和垂直方向重疊的重疊區(qū)i或ARo。因此，作為重疊區(qū)域ARo的像素的數(shù)目能根據(jù)到實(shí)際圖像信 號(hào)處理中必須的相鄰像素?cái)?shù)據(jù)的距離而i殳定。如上文參照?qǐng)D2所述， 在重疊區(qū)i或ARo中，沿水平方向的部分和沿垂直方向的部分具有相 同的像素?cái)?shù)目"a"的寬度。然而，根據(jù)圖像處理的不同，沿水平 和垂直方向的部分可具有不同^f象素?cái)?shù)目的寬度。通過(guò)上文所述的方式，包處理單元13通過(guò)依照預(yù)定^見(jiàn)則在一 個(gè)畫(huà)面的圖像數(shù)據(jù)中定義出圖像數(shù)據(jù)部分來(lái)生成數(shù)據(jù)塊。然后，包 處理單元13將生成的數(shù)據(jù)塊當(dāng)作操作數(shù)(叩erand，也稱(chēng)操作對(duì)象)， 并給它們中的每一個(gè)都加上報(bào)頭來(lái)生成包。圖4示出了由包處理單元13生成的包的結(jié)構(gòu)的例子。如圖4的(a)所示，整個(gè)包包括報(bào)頭和接著報(bào)頭的數(shù)據(jù)塊。在圖4中，(b)示出了報(bào)頭的結(jié)構(gòu)的例子。在這個(gè)例子中，報(bào) 頭包括區(qū)域坐標(biāo)、區(qū)域大小、幀ID、命令標(biāo)記、處理路徑信息、歷 史信息和擴(kuò)展信息。區(qū)域坐標(biāo)是指示作為被當(dāng)作操作數(shù)存儲(chǔ)在包中的數(shù)據(jù)塊的局 部數(shù)據(jù)區(qū)域在畫(huà)面上的位置的信息。例如，像素?cái)?shù)據(jù)在畫(huà)面上的水 平坐標(biāo)和垂直坐標(biāo)的信息可^皮用來(lái)作為區(qū)i或坐標(biāo)。也就是說(shuō)，考慮到與以水平像素?cái)?shù)目p和垂直像素?cái)?shù)目q示出 一個(gè)畫(huà)面的圖像數(shù)據(jù)的圖2的對(duì)應(yīng)性，組成畫(huà)面的每一個(gè)數(shù)據(jù)的位 置能通過(guò)坐標(biāo)來(lái)表示。例如，位于最頂行和最左列的像素?cái)?shù)據(jù)可用 像素坐標(biāo)(1， 1 )表示，位于最頂行和最右列的像素?cái)?shù)據(jù)可用像素 坐標(biāo)(p， l)表示，位于最底行和最左列的^f象素凄t據(jù)可用〗象素坐標(biāo) (1， q)表示，位于最底行和最右列的4象素H據(jù)可用像素坐標(biāo)(p, q)表示。相應(yīng)地，構(gòu)成凄t據(jù)塊位置的像素ft據(jù)中位于特定位置的 像素?cái)?shù)據(jù)的像素坐標(biāo)能被用作區(qū)域坐標(biāo)。在本實(shí)施例中，位于左上 角(即，數(shù)據(jù)塊中最頂行和最左列)的像素?cái)?shù)據(jù)的像素坐標(biāo)被存儲(chǔ) 為區(qū)域坐標(biāo)的信息。在位于左上角(即，數(shù)據(jù)塊中最頂行和最左列)的像素?cái)?shù)據(jù)的 ^象素坐標(biāo)中，水平坐標(biāo)和垂直坐標(biāo)可以通過(guò)以下方式表示。包括在數(shù)據(jù)塊中的水平像素的數(shù)目和垂直像素的數(shù)目分別用 "N"表示，重疊區(qū)域ARo中的重疊像素的數(shù)目用"a"表示，在 圖2所示數(shù)據(jù)塊排列在一個(gè)畫(huà)面上的情況下，沿水平方向由左至右 排列的各列的列號(hào)用"n"(自然序號(hào))表示，沿垂直方向從上到下 排列的各行的行號(hào)用"m"(自然序號(hào))表示。在這種情況下，水平 坐標(biāo)可用下面的表達(dá)式(1 )表示。1+ (N-a) (n-l ) ... ( 1 )同樣，垂直坐標(biāo)可用下面的表達(dá)式(2)表示。 1+ (N-a) (m-l ) ... (2)例如，在將一個(gè)畫(huà)面的圖像數(shù)據(jù)劃分成多個(gè)數(shù)據(jù)塊的處理中， 包處理單元13利用上文所述的行號(hào)"m"和列號(hào)"n"來(lái)管理數(shù)據(jù) 塊的位置，這樣，包處理單元13能通過(guò)4吏用表達(dá)式(1 )和表達(dá)式 (2 )獲得將被存儲(chǔ)在被添加至數(shù)據(jù)塊的報(bào)頭中區(qū)域坐標(biāo)的區(qū)域中 的l象素坐標(biāo)的l直(水平坐標(biāo)，垂直坐標(biāo))。在圖4的(b)所示的報(bào)頭的結(jié)構(gòu)中，區(qū)域大小是指示數(shù)據(jù)塊 的區(qū)域的大小的信息。在本實(shí)施例中，水平4象素的數(shù)目x垂直〗象素 的數(shù)目(=NxN)的信息被存儲(chǔ)為區(qū)域大小。幀ID是在一個(gè)畫(huà)面的圖像數(shù)據(jù)(幀圖像數(shù)據(jù))組成一個(gè)運(yùn)動(dòng) 圖像的情況下用于指定初始圖像數(shù)據(jù)的幀號(hào)的識(shí)別信息。當(dāng)該畫(huà)面 的圖像數(shù)據(jù)是靜止圖像時(shí)， 一個(gè)不被用于運(yùn)動(dòng)圖像的預(yù)定特殊值被 存儲(chǔ)為幀ID。因此，通過(guò)參考幀ID,可以確定包中的數(shù)據(jù)塊是屬 于運(yùn)動(dòng)圖像還是靜止圖像。如上文參照?qǐng)D1所述，已經(jīng)進(jìn)行了所有必要圖^f象信號(hào)處理的包 -故包處理單元13恢復(fù)為與 一個(gè)畫(huà)面的初始圖^f象相對(duì)應(yīng)的圖傳4史據(jù)。 此時(shí)，包處理單元13至少參考作為指示數(shù)據(jù)塊在圖像數(shù)據(jù)中的位 置的位置信息而存儲(chǔ)在報(bào)頭中的區(qū)域坐標(biāo)和幀ID。相應(yīng)地，可指定 存儲(chǔ)在包中的數(shù)據(jù)塊所屬的幀和在幀中的位置。然后，包處理單元 13收集屬于相同幀圖像(靜止圖像)的數(shù)據(jù)塊并將這些數(shù)據(jù)塊放置 在正確的坐標(biāo)位置。于是，該圖像數(shù)據(jù)被適當(dāng)恢復(fù)。命令標(biāo)記(參數(shù)指定信息)是用于指定圖像信號(hào)處理中使用的 各種參數(shù)的信息。例如，該指定信息包括由分辨率轉(zhuǎn)換單元14進(jìn) 行分辨率的轉(zhuǎn)換所使用的圖像大小指定信息，和編碼單元15進(jìn)行 壓縮編碼處理所-使用的壓縮編碼方法選擇和指定壓縮率的信息。這 些不同類(lèi)型的指定信息以預(yù)定結(jié)構(gòu)存儲(chǔ)在命令標(biāo)記的區(qū)域中。處理路徑信息(信號(hào)處理指定信息)是用來(lái)指定對(duì)存儲(chǔ)在包中 的數(shù)據(jù)塊進(jìn)行信號(hào)處理的3各徑的信息。如圖4的(c)所示，處理3各徑信息的結(jié)構(gòu)包4舌4個(gè)比特。預(yù) 處理、相才幾信號(hào)處理、分辨率轉(zhuǎn)換、編碼/人最高有效位到最低有效 位凈皮分配給這四個(gè)比特。這里，預(yù)處理指的是通過(guò)相4幾信號(hào)處理單 元12對(duì)包中的數(shù)據(jù)塊進(jìn)行的預(yù)處理。相機(jī)信號(hào)處理指的是在相機(jī) 信號(hào)處理單元12進(jìn)行的預(yù)處理后的信號(hào)處理。分辨率轉(zhuǎn)換和編碼 分別指的是通過(guò)分辨率轉(zhuǎn)換單元14和編碼單元15進(jìn)4于的處理。存儲(chǔ)在對(duì)應(yīng)于預(yù)處理、相機(jī)信號(hào)處理、分辨率轉(zhuǎn)換、編碼的每 個(gè)比特位置的值按下文所述定義。例如，"1"表示對(duì)應(yīng)于該比特位 置的處理將^U丸4于，"0"表示對(duì)應(yīng)于該比特位置的處理^皮跳過(guò)。具 體來(lái)說(shuō)，當(dāng)處理路徑信息從最高有效位到最低有效位指示1101時(shí)， 將對(duì)包中的數(shù)據(jù)塊進(jìn)行預(yù)處理、相才幾信號(hào)處理和編碼，而分辨率轉(zhuǎn) 換被跳過(guò)。注意，設(shè)置在預(yù)處理、相4幾信號(hào)處理、分辨率轉(zhuǎn)換、編 碼中的參數(shù)基于存儲(chǔ)在命令標(biāo)記中的信息而指定。歷史信息(進(jìn)展指示信息)是指示對(duì)存儲(chǔ)在包中的數(shù)據(jù)塊進(jìn)行 處理的結(jié)果的信息。其結(jié)構(gòu)的一個(gè)例子在圖4的(d)中示出。與 圖4的(c)中一樣，該結(jié)構(gòu)包括四個(gè)比特，其中預(yù)處理、相機(jī)信
號(hào)處理、分辨率轉(zhuǎn)換和編碼,人最高有效位到最^f氐有效位分配到四個(gè) 比特中。存儲(chǔ)在各個(gè)比特位置中的值按下文所述定義。"1"表示該處理已經(jīng)被執(zhí)行，而"0"表示該處理還沒(méi)祐j丸4亍。例如，當(dāng)歷史 信息表示1110時(shí)，預(yù)處理、相才幾信號(hào)處理和分辨率轉(zhuǎn)換已經(jīng)祐^丸行，4旦是編碼沒(méi)#^丸4亍。擴(kuò)展信息(過(guò)程結(jié)果信息)是關(guān)于存儲(chǔ)在包中的數(shù)據(jù)塊的各種 附加信息。其中的 一些關(guān)于圖像數(shù)據(jù)的信息只能在對(duì)該圖像數(shù)據(jù)進(jìn) 行某些處理之后獲得。例如，圖像復(fù)雜性的評(píng)估值(頻率信息)作 為在預(yù)定階段中的信號(hào)處理的結(jié)果而獲得。該信息包含于擴(kuò)展信息中。圖4所示的包的報(bào)頭的結(jié)構(gòu)只是一個(gè)例子，能依照實(shí)際信號(hào)處 理的結(jié)構(gòu)^皮適當(dāng)改變。下面，參照?qǐng)D5將描述對(duì)通過(guò)上述方法生成的包進(jìn)行信號(hào)處理 的一個(gè)例子。圖5示出了信號(hào)處理塊100的結(jié)構(gòu)的例子。信號(hào)處理塊100相 當(dāng)于具有能對(duì)根據(jù)本實(shí)施例的圖像拍攝裝置1中的相機(jī)信號(hào)處理單 元12、分辨率轉(zhuǎn)換單元14和編碼單元15的輸入/輸出包進(jìn)行圖像 信號(hào)處理的功能的共用部件。在信號(hào)處理塊100中，將被處理的圖像凄t據(jù)以具有圖4所示結(jié) 構(gòu)的包的形式被輸入/輸出。每個(gè)輸入到信號(hào)處理塊100的包都首先 被輸入到報(bào)頭分析單元101中。報(bào)頭分析單元101解包乂人內(nèi)部總線21 l俞入的包，乂人而分別得 到報(bào)頭和數(shù)據(jù)塊，并分析該才艮頭。也就是說(shuō)，報(bào)頭分析單元101識(shí) 別該報(bào)頭的內(nèi)容，并根據(jù)識(shí)別的結(jié)果設(shè)置信號(hào)處理塊100中的信號(hào) 處理的操作模式。在這里，操作模式的設(shè)置包括信號(hào)處理是否將被 進(jìn)行的設(shè)定和在各種類(lèi)型的信號(hào)處理中所用的參數(shù)的設(shè)定。報(bào)頭分析單元101設(shè)置定序器(sequencer) 104的操作，使操作才莫式的設(shè) 置結(jié)果能在其上反映。被報(bào)頭分析單元101分離的報(bào)頭的內(nèi)容被傳 輸?shù)綀?bào)頭附加單元108。
如果包中的數(shù)據(jù)塊將作為報(bào)頭分析單元101進(jìn)行分析的結(jié)果而 被信號(hào)處理塊100處理，則由報(bào)頭分析單元101從報(bào)頭中分離的數(shù) 據(jù)塊以預(yù)定定時(shí)傳輸給行緩沖器102。行緩沖器102以水平行為單 位連續(xù)輸出傳輸來(lái)的圖像數(shù)據(jù)。由于行緩沖器102進(jìn)行的這種輸入 輸出，具有數(shù)據(jù)包的操作數(shù)配置的每一個(gè)數(shù)據(jù)塊能在行緩沖器102 的后級(jí)4皮處理為^皮恢復(fù)到具有圖2和圖3所示的二維結(jié)構(gòu)的局部圖 像數(shù)據(jù)位置。
在行緩沖器102的后級(jí)中，設(shè)置了預(yù)定數(shù)目的圖^f象信號(hào)處理單 元第1處理單元103-1 ~第n處理單元103-n。 4艮據(jù)作為信號(hào)處理 塊100的信號(hào)處理部件的實(shí)際結(jié)構(gòu)，所i殳置的圖^f象信號(hào)處理單元的 數(shù)目和由所設(shè)置的各個(gè)圖像信號(hào)處理單元進(jìn)4亍的圖^象處理可適當(dāng) 改變。在圖5中，作為圖4象信號(hào)處理單元的第1處理單元103-1-第n處理單元103-n被互相串聯(lián)起來(lái)。作為選擇，這些圖像信號(hào)處 理單元可以被相互并聯(lián)起來(lái)。串連和并聯(lián)也可一起使用。
寄存器105-1 ~寄存器105-n分別針對(duì)第1處理單元103-1 ~第 n處理單元103-ni殳置。
定序器104根據(jù)報(bào)頭分析單元101進(jìn)行的設(shè)置而分別對(duì)寄存器 105-1 ~寄存器105-n i殳置適當(dāng)?shù)膮⑵鄑。第1處理單元103-1 ~第n 處理單元103-n基于在對(duì)應(yīng)的寄存器中i殳置的參凄t進(jìn)4亍適當(dāng)?shù)膱D傳_ 處理#:作。在此，這些信號(hào)處理操作包括跳過(guò)實(shí)質(zhì)信號(hào)處理的才乘作。
這樣，已經(jīng)被第1處理單元103-1 ~第n處理單元103-n進(jìn)行了信 號(hào)處理的數(shù)據(jù)被輸出到報(bào)頭附加單元108。報(bào)頭附加單元108接收從報(bào)頭分析單元101傳輸?shù)膱?bào)頭的數(shù)據(jù) 和進(jìn)過(guò)圖像信號(hào)處理單元處理的圖像數(shù)據(jù)(初始數(shù)據(jù)塊)。在報(bào)頭 附加單元108中，報(bào)頭中的預(yù)定信息按照需要根據(jù)圖像信號(hào)處理單 元的信號(hào)處理結(jié)果而^皮重寫(xiě)。然后，才艮頭附加單元108將經(jīng)過(guò)圖像 信號(hào)處理單元處理的圖像數(shù)據(jù)轉(zhuǎn)換為作為包的操作數(shù)的塊數(shù)據(jù)結(jié) 構(gòu)并向其附加才艮頭，/人而進(jìn)^亍打包。通過(guò)這種方式生成的包經(jīng)由內(nèi) 部總線21^皮llr出。作為例子，描述分辨率轉(zhuǎn)換單元14中的信號(hào)處理塊100的梯: 作。在本例中，報(bào)頭分析單元101通過(guò)參考才艮頭中的處理路徑信息 來(lái)確定是否要進(jìn)行分辨率轉(zhuǎn)換。如果分辨率轉(zhuǎn)換的比特位置存儲(chǔ)的 是值"0"，也就是說(shuō)，如果該分辨率轉(zhuǎn)換應(yīng)該被跳過(guò)，則該包乂人才艮 頭附加單元108輸出到內(nèi)部總線21。在有些情況下，該包可能被丟 棄，且不輸出到內(nèi)部總線21。另一方面，如果分辨率轉(zhuǎn)換的比特位置上存儲(chǔ)的是值"1",則 應(yīng)該進(jìn)行分辨率轉(zhuǎn)換。這種情況下，進(jìn)一步參考?xì)v史信息中的分辨 率轉(zhuǎn)換的比特位置并確定該比特是"1"(處理已經(jīng)執(zhí)行)還是"0" (處理沒(méi)#皮#^亍)。如果該比特值表示處理已經(jīng)被執(zhí)行，信號(hào)處理塊100就不需要 再進(jìn)行信號(hào)處理。相應(yīng)地，與"0" ^皮存^f諸在處理^各徑信息中的分 辨率轉(zhuǎn)換的比特位置的情況下一樣，包被輸出到內(nèi)部總線21或被 丟棄。另一方面，如果出來(lái)還沒(méi)祐j丸4亍，凈艮頭分析單元101將該凄t 據(jù)塊傳輸?shù)叫芯彌_器102中，以進(jìn)行分辨率轉(zhuǎn)換。在這種情況下， 報(bào)頭分析單元101識(shí)別出關(guān)于存儲(chǔ)在命令標(biāo)記中的分辨率轉(zhuǎn)換的指 令，并依照識(shí)別的結(jié)果設(shè)置定序器104的參數(shù)。這里用到的參數(shù)包
括轉(zhuǎn)換后的圖像尺寸與基準(zhǔn)圖像尺寸的比率。根據(jù)這些設(shè)置參數(shù)，圖傳_信號(hào)處理系統(tǒng)(第1處理單元103-1 ~第n處理單元103-n )對(duì) 數(shù)據(jù)塊進(jìn)行針對(duì)分辨率轉(zhuǎn)換的像素稀化或內(nèi)插。報(bào)頭附加單元108從圖像信號(hào)處理系統(tǒng)接收已經(jīng)用以上述方式 進(jìn)行了分辨率轉(zhuǎn)換的數(shù)據(jù)塊。同樣，報(bào)頭附加單元108重寫(xiě)從例如 報(bào)頭分析單元101接收的報(bào)頭的數(shù)據(jù)，并在歷史信息的分辨率轉(zhuǎn)換 的比特位置中設(shè)置表示處理已經(jīng)進(jìn)行的"1"。然后，報(bào)頭附加單元 108在已經(jīng)進(jìn)行過(guò)了分辨率轉(zhuǎn)換的數(shù)據(jù)塊上加上重寫(xiě)的報(bào)頭，以重 新生成包并將它l敘出。下面還將描述報(bào)頭中的擴(kuò)展信息的使用式樣的例子。如上所述，擴(kuò)展信息是通過(guò)對(duì)數(shù)據(jù)塊進(jìn)行信號(hào)處理而獲得的信 息，并包括圖像復(fù)雜性的估計(jì)值。該圖像復(fù)雜性估計(jì)值能夠基于作 為數(shù)據(jù)塊的圖像信號(hào)的頻率特性而獲得。例如，圖像的內(nèi)容由于作 為頻率特性的高頻波段的水平變得更高而變得更復(fù)雜。相應(yīng)地，圖 像復(fù)雜性的估計(jì)值能基于數(shù)據(jù)塊的頻率特性而被計(jì)算出。圖像信號(hào)的這種頻率特性能在相機(jī)信號(hào)處理單元12中的預(yù)定 處理階^L中凈皮實(shí)際4t測(cè)出。相才幾信號(hào)處理單元12基于在數(shù)據(jù)塊的 處理過(guò)程中檢測(cè)出的頻率特性計(jì)算出上述的估計(jì)值。當(dāng)經(jīng)過(guò)信號(hào)處 理的數(shù)據(jù)作為包/人相才幾信號(hào)處理單元12輸出時(shí)，這個(gè)估計(jì)值凈皮存 儲(chǔ)為報(bào)頭中的擴(kuò)展信息。當(dāng)編碼單元15進(jìn)4亍壓縮/編碼時(shí)，就可以用到這個(gè)估計(jì)值。也 就是說(shuō)，編碼單元15中的信號(hào)處理塊100通過(guò)依照由報(bào)頭分析識(shí) 別出的估計(jì)值(圖像的復(fù)雜性)改變和設(shè)置壓縮率(編碼效率)來(lái) 進(jìn)行壓縮/編碼。相應(yīng)地，基于適于圖像內(nèi)容的壓縮率進(jìn)行壓縮/編 碼。
從上文所述的信號(hào)處理塊100的結(jié)構(gòu)和操作可知，信號(hào)處理塊 100使用作為處理單位存儲(chǔ)在各個(gè)包中的數(shù)據(jù)塊，即，大小為局部 水平^f象素凄tNx局部垂直^f象素^:N的局部圖傳^W居。通過(guò)這種方法， 用于臨時(shí)保存圖像數(shù)據(jù)的緩存器的大小相比以 一 個(gè)畫(huà)面的圖像數(shù) 據(jù)作為處理單位的典型圖像信號(hào)處理的結(jié)構(gòu)能明顯減小。關(guān)于該緩 存器，使用的是圖5所示的行緩存器102。如果一個(gè)畫(huà)面的圖像數(shù) 據(jù);陂用來(lái)作為處理單位，就需要具有對(duì)應(yīng)于一個(gè)畫(huà)面中水平^f象素凄t 目的大小的行緩存器。另一方面，在本實(shí)施例中，可使用對(duì)應(yīng)于較 小的像素?cái)?shù)目N的大小。盡管圖5沒(méi)有示出，在要求用來(lái)保存一個(gè) 處理單位的圖像數(shù)據(jù)的緩存器的情況下，對(duì)應(yīng)于 一 幀的大小不是必 需的，但在本實(shí)施例中使用的是對(duì)應(yīng)于數(shù)據(jù)塊的大小。通常，每個(gè)信號(hào)處理單元只有在預(yù)定處理單位的數(shù)據(jù)的處理完 成以后才能4妾受下一個(gè)處理。在4巴一個(gè)畫(huà)面的圖傳4t悟作為 一個(gè)處 理單^f立的情況下，如果一個(gè)畫(huà)面的凄W居的處理在一個(gè)J言號(hào)處理單元 中沒(méi)有結(jié)束，信號(hào)就不會(huì)被傳輸?shù)较乱浑A段的信號(hào)處理單元，并且 即使在前一階段已經(jīng)進(jìn)行完信號(hào)處理也要等待該處理的結(jié)束。也就 是說(shuō)，處理定時(shí)被調(diào)整而且因此處理的效率也會(huì)下降。另一方面， 在本實(shí)施例中，處理單位的數(shù)據(jù)大小很小，各個(gè)信號(hào)處理單元中處 理每個(gè)處理單位所占用的時(shí)間能凈皮明顯縮短。相應(yīng)地，上面所述的 降《氐處理效率的因素能^皮明顯減少。根據(jù)上面的描述，信號(hào)處理塊100基于存儲(chǔ)在各個(gè)包的報(bào)頭中 的信息確定信號(hào)處理的必要性。當(dāng)信號(hào)處理將被執(zhí)行時(shí)，信號(hào)處理 塊100基于存儲(chǔ)在報(bào)頭中的預(yù)定信息確定并設(shè)定處理，然后進(jìn)行該 信號(hào)處理。這意味著信號(hào)處理塊100能夠通過(guò)利用存儲(chǔ)在報(bào)頭中的 信息獨(dú)立地進(jìn)行適當(dāng)?shù)男盘?hào)處理操作。也就是說(shuō)，在根據(jù)本實(shí)施例 的圖^f象拍才聶裝置1中，相4幾信號(hào)處理單元12、分辨率轉(zhuǎn)換單元14 和編碼單元15的部分信號(hào)處理功能能夠獨(dú)立進(jìn)行信號(hào)處理。
通常，信號(hào)處理是否將被進(jìn)行的設(shè)置和在那些信號(hào)處理單元中的參數(shù)的設(shè)定由CPU進(jìn)行。相比于這種結(jié)構(gòu)，根據(jù)本實(shí)施例的在 控制單元16中的CPU不需要進(jìn)行用于控制信號(hào)處理單元的處理步 驟，因此處理負(fù)荷相應(yīng)地降4氐。如上所述，在本實(shí)施例中，圖像信號(hào)處理的效率在硬件資源和 處理效率方面得到^是高。例如當(dāng)前情況下的攝像機(jī)裝置的典型圖像拍攝裝置能夠拍攝 并記錄靜止圖像和普通的運(yùn)動(dòng)圖像。在拍才聶并記錄靜止圖像的過(guò)程 中，與普通照相機(jī)一樣，可以通過(guò)設(shè)置用于靜止圖像的拍攝模式并 進(jìn)行等同于按下快門(mén)鈕的操作來(lái)拍攝靜止圖像。同樣，已知存在具 有能夠在拍攝并記錄運(yùn)動(dòng)圖像的過(guò)程中通過(guò)進(jìn)行等同于按下快門(mén) 鈕的操作來(lái)拍攝并記錄靜止圖像(下文中稱(chēng)為運(yùn)動(dòng)/靜止圖像同時(shí)拍 攝)的功能的裝置。根據(jù)本實(shí)施例的圖像拍攝裝置l除了能夠拍攝并記錄運(yùn)動(dòng)圖像 以外也能夠拍攝并記錄靜止圖像，還能進(jìn)行上文所述的運(yùn)動(dòng)/靜止圖 像同時(shí)拍攝。下面，將描述在圖像拍攝裝置1進(jìn)行運(yùn)動(dòng)/靜止圖像同 時(shí)拍攝過(guò)程中進(jìn)行的數(shù)據(jù)處理的例子。圖6示意性示出了當(dāng)根據(jù)本實(shí)施例的圖像拍攝裝置1正在進(jìn)行 運(yùn)動(dòng)/靜止圖像同時(shí)拍攝時(shí)的運(yùn)動(dòng)和靜止圖像拍4聶定時(shí)的例子。參考圖6，々Ii殳用戶在時(shí)間tO進(jìn)^亍開(kāi)始拍才聶并記錄運(yùn)動(dòng)圖卩象的 操作。依照這個(gè)操作，圖像拍攝裝置1從時(shí)間t0到拍攝運(yùn)動(dòng)圖像的 結(jié)束連續(xù)拍攝并記錄運(yùn)動(dòng)圖像。在拍攝并記錄運(yùn)動(dòng)圖像的過(guò)程中， 圖4象拍^聶裝置1通過(guò)以上述方式進(jìn)行預(yù)定階革殳的預(yù)處理將，通過(guò)拍 攝獲得的圖像信號(hào)轉(zhuǎn)換成圖像數(shù)據(jù)。然后，圖像拍攝裝置l將圖像 數(shù)據(jù)打包，并在以后以包為單位適當(dāng)進(jìn)4亍預(yù)定的圖像信號(hào)處理。然
后，圖像拍攝裝置1將已經(jīng)執(zhí)行了圖像信號(hào)處理的圖像數(shù)據(jù)作為將 被記錄的運(yùn)動(dòng)圖像數(shù)據(jù)連續(xù)寫(xiě)入存儲(chǔ)介質(zhì)中，使運(yùn)動(dòng)圖像數(shù)據(jù)被存 儲(chǔ)于其中。在這種情況下，在時(shí)間to后的運(yùn)動(dòng)圖像的記錄過(guò)程中，用于拍攝靜止圖像的快門(mén)操作在時(shí)間tl、時(shí)間t2、時(shí)間t3和時(shí)間t4進(jìn)行。 如圖6所示，依照這些用于拍攝靜止圖像的快門(mén)操作，在快門(mén)操作 定時(shí)時(shí)拍4聶的圖l象作為"l爭(zhēng)止圖傳4t據(jù)^險(xiǎn)Picl、 Pic2、 Pic3和Pic4 獲得，其中每一個(gè)都對(duì)應(yīng)一個(gè)靜止圖像。例如，靜止圖像數(shù)據(jù)段 Picl、 Pic2、 Pic3和Pic4中的每一個(gè)能夠以通過(guò)相才幾信號(hào)處理單元 12進(jìn)行預(yù)處理獲得的幀為單位，從圖像數(shù)據(jù)中復(fù)制對(duì)應(yīng)于快門(mén)操作 定時(shí)的幀的圖像數(shù)據(jù)來(lái)獲得。如上文參照?qǐng)D6所述，依照運(yùn)動(dòng)/靜止圖像同時(shí)拍攝的操作，靜 止圖像的圖像數(shù)據(jù)和運(yùn)動(dòng)圖像的圖像數(shù)據(jù)能夠并行獲得。根據(jù)本實(shí) 施例的圖像拍攝裝置1將以上述方式獲得的運(yùn)動(dòng)和靜止圖像的圖像 數(shù)據(jù)適當(dāng)記錄在存儲(chǔ)介質(zhì)中。為了這個(gè)目的，需要對(duì)運(yùn)動(dòng)和靜止圖 像的圖^f象lt據(jù)進(jìn)行包括預(yù)處理、相4幾信號(hào)處理、分辨率轉(zhuǎn)換和壓縮 /解碼的足夠的圖像信號(hào)處理。根據(jù)本實(shí)施例的圖像拍攝裝置1對(duì)運(yùn) 動(dòng)和靜止圖像的圖像數(shù)據(jù)以下文的方式進(jìn)行信號(hào)處理。上文參照?qǐng)D2~圖6的信號(hào)處理是對(duì)運(yùn)動(dòng)圖像的圖像數(shù)據(jù)進(jìn)行 的。也就是說(shuō)，圖傳Jt據(jù)在相才幾信號(hào)處理單元12中凈皮轉(zhuǎn)換為數(shù)字 圖像數(shù)據(jù)，數(shù)字圖像數(shù)據(jù)被劃分成多個(gè)數(shù)據(jù)塊以被打包，并且此后 的信號(hào)處理都是通過(guò)以包為單位將數(shù)據(jù)輸入/輸出到信號(hào)處理單元 來(lái)進(jìn)行的。同樣，在靜止圖像的圖像數(shù)據(jù)中， 一個(gè)靜止圖像的圖像數(shù)據(jù)(圖 6中的各個(gè)靜止圖像數(shù)據(jù),殳Picl、 Pic2、 Pic3和Pic4)被分成多個(gè) 數(shù)據(jù)塊以4皮打包。 打包處理可作為靜止圖像的處理獨(dú)立于運(yùn)動(dòng)圖像的處理進(jìn)行， 但可以利用上述的對(duì)運(yùn)動(dòng)圖像處理過(guò)程中的對(duì)幀圖像的打包。也就 是說(shuō)，在運(yùn)動(dòng)/靜止圖像同時(shí)拍攝中，提取出在拍攝并記錄運(yùn)動(dòng)圖像 的過(guò)程中在快門(mén)操作定時(shí)時(shí)獲得的靜止圖像的圖像數(shù)據(jù)。在運(yùn)動(dòng)圖 像的拍攝和記錄過(guò)程中，在快門(mén)操作定時(shí)時(shí)拍攝的幀圖像能被用作 靜止圖像的圖像數(shù)據(jù)。在運(yùn)動(dòng)圖像的處理序列中，在上述快門(mén)操作 定時(shí)時(shí)拍才聶的幀圖〗象也#1分成多個(gè)塊并^皮打包。因此，通過(guò)復(fù)制以 用于靜止圖像的這種方式獲得的一幀的圖像數(shù)據(jù)，就能獲得經(jīng)過(guò)打 包的 一 個(gè)畫(huà)面的{爭(zhēng)止圖1象凄史據(jù)。如上所述，在本實(shí)施例中，運(yùn)動(dòng)圖像和靜止圖像的圖像數(shù)據(jù)在運(yùn)動(dòng)/靜止圖像同時(shí)拍攝中都被打包。然后，在圖7所示的定時(shí)時(shí)， 對(duì)通過(guò)這種方式獲得的包進(jìn)4于信號(hào)處理。在圖7中，(a)和圖(b)示出了分別針對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)和靜 止圖像的包的處理定時(shí)。該附圖中示出的處理定時(shí)是多個(gè)圖 <象信號(hào) 處理單元(相枳/[言號(hào)處J里單元12、分辨率4t4奐單元14和編》馬單元 15)中的一個(gè)的信號(hào)處理塊100進(jìn)4于的信號(hào)處理的定時(shí)。首先，描述運(yùn)動(dòng)圖像數(shù)據(jù)的處理定時(shí)。在圖7的(a)中的時(shí) 間t0，開(kāi)始包的順序輸入。相應(yīng)地，信號(hào)處理塊IOO持續(xù)地順序處 理輸入的包。在時(shí)間tl，圖^f象數(shù)據(jù)的包的輸入停止，因此信號(hào)處理 塊100相應(yīng)地停止對(duì)包的處理。在時(shí)間tl過(guò)后一#殳時(shí)間的時(shí)間t2 ， 又開(kāi)始運(yùn)動(dòng)圖像的包的輸入，因此對(duì)包的處理也相應(yīng)地開(kāi)始。也就 是i兌，連續(xù)處理預(yù)定凄t目的包的運(yùn)動(dòng)圖4象處理期間和包的處理暫停 的運(yùn)動(dòng)圖^象處理暫停交^奪出現(xiàn)。運(yùn)動(dòng)圖<象處理的暫停對(duì)應(yīng)于例如圖 《象信號(hào)的垂直消隱期間。
另一方面，圖7的(b)示出了根據(jù)本實(shí)施例的對(duì)靜止圖像進(jìn) 行的信號(hào)處理。也就是說(shuō)，靜止圖像凄t據(jù)利用不對(duì)運(yùn)動(dòng)圖〗象數(shù)據(jù)進(jìn) 行處理的運(yùn)動(dòng)圖像處理暫停，以包為單位按順序處理。例如，在運(yùn)動(dòng)/靜止圖像同時(shí)拍攝過(guò)程中，靜止圖像數(shù)據(jù)的常規(guī) 處理如下所述。根據(jù)拍攝并記錄運(yùn)動(dòng)圖像的過(guò)程中的快門(mén)操作，通過(guò)該操作拍 攝的圖像的圖像數(shù)據(jù)被提取出并被保存在內(nèi)部緩存器中。在拍攝并 記錄運(yùn)動(dòng)圖像結(jié)束以后以及在對(duì)應(yīng)的運(yùn)動(dòng)圖像數(shù)據(jù)被存儲(chǔ)在存儲(chǔ) 介質(zhì)中以后，對(duì)已經(jīng)保存在內(nèi)部緩存器中的靜止圖像凄t據(jù)進(jìn)行包括 相機(jī)信號(hào)處理和壓縮/編碼的信號(hào)處理，并將該靜止圖像數(shù)據(jù)存儲(chǔ)在 存儲(chǔ)介質(zhì)中。在靜止圖像數(shù)據(jù)的處理中，圖像拍攝裝置在拍攝運(yùn)動(dòng)圖像之后 進(jìn)行用于記錄數(shù)據(jù)的操作的時(shí)期相對(duì)比較長(zhǎng)。這樣的操作對(duì)用戶來(lái) 說(shuō)不舒服。同樣，圖像拍攝裝置在拍攝和記錄運(yùn)動(dòng)圖像后，也不會(huì) 對(duì)操作(例如記錄文件的再生)立刻作出反映，從而導(dǎo)致壓力。另一方面，在本實(shí)施例中，靜止圖像數(shù)據(jù)的處理能依照?qǐng)D7所 示的在信號(hào)處理定時(shí)時(shí)的運(yùn)動(dòng)圖像凄t據(jù)處理的進(jìn)展而^皮間歇地進(jìn) 行。相應(yīng)地，能在運(yùn)動(dòng)圖像的拍攝和記錄過(guò)程中完成靜止圖像數(shù)據(jù) 的處理。而且，即使靜止圖像數(shù)據(jù)的處理沒(méi)有完成，該處理也能在 運(yùn)動(dòng)圖像的拍攝和記錄過(guò)程中被完成一定程度，所以在運(yùn)動(dòng)圖像的 拍攝和記錄之后處理時(shí)間可以被減少。也就是說(shuō)，上述的不便可以:帔解決或者減輕。根據(jù)圖7所示，靜止圖像數(shù)據(jù)的包在運(yùn)動(dòng)圖像處理的暫停過(guò)程 中一皮處理。這明確地示出了運(yùn)動(dòng)圖4象處理的暫停就是靜止圖像tt據(jù) 的包的處理定時(shí)。實(shí)際上，才艮據(jù)實(shí)際獲得的作為運(yùn)動(dòng)圖^f象處理的暫
停的時(shí)間長(zhǎng)度與取決于實(shí)際信號(hào)處理的處理包所需的時(shí)間長(zhǎng)度之 間的關(guān)系，能處理兩個(gè)或者更多的靜止圖像數(shù)據(jù)的包。此外，當(dāng)盡可能多的包在運(yùn)動(dòng)圖像處理的暫停中#:處理時(shí)，靜止圖像數(shù)據(jù)的處 理速度能被提高，從而提高了處理的效率。在本實(shí)施例中，在圖像數(shù)據(jù)的信號(hào)處理進(jìn)行的同時(shí)，存儲(chǔ)在包 中的數(shù)據(jù)塊的大小與在打包時(shí)的大小不同。例如，當(dāng)分辨率轉(zhuǎn)換單 元14進(jìn)行分辨率轉(zhuǎn)換時(shí)。在這種情況下，在打包時(shí)組成數(shù)據(jù)塊的 像素的數(shù)目(像素?cái)?shù)據(jù)的凄t目)；陂轉(zhuǎn)換，因此處理后的數(shù)據(jù)塊的大 小依照轉(zhuǎn)換后的像素?cái)?shù)目而發(fā)生改變。例如，當(dāng)^f象素的^t目在分辨率轉(zhuǎn)換中增加時(shí)，存々者在包中的凝: 據(jù)塊的大小也增加。這種情況下，例如，如果數(shù)據(jù)塊的大小增加后 超過(guò)了能被處理的大小，用來(lái)接收并處理分辨率轉(zhuǎn)換后的包的信號(hào) 處理單元就不能接收該lt據(jù)塊。這會(huì)導(dǎo)致發(fā)生信號(hào)處理錯(cuò)誤的不便。在本實(shí)施例中，為了避免這種不《更，按圖8所示，包在分辨率 轉(zhuǎn)換單元14的信號(hào)處理塊ioo中#:重組。在圖8中，(a)示出了存儲(chǔ)例如具有大于分辨率轉(zhuǎn)換以前的大 小的數(shù)據(jù)塊的包。如從圖8的(a)到(b)的轉(zhuǎn)變，為了重組這個(gè) 包，初始數(shù)據(jù)塊被分成(n-l)個(gè)部分，每一部分都具有預(yù)定的大 小，以獲得分割數(shù)據(jù)塊#0~ #n。然后才艮頭#0~ #11#皮分別加到分 割^U居塊弁0 弁n, 乂人而生成了 (n-l)個(gè)包。此時(shí)，才艮頭#0~ 并n通過(guò)基于圖8的(a)所示的初始報(bào)頭的內(nèi)容來(lái)重寫(xiě)必要信息項(xiàng) 目而重新生成。例如，由于數(shù)據(jù)塊被分割，區(qū)域坐標(biāo)和區(qū)域大小相 對(duì)于初始?jí)K數(shù)據(jù)而改變(分割凄t據(jù)塊#的區(qū)域坐標(biāo)與初始H據(jù)塊的 相同)。因此，這些信息4艮據(jù)對(duì)應(yīng)的分割數(shù)據(jù)塊而^皮重寫(xiě)。
例如，這種重建包的處理可由圖5所示的才艮頭附加單元108來(lái) 進(jìn)行。在圖8所示的過(guò)程中，生成(a)中所示的包，然后該包4安 照(b)所示劃分以進(jìn)行重建。然而，該圖只是為了易于理解，(a) 中所示的包在才艮頭附加單元18進(jìn)行重建包的實(shí)際過(guò)程中并不需要 被臨時(shí)組成。也就是說(shuō)，通過(guò)利用從報(bào)頭分析單元IOI傳輸?shù)某跏?包和從第1~第n處理單元輸出的經(jīng)過(guò)處理的數(shù)據(jù)塊來(lái)生成分割數(shù) 才居塊和^j"應(yīng)的纟艮頭，然后相應(yīng);也生成包。下面，參照?qǐng)D9~圖11描述才艮據(jù)上述實(shí)施例的結(jié)構(gòu)的變型例。圖9示出了4言號(hào)處理塊100的變型例。在圖9中，與圖5中相 同的部件被表示為相同參考數(shù)字，并省略相應(yīng)的描述。在圖9所示的1言號(hào)處理塊100中，i殳置了解壓縮單元109和壓 縮單元110。進(jìn)行這種配置是為了當(dāng)數(shù)據(jù)塊通過(guò)傳輸路徑(內(nèi)部總 線21)傳輸時(shí)，存儲(chǔ)在其中的數(shù)據(jù)塊被壓縮。盡管圖中未示出，但 這個(gè)結(jié)構(gòu)是基于^f艮設(shè)包處理單元13通過(guò)在生成數(shù)據(jù)塊的過(guò)程中壓 縮數(shù)據(jù)塊進(jìn)行打包來(lái)實(shí)現(xiàn)的。例如，當(dāng)向如圖9所示的信號(hào)處理塊100輸入將被處理的包時(shí)， 報(bào)頭分析單元101從報(bào)頭中分離出數(shù)據(jù)塊，并將該數(shù)據(jù)塊輸出給解 壓縮單元109。解壓縮單元109 "t妄收該凄t據(jù)塊，并對(duì)應(yīng)于婆t據(jù)塊的 壓縮方法執(zhí)行解壓縮(解碼)。然后，已經(jīng)通過(guò)解壓縮恢復(fù)到壓縮 前的初始格式的數(shù)據(jù)塊被輸出到行緩沖器102，從而對(duì)其進(jìn)行信號(hào) 處理。壓縮單元110 4妻收已經(jīng)-故第1處理單元103-1 ~第n處理單 元103-n處理的ft據(jù)塊，并依照預(yù)定方法對(duì)其進(jìn)4于壓縮。然后，壓 縮單元110輸出壓縮后的數(shù)據(jù)塊到報(bào)頭附加單元108。報(bào)頭附加單 元108在經(jīng)過(guò)壓縮的數(shù)據(jù)塊上附加報(bào)頭，并對(duì)巴它輸出到內(nèi)部總線21 (傳輸路徑)。 通過(guò)這樣的信號(hào)處理塊100的結(jié)構(gòu)，在信號(hào)處理塊之間傳輸?shù)母鱾€(gè)包可以維持在其中的數(shù)據(jù)塊被壓縮的狀態(tài)。通過(guò)傳輸被壓縮的數(shù)據(jù)塊，如內(nèi)部總線21的傳輸路徑中的通信量被抑制，并提高了 傳輸效率。圖10示出了信號(hào)處理塊100的另一變型例。在圖10中，與圖 5相同的部件一皮表示為相同的參考^t字，并省略相應(yīng)的描述。圖10所示的信號(hào)處理塊100 ^皮配置為使得數(shù)據(jù)塊在包通過(guò)傳 輸路徑傳輸時(shí)被加密。為此，設(shè)置了解密單元111和加密單元112。例如，當(dāng)向圖10所示的信號(hào)處理塊100輸入要被處理的包時(shí)， 在報(bào)頭分析單元101中被從報(bào)頭中分離出的數(shù)據(jù)塊被輸入到解密單 元111。解密單元111解密輸入的數(shù)據(jù)塊。然后，經(jīng)過(guò)解密的凄史據(jù) 塊-故輸入到進(jìn)行預(yù)定處理的信號(hào)處理系統(tǒng)(行緩存器102和第1 ~ 第n處理單元103-1 ~ 103-n)。然后，力卩密單元112力口密從信號(hào)處 理系統(tǒng)輸出的數(shù)據(jù)塊，并將該數(shù)據(jù)塊輸出給報(bào)頭附加單元108。報(bào) 頭附加單元108給經(jīng)過(guò)加密的數(shù)據(jù)塊附加報(bào)頭，并將它輸出給內(nèi)部 總線21 (傳輸路徑)。通過(guò)這樣的信號(hào)處理塊100的結(jié)構(gòu)，在信號(hào)處理塊之間傳輸?shù)?各個(gè)包可以維持在其中的數(shù)據(jù)塊被加密的狀態(tài)。例如，即使當(dāng)經(jīng)由 傳輸路徑連接的信號(hào)處理單元被配置為黑盒子時(shí)，如果包通過(guò)傳輸 路徑傳輸，就能觀察到包的內(nèi)容。在這種情況下，也就是說(shuō)，在所 拍攝圖像的信號(hào)處理中要求安全和機(jī)密的情況下，圖10所示的結(jié) 構(gòu)能增加將被處理的圖像數(shù)據(jù)的內(nèi)容的安全性。圖9和圖10所示的采用壓縮/解壓縮或加密/解密的結(jié)構(gòu)也能尋皮 用于一個(gè)畫(huà)面的圖像數(shù)據(jù)或者更大單位的數(shù)據(jù)，以及多個(gè)單位的包 (數(shù)據(jù)塊)。然而，通過(guò)像本實(shí)施例一樣進(jìn)行打包從而以數(shù)據(jù)塊為
單位處理數(shù)據(jù)，用于壓縮/解壓縮或加密/解密的電路的規(guī)模被顯著 減小，這在成本和電路安裝尺寸方面具有優(yōu)勢(shì)。下面，參照?qǐng)D11描述另一變型例。圖11所示的結(jié)構(gòu)是圖1所 示結(jié)構(gòu)的變體。在圖11中，與圖1中相同的部件被表示為相同的 參考數(shù)字，并省略相應(yīng)的描述。在這個(gè)結(jié)構(gòu)中，設(shè)置了內(nèi)部存儲(chǔ)器22。如圖ll所示，內(nèi)部存 儲(chǔ)器22包括預(yù)定大小的SDRAM (同步動(dòng)力學(xué)隨機(jī)存取存儲(chǔ)器)或 SRAM(靜態(tài)RAM )，并經(jīng)由#1據(jù)總線連《1妾至相枳/[言號(hào)處理單元12、 分辨率轉(zhuǎn)換單元14和編碼單元15。也就是i兌，內(nèi)部存^f諸器22與對(duì) 包進(jìn)行信號(hào)處理的信號(hào)處理單元相連接。在該變型例中，包通過(guò)寫(xiě)入到內(nèi)部存儲(chǔ)器22和從內(nèi)部存儲(chǔ)器 22讀出在相才幾信號(hào)處理單元12、分辨率轉(zhuǎn)換單元14和編碼單元15 中傳輸，而不通過(guò)內(nèi)部總線21。依照這種包不通過(guò)內(nèi)部總線傳輸?shù)?結(jié)構(gòu)，在相4幾信號(hào)處理單元12中i殳置了包處理單元13。也就是"i兌， 內(nèi)部存儲(chǔ)器22及其寫(xiě)入/讀出構(gòu)成包的傳輸路徑。通過(guò)這種結(jié)構(gòu)，纟皮控制單元16 (CPU)用來(lái)控制其他部件的通 信3各徑和用來(lái)傳輸包的路徑相互獨(dú)立。相應(yīng)地，在控制單元16側(cè) 的控制系統(tǒng)中的通信和用于傳輸包的通信中，通信量能被減少，從 而才是高了歲文率。本發(fā)明并不僅限于根據(jù)上述實(shí)施例和變型例的結(jié)構(gòu)，還能進(jìn)行 適當(dāng)?shù)男薷?。例如，在上述?shí)施例中，攝像機(jī)被用作圖像拍攝裝置， 但也可以使用如數(shù)碼照相機(jī)的其他類(lèi)型的圖像拍攝裝置。在上面所 述的實(shí)施例中，對(duì)包進(jìn)行的圖像信號(hào)處理根據(jù)例如攝像機(jī)的圖像拍 攝裝置的結(jié)構(gòu)，包括相機(jī)信號(hào)處理、分辨率轉(zhuǎn)換和編碼的部件。然 而，也可4丸行其他類(lèi)型的處理。同樣，本發(fā)明可應(yīng)用于除圖^f象拍攝
裝置以外的具有圖像信號(hào)處理功能的裝置。而且，本發(fā)明的理念可 應(yīng)用于對(duì)除了圖^象數(shù)據(jù)外如音頻lt據(jù)進(jìn)4亍的信號(hào)處理。應(yīng)該了解，對(duì)于本領(lǐng)域的技術(shù)人員來(lái)說(shuō)，本發(fā)明可以有各種更 改和變化。凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同 替換、改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
權(quán)利要求
1.一種圖像信號(hào)處理裝置，包括局部圖像數(shù)據(jù)塊獲得裝置，用于通過(guò)在預(yù)定位置將與具有預(yù)定數(shù)目的水平像素和垂直像素的預(yù)定畫(huà)面相對(duì)應(yīng)的圖像數(shù)據(jù)劃分成多個(gè)圖像數(shù)據(jù)部分來(lái)獲得局部圖像數(shù)據(jù)塊，所述圖像數(shù)據(jù)部分具有預(yù)定數(shù)目的局部水平像素和局部垂直像素；包生成裝置，用于生成包，每個(gè)所述包存儲(chǔ)所述局部圖像數(shù)據(jù)塊中的一個(gè)；以及一個(gè)或多個(gè)信號(hào)處理裝置，用于從所述圖像數(shù)據(jù)通過(guò)其被傳輸?shù)膫鬏斅窂浇邮账霭源鎯?chǔ)在所述包中的局部圖像數(shù)據(jù)塊為單位執(zhí)行信號(hào)處理，并將所述圖像數(shù)據(jù)以包的形式輸出到所述傳輸路徑。
2. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，其中，所述包生成裝置生成的包中的每一個(gè)都包括所述 局部圖像數(shù)據(jù)塊中的一個(gè)附加報(bào)頭，以及其中，所述報(bào)頭具有用于存儲(chǔ)位置信息的區(qū)域，所述位 置信息能夠指定所述包的所述局部圖傳H據(jù)塊在初始畫(huà)面的 圖像凄t據(jù)中的位置。
3. 根據(jù)權(quán)利要求2所述的圖像信號(hào)處理裝置，進(jìn)一步包括圖像信號(hào)恢復(fù)裝置，用于通過(guò)參考所述位置信息指定從 所述包中提取的所述局部圖像數(shù)據(jù)塊的位置并組合所述局部 圖像數(shù)據(jù)塊，生成與所述初始圖傳4t據(jù)相對(duì)應(yīng)的經(jīng)過(guò)信號(hào)處理 的圖像數(shù)據(jù)。
4. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，其中，所述包生成裝置生成的包中的每一個(gè)都包括所述 局部圖像數(shù)據(jù)塊中的一個(gè)附加報(bào)頭，以及其中，所述報(bào)頭存儲(chǔ)有能夠表示所述包的所述局部圖像 數(shù)據(jù)塊的大小的大小信息。
5. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，其中，所述包生成裝置生成的包中的每一個(gè)都包4舌所述 局部圖像數(shù)據(jù)塊中的一個(gè)附加報(bào)頭，以及其中，所述報(bào)頭具有用于存儲(chǔ)參數(shù)指定信息的區(qū)域，所 述參數(shù)指定信息能夠指定針對(duì)所述信號(hào)處理裝置對(duì)所述包的 所述局部圖^象數(shù)據(jù)塊執(zhí)行的預(yù)定處理而設(shè)置的參數(shù)。
6. 根據(jù)權(quán)利要求5所述的圖像信號(hào)處理裝置，其中，所述信號(hào)處理裝置在對(duì)存儲(chǔ)于所述包中的所述局 部圖像數(shù)據(jù)塊執(zhí)行信號(hào)處理之前，通過(guò)參考存儲(chǔ)在所述包的所 述報(bào)頭中的所述參數(shù)指定信息確定將要進(jìn)行的信號(hào)處理。
7. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，其中，所述包生成裝置生成的包中的每一個(gè)都包:fe所述 局部圖像數(shù)據(jù)塊中的一個(gè)附加報(bào)頭，以及其中，所述報(bào)頭具有用于將指示所述信號(hào)處理裝置對(duì)所 述包的所述局部圖像數(shù)據(jù)塊執(zhí)行的信號(hào)處理的多種類(lèi)型的信 號(hào)處理指定信息與所述信號(hào)處理的順序一起存儲(chǔ)的區(qū)域。
8. 根據(jù)權(quán)利要求7所述的圖4象信號(hào)處理裝置，其中，所述信號(hào)處理裝置參考存儲(chǔ)在所述包的所述報(bào)頭 中的所述信號(hào)處理指定信息，確定是否對(duì)存儲(chǔ)在所述包中的所 述局部圖像數(shù)據(jù)塊進(jìn)行各種類(lèi)型的信號(hào)處理。
9. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，其中，所述包生成裝置生成的包中的每一個(gè)都包括所述 局部圖像數(shù)據(jù)塊中的一個(gè)附加報(bào)頭，以及其中，所述報(bào)頭具有用于存儲(chǔ)指示所述信號(hào)處理裝置對(duì) 所述包的所述局部圖傳4t據(jù)塊進(jìn)^f于的各種類(lèi)型的信號(hào)處理的 進(jìn)展的進(jìn)展指示信息。
10. 根據(jù)權(quán)利要求9所述的圖像信號(hào)處理裝置，其中，所述信號(hào)處理裝置基于存儲(chǔ)在所輸入的包中的所 述進(jìn)展指示信息是否表示已經(jīng)執(zhí)行了所述信號(hào)處理，確定是否 對(duì)存儲(chǔ)在所述包中的所述局部圖像數(shù)據(jù)塊進(jìn)行各種類(lèi)型的信 號(hào)處理。
11. 根據(jù)權(quán)利要求10所述的圖像信號(hào)處理裝置，其中，所述信號(hào)處理裝置根據(jù)已經(jīng)對(duì)存儲(chǔ)在所述包中的 所述局部圖像數(shù)據(jù)塊執(zhí)行了所述信號(hào)處理，重寫(xiě)存儲(chǔ)在所述包 中的所述進(jìn)展指示信息。
12. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，其中，所述包生成裝置生成的包中的每一個(gè)都包括所述 局部圖像數(shù)據(jù)塊中的一個(gè)附加報(bào)頭，以及其中，所述報(bào)頭具有用于存儲(chǔ)處理結(jié)果信息的區(qū)域，所 述處理結(jié)果信息包括預(yù)定的一個(gè)信號(hào)處理裝置對(duì)所述包的所 述局部圖像數(shù)據(jù)執(zhí)行所述信號(hào)處理的結(jié)果而獲得的預(yù)定內(nèi)容。
13. 根據(jù)權(quán)利要求12所述的圖像信號(hào)處理裝置，其中，所述信號(hào)處理裝置根據(jù)已經(jīng)對(duì)存儲(chǔ)在所述包中的 所述局部圖像數(shù)據(jù)執(zhí)行了所述信號(hào)處理，重寫(xiě)存儲(chǔ)在所述包中 的所述處理結(jié)果信息。
14. 根據(jù)權(quán)利要求12所述的圖像信號(hào)處理裝置，其中，所述信號(hào)處理裝置基于存儲(chǔ)在所輸入的包中的所 述處理結(jié)果信息，改變并i殳置用在由所述信號(hào)處理裝置4丸行的 預(yù)定信號(hào)處理中的預(yù)定參數(shù)。
15. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，其中，所述包生成裝置能夠基于運(yùn)動(dòng)圖^f象的一個(gè)畫(huà)面的 圖像數(shù)據(jù)生成用于所述運(yùn)動(dòng)圖像的包和基于靜止圖像的一個(gè) 畫(huà)面的圖像數(shù)據(jù)生成用于所述靜止圖像的包，以及其中，所述信號(hào)處理裝置在對(duì)存儲(chǔ)在用于所述運(yùn)動(dòng)圖像 的包中的所述局部圖像凄t據(jù)塊沖丸4亍所述信號(hào)處理的暫停期間， 對(duì)存儲(chǔ)在用于所述靜止圖^f象的包中的一個(gè)中的所述局部圖 <象 數(shù)據(jù)塊執(zhí)行所述信號(hào)處理。
16. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，其中，所述包生成裝置通過(guò)劃分由所述信號(hào)處理裝置中 預(yù)定的 一 個(gè)已經(jīng)執(zhí)行了預(yù)定信號(hào)處理的局部圖像數(shù)據(jù)塊來(lái)獲 得預(yù)定數(shù)目的分割局部圖像數(shù)塊，并將基于存儲(chǔ)在包括初始局 部圖傳_ ^:據(jù)塊的所述包中的所述才艮頭而生成的凈艮頭附加至所 述分割局部圖像數(shù)據(jù)塊，從而生成分割包。
17. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，進(jìn)一步包括局部圖像數(shù)據(jù)塊壓縮/解壓縮裝置，用于當(dāng)存儲(chǔ)在所述包 中的所述局部圖像數(shù)據(jù)塊將要通過(guò)所述傳輸路徑傳輸時(shí)執(zhí)行 壓縮，而當(dāng)所述信號(hào)處理裝置要對(duì)存儲(chǔ)在所述包中的所述局部 圖像數(shù)據(jù)塊執(zhí)4于信號(hào)處理時(shí)執(zhí)行對(duì)應(yīng)于所述壓縮的解壓縮。
18. 根據(jù)權(quán)利要求1所述的圖像信號(hào)處理裝置，進(jìn)一步包括局部圖像凝:據(jù)塊加密/解密裝置，用于當(dāng)存儲(chǔ)在所述包中 的所述局部圖像數(shù)據(jù)塊將要通過(guò)所述傳輸路徑傳輸時(shí)執(zhí)行加 密，而當(dāng)所述信號(hào)處理裝置要對(duì)存儲(chǔ)在所述包中的所述局部圖 l象凄t據(jù)塊執(zhí)^f于信號(hào)處理時(shí)執(zhí)行對(duì)應(yīng)于所述加密的解密。
19. 一種圖像信號(hào)處理方法，包括以下步驟通過(guò)在預(yù)定位置將與具有預(yù)定數(shù)目的水平像素和垂直像 素的預(yù)定畫(huà)面相對(duì)應(yīng)的圖像數(shù)據(jù)劃分成多個(gè)圖像數(shù)據(jù)部分來(lái) 獲得局部圖像數(shù)據(jù)塊，所述局部圖像數(shù)據(jù)塊具有預(yù)定數(shù)目的局 部水平Y(jié)象素和局部垂直^f象素；生成包，每個(gè)所述包存儲(chǔ)所述局部圖像數(shù)據(jù)塊中的一個(gè)；以及從所述圖像數(shù)據(jù)通過(guò)其被傳輸?shù)膫鬏斅窂浇邮账霭?以存儲(chǔ)在所述包中的局部圖像數(shù)據(jù)塊為單位執(zhí)行信號(hào)處理，并 將所述圖像數(shù)據(jù)以包的形式輸出到所述傳輸路徑。
20. —種圖〗象處理裝置，包括局部圖像數(shù)據(jù)塊獲得單元，故配置為用于通過(guò)在預(yù)定位 置將與具有預(yù)定數(shù)目的水平像素和垂直像素的預(yù)定畫(huà)面相對(duì)應(yīng)的圖像數(shù)據(jù)劃分成多個(gè)圖像數(shù)據(jù)部分來(lái)獲得局部圖像數(shù)據(jù) 塊，所述圖像數(shù)據(jù)部分具有預(yù)定數(shù)目的局部水平像素和局部垂 直像素；包生成單元，故配置為生成包，每個(gè)所述包存^f諸所述局 部圖像凄t據(jù)塊中的一個(gè)；以及一個(gè)或多個(gè)信號(hào)處理單元，；故配置為乂人所述圖傳4史據(jù)通 過(guò)其被傳輸?shù)膫鬏斅窂浇邮账霭源鎯?chǔ)在所述包中的局部 圖像數(shù)據(jù)塊為單位執(zhí)行信號(hào)處理，并將所述圖像數(shù)據(jù)以包的形 式輸出到所述傳輸路徑。
全文摘要
一種圖像信號(hào)處理裝置，包括局部圖像數(shù)據(jù)塊獲得裝置，被配置為通過(guò)在預(yù)定位置將與具有預(yù)定數(shù)目的水平像素和垂直像素的預(yù)定畫(huà)面相對(duì)應(yīng)的圖像數(shù)據(jù)劃分成多個(gè)圖像數(shù)據(jù)部分來(lái)獲得局部圖像數(shù)據(jù)塊，這些圖像數(shù)據(jù)部分具有預(yù)定數(shù)目的局部水平像素和局部垂直像素；包生成裝置，被配置為生成分別存儲(chǔ)局部圖像數(shù)據(jù)塊中的一個(gè)的包；以及一個(gè)或多個(gè)信號(hào)處理裝置，被配置為從圖像數(shù)據(jù)通過(guò)其被傳輸?shù)膫鬏斅窂浇邮瞻?，以存?chǔ)在包中的局部圖像數(shù)據(jù)塊為單位執(zhí)行信號(hào)處理，并將圖像數(shù)據(jù)以包的形式輸出到傳輸路徑。
文檔編號(hào)H04N7/16GK101119490SQ20071013804
公開(kāi)日2008年2月6日 申請(qǐng)日期2007年8月2日 優(yōu)先權(quán)日2006年8月2日
發(fā)明者中島健, 坂井謙一, 山田德一郎, 李志文 申請(qǐng)人:索尼株式會(huì)社