專(zhuān)利名稱(chēng):圖像處理設(shè)備及其控制方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種用于將圖像數(shù)據(jù)的幀頻轉(zhuǎn)換為更高幀頻的圖像轉(zhuǎn)換技術(shù)。
技術(shù)背景
傳統(tǒng)上,作為用于抑制在通過(guò)顯示設(shè)備顯示視頻期間所產(chǎn)生的運(yùn)動(dòng)模糊 (motion blur)或閃爍(flicker)的技術(shù),例如日本特開(kāi)2009-042482號(hào)公報(bào)和日本特開(kāi) 2009-038620號(hào)公報(bào)討論了使用用于根據(jù)圖像數(shù)據(jù)生成具有不同頻率分量的子幀的頻率分 離法和運(yùn)動(dòng)補(bǔ)償?shù)囊曨l顯示方法。
這種視頻顯示方法根據(jù)輸入圖像數(shù)據(jù),生成強(qiáng)調(diào)高頻分量的高頻強(qiáng)調(diào)圖像數(shù)據(jù)和 包括低頻分量且通過(guò)進(jìn)行運(yùn)動(dòng)補(bǔ)償以抑制高頻分量而獲取的低頻插值圖像數(shù)據(jù),并交替地 顯示這些圖像數(shù)據(jù)。該技術(shù)使得能夠抑制閃爍并降低運(yùn)動(dòng)模糊。
然而,在日本特開(kāi)2009-042482號(hào)公報(bào)所討論的視頻顯示方法中,運(yùn)動(dòng)補(bǔ)償可能 導(dǎo)致運(yùn)動(dòng)矢量的錯(cuò)誤檢測(cè)。在這種情況下,錯(cuò)誤檢測(cè)到的運(yùn)動(dòng)矢量生成了沒(méi)有反映圖像的 運(yùn)動(dòng)的低頻插值圖像數(shù)據(jù),由此使得可以看到視頻缺陷。發(fā)明內(nèi)容
根據(jù)本發(fā)明的一方面,一種圖像處理設(shè)備,用于根據(jù)針對(duì)各幀所輸入的圖像數(shù)據(jù) 生成強(qiáng)調(diào)高頻分量的高頻強(qiáng)調(diào)圖像數(shù)據(jù)以及使用運(yùn)動(dòng)補(bǔ)償?shù)牡皖l插值圖像數(shù)據(jù),并將所述 高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述低頻插值圖像數(shù)據(jù)作為子幀輸出。所述圖像處理設(shè)備包括計(jì)算 單元,用于計(jì)算在所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量的評(píng)價(jià)值;以及控制單元,用于基于 計(jì)算出的評(píng)價(jià)值,控制所述低頻插值圖像數(shù)據(jù)的亮度以使其相對(duì)于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù) 而降低。
根據(jù)本發(fā)明的另一方面,一種圖像處理設(shè)備,包括輸入單元,用于輸入每單位時(shí) 間m幀的圖像數(shù)據(jù),其中m為自然數(shù);濾波單元,用于根據(jù)輸入的圖像數(shù)據(jù)至少生成高頻強(qiáng) 調(diào)圖像數(shù)據(jù);幀間插值單元,用于生成經(jīng)過(guò)運(yùn)動(dòng)補(bǔ)償且在時(shí)間上處于輸入的圖像數(shù)據(jù)和通 過(guò)之前的幀輸入的圖像數(shù)據(jù)之間的中間位置的低頻插值圖像數(shù)據(jù);計(jì)算單元,用于計(jì)算在 所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量的評(píng)價(jià)值;控制單元,用于基于計(jì)算出的評(píng)價(jià)值,控制 所述低頻插值圖像數(shù)據(jù)的亮度以使其相對(duì)于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而降低;以及輸出單 元,用于將亮度進(jìn)行了控制的所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述低頻插值圖像數(shù)據(jù)作為每單位 時(shí)間an幀的圖像數(shù)據(jù)交替輸出。
根據(jù)本發(fā)明的另一方面,一種圖像處理設(shè)備的控制方法,所述圖像處理設(shè)備根據(jù) 針對(duì)各幀所輸入的圖像數(shù)據(jù)生成強(qiáng)調(diào)高頻分量的高頻強(qiáng)調(diào)圖像數(shù)據(jù)以及使用運(yùn)動(dòng)補(bǔ)償?shù)?低頻插值圖像數(shù)據(jù),并將所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述低頻插值圖像數(shù)據(jù)作為子幀輸出, 所述控制方法包括以下步驟計(jì)算步驟,用于計(jì)算在所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量 的評(píng)價(jià)值;以及控制步驟,用于基于計(jì)算出的評(píng)價(jià)值,控制所述低頻插值圖像數(shù)據(jù)的亮度以 使其相對(duì)于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而降低。
根據(jù)本發(fā)明的又一方面,一種圖像處理設(shè)備的控制方法,包括輸入每單位時(shí)間m 幀的圖像數(shù)據(jù),其中m為自然數(shù);根據(jù)輸入的圖像數(shù)據(jù)至少生成高頻強(qiáng)調(diào)圖像數(shù)據(jù);生成經(jīng) 過(guò)運(yùn)動(dòng)補(bǔ)償且在時(shí)間上處于輸入的圖像數(shù)據(jù)和通過(guò)之前的幀輸入的圖像數(shù)據(jù)之間的中間 位置的低頻插值圖像數(shù)據(jù);計(jì)算在所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量的評(píng)價(jià)值;基于計(jì) 算出的評(píng)價(jià)值,控制所述低頻插值圖像數(shù)據(jù)的亮度以使其相對(duì)于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而 降低;以及將亮度進(jìn)行了控制的所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述低頻插值圖像數(shù)據(jù)作為每單 位時(shí)間an幀的圖像數(shù)據(jù)交替輸出。
根據(jù)本發(fā)明的又一方面,一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其存儲(chǔ)用于使計(jì)算機(jī)進(jìn)行上 述控制方法的指令的計(jì)算機(jī)可執(zhí)行程序。
通過(guò)以下參考附圖對(duì)典型實(shí)施例的詳細(xì)說(shuō)明,本發(fā)明的其它特征和方面將變得明Mo
包含在說(shuō)明書(shū)中并構(gòu)成說(shuō)明書(shū)一部分的附圖示出了本發(fā)明的典型實(shí)施例、特征和 方面,并與說(shuō)明書(shū)一起用來(lái)解釋本發(fā)明的原理。
圖1是示出圖像處理設(shè)備的主要部分的結(jié)構(gòu)的框圖。
圖2是示出圖像處理設(shè)備中的處理的流程圖。
圖3是詳細(xì)示出運(yùn)動(dòng)補(bǔ)償單元的處理的流程圖。
圖4示出評(píng)價(jià)值Tme和所設(shè)置的亮度rSub2之間的關(guān)系。
圖5是示出圖像處理設(shè)備的主要部分的結(jié)構(gòu)的框圖。
圖6是示出圖像處理設(shè)備中的處理的流程圖。
圖7示出亮度差值D和所設(shè)置的亮度值rSub2之間的關(guān)系。
圖8是示出圖像處理設(shè)備的主要部分的結(jié)構(gòu)的框圖。
圖9是示出圖像處理設(shè)備中的處理的流程圖。
圖10是示出可應(yīng)用于本發(fā)明各典型實(shí)施例的圖像處理設(shè)備的計(jì)算機(jī)的硬件結(jié)構(gòu) 示例的框圖。
圖IlA示出當(dāng)錯(cuò)誤地檢測(cè)到運(yùn)動(dòng)矢量時(shí)的輸出及其可視圖像(不存在亮度控制)。
圖IlB示出當(dāng)錯(cuò)誤地檢測(cè)到運(yùn)動(dòng)矢量時(shí)的輸出及其可視圖像(存在亮度控制)。
圖12示出當(dāng)在低對(duì)比度邊緣錯(cuò)誤地檢測(cè)到運(yùn)動(dòng)矢量時(shí)的輸出及其可視圖像。
圖13是示出亮度控制單元的不同結(jié)構(gòu)的框圖。
具體實(shí)施方式
下面將參考附圖詳細(xì)說(shuō)明本發(fā)明的各種典型實(shí)施例、特征和方面。典型實(shí)施例中 所述的結(jié)構(gòu)僅是示例,并且所示的結(jié)構(gòu)絕對(duì)無(wú)意限制本發(fā)明。
圖1是示出根據(jù)第一典型實(shí)施例的圖像處理設(shè)備101的主要部分的結(jié)構(gòu)的框圖。
幀存儲(chǔ)器102存儲(chǔ)至少一幀的輸入圖像數(shù)據(jù),以使得以下所述的運(yùn)動(dòng)補(bǔ)償單元 103能夠在多個(gè)幀中檢測(cè)運(yùn)動(dòng)矢量。第一典型實(shí)施例示出了從2個(gè)連續(xù)幀中檢測(cè)運(yùn)動(dòng)矢量 的示例。然而,運(yùn)動(dòng)補(bǔ)償單元103還可以從多個(gè)幀中檢測(cè)運(yùn)動(dòng)矢量。運(yùn)動(dòng)補(bǔ)償單元103基 于輸入圖像數(shù)據(jù)和存儲(chǔ)在幀存儲(chǔ)器102中的過(guò)去的圖像數(shù)據(jù)(第一典型實(shí)施例為輸入圖像數(shù)據(jù)的前一幀的圖像數(shù)據(jù)),檢測(cè)運(yùn)動(dòng)矢量。運(yùn)動(dòng)補(bǔ)償單元103對(duì)運(yùn)動(dòng)進(jìn)行補(bǔ)償,以生成在 時(shí)間上對(duì)幀間的圖像運(yùn)動(dòng)進(jìn)行了插值的插值圖像數(shù)據(jù)。
評(píng)價(jià)單元104估計(jì)由運(yùn)動(dòng)補(bǔ)償單元103檢測(cè)到的運(yùn)動(dòng)矢量的可靠性,以將評(píng)價(jià)值 輸出至亮度控制單元106。濾波單元105抑制輸入圖像數(shù)據(jù)和插值圖像數(shù)據(jù)的高頻分量。 在第一典型實(shí)施例中,濾波單元105通過(guò)使用低通濾波器(LPF),輸出輸入圖像數(shù)據(jù)的高頻 分量已被抑制的低頻圖像數(shù)據(jù)和插值圖像數(shù)據(jù)的高頻分量已被抑制的低頻插值圖像數(shù)據(jù)。 亮度控制單元106基于從評(píng)價(jià)單元104輸出的評(píng)價(jià)值,對(duì)已通過(guò)濾波單元105抑制了高頻 分量的低頻圖像數(shù)據(jù)和低頻插值圖像數(shù)據(jù)的亮度進(jìn)行控制。
減法器107計(jì)算輸入圖像數(shù)據(jù)和已通過(guò)亮度控制單元106調(diào)制了亮度的低頻圖像 數(shù)據(jù)之間的差。該處理使得能夠計(jì)算輸入圖像數(shù)據(jù)的高頻分量。加法器108將輸入圖像數(shù) 據(jù)和由減法器107計(jì)算出的高頻分量相加在一起,以生成強(qiáng)調(diào)高頻分量的圖像數(shù)據(jù)。減法 器107計(jì)算插值圖像數(shù)據(jù)和已通過(guò)亮度控制單元106調(diào)制了亮度的低頻插值圖像數(shù)據(jù)之間 的差。該處理使得能夠計(jì)算插值圖像數(shù)據(jù)的高頻分量。加法器108將插值圖像數(shù)據(jù)和由減 法器107計(jì)算出的高頻分量相加在一起,以生成強(qiáng)調(diào)高頻分量的圖像數(shù)據(jù)。
利用上述結(jié)構(gòu),2個(gè)切換器109和110針對(duì)各子幀進(jìn)行切換,從而以2倍速驅(qū)動(dòng)來(lái) 輸出并顯示強(qiáng)調(diào)輸入圖像數(shù)據(jù)的高頻分量的高頻強(qiáng)調(diào)圖像數(shù)據(jù)(第一子幀)和插值圖像數(shù) 據(jù)的高頻分量已被抑制的低頻插值圖像數(shù)據(jù)(第二子幀)。
圖2是示出根據(jù)第一典型實(shí)施例的處理的流程圖。在步驟S201,將一幀圖像數(shù)據(jù) 輸入至幀存儲(chǔ)器102和運(yùn)動(dòng)補(bǔ)償單元103。在步驟S202,幀存儲(chǔ)器102存儲(chǔ)一幀的輸入圖 像數(shù)據(jù),以將該圖像數(shù)據(jù)輸出至運(yùn)動(dòng)補(bǔ)償單元103。因此,運(yùn)動(dòng)補(bǔ)償單元103接收輸入圖像 數(shù)據(jù)和前一幀的圖像數(shù)據(jù)。在步驟S203,運(yùn)動(dòng)補(bǔ)償單元103基于輸入圖像數(shù)據(jù)和前一幀的 圖像數(shù)據(jù)來(lái)生成插值圖像數(shù)據(jù)。
圖3是詳細(xì)示出在運(yùn)動(dòng)補(bǔ)償單元103生成插值圖像數(shù)據(jù)的流程圖。在步驟S301, 將輸入圖像數(shù)據(jù)和前一幀的圖像數(shù)據(jù)輸入至運(yùn)動(dòng)補(bǔ)償單元103。在步驟S302,運(yùn)動(dòng)補(bǔ)償單 元103將輸入圖像數(shù)據(jù)分割為處理塊。處理塊可被任意設(shè)置。該步驟在以像素為單位計(jì)算 運(yùn)動(dòng)矢量時(shí)是不需要的。在步驟S303,運(yùn)動(dòng)補(bǔ)償單元103設(shè)置用于檢測(cè)運(yùn)動(dòng)矢量的搜索范 圍。該搜索范圍可被任意設(shè)置。對(duì)于該搜索范圍,可以設(shè)置全體幀,或者可以設(shè)置比處理對(duì) 象塊大的任意大小。
在步驟S304,運(yùn)動(dòng)補(bǔ)償單元103計(jì)算處理對(duì)象塊和步驟S303中設(shè)置的搜索范圍內(nèi) 的各參考?jí)K之間的差值絕對(duì)值和。在步驟S305,判斷運(yùn)動(dòng)補(bǔ)償單元103是否完成了處理對(duì) 象塊和所設(shè)置的搜索范圍內(nèi)的各參考?jí)K之間的差值絕對(duì)值和的計(jì)算。當(dāng)判斷為未完成差值 絕對(duì)值和的計(jì)算(步驟S305中為“否”)時(shí),重復(fù)步驟S303和S304,直到完成了處理對(duì)象 塊和所設(shè)置的搜索范圍內(nèi)的各參考?jí)K之間的差值絕對(duì)值和的計(jì)算為止。當(dāng)判斷為完成了對(duì) 搜索范圍內(nèi)的所有參考?jí)K的差值絕對(duì)值和的計(jì)算(步驟S305中為“是”)時(shí),處理進(jìn)入步驟 S306,以對(duì)計(jì)算出的差值絕對(duì)值和進(jìn)行排序。
在步驟S307,運(yùn)動(dòng)補(bǔ)償單元103將與步驟S306中排序后的差值絕對(duì)值和的最小 值相對(duì)應(yīng)的參考?jí)K設(shè)置為檢測(cè)到的運(yùn)動(dòng)矢量VME。在步驟S308,運(yùn)動(dòng)補(bǔ)償單元103根據(jù)步驟 S307中計(jì)算出的運(yùn)動(dòng)矢量Vme來(lái)計(jì)算插值矢量VK。生成時(shí)間上位于圖像數(shù)據(jù)間的中央處的 圖像作為插值圖像數(shù)據(jù),因此插值矢量Vsc是運(yùn)動(dòng)矢量Vme的一半。當(dāng)將運(yùn)動(dòng)矢量Vme計(jì)算為\c時(shí),或者當(dāng)運(yùn)動(dòng)矢量Vme較大時(shí),設(shè)置插值矢量Vk = 0。當(dāng)再現(xiàn)環(huán)境是快進(jìn)或倒回等 的特殊再現(xiàn)時(shí),可以設(shè)置插值矢量Vmc = 0。
在步驟S309,運(yùn)動(dòng)補(bǔ)償單元103根據(jù)步驟S308中計(jì)算出的插值矢量VMe來(lái)生成插 值圖像數(shù)據(jù)。
因此,在圖2所示的步驟S203的運(yùn)動(dòng)補(bǔ)償中,運(yùn)動(dòng)補(bǔ)償單元103基于輸入圖像 數(shù)據(jù)來(lái)生成插值圖像數(shù)據(jù)??梢酝ㄟ^(guò)使用例如日本特開(kāi)2009-042482號(hào)公報(bào)或日本特開(kāi) 2009-038620號(hào)公報(bào)所討論的傳統(tǒng)技術(shù)來(lái)實(shí)現(xiàn)利用運(yùn)動(dòng)補(bǔ)償單元103進(jìn)行的插值圖像數(shù)據(jù) 的生成。
在圖2所示的步驟S204,評(píng)價(jià)單元104計(jì)算由運(yùn)動(dòng)補(bǔ)償單元103檢測(cè)到的運(yùn)動(dòng)矢 量Vme的可靠性。利用該計(jì)算,評(píng)價(jià)單元104估計(jì)是否已正確檢測(cè)到運(yùn)動(dòng)矢量Vme,并輸出該 估計(jì)的結(jié)果作為評(píng)價(jià)值TME。
存在三種計(jì)算評(píng)價(jià)值Tme的方法。第一種方法是通過(guò)將在運(yùn)動(dòng)矢量檢測(cè)期間計(jì)算 出的差值絕對(duì)值和的最小值乘以權(quán)重來(lái)計(jì)算評(píng)價(jià)值Τ-。根據(jù)第一種方法,與檢測(cè)到的運(yùn)動(dòng) 矢量相對(duì)應(yīng)的差值絕對(duì)值和的最小值越大,則評(píng)價(jià)值越小。更具體地,當(dāng)搜索范圍內(nèi)檢測(cè) 到的運(yùn)動(dòng)矢量的起點(diǎn)和終點(diǎn)處的處理對(duì)象塊不相似時(shí),由于運(yùn)動(dòng)矢量的錯(cuò)誤檢測(cè)的可能性 高,因而將評(píng)價(jià)值設(shè)置得較小。
第二種方法是通過(guò)計(jì)算差值絕對(duì)值和的最小值和次小值之間的差值并將該差值 乘以權(quán)重來(lái)計(jì)算評(píng)價(jià)值TME。根據(jù)第二種方法,當(dāng)存在與搜索范圍內(nèi)檢測(cè)到的運(yùn)動(dòng)矢量對(duì)應(yīng) 的塊相似的塊時(shí),評(píng)價(jià)值Tme較小。更具體地,當(dāng)圖像包括相似圖案時(shí),由于運(yùn)動(dòng)矢量的錯(cuò)誤 檢測(cè)的可能性高,因而評(píng)價(jià)值Tme被設(shè)置得較小。
第三種方法是通過(guò)將運(yùn)動(dòng)矢量Vme和插值矢量Vk之間的差值乘以權(quán)重來(lái)計(jì)算評(píng)價(jià) 值TME。根據(jù)第三種方法,當(dāng)檢測(cè)到的運(yùn)動(dòng)矢量Vme和插值矢量Vk的值相互不同時(shí),評(píng)價(jià)值 較小。在圖像數(shù)據(jù)的端部的塊的情況下,可能沒(méi)有檢測(cè)到運(yùn)動(dòng)矢量。在這種情況下,評(píng)價(jià)值 被設(shè)置得較小。
對(duì)于步驟S204的評(píng)價(jià)值Tme的計(jì)算已經(jīng)說(shuō)明了三種計(jì)算方法。通過(guò)使用這三種方 法中的任一個(gè)或組合這些方法來(lái)計(jì)算評(píng)價(jià)值T-結(jié)果,可以獲取與運(yùn)動(dòng)補(bǔ)償?shù)奶匦韵嗥ヅ?的評(píng)價(jià)值TME??梢詮? 1或0 255中選擇可對(duì)評(píng)價(jià)值Tme設(shè)置的值。
在步驟S205,當(dāng)切換器109連接至來(lái)自幀存儲(chǔ)器102的輸出時(shí),濾波單元105對(duì)從 幀存儲(chǔ)器102輸出的圖像數(shù)據(jù)進(jìn)行低通濾波。當(dāng)切換器109連接至來(lái)自運(yùn)動(dòng)補(bǔ)償單元103 的輸出時(shí),濾波單元105對(duì)由運(yùn)動(dòng)補(bǔ)償單元103生成的插值圖像數(shù)據(jù)進(jìn)行低通濾波。通過(guò) 濾波,濾波單元105生成輸入圖像數(shù)據(jù)的高頻分量被抑制的低頻圖像數(shù)據(jù)和插值圖像數(shù)據(jù) 的高頻分量被抑制的低頻插值圖像數(shù)據(jù)。
在步驟S206,亮度控制單元106基于從評(píng)價(jià)單元104輸出的評(píng)價(jià)值Tme,計(jì)算從濾 波單元105輸出的低頻圖像數(shù)據(jù)和低頻插值圖像數(shù)據(jù)的輸出亮度rsub2,以調(diào)制亮度。亮度 控制單元106通過(guò)使用例如圖4所示的單調(diào)遞增的曲線(xiàn)來(lái)計(jì)算輸出亮度rsub2。
當(dāng)使用圖4所示的曲線(xiàn)時(shí),評(píng)價(jià)值Tme越大,則輸出亮度rsub2越高。相反,評(píng)價(jià)值 Tme越小,則從曲線(xiàn)可知,輸出亮度rsub2越低,從而增大與高頻強(qiáng)調(diào)圖像數(shù)據(jù)的亮度差。當(dāng)評(píng) 價(jià)值Tme最大(已正確檢測(cè)到運(yùn)動(dòng)矢量)時(shí),低頻插值圖像數(shù)據(jù)的輸出亮度rsub2與成為第一 子幀的高頻強(qiáng)調(diào)圖像數(shù)據(jù)的輸出亮度相等,但絕不超過(guò)高頻強(qiáng)調(diào)圖像數(shù)據(jù)的亮度。更具體7地,基于評(píng)價(jià)值Tme,使低頻插值圖像數(shù)據(jù)的輸出亮度rsub2相對(duì)于高頻強(qiáng)調(diào)圖像數(shù)據(jù)的亮度 而降低。因此,可以抑制由運(yùn)動(dòng)矢量的錯(cuò)誤檢測(cè)所引起的視頻缺陷。
亮度控制單元106基于計(jì)算出的輸出亮度rsub2,由以下表達(dá)式(1)來(lái)調(diào)制低頻插 值圖像數(shù)據(jù)的亮度
Lout = LraXrsub2· · · (1)
(Lin 輸入亮度,Lout 輸出亮度)
因此,亮度控制單元106輸出亮度已被調(diào)制的低頻插值圖像數(shù)據(jù)。
在步驟S207,當(dāng)切換器109連接至來(lái)自幀存儲(chǔ)器102的輸出時(shí),減法器107計(jì)算從 幀存儲(chǔ)器102輸出的輸入圖像數(shù)據(jù)和從亮度控制單元106輸出的低頻圖像數(shù)據(jù)之間的差。 因此,減法器107計(jì)算輸入圖像數(shù)據(jù)的高頻分量。加法器108將計(jì)算出的高頻分量和輸入 圖像數(shù)據(jù)相加在一起。因此,加法器108生成高頻強(qiáng)調(diào)圖像數(shù)據(jù)。在步驟S207,當(dāng)切換器 109連接至來(lái)自運(yùn)動(dòng)補(bǔ)償單元103的輸出時(shí),如上述情況那樣,生成高頻強(qiáng)調(diào)圖像數(shù)據(jù)。然 而,切換器110沒(méi)有輸出該高頻強(qiáng)調(diào)圖像數(shù)據(jù)。
在步驟S208,切換器110通過(guò)與切換器109結(jié)合而對(duì)輸出進(jìn)行切換,以輸入頻率的 2倍頻交替地輸出高頻強(qiáng)調(diào)圖像數(shù)據(jù)(第一子幀)和低頻插值圖像數(shù)據(jù)(第二子幀)。
圖IlA和IlB示出當(dāng)由運(yùn)動(dòng)補(bǔ)償單元103檢測(cè)到的運(yùn)動(dòng)矢量Tme與要正確檢測(cè)的 運(yùn)動(dòng)矢量偏離b個(gè)像素時(shí)輸出的高頻強(qiáng)調(diào)圖像數(shù)據(jù)(1101、1103、1105和1107)以及低頻插 值圖像數(shù)據(jù)(1102和1106)。圖IlA和IlB還示出實(shí)際可視圖像(1104和1108)。圖IlA示 出亮度控制單元106不進(jìn)行亮度控制時(shí)的輸出。在這種情況下,可視圖像1104的部分1109 可視為運(yùn)動(dòng)模糊。圖IlB示出根據(jù)第一典型實(shí)施例當(dāng)亮度控制單元106進(jìn)行亮度控制時(shí)的 輸出。在圖IlB中,當(dāng)運(yùn)動(dòng)矢量偏離時(shí),評(píng)價(jià)值Tme減小,并且低頻插值圖像數(shù)據(jù)1106的亮 度降低。結(jié)果,可視為缺陷或運(yùn)動(dòng)模糊的部分1110的輸出值減小。
根據(jù)第一典型實(shí)施例,當(dāng)運(yùn)動(dòng)補(bǔ)償單元103對(duì)運(yùn)動(dòng)矢量的檢測(cè)的可靠性低(錯(cuò)誤 檢測(cè)的可能性高)時(shí),通過(guò)設(shè)置第一子幀和第二子幀之間的亮度差來(lái)顯示圖像。結(jié)果,可以 降低視頻缺陷。
根據(jù)第二典型實(shí)施例,當(dāng)對(duì)運(yùn)動(dòng)矢量的檢測(cè)的可靠性低時(shí),通過(guò)設(shè)置第一子幀和 第二子幀之間的亮度差來(lái)顯示圖像。當(dāng)缺陷的可視性被估計(jì)為高時(shí),在第一子幀和第二子 幀之間設(shè)置亮度差。
圖5是示出根據(jù)第二典型實(shí)施例的圖像處理設(shè)備501的主要部分的結(jié)構(gòu)的框圖。 將不對(duì)該圖像處理設(shè)備與第一典型實(shí)施例相同的部分進(jìn)行說(shuō)明。將說(shuō)明第二典型實(shí)施例的 特征結(jié)構(gòu)。
差計(jì)算單元502計(jì)算輸入圖像數(shù)據(jù)和存儲(chǔ)在幀存儲(chǔ)器102中的過(guò)去的圖像數(shù)據(jù) (第二典型實(shí)施例為輸入圖像數(shù)據(jù)的前一幀的圖像數(shù)據(jù))之間的亮度差D,并將亮度差D輸 出至亮度控制單元503。亮度控制單元503基于從評(píng)價(jià)單元104輸出的評(píng)價(jià)值Tme和從差 計(jì)算單元502輸出的亮度差D,對(duì)已通過(guò)濾波單元105抑制了高頻分量的低頻圖像數(shù)據(jù)的亮 度進(jìn)行控制。
圖6是示出第二典型實(shí)施例中的處理的流程圖。將不對(duì)與第一典型實(shí)施例的處理 相同的處理進(jìn)行說(shuō)明。在步驟S601,差計(jì)算單元502計(jì)算輸入圖像數(shù)據(jù)和存儲(chǔ)在幀存儲(chǔ)器 102中的過(guò)去的圖像數(shù)據(jù)之間的亮度差D。亮度差D是輸入圖像數(shù)據(jù)的對(duì)象塊和過(guò)去的圖像數(shù)據(jù)中與該對(duì)象塊相對(duì)應(yīng)的塊之間的差。
在步驟S602,亮度控制單元503基于從評(píng)價(jià)單元104輸出的評(píng)價(jià)值Tme和從差計(jì) 算單元502輸出的亮度差D,計(jì)算從濾波單元105輸出的低頻圖像數(shù)據(jù)的輸出亮度rsub2,并 對(duì)低頻圖像數(shù)據(jù)的亮度進(jìn)行調(diào)制。
對(duì)于低頻圖像數(shù)據(jù)的輸出亮度rsub2,如第一典型實(shí)施例那樣,亮度控制單元503通 過(guò)使用圖4所示的曲線(xiàn)計(jì)算輸出亮度rsub2 (Tme),以使得評(píng)價(jià)值Tme越大,則輸出亮度rsub2越 高。亮度控制單元503通過(guò)使用圖7所示的單調(diào)遞減函數(shù)計(jì)算輸出亮度rSub2(D),以使得亮 度差D越小,則輸出亮度rSub2越高。最后,亮度控制單元503基于輸出亮度rSub2 (Tme)和輸出 亮度rSub2(D)的乘積來(lái)計(jì)算輸出亮度rSub2。使得亮度差D越小而輸出亮度1~^2越高的原因 在于當(dāng)幀間的亮度差較小時(shí),難以看到由運(yùn)動(dòng)矢量的錯(cuò)誤檢測(cè)而引起的運(yùn)動(dòng)模糊。因此, 即使運(yùn)動(dòng)矢量的評(píng)價(jià)值較小,當(dāng)幀間的亮度差較小時(shí),也難以看到運(yùn)動(dòng)模糊。結(jié)果,即使當(dāng) 幀間的亮度差較小時(shí),也難以看到運(yùn)動(dòng)模糊。
圖12示出在第二典型實(shí)施例中當(dāng)運(yùn)動(dòng)矢量Vme與要正確檢測(cè)的運(yùn)動(dòng)矢量偏離b個(gè) 像素時(shí)輸出的高頻強(qiáng)調(diào)圖像數(shù)據(jù)(1201和120 和低頻插值圖像數(shù)據(jù)(120 以及實(shí)際可 視圖像(1204)。圖12所示的圖像數(shù)據(jù)的邊緣對(duì)比度低于圖IlA和IlB所示的圖像數(shù)據(jù)的 邊緣對(duì)比度。即使當(dāng)由運(yùn)動(dòng)補(bǔ)償單元103檢測(cè)到的運(yùn)動(dòng)矢量Vme與要正確檢測(cè)的運(yùn)動(dòng)矢量 偏離b個(gè)像素時(shí),由于邊緣對(duì)比度低,因而亮度差D較小。結(jié)果,低頻數(shù)據(jù)在沒(méi)有降低其亮 度的情況下輸出。在實(shí)際可視圖像1204的情況下,由于邊緣對(duì)比度低,因而難以看到由運(yùn) 動(dòng)矢量的錯(cuò)誤檢測(cè)所弓I起的任何缺陷。
因此,即使當(dāng)運(yùn)動(dòng)補(bǔ)償單元103對(duì)運(yùn)動(dòng)矢量的檢測(cè)的可靠性低(錯(cuò)誤檢測(cè)的可能 性高)時(shí),在幀間的亮度差較小的情況下,也可以抑制第一子幀和第二子幀的過(guò)度亮度控 制。
第二典型實(shí)施例涉及了如下結(jié)構(gòu)亮度控制單元503通過(guò)使用從評(píng)價(jià)單元104輸 出的評(píng)價(jià)值Tme和從差計(jì)算單元502輸出的亮度差D來(lái)計(jì)算輸出亮度rsub2。本變形例涉及 如下結(jié)構(gòu)亮度控制單元503不僅通過(guò)使用評(píng)價(jià)值Tme還使用檢測(cè)到的運(yùn)動(dòng)矢量Vme以及輸 入幀的亮度Lin來(lái)計(jì)算輸出亮度rSub2。
在這種情況下,如第一典型實(shí)施例的情況那樣,亮度控制單元503通過(guò)使用圖4所 示的曲線(xiàn)計(jì)算輸出亮度rsub2 (Tme),以使得評(píng)價(jià)值Tme越大,則輸出亮度rsub2越高。亮度控制 單元503通過(guò)使用圖7所示的單調(diào)遞減函數(shù)計(jì)算輸出亮度rsub2(Vme),以使得所檢測(cè)到的運(yùn) 動(dòng)矢量Vme越小,則輸出亮度rSub2越高。如輸出亮度rSub2 (Vme)的情況那樣,亮度控制單元503 通過(guò)使用圖7所示的單調(diào)遞減函數(shù)計(jì)算輸出亮度rsub2 (Lin),以使得輸入幀的亮度Lin越低, 則輸出亮度rSub2越高。最后,亮度控制單元503基于輸出亮度rSub2 (Tme)、輸出亮度rSub2 (Vme)、 以及輸出亮度rSub2 (Lin)的乘積來(lái)計(jì)算輸出亮度rSub2。
因此,本變形例可以提供與第二典型實(shí)施例的效果相同的效果。
在第一典型實(shí)施例和第二典型實(shí)施例中,運(yùn)動(dòng)補(bǔ)償單元103基于輸入圖像數(shù)據(jù)和 存儲(chǔ)在幀存儲(chǔ)器102中的過(guò)去的圖像數(shù)據(jù),生成插值幀。濾波單元105通過(guò)抑制所生成的 插值圖像數(shù)據(jù)的高頻分量來(lái)生成低頻圖像數(shù)據(jù),并且將該低頻圖像數(shù)據(jù)輸出至亮度控制單 元106。然而,根據(jù)第三典型實(shí)施例,濾波單元基于輸入圖像數(shù)據(jù)的高頻分量已被抑制的低 頻圖像數(shù)據(jù)和過(guò)去的圖像數(shù)據(jù)的低頻圖像數(shù)據(jù)來(lái)生成第二子幀,并且將第二子幀輸出至亮度控制單元106。
圖8是示出根據(jù)第三典型實(shí)施例的圖像處理設(shè)備801的主要部分的結(jié)構(gòu)的框圖。 將不對(duì)該圖像處理設(shè)備與第一典型實(shí)施例相同的部分進(jìn)行說(shuō)明。將說(shuō)明第三典型實(shí)施例的 特征結(jié)構(gòu)。
濾波單元802抑制輸入圖像數(shù)據(jù)的高頻分量,以生成低頻圖像數(shù)據(jù)。幀存儲(chǔ)器803 存儲(chǔ)至少一幀的低頻圖像數(shù)據(jù)。運(yùn)動(dòng)補(bǔ)償單元804基于由濾波單元802生成的低頻圖像數(shù) 據(jù)和存儲(chǔ)在幀存儲(chǔ)器803中的過(guò)去的圖像數(shù)據(jù)的低頻圖像數(shù)據(jù)來(lái)檢測(cè)運(yùn)動(dòng)矢量。運(yùn)動(dòng)補(bǔ)償 單元804進(jìn)行運(yùn)動(dòng)補(bǔ)償,以生成在時(shí)間上對(duì)圖像數(shù)據(jù)間的運(yùn)動(dòng)進(jìn)行了插值的低頻插值圖像 數(shù)據(jù)。評(píng)價(jià)單元805估計(jì)由運(yùn)動(dòng)補(bǔ)償單元804檢測(cè)到的運(yùn)動(dòng)矢量的可靠性,以將評(píng)價(jià)值輸 出至亮度控制單元106。評(píng)價(jià)值的計(jì)算方法與第一典型實(shí)施例的評(píng)價(jià)值的計(jì)算方法相同。
亮度控制單元106基于從評(píng)價(jià)單元805輸出的評(píng)價(jià)值來(lái)對(duì)由運(yùn)動(dòng)補(bǔ)償單元804所 生成的低頻插值圖像數(shù)據(jù)的亮度進(jìn)行控制。減法器107和加法器108生成強(qiáng)調(diào)高頻分量的 高頻強(qiáng)調(diào)圖像數(shù)據(jù)。幀存儲(chǔ)器806存儲(chǔ)并輸出至少一幀的由減法器107和加法器108所生 成的高頻強(qiáng)調(diào)圖像數(shù)據(jù)。
利用該結(jié)構(gòu),通過(guò)針對(duì)各子幀切換切換器110,以2倍速驅(qū)動(dòng)將高頻強(qiáng)調(diào)圖像數(shù)據(jù) 和低頻插值圖像數(shù)據(jù)輸出以進(jìn)行顯示。
圖9是示出根據(jù)第三典型實(shí)施例的處理的流程圖。在步驟S901,濾波單元802接 收一幀圖像數(shù)據(jù)。在步驟S902,濾波單元802對(duì)輸入圖像數(shù)據(jù)進(jìn)行低通濾波,以生成低頻圖 像數(shù)據(jù)。在步驟S903,幀存儲(chǔ)器803存儲(chǔ)一幀由濾波單元802濾波后的低頻圖像數(shù)據(jù),并將 該低頻圖像數(shù)據(jù)輸出至運(yùn)動(dòng)補(bǔ)償單元804。在步驟S904,運(yùn)動(dòng)補(bǔ)償單元804基于輸入低頻 圖像數(shù)據(jù)和存儲(chǔ)在幀存儲(chǔ)器803中的過(guò)去的低頻圖像數(shù)據(jù)來(lái)生成低頻插值圖像數(shù)據(jù)。運(yùn)動(dòng) 補(bǔ)償單元804和第一典型實(shí)施例的運(yùn)動(dòng)補(bǔ)償單元103在處理上是相同的,但輸入圖像數(shù)據(jù) 是不同的(未濾波的圖像數(shù)據(jù)和濾波后的圖像數(shù)據(jù))。更具體地,運(yùn)動(dòng)補(bǔ)償單元804檢測(cè)低 頻圖像數(shù)據(jù)間的運(yùn)動(dòng)矢量,并進(jìn)行運(yùn)動(dòng)補(bǔ)償以生成低頻插值圖像數(shù)據(jù)。
在步驟S905,評(píng)價(jià)單元805計(jì)算由運(yùn)動(dòng)補(bǔ)償單元804檢測(cè)到的運(yùn)動(dòng)矢量的可靠性。 在步驟S906,亮度控制單元106基于從評(píng)價(jià)單元805輸出的評(píng)價(jià)值Tme,計(jì)算由運(yùn)動(dòng)補(bǔ)償單 元804所生成的低頻插值圖像數(shù)據(jù)的輸出亮度rsub2,以調(diào)制低頻插值圖像數(shù)據(jù)的亮度。在 步驟S907,減法器107和加法器108生成高頻強(qiáng)調(diào)圖像數(shù)據(jù)。在步驟S908,切換器110以 輸入頻率的2倍頻來(lái)交替地輸出高頻強(qiáng)調(diào)圖像數(shù)據(jù)和低頻插值圖像數(shù)據(jù)。
利用該結(jié)構(gòu),第三典型實(shí)施例可以提供與第一典型實(shí)施例的效果相同的效果。
基于圖1、5和8所示的設(shè)備的各單元全部是硬件單元的假定說(shuō)明了典型實(shí)施例。 然而,圖1、5和8所示的幀存儲(chǔ)器以外的各單元可以由計(jì)算機(jī)程序構(gòu)成。在這種情況下,可 以將包括用于存儲(chǔ)計(jì)算機(jī)程序的存儲(chǔ)器和用于執(zhí)行存儲(chǔ)在該存儲(chǔ)器中的計(jì)算機(jī)程序的中 央處理單元(CPU)的計(jì)算機(jī)應(yīng)用于各典型實(shí)施例的圖像處理設(shè)備。
圖10是示出可應(yīng)用于各典型實(shí)施例的圖像處理設(shè)備的計(jì)算機(jī)的硬件結(jié)構(gòu)示例的 框圖。
CPU 1001通過(guò)使用存儲(chǔ)在隨機(jī)存取存儲(chǔ)器(RAM) 1002或只讀存儲(chǔ)器(ROM) 1003中 的計(jì)算機(jī)程序或數(shù)據(jù)來(lái)整體地控制計(jì)算機(jī),并執(zhí)行如上所述在各典型實(shí)施例的圖像處理設(shè) 備中進(jìn)行的各處理。更具體地,CPU 1001用作圖1所示的單元103 110或圖5所示的單元 502 和 503。
RAM 1002具有用于臨時(shí)存儲(chǔ)從外部存儲(chǔ)裝置1006加載的計(jì)算機(jī)程序或數(shù)據(jù)或者 經(jīng)由接口(I/F) 1007從外部獲取的數(shù)據(jù)的區(qū)域。RAM 1002具有當(dāng)CPU 1001執(zhí)行各種處理 時(shí)所使用的區(qū)域。更具體地,例如,RAM 1002可以適用于幀存儲(chǔ)器,或者可以適當(dāng)?shù)靥峁└?種其它區(qū)域。
ROM 1003存儲(chǔ)計(jì)算機(jī)的設(shè)置數(shù)據(jù)或引導(dǎo)程序。操作單元1004包括鍵盤(pán)或鼠標(biāo)。 計(jì)算機(jī)的用戶(hù)可以通過(guò)操作操作單元1004,將各種指令輸入至CPU 1001。輸出單元1005 顯示CPU1001的處理結(jié)果。
外部存儲(chǔ)裝置1006是以硬盤(pán)驅(qū)動(dòng)器為代表的大容量信息存儲(chǔ)裝置。外部存儲(chǔ)裝 置1006存儲(chǔ)操作系統(tǒng)(OS)或用于使CPU1001實(shí)現(xiàn)圖2、3和6所示的流程的計(jì)算機(jī)程序。 外部存儲(chǔ)裝置1006可以存儲(chǔ)作為處理對(duì)象的圖像數(shù)據(jù)。
在CPU 1001的控制下,將存儲(chǔ)在外部存儲(chǔ)裝置1006中的計(jì)算機(jī)程序或數(shù)據(jù)適當(dāng) 地加載至RAM 1002 JtSCPU 1001的處理對(duì)象。
局域網(wǎng)(LAN)或因特網(wǎng)等的網(wǎng)絡(luò)和其它裝置可以被連接至I/F 1007。計(jì)算機(jī)可以 經(jīng)由I/F 1007獲取或發(fā)送各種信息。總線(xiàn)1008使各單元相互連接。
在上述結(jié)構(gòu)中,CPU 1001在進(jìn)行流程圖的操作時(shí)起到關(guān)鍵作用。
在第一典型實(shí)施例 第四典型實(shí)施例中直到生成子幀為止的結(jié)構(gòu)中,針對(duì)從亮度 控制單元106輸出的低頻插值圖像數(shù)據(jù),通過(guò)使用減法器107和加法器108來(lái)生成高頻強(qiáng) 調(diào)圖像數(shù)據(jù)。然而,如圖13所示,亮度控制單元可以被配置在切換器110之前,以設(shè)置高 頻強(qiáng)調(diào)圖像數(shù)據(jù)和低頻插值圖像數(shù)據(jù)的亮度。根據(jù)本發(fā)明,可以通過(guò)將低頻插值圖像數(shù)據(jù) 的亮度控制得相對(duì)低于高頻強(qiáng)調(diào)圖像數(shù)據(jù)的亮度由此生成子幀間的亮度差,來(lái)減小視頻缺 陷。因此,在圖13所示的結(jié)構(gòu)中,亮度控制單元106可以基于評(píng)價(jià)值TME進(jìn)行用以增加高 頻強(qiáng)調(diào)圖像數(shù)據(jù)的亮度的控制。該控制使得能夠生成子幀間的亮度差。
當(dāng)濾波單元105使用高通濾波器進(jìn)行濾波以生成高頻強(qiáng)調(diào)圖像數(shù)據(jù)和低頻插值 圖像數(shù)據(jù)時(shí)可以提供相同的效果。
第一典型實(shí)施例 第四典型實(shí)施例均涉及如下結(jié)構(gòu)以輸入幀頻的2倍速來(lái)輸出 并顯示子幀。然而,可以以N倍速(N>》來(lái)輸出子幀??梢酝ㄟ^(guò)將由運(yùn)動(dòng)補(bǔ)償單元103 和804生成的插值幀的數(shù)量從1改變?yōu)镹來(lái)實(shí)現(xiàn)該配置。在這種情況下,可以更多地減小 運(yùn)動(dòng)模糊。
基于亮度控制單元106的亮度控制是一幀內(nèi)的像素單位控制的假定說(shuō)明了第一 典型實(shí)施例 第四典型實(shí)施例。然而,通過(guò)使用評(píng)價(jià)值Tme、運(yùn)動(dòng)矢量Vme、輸入亮度Lin以及 亮度差D的平均值或中值作為代表值,可以以幀為單位設(shè)置亮度rsub2。在這種情況下,通過(guò) 將所設(shè)置的亮度的每單位時(shí)間的變化量設(shè)置成等于或小于預(yù)設(shè)閾值,可以在空間和時(shí)間上 對(duì)處理邊界所特有的圖像質(zhì)量劣化進(jìn)行抑制。
已經(jīng)說(shuō)明了本發(fā)明的典型實(shí)施例。本發(fā)明的設(shè)備的控制方法也落入本發(fā)明。本發(fā) 明可以應(yīng)用于包括多個(gè)裝置的系統(tǒng)或包括一個(gè)裝置的設(shè)備。
可以通過(guò)直接或遠(yuǎn)程向系統(tǒng)或設(shè)備提供用于實(shí)現(xiàn)典型實(shí)施例的各功能的程序并 利用包括在系統(tǒng)或設(shè)備中的計(jì)算機(jī)讀取并執(zhí)行所提供的程序代碼來(lái)實(shí)現(xiàn)本發(fā)明。
因此,安裝在計(jì)算機(jī)中用以通過(guò)計(jì)算機(jī)實(shí)現(xiàn)本發(fā)明的功能/處理的程序代碼本身實(shí)現(xiàn)了本發(fā)明。更具體地,用于實(shí)現(xiàn)功能/處理的計(jì)算機(jī)程序本身落入了本發(fā)明。
盡管已經(jīng)參考典型實(shí)施例說(shuō)明了本發(fā)明,但是應(yīng)該理解,本發(fā)明不限于所公開(kāi)的 典型實(shí)施例。所附權(quán)利要求書(shū)的范圍符合最寬的解釋?zhuān)园羞@類(lèi)修改、等同結(jié)構(gòu)和功 能。
權(quán)利要求
1.一種圖像處理設(shè)備,用于根據(jù)針對(duì)各幀所輸入的圖像數(shù)據(jù)生成強(qiáng)調(diào)高頻分量的高頻 強(qiáng)調(diào)圖像數(shù)據(jù)以及使用運(yùn)動(dòng)補(bǔ)償?shù)牡皖l插值圖像數(shù)據(jù),并將所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述 低頻插值圖像數(shù)據(jù)作為子幀輸出,所述圖像處理設(shè)備包括計(jì)算單元,用于計(jì)算在所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量的評(píng)價(jià)值;以及 控制單元,用于基于計(jì)算出的評(píng)價(jià)值,控制所述低頻插值圖像數(shù)據(jù)的亮度以使其相對(duì) 于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而降低。
2.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其特征在于,所述計(jì)算單元基于運(yùn)動(dòng)矢量的 檢測(cè)對(duì)象塊和運(yùn)動(dòng)矢量的參考目標(biāo)塊之間的差值絕對(duì)值和的最小值,計(jì)算所述評(píng)價(jià)值。
3.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其特征在于,隨著計(jì)算出的評(píng)價(jià)值越小,所述 控制單元使所述低頻插值圖像數(shù)據(jù)和所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)之間的亮度差增大得越多。
4.根據(jù)權(quán)利要求1所述的圖像處理設(shè)備,其特征在于,還包括差計(jì)算單元,所述差計(jì)算 單元用于計(jì)算針對(duì)各幀所輸入的圖像數(shù)據(jù)的幀間的亮度差,其中,所述控制單元基于計(jì)算出的評(píng)價(jià)值和計(jì)算出的亮度差,控制所述低頻插值圖像 數(shù)據(jù)的亮度以使其相對(duì)于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而降低。
5.一種圖像處理設(shè)備,包括輸入單元,用于輸入每單位時(shí)間m幀的圖像數(shù)據(jù),其中m為自然數(shù); 濾波單元,用于根據(jù)輸入的圖像數(shù)據(jù)至少生成高頻強(qiáng)調(diào)圖像數(shù)據(jù); 幀間插值單元,用于生成經(jīng)過(guò)運(yùn)動(dòng)補(bǔ)償且在時(shí)間上處于輸入的圖像數(shù)據(jù)和通過(guò)之前的 幀輸入的圖像數(shù)據(jù)之間的中間位置的低頻插值圖像數(shù)據(jù);計(jì)算單元,用于計(jì)算在所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量的評(píng)價(jià)值; 控制單元,用于基于計(jì)算出的評(píng)價(jià)值,控制所述低頻插值圖像數(shù)據(jù)的亮度以使其相對(duì) 于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而降低;以及輸出單元,用于將亮度進(jìn)行了控制的所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述低頻插值圖像數(shù)據(jù) 作為每單位時(shí)間an幀的圖像數(shù)據(jù)交替輸出。
6.一種圖像處理設(shè)備的控制方法,所述圖像處理設(shè)備根據(jù)針對(duì)各幀所輸入的圖像數(shù)據(jù) 生成強(qiáng)調(diào)高頻分量的高頻強(qiáng)調(diào)圖像數(shù)據(jù)以及使用運(yùn)動(dòng)補(bǔ)償?shù)牡皖l插值圖像數(shù)據(jù),并將所述 高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述低頻插值圖像數(shù)據(jù)作為子幀輸出,所述控制方法包括以下步驟計(jì)算步驟,用于計(jì)算在所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量的評(píng)價(jià)值;以及 控制步驟,用于基于計(jì)算出的評(píng)價(jià)值,控制所述低頻插值圖像數(shù)據(jù)的亮度以使其相對(duì) 于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而降低。
7.根據(jù)權(quán)利要求6所述的控制方法,其特征在于,所述計(jì)算步驟基于運(yùn)動(dòng)矢量的檢測(cè) 對(duì)象塊和運(yùn)動(dòng)矢量的參考目標(biāo)塊之間的差值絕對(duì)值和的最小值,計(jì)算所述評(píng)價(jià)值。
8.根據(jù)權(quán)利要求6所述的控制方法,其特征在于,還包括隨著計(jì)算出的評(píng)價(jià)值越小, 使所述低頻插值圖像數(shù)據(jù)和所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)之間的亮度差增大得越多。
9.根據(jù)權(quán)利要求6所述的控制方法,其特征在于,還包括 計(jì)算針對(duì)各幀所輸入的圖像數(shù)據(jù)的幀間的亮度差;以及基于計(jì)算出的評(píng)價(jià)值和計(jì)算出的亮度差,控制所述低頻插值圖像數(shù)據(jù)的亮度以使其相 對(duì)于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而降低。
10.一種圖像處理設(shè)備的控制方法,包括輸入每單位時(shí)間m幀的圖像數(shù)據(jù),其中m為自然數(shù); 根據(jù)輸入的圖像數(shù)據(jù)至少生成高頻強(qiáng)調(diào)圖像數(shù)據(jù);生成經(jīng)過(guò)運(yùn)動(dòng)補(bǔ)償且在時(shí)間上處于輸入的圖像數(shù)據(jù)和通過(guò)之前的幀輸入的圖像數(shù)據(jù) 之間的中間位置的低頻插值圖像數(shù)據(jù);計(jì)算在所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量的評(píng)價(jià)值;基于計(jì)算出的評(píng)價(jià)值,控制所述低頻插值圖像數(shù)據(jù)的亮度以使其相對(duì)于所述高頻強(qiáng)調(diào) 圖像數(shù)據(jù)而降低;以及將亮度進(jìn)行了控制的所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述低頻插值圖像數(shù)據(jù)作為每單位時(shí) 間an幀的圖像數(shù)據(jù)交替輸出。
全文摘要
一種圖像處理設(shè)備及其控制方法。該圖像處理設(shè)備用于根據(jù)針對(duì)各幀所輸入的圖像數(shù)據(jù)生成強(qiáng)調(diào)高頻分量的高頻強(qiáng)調(diào)圖像數(shù)據(jù)以及使用運(yùn)動(dòng)補(bǔ)償?shù)牡皖l插值圖像數(shù)據(jù),并將所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)和所述低頻插值圖像數(shù)據(jù)作為子幀輸出。所述圖像處理設(shè)備包括計(jì)算單元,用于計(jì)算在所述運(yùn)動(dòng)補(bǔ)償期間檢測(cè)到的運(yùn)動(dòng)矢量的評(píng)價(jià)值;以及控制單元,用于基于計(jì)算出的評(píng)價(jià)值,控制所述低頻插值圖像數(shù)據(jù)的亮度以使其相對(duì)于所述高頻強(qiáng)調(diào)圖像數(shù)據(jù)而降低。
文檔編號(hào)H04N5/14GK102035996SQ201010292788
公開(kāi)日2011年4月27日 申請(qǐng)日期2010年9月25日 優(yōu)先權(quán)日2009年9月24日
發(fā)明者河井愛(ài) 申請(qǐng)人:佳能株式會(huì)社