一種圖像數(shù)據(jù)的采集處理方法及相關(guān)裝置的制造方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及圖像處理領(lǐng)域，尤其涉及一種圖像數(shù)據(jù)的采集處理方法及相關(guān)裝置。
【背景技術(shù)】
[0002] 隨著信息技術(shù)的不斷發(fā)展，電子終端（如手機(jī)、相機(jī)等）開始支持圖像處理，利用 電子終端進(jìn)行拍照可謂是無所不在，但在拍照過程中，對有不同景深的場景，只能選擇對某 一景深對焦采集，這樣就會使得其它區(qū)域相對模糊?，F(xiàn)有技術(shù)中可以利用攝像頭采集不同 景深圖像，然后根據(jù)圖像處理的相關(guān)方法進(jìn)行圖像融合，從而可在顯示端得到全清晰圖像。
[0003] 例如，現(xiàn)有技術(shù)中從一組多焦距照片中選出一幅復(fù)制為目標(biāo)照片，然后比較該組 多焦距照片中的其他照片與目標(biāo)照片相同位置像素點的清晰度，用清晰度最高的像素點替 換目標(biāo)照片中相同位置的像素點。該技術(shù)方案僅描述了采集后用最清晰的像素點來進(jìn)行替 換的融合策略，且只適用于對靜止圖像的處理。
[0004] 又如，現(xiàn)有技術(shù)中公開的申請?zhí)枮?01010507977. 4的一種基于差分圖修正的像 素級多聚焦圖像融合方法，首先對待融合圖像進(jìn)行下采樣，并計算待融合下采樣圖像的空 間頻率，然后通過比較空間頻率的大小得到初始融合圖像；接著對初始融合圖像與待融合 下采樣圖像的差分圖像進(jìn)行兩次修正，第一次修正使用中值濾波，用于消除選擇錯誤的孤 立像素，第二次修正則通過計算各區(qū)域的面積進(jìn)行區(qū)域的合并，最后對兩次修正后得到的 修正圖進(jìn)行插值放大，得到最終的標(biāo)記圖，依據(jù)該標(biāo)記圖即可得到融合圖像。該技術(shù)方案需 要對圖像進(jìn)行下采樣，融合后還需要進(jìn)行插值處理，而且也只適用于對靜止圖像的處理。
[0005] 現(xiàn)有技術(shù)中電子終端的圖像處理方法要么過于簡單造成圖像處理效果差，要么過 于復(fù)雜使得圖像處理效率低下，且往往只適用于對靜止圖像的處理；如何在電子終端高效 高質(zhì)量地進(jìn)行圖像處理得到用戶所需的清晰圖像，是人們一直關(guān)注的熱點問題。

【發(fā)明內(nèi)容】

[0006] 本發(fā)明實施例所要解決的技術(shù)問題在于，提供一種圖像數(shù)據(jù)的采集處理方法、一 種圖像數(shù)據(jù)的處理方法、一種圖像數(shù)據(jù)的采集處理裝置以及一種圖像數(shù)據(jù)的處理裝置，解 決了運動物體場景融合問題，實現(xiàn)了對圖像進(jìn)行高效高質(zhì)量的處理。
[0007] 第一方面，本發(fā)明實施例提供了一種圖像數(shù)據(jù)的處理方法，包括：
[0008] 獲取至少兩張采集圖像，其中獲取的每張采集圖像的采集對焦點各不相同；
[0009] 獲取對焦采集參數(shù)，根據(jù)所述對焦采集參數(shù)對采集圖像進(jìn)行融合，得到融合后的 圖像；對所述融合后的圖像進(jìn)行聯(lián)合編碼并輸出；
[0010] 其中，當(dāng)根據(jù)所述對焦采集參數(shù)對所述采集圖像進(jìn)行配準(zhǔn)映射裁剪以及融合時， 通過分析所述采集圖像的運動信息修正掩膜圖像，根據(jù)修正后的掩膜圖像來選擇圖像進(jìn)行 圖像融合；
[0011] 所述運動信息包括在所述采集圖像之間發(fā)生物體運動的運動軌跡構(gòu)成的連通的 運動物體區(qū)域；所述修正后的掩膜圖像包括對所述采集圖像進(jìn)行序號標(biāo)記后在所述連通的 運動物體區(qū)域中各個像素點選擇的采集圖像的序號。
[0012] 結(jié)合第一方面，在第一種可能的實現(xiàn)方式中，所述獲取至少兩張采集圖像包括：
[0013] 設(shè)置圖像場景的對焦點個數(shù)為M個，M為大于1的自然數(shù)；
[0014] 檢測圖像場景的人臉區(qū)域，得到L個人臉區(qū)域，L為零或正整數(shù)；
[0015] 若M等于L，則選擇所述L個人臉區(qū)域作為對焦點對所述圖像場景進(jìn)行對焦采集；
[0016] 若M大于L，則選擇所述L個人臉區(qū)域以及M減L個感興趣區(qū)域作為對焦點對所述 圖像場景進(jìn)行對焦采集；
[0017] 若M小于L，則分析所述L個人臉區(qū)域的面積大小，從所述L個人臉區(qū)域中按照先 選擇面積最大后選擇面積最小的人臉區(qū)域的順序，選擇人臉區(qū)域作為對焦點，并排除已被 選擇的人臉區(qū)域重復(fù)執(zhí)行本步驟，直至選擇完M個人臉區(qū)域作為對焦點對所述圖像場景進(jìn) 行對焦采集。
[0018] 結(jié)合第一方面，在第二種可能的實現(xiàn)方式中，所述獲取至少兩張采集圖像包括：
[0019] 設(shè)置圖像場景的對焦點個數(shù)為M個，M為大于1的自然數(shù)，且M小于等于攝像頭采 集圖像過程中獲得的視頻幀數(shù)；
[0020] 將所述圖像場景劃分為A個區(qū)域，A為正整數(shù)；
[0021] 檢測圖像場景的人臉區(qū)域，得到L個人臉區(qū)域，L為零或正整數(shù)；
[0022] 若M等于L，則選擇所述L個人臉區(qū)域作為對焦點對所述圖像場景進(jìn)行對焦采集；
[0023] 若M小于L，則分析所述L個人臉區(qū)域的面積大小，從所述L個人臉區(qū)域中按照先 選擇面積最大后選擇面積最小的人臉區(qū)域的順序，選擇人臉區(qū)域作為對焦點，并排除已被 選擇的人臉區(qū)域重復(fù)執(zhí)行本步驟，直至選擇完M個人臉區(qū)域作為對焦點對所述圖像場景進(jìn) 行對焦采集；
[0024] 若M大于L，則選擇所述L個人臉區(qū)域作為對焦點，并根據(jù)所述A個區(qū)域在每幀視 頻中的最清晰區(qū)域面積的大小，從大到小選取所述A個區(qū)域中的M減L個作為對焦點，對所 述圖像場景進(jìn)行對焦采集；其中所述最清晰區(qū)域面積包括信噪比最大、或梯度最大、或直流 量最大的區(qū)域面積。
[0025] 結(jié)合第一方面，在第三種可能的實現(xiàn)方式中，所述融合后的圖像包括以下至少一 項：所述采集圖像、對所述采集圖像進(jìn)行配準(zhǔn)映射裁剪后的處理圖像、或?qū)λ霾杉瘓D像進(jìn) 行配準(zhǔn)映射裁剪以及融合后的融合圖像；
[0026] 所述根據(jù)所述對焦采集參數(shù)對采集圖像進(jìn)行融合包括：
[0027] 根據(jù)所述對焦采集參數(shù)判斷是否對采集圖像進(jìn)行融合；
[0028] 當(dāng)判斷結(jié)果為否時，則根據(jù)所述采集圖像的采集成功數(shù)量，從所述采集圖像中選 取一張圖像；當(dāng)判斷結(jié)果為是時，對所述采集圖像進(jìn)行配準(zhǔn)映射裁剪處理得到處理圖像，或 者對所述采集圖像進(jìn)行配準(zhǔn)映射裁剪以及融合得到融合圖像。
[0029] 結(jié)合第一方面的第三種可能的實現(xiàn)方式，在第四種可能的實現(xiàn)方式中，所述根據(jù) 所述采集圖像的采集成功數(shù)量，從所述采集圖像中選取一張圖像包括：
[0030] 若所述采集圖像的采集成功數(shù)量為1，則從所述采集圖像中選取對焦采集成功的 圖像；
[0031] 若所述采集圖像的采集成功數(shù)量不為1，則從所述采集圖像中選取信噪比最大、或 梯度最大、或直流量最大的圖像。
[0032] 結(jié)合第一方面的第三種可能的實現(xiàn)方式，在第五種可能的實現(xiàn)方式中，所述對焦 采集參數(shù)包括每張采集圖像從對焦起始至對焦結(jié)束的時間值，所述根據(jù)所述對焦采集參數(shù) 判斷是否對所述采集圖像進(jìn)行融合包括：
[0033] 將所述時間值按照大小進(jìn)行排序，當(dāng)依次從小到大的相鄰兩個時間值之差的絕對 值大于預(yù)設(shè)閾值，則判斷出需要將所述兩個時間值對應(yīng)的采集圖像進(jìn)行融合；當(dāng)依次從小 到大的相鄰兩個時間值之差的絕對值不大于預(yù)設(shè)閾值，則判斷出不需要將所述兩個時間值 對應(yīng)的采集圖像進(jìn)行融合，并舍棄所述兩個時間值中較大的時間值，重復(fù)執(zhí)行本步驟直至 判斷出所有需要進(jìn)行融合的采集圖像。
[0034] 結(jié)合第一方面的第三種可能的實現(xiàn)方式，在第六種可能的實現(xiàn)方式中，所述對焦 采集參數(shù)包括每張采集圖像從對焦起始至對焦結(jié)束的鏡頭拉伸長度值，所述根據(jù)所述對焦 采集參數(shù)判斷是否對所述采集圖像進(jìn)行融合包括：
[0035] 將所述長度值按照大小進(jìn)行排序，當(dāng)依次從小到大的相鄰兩個長度值之差的絕對 值大于預(yù)設(shè)閾值，則判斷出需要將所述兩個長度值對應(yīng)的采集圖像進(jìn)行融合；當(dāng)依次從小 到大的相鄰兩個長度值之差的絕對值不大于預(yù)設(shè)閾值，則判斷出不需要將所述兩個長度值 對應(yīng)的采集圖像進(jìn)行融合，并舍棄所述兩個長度值中較大的時間值，重復(fù)執(zhí)行本步驟直至 判斷出所有需要進(jìn)行融合的采集圖像。
[0036] 結(jié)合第一方面的第三種可能的實現(xiàn)方式，在第七種可能的實現(xiàn)方式中，所述對所 述采集圖像進(jìn)行配準(zhǔn)映射裁剪處理包括：
[0037] 將獲取的所有采集圖像按照第一圖像進(jìn)行配準(zhǔn)處理；所述第一圖像為獲取的所有 采集圖像中的一張圖像；
[0038] 對配準(zhǔn)處理后的所有采集圖像進(jìn)行映射處理，得到映射圖像；
[0039] 將得到的所有映射圖像及所述第一圖像進(jìn)行裁剪處理。
[0040] 結(jié)合第一方面的第三種可能的實現(xiàn)方式，在第八種可能的實現(xiàn)方式中，所述對所 述融合后的圖像進(jìn)行聯(lián)合編碼并輸出包括：
[0041] 對所述融合后的圖像進(jìn)行聯(lián)合編碼；
[0042] 接收顯示區(qū)域選擇指令，并根據(jù)所述顯示區(qū)域選擇指令選擇的區(qū)域，獲取需要解 碼顯示的圖像；
[0043] 對所述獲取需要解碼顯示的圖像進(jìn)行解碼顯示。
[0044] 結(jié)合第一方面的第八種可能的實現(xiàn)方式，在第九種可能的實現(xiàn)方式中，所述根據(jù) 所述顯示區(qū)域選擇指令選擇的區(qū)域，獲取需要解碼顯示的圖像包括：
[0045] 從采集圖像的對焦點中查找出最接近所述顯示區(qū)域選擇指令選擇的區(qū)域的對焦 占 .
[0046] 獲取根據(jù)所述查找出的對焦點進(jìn)行對焦采集并進(jìn)行圖像配準(zhǔn)映射裁剪處理后聯(lián) 合編碼的圖像，或者獲取根據(jù)所述查找出的對焦點進(jìn)行對焦采集并進(jìn)行圖像配準(zhǔn)映射裁剪 以及融合后聯(lián)合編碼的圖像，作為需要解碼顯示的圖像。
[0047] 結(jié)合第一方面，或者第一方面的第一種可能的實現(xiàn)方式，或者第一方面的第二種 可能的實現(xiàn)方式，或者第一方面的第三種可能的實現(xiàn)方式，或者第一方面的第四種可能的 實現(xiàn)方式，或者第一方面的第五種可能的實現(xiàn)方式，或者第一方面的第六種可能的實現(xiàn)方 式，或者第一方面的第七種可能的實現(xiàn)方式，或者第一方面的第八種可能的實現(xiàn)方式，或者 第一方面的第九種可能的實現(xiàn)方式，在第十種可能的實現(xiàn)方式中，所述對所述采集圖像進(jìn) 行配準(zhǔn)映射裁剪以及融合包括：
[0048] 將獲取的所有采集圖像按照第一圖像進(jìn)行配準(zhǔn)處理；所述第一圖像為獲取的所有 采集圖像中的一張圖像；
[0049] 對配準(zhǔn)處理后的所有采集圖像進(jìn)行映射處理，得到映射圖像；
[0050] 將得到的所有映射圖像及所述第一圖像進(jìn)行裁剪處理；
[0051] 將裁剪處理后的圖像進(jìn)行轉(zhuǎn)換，得到灰度圖像，并進(jìn)行平滑去噪；
[0052] 對所述灰度圖像進(jìn)行聯(lián)合分割物體，并標(biāo)記各個區(qū)域，通過統(tǒng)計各區(qū)域梯度信息 生成掩膜圖像；
[0053] 根據(jù)所述掩膜圖像對各個區(qū)域梯度最大的處理圖像進(jìn)行平滑去噪，計算得到各個 處理圖像之間的差分圖像，并根據(jù)所述差分圖像標(biāo)記出運動物體區(qū)域；
[0054] 根據(jù)在連通的運動物體區(qū)域中對應(yīng)的掩膜圖像選擇比例來修正所述掩膜圖像；所 述掩膜圖像選擇比例具體為在所述連通的運動物體區(qū)域中掩膜圖像選擇的不同圖像的面 積各自占所述連通的運動物體區(qū)域總面積的比例；
[0055] 根據(jù)修正后的所述掩膜圖像來選擇圖像進(jìn)行圖像融合。
[0056] 結(jié)合第一方面的第十種可能的實現(xiàn)方式，在第十一種可能的實現(xiàn)方式中，所述根 據(jù)在連通的運動物體區(qū)域中對應(yīng)的掩膜圖像選擇比例來修正所述掩膜圖像包括：
[0057] 當(dāng)檢測出連通的運動物體區(qū)域中對應(yīng)的掩膜圖像選擇比例都小于預(yù)設(shè)閾值，則選 取所述掩膜圖像選擇比例中的最大比例所對應(yīng)的圖像來修正所述掩膜圖像。
[0058] 第二方面，本發(fā)明實施例提供了一種圖像數(shù)據(jù)的處理裝置，包括：
[0059] 圖像獲取模塊，用于獲取至少兩張采集圖像，其中獲取的每張采集圖像的采集對 焦點各不相同；
[0060] 圖像融合模塊，用于獲取對焦采集參數(shù)，根據(jù)所述對焦采集參數(shù)對采集圖像進(jìn)行 融合，得到融合后的圖像；
[0061] 編碼輸出模塊，用于對所述融合后的圖像進(jìn)行聯(lián)合編碼并輸出；
[0062] 其中，當(dāng)所述圖像融合模塊根據(jù)所述對焦采集參數(shù)對所述采集圖像進(jìn)行配準(zhǔn)映射 裁剪以及融合時，通過分析所述采集圖像的運動信息修正掩膜圖像，根據(jù)修正后的掩膜圖 像來選擇圖像進(jìn)行圖像融合；
[0063] 所述運動信息包括在所述采集圖像之間發(fā)生物體運動的運動軌跡構(gòu)成的連通的 運動物體區(qū)域；所述修正后的掩膜圖像包括對所述采集圖像進(jìn)行序號標(biāo)記后在所述連通的 運動物體區(qū)域中各個像素點選擇的采集圖像的序號。
[0064] 結(jié)合第二方面，在第一種可能的實現(xiàn)方式中，所述圖像獲取模塊包括：
[0065] 對焦點個數(shù)第一設(shè)置單元，用于設(shè)置圖像場景的對焦點個數(shù)為M個，M為大于1的 自然數(shù)；
[0066] 人臉區(qū)域第一檢測單元，用于檢測圖像場景的人臉區(qū)域，得到L個人臉區(qū)域，L為 零或正整數(shù)；
[0067] 第一對焦采集單元，用于若M等于L，則選擇所述L個人臉區(qū)域作為對焦點對所述 圖像場景進(jìn)行對焦采集；若M大于L，則選擇所述L個人臉區(qū)域以及M減L個感興趣區(qū)域作 為對焦點對所述圖像場景進(jìn)行對焦采集；若M小于L，則分析所述L個人臉區(qū)域的面積大 小，從所述L個人臉區(qū)域中按照先選擇面積最大后選擇面積最小的人臉區(qū)域的順序，選擇 人臉區(qū)域作為對焦點，并排除已被選擇的人臉區(qū)域重復(fù)執(zhí)行本步驟，