圖像處理裝置、重要人物判定方法、圖像布局方法、以及程序和記錄介質(zhì)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種從基于多個圖像數(shù)據(jù)的圖像所呈現(xiàn)的人物中判定重要人物，并進(jìn)行圖像布局的圖像處理裝置、重要人物判定方法、圖像布局方法，以及用于使計算機(jī)執(zhí)行重要人物判定方法或者圖像布局方法的各個步驟的程序和記錄介質(zhì)。
【背景技術(shù)】
[0002]當(dāng)前，基于在移動電話或者個人計算機(jī)的存儲部、數(shù)碼相機(jī)等的閃存中存儲的多個圖像數(shù)據(jù)，進(jìn)行照片書等圖像商品的自動生成(例如，參照專利文獻(xiàn)I)。
[0003]通常，圖像商品的自動生成，是用戶從大量的圖像數(shù)據(jù)中選擇出登載到圖像商品中的圖像數(shù)據(jù)，并逐一進(jìn)行布局的過程，該過程并不繁瑣，因此，比較方便，但不一定能夠生成對用戶而言滿意度較高的圖像商品。例如，如圖13所示，在圖像商品的自動生成中，有時希望進(jìn)行以自己的孩子的圖像為中心的布局，但卻進(jìn)行了以其他人的孩子的圖像作為中心的布局，有可能降低用戶對自動生成的圖像商品的滿意度。
[0004]在專利文獻(xiàn)I中，提出了下述的圖像輸出裝置，即，該圖像輸出裝置從每個圖像數(shù)據(jù)中檢測出面部圖像，計算出面部圖像的作為被攝體的主要度，基于這些主要度計算出圖像數(shù)據(jù)的重要度，基于重要度進(jìn)行布局。
[0005]另外，在專利文獻(xiàn)2中，公開了下述的圖像分類裝置的發(fā)明，S卩，該圖像分類裝置從影像的幀圖像中檢測出人物的面部圖像，對所有的面部圖像進(jìn)行比較，針對每個人物的面部圖像進(jìn)行分組化，從而，將出現(xiàn)頻度最高的人物推定為主人公。
[0006]專利文獻(xiàn)1:日本特開2007 - 49387號公報
[0007]專利文獻(xiàn)2:日本特開2006 - 244279號公報
[0008]如果利用專利文獻(xiàn)I的圖像輸出裝置或者利用專利文獻(xiàn)2的圖像分類裝置的技術(shù)，則也許能夠避免如圖13所示的布局，但專利文獻(xiàn)I的面部圖像的作為被攝體的主要度、專利文獻(xiàn)2的主人公的推定是根據(jù)面部圖像的出現(xiàn)次數(shù)(出現(xiàn)頻度、檢測數(shù)量)即與面部圖像相對應(yīng)的人物的出場次數(shù)而決定的，在專利文獻(xiàn)I的圖像輸出裝置、專利文獻(xiàn)2的圖像分類裝置中，難于對呈現(xiàn)有出場次數(shù)較少但卻是重要人物的圖像數(shù)據(jù)進(jìn)行提取。
[0009]例如，在生成以孩子為中心(主人公)的家族的照片書的情況下，父親、祖父祖母是重要人物，但父親是拍攝者的情況較多，與母親相比，存在出場次數(shù)較少的傾向。另外，例如，能夠想到不與孩子一起生活的祖父祖母等的出場次數(shù)也較少。因此，如果利用專利文獻(xiàn)I的圖像輸出裝置或者專利文獻(xiàn)2的圖像分類裝置生成照片書，則存在下述問題，即生成沒有呈現(xiàn)出場次數(shù)較少的父親、祖父祖母的照片書。

【發(fā)明內(nèi)容】

[0010]本發(fā)明的目的在于解決上述現(xiàn)有技術(shù)的問題點(diǎn)，并提供一種不依靠出場次數(shù)判定重要人物，并進(jìn)行圖像布局的圖像處理裝置、重要人物判定方法、圖像布局方法，以及用于使計算機(jī)執(zhí)行重要人物判定方法或者圖像布局方法的各個步驟的程序和記錄介質(zhì)。
[0011]為了解決上述課題，本發(fā)明提供一種圖像處理裝置，該圖像處理裝置的特征在于，具有:圖像數(shù)據(jù)獲取部，其獲取多個圖像數(shù)據(jù)；面部圖像檢測部，其從由圖像數(shù)據(jù)獲取部獲取的多個圖像數(shù)據(jù)中檢測面部圖像；人物確定部，其基于在面部圖像檢測部中檢測出的多個面部圖像，進(jìn)行相同人物判定處理，并將多個面部圖像分類至由相同人物的面部圖像構(gòu)成的圖像組中，從而分別確定出與各圖像組相對應(yīng)的人物；主人公決定部，其將由人物確定部確定出的人物中的至少一個人物決定為主人公；以及重要人物判定部，其基于在主人公決定部中決定出的主人公，將由人物確定部確定出的除了主人公以外的人物中的、與主人公關(guān)聯(lián)性較高的至少一個人物，判定為重要人物。
[0012]另外，優(yōu)選主人公決定部將面部圖像的檢測數(shù)量最多的人物決定為主人公。
[0013]另外，優(yōu)選重要人物判定部將由人物確定部確定出的除了主人公以外的人物中的、與主人公一起呈現(xiàn)的圖像數(shù)據(jù)的數(shù)量最多的人物判定為重要人物。
[0014]另外，優(yōu)選面部圖像檢測部從多個圖像數(shù)據(jù)中檢測面部圖像，并且，檢測面部圖像的位置信息，重要人物判定部基于在面部圖像檢測部中檢測出的、在相同圖像中呈現(xiàn)的主人公的位置信息和除了主人公以外的人物的位置信息，計算出2個面部圖像之間的距離，基于2個面部圖像之間的距離，判定重要人物。
[0015]另外，優(yōu)選多個圖像數(shù)據(jù)分別具有作為元信息的拍攝日期時間信息以及拍攝位置信息中的至少一個，重要人物判定部基于呈現(xiàn)主人公的圖像數(shù)據(jù)的拍攝日期時間信息與呈現(xiàn)除了主人公以外的人物的圖像數(shù)據(jù)的拍攝日期時間信息的差異、以及呈現(xiàn)主人公的圖像數(shù)據(jù)的拍攝位置信息與呈現(xiàn)除了主人公以外的人物的圖像數(shù)據(jù)的拍攝位置信息的差異中的至少一方，判定重要人物。
[0016]優(yōu)選還具有:存儲部，其存儲多個圖像數(shù)據(jù)；圖像數(shù)據(jù)管理部，其對在存儲部中存儲的多個圖像數(shù)據(jù)進(jìn)行分類，作為規(guī)定的管理圖像組進(jìn)行管理；以及顯示部，其對表示出規(guī)定的管理圖像組的管理畫面進(jìn)行顯示，圖像數(shù)據(jù)管理部在規(guī)定的管理圖像組中存在包含有主人公以及重要人物中的至少一方的圖像數(shù)據(jù)的情況下，對顯示部所顯示的管理畫面進(jìn)行強(qiáng)調(diào)顯示。
[0017]另外，優(yōu)選還具有:優(yōu)先級設(shè)定部，其基于在主人公決定部中決定出的主人公和在重要人物判定部中判定出的重要人物，設(shè)定多個圖像數(shù)據(jù)的優(yōu)先級；圖像布局決定部，其基于在優(yōu)先級設(shè)定部中設(shè)定出的優(yōu)先級，決定多個圖像數(shù)據(jù)的布局；以及輸出部，其按照由圖像布局決定部決定出的布局，輸出多個圖像數(shù)據(jù)。
[0018]另外，優(yōu)選優(yōu)先級設(shè)定部基于主人公和重要人物的有無、主人公和重要人物的配置、以及主人公和重要人物與其他人物的位置關(guān)系中的至少一項(xiàng)，設(shè)定優(yōu)先級。
[0019]另外，優(yōu)選還具有人物變更部，該人物變更部基于用戶的指示，變更主人公或者重要人物，優(yōu)先級設(shè)定部基于由人物變更部變更后的主人公或者重要人物變更優(yōu)先級，圖像布局決定部基于變更后的優(yōu)先級變更多個圖像數(shù)據(jù)的布局。
[0020]另外，優(yōu)選還具有圖像修剪部，該圖像修剪部與布局相對應(yīng)，對基于多個圖像數(shù)據(jù)的圖像實(shí)施修剪處理，圖像修剪部基于主人公和重要人物的有無、主人公和重要人物的配置、以及主人公和重要人物與其他人物的位置關(guān)系中的至少一項(xiàng)而進(jìn)行修剪處理。
[0021]另外，本發(fā)明提供一種重要人物判定方法，該重要人物判定方法的特征在于，從多個圖像數(shù)據(jù)中檢測面部圖像，基于檢測的多個面部圖像進(jìn)行相同人物判定處理，并將多個面部圖像分類至由相同人物的面部圖像構(gòu)成的圖像組中，從而分別確定出與各圖像組相對應(yīng)的人物，將確定出的人物中的至少一個人物決定為主人公，基于決定出的主人公，將除了主人公以外的人物中的、與主人公關(guān)聯(lián)性較高的至少一個人物判定為重要人物。
[0022]另外，優(yōu)選將面部圖像的檢測數(shù)量最多的人物決定為主人公。
[0023]另外，優(yōu)選將除了主人公以外的人物中的、與主人公一起呈現(xiàn)的圖像數(shù)據(jù)的數(shù)量最多的人物判定為重要人物。
[0024]另外，優(yōu)選從多個圖像數(shù)據(jù)中檢測面部圖像，并且，檢測面部圖像的位置信息，基于在相同圖像中呈現(xiàn)的主人公的位置信息和除了主人公以外的人物的位置信息，計算出2個面部圖像之間的距離，基于2個面部圖像之間的距離，判定重要人物。
[0025]另外，優(yōu)選多個圖像數(shù)據(jù)分別具有作為元信息的拍攝日期時間信息以及拍攝位置信息中的至少一個，基于呈現(xiàn)主人公的圖像數(shù)據(jù)的拍攝日期時間信息與呈現(xiàn)除了主人公以外的人物的圖像數(shù)據(jù)的拍攝日期時間信息的差異、以及呈現(xiàn)主人公的圖像數(shù)據(jù)的拍攝位置信息與呈現(xiàn)除了主人公以外的人物的圖像數(shù)據(jù)的拍攝位置信息的差異中的至少一方，判定重要人物。
[0026]另外，本發(fā)明提供一種圖像布局方法，該圖像布局方法的特征在于，基于主人公和通過重要人物判定方法判定出的重要人物，決定多個圖像數(shù)據(jù)的優(yōu)先級，基于優(yōu)先級，決定多個圖像數(shù)據(jù)的布局。
[0027]另外，優(yōu)選基于主人公和重要人物的有無、主人公和重要人物的配置、以及主人公和重要人物與其他人物的位置關(guān)系中的至少一項(xiàng)，決定優(yōu)先級。
[0028]另外，在基于用戶的指示對主人公或者重要人物進(jìn)行變更的情況下，優(yōu)選基于變更后的主人公或者重要人物變更優(yōu)先級，基于變更后的優(yōu)先級變更多個圖像數(shù)據(jù)的布局。
[0029]另外，優(yōu)選基于主人公和重要人物的有無、主人公和重要人物的配置、以及主人公和重要人物與其他人物的位置關(guān)系中的至少一項(xiàng)，以及布局對基于多個圖像數(shù)據(jù)的圖像進(jìn)行修剪處理。
[0030]另外，本發(fā)明提供一種程序，該程序用于使計算機(jī)執(zhí)行上述任意一項(xiàng)所述的重要人物判定方法的各個步驟。
[0031]另外，本發(fā)明提供一種程序，該程序用于使計算機(jī)執(zhí)行上述任意一項(xiàng)所述的圖像布局方法的各個步驟。
[0032]另外，本發(fā)明提供一種計算機(jī)可讀取的記錄介質(zhì)，該記錄介質(zhì)記錄有用于使計算機(jī)執(zhí)行上述的重要人物判定方法或者上述的圖像布局方法的各個步驟的程序。
[0033]發(fā)明的效果
[0034]根據(jù)本發(fā)明，能夠不依靠出場次數(shù)判定重要人物，另外，能夠基于不是依靠出場次數(shù)決定出的重要人物進(jìn)行