專利名稱:合成圖像傳送設備以及方法
技術領域:
本發(fā)明涉及一種合成圖像傳送設備,用于傳送基于拾取場景圖像 的合成圖像。本發(fā)明還涉及相應的合成圖像傳送方法。
背景技術:
一些類型的常規(guī)靜像照相機或者攝像機具有組合拾取的圖像與其 他圖像,以及顯示得到的合成圖像的功能。例如,這種目前正在實際使用的照相機可以輸出通過組合拾取場 景圖像與花或者流行角色(character)的動畫圖像而形成的合成圖像, 其中所述動畫圖像被設置在拾取幀中的固定或者期望位置上??梢詫⒂蓴底终障鄼C拾取的圖像顯示在個人計算機的顯示屏幕 上,并且可以將其與不同的圖像進行組合以及編輯。在該情況下,所 述不同的圖像例如可以有選擇地從另一個圖形文件剪下,并且粘貼在 拾取圖像中的期望位置處。然而,采用這種常規(guī)圖像處理設備的問題在于僅僅是將準備的 圖像與拾取場景圖像在固定或者期望的位置處組合然后輸出,因此, 除拾取圖像以外,所述合成圖像勢必始終是單調的并且令人厭倦的
發(fā)明內容
本發(fā)明是鑒于上述問題而提出的。本發(fā)明的一個目的在于提供一 種圖像輸出設備, 一種圖像輸出處理程序以及一種圖像輸出方法,用 于能夠不僅組合固定動畫圖像與拾取場景圖像以便由此輸出得到的合 成圖像,而且能夠將對應于拾取場景圖像的動畫圖像與所述拾取場景 圖像進行組合。本發(fā)明的另一個目的在于提供一種圖像傳送服務器, 一種圖像傳 送程序以及一種圖像傳送方法,用于能夠不僅傳送固定圖像,而且能 夠傳送一般圖像。為了實現上述目的,依照本發(fā)明的一個方面,提供了一種合成圖 像輸出設備,包括拾取場景圖像獲得單元(裝置),用于獲取表示包含至少一個對象中 的一場景的拾取場景圖像;目標圖像提取單元(裝置),用于從獲得單元獲取的拾取場景圖像中 提取表示至少一個對象中的任意一特定對象的目標圖像;對應圖像獲得單元(裝置),用于獲得對應于所述提取單元提取的目 標圖像的圖像;以及圖像輸出單元(裝置),用于將所述獲得單元獲得的圖像添加到通過 所述拾取場景圖像獲得單元獲取的拾取場景圖像中,并且輸出得到的 合成圖像。在此合成圖像輸出設備中,當目標圖像提取裝置從通過獲取裝置 獲取的拾取場景圖像中提取表示至少一個對象中的任意一特定對象的 目標圖像時,通過所述對應圖像獲得裝置獲得對應于提取出的目標圖 像的圖像。于是,將獲得裝置獲得的圖像添加到通過拾取場景圖像獲 取裝置獲取的拾取場景圖像,由此輸出得到的合成圖像。簡而言之, 用戶可以享受創(chuàng)建可愛的合成圖像的樂趣。依照本發(fā)明的另一方面,還提供了一種合成圖像輸出設備,包括:拾取場景圖像獲得單元(裝置),用于獲取多個拾取場景圖像,各圖 像均表示包含至少一個對象的場景;目標圖像提取單元(裝置),用于從所述拾取場景圖像獲得單元獲得 的多個拾取場景圖像的任意一選擇的拾取場景圖像中、提取表示至少 一個對象中的任意一特定對象的目標圖像;對應圖像獲得單元(裝置),用于獲得對應于所述提取單元提取的目 標圖像的圖像;以及圖像輸出單元(裝置),用于利用對應圖像獲得單元獲得的圖像替代 在所述拾取場景圖像中提取出的目標圖像,用于將對應圖像添加到目 標圖像提取單元沒有從中提取目標圖像的其他多個拾取場景圖像的一 所選圖像,并且用于輸出得到的合成圖像。在此合成圖像輸出設備中,當目標圖像提取裝置從通過拾取場景 圖像獲取裝置獲取的多個拾取場景圖像的任一項中提取表示至少一個 對象中的任意一特定對象的目標圖像時,通過所述對應圖像獲得裝置 獲得對應于提取出的目標圖像的圖像。于是,通過所述圖像輸出裝置, 將目標圖像提取裝置提取出的目標圖像替換為對應圖像獲得裝置獲得 的圖像。此外,通過所述圖像輸出裝置,然后將對應圖像添加到目標 圖像提取裝置沒有從中提取目標圖像的其他多個拾取場景圖像的一所 選圖像,以便輸出得到的合成圖像。簡而言之,用戶可以享受創(chuàng)建可 愛的圖像的樂趣。依照本發(fā)明的又一方面,還提供了一種合成圖像傳送設備,包括拾取場景圖像接收器(接收裝置),用于從終端接收表示包含對象的 場景的拾取場景圖像;目標圖像提取器(提取裝置),用于從由拾取場景圖像接收單元接收 到的拾取場景圖像中提取表示所述對象的目標圖像;
對應圖像獲得器(獲得裝置),用于獲得對應于所述目標圖像提取單元提取的目標圖像的圖像;圖像添加器(添加裝置),用于將對應圖像獲得器獲得的對應圖像添 加到拾取場景圖像,以便由此提供得到的合成圖像;以及圖像傳送器(傳送裝置),用于將圖像添加器提供的合成圖像傳送到 終端。在所述合成圖像傳送設備中,當從終端接收到表示包含至少一個 對象的場景的拾取場景圖像時,目標圖像提取裝置從接收的拾取場景 圖像中提取表示所述對象的目標圖像。對應于提取出的目標圖像的圖 像通過所述對應圖像獲得裝置獲得。于是,通過所述圖像添加裝置將 獲得的圖像添加到拾取場景圖像,以便由此提供一種得到的合成圖像, 然后將其通過圖像傳送裝置傳送到終端。簡而言之,用戶可以享受創(chuàng) 建可愛的圖像的樂趣。依照本發(fā)明的又一方面,還提供了一種合成圖像傳送設備,所述 合成圖像傳送設備與終端進行通信,所述終端提取拾取場景圖像中包 含的目標圖像,發(fā)送有關所提取的目標圖像的終端姿態(tài)信息,接收對 應于所述姿態(tài)信息的圖像,其中所述姿態(tài)信息是終端響應合成圖像傳 送設備發(fā)送姿態(tài)信息而發(fā)送的,將所述對應圖像添加到拾取場景圖像, 由此輸出得到的合成圖像,所述設備包括姿態(tài)信息接收器(接收裝置),用于從所述終端接收拾取場景圖像中 包含的目標圖像的姿態(tài)信息;對應圖像存儲存儲器(存儲裝置),具有所存儲的多個圖像,每個圖 像均對應于姿態(tài)信息的不同項的相應一個;以及圖像傳送器(傳送裝置),用于從對應圖像存儲存儲器讀取對應于由 姿態(tài)信息接收器接收到的姿態(tài)信息的圖像,并且將讀取的圖像傳送到 終端。 在此合成圖像傳送設備中,當所述終端提取拾取場景圖像中包含 的目標圖像、并且將目標圖像的姿態(tài)信息發(fā)送到所述合成圖像傳送設 備時,所述合成圖像傳送設備在其姿態(tài)信息接收裝置中接收所述姿態(tài) 信息。于是,所述圖像傳送裝置從對應圖像存儲裝置中讀取對應于所 接收的姿態(tài)信息的圖像,并且將其傳送到所述終端。簡而言之,所述 終端可以從所述圖像傳送設備接收對應于從拾取場景圖像中提取的目 標圖像的圖像,并且將所述圖像添加到拾取場景圖像,以便由此輸出 合成出來的感興趣的合成圖像。由此,用戶可以享受創(chuàng)建可愛的圖像 的樂趣。
圖1是示出了依照本發(fā)明第一實施例的圖像輸出設備10的電子電路結構的框圖。圖2示出了分別存儲在圖像輸出設備10中的角色1"兔子"姿態(tài)圖像 存儲器12d、角色2"熊"姿態(tài)圖像存儲器12e以及角色3"貓"姿態(tài)圖像存儲 器12啲采用各種姿態(tài)的"兔子"、"熊"以及"貓"角色的圖像(部分l)。圖3示出了分別存儲在圖像輸出設備10中的角色1"兔子"姿態(tài)圖像 存儲器12d、角色2"熊"姿態(tài)圖像存儲器12e以及角色3"貓"姿態(tài)圖像存儲 器12飾采用各種姿態(tài)的"兔子"、"熊"以及"貓"角色的其他圖像(部分2)。圖4示出了分別存儲在圖像輸出設備10中的角色1"兔子"姿態(tài)圖像 存儲器12d、角色2"熊"姿態(tài)圖像存儲器12e以及角色3"貓"姿態(tài)圖像存儲 器12啲采用各種姿態(tài)的"兔子"、"熊"以及"貓"角色的進一步圖像(部分 3)。圖5示出了存儲在圖像輸出設備10的模型姿態(tài)存儲器12b中的模型 的各種姿態(tài)的圖像(部分l)。圖6示出了存儲在圖像輸出設備10的模型姿態(tài)存儲器12b中的模型
的其他各種姿態(tài)的圖像(部分2)。圖7示出了存儲在圖像輸出設備10的模型姿態(tài)存儲器12b中的模型 的再進一步的各種姿態(tài)(部分3)。圖8(A)作為一個例子示出了基于標準身體形狀的對象圖像(目標圖 像)產生的并且存儲在圖像輸出設備10的大小調節(jié)的模型姿態(tài)圖像存儲 器12c的模型圖像(姿態(tài)lA到5A)。圖8(B)作為另一個例子示出了圖8(B)中將大小調節(jié)為不標準的身 體形狀對象圖像(目標圖像)并且存儲在存儲器2C中的模型圖像(姿態(tài) 1A到5A)。圖9是示出了當圖像輸出設備10規(guī)定了跟隨者添加模式時,將"熊" 角色圖像作為跟隨者附加到拾取場景圖像的示意圖。圖10是示出了當圖像輸出設備10規(guī)定了空白區(qū)域角色圖像添加模 式時,在拾取場景圖像的空白區(qū)中添加"貓"角色圖像的示意圖。圖11是示出了當圖像輸出設備10規(guī)定了鏡像反轉角色圖像添加模 式時,在拾取場景圖像中添加鏡像反轉的"兔子"角色圖像的示意圖。圖12是示出了當圖像輸出設備10規(guī)定了多個圖像拾取/替代模式 時,利用"兔子"角色圖像替代對象圖像的示意圖。圖13是示出了當圖像輸出設備10規(guī)定了對象選擇/替代模式時,利 用"兔子"角色圖像替代對象圖像的示意圖。圖14是示出了圖像輸出設備10執(zhí)行的圖像處理(部分1)的流程圖。圖15是示出了從圖像輸出設備10將執(zhí)行的接續(xù)圖14的圖像處理 (部分1)的圖像處理(部分2)的流程圖。圖16(A)和(B)分別示出了將在圖像輸出設備10中執(zhí)行的圖像處理 中包括的目標圖像提取過程(方法1和2)的流程圖。圖17(A)和17(B)是分別示出了圖像輸出設備10中將執(zhí)行的圖像處 理中包括的對應動畫圖像獲取過程(方法1和2)的流程圖。
圖18是示出了用于評估角色/模型圖像的姿態(tài)與圖17(A)/17(B)的對 應動畫圖像獲取過程(方法l)/(方法2)中包括的模仿的目標圖像的相似 性的過程。圖19是示出了在圖17 (A)中對應動畫圖像獲取過程(方法l)中 包括的姿態(tài)相似性評估過程中,評估指定角色圖像與目標圖像在姿態(tài) 上的相似性的 一特定例子的示意圖。圖20是示出了在圖17(B)中對應動畫圖像獲取過程(方法2)中包括的姿態(tài)相似性評估過程中、評估模型圖像與目標圖像在姿態(tài)上的相似 性的一特定例子的示意圖。圖21是示出了在圖17(B)的對應動畫圖像獲取過程(方法2)中包括 的姿態(tài)相似性評估過程中,評估模型圖像與目標圖像在姿態(tài)上(部分2) 的相似性的另一特定例子的示意圖。圖22是示出了圖像輸出設備110的姿態(tài)模型的大小調整過程的流程圖。圖23是示出了依照本發(fā)明第二實施例的圖像傳送系統(tǒng)中圖像傳送 服務器110的電子電路結構的框圖。圖24是示出了依照第二實施例的圖像傳送系統(tǒng)中的終端120的電子電路結構的框圖。圖25是示出了依照第二實施例的當規(guī)定了多個拾取替代模式時, 通過圖像傳送服務器110根據來自于圖像傳送系統(tǒng)的終端設備120的請求來利用其它圖像替代目標圖像并且添加"熊"角色圖像的示意圖。圖26是示出了依照第二實施例的圖像傳送系統(tǒng)的終端120的圖像處理(部分l)的流程圖。圖27是示出了由圖像傳送系統(tǒng)的終端120從圖26的圖像處理(部分1)繼續(xù)的圖像處理(部分2)的流程圖。圖28是示出了依照第二實施例的圖像傳送系統(tǒng)的圖像傳送服務器 io的服務器處理(部分i)的流程圖。圖29是示出了依照第二實施例的由圖像傳送服務器10執(zhí)行的接續(xù) 圖28的服務器處理(部分1)的服務器處理(部分2)的流程圖。圖30是示出了依照第二實施例在圖像傳送服務器10中的服務器處 理中包括的目標圖像提取過程的流程圖。圖31是示出了依照第二實施例在圖像傳送服務器10中的服務器處理中包括的對應動畫圖像獲取過程的流程圖。圖32是示出了依照第二實施例評估模型圖像與目標圖像在姿態(tài)上 相似性的示意圖,該評估將在圖像傳送系統(tǒng)10的對應動畫圖像獲取過 禾呈中包括的姿態(tài)相似性評估過程中執(zhí)行。圖33是示出了依照第三實施例的圖像傳送系統(tǒng)的終端120的圖像 處理(部分l)的流程圖。圖34是示出了由圖像傳送系統(tǒng)的終端設備120接續(xù)圖33的圖像處 理(部分1)的圖像處理(部分2)的流程圖。圖35是示出了依照第三實施例的圖像傳送系統(tǒng)的圖像傳送服務器 IIO的服務器處理的流程圖。圖36是示出了依照所述第三實施例的圖像傳送系統(tǒng)的終端120中 的所述圖像處理中包括的目標圖像提取過程的流程圖。圖37是示出了依照所述第三實施例的圖像傳送系統(tǒng)的終端120中 的所述圖像處理中包括的姿態(tài)編號確定確定過程的流程圖。圖38是示出了依照第三實施例在圖像傳送系統(tǒng)的終端120的圖像 處理中包括的姿態(tài)編號確定過程中、評估模型圖像與模仿的目標圖像 在姿態(tài)上相似性的流程圖。圖39是示出了根據第三實施例的作為用于圖像傳送服務器110中 的運動圖像的姿態(tài)角色圖像的,觸發(fā)存儲在圖像傳送服務器110中的運 動圖像'兔子"角色姿態(tài)圖像存儲器12dM中的各種姿態(tài)的動畫"兔子"角 色的圖像。圖40是示出了依照第四實施例的圖像傳送系統(tǒng)的通用結構的框圖。圖41是依照第四實施例示出了在圖像傳送系統(tǒng)中用戶的原始角色 圖像寄存過程的流程圖,其中圖41(A)是示出了在攜帶式電話200A側上 執(zhí)行的過程的流程圖,而圖41(B)是示出了在圖像傳送服務器210側上執(zhí) 行的過程的流程圖。
具體實施方式
將參照附圖描述本發(fā)明的優(yōu)選實施例。 (第一實施例)圖1是示出了依照本發(fā)明第一實施例的圖像輸出設備10的電子電 路結構的框圖。此圖像輸出設備1 o包括計算機,用于讀取記錄在各種記錄介質上的程序或者從外部接收的程序,并且依照所述程序來控制其自身操作。計算機的電子電路包括CPU(中央處理單元)l 1 。所述CPU 11依照預先存儲在存儲器12中的設備控制程序來控制電 路部件的操作,所述設備控制程序從諸如CD-ROM的外部記錄介質13 經由記錄介質讀出器14讀入存儲器12中,或者所述設備控制程序從互 聯網N上的網絡服務器21 (在該情況下,是程序服務器)經由電子傳輸控 制器15讀入存儲器12。存儲在存儲器12中的設備控制程序通過響應輸 入單元16的用戶操作而發(fā)出的輸入信號來啟動,所述輸入單元16具有 按鍵或者觸摸面板,或者通過經由圖像輸入單元17輸入的圖像信號來 啟動,或者通過用于在互聯網N上與每個網絡服務器21通信的通信信號 來啟動,該互聯網N經由所述電子傳輸控制器15連接到所述圖像輸出設 備10。
除了存儲器12、記錄介質讀出器14、電子傳輸控制器15、輸入單 元16和圖像輸入單元17,所述CPU 11還與距離傳感器18、包括LED的 顯示單元19以及圖像輸出單元20相連。圖像輸入單元17從數字照相機17A、數字視頻電影攝影機17B或者 VTR(放像機)17C有選擇地獲得拾取場景圖像數據。所述距離傳感器18在將對象圖像輸入到圖像輸入單元17的場景中 檢測距離傳感器18和對象之間的距離。所述圖像輸出單元20基于經由圖像輸入單元17接收的拾取場景圖 像輸出通過此設備處理的圖像數據。將輸出的圖像數據有選擇地輸出 到存儲卡20A、 VTR(錄像機)20B或者圖像打印機20C,以便存儲、記錄或者打印所述圖像。所述存儲器12已經存儲了用于負責控制圖像輸出設備10的整個操 作的系統(tǒng)程序,以及用于經由所述電子傳輸控制器15與互聯網N上的每 個網絡服務器21交換數據的通信程序。所述存儲器12還已經存儲了圖 像處理程序12a,用于經由圖像輸入單元17和圖像輸出單元20、通過所 述圖像輸出設備10執(zhí)行對應于拾取場景圖像中目標圖像的圖像組合/輸 出過程。此外,所述存儲器12已經準備了模型姿態(tài)圖像存儲器12b、大小調 節(jié)的模型姿態(tài)圖像存儲器12c、角色l"兔子"姿態(tài)圖像存儲器12d、"熊" 姿態(tài)圖像存儲器12e和角色3"貓"姿態(tài)圖像存儲器12f。此外,它已經在 其工作區(qū)中準備了拾取場景圖像存儲器12g和圖像處理工作區(qū)12h。圖2示出了觸發(fā)分別存儲在圖像輸出設備10的角色1"兔子"姿態(tài)圖 像存儲器12d、角色2"熊"姿態(tài)圖像存儲器12e和角色3"貓"姿態(tài)圖像存儲 器12沖的各種姿態(tài)(部分1)的"兔子"、"熊"和"貓"的角色圖像。圖3示出了觸發(fā)分別存儲在圖像輸出設備10的角色1"兔子"姿態(tài)圖 像存儲器12d、角色2"熊"姿態(tài)圖像存儲器12e和角色3"貓"姿態(tài)圖像存儲
器12沖的各種姿態(tài)(部分2)的"兔子"、"熊"和"貓"的角色圖像。圖4示出了觸發(fā)分別存儲在圖像輸出設備10的角色1"兔子"姿態(tài)圖 像存儲器12d、角色2"熊"姿態(tài)圖像存儲器12e和角色3"貓"姿態(tài)圖像存儲 器12沖的各種姿態(tài)(部分3)的"兔子"、"熊"和"貓"的角色圖像。觸發(fā)存儲在角色"兔子"、"熊"和"貓"姿態(tài)圖像存儲器12d、 12e和12f 中的各種姿態(tài)的每個不同類型的角色圖像,可以用作模仿相應對象(目 標)圖像之一的姿態(tài)的角色圖像,其中所述對象圖像位于從所述圖像 輸入單元17輸入的拾取場景圖像中。將不同姿態(tài)編號與不同姿態(tài)依照 對應關系存儲。圖5示出了對應于存儲在圖像輸出設備10的模型姿態(tài)存儲器12b中的各種模型姿態(tài)(部分l)的模型的圖像。圖6示出了對應于存儲在圖像輸出設備10的模型姿態(tài)存儲器12b中的各種模型姿態(tài)(部分2)的模型圖像。圖7示出了對應于存儲在圖像輸出設備10的模型姿態(tài)存儲器12b中的各種模型姿態(tài)(部分3)的進一步的模型圖像。觸發(fā)存儲在模型姿態(tài)圖像存儲器12b中的各種姿態(tài)的每個模型圖像用來獲得在姿態(tài)上與對象(目標)圖像類似的模型圖像,其中所述對象 圖像位于從圖像輸入單元17輸入的拾取場景圖像中。將不同的姿態(tài)依 照對應關系用不同的姿態(tài)編號來存儲,并且為每個姿態(tài)編號存儲A、 B 和C三種模型圖像。存儲在角色l"兔子"姿態(tài)圖像存儲器12d、角色2"熊"姿態(tài)圖像存儲 器12e和角色3"貓"姿態(tài)圖像存儲器12沖的各個"兔子"、"熊"和"貓"的角 色圖像,對應于觸發(fā)存儲在所述模型姿態(tài)圖像存儲器12b中的所有姿態(tài) 編號(編號1A、 1B、 1C、 2A、 2B、 2C、 ... nA、 nB、 nC)表明的姿態(tài)的 模型圖像。圖8示出了存儲在圖像輸出設備的大小調節(jié)的模型姿態(tài)圖像存儲
器12c中的大小調節(jié)的姿態(tài)圖像,其中圖8(A)作為一個例子示出了根據 顯示在圖8(A)左側的標準身體形狀對象(目標)圖像生產并且存儲在存 儲器12c中的模型姿態(tài)圖像(具有姿態(tài)lA到5A)。圖8(B)作為一個例子示 出了通過將圖8(A)各個標準身體形狀模型姿態(tài)圖像的大小縱向和橫向 調節(jié)為不標準的身體形狀對象(目標)圖像并且存儲在所述存儲器12c而 獲得的大小調節(jié)的模型姿態(tài)圖像(具有姿態(tài)1A到5A)。
如下獲得將存儲在大小調節(jié)的模型姿態(tài)圖像存儲器12c中的大小 調節(jié)的模型圖像。在圖8(A)中通過姿態(tài)2A示出的全長的標準身體形狀 姿態(tài)模型圖像在大小上被調節(jié)(縱向以及橫向)為圖8(B)中所示的不標 準的身體形狀對象圖像,以變成對應于姿態(tài)2A的大小調節(jié)的圖像。依 照姿態(tài)2A的大小調節(jié)的模型圖像的大小調節(jié)比例(平衡),其他姿態(tài)的 所有其他標準身體形狀模型圖像都是大小調節(jié)為非標準身體形狀的模 型圖像的,然后被存儲在大小調節(jié)的模型姿態(tài)圖像存儲器12c中。
所述拾取場景圖像存儲器12g從圖像輸入單元17接收拾取場景圖 像數據,并且依照拾取場景圖像的單位來存儲拾取場景圖像數據。
當處理所述圖像數據時,所述圖像處理工作區(qū)12h暫時存儲待依照 圖像處理程序12a處理的圖像數據。
此刻將略述如上所述構造的圖像輸出設備10的操作。
圖9舉例說明了當圖像輸出設備10規(guī)定了跟隨者添加模式時,附加 作為跟隨者的"熊"角色圖像。
當如圖9(B)所示從圖9(A)的拾取場景圖像12gl提取對象(目標)圖像 H、并且將"熊"角色圖像規(guī)定作為跟隨者時,從角色2"熊"姿態(tài)圖像存 儲器12e讀取在姿態(tài)上類似于圖9(C)所示對象圖像H的姿態(tài)4(側視圖)的 "步行"角色圖像"熊"。于是,從在一系列拾取場景圖像12gl上呈現對象 圖像H的位置識別出拾取場景圖像12gl中的一位置,所述對象圖像H在 確定的時間周期以前呈現在該位置。將從角色2"熊"姿態(tài)圖像存儲器12e
中讀取的姿態(tài)4的"步行熊"角色圖像(側視圖)添加到拾取場景圖像中的 一個位置處,在該位置處,對象圖像H在確定的時間周期以前就存在, 如圖9(D)所示。
簡而言之,將姿態(tài)上類似于拾取場景圖像12gl中的對象圖像H的 "步行熊"角色圖像添加到拾取圖像中"熊"角色圖像跟隨對象圖像H的 位置處。
圖10舉例說明了當規(guī)定了空白區(qū)域角色圖像添加模式時、圖像輸 出設備10在空白區(qū)中添力口"貓"角色圖像。
如果指定了模仿的對象(目標)圖像H1并且從圖10(A)的拾取場景 圖像12g2中提取出,如圖10(B)所示,并且指定將"貓"角色圖像添加到 空白區(qū),那么從如圖10(C)所示的角色3"貓"姿態(tài)圖像存儲器12沖讀取 在姿態(tài)上類似于對象(目標)圖像H1的姿態(tài)10("萬歲")的"貓"角色圖像。 然后,將此讀取的姿態(tài)10("萬歲")的"貓"角色圖像添加到拾取場景圖像 12g2中空白區(qū)的任何隨機位置處,其中不存在對象(目標)圖像H1和 H2,如圖10(D)所示。
簡而言之,將模仿在拾取場景圖像12g2中指定的對象圖像的姿態(tài) 的"貓"角色圖像添加到拾取場景圖像12g2的空白區(qū)中的任何隨機位置 處。
圖11舉例說明了當圖像輸出設備10規(guī)定了鏡像反轉圖像添加模式 時附加鏡像反轉的"兔子"角色圖像。
如果如圖ll(B)所示從拾取場景圖像12g3提取對象(目標)圖像H, 其中拾取場景圖像12g3包括有意識與伙伴(未示出)跳舞的對象(目標) 圖像H,例如圖11(A)所示,并且如果指定"兔子"角色圖像作為舞蹈伙 伴角色圖像被添加時,那么從角色l"兔子"姿態(tài)圖像存儲器12d中讀取 在姿態(tài)上類似于對象(目標)圖像H的姿態(tài)19("跳舞")的"兔子"角色圖 像,如圖ll (C)所示。于是,將讀取的"兔子"角色圖像鏡像反轉,并
且作為舞伴添加到拾取場景圖像12g3中的一位置處,其中鏡像反轉的 "兔子"圖像與跳舞目的的對象(目標)圖像H鏈接,如圖11(D)所示。
簡而言之,將模仿拾取場景圖像12g3中對象圖像H的跳舞姿態(tài)的 "兔子"角色圖像鏡像反轉,并且作為舞伴添加到拾取場景圖像的位置 處,其中所述鏡像反轉"兔子"與對象圖像H鏈接。
圖12舉例說明了當圖像輸出設備10規(guī)定了多個圖像拾取/替代模式 時通過"兔子"角色圖像替代對象圖像。
例如,當用戶希望產生作為替代圖像的"兔子"角色給于用戶親吻 的場景圖像時,從圖12(A)的第一拾取場景圖像12g4中提取希望觸發(fā)親 吻姿態(tài)的對象(目標)圖像H1,如圖12 (B)所示,其中所述圖12(A) 包含觸發(fā)親吻姿態(tài)的對象圖像H1。當將"兔子"角色圖像指定為替代角 色圖像時,從角色l"兔子"姿態(tài)圖像存儲器12d中讀取在姿態(tài)上類似于 對象(目標)圖像H1的具有姿態(tài)20 ("親吻")的"兔子"角色圖像,如 圖12(C)所示。
然后,如圖12(D)所示,從角色l"兔子"姿態(tài)圖像存儲器12d讀取的、 在姿態(tài)上類似于所述第一對象圖像H1的姿態(tài)20("親吻")的"兔子"角色 圖像被添加到第二拾取場景圖像12g4',所述第二拾取場景圖像12g4'包 含在姿態(tài)上不同于第一拾取圖像中對象(目標)圖像H的對象圖像H2, 如圖12(E)所示。
簡而言之,將模仿第一拾取場景圖像12g4中的對象圖像Hl的"兔 子"角色圖像與第二拾取場景圖像12g4'中的對象圖像H2組合。
圖13舉例說明了當圖像輸出設備1 O選擇了對象選擇/替代模式時、
由角色"兔子"圖像替代對象圖像。
如果指定了一對象圖像H1并且如圖13(B)所示從拾取場景圖像 12g5中提取作為待替代的圖像,并且將"兔子"圖像指定為替代對象圖 像,其中所述拾取場景圖像12g5例如包含三個對象圖像Hl到H3,如圖13(A)所示,那么從角色l"兔子"姿態(tài)圖像存儲器12d中讀取在姿態(tài)上類 似于對象圖像H1的具有姿態(tài)1(笑一笑(特寫鏡頭))的"兔子"角色圖像, 如圖13 (C)所示。另一方面,將指定的對象圖像H1以及其他對象圖像H2、 H3從拾取 場景圖像12g5中剪切,并且分別如圖13(B)、 13(F)、 13(E)和13(D)所示 那樣產生背景圖像12g5'。于是,如圖13(G)所示,將從角色l"兔子"姿態(tài)圖像存儲器12d讀取 的在姿態(tài)上類似于指定的對象圖像H1的"兔子"角色圖像和從拾取場景 圖像12g5中剪切的對象圖像H2、 H3與背景圖像12g5 '組合,并依照到 圖像被拾取的各個對象的圖像拾取距離的遞減次序使它們處于相應的 適當位置處。簡而言之,模仿拾取場景圖像12g5中的指定的對象圖像Hl的姿態(tài) 的"兔子"角色圖像替代指定的對象圖像H1 ,由此提供得到的合成圖像。然后,將更詳細地描述圖像輸出設備10將執(zhí)行的圖像處理。圖14是示出了圖像輸出設備10執(zhí)行的圖像處理(部分1)的流程圖。圖15是示出了接續(xù)圖14的圖像處理(部分1)的通過所述圖像輸出設 備10執(zhí)行的圖像處理(部分2)的流程圖。將用作拾取場景圖像12g中的添加角色或者替代的角色類型("兔 子"、"熊"或者"貓")通過操縱輸入單元16進行指定(步驟S 1)。從以下組中選擇并且指定添加/組成模式或者替代/組成模式 "1-1:隨機空白區(qū)域角色圖像添加模式"、"l-2:跟隨者添加模式"、"l-3: 鏡像反轉角色圖像添加模式"以及"2-1:對象圖像選擇/替代模式"以及 "2-2:多個圖像拾取/替代模式"。(步驟S2)。當數字照相機17A、數字視頻電影攝影機17B或者VTR(播放器)17C 拾取的場景圖像12gn開始被輸入到圖像輸出設備12gn(步驟S3)、并且執(zhí) 行啟動操作以添加指定的角色圖像到場景圖像12gn(步驟S4)時,所述過
程進行到圖16中的提取對象圖像(步驟S A)。圖16(A)和16(B)是圖像輸出設備10中圖像處理中分別包括的目標 圖像提取過程(方法1和2)的流程圖。在圖16(A)的目標圖像提取過程(方法l)中,經由圖像輸入單元17以 預定時間順序輸入到圖像輸出設備10的一系列拾取場景圖像12gn被存 儲在工作區(qū)的拾取場景圖像存儲器12g中(步驟Al 1)。于是,提取觸發(fā)對應于每個對象的移動的不同姿態(tài)的對象圖像Hn 作為存儲在拾取場景圖像存儲器12g中的系列拾取場景圖像12gn的每 個的相應塊(步驟A12),并且在圖像處理工作區(qū)12h中排序(步驟A13)。在圖16(B)的目標圖像提取過程(方法2)中,距離傳感器18和圖像被 拾取的場景中的每個對象之間的距離通過所述距離傳感器18被測量(步 驟A21)。提取根據背景和對象之間的距離確定為出現于短距離中的每 個對象的圖像Hn,并將其作為一獨立的塊(步驟A22)。然后將每個提取出的對象圖像Hn作為獨立的塊存儲在圖像處理工 作區(qū)12h中(步驟A23)。當從拾取場景圖像12gn提取拾取場景圖像12gn中包括的每個對象 圖像Hn作為一塊并且存儲在圖像處理工作區(qū)12h中時(步驟SA),在顯示 器19上顯示具有破折線包圍M中的每個提取對象圖像Hn的拾取場景圖 像12gn,例如圖9(A)、 ll(A)、 12(A)或者13(A)所示(步驟S5)。然后,確定在顯示器19上顯示的拾取場景圖像12gn中是否存在對 象圖像Hn的多個塊(步驟S6)。如果確定在拾取場景圖像12gn中沒有對象圖像Hn的多個塊,那么 將從拾取場景圖像12gn中提取的唯一一個對象圖像Hn設定為模仿的對 象圖像(步驟S6—S7a)。如果確定在拾取場景圖像12gn中存在對象圖像Hn的多個塊,那么 用戶通過操縱輸入單元16從對象圖像的多個塊中指定模仿的目標圖像
(步驟S6—S7b)。當將對象圖像Hn指定為模仿的目標圖像時,所述過程進行到圖17 中的對應動畫圖像獲取過程(步驟SB)。圖17(A)和17(B)是分別示出了圖像輸出設備10中將執(zhí)行的圖像處 理包括的對應動畫圖像獲取過程(方法1和2)的不同流程圖。在圖17(A)的所述對應動畫圖像獲取過程(方法1)中,評估指定角色 的每個姿態(tài)圖像與從拾取場景圖像12gn中提取并且設定為模仿的目標 圖像的對象圖像Hn的姿態(tài)相似性(步驟BlC),并且在顯示器19上顯示產 生最高姿態(tài)相似性的姿態(tài)角色圖像(步驟B 12)。這里,當通過用戶操縱輸入單元16選擇產生與在顯示器19上顯示 的模仿的目標圖像具有最高姿態(tài)相似性的姿態(tài)角色圖像時,將指定的 角色圖像(具有其姿態(tài)編號)寄存為對應于所述模仿的目標圖像的動畫 圖像。只要有具有不同的姿態(tài)相似性的姿態(tài)角色圖像,那么每當點擊 "下一顯示(next display)"時、顯示具有下一個最高姿態(tài)相似性的姿態(tài) 角色(步驟B13—B14)。另一方面,如果(或者每當)用戶在將具有與模仿的目標圖像具有最 高姿態(tài)相似性的角色圖像顯示在顯示器19上的狀態(tài)下操縱輸入單元16點擊"下一顯示"時,那么將呈現具有第二最高姿態(tài)相似性的角色圖像 (步驟B13—B15)。當通過用戶操縱輸入單元16顯示并且選擇具有最高姿態(tài)相似性的角色圖像時,將所選(通過其編號指定的)角色圖像寄存為對應于所述模 仿的目標圖像的動畫圖像(步驟B13—B14)。簡而言之,在所述對應動畫圖像獲取過程(方法l)中,直接評估指 定角色的相應姿態(tài)圖像與作為模仿的目標圖像的對象圖像Hn在姿態(tài)上 的相似性,其中所述對象圖像Hn是已經從拾取場景圖像12gn中提取并 且設定為所述目標圖像的。根據此評估,確定指定的角色圖像,并將
其用作添加角色圖像或者作為觸發(fā)模仿對象圖像Hn的姿態(tài)的替代角色 圖像。在圖17(B)中的對應動畫圖像獲取過程(方法2)中,對存儲在模型姿 態(tài)圖像存儲器12b中的指定模型的每個姿態(tài)圖像與從拾取場景圖像 12gn中提取并且設定為模仿的目標圖像的對象圖像Hn在姿態(tài)上的相似 性進行評估(步驟B2C)。在顯示器19上顯示對應于具有最高姿態(tài)相似性 的模型圖像的姿態(tài)編號的指定角色圖像(步驟B22)。當通過用戶操縱輸入單元16選擇對應于具有與在顯示器19上顯示 的模仿的目標圖像具有最高姿態(tài)相似性的姿態(tài)模型圖像的角色圖像 時,將所述(通過其姿態(tài)編號指定的)角色圖像寄存為對應于所述模仿的 目標圖像的動畫圖像(步驟B23—B24)。另一方面,如果(或者每當)用戶在將角色圖像顯示在顯示器19的狀 態(tài)下操縱輸入單元16點擊"下一顯示"時,其中所述角色圖像對應于具 有與模仿的目標圖像的最高姿態(tài)相似性的模型圖像的姿態(tài)編號,那么 對應于具有第二最高姿態(tài)的模型圖像的姿態(tài)編號顯示指定的角色圖 像。只要仍存在具有不同姿態(tài)相似性的姿態(tài)角色圖像,那么每當點擊 "下一顯示"時、顯示具有下一最高姿態(tài)相似性的姿態(tài)角色(步驟 B23—B25)。然后,當通過用戶操縱輸入單元16選擇并且顯示對應于具有期望 姿態(tài)相似性的模型姿態(tài)圖像的角色圖像吋,將指定的(通過其姿態(tài)編號 指定的)角色圖像寄存為對應于所述模仿的目標圖像的動畫圖像(歩驟 B23—B24)。如上所述,在對應動畫圖像獲取過程(方法2)中,評估人類圖形的 基本模型的每個不同姿態(tài)圖像與從拾取場景圖像12gn中提取并且設定 為這種模仿的目標圖像的對象圖像Hn在姿態(tài)上的相似性。然后,根據 此評估,確定指定的角色圖像,其模仿對象圖像Hn的姿態(tài),并且用作
添加角色或者作為替代角色。
在該情況下,與對應動畫圖像獲取過程(方法l)相比較,其中方法l 直接評估指定角色的每個各種姿態(tài)圖像與作為模仿的目標圖像的對象
圖像Hn在姿態(tài)上的相似性,以便確定將用作添加角色或者作為替代角 色的角色圖像,所述對應動畫圖像獲取過程(方法2)是十分有益的,在 所述方法2中,指定模型的不同姿態(tài)圖像與從拾取場景圖像12gn中提取 并且設定為模仿的目標圖像的對象圖像Hn在姿態(tài)上的相似性被評估, 并且根據基于此評估所選的模型姿態(tài)編號來確定用作添加角色或者作 為替代角色的角色圖像,方法2的益處在于使用人類圖形模型使其便 于獲得具有與對象圖像具有更高姿態(tài)相似性的模型圖像,并且便于獲 得具有更高姿態(tài)相似性(模仿)的角色圖像。
圖18是示出了在圖像輸出設備10待執(zhí)行的圖像處理中包括的圖17 的對應動畫圖像獲取過程(方法1和2)中、評估角色/模型圖像與模仿的 目標圖像在姿態(tài)上的相似性的流程圖。
當在對應動畫圖像獲取過程(方法l)中執(zhí)行姿態(tài)相似性評估時,評 估指定角色的每個各種姿態(tài)圖像與模仿的目標圖像在姿態(tài)上的相似 性。當在模仿圖像的對應動畫獲取過程(方法2)中執(zhí)行姿態(tài)相似性評估 時,評估指定模型的每個各種姿態(tài)圖像與模仿的目標圖像在姿態(tài)上的 相似性。
圖19是示出了在圖像輸出設備10中待執(zhí)行的對應動畫圖像獲取過 程(方法l)的姿態(tài)相似性評估過程中包括的用于評估指定角色圖像與模 仿的目標圖像在姿態(tài)上的相似性的例子示意圖。
圖20是示出了在圖像輸出設備10中待執(zhí)行的對應動畫圖像獲取過 程(方法2)的姿態(tài)相似性評估過程中包括的評估例子的示意圖,用于評
估模型圖像與模仿的目標圖像在姿態(tài)上的相似性(部分l)。
圖21是示出了在對應動畫圖像獲取過程(方法2)的姿態(tài)相似性評估
過程中包括的用于評估模型圖像與模仿的目標圖像在姿態(tài)上的相似性(部分2)的例子示意圖。首先,在相似性評估過程(方法l)中,讀取具有第一姿態(tài)編號的指 定的角色圖像(步驟C1),例如圖19(A)所示,并且調節(jié)指定的角色圖像 和模仿的目標圖像H1以便在大小(縱向和橫向)上相一致,如圖19(X) 所示(步驟C2)。于是,將調節(jié)了的角色圖像和模仿的目標圖像H1彼此重疊,然后 評估它們之間在姿態(tài)上的相似性(%),并且作為角色圖像與模仿的目標 圖像在姿態(tài)上的相似性加以存儲(步驟C3)。這里,然后確定作為相似性評估目標的角色圖像(具有第一姿態(tài)編 號)是否不對稱(步驟C4)。如果確定所述角色圖像不是不對稱的(步驟 C4,"否"),那么順序執(zhí)行大小調節(jié)和重疊、模仿的目標圖像和具有相 應順序姿態(tài)編號的指定角色的每個姿態(tài)圖像之間的重疊一相似性評 估,并且存儲他們的相似性,例如圖19(B)和19(C)所示(步驟 C8—C9—C2國C4)。另一方面,如果確定作為相似性評估目標的具有姿態(tài)編號的角色 圖像是不對稱的,那么將角色圖像鏡像反轉(步驟C4—C5),并且調節(jié) 反轉的角色圖像以及模仿的目標圖像以便在大小(縱向和橫向)上相一 致(步驟C6)。于是,將模仿的目標圖像和反轉的角色圖像彼此重疊,然后評估 它們之間在姿態(tài)上的相似性(%),并且作為倒像與模仿的目標圖像在姿 態(tài)上的相似性加以存儲(步驟C7)。然后,如果存在更進一步的其它具有順序姿態(tài)編號的指定角色的 姿態(tài)圖像,那么如上所述順序讀取它們(步驟C9),在具有順序姿態(tài) 編號的指定角色的相應姿態(tài)圖像和模仿的目標圖像之間重復執(zhí)行相似 性評估過程(步驟C2-C7)。
例如圖19所示,當評估"兔子"角色圖像與對象圖像(目標圖像)H1 在姿態(tài)上的相似性時,將具有姿態(tài)編號lA的"兔子"角色圖像12d①A評 估為具有最高姿態(tài)相似性。然后,當如圖20(A)或者21(A)所示那樣執(zhí)行相似性評估過程(方法 2)時,讀取編號①A的第一姿態(tài)的模型圖像(步驟C1),并且調節(jié)(縱向和 橫向)對模仿的目標圖象m或者H的大小,如圖20(X)或者圖21(X)所示 (步驟C2)。然后,將模仿的目標圖像H1或者H和調節(jié)的模型圖像重疊,并且 評估它們之間在姿態(tài)上的相似性(%),并且作為模型圖像與模仿的目標 圖像在姿態(tài)上的相似性存儲(步驟C3)。此刻,確定作為相似性評估目標的模型圖像是否是不對稱的(步驟 4)。如果確定模型姿態(tài)圖像12b(lA)不是不對稱的,例如圖20(A)或者 21(A)所示(步驟C4,"否"),那么讀取具有下一姿態(tài)編號的模型圖像(步 驟C8—C9),并且用和如上所述一樣的方法,在模仿的目標圖像H1或 者H和下一姿態(tài)的模型圖像之間重復姿態(tài)相似性評估過程(步驟 C2陽C4)。. 另一方面,例如如圖20(B)或者21(B)所示,如果確定作為相似性評 估目標的具有姿態(tài)編號lB或者4B的模型圖像12b(lB)或者12b(4B)在此 情形下是不對稱的,那么將具有姿態(tài)編號①B或者④B的模型圖像鏡像 反轉(步驟C4與C5),并且如圖20(C)或者21(C)所示,調節(jié)此反轉的模型 圖像12b(lB)R或者12b(4B)R對所述模仿的目標圖像Hl或者H的大小(縱 向和橫向)(步驟C6)。然后,將模仿的目標圖像H1或者H和反轉的并且大小調節(jié)的模型 圖像12b(lB)R或者12b(4B)R彼此重疊,并且評估它們之間在姿態(tài)上的 相似性(%),并作為姿態(tài)反轉的模型圖像12b(lB)R或者12b(4B)R與模仿 的目標圖像在姿態(tài)上的相似性加以存儲(步驟C7)。 然后,如果存在具有順序姿態(tài)編號的其它模型圖像(步驟C8),那 么將順序讀取這些模型圖像(步驟C9),用如上所述一樣的方法,在模仿 的目標圖像和相應的模型圖像之間重復姿態(tài)相似性評估過程(步驟 C2-C7)。因此,如圖所示,例如在圖20中,如果在對象圖像(目標圖像)H1 和相應的姿態(tài)模型圖像之間執(zhí)行姿態(tài)相似性評估,那么將具有姿態(tài)編 號lB的模型圖像12b(lB)評估為具有最高姿態(tài)相似性的一個。例如圖21 所示,如果在對象圖像(目標圖像)H和相應的模型圖像之間執(zhí)行姿態(tài)相 似性評估,那么將具有姿態(tài)編號④BR的模型圖像12b(4B)R評估為具有 最高姿態(tài)相似性的一個。如上所述,當在參照圖17-21所述的對應動畫圖像獲取過程(步驟 SB)中確定了用于模仿從拾取場景圖像12gn中提取并且設定為這種模仿的目標圖像的對象圖像Hn的指定角色圖像時,確定指定圖像的組成 模式是添加/組成模式還是替代/組成模式(步驟S8)。如果確定指定圖像的組成模式是"添加/組成模式"以及"l-l:隨機 空白區(qū)域角色圖像添加模式"(步驟S8到S9, "l-l"),那么將"貓"角色圖 像12頓添加到拾取場景圖像12g2 '中不同于提取對象塊M的區(qū)域的一 空白區(qū)的隨機位置并且顯示,例如圖10(D)所示(步驟Slla),其中所述 "貓"角色圖像12頓用于模仿作為在對應動畫圖像獲取過程(參見圖17) 中獲得的模仿目標的對象圖像H1的姿態(tài)"萬歲"。這時,如果執(zhí)行手工操作以便從將"貓"角色圖像12頓從將其添加 到拾取場景圖像12g2'中的當前位置,移動到任意指定的不同位置(步 驟S16到S17),那么也將"貓"角色圖像添加到不同位置并且顯示得到 的合成圖像(步驟S18)。于是,從圖像輸出單元20輸出關于合成圖像的數據(步驟S19),并 且將所述數據記錄在存儲卡20A或者VTR(記錄器)20B上,或者需要時 由圖像打印機20C打印。如果確定指定的圖像組成模式是"添加/組成模式"以及"l-2:跟隨者添加模式"(步驟S8—S9, "l-2"),例如圖9所示,將在對應動畫圖像 獲取過程(參見圖17)中獲得的反轉的、模仿拾取場景圖像12g沖"行走" 姿態(tài)的對象圖像(目標圖像)H的"熊"角色圖像12e④R添加到拾取場景 圖像12gl'的某一位置處并且顯示,在該位置"熊"角色圖像跟隨對象(目 標圖像)H,換言之,在確定時間以前一系列拾取場景圖像12gl的相關一 個中的對象圖像(目標圖像)H的位置,如圖9(D)所示(步驟Sllb)。這時,如果通過手工操作將添加并且顯示的"熊"角色圖像12e④r 從其現在位置移動到任意指定的不同位置處(步驟S16—S17),那么"熊" 角色圖像被移到不同位置以便由此顯示得到的合成圖像(步驟S18)。于是,從圖像輸出單元20輸出關于此合成圖像的圖像數據(步驟 S19),并且記錄在存儲卡20A或者VTR(記錄器)20B上,或者需要時由 圖像打印機20C打印出來。如果確定指定圖像的組成模式是"添加/組成模式"以及"1-3:鏡像 反轉角色圖像添加模式"(步驟S8到S9"l-3"),例如圖ll中所示,那么將 在對應動畫圖像獲取過程(參見圖17)中獲得的、用于模仿拾取場景圖像 12g3中對象(目標)圖像H的跳舞姿態(tài)的"兔子"角色圖像12d(19)A(圖 ll(C))鏡像反轉,并添加到反轉的"兔子"角色圖像與觸發(fā)拾取場景圖像 12g3中跳舞姿態(tài)的對象(目標)圖像鏈接的位置,并且顯示得到的合 成圖像,如圖ll(D)所示(步驟Sllc)。當在該情況下人工地執(zhí)行將在拾取場景圖像12g3中的位置處顯示 的鏡像反轉的"兔子"角色圖像12d(19)R從其現在位置移動到任意指定的 不同位置的過程時(步驟S16—S17),其中在所述拾取場景圖像12g3中的 該位置處,鏡像反轉的"兔子"角色圖像與對象(目標)圖像H鏈接,將 鏡像反轉的"兔子"圖像12d(19)R移到不同位置以便由此提供得到的合成 圖像,然后顯示(步驟S18)。于是,從圖像輸出單元20輸出關于此合成圖像的數據(步驟S19), 并且記錄在存儲卡20A或者VTR(記錄器)20B上,或者需要時由圖像打 印機20C打印出來。如果確定所述指定圖像組成模式包括"替代/組成模式"以及"2-1: 對象選擇/替代模式"(步驟SB8—SIO, "2-l"),那么將在對應動畫圖像 獲取過程(圖17)中獲得的拾取場景圖像12g5中指定的作為模仿的目標 圖像的指定對象(目標)圖像H1替換為模仿對象圖像H1的姿態(tài)的"兔 子"角色圖像12d①(步驟SB18),然后顯示得到的合成圖像,如圖13(G) 所示。在該情況下,將三個對象圖像、即對象(目標)圖像H1以及其他 兩個對象圖像H2以及H3從拾取場景圖像12g5中剪切,由此提供拾取背 景圖像12g5 '。在姿態(tài)上類似于對象圖像Hl的"兔子"角色圖像12d①以 及從場景圖像12g5中剪切的其余兩個對象圖像H2和H3被添加到拾取 背景圖像12g5中的相應適當位置處,并且上述添加是按照在圖像拾取 過程中由距離傳感器18檢測的到相關各個對象的圖像拾取距離的遞減 次序來執(zhí)行的,由此提供得到的合成圖像。在沒有產生其余背景圖像12g5'的情況下,"兔子"角色圖像12d①在 姿態(tài)上類似于對象(目標)圖像H1,并且其他兩個圖像H2以及H3可以 被添加到拾取場景圖像12g5中它們的適當位置處,并且按照在圖像拾 取過程中由距離傳感器18檢測的到相應對象的圖像拾取距離的遞減次 序添加,由此提供得到的合成圖像。當執(zhí)行用于將添加到拾取場景圖像12g5"的目標圖像Hl位置上的 "兔子"角色圖像12d①從其當前位置移動到任意指定的不同位置的過 程時(步驟S16—S17),餘'兔子"角色圖像12d①移到拾取場景圖像12g5" 中的指定不同位置處,以便借此供應得到的合成圖像,然后進行顯示 (步驟S18)。于是,從所述圖像輸出單元20輸出關于合成圖像的數據(步驟S19), 并將其記錄在存儲卡20A或VTR(記錄器)20B上,或者需要時通過圖像 打印機20C打印出來。如果確定所述圖像組成模式包括"替代/組合"模式以及"2-2:多個 圖像拾取/替代模式"(步驟S8—SIO, "2-2"),那么將第一拾取場景圖像 12g4中對象(目標)圖像H1的位置存儲作為將把對象圖像H1替換為模 仿圖像的位置,如圖12所示(步驟S10—S13)。當拾取第二場景圖像12g4時(步驟S14),將用于模仿在對應動畫圖 像獲取過程(圖17)中獲得的對象圖像H1的姿態(tài)的"兔子"角色圖像 12d(20)添加到第二次拾取的場景圖像12g4'中對應于對象(目標)圖像 Hl在第一拾取場景圖像12g4中的存儲位置的一位置,以便"兔子"角色 圖像12d(20)與對象圖像Hl鏈接,然后顯示得到的合成圖像12g4"(步驟 S15)。當在第二拾取場景圖像12dg4'中人工地執(zhí)行用于將"兔子"角色圖 像12d (20)從其當前位置移動到任意指定的不同位置的過程時(步驟 S16—S17),將"兔子,,角色12d (20)移到指定的不同位置處,并且顯示 得到的合成圖像(步驟S18)。于是,從圖像數據輸出單元20輸出關于此合成圖像的圖像數據(步 驟S19),并將其記錄在存儲卡20A或錄像機20B上,或者需要時通過圖 像打印機20C打印出來。根據上文顯而易見的是,按照圖像輸出設備10的圖像處理功能, 當從經由圖像輸入單元17接收的場景圖像中提取對象圖像時,從角色 l"兔子"姿態(tài)圖像存儲器12d、角色2"熊"姿態(tài)圖像存儲器12e以及角色 3"貓"姿態(tài)圖像存儲器12沖選擇在姿態(tài)上類似于提取出的對象圖像的 任何特定類型的角色圖像,將所選的特定類型的角色圖像替換拾取場
景圖像中的該對象圖像,或者將其添加到拾取場景圖像以便由此提供 得到的合成圖像。簡而言之,在沒有創(chuàng)建場景圖像的情況下,在所述 場景圖像中,僅僅是將固定的動畫圖像添加到圖像拾取幀中,很容易 創(chuàng)建非??蓯鄣膱鼍皥D像,所述可愛的場景圖像使用模仿目標對象的 姿態(tài)的動畫圖像作為添加的對象或者相反作為替代目標對象的對象。接下來將描述調節(jié)模型圖像大小的圖像輸出設備10的功能。在調節(jié)模型圖像大小的功能中,將大小方面與標準身體形狀對象(目標)圖像一致并且存儲在模型姿態(tài)圖像存儲器12b中的姿態(tài)模型圖像,在大小方 面調節(jié)為非標準身體形狀對象(目標)圖像,并且在大小調節(jié)的模型 姿態(tài)圖像存儲器12c中存為大小調節(jié)的模型圖像。在所述對應動畫圖像 獲取過程(部分2)中,存儲在調節(jié)模型姿態(tài)圖像存儲器12c的大小調節(jié)的 模型圖像被用來評估調節(jié)的模型圖像與作為模仿的目標圖像的對象圖 像在姿態(tài)上的相似性,借此獲得具有該姿態(tài)相似性的對應的指定魚色 圖像。這樣做允許容易地獲得在姿態(tài)上類似于具有任何身體形狀的對象圖像的角色圖像。圖22是待通過圖像輸出設備10執(zhí)行的姿態(tài)模型大小調節(jié)過程的流程圖。當經由圖像輸入單元17輸入表示包含一對象的場景的拾取圖像 時,其中所述對象例如包括圖8(B)中所示的用戶的非標準身體形狀的全 長圖形(步驟D1),那么在圖16的目標圖像提取過程(方法1或者2)中 提取作為一對象的用戶圖像(步驟DA),并且將其與存儲在模型姿態(tài)圖 像存儲器12b中的標準身體形狀全長的模型圖像12b②a比較(步驟D2)。然后,將模型圖像12b②A在大小方面相對于臉部、身體和腿的縱 向比例進行調節(jié)(步驟D3),然后相對于臉部、身體和腿的寬度比例 調節(jié)(步驟D4)到從拾取場景圖像提取的對象圖像。于是,將存儲在模型姿態(tài)圖像存儲器12b的所有其他姿態(tài)模型圖像
在大小方面調節(jié)為大小調節(jié)的模型圖像12b②A,然后寄存到大小調節(jié) 的模型姿態(tài)圖像存儲器12c中(步驟D5)。如上所述,評估存儲在大小調節(jié)的模型姿態(tài)圖像存儲器12c中的任 意一個大小調節(jié)的模型圖像與作為模仿的目標圖像的對象圖像在姿態(tài) 上的相似性,并且獲得在姿態(tài)上具有與對象圖像相等相似性的角色圖 像,以便能夠容易地獲得在姿態(tài)上類似于具有各種身體形狀的對象圖 像的角色圖像。能夠將在姿態(tài)上更加類似于作為模仿目標對象的對象 圖像的角色圖像添加到拾取場景圖像、或者替換拾取場景圖像中的對 象圖像,以便借此提供得到的合成圖像。在所述實施例中,當有選擇地獲得在姿態(tài)上類似于從拾取場景圖 像提取的對象圖像的角色圖像、并且將其動畫圖像用作為在拾取場景 圖像中添加的內容或者替代以便輸出得到的合成圖像時,可以預先存 儲實際拾取的具有各種表情的臉部圖像和人類圖像,并且單獨使用作 為在拾取場景圖像中模仿從拾取場景圖像提取的對象圖像姿態(tài)的添加 內容或者替代,以便借此輸出得到的合成圖像。本發(fā)明能夠在數字照相機中很好地實現。如果實施本發(fā)明、特別 是在具有液晶顯示器的數字照相機中實現,那么能夠拾取對象圖像, 以便可以立即確認得到的合成圖像。在所述實施例中,當己經舉例說明了作為靜像的拾取場景圖像時, 可以從動態(tài)圖像中順序地提取相對于經由圖像輸入單元17輸入的動態(tài) 圖像的背景圖像在時間上順序變化的對象圖像,例如數字視頻電影 17B??梢杂羞x擇地獲得在姿態(tài)上分別類似于順序提取的對象圖像的角 色圖像,并且將其添加到拾取動態(tài)圖像或者替換相應的動態(tài)圖像中的 對象圖像,借此提供合成出來的系列合成的動態(tài)圖像。所述實施例的圖像處理功能可用來替換作為指定的并且從例如, 在具有準備的期望角色圖像的游戲中使用的動畫圖像或者實際拾取的 人類圖像中提取的模仿的目標圖像的角色圖像,借此顯示得到的合成 圖像。在所述實施例中描述的圖像輸出設備10執(zhí)行的各個過程、也就是 圖14和15的流程圖中所示的任一圖像處理過程,圖16的流程圖中所示 的圖像處理中包括的對象圖像提取過程,圖17的流程圖中所示圖像處 理中包括的對應動畫圖像獲取過程,對應動畫圖像獲取過程中包括的 圖18的流程圖中所示用于評估角色(或者模型)圖像與對象圖像在姿 態(tài)上的相似性的過程,以及圖22的流程圖中所示姿態(tài)模型大小調節(jié)過 程,可以存儲并作為計算機可執(zhí)行的程序分布在存儲卡(ROM和RAM 卡等)、磁盤(軟盤、硬盤等)、光盤(CD-ROM、 DVD等)或者諸如 半導體存儲器的外部記錄介質13中。具有采用通信網絡(互聯網)N進行 通信功能的各種計算機終端能夠經由記錄介質讀出器14將存儲在外部 記錄介質13中的程序讀入存儲器12,并且按照讀出程序來控制其操作, 由此執(zhí)行在所述實施例中描述的圖像處理功能,并且執(zhí)行類似于上述 方法的過程。包括在所述程序中以便執(zhí)行各個上述過程的數據能夠以程序代碼 的形式經由通信網絡(互聯網)N傳送。所述程序數據能夠從連接到通信 網絡(互聯網)N的計算機終端獲得,借此執(zhí)行上述圖像處理功能。 (第二實施例)圖23是表示本發(fā)明的圖像傳送系統(tǒng)中圖像傳送服務器l 10的電子 電路組成的框圖。圖24是表示按照第二實施例的圖像傳送系統(tǒng)中終端120的電子電 路組成的框圖。所述圖像傳送系統(tǒng)從圖像傳送服務器110向各種終端120,諸如連 接到諸如互聯網或者藍牙(R)的通信網絡的攜帶式電話120A、個人數字 助理(PDA)120B、個人計算機(PC)120C、數字照相機120D等提供圖像 創(chuàng)建/傳送服務。所述圖像傳送服務器110向每個終端120傳送對應于由 終端120(120A-120D)拾取的圖像中的目標圖像的圖像(例如,對應于拾 取場景圖像中的人類圖像的角色圖像)。在圖23中,所述圖像傳送服務器110包括計算機,用于讀出記錄在 各種記錄介質上的程序,或者讀出外部接收的程序,計算機操作由讀 出的程序控制。計算機在其電子電路中包括CPU(中央處理器)111 。所述CPU 111按照預先存儲在存儲器112中的服務器控制程序、從 諸如CD-ROM的外部記錄介質113經由記錄介質讀取器114讀入存儲器 112的服務器控制程序、或者從互聯網N上的另一網絡服務器(在此情況 下是程序服務器)經由電子傳輸控制器l 15讀入存儲器112的服務器控制 程序,來控制電路的各個元件。存儲在所述存儲器112中的服務器控制 程序通過來自于經由傳輸控制器115連接的互聯網N上的每個終端 120(120A-120C)的通信信號、來自于經由短距離無線通信單元116連接 的數字照相機120D的通信信號、或者由操作者從包括鍵或者觸摸面板 的輸入單元117產生的輸入信號來啟動。所述CPU111與存儲器112、記錄介質讀取器114、傳輸控制器115、 短距離無線通信單元116和輸入單元117以及包括LCD或者CRT的顯示 單元118連接。除負責圖像傳送服務器110的總體操作的系統(tǒng)程序、經由傳輸控制 器115在互聯網N上與各個終端120(120A-120C)進行數據傳輸的通信程 序、以及經由通信單元16在短距離無線通信單元16的通信范圍中與數 字照相機120D進行數據通信的短距離通信程序以外,所述存儲器112 已經存儲了圖像傳送程序112a,用于產生對應于拾取圖像中的對象圖 像的圖像,其中所述拾取圖像是從經由傳輸控制器115和短距離無線通 信單元116通信連接的相應一個終端120(120A-120D)處獲得的,將對應 圖像添加到拾取圖像中并且將由此生成的圖像傳送到終端。
所述存儲器112已經準備了模型姿態(tài)圖像存儲器112b,大小調節(jié)的 模型姿態(tài)圖像存儲器112c,角色l"兔子"姿態(tài)圖像存儲器112d,角色 2"熊"姿態(tài)圖像存儲器112e,角色3"貓"姿態(tài)圖像存儲器112f,以及請求 者終端信息存儲器112g,以及在其工作區(qū)中具有拾取場景圖像存儲器 112h和圖像處理工作區(qū)112i。觸發(fā)分別存儲在圖像傳送服務器110的角色"兔子"、"熊"以及"貓" 姿態(tài)圖像存儲器112d、 112e以及112沖的各個姿態(tài)的角色"兔子"、"熊" 以及"貓"圖像與第一個實施例的圖2-4中舉例說明的那些一樣,故而圖 2-4也用于描述第二實施例。將存儲在存儲器112d、112e以及112沖的角色的每種姿態(tài)圖像用作 為在姿態(tài)上類似于拾取場景圖像中對象(目標)圖像的模仿圖像,其 中所述拾取場景圖像是根據與所述圖像傳送服務器110通信連接的相 應一個外部終端120(120A-120D)的需求而輸入的。每個姿態(tài)角色圖像 帶有其相應的姿態(tài)編號被存儲。圖5-7涉及第一個實施例并且在這里也用于圖解說明第二實施例。 圖5-7示出了觸發(fā)存儲在圖像傳送服務器110的模型姿態(tài)圖像存儲器 112b中的各個姿態(tài)的模型圖像。存儲在存儲器l 12b中的每種姿態(tài)模型圖像用來獲得在姿態(tài)上類似 于拾取場景圖像中的對象(目標)圖像的模型圖像,其中所述拾取場 景圖像是根據與圖像傳送服務器U0通信連接的相應一個外部終端120 (120A-120D)的需求而輸入的,不同姿態(tài)被存儲帶有相應的姿態(tài)編號。 另外,為每個姿態(tài)編號存儲三個不同種類的模型圖像A、 B和C。存儲在每一角色l"兔子"姿態(tài)圖像存儲器112d、角色2"熊"姿態(tài)圖像 存儲器112e和角色3"貓"姿態(tài)圖像存儲器112沖的角色圖像,是用于觸 發(fā)存儲在所述模型姿態(tài)圖像存儲器112b中的所有姿態(tài)編號(編號lA、 1B、 1C、 2A、 2B、 2C、…、na、 nb、 nc)的姿態(tài)的圖像。
通過縱向和橫向將全長圖形的標準身體形狀模型圖像的大小調節(jié) 為不標準的身體形狀對象(目標)圖像,可以獲得存儲在大小調節(jié)的模型姿態(tài)圖像存儲器112e中的姿態(tài)編號2A的大小調節(jié)的模型圖像,其 中所述全長圖形觸發(fā)圖4中姿態(tài)編號2A示出的姿態(tài)。按照具有姿態(tài)編號 2A并且存儲在大小調節(jié)的模型姿態(tài)圖像存儲器112c中的大小調節(jié)的模 型圖像的縱向-橫向比例,來調節(jié)觸發(fā)各個姿態(tài)的所有其他標準身體形 狀模型圖像的大小。如下獲得待存儲在大小調節(jié)的模型姿態(tài)圖像存儲器112c中的大小 調節(jié)的模型圖像。在圖8(A)中以姿態(tài)編號2A示出的全長標準身體形狀 姿態(tài)模型圖像在大小方面被調節(jié)為(縱向以及橫向)圖8(B)中所示的不 標準身體形狀對象圖像,以便成為對應于姿態(tài)編號2A的大小調整后圖 像。按照姿態(tài)編號2A的大小調節(jié)的模型圖像的大小調節(jié)比例(平衡), 其他姿態(tài)的所有其他標準身體形狀模型圖像在大小上被調節(jié)為非標準 身體形狀模型圖像,然后存儲在大小調節(jié)的模型姿態(tài)圖像存儲器12c 中。請求者終端信息存儲器112g具有寄存的ID、銀行帳戶號碼以及終 端120(120A-120D)的口令,以此作為有關圖像傳送會員的個體郵購商 業(yè)信息,其中所述圖像傳送會員已經要求圖像傳送服務器110照此寄存 它們。所述拾取場景圖像存儲器112h依照拾取場景圖像單位臨時存儲從 各個外部終端120(120A-120D)輸入的拾取場景圖像數據,其中所述外 部終端120與圖像傳送服務器11 O通信連接。所述圖像處理工作區(qū)112i根據圖像處理,臨時存儲按照圖像傳送程 序112a處理的圖像數據。在圖24中,每個終端120包括計算機,用于讀出記錄在每種記錄介 質上的程序,或者讀出外部接收的程序,計算機操作由該程序控制。
其電子電路包括CPU(中央處理器)121 。所述CPU 121按照預先讀入存儲器122中的終端控制程序、從諸如 CD-ROM或者ROM卡的外部記錄介質123經由記錄介質讀取器124讀入 存儲器122的終端控制程序、或者從互聯網N上的網絡服務器(在此情況 下是程序服務器)經由電子傳輸控制器125讀入存儲器122的終端控制程 序,來控制電路元件的操作。存儲在存儲器122中的終端控制程序通過 用戶對輸入單元126的操作產生的輸入信號、經由圖像輸入單元127a通 過數字照相機132輸入的圖像信號、與經由傳輸控制器125連接到終端 120的互聯網N上的諸如圖像傳送服務器110的每個網絡服務器的通信 信號、與經由短距離天線通信單元128連接到終端120的圖像傳送服務 器110的通信信號或者來自GPS(全球定位系統(tǒng))129移動終端120的當前 位置的當前位置檢測信號來啟動,所述輸入單元126包括鍵或者觸摸面 板。所述CPU 121經由圖像輸出單元127b與存儲器122、記錄介質讀取 器124、傳輸控制器125、輸入單元126、圖像輸入單元127a、短距離無 線通信單元128以及GPS 129以及LCD的顯示單元130以及圖像打印機 131連接。圖像輸入單元127a接收來自于外部連接或者嵌入式數字照相機 132的拾取場景圖像數據。例如,如果所述終端120包括攜帶式電話 120A、個人數字助理(PDA)120B或者數字照相機120D,那么圖像輸入 單元127接收來自于嵌入式數字照相機132的拾取場景圖像數據。如果 所述終端120包括個人計算機(PC)120C,那么圖像輸入單元127接收來 自于外部連接的數字照相機B2的拾取場景圖像數據。所述圖像輸出單元127b輸出由圖像傳送服務器110基于根據終端 請求由圖像輸入單元127a輸入的拾取場景圖像處理并且傳送的圖像數 據。然后將輸出的圖像數據傳送到圖像打印機131并打印。
除負責控制終端120(120A-120D)整體操作的系統(tǒng)程序、經由傳輸 控制器125上在互聯網N上的諸如圖像傳送服務器110的每個網絡服務 器進行數據通信的通信程序、以及經由無線通信單元128與在短距離無 線通信單元128的通信范圍內存在的圖像傳送服務器110進行數據通信 的短距離通信程序之外,所述存儲器122還存儲通信/圖像處理程序 122a,用于要求圖像傳送服務器l 10基于從圖像輸入單元127a輸入的拾 取場景圖像執(zhí)行圖像處理,用于顯示由所述圖像傳送服務器110傳送的 圖像數據,并且用于經由所述圖像輸出單元127b執(zhí)行打印處理。
所述終端120(120A-120D)將在規(guī)格上與第二實施例的圖像傳送服 務器110的存儲器112中包括的那些存儲器112b以及112c相似的模型姿 態(tài)圖像存儲器122b以及大小調節(jié)的模型姿態(tài)圖像存儲器122c包括在存 儲器122中。
所述存儲器122包括圖像處理工作區(qū)122d,用于臨時存儲按照通信 /圖像處理程序122a根據其過程處理的圖像數據。接下來將略述第二實施例的圖像傳送系統(tǒng)的操作。
圖1 l涉及第一個實施例并且也把它應用于描述第二實施例。圖11 舉例說明了當終端120已經指定了鏡像反轉角色圖像添加模式并且要 求從圖像傳送服務器110傳送圖像時,在拾取場景圖像中添加鏡像反轉 角色圖像"兔子"。
如圖1 l(A)所示,所述終端120拾取包含對象圖像(目標圖像)H的場 景圖像12g3,其中所述對象圖像H觸發(fā)例如預先意識到與伙伴跳舞的姿 態(tài);并且要求圖像傳送服務器110創(chuàng)建合成圖像,在所述合成圖像中, 鏡像反轉的角色圖像通過指定鏡像反轉的角色圖像添加模式與目標圖 像跳舞;并且將合成圖像傳送到終端120。然后,如圖11(B)所示,在圖像傳送服務器110中,將對象(目標) 圖像H從終端120發(fā)送的拾取場景圖像12g3中提取。當將"兔子"角色圖
像指定為添加的內容時,從所述角色l"兔子"姿態(tài)圖像存儲器112d中讀 出在姿態(tài)上類似于對象(目標)圖像H的具有姿態(tài)編號19("跳舞")的"兔 子"角色圖像,如圖11(C)所示。于是,將此"兔子"角色圖像鏡像反轉并 且添加到拾取場景圖像12g3'中相對于垂直中心線與對象(目標)圖像 對稱的位置處,并且其中鏡像反轉的"兔子"圖像與跳舞目的的對象(目 標)H鏈接,如圖11(D)所示。這樣產生了合成圖像,然后將合成圖像傳 送到請求者終端120,并且在那里顯示或者打印出來。簡而言之,所述圖像傳送服務器110鏡像反轉模仿由終端120拾取 的場景圖像12hl中的對象(目標)圖像H跳舞姿態(tài)的"兔子"角色圖像, 并且將鏡像反轉的"兔子"角色圖像作為舞伴添加到拾取場景圖像12hl 中的一位置處,在該位置,鏡像反轉的"兔子"角色圖像與為跳舞目的 觸發(fā)跳舞姿態(tài)的對象(目標)圖像鏈接。然后將得到的合成圖像發(fā)送 給終端120。圖25舉例說明了利用"熊"角色圖像替代對象圖像,當圖像傳送系 統(tǒng)的終端120已經請求創(chuàng)建圖像并且從服務器傳送圖像、且指定了多個 圖像拾取/替代模式時,由圖像傳送服務器110執(zhí)行此操作。當終端120的用戶希望創(chuàng)建對象圖像和"熊"角色圖像彼此揮手告 別的場景圖像時,用戶拾取包含對象(目標)圖像H1的場景圖像,其 中所述對象(目標)圖像Hl觸發(fā)與角色圖像希望觸發(fā)的相同的"告另lj" 姿態(tài),如圖25(A)所示,向圖像傳送服務器110發(fā)送拾取場景圖像,并 且要求圖像傳送服務器10通過指定多個圖像拾取/組成模式,基于拾取 的場景圖像12h2,創(chuàng)建合成的場景圖像,并且向終端傳送合成的場景 圖像。如圖25(B)所示,所述圖像傳送服務器110從用戶發(fā)送的第一個拾 取圖像12h2中提取圖斷目標圖像)Hl。當用戶將"熊"角色圖像指定為替 換內容時,從所述角色2"熊,,姿態(tài)圖像存儲器112e讀出在姿態(tài)上類似于 對象(目標)圖像H1的"熊"角色圖像(觸發(fā)編號11的姿態(tài)"告別")。在該 情況下,當例如檢測到當前時間為"下午08:00"或者確定現在是晚上時, 讀出觸發(fā)姿態(tài)"告別"的"熊"角色圖像,并且作為坐在月亮上的夜晚角色 圖像12e(ll)N。然后,如圖25(D)所示,當終端120拾取了包含目標圖像H2的第二 場景圖像12h2 '時,其中場景圖像12h2 '包含作為對應于第一拾取場景 圖像12h2中的對象圖像(目標圖像)Hl的合作方的目標圖像H2,并且觸 發(fā)另一個姿態(tài),這時將已讀出的觸發(fā)晚上使用的編號ll姿態(tài)("告別") 的"熊"角色圖像添加到第二拾取場景圖像12h2 ',借此提供得到的合成 圖像,在圖25(E)中以12h2"示出。然后將由此產生的合成圖像傳送到請 求者終端120,并且在那里顯示或者打印出來。簡而言之,在圖像傳送服務器110中,模仿終端120拾取的第一場 景圖像12h2中對象(目標)圖像H1的告別姿態(tài)的角色圖像被添加到第 二場景圖像12h2'中相對于對象(目標)圖像H2的位置的適當位置處, 由此提供由此產生的合成圖像,然后將其傳送到終端120,其中所述第 二場景圖像12h2'是由終端120拾取的。雖然圖13用于說明第一個實施例的圖像輸出設備110的對象替代 過程,但是它也可以適用于解釋第二實施例的圖像傳送服務器的類似 對象替代過程。圖13舉例說明了當終端120要求創(chuàng)建圖像并且從圖像傳送服務器 傳送而且指定了對象圖像選擇/替代模式時,由所述圖像傳送服務器100 利用"兔子"角色圖像替代對象圖像。如圖13(A)所示,所述終端120拾取場景圖像12g5,其包含例如三 個人(對象)圖像H1-H3,將所述場景圖像連同一指定的替代角色圖像 (例如"兔子")的通知一起發(fā)送到圖像傳送服務器IIO,并且通過指定 一對象圖像選擇/替代模式要求圖像傳送服務器110基于拾取場景圖像
創(chuàng)建合成圖像,然后將其傳送到終端120。于是,如圖13(B)所示,所述圖像傳送服務器110從終端120發(fā)送的 拾取場景圖像12g5中提取對象(或者目標)圖像Hl,并將其指定為通過 終端120進行替代。當指定了替代"兔子"角色圖像時,從所述角色l"兔 子"姿態(tài)圖像存儲器112d中讀出在姿態(tài)上(編號l的姿態(tài)"笑一笑"(特寫 鏡頭))類似于對象(目標)圖像H1的"兔子"角色圖像,如圖13(C)所示。如圖13(B)、 (D)、 (E)和(F)所示,將指定的對象(目標)圖像H1及 其他對象圖像H2和H3從場景圖像12g5中切除而其余背景圖像12g5'保 留。于是,如圖13(G)所示,從所述角色l"兔子"姿態(tài)圖像存儲器112d中讀出在姿態(tài)上類似于指定對象圖像(目標圖像)m的"兔子"角色圖像以及從場景圖像12g5中剪切的其他兩個對象圖像H2和H3,被添加到背 景圖像12g5,中的適當位置處,并且依照到相關各個對象的圖像拾取距 離的遞減次序來添加,由此提供得到的合成圖像12g5"。然后將所述合 成圖像12g5"傳送到請求者終端120,并且在那里顯示或者打印出來。簡而言之,在所述圖像傳送服務器110中,模仿由終端120拾取的 場景圖像12g5中的指定對象(目標)圖像H1的姿態(tài)的"兔子"角色圖像 替換由終端120拾取的場景圖像12g5中的對象(目標)圖像H1,并且將 得到的合成圖像傳送到終端120。在所述圖像傳送系統(tǒng)中,除反向角色圖像添加模式、多個圖像拾 取/替代模式以及對象圖像選擇/替代模式之外,所述圖像處理模式還包 括跟隨者添加模式以及空白區(qū)角色圖像添加模式,在圖像傳送服務器 的操作概要中,省略了使用附圖對它們的說明。在所述跟隨者添加模式中,當所述終端120拾取包含對象(目標) 圖像H步行或者觸發(fā)步行姿態(tài)的場景圖像12hn、并要求圖像傳送服務器 IOO通過指定跟隨者添加模式以及作為模仿對象圖像H姿態(tài)的跟隨者的
角色圖像、基于場景圖像12hn創(chuàng)建合成的場景圖像,并將合成場景圖 像傳送到終端120時,所述圖像傳送服務器110將場景圖像12hn中的指 定的角色圖像添加到作為跟隨者的指定的角色圖像跟隨對象(目標) 圖像H的位置處,借此向終端120傳送得到的合成圖像。當所述終端120拾取包含任意對象(目標)圖像H的場景圖像12hn, 向圖像傳送服務器110發(fā)送此場景圖像12hn以及模仿指定對象(目標) 圖像H的姿態(tài)的指定的角色圖像,并且要求傳送服務器110通過指定空 白區(qū)域角色圖像添加模式、基于場景圖像和拾取場景圖像12hn中指定 的角色H來創(chuàng)建合成的場景圖像,并且向終端傳送合成圖像時,所述圖 像傳送服務器110將指定的角色圖像添加到場景圖像12hn的空白區(qū)的 隨機位置處,借此向終端120傳送得到的合成圖像。接下來將描述圖像傳送服務器110以及終端20的圖像處理以及傳送操作的細節(jié)。圖26是待由終端120執(zhí)行的圖像處理(部分1)的流程圖。圖27是接續(xù)圖26的圖像處理(部分1)的圖像處理(部分2)的流程圖。圖28是待由圖像傳送服務器110執(zhí)行的服務器處理(部分1)的流程圖。圖29是接續(xù)圖28的服務器處理(部分1)的服務器處理(部分2)的流 程圖。首先,所述終端120(120A、 120B或者120C)響應其輸入單元126的 操作以經由傳輸控制器125或者短距離無線通信單元128連接到互聯網 N上或者在短距離無線通信范圍中的圖像傳送服務器llO,并且向圖像 傳送服務器11 O發(fā)送用戶ID及其口令(步驟TA 1)。當所述圖像傳送服務器110通過互聯網N經由傳遞單元115從終端 120(120A、 120B或者120C)、或者經由短距離無線通信單元116從所述 終端(數字照相機)120D接收ID以及口令時(步驟SB1),根據終端ID以及
口令是否能夠與寄存在存儲器112的請求者終端信息存儲器112g中的 會員的ID和口令匹配,確定所述終端是否是正式成員(步驟SB2)。當確定終端120的ID以及口令不能在注冊會員的ID和口令中找到 匹配的,并且確定終端不是正式成員時,那么中斷終端120與圖像傳送 服務器110的連接,并且執(zhí)行錯誤處理(步驟SB2,"否")。當在終端120己經將其ID和口令發(fā)送到圖像傳送服務器110后的一 段預定時間內沒有中斷終端120與圖像傳送服務器110的連接(步驟TA1) 時,將GPS 129檢測的表示終端120當前位置的數據(在攜帶式電話 120A的情況下、是表示其相關基站的位置的數據)從終端120發(fā)送到圖 像傳送服務器110(步驟TA2)。當所述圖像傳送服務器110從終端120接收到表示終端當前位置的 數據時(步驟SB3),確定終端120是否存在于預定的特殊位置(例如, 游樂園或者旅游點的紀念照獲取地方)或者確定是否當前時間處于指 定時間區(qū)域(例如在晚上)(步驟SB4)。如果所述圖像傳送服務器110確定所述終端120當前存在于預定的 特殊地方,或者確定當前時間存在于指定時間區(qū)域(步驟SB4),那么 對應于特定地方的特定角色(例如,在游樂園的情況下是那里的流行角 色)或者對應于指定時間區(qū)域的特定角色(例如,在晚上的情況下是坐 在月亮上的"熊"角色)被確定為對應于目標對象的指定角色,并且然 后將此角色的名稱發(fā)送給終端120 (步驟SB5)。當所述圖像傳送服務器l 10確定連接下的終端120沒有位于預定地 方,或者確定當前時間沒有位于指定時間區(qū)域(步驟SB4),那么圖像 傳送服務器110等待從終端120接收指定角色的類型涉驟SB6)。如果因終端120處于該特定地方或者當前時間處于指定時間區(qū)域, 所述終端120接收了圖像傳送服務器l IO確定并發(fā)送的特定角色的名稱 (步驟TA3),那么將該特定角色名稱傳送到顯示單元130并且顯示(步驟TA4)。當因為終端120沒有位于特定地方或者當前時間沒有位于指定時 間區(qū)域,所述終端120沒有從圖像傳送服務器110接收特定角色的名稱 (步驟TA3),那么終端120的用戶操作輸入單元126來指定角色("兔 子"、"熊"或者"貓")圖像的類型以用作拾取場景圖像中的添加內容,或 者替代內容,并且向圖像傳送服務器110發(fā)送指定類型的角色圖像(步 驟TA5)。然后,所述終端120從"1-1:隨機的空白區(qū)域角色圖像添加模式"、"1-2:跟隨者添加模式"、"1-3:鏡像反轉的角色圖像添加模式"、"2-1:對象圖像選擇/替代模式"以及"2-2:多個圖像拾取/替代模式"中選擇添 加或者替代/組合模式,并且向圖像傳送服務器l io發(fā)送表示選擇模式的 模式編號(步驟TA6)。然后所述數字照相機132開始經由圖像輸入單元127a向終端120輸 入一系列拾取場景圖像,然后將該系列拾取場景圖像發(fā)送到圖像傳送 服務器110(步驟TA7)。當所述圖像傳送服務器110從終端120接收表示選擇模式的模式編 號(步驟SB7)并且從所述終端120接收該系列拾取場景圖像時(步驟 SB8),執(zhí)行服務器處理過程中包括的圖30的提取目標圖像的過程(步 驟SBC)。在此目標圖像提取過程中,將在預定時間從終端120接收的該系列 拾取場景圖像12hn存儲在工作區(qū)的拾取場景存儲器112h(步驟SCl)。于是,從存儲在拾取場景圖像存儲器112h中(步驟SC2)以及存儲在 圖像處理工作區(qū)12i(步驟SC3)中的該系列拾取場景圖像12hn中,提取表 明每個對象的一系列連續(xù)變化動作的一系列連續(xù)姿態(tài)對象圖像Hn。簡而言之,當從拾取場景圖像12hn中提取包含在拾取場景圖像 12hn中的各個對象圖像Hn作為獨立的塊并存儲在圖像處理工作區(qū)12i 時(步驟SBC),將包含在折線包圍M中包含的各個提取的角色圖像Hn 的拾取場景圖像12hn顯示在顯示單元118上,例如圖11(A)、 12(A)或者 13(A)所示(步驟SB9)。于是,確定在顯示在顯示單元118上的拾取場景圖像12hn中是否存 在多個對象圖像Hn塊(步驟SB 10)。如果所述圖像傳送服務器110確定在拾取場景圖像12hn中沒有多 個對象圖像Hn塊,那么將從拾取場景圖像12hn中提取的單個對象圖像 Hn設定為模仿的目標圖像(步驟SB10—SB 11)。當所述圖像傳送服務器110確定在拾取場景圖像12hn中存在多個 對象圖像Hn塊時,圖像傳送服務器110向終端120發(fā)送用戶指定待模仿 的對象圖像塊的請求(步驟SB10—SB 12)。當終端120從服務器110接收此請求并且顯示它時(步驟TA8),用戶 操縱輸入設備126來從多個對象圖像Hn塊中指定一模仿的目標圖像,并 且向圖像傳送服務器110給出指定圖像的通知(步驟TA9)。然后,所述圖像傳送服務器110從終端接收此通知(步驟SB 13)。然后,所述圖像傳送服務器11 O從拾取場景圖像12hn提取指定的對 象圖像Hn,其中所述拾取場景圖像12hn是從終端120接收的,并且將該指定的對象圖像Hn設定為模仿的目標圖像。然后,所述圖像傳送服務 器110將其處理轉換為圖31的服務器處理中包括的對應動畫圖像獲取 過程(步驟SBD)。在此對應動畫圖像獲取過程中,所述圖像傳送服務器110首先評估 觸發(fā)存儲在模型姿態(tài)圖像存儲器112b中的不同姿態(tài)的每一模型圖像與 從拾取場景圖像12hn中提取并且設定為模仿的目標圖像的對象圖像Hn 在姿態(tài)上的相似性(步驟SDC)。然后,所述圖像傳送服務器110向終端 120發(fā)送對應于具有與對象圖像最高的姿態(tài)相似性的模型圖像的姿態(tài) 編號的指定的角色圖像A(步驟SD1)。
當所述終端120從圖像傳送系統(tǒng)110接收指定的角色圖像A并且顯 示它時(步驟TAIO),用戶確定應該點擊所顯示的指定姿態(tài)角色圖像是 "OK"還是"下一顯示"(下一個候選的顯示),然后向圖像傳送服務器IIO 發(fā)送此確定的通知(步驟TAll)。當所述圖像傳送服務器110從終端120接收選擇通知并且確定終端 120已經選擇了"基于當前評估的相似性、顯示的指定姿態(tài)角色圖像是 OK"時,所述圖像傳送服務器110寄存指定的角色圖像(由其姿態(tài)編號標 識)作為對應于模仿的目標圖像的動畫圖像(步驟SD2—SD3)。當所述圖像傳送服務器110從終端120接收選擇通知并且確定基于當前相似性評估選擇了接收的指定角色的姿態(tài)圖像的"下一顯示"時, 所述圖像傳送服務器110向終端120發(fā)送對應于具有第二最高姿態(tài)相似 性的模型圖像的姿態(tài)編號的另一個指定的角色圖像A。每當從終端120 接收到"下一顯示"的用戶選擇時,只要存在對應于姿態(tài)模型圖像的姿 態(tài)角色圖像,就重復此操作(步驟SD2—SD4)。當所述終端120接收到對應于具有期望姿態(tài)相似性的模型圖像的 姿態(tài)角色圖像(從圖像傳送服務器110接收到的)并且顯示所述姿態(tài)角 色圖像,并且用戶操縱輸入單元126來向圖像傳送服務器110發(fā)送所顯 示的角色圖像"OK"時(步驟TA10-TA12),圖像傳送服務器110寄存OK的角色圖像(由其姿態(tài)編號標識)作為對應于所述模仿的目標圖像的動 畫圖像(步驟SD2—SD3)。如上所述,在圖像傳送服務器110執(zhí)行的對應動畫圖像獲取過程 中,評估表示人類基本模型的每個姿態(tài)的模型圖像與作為通過終端120 從拾取場景圖像12hn中提取的模仿的目標圖像的對象圖像Hn在姿態(tài)上 的相似性,并且確定用作為模仿對象圖像Hn的姿態(tài)的添加內容或者替 代內容的指定的角色圖像。在該情況下,與以下這種情況相比直接評估指定角色的每種姿
態(tài)圖像與作為模仿的目標圖像的對象圖像Hn在姿態(tài)上的相似性,以便 確定將用作為添加角色或者作為替代角色的角色圖像,所述對應動畫 圖像獲取過程是十分有益的,在該過程中,評估每個模型圖像與作為 模仿的目標圖像的對象圖像Hn在姿態(tài)上的相似性,并且根據所選的模 型姿態(tài)編號來確定用作為添加角色或者作為替代角色的角色圖像,故 而使用人類圖形模型使其便于獲得與對象圖像更高的姿態(tài)相似性,并 且由此便于獲得具有更高姿態(tài)相似性(模仿)的角色圖像。雖然圖18的相似性評估過程已經通過第一個實施例的圖像輸出設 備執(zhí)行,但是類似的相似性評估過程也可以通過第二實施例中的圖像 傳送服務器執(zhí)行。從而,在第二實施例中,將參照圖18來描述相似性 評估過程。圖18是通過圖像傳送系統(tǒng)的圖像傳送服務器110待執(zhí)行的服務器 處理中包括的對應動畫圖像獲取過程中的評估動畫圖像與模仿的目標 圖像在姿態(tài)上的相似性的過程。圖32舉例說明了在圖像傳送服務器110待執(zhí)行的對應動畫圖像獲取過程中的評估模型角色圖像與模仿的目標圖像在姿態(tài)上的相似性的 例子。如圖32(A)所示,例如具有第一姿態(tài)編號的模型圖像被讀出(步驟 C1)并且在大小方面調節(jié)為圖32(X)的模仿的目標圖像H1(步驟C2)。然后,將目標圖像H1和大小調節(jié)的模型圖像彼此重疊,并且評估 它們之間在姿態(tài)上的相似性(%),并且作為模型圖像與目標圖像H1在姿 態(tài)上的相似性加以存儲(步驟C3)。然后確定所述模型圖像是否是不對稱的(步驟C4)。當確定模型圖 像不是不對稱的時,例如圖32(A)中12b(l)A所示(步驟C4,"否"),讀出 下一姿態(tài)編號模型圖像(步驟C8—C9),并且評估此模型圖像與模仿的 目標圖像在姿態(tài)上的相似性。只要下一個模型圖像不是不對稱的,就
重復這種相似性評估過程(步驟C2-C4)。如果基于相似性評估確定模型圖像是不對稱的,例如圖32(B)的姿 態(tài)編號19的模型圖像12M9所示,那么將所述模型圖像鏡像反轉(步驟 C4—C5)。然后,如圖32(C)所示,將鏡像反轉的模型圖像12b(19)R在大 小方面(縱向并且橫向)調節(jié)為模仿的目標圖像(步驟C6)。然后,將目標圖像Hl和鏡像反轉的模型圖像12b(19)R彼此重疊。 評估這些圖像之間在姿態(tài)上的相似性(%),并且存為鏡像反轉的模型圖 像與目標圖像H1在姿態(tài)上的相似性(步驟C7)。然后,只要存在具有相應姿態(tài)編號的靜止模型圖像(步驟C8),即 可順序地讀出它們(步驟C9),并且重復地評估相應的一個模型圖像與模 仿的目標圖像在姿態(tài)上的相似性(步驟C2-C7)。在此例子中,例如圖32所示,當評估模型圖像與對象(目標)圖 像H1在姿態(tài)上的相似性時,將具有姿態(tài)編號19的模型圖像12b(19)評估 為具有與目標圖像H1的最高姿態(tài)相似性的圖像。如上所述,當在對應動畫圖像獲取過程中確定模仿對象圖像Hn的 指定角色圖像作為從拾取場景圖像12hn中提取的模仿的目標圖像時(步 驟SBD),例如參照圖31, 18和32所示,那么確定由終端120指定并且接 收的圖像組成模式是"添加/組合模式"還是"替代/組合模式"(步驟SB 14)。如果由終端120指定的圖像組成模式是"添加溜合模式"以及"1-1:隨機的空白區(qū)域角色圖像添加模式"(步驟SB 14—SB 15, "l-r),那么 在對應動畫圖像獲取過程中獲得的作為模仿的目標圖像的模仿目標圖 像Hl姿態(tài)的指定角色圖像被添加到拾取場景圖像12hn中除提取對象圖 像塊的位置以外的空白區(qū)中的一隨機位置,例如圖10所示(步驟SB17a)。 然后將得到的合成圖像發(fā)送給終端120(步驟SB22)。然后終端120從圖像傳送服務器110接收所述合成圖像并且顯示它200710147289.X說明書第44/62頁(步驟TA13)。當終端120的用戶執(zhí)行將角色圖像從其當前位置移動到在 合成的拾取場景圖像12hn中的任意指定的不同位置的過程時,將有關 其移動的信息發(fā)送給圖像傳送服務器l 10(步驟TA14)。當圖像傳送服務器110從終端120接收此信息時(步驟 SB23—SB24),圖像傳送服務器lIO基于所述信息將所述角色圖像移動 至拾取場景圖像12hn的空白區(qū)中不同的位置(步驟SB25),然后向終端 120發(fā)送得到的合成圖像(步驟SB26)。于是,終端120從圖像傳送服務器110接收并且顯示此合成圖像(步 驟TA15—TA16)。簡而言之,所述圖像傳送服務器110向終端120發(fā)送關于合成圖像 的數據,其中將所述指定的角色圖像添加到拾取場景圖像12hn空白區(qū) 中的隨機位置,其中所述指定的角色圖像用于模仿指定的對象圖像H1 的姿態(tài)并且在隨機的空白區(qū)域角色圖像添加模式中被創(chuàng)建。當圖像傳送服務器110確定由終端120指定的圖像組成模式是"添 加/組合模式"以及"l-2:跟隨者添加模式"(步驟SB14—SB15, "l-2")時, 它將用于模仿對象圖像(目標圖像)步行姿態(tài)的指定角色圖像添加到在 對應動畫圖像獲取過程(圖31)中獲得的拾取場景圖像12hn中,并且添加 到以下位置中,所述位置為指定的角色圖像以距離此對象圖像一給 定的距離跟隨步行的對象圖像(目標圖像)H的位置,或者是在拾取場景 圖像12hn中在確定時間以前假定的對象(目標)圖像的位置,如圖9所 示(步驟SB 17b)。然后此圖像傳送服務器110向終端120發(fā)送得到的合成 圖像(步驟SB22)。當終端120從圖像傳送服務器110接收所述合成圖像并且在那里顯 示它時(步驟TA13),并且終端120的用戶人工地執(zhí)行將作為合成圖像中 跟隨者的指定角色圖像從其當前位置移動到任意指定的不同位置的過 程時,將有關其移動的信息發(fā)給圖像傳送服務器110(步驟TA14)。
當圖像傳送服務器110從終端120接收此信息時(歩驟 SB23—SB24),圖像傳送服務器l 10再次在拾取場景圖像12hn的不同位 置中添加指定的角色圖像作為跟隨者(步驟SB25),然后向終端120發(fā)送 得到的合成圖像涉驟SB26)。然后,終端120從圖像傳送服務器110接收此合成圖像并且顯示它 (步驟TA15—TA16)。簡而言之,所述圖像傳送服務器110向終端120發(fā)送關于合成圖像 的數據,在所述合成圖像中,將所述指定的角色圖像添加到對象圖像H 之后的跟隨者位置處,其中所述指定的角色圖像用于模仿指定的對象 圖像H的姿態(tài)并且在跟隨者添加模式中創(chuàng)建。當圖像傳送服務器110確定由終端120指定的圖像組成模式包括 "添力Q/組合模式"以及"l-3:鏡像反轉的角色圖像添加模式"(步驟 SB14—SB15, "l-3,,)時,圖像傳送服務器110鏡像反轉在場景圖像12g3 中模仿對象圖像(目標圖像)H跳舞姿態(tài)的"兔子"角色圖像12d(19),添加 至場景圖像12g3中鏡像反轉的"兔子"角色圖像與目標圖像H鏈接的位 置(步驟SB17c),然后向終端120發(fā)送合成出來的合成場景圖像12g3 '(步 驟SB22)。當終端120從場景圖像傳送服務器110接收所述合成圖像12g3 '并 且顯示它時(步驟TA13),并且用戶人工地執(zhí)行將拾取場景圖像12g3 '中 的反轉的"兔子"角色圖像12d(19)R(R意味著反轉)從其當前位置移動到 任意指定的不同位置的過程時,將有關其移動的信息傳送到圖像傳送 服務器110(步驟TA14)。當圖像傳送服務器110從終端120接收移動信息時(步驟 SB23—SB24),圖像傳送服務器110基于移動信息再次將鏡像反轉的"兔 子"角色圖像添加到場景圖像12g3 '中的不同的位置(步驟SB25),然后將 合成出來的合成場景圖像發(fā)送給終端120(步驟SB26)。
然后,終端120從圖像傳送服務器110接收此合成場景圖像并且顯 示它(步驟TA15—TA16)。簡而言之,圖像傳送服務器110向終端120發(fā)送關于場景圖像12g3 的數據,其中將鏡像反轉的"兔子"角色圖像添加到鏡像反轉的"兔子" 角色圖像與對象圖像H鏈接的位置,其中鏡像反轉的"兔子"角色圖像用 于模仿跳舞對象圖像H的姿態(tài)并且在鏡像反轉的角色圖像添加模式中 被創(chuàng)建,例如圖11(D)所示。如果圖像傳送服務器110確定由終端120指定的圖像組成模式包括 "替代/組合模式"以及"2-l :對象圖像選擇/替代模式"(步驟 SB14—SB16, "2-l")時,圖像傳送服務器110利用"兔子"角色圖像12d① 替代指定的對象圖像(目標圖像)H1(步驟SB 18),所述"兔子"角色圖像 12d①用于模仿作為在對應動畫圖像獲取過程(圖31)中獲得的拾取場景 圖像12g5中指定的模仿的目標圖像的對象圖像Hl的姿態(tài),然后向終端 120發(fā)送合成出來的合成場景圖像12g3 ',例如圖13所示(步驟SB22)。在該情況下,將三個對象圖像,也就是說,將在拾取場景圖像12g5 中指定的目標對象圖像H1及其他兩個對象圖像H2以及H3從拾取場景 圖像12g5中剪切,并且產生拾取背景圖像12g5,。然后,將在姿態(tài)上類 似于指定目標對象圖像Hl的"兔子"角色圖像12d①以及從場景圖像 12g5中剪切的其余兩個對象圖像H2以及H3添加到拾取背景圖像12g5' 中各個相關位置處,并且上述操作是按照檢測到的與各個相關對象的 圖像拾取距離的遞減次序來添加的,由此提供得到的合成圖像。在沒有產生其余背景圖像12g5'的情況下,可以將在姿態(tài)上類似于 目標圖像Hl的"兔子"角色圖像12d①以及其他兩個圖像H2和H3添加到 拾取場景圖像12g5中它們的相關位置處,并且可以依照檢測的至各個 相關對象的圖像拾取距離的遞減次序來添加。當終端120從圖像傳送服務器110接收所述合成圖像并且顯示它
(步驟TA13),并且人工地執(zhí)行將添加到拾取場景圖像12g5"中目標圖像 Hl位置處的"兔子"角色圖像12d①從其當前位置移動到任意指定的不 同位置時,將有關其移動的信息發(fā)給圖像傳送服務器110(步驟TA14)。當圖像傳送服務器110接收到此信息時(步驟SB23—SB24),圖像傳 送服務器110基于所述移動信息將"兔子"角色圖像再次添加到在拾取 場景圖像12g5"中不同的位置以取代目標角色圖像m(步驟SB25),然后 向終端120發(fā)送得到的合成圖像(步驟SB26)。于是,終端120從圖像傳送服務器110接收此合成圖像并且顯示它 (步驟TA15—TA16)。簡而言之,圖像傳送服務器U0向終端120發(fā)送關于在對象圖像選 擇潛代模式中創(chuàng)建的合成圖像的數據,在該圖像選擇/替代模式中將對 象圖像H1替換為模仿對象圖像H1的姿態(tài)"笑一笑"的"兔子"角色圖像, 如圖13(G)所示。如果所述圖像傳送服務器110確定由終端120指定的圖像組成模式 包括"替代/組合"模式以及"2-2:多個圖像拾取/替代模式"(步驟 SB14—SB16, "2-2"),那么將第一拾取場景圖像12h2中的目標對象圖 像H1的位置存為模仿圖像替換目標對象圖像H1的位置,例如圖25所示 (步驟SB16—SB19)。當圖像傳送服務器110獲得第二拾取場景圖像12h2'時(步驟SB20), 它將模仿在對應動畫圖像獲取過程(圖31)中獲得的對象圖像H1姿態(tài)的 "熊"角色圖像12e(ll)N(在該情況下是特殊的"夜晚熊"角色圖像)添加到 第二拾取場景圖像12h2 '的位置處,其中第二拾取場景圖像12h2 '對應 于對象圖像(目標圖像)Hl在第一拾取場景圖像12h2中的存儲位置,如 此使得"熊"角色圖像12e(ll)N對對象圖像H2揮手告別(步驟SB21),并且 將得到的合成圖像12h2"發(fā)送給終端120(步驟SB22)。當終端120從圖像傳送服務器110接收所述合成圖像12h2"并且顯
示它時(步驟TA13),并且人工地執(zhí)行將合成圖像12h2"中的"夜晚熊"角 色圖像12e(ll)n從其當前位置移動到合成圖像12h2"中任意指定的不同 位置的過程時,將有關其移動的信息發(fā)給圖像傳送服務器110(步驟 TA14)。當圖像傳送服務器110接收到此信息時(步驟SB23—SB24),它基于 接收的移動信息將"熊"角色圖像12e(ll)N '再次添加到第二拾取場景圖 像12h2'中的不同位置(步驟SB25),然后向終端120發(fā)送得到的合成圖像 (步驟SB26)。然后,終端120從圖像傳送服務器110接收此合成圖像并且顯示它 (步驟TA15—TA16)。簡而言之,圖像傳送服務器110向終端120發(fā)送在多個圖像拾取/替 代模式中創(chuàng)建的合成圖像12h2",其中將所述"熊"角色圖像(特殊的"夜 晚"角色圖像)與第二拾取場景圖像12h2'中的對象圖像H2結合,其中所 述"熊"角色圖像用于模仿第一拾取場景圖像12h2中的對象圖像Hl的 "告別揮手"姿態(tài)。然后將得到的合成圖像傳送到終端120。終端120接收并且顯示此合成圖像。當終端120的用戶希望將顯示 在終端120上的合成圖像發(fā)送到指定的不同終端時,用戶經由輸入單元 126輸入不同終端的地址,然后向圖像傳送服務器lIO發(fā)送合成圖像(步 驟TA17—TA18)0當圖像傳送服務器110從終端120接收不同終端的地址時(步驟 SB27),圖像傳送服務器110向該地址的不同終端發(fā)送合成圖像(步驟 SB28),計算這次為請求用戶和指定的不同終端提供合成圖像的創(chuàng)建和 發(fā)送服務的費用,并且向請求者終端120發(fā)送費用內容(步驟SB29)。然后所述請求者終端120從圖像傳送服務器11 O接收費用內容,并 且在顯示器130上顯示它(步驟TA19)。當所述終端120輸入并且發(fā)送無地址的指定不同終端(步驟TA17—
否)時,圖像傳送服務器110僅計算這次對請求者終端提供的創(chuàng)建和傳送 合成圖像的服務的費用,并且向請求者終端120發(fā)送費用內容(步驟 S27—SB30)o于是,所述請求者終端120從圖像傳送服務器1 IO接收費用內容, 并且在顯示器30上顯示它(步驟TA20)。所述圖像傳送服務器110向請求者終端信息存儲器112g中寄存的 請求者終端的銀行帳戶發(fā)送相應帳單(步驟SB 31)。因此,按照第二實施例的圖像傳送系統(tǒng)的圖像傳送功能,當將終 端120拾取的場景圖像發(fā)給圖像傳送服務器110時,所述圖像傳送服務 器110從接收的場景圖像中提取對象圖像,獲得在姿態(tài)上類似于從角色 l"兔子"姿態(tài)圖像存儲器12d、角色2"熊"姿態(tài)圖像存儲器12e和角色 3"貓"姿態(tài)圖像存儲器12沖提取的對象圖像的指定類型的角色圖像,利 用獲得的在拾取場景圖像中的指定類型角色圖像替代拾取場景圖像中 的對象圖像,或者添加要求的角色圖像到場景圖像,以便借此提供得 到的合成圖像,并且向終端120發(fā)送此合成圖像。從而,在沒有創(chuàng)建并 且傳送僅僅是將固定的動畫圖像添加到圖像拾取幀的場景圖像的情況 下,可以創(chuàng)建并且向終端傳送非??蓯鄣暮铣蓤鼍皥D像,在所述非常 可愛的合成場景圖像中,將模仿原始場景圖像中目標對象姿態(tài)的動畫 圖像用作為添加角色或者相反用作為替代目標對象的角色。通過利用第二實施例的圖像傳送系統(tǒng)中的圖像傳送服務器IIO,可以提供各種服務,包括傳送包括合成場景圖像的郵件,所述合成場 景圖像包括模仿拾取場景圖像中對象圖像姿態(tài)的添加或者替代角色圖 像;支付合成場景圖像的合成和傳送,其中,將模仿拾取原始場景圖 像中目標圖像姿態(tài)的角色圖像用作為原始場景圖像中添加或者替代圖 像,傳送到相應一個圖像拾取類型的移動終端120B、 120C、 120D中, 諸如具有數字式照相機的蜂窩電話終端120A;付費或者免費創(chuàng)建和傳
送合成場景圖像,其中,將模仿拾取場景圖像中對象圖像姿態(tài)的一特 定角色圖像添加到或相反替換所述對象圖像以便宣傳一特定主頁上該特定的角色;并且支付拾取場景圖像的創(chuàng)建和傳送,其中將模仿拾取 場景圖像中對象圖像姿態(tài)的流行角色圖像添加到數字式照相機終端 120D,所述數字式照相機終端120D經由指定位置,諸如娛樂場所中的 短距離無線通信單元116連接。
如上所述,在第二實施例的圖像傳送系統(tǒng)中,將由終端120拾取的 圖像發(fā)給圖像傳送服務器IIO。在圖像傳送服務器110中,從拾取場景 圖像中提取對象圖像,獲得在姿態(tài)上類似所提取的對象圖像的角色圖 像,將角色圖像添加到場景圖像或者替換場景圖像中的對象圖像。然后將得到的合成圖像傳送到終端120,并且將此服務的帳單發(fā)給 終端120。對比而言,如接下來第三實施例中將描述的那樣,終端120 從拾取場景圖像中提取對象圖像,確定在姿態(tài)上類似于提取對象圖像 的模型圖像的姿態(tài)編號,并且請求所述圖像傳送服務器110傳送具有確 定的姿態(tài)編號的指定角色圖像。圖像傳送服務器110僅向終端120傳送 由終端120請求的具有確定姿態(tài)編號的角色圖像,以及向該終端傳送此 服務的帳單。終端120還要將傳送的角色圖像添加到場景圖像或相反利 用傳送的角色圖像替換場景圖像中的對象圖像,借此提供得到的合成 圖像。
(第三實施例)依照本發(fā)明第三實施例的圖像傳送系統(tǒng)的圖像傳送服務器110和 終端120(120A-120D)的電子電路基本上類似于參考圖23以及24描述的 第二實施例的電子電路,除了下列幾點在第三實施例的圖像傳送系統(tǒng)中,所述模型圖像存儲器112b和大 小調節(jié)的模型姿態(tài)圖像存儲器l 12c沒有設置于圖像傳送服務器l IO中, 而是提供在終端120中。
圖33是在第三實施例的圖像傳送系統(tǒng)中待由終端120執(zhí)行的圖像 處理(部分l)的流程圖。
圖34是接續(xù)圖33的圖像處理(部分1)的圖像處理(部分2)的流程圖。
圖35是第三實施例的圖像傳送服務器110待執(zhí)行的服務器處理的 流程圖。
首先,終端120(120A、 120B或者120C)響應輸入單元126的操作以 經由傳輸控制器125或者短距離無線通信單元128連接到互聯網N上或 者短距離無線通信范圍中的圖像傳送服務器IIO,然后向圖像傳送服務 器110發(fā)送用戶ID和口令(步驟TF1)。
當圖像傳送服務器110通過互聯網N經由傳輸單元115從終端 120(120A、 120B或者120C)接收ID和口令、或者經由短距離無線通信單 元116(步驟SJ1)從終端(數字式照相機)120D接收ID和口令時,依據是否 能夠在存儲器112的請求者終端信息存儲器112g中的會員終端的寄存 的ID和口令中找出匹配的終端ID和口令來確定終端120是否是正式成 員(步驟SJ2)。
當確定終端120的ID和口令在寄存的會員終端ID和口令中找不到 與之匹配時,即該終端不是正式成員時,中斷終端120與圖像傳送服務 器110的連接,并且執(zhí)行錯誤處理(步驟SJ2,"否")。
當在終端120已經向圖像傳送服務器110發(fā)送其ID和口令之后的預 定時間上沒有中斷終端120與圖像傳送服務器110的連接(步驟TF1)時, 將表示GPS 129檢測的終端120的當前位置的數據(就蜂窩電話120A來 說,是表示其相關基站位置的數據)從終端120發(fā)送到圖像傳送服務器 110(步驟TF2)。
當圖像傳送服務器110從終端120接收表示其當前位置的數據時 (步驟SJ3),它確定所述終端120是否存在于一預定的特定位置(例如,
游樂園或者旅游場所中紀念照獲取地點)或者當前時間是否處于一指定時間區(qū)域(例如在晚上)(步驟SJ4)。如果圖像傳送服務器110確定連接下的終端120存在于預定的特定 地方或者確定當前時間位于指定時間區(qū)域(步驟SJ4),那么確定對應于 特定地方的特定角色(例如就游樂園來說是那里的流行角色)或者對應 于指定時間區(qū)域的特定角色(例如就在晚上來說是坐在彎彎月亮上的 "熊"角色)作為對應于目標對象的特定角色,然后將此角色的名稱發(fā)送 給終端120(步驟SJ5)。當圖像傳送服務器110確定連接之下的終端120沒有位于預定地 方,或者確定當前時間沒有位于指定時間區(qū)域(步驟SJ4)時,圖像傳送 服務器110等待從終端120接收指定類型的角色(步驟SJ6)。如果因為終端120位于特殊的地方或者當前時間位于指定時間區(qū) 域、終端120接收圖像傳送服務器110確定并且發(fā)送的特定角色名稱(步 驟TF3),那么將特定角色名稱傳送到顯示單元130并且由顯示單元130 顯示(步驟TF4)。當因為終端120沒有位于特定的地方或者當前時間沒有位于指定 時間區(qū)域、而終端120沒有從圖像傳送服務器110接收特定角色的名稱 時(步驟TF3),終端120的用戶操縱輸入單元126來借此指定用作為添加拾取場景圖像中的角色或者替代角色的角色類型("兔子"、"熊"或者 "貓"),并且向圖像傳送服務器11 O發(fā)送指定類型的角色(步驟TF5)。于是,所述拾取場景圖像開始經由圖像輸入單元127a從數字式照 相機132輸入到終端120(步驟TF6),并且過程進行到終端120進行的圖像 處理中包括的圖36的目標圖像提取過程(TFG)。在此目標圖像提取過程中,將通過圖像輸入單元127a在預定時間 輸入到終端120中的該系列拾取場景圖像存儲在存儲器122的工作區(qū) 122d中(步驟TGl)。
于是,從存儲在圖像處理工作區(qū)122d中的該系列拾取場景圖像中 提取表明每個對象的各個動作的一系列連續(xù)的對象圖像Hn作為獨立的 塊(步驟TG2),并且在工作區(qū)122d中存為相應的塊(步驟TG3)。簡而言之,當從拾取場景圖像中提取包含在拾取場景圖像中的相 應對象圖像Hn作為獨立的塊并且存儲在圖像處理工作區(qū)122d中時(步 驟TFG),將它們的折線包圍M中包含有相應提取的角色圖像Hn的一拾 取場景圖像顯示在顯示單元130上,例如圖11(A)、 12(A)或者13(A)所示 (步驟TF7)。于是,確定在顯示在顯示單元130上的拾取場景圖像中是否存在多 個對象圖像Hn塊(步驟TF8)。如果確定沒有多個對象圖像Hn塊,那么將從拾取場景圖像中提取 的單個對象圖像Hn設定為模仿目標圖象(步驟TF8—TF9)。如果確定存在多個對象圖像Hn塊,那么通過用戶操縱輸入單元126 從那些對象圖像Hn塊中將一對象圖像Hn指定為模仿目標圖象(步驟 TF8—TFIO)。當從拾取場景圖像中提取對象圖像Hn并且指定為模仿的目標圖像 Hn時,過程進行到圖37的姿態(tài)編號確定過程(步驟TFI)。在此姿態(tài)編號確定過程中,評估存儲在模型姿態(tài)圖像存儲器122b中每一不同的姿態(tài)模型圖像與從拾取場景圖像中提取并且設定為模仿 的目標圖像的對象圖像Hn在姿態(tài)上的相似性(步驟TIK),并且將具有最 高姿態(tài)相似性的姿態(tài)模型圖像顯示在顯示單元130上(步驟TI1)。當用戶在輸入單元126選擇此顯示的模型圖像時,所選模型圖像的 姿態(tài)編號被寄存為對應于模仿的目標圖像的模型圖像(步驟TI2—TI3)。當在顯示對應于表示與模仿的目標圖像具有最高姿態(tài)相似性的姿 態(tài)編號的模型圖像狀態(tài)中、通過用戶在輸入單元126上操縱來點擊"下 一顯示"時,顯示具有表示與目標圖像的第二最高姿態(tài)相似性的姿態(tài)編
號的模型圖像。只要存在具有不同相似性的靜止的多個模型圖像,每 當點擊"下一顯示"時即可顯示下一較低姿態(tài)相似性的模型圖像(步驟TI2—TI4)。當用戶操縱輸入單元126顯示并且選擇具有表示期望姿態(tài)相似性 的姿態(tài)編號的模型圖像時,將此模型圖像的姿態(tài)編號寄存為對應于模 仿的目標圖像的姿態(tài)編號(步驟TI2—TI3)。如上所述,在姿態(tài)編號確定過程中,評估表示人類基本模型的每 個模型圖像(觸發(fā)相應的姿態(tài))與作為從拾取場景圖像中提取的模仿的 目標圖像的對象圖像Hn的姿態(tài)相似性,并且根據相似性的評估來確定 用于模仿對象圖像Hn的姿態(tài)的模型圖像的姿態(tài)編號。圖38是示出了依照第三實施例的圖像傳送系統(tǒng)中由終端120待執(zhí) 行的圖像處理中包括的姿態(tài)編號確定過程中,評估模型圖像與模仿的 目標圖像在姿態(tài)上相似性的流程圖。例如,如圖32(A)所示,具有第一姿態(tài)編號的模型圖像被讀出(步驟 TK1),并且在大小方面調節(jié)為圖32(X)的模仿的目標圖像H1(步驟TK2)。然后,將目標圖像H1和大小調節(jié)的模型圖像彼此重疊,并且評估 它們之間在姿態(tài)上的相似性(%),并且作為模型圖像與目標圖像Hl在姿 態(tài)上的相似性加以存儲(步驟TK3)。然后確定具有感興趣的姿態(tài)編號的模型圖像是否是不對稱的(步 驟TK4)。當確定模型圖像不是不對稱時,例如圖32(A)中12bA(l)所示(步 驟TK4,"否"),讀出下一姿態(tài)編號模型圖像(步驟TK8—TK9),并且同 樣地評估此模型圖像與模仿的目標圖像H1在姿態(tài)上的相似性。只要下 一個模型圖像不是不對稱的,就重復這種相似性評估過程(步驟 TK2-TK4)。如果確定相似性評估的模型圖像是不對稱的,例如圖32(B)的姿態(tài) 編號19的模型圖像12bl9所示,那么將所述模型圖像鏡像反轉(步驟TK4—TK5)。然后,如圖32(C)所示,將鏡像反轉的模型圖像12b(19)R 在大小方面(縱向并且橫向)調節(jié)為模仿的目標圖像(步驟TK6)。然后,將目標圖像Hl和鏡像反轉的模型圖像12b(19)R彼此重疊上。 評估這些圖像之間的姿態(tài)相似性(%),并且存為鏡像反轉的模型圖像與 目標圖像H1的姿態(tài)相似性(步驟TK7)。然后,只要存在不同姿態(tài)編號的其他模型圖像(步驟TK8),即可順 序地讀出它們(步驟TK9),并且重復地評估相應的一個模型圖像與模仿 的目標圖像的姿態(tài)相似性(步驟TK2-TK7)。在此例子中,當例如圖32所示,評估模型圖像與對象(目標)圖 像H1的姿態(tài)相似性時,將具有姿態(tài)編號19的模型圖像12b(19)評估為具 有與目標圖像H1的最高姿態(tài)相似性的模型圖像。如上所述,當在參照圖37、 38和32描述的姿態(tài)編號確定過程中確 定模仿作為從拾取場景圖像中提取的模仿的目標圖像的對象圖像Hn姿 態(tài)的模型圖像姿態(tài)編號時(步驟TFI),將傳送觸發(fā)確定姿態(tài)編號的姿態(tài) 的指定角色圖像的請求發(fā)送給圖像傳送服務器110(步驟TF11)。當所述圖像傳送服務器110從終端120接收傳送角色圖像的請求時 (步驟SJ7),圖像傳送服務器110從存儲器112中包括的角色1"兔子,,姿態(tài) 圖像存儲器112d、角色2"熊"姿態(tài)圖像存儲器112e和角色3"貓"姿態(tài)圖像 存儲器112做適當一個中有選擇地讀取具有確定姿態(tài)編號的角色圖像, 并且向請求者終端120傳送讀取的角色圖斷步驟S J8)。于是,圖像傳送服務器110計算向請求用戶提供的傳送服務的費 用,并且向請求者終端120發(fā)送費用內容的通知涉驟SJ9),并且將相應 的帳單發(fā)給在請求者終端信息存儲器112g中寄存的請求者終端的銀行 帳戶(步驟SJIO)。當請求者終端120從圖像傳送服務器110接收具有確定姿態(tài)編號的 角色圖像時(步驟TF12),從"l-l:隨機的空白區(qū)域角色圖像添加模式"、 "1-2:跟隨者添加模式"、"1-3:鏡像反轉的角色圖像添加模式"、"2-1: 對象圖像選擇/替代模式"或者"2-2:多個圖像拾取/替代模式"中選擇添 加/組合模式(添加接收的角色圖像到拾取場景圖像)或者替代/組合模 式(利用接收的角色圖像替代拾取場景圖像中的目標圖像H)。
在圖33和34中由終端120執(zhí)行的圖像處理的流程圖中,省略了對應于替代/組合模式"2-l:對象圖像選擇潛代模式"和"2-2:多個圖像拾取/替代模式"的例程。省略的例程包括與圖28和29的步驟SB16、 SB18-SB21表示的相同過程,并且連同稍后將描述的添加/組合模式中 的步驟TF 14和TF15a-TF 15c的過程一起有選擇地執(zhí)行。
因此,在這里僅描述當選擇添加/組合模式時待執(zhí)行的過程,并且 省略了選擇替代/組合模式時待執(zhí)行的過程。如果在步驟TF13確定指定的圖像組成模式是"添加/組合模式"以 及"l-l:隨機的空白區(qū)域角色圖像添加模式"(步驟F14, "i-r),那么將 模仿作為圖像傳送服務器1 IO傳送的模仿的目標圖像的目標圖像Hn姿 態(tài)的指定角色圖像添加到拾取場景圖像12hn的空白區(qū)的隨機位置處,該隨機位置是除提取對象圖像塊的位置以外的位置。然后顯示得到的 合成圖像(步驟TF15a、 TF16)。
然后,當在合成圖像中執(zhí)行將合成圖像中的角色圖像從其當前位 置移動到任意指定的不同位置的過程時(步驟TF17—步驟TF18),將角色圖像移到合成圖像中的不同位置,并且顯示另一得到的合成圖像 (TF19-TF20)。
當確定指定的圖像組成模式包掛"添加溜合模式"以及"l-2:跟隨 者添加模式"(步驟TF14, "l-2")時,將圖像傳送服務器UO傳送的并且 模仿拾取場景圖像中對象圖斷目標圖像)步行姿態(tài)的指定角色圖像添 加到最后場景圖像的一位置處,該位置對應于該系列拾取場景圖像 12hn的相關一個上的一位置,在確定的時間之前假定步行對象圖像(目
標圖像)H在該位置,借此提供得到的合成圖像,如圖9(D)所示(步驟 TH15b, TF16)。當人工地執(zhí)行將作為合成圖像中跟隨者的指定角色圖像從其當前 位置移動到合成圖像中任意指定的不同位置時(步驟TF17到TF18),將 指定的角色圖像移到合成圖像中的不同位置,并且顯示另一得到的合 成圖像(步驟TF19,TF20)。當確定指定的圖像組成模式包掛'添加/組合模式"以及"l-3:反轉的角色圖像添加模式"(步驟F14, "l-3")時,將模仿場景圖像12g3中對 象圖像(目標圖像)H的跳舞姿態(tài)的"兔子"角色圖像12d(19)鏡像反轉,將 鏡像反轉的"兔子"角色圖像添加到場景圖像12g3中的一位置處,在該 位置處,鏡像反轉的"兔子"角色圖像與跳舞目的的目標圖像H鏈接,然 后顯示得到的合成圖像12g3 ',如圖ll(D)所示(步驟TF15c—TF16)。當人工地執(zhí)行將合成圖像12g3 '中的反轉的"兔子"角色圖像 12d(19)R從其當前位置移動到任意指定的不同位置的過程時(步驟TF17 到步驟TF18),將鏡像反轉的"兔子"角色圖像移到合成圖像12g3'中的不 同位置處,并且顯示另一得到的合成圖像(步驟TF19, TF20)。然后,終端120從圖像傳送服務器110接到用戶使用服務器服務的 費用內容的通知,并且在顯示單元130上顯示它(步驟TF21)。因此,按照第三實施例的圖像傳送系統(tǒng)的圖像傳送功能,當終端 120拾取包含多個對象的場景圖像時,從拾取的場景圖像中提取一對象 圖像。根據在姿態(tài)上類似于提取的對象圖像的模型圖像確定姿態(tài)編號。 終端120請求從圖像傳送服務器110傳送具有確定姿態(tài)編號的姿態(tài)角色 圖像以及指定類型的角色圖像。于是,圖像傳送服務器110從角色1"兔 子"姿態(tài)圖像存儲器112d、角色2"熊"姿態(tài)圖像存儲器112e以及角色 3"貓"姿態(tài)圖像存儲器112啲適當一個中讀取具有指定姿態(tài)編號和類型 的角色圖像,并且向終端120傳送讀取的角色圖像,顯示得到的合成圖
像,其中,可以利用接收的在姿態(tài)上類似于所述對象的角色圖像替代 拾取場景圖像中的對象圖像,或者添加接收的角色圖像到場景圖像中并且顯示得到的合成圖像。簡而言之,處于終端120的用戶為了樂趣不 是簡單地添加固定的動畫圖像到拾取幀,而是從圖像傳送服務器110獲 得在姿態(tài)上類似于場景圖像中的對象圖像的動畫圖像,并且利用該動 畫圖像替代拾取場景圖像中的對象圖像或者添加該動畫圖像到拾取場 景圖像,以便借此產生包含該動畫圖像的非??蓯鄣暮铣蓤D像。第三實施例的圖像傳送系統(tǒng)中的圖像傳送服務器l IO能夠向圖像 拾取類型移動終端120B、 120C、 120D (諸如包括數字式照相機的蜂窩 電話終端120A)提供以下功能支付傳送模仿每個拾取場景圖像中對 象圖像姿態(tài)的角色圖像的費用;支付或者免費傳送模仿拾取場景圖像 中對象圖像姿態(tài)的一特定角色圖像、以便在一特定主頁上宣傳該特定 角色,以及支付經由指定地方中(諸如娛樂場所等)的短距離無線通 信單元116傳送模仿拾取場景圖像中對象圖像姿態(tài)的流行角色圖像到 數字式照相機終端120D的費用。雖然在相應的實施例中,有選擇地獲得在姿態(tài)上類似于從拾取場 景圖像中提取的對象圖像的角色圖像,并且用作為拾取場景圖像中的 添加角色或者替代角色,以便借此提供得到的合成圖像,但是,可以 預先存儲實際拾取的具有各種表情的面部圖像以及人類圖像,并且用 作模仿從拾取場景圖像中提取的對象圖像姿態(tài)的添加角色或者替代角 色,借此輸出得到的合成圖像。在相應的上述實施例中,已經舉例說明了作為靜像的拾取場景圖 像。另一方面,當所述拾取場景圖像包括一系列輸入的動畫圖像時, 可以順序地從該系列動畫圖像中提取相對于該系列動態(tài)圖像的背景圖 像的在時間上順序改變的對象圖像。然后有選擇地獲得、傳送在姿態(tài) 上類似于順序提取的對象圖像的角色圖像(圖39),并將其添加到拾取的動態(tài)圖像或者替代相應的動畫圖像中的對象圖像,借此提供一系列合 成出來的合成動畫圖像,然后傳送。圖39舉例說明了觸發(fā)存儲在圖像傳送服務器110的角色"兔子"動 畫姿態(tài)圖像存儲器112dM中各種姿態(tài)的動畫角色圖像。通過利用相應實施例的圖像傳送服務器110或者終端120的圖像處 理功能,可以獲得準備的期望角色圖像(在姿態(tài)上類似于模仿的目標 圖像,所述模仿的目標圖像包括從游戲的動畫圖像中指定并且提取的 呈現角色)或實際拾取的人類圖像,并且傳送到請求者終端,或者替 代動畫圖像中出現的角色,借此向請求者終端傳送得到的合成圖像。如接下來第四實施例將描述的那樣,可以將觸發(fā)由用戶拾取的各 種姿態(tài)的對象圖像、或者觸發(fā)從互聯網N上的游戲服務器下載的游戲 (游戲HP)中出現的各種姿態(tài)的角色圖像記錄在類似于圖像傳送服務器 1 IO中存儲器I 12的角色1"兔子"姿態(tài)圖像存儲器112d、角色2"熊"姿態(tài)圖 像存儲器112e以及角色3"貓"姿態(tài)圖像存儲器112飾存儲器中。當在第 二或者第三實施例中、從圖像傳送服務器11 O獲得在姿態(tài)上類似于從拾取場景圖像中提取的對象圖像的角色圖像時,它可以從最初寄存的"兔 子"、"熊"和"貓"角色圖像以及用戶寄存的人類圖像和游戲角色圖像中被選擇出來。 (第四實施例)圖40是表示第四實施例中圖像傳送系統(tǒng)的整體組成的框圖。 此實施例處理用戶利用具有數字式照相機的蜂窩電話220A拾取的 觸發(fā)各種姿態(tài)的對象圖像,并且在圖像傳送服務器210的存儲器212中 寄存對象圖像作為用戶原始角色圖像,或相反,在傳送服務器210的存 儲器212中寄存觸發(fā)從游戲服務器210A的存儲器212A下載的各種姿態(tài) 的游戲角色作為用戶原始角色。圖41(A)和41(B)是分別地在第四實施例中的圖像傳送系統(tǒng)的蜂窩
電話220A和圖像傳送服務器210待執(zhí)行的用戶原始角色圖像寄存過程 的流程圖。首先,當互聯網N上的游戲服務器210A通過具有數字式照相機的 蜂窩電話220A從互聯網N上的游戲服務器210A下載用戶原始角色圖像 并且寄存時,指定獲得角色圖像的游戲服務器210A的主頁(HP),并且 與蜂窩電話220A連接(步驟TS 1 —TS2)。當用戶指定游戲服務器210A的主頁(HP)上待設定為他的或者她的 原始角色圖像的游戲角色時,下載存儲在游戲服務器210A的存儲器 212A中的指定游戲角色的各種姿態(tài)圖像(步驟TS4)。于是,將蜂窩電話220A的用戶ID(= 123)以及從游戲服務器210A 下載的相應的姿態(tài)角色圖像傳送到圖像傳送服務器210(步驟TS5)。當用戶在沒有從互聯網N下載類似的角色圖像的情況下、利用蜂窩 電話220A拾取并且寄存用戶原始角色圖像時,所述數字式照相機232 拾取包含觸發(fā)它們相應姿態(tài)的對象圖像的場景圖斷步驟TS1—TS7)。于是,蜂窩電話220A提取角色圖像作為拾取場景圖像中除背景圖 像外的對象圖像(步驟TS8),并且將他們存儲為采取相應姿態(tài)的相應角 色圖像(步驟TS9)。然后,蜂窩電話22(^向圖像傳送服務器210發(fā)送其終端用戶10(= 123)以及存儲的觸發(fā)相應姿態(tài)的對應圖像(步驟TS5)。當所述圖像傳送服務器210從蜂窩電話220A接收終端用戶ID以及 觸發(fā)它們相應姿態(tài)的角色圖像時(步驟SR1),除例如存儲器212中圖23 的那些相應的"兔子"、"熊"以及"貓"角色圖像(112d-112f)以外,它寄存 角色圖像作為觸發(fā)用戶ID的相應姿態(tài)的角色圖像(步驟SR2)。當在第二或者第三實施例中、所述圖像傳送服務器210選擇并且傳 送在姿態(tài)上類似于從拾取場景圖像中提取的對象圖像的角色圖像時, 圖像傳送服務器210能夠從寄存的"兔子"、"熊"和"貓"角色圖像以及用
戶拾取并且寄存的角色圖像以及游戲角色中選擇角色圖像。參考相應的實施例描述的圖像傳送系統(tǒng)執(zhí)行的各種過程,也就是說,在第二實施例的圖像傳送系統(tǒng)的終端120執(zhí)行的圖26和27的流程圖 示出的圖像處理,在第二實施例的圖像傳送系統(tǒng)中圖28和29的流程圖 示出的圖像傳送服務器110執(zhí)行的服務器過程,圖30流程圖示出的第二 實施例中服務器處理中包括的對象圖像提取過程,圖31流程圖示出的 第二實施例的服務器過程中包括的對應動畫圖像獲取過程,圖18流程 圖示出的第二實施例中對應動畫圖像獲取過程中包括的評估角色/模型 圖像與模仿的目標圖像姿態(tài)相似性的過程,圖33和34流程圖示出的第 三實施例的圖像傳送系統(tǒng)中終端120執(zhí)行的圖像處理,圖35的流程圖示 出的第三實施例的圖像傳送系統(tǒng)中圖像傳送服務器l IO的服務器處理, 圖36的流程圖示出的第三實施例的圖像處理中包括的目標圖像提取過 程,圖37的流程圖示出的第三實施例的圖像處理中包括的姿態(tài)編號確 定過程,圖38的流程圖示出的第三實施例中姿態(tài)編號確定過程中包括 的評估模型姿態(tài)圖像與模仿的目標圖像姿態(tài)相似性的過程,圖41流程 圖示出的第四實施例的圖像傳送系統(tǒng)中蜂窩電話220A中執(zhí)行的用戶角 色圖像寄存過程,以及圖像傳送服務器210執(zhí)行的用戶角色圖像寄存過 程可以存儲并且作為計算機可執(zhí)行程序分布在存儲卡(ROM卡、RAM 卡等)、磁盤(軟盤、硬盤等)、光盤(CD-ROM、 DVD等)以及諸如半導體 存儲器113(123、 213、 223)的外部記錄介質上。具有與通信網絡(互聯 網)N通信功能的各種計算機終端能夠利用記錄介質讀取器114(124、 214、 224)將外部記錄介質113(123、 213、 223)上存儲的程序讀入存儲 器112(122、 212、 222)中。因此,可以通過這些程序控制計算機的操作, 以便執(zhí)行參考相應實施例描述的圖像傳送功能,借此執(zhí)行類似于上述 那些操作的過程??梢酝ㄟ^通信網絡(互聯網)N以程序代碼的形式傳送實現相應過 程的程序數據。所述程序數據可以從與通信網絡(互聯網)N連接的計算 機終端獲得,以便實現圖像傳送功能。本發(fā)明不局限于相應實施例實現的實施例。在不脫離本發(fā)明的精 神和范圍的情況下,本領域技術人員可以容易地做出各種變化和修改。
權利要求
1.一種對應拾取場景的合成圖像發(fā)送設備,其特征在于,包括拾取場景圖像接收單元(115,116),用于從終端接收表示包含對象的場景的多張拾取場景圖像;目標圖像提取單元(111),用于從由所述拾取場景圖像接收單元接收到的拾取場景圖像中提取表示所述對象的目標圖像;對應圖像獲得單元(111),用于獲取對應于所述目標圖像提取單元提取的目標圖像的對應圖像;圖像合成單元(111),用于將所述對應圖像獲得單元獲取的對應圖像合成到所述拾取圖像,將所述合成圖像輸出;以及圖像傳送單元(115,116),用于將所述圖像合成單元合成的圖像傳送到所述終端。
2. 如權利要求1所述的對應拾取場景的合成圖像傳送設備,其特征 在于,所述拾取場景圖像接收單元接收包含對象的場景的一系列拾取 場景圖像;以及所述目標圖像提取單元具有提取一系列變化的目標圖像的單元 (111),所述一系列變化的目標圖像表示所述拾取場景圖像接收單 元接收的一系列拾取圖像中所述對象連續(xù)變化的動作。
3. 如權利要求1所述的對應拾取場景的合成圖像傳送設備,其特征 在于,所述對應圖像獲得單元包括對應圖像存儲單元(112d, 112e,112f),存儲有多張對應圖像; 相似性評估單元(111),用于評估存儲在所述對應圖像存儲單 元中的各對應圖像與所述目標圖像提取單元提取的目標圖像在姿態(tài) 上的相似性;以及獲得單元,用于獲得相對于所述相似性評估單元評估的目標圖像 具有在指定的姿態(tài)上的相似性的對應圖像。
4. 如權利要求3所述的對應拾取場景的合成圖像傳送設備,其特征 在于,所述相似性評估單元包括對應圖像存儲單元(l 12b,l 12c,l 12d,l 12e,l 12f),存儲有依照對應關 系的多張模型圖像和多張對應圖像;以及模型相似性評估單元(111),用于評估存儲在所述對應圖像存 儲單元中的各模型圖像相對于所述目標圖像提取單元提取的目標圖 像在姿態(tài)上的相似性;所述對應圖像獲得單元具有模型對應圖像獲得單元,從所述對應 圖像存儲單元中獲取相對于所述相似性評估單元評估的目標圖像具 有在指定姿態(tài)上的相似性的模型圖像的對應圖像。
5. 如權利要求1所述的對應拾取場景的合成圖像傳送設備,其特征 在于,還包括收信人地址接收單元(l 1 l,l 15,116),用于從所述終端接收其他終端的收信人地址;以及收信人地址終端發(fā)送單元(115,116),用于將所述圖像合成單元合成的圖像向所述收件人地址接收單元接收的收件人地址的終端傳送。
6. —種對應拾取場景的合成圖像傳送設備,與終端進行通信,所 述終端提取拾取場景圖像中包含的目標圖像,向傳送設備發(fā)送對應于 所述目標圖像的姿態(tài)信息,并應答發(fā)送的所述姿態(tài)信息,接收對應于 所述傳送設備發(fā)送的所述姿態(tài)信息的對應圖像,合成到所述拾取場景 圖像并輸出,所述合成圖像傳送設備包括姿態(tài)信息接收單元(lll, 115, 116),用于從所述終端接收對應于 所述拾取場景圖像中包含的目標圖像的姿態(tài)信息;對應圖像存儲單元(112d,112e,112f),存儲每個不同姿態(tài)信息的對 應圖像;以及圖像傳送單元(l 11,115,116),用于從所述對應圖像存儲單元讀取 對應于所述姿態(tài)信息接收單元接收到的姿態(tài)信息的對應圖像,傳送給 所述終端。
7. —種對應拾取場景的合成圖像傳送設備,與終端進行通信,所 述終端提取拾取場景圖像中包含的目標圖像,向傳送設備發(fā)送對應于 所述目標圖像的姿態(tài)信息和指定的特征種類信息,并應答發(fā)送的所述 姿態(tài)信息和指定的特征種類信息,接收對應于所述傳送設備發(fā)送的所 述姿態(tài)信息和特征種類信息的對應圖像,合成到所述拾取場景圖像并 輸出,所述合成圖像傳送設備包括接收單元(lll, 115, 116),用于從所述終端接收對應于拾取場景 圖像中包含的目標圖像的姿態(tài)信息以及特征種類信息;對應圖像存儲單元(l 12d,l 12e,l 12f),存儲表示每個不同姿態(tài)信息的多種類特征的對應圖像;以及圖像傳送單元(l 11,115,116),用于從所述對應圖像存儲單元讀取對應于所述姿態(tài)信息接收單元接收到的姿態(tài)信息和特征種類信息的 對應圖像,傳送給所述終端。
8. 如權利要求7所述的對應拾取場景的合成圖像傳送設備,其特征 在于,還包括 位置信息接收單元(111, 115, 116),用于從所述終端接收有 關終端的位置信息;當由所述位置信息接收單元接收到的所述終端的位置信息表示 所述終端位于指定地點時,所述圖像傳送單元從所述對應圖像存儲單 元中讀出表示特征的對應圖像,并傳送給所述終端,所述對應圖像對 應于所述姿態(tài)信息接收單元接收到的姿態(tài)信息和有關指定的地點。
9. 如權利要求7所述的對應拾取場景的合成圖像傳送設備,其特征 在于,當當前時刻位于特定時間區(qū)域時,所述圖像傳送單元從所述對應 圖像存儲單元讀取特征的對應圖像,發(fā)送給所述終端,所述特征的對 應圖像對應于所述姿態(tài)信息接收單元接收的姿態(tài)信息和所述特定時 間區(qū)域的信息。
10. 如權利要求1所述的對應拾取場景的合成圖像傳送設備,其特 征在于,還包括收費單元,對應所述傳送單元傳送的圖像向所述終端收費。
11. 一種對應拾取場景的合成圖像傳送方法,包括以下步驟拾取場景圖像接收步驟,從終端接收表示包含對象的場景的拾取場景圖像;目標圖像提取步驟,從由所述拾取圖像接收步驟接收到的拾取圖 像中提取表示所述對象的目標圖像;對應圖像獲取步驟,獲取對應于所述目標圖像提取步驟提取的目 標圖像的對應圖像;圖像合成步驟,將所述對應圖像獲取步驟獲取的對應圖像合成到 所述拾取圖像,并將所述合成圖像輸出;以及圖像傳送歩驟,將所述圖像合成步驟合成的圖像傳送給所述終Jj山順0
12. —種對應拾取場景的合成圖像傳送方法,用來與終端進行通 信,所述終端提取對應于對象的拾取場景圖像中包含的表示所述對象 的目標圖像,向傳送設備發(fā)送對應于所述目標圖像的姿態(tài)信息,并應 答發(fā)送的所述姿態(tài)信息,接收對應于所述傳送設備發(fā)送的所述姿態(tài)信 息的對應圖像,合成到所述拾取圖像,并將構成圖像輸出,所述對應 拾取場景的合成圖像傳送方法包括姿態(tài)信息接收步驟,用于從所述終端接收對應于所述拾取場景圖 像中包含的目標圖像的姿態(tài)信息;對應圖像存儲步驟,將每個不同姿態(tài)信息的對應圖像存儲到存儲 器中;以及圖像傳送步驟,用于從所述存儲器讀取對應于所述姿態(tài)信息接收 單元接收到的姿態(tài)信息的對應圖像,傳送給所述終端。
13. 如權利要求6所述的對應拾取場景的合成圖像傳送設備,其特 征在于,所述對應圖像存儲單元存儲的對應圖像中包含從所述終端的 拾取場景圖像中提取而接收的圖像,對應于各圖像相應的姿態(tài)信息而 被存儲。
14. 如權利要求6所述的對應拾取場景的合成圖像傳送設備,其特 征在于,所述對應圖像存儲單元存儲的對應圖像中包含由所述終端從 網絡下載而接收的圖像,對應于各圖像相應的姿態(tài)信息而被存儲。
全文摘要
一種合成圖像輸出/傳送設備(10)用于向拾取場景圖像添加相應的動畫圖像,并且輸出/傳送得到的合成圖像,而不是簡單地將固定的動畫圖像添加到拾取場景圖像。當從經由圖像輸入單元(17)接收的拾取場景圖像中提取一對象圖像時,從角色1“兔子”姿態(tài)圖像存儲器(12d)、角色2“熊”姿態(tài)圖像存儲器(12e)、角色3“貓”姿態(tài)圖像存儲器(12f)中的適當一個中選出對應于場景圖像的任何指定類型的角色圖像。選擇類型的角色圖像替代拾取場景圖像中的對象圖像,或者添加到場景圖像,以便借此提供并且顯示得到的合成圖像。也就是說,通過利用在姿態(tài)上類似于對象圖像的動畫圖像替代對象圖像,或者通過添加動畫圖像到場景圖像,在不是簡單向圖像拾取幀添加固定動畫圖像的情況下,可以容易地創(chuàng)建具有動畫的非??蓯鄣氖叭D像。
文檔編號G06T13/80GK101119443SQ200710147289
公開日2008年2月6日 申請日期2003年5月28日 優(yōu)先權日2002年5月28日
發(fā)明者湖城孝 申請人:卡西歐計算機株式會社