專利名稱：信息處理裝置、信息處理方法和程序的制作方法
技術(shù)領(lǐng)域：
本公開(kāi)涉及信息處理裝置、信息處理方法和程序。
背景技術(shù)：
近年來(lái)，已經(jīng)在關(guān)注允許立體圖像觀看的三維(3D)立體圖像。作為用于觀看3D立體圖像的方法，雙眼視差方法正被越來(lái)越廣泛地使用。雙眼視差方法使得觀看者觀看其間設(shè)有視差的左眼圖像和右眼圖像，從而使得觀看者立體地觀看圖像。
為了檢測(cè)對(duì)這類3D立體圖像執(zhí)行的操作，在日本專利申請(qǐng)公布No. JP-A-2011-13778和日本專利申請(qǐng)公布No. JP-A-2010-55508中公開(kāi)了檢測(cè)3D空間中的物體的位置檢測(cè)技術(shù)。

發(fā)明內(nèi)容
然而，在上述的檢測(cè)3D空間中的物體的位置檢測(cè)技術(shù)中，需要傳感器來(lái)識(shí)別3D空間中操作體的位置。因此，在許多情況下，難以用諸如移動(dòng)裝置之類的硬件資源相對(duì)有限的裝置來(lái)利用該技術(shù)。當(dāng)難以利用檢測(cè)3D空間中的物體的位置檢測(cè)技術(shù)時(shí)，難以實(shí)現(xiàn)用戶可用來(lái)直接操作3D立體圖像的界面。另外，如果用戶嘗試?yán)猛ǔ０惭b在移動(dòng)裝置等等上的觸摸傳感器直接操作3D立體圖像，則在立體地觀看到的3D立體圖像和實(shí)際執(zhí)行操作的位置之間發(fā)生位移。由于此類位移，用戶在操作3D圖像時(shí)感到不適。為了解決此問(wèn)題，本公開(kāi)提供了允許在沒(méi)有不適感的情況下容易地選擇立體圖像的新穎且改進(jìn)的信息處理裝置、信息處理方法和程序。根據(jù)本公開(kāi)的實(shí)施例，提供了一種信息處理裝置，包括圖像生成部，該圖像生成部通過(guò)將立體圖像和與該立體圖像相關(guān)聯(lián)的二維圖像相合成來(lái)生成合成圖像，該立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及識(shí)別部，當(dāng)檢測(cè)到對(duì)二維圖像的用戶操作時(shí)，識(shí)別部識(shí)別與該二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。根據(jù)本公開(kāi)的另一實(shí)施例，提供了一種信息處理方法，包括通過(guò)將立體圖像和與該立體圖像相關(guān)聯(lián)的二維圖像相合成來(lái)生成合成圖像，該立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及當(dāng)檢測(cè)到對(duì)二維圖像的用戶操作時(shí)，識(shí)別與該二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。根據(jù)本公開(kāi)的另一實(shí)施例，提供了一種包括指令的程序，所述指令命令計(jì)算機(jī)執(zhí)行通過(guò)將立體圖像和與該立體圖像相關(guān)聯(lián)的二維圖像相合成來(lái)生成合成圖像的處理，該立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及當(dāng)檢測(cè)到對(duì)二維圖像的用戶操作時(shí)，識(shí)別與該二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象的處理。根據(jù)上述本公開(kāi)的實(shí)施例，可以容易地選擇立體圖像，而不會(huì)有不適感。


圖I是示出根據(jù)本公開(kāi)的信息處理裝置的概要的示圖；圖2是示出幻象(phantogram)的概要的示圖；圖3是根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置的配置框圖；圖4是示出基于模型數(shù)據(jù)創(chuàng)建幻象的過(guò)程的示圖；圖5是示出當(dāng)來(lái)自虛擬光源的光撞擊物體時(shí)發(fā)生的影子的示圖；圖6是示出明示漂浮的立體圖像與作為該漂浮立體圖像的影子的二維圖像之間的關(guān)聯(lián)關(guān)系的顯不不例的不圖；圖7是示出明示漂浮的立體圖像與作為該漂浮立體圖像的影子的二維圖像之間 的關(guān)聯(lián)關(guān)系的另一顯不不例的不圖；圖8是示出當(dāng)根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置執(zhí)行圖像生成時(shí)執(zhí)行的操作處理的流程圖；圖9是示出當(dāng)根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置根據(jù)用戶操作改變合成圖像時(shí)執(zhí)行的操作處理的流程圖；圖10是示出根據(jù)本公開(kāi)的實(shí)施例的第一操作示例的示圖；圖11是示出根據(jù)本公開(kāi)的實(shí)施例的第一操作示例的修改例的示圖；圖12是示出根據(jù)本公開(kāi)的實(shí)施例的第二操作示例的示圖；圖13是示出根據(jù)本公開(kāi)的實(shí)施例的第三操作示例中的撐開(kāi)(pinch-out)操作的示圖；圖14是示出根據(jù)本公開(kāi)的實(shí)施例的第三操作示例中的捏攏(pinch-in)操作的示圖；圖15是示出根據(jù)本公開(kāi)的實(shí)施例的第四操作示例的示圖；圖16是示出根據(jù)本公開(kāi)的實(shí)施例的第五操作示例中的撐開(kāi)操作的示圖；圖17是示出根據(jù)本公開(kāi)的實(shí)施例的第六操作示例中的撐開(kāi)操作的示圖；并且圖18是示出根據(jù)本公開(kāi)的實(shí)施例的第六操作示例中的捏攏操作的示圖。
具體實(shí)施例方式以下，將參考附圖詳細(xì)描述本公開(kāi)的優(yōu)選實(shí)施例。注意，在本說(shuō)明書和附圖中，用相同的標(biāo)號(hào)來(lái)表示具有基本相同的功能和結(jié)構(gòu)的結(jié)構(gòu)元素，并且省略對(duì)這些結(jié)構(gòu)元素的重復(fù)說(shuō)明。注意，將按以下順序進(jìn)行說(shuō)明。I.信息處理裝置的概要2.本公開(kāi)的實(shí)施例2-1.配置2-2.操作處理2-3.具體操作示例3.結(jié)論將利用“2.本公開(kāi)的實(shí)施例”來(lái)說(shuō)明根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置(10)。信息處理裝置(10)包括A :圖像生成部(12)，該圖像生成部(12)通過(guò)將立體圖像和與立體圖像相關(guān)聯(lián)的二維圖像相合成來(lái)生成合成圖像，該立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及B :識(shí)別部(18)，當(dāng)檢測(cè)到對(duì)該二維圖像的用戶操作時(shí)，該識(shí)別部(18)識(shí)別與該二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。接下來(lái)，將參考圖I來(lái)說(shuō)明根據(jù)本公開(kāi)的實(shí)施例的上述信息處理裝置(10)的概要。I.信息處理裝置的概要圖I是示出根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置的概要的示圖。如圖I中所示，信息處理裝置10包括顯示部14。平板計(jì)算機(jī)是信息處理裝置10的示例。顯示部14以幻 象格式(下文將描述)檢測(cè)具有視差的用于雙眼的圖像。因此，當(dāng)用戶從斜上方通過(guò)眼鏡3觀察放在水平面例如桌面6上的信息處理裝置10時(shí)，用戶可以看到立體圖像30，就好像其真實(shí)存在一樣，如圖I中所示。另外，顯示部14顯示二維圖像32作為立體圖像30的變形影子。如上所述，立體圖像30看起來(lái)就好像其真實(shí)存在于放在桌面等上的信息處理裝置10上一樣。因此，在顯示部14上顯示的二維圖像32看起來(lái)像立體圖像30的落在平面上的影子。如果用戶對(duì)這樣顯示為影子的二維圖像32執(zhí)行觸摸操作，則用戶可間接地操作立體圖像30，而沒(méi)有不適感。例如，當(dāng)顯示部14是與操作輸入部16相集成的觸摸面板顯示屏?xí)r，用戶可對(duì)該觸摸面板顯示屏上顯示的二維圖像32執(zhí)行觸摸操作。一般地，當(dāng)用戶直接操作立體圖像時(shí)，必須在X、y和z方向上檢測(cè)用戶操作的空間位置。因此，在許多情況下，難以用諸如移動(dòng)裝置之類的硬件資源相對(duì)有限的裝置實(shí)現(xiàn)檢測(cè)。另外，當(dāng)用戶直接操作立體圖像時(shí)，還必須在x、y和z方向上檢測(cè)用戶感知的立體圖像的位置。因此，例如，當(dāng)立體圖像具有復(fù)雜的凸出形狀時(shí)，難以準(zhǔn)確地識(shí)別感知的位置。為了解決此問(wèn)題，根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置10，根據(jù)對(duì)二維圖像32的操作來(lái)執(zhí)行對(duì)立體圖像30的顯示控制，而不檢測(cè)三維空間的x、y和z方向上用戶操作的位置和立體圖像30的形狀。換言之，如果信息處理裝置10只能檢測(cè)X和y方向上二維圖像32的操作位置，可以實(shí)現(xiàn)根據(jù)用戶操作執(zhí)行的立體圖像操作。另外，根據(jù)信息處理裝置10，通過(guò)將立體圖像30的操作柄表現(xiàn)為落在顯示部14的平面上的立體圖像30的影子，可以提供統(tǒng)一的操作界面。這樣，用戶通過(guò)直接操作被顯示為立體圖像30的影子的二維圖像32來(lái)間接操作立體圖像30。結(jié)果，用戶可執(zhí)行對(duì)立體圖像30的操作，而沒(méi)有不適感。幻象如上所述，本公開(kāi)的實(shí)施例的信息處理裝置把作為立體圖像30的操作柄的影子表現(xiàn)為落在顯示部14的平面上的立體圖像30的影子。因此，當(dāng)顯示部14被水平放置時(shí)，本公開(kāi)的實(shí)施例的信息處理裝置生成看起來(lái)好像從顯示部14凸出的立體圖像30。被稱為“幻象”的技術(shù)是用于實(shí)現(xiàn)此類立體圖像的方法的示例。以下，將參考圖2來(lái)說(shuō)明幻象。圖2是示出幻象的概要的示圖。如圖2中所示，按幻象格式生成的立體圖(anaglyph) I包括左眼圖像2L和右眼圖像2R，它們是利用兩種不同的單獨(dú)顏色例如紅色和青色描繪的。左眼圖像2L和右眼圖像2R是通過(guò)對(duì)當(dāng)從斜上方觀看時(shí)其間具有視差的左眼圖像和右眼圖像中的每一個(gè)執(zhí)行透視校正而獲得的圖像。當(dāng)顯示裝置被放置成使得立體圖I是水平的，并且通過(guò)使用與左眼圖像2L和右眼圖像2R的顏色分別對(duì)應(yīng)的濾色片作為透鏡的眼鏡3從斜上方觀察顯示裝置時(shí)，看起來(lái)就好像立體圖像5實(shí)際存在于那里一樣。從斜上方觀看時(shí)的角度α是等于或小于180度的預(yù)定角度，例如是45度。當(dāng)從斜上方觀察水平放置的顯示裝置時(shí)，用戶感覺(jué)顯示裝置的顯示畫面就好像是諸如桌面、地板之類的基準(zhǔn)面的延伸一樣。另外，由于立體圖像5的透視被幻象強(qiáng)調(diào)，所以立體圖像5在用戶看來(lái)就好像是從基準(zhǔn)面凸出一樣。結(jié)果，立體圖像5看起來(lái)就好像更真實(shí)地實(shí)際存在于那里一樣。這樣，當(dāng)水平放置的顯示畫面被作為基準(zhǔn)面時(shí)，按幻象格式生成的立體圖像看起 來(lái)就好像物體被放置在該基準(zhǔn)面上一樣。因此，用戶可以更真實(shí)地感知到立體圖像。在以下將說(shuō)明的根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置中，通過(guò)此類幻象格式生成立體圖像。2.本公開(kāi)的實(shí)施例2-1.配置將參考圖3至圖7來(lái)說(shuō)明根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置10的配置。圖3是根據(jù)本實(shí)施例的信息處理裝置10的配置框圖。如圖3中所示，信息處理裝置10設(shè)有圖像生成部12、存儲(chǔ)器13、顯示部14、操作輸入部16、識(shí)別部18和判定部20。圖像生成部12具有生成被顯示在顯示部14上的圖像的功能。另外，根據(jù)本實(shí)施例的圖像生成部12執(zhí)行改變被識(shí)別為選擇對(duì)象的立體圖像和被執(zhí)行觸摸操作的二維圖像中的至少一個(gè)的顯示的控制。具體而言，圖像生成部12設(shè)有立體圖像生成部121、影子生成部122和合成部123。立體圖像生成部121從存儲(chǔ)器13獲取模型數(shù)據(jù)，并且基于模型數(shù)據(jù)生成具有視差的用于雙眼的圖像。注意，根據(jù)本實(shí)施例的立體圖像生成部121利用幻象格式生成立體圖像。這里，將參考圖4來(lái)說(shuō)明利用幻象格式的立體圖像生成。圖4是示出基于模型數(shù)據(jù)創(chuàng)建幻象的過(guò)程的示圖。如圖4中所示，模型數(shù)據(jù)中包括的其間具有視差的左眼圖像LO和右眼圖像RO所指示的模型數(shù)據(jù)包括與所有變動(dòng)(用于正面、用于旋轉(zhuǎn)、用于放大和縮小)相對(duì)應(yīng)的數(shù)據(jù)。然而，這里，幻象是基于用于正面的模型數(shù)據(jù)創(chuàng)建的。為了使得說(shuō)明易于理解，圖4中所示的左眼圖像LO和右眼圖像RO被表現(xiàn)為放置對(duì)象的基準(zhǔn)面上描繪的格子圖案。另外，左眼圖像LO和右眼圖像RO是從斜上方觀看時(shí)的圖像。從斜上方觀看時(shí)的角度是等于或小于180度的預(yù)定角度，例如45度。通過(guò)對(duì)由左眼圖像LO和右眼圖像RO指示的模型數(shù)據(jù)執(zhí)行透視校正獲得圖像LI和R1。透視校正是通過(guò)透視變換進(jìn)行的坐標(biāo)轉(zhuǎn)換，并且也被稱為透視轉(zhuǎn)換。在圖像LI和Rl中，與基準(zhǔn)平面平行的面上的圖形被沒(méi)有失真地顯示。因此，格子圖案是方形格子圖案，其中格子以直角相交。然后，圖像LI和Rl作為不同顏色圖像被疊加，并且立體圖A被創(chuàng)建，立體圖A被用作幻象。立體圖像生成部121把這樣生成的立體圖像(幻象)輸入到合成部123。
影子生成部122利用二維圖像生成與模型相對(duì)應(yīng)的影子。如圖5中所示，影子生成部122生成的影子可以是當(dāng)來(lái)自虛擬光源7的光撞擊物體O時(shí)對(duì)應(yīng)于物體O的形狀生成的影子S。另外，影子生成部122生成的影子可以是其形狀通過(guò)變形被簡(jiǎn)化的影子。另外，影子生成部122把所生成的二維圖像輸入到合成部123。合成部123通過(guò)把由立體圖像生成部121生成的立體圖像與由影子生成部122生成的作為立體圖像的影子的二維圖像相合成來(lái)生成合成圖像。合成部123把所生成的合成圖像輸入到顯示部14。存儲(chǔ)器13是數(shù)據(jù)存儲(chǔ)裝置，并且是信息處理裝置10的存儲(chǔ)部的示例。存儲(chǔ)器13可包括存儲(chǔ)介質(zhì)、將數(shù)據(jù)記錄到存儲(chǔ)介質(zhì)上的記錄裝置、從存儲(chǔ)介質(zhì)中讀出數(shù)據(jù)的讀取裝置、刪除存儲(chǔ)介質(zhì)上記錄的數(shù)據(jù)的刪除裝置，等等。存儲(chǔ)器13例如是由硬盤驅(qū)動(dòng)器(HDD)形成的。存儲(chǔ)器13驅(qū)動(dòng)硬盤并且存儲(chǔ)由信息處理裝置10執(zhí)行的程序和各類數(shù)據(jù)。另外，根據(jù)本實(shí)施例的存儲(chǔ)器13存儲(chǔ)包括用于立體圖像生成的各類變動(dòng)的模型數(shù)據(jù)。顯示部14具有在顯示畫面上顯示圖像的功能。另外，顯示部14的功能例如是由 陰極射線管(CRT)顯示裝置、液晶顯示(LCD)裝置或有線發(fā)光二極管(OLED)裝置實(shí)現(xiàn)的。根據(jù)本實(shí)施例的顯示部14顯示從圖像生成部12輸入的合成圖像。操作輸入部16具有檢測(cè)用戶執(zhí)行的操作的功能。操作輸入部16的功能是由觸摸傳感器、鄰近傳感器、操作按鈕等等實(shí)現(xiàn)的。在本說(shuō)明書中，其中一體地形成顯示部14和操作輸入部16的觸摸面板顯示屏被用作示例。根據(jù)本實(shí)施例的操作輸入部16檢測(cè)對(duì)所顯示的二維圖像執(zhí)行的用戶操作，例如觸摸操作、拖動(dòng)操作等等，并且將檢測(cè)結(jié)果輸入到識(shí)別部18和判定部20。注意，在本說(shuō)明書中，說(shuō)明了操作輸入部16是觸摸傳感器的情況作為示例。然而，本公開(kāi)并不限于此示例，也可使用鄰近傳感器來(lái)檢測(cè)用戶操作，例如觸摸操作、拖動(dòng)操作等等?；趶牟僮鬏斎氩?6輸入的檢測(cè)結(jié)果，識(shí)別部18識(shí)別與其上執(zhí)行觸摸操作(包括叩擊或點(diǎn)擊操作)的二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。例如，當(dāng)二維圖像以關(guān)聯(lián)方式作為與立體圖像重疊的影子被顯示時(shí)，識(shí)別部18識(shí)別與被執(zhí)行觸摸操作的二維圖像重疊顯示的立體圖像作為選擇對(duì)象。注意，當(dāng)二維圖像是漂浮的立體圖像的影子時(shí)，存在這樣的情況，即影子不與立體圖像重疊并且是與立體圖像分開(kāi)顯示的。在此情況下，為了指示立體圖像與作為立體圖像的影子的二維圖像之間的關(guān)聯(lián)關(guān)系，二維圖像可包括指示立體圖像的顯示。將參考圖6和圖7來(lái)說(shuō)明包括指示立體圖像的顯示的二維圖像的具體示例。圖6是示出明示漂浮立體圖像34與作為漂浮立體圖像34的影子的二維圖像36之間的關(guān)聯(lián)關(guān)系的顯示示例的示圖。如圖6中所示，通過(guò)執(zhí)行利用是立體圖像的記號(hào)37將立體圖像34和作為立體圖像34的影子的二維圖像36相連接的顯示，可以指示關(guān)聯(lián)關(guān)系。圖7是示出明示漂浮立體圖像34與作為漂浮立體圖像34的影子的二維圖像36之間的關(guān)聯(lián)關(guān)系的另一顯示示例的示圖。如圖7中所示，通過(guò)在二維圖像36上顯示指示二維圖像36是哪個(gè)立體圖像的影子的字符信息39，可以指示關(guān)聯(lián)關(guān)系。以上，說(shuō)明了識(shí)別部18執(zhí)行的處理。接下來(lái)，返回圖3，將繼續(xù)關(guān)于信息處理裝置10的配置的說(shuō)明。判定部20基于從操作輸入部16輸入的檢測(cè)結(jié)果，判定對(duì)顯示部14上顯示的二維圖像的預(yù)定用戶操作。檢測(cè)結(jié)果例如由用戶接觸或者非常接近的位置的二維坐標(biāo)指示。判定部20判定是否對(duì)二維圖像執(zhí)行了預(yù)定的用戶操作。預(yù)定的用戶操作的示例包括拖動(dòng)操作、撐開(kāi)操作、捏攏操作、旋轉(zhuǎn)操作等等。判定部20向圖像生成部12輸入執(zhí)行了哪類用戶操作和諸如拖動(dòng)距離之類的操作量作為判定結(jié)果O以上，詳細(xì)說(shuō)明了根據(jù)本實(shí)施例的信息處理裝置10的配置。接下來(lái)，將參考圖8和圖9說(shuō)明根據(jù)本實(shí)施例的信息處理裝置10中執(zhí)行的操作處理。2-2.操作處理圖8是示出當(dāng)根據(jù)本實(shí)施例的信息處理裝置10執(zhí)行圖像生成時(shí)執(zhí)行的操作處理的流程圖。如圖8中所示，首先，在步驟S102，模型數(shù)據(jù)被輸入到圖像生成部12。接下來(lái)，在步驟S104，立體圖像生成部121基于模型數(shù)據(jù)生成立體圖像。接下來(lái)，在步驟S106，影子生成部122利用二維圖像生成與模型相對(duì)應(yīng)的影子。 然后，在步驟S108，合成部123合成由立體圖像生成部121生成的立體圖像和由影子生成部122生成的二維圖像，從而生成合成圖像。注意，合成部123將所生成的合成圖像輸入到顯示部14。這樣，圖像生成部12生成要被顯示在顯示部14上的合成圖像。接下來(lái)，將參考圖9說(shuō)明當(dāng)根據(jù)對(duì)顯示部14上顯示的合成圖像的用戶操作改變合成圖像時(shí)執(zhí)行的操作處理。圖9是示出當(dāng)根據(jù)本實(shí)施例的信息處理裝置10根據(jù)用戶操作改變合成圖像時(shí)執(zhí)行的操作處理的流程圖。如圖9中所示，首先，在步驟S 112，操作輸入部16檢測(cè)用戶對(duì)作為影子區(qū)域的二維圖像執(zhí)行的觸摸操作，并且將檢測(cè)結(jié)果輸入到識(shí)別部18和判定部20。接下來(lái)，在步驟S114，基于檢測(cè)結(jié)果，識(shí)別部18識(shí)別與被執(zhí)行觸摸操作的二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。另外，識(shí)別部18將識(shí)別結(jié)果輸入到圖像生成部12。接下來(lái)，在步驟S115，圖像生成部12執(zhí)行改變被識(shí)別為選擇對(duì)象的立體圖像和被執(zhí)行觸摸操作的二維圖像中的至少一個(gè)的顯示的控制。結(jié)果，顯示部14執(zhí)行觸摸操作的反饋，并且用戶可認(rèn)識(shí)到選擇已成功完成。根據(jù)觸摸操作(包括叩擊或點(diǎn)擊操作)的顯示改變將在下一節(jié)“2-3.具體操作示例”中說(shuō)明。接下來(lái)，在步驟S116，判定部20判定操作輸入部16檢測(cè)到的用戶操作是否是預(yù)定的用戶操作。當(dāng)檢測(cè)到的用戶操作是預(yù)定的用戶操作時(shí)，處理前進(jìn)到步驟S118。另一方面，當(dāng)檢測(cè)到的用戶操作不是預(yù)定的用戶操作時(shí)，處理結(jié)束。然后，在步驟S118，根據(jù)由判定部20判定的預(yù)定用戶操作，圖像生成部12改變被識(shí)別部18識(shí)別的立體圖像和被執(zhí)行觸摸操作的二維圖像中的至少一個(gè)的顯示。結(jié)果，顯示部14執(zhí)行預(yù)定用戶操作的反饋。這里，預(yù)定用戶操作的示例包括拖動(dòng)操作、撐開(kāi)操作、捏攏操作、旋轉(zhuǎn)操作等等。根據(jù)每個(gè)預(yù)定操作的顯示改變將在下一節(jié)“2-3.具體操作示例”中說(shuō)明。以上說(shuō)明了根據(jù)本實(shí)施例的信息處理裝置10的操作處理。接下來(lái)，將利用第一操作示例至第六操作示例來(lái)具體說(shuō)明合成圖像如何根據(jù)判定部20的判定結(jié)果而變化。2-3.具體操作示例第一操作示例第一操作示例是當(dāng)用戶對(duì)二維圖像執(zhí)行觸摸操作(包括叩擊或點(diǎn)擊操作)時(shí)的示例。當(dāng)判定部20判定叩擊操作為用戶操作時(shí)，圖像生成部12使得被執(zhí)行叩擊操作的二維圖像和與該二維圖像相關(guān)聯(lián)的立體圖像中的至少一個(gè)變體，從而指示出它們處于選中狀態(tài)。以下，將參考圖10和圖11來(lái)說(shuō)明根據(jù)第一操作示例的合成圖像的變化。圖10是示出根據(jù)本實(shí)施例的第一操作示例的示圖。如圖10中所示，當(dāng)顯示立體圖像34和是與立體圖像34重疊的二維圖像的影子36時(shí)，如果用戶對(duì)影子36執(zhí)行叩擊操作，則發(fā)光圖像38被立體地顯示在立體圖像34周圍。作為替換，圖像生成部12可使得立體圖像34的顏色變化，可執(zhí)行運(yùn)動(dòng)變化，例如旋轉(zhuǎn)立體圖像34，或者可使得立體圖像34閃爍。圖11是示出根據(jù)本實(shí)施例的第一操作示例的修改例的示圖。如圖11中所示，當(dāng)顯示立體圖像34和是與立體圖像34重疊的二維圖像的影子36時(shí)，如果用戶對(duì)影子36執(zhí)行叩擊操作，則二維圖像36的顏色變化。作為替換，響應(yīng)于用戶的叩擊操作，圖像生成部12可使二維圖像36變淺或變深，可執(zhí)行運(yùn)動(dòng)變化，例如影子36的形狀的瞬時(shí)變化，或者可使得影子36閃爍。第二操作示例

第二操作示例是當(dāng)用戶對(duì)二維圖像執(zhí)行拖動(dòng)操作時(shí)的示例。當(dāng)判定部20判定拖動(dòng)操作為用戶操作時(shí)，圖像生成部12使得立體圖像和二維圖像在拖動(dòng)操作的方向上移動(dòng)。以下，將參考圖12來(lái)說(shuō)明根據(jù)第二操作示例的合成圖像的變化。圖12是示出根據(jù)本實(shí)施例的第二操作示例的示圖。如圖12中所示，當(dāng)立體圖像34a的影子36a在向右方向上被拖動(dòng)時(shí)，顯示位置在向右方向上移動(dòng)，如立體圖像34b和影子36b所示。第三操作示例第三操作示例是當(dāng)用戶對(duì)二維圖像執(zhí)行撐開(kāi)操作或捏攏操作時(shí)的示例。當(dāng)判定部20判定撐開(kāi)操作或捏攏操作為用戶操作時(shí)，圖像生成部12使得被執(zhí)行該操作的二維圖像的大小和與該二維圖像相關(guān)聯(lián)的立體圖像的大小變化。以下，將參考圖13和圖14來(lái)說(shuō)明根據(jù)第三操作示例的合成圖像的變化。圖13是示出根據(jù)本實(shí)施例的第三操作示例中的撐開(kāi)操作的示圖。如圖13中所示，當(dāng)對(duì)立體圖像40a的影子42a執(zhí)行撐開(kāi)操作時(shí)，影子根據(jù)用戶的手指之間的距離被顯示得更大，如影子42b所示。另外，隨著影子被顯示得更大，立體圖像也以各向同性的方式被顯示得更大，如立體圖像40b所示。圖14是示出根據(jù)本實(shí)施例的第三操作示例中的捏攏操作的示圖。如圖14中所示，當(dāng)對(duì)立體圖像40a的影子42a執(zhí)行捏攏操作時(shí)，影子根據(jù)用戶的手指之間的距離被顯示得更小，如影子42c所示。另外，隨著影子被顯示得更小，立體圖像也以各向同性的方式被顯示得更小，如立體圖像40c所示。第四操作示例第四操作示例是當(dāng)用戶對(duì)二維圖像執(zhí)行旋轉(zhuǎn)操作時(shí)的示例。當(dāng)判定部20判定旋轉(zhuǎn)操作為用戶操作時(shí)，圖像生成部12使得被執(zhí)行旋轉(zhuǎn)操作的二維圖像和與該二維圖像相關(guān)聯(lián)的立體圖像旋轉(zhuǎn)。以下，將參考圖15來(lái)說(shuō)明根據(jù)第四操作示例的合成圖像的變化。圖15是示出根據(jù)本實(shí)施例的第四操作示例的示圖。如圖15中所示，當(dāng)用戶對(duì)立體圖像44a的影子46a執(zhí)行旋轉(zhuǎn)操作時(shí)，圖像繞著軸P旋轉(zhuǎn)，如立體圖像44b和影子46b所示。軸P與顯示合成圖像的顯示畫面垂直。注意，軸P不限于圖15中所示的立體圖像44a和影子46a的中心軸。例如，軸P可以是在影子46a和立體圖像44a的右端并且與顯示畫面垂直的軸。第五操作示例第五操作示例是當(dāng)用戶對(duì)二維圖像執(zhí)行撐開(kāi)操作或捏攏操作時(shí)的另一示例。當(dāng)判定部20判定撐開(kāi)操作或捏攏操作為用戶操作時(shí)，圖像生成部12將撐開(kāi)操作或捏攏操作解析成X和y成分并且使得合成圖像與每個(gè)成分相對(duì)應(yīng)地變化。以下，將參考圖16來(lái)說(shuō)明根據(jù)第五操作示例的合成圖像的變化。圖16是示出根據(jù)本實(shí)施例的第五操作示例中的撐開(kāi)操作的示圖。如圖16中所示，當(dāng)對(duì)立體圖像40a的影子42a執(zhí)行撐開(kāi)操作時(shí)，圖像生成部12將該撐開(kāi)操作解析x和y成分，并且對(duì)于X和I成分中的每一個(gè)放大影子42a。然后，基于改變后的影子42d的形狀和例如圖5中所示的虛擬光源7的位置，圖像生成部12計(jì)算根據(jù)改變后的影子42d的形狀估計(jì)的立體圖像40d的形狀，并且使得立體圖 像40a的形狀變化。注意，如果用戶對(duì)立體圖像40a的影子42a執(zhí)行捏攏操作，則圖像生成部12將捏攏操作解析成X和y成分，并且對(duì)于X和y成分中的每一個(gè)縮小影子42a。第六操作示例第六操作示例是當(dāng)用戶對(duì)作為漂浮立體圖像的影子的二維圖像執(zhí)行撐開(kāi)操作或捏攏操作時(shí)的示例。當(dāng)判定部20判定撐開(kāi)操作或捏攏操作為用戶操作時(shí)，圖像生成部12使得被執(zhí)行撐開(kāi)操作或捏攏操作的二維圖像和與該二維圖像相關(guān)聯(lián)的立體圖像變化。另外，二維圖像被關(guān)聯(lián)為立體圖像的影子。注意，當(dāng)物體漂浮得更高時(shí)，影子擴(kuò)散，從而影子顏色深的范圍變得更小。因此，圖像生成部12顯示影子，使得當(dāng)立體圖像漂浮得更高時(shí)，影子顏色深的范圍變得更小。以下，將參考圖17和圖18來(lái)說(shuō)明根據(jù)第六操作示例的合成圖像的變化。圖17是示出根據(jù)本實(shí)施例的第六操作示例中的撐開(kāi)操作的示圖。如圖17中所示，當(dāng)對(duì)漂浮立體圖像48a的影子49a執(zhí)行撐開(kāi)操作時(shí)，影子49a根據(jù)用戶的手指之間的距離被顯示得更大，結(jié)果其被顯示得如影子49b所示。然后，立體圖像48a的顯示位置(高度)變得更低，并且立體圖像被顯示在較低的位置，例如如立體圖像48b所示。圖18是示出根據(jù)本實(shí)施例的第六操作示例中的捏攏操作的示圖。如圖18中所示，當(dāng)對(duì)漂浮立體圖像48a的影子49a執(zhí)行捏攏操作時(shí)，影子49a根據(jù)用戶的手指之間的距離被顯示得更小，結(jié)果其被顯示得如影子49c所示。然后，立體圖像48a的顯示位置(高度)變得更高，并且立體圖像被顯示在較高的位置，例如如立體圖像48c所示。3.結(jié)論如上所述，根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置可通過(guò)對(duì)與立體圖像關(guān)聯(lián)顯示的二維圖像的操作來(lái)間接操作立體圖像。從而，可以容易地選擇或操作立體圖像，而無(wú)需考慮與立體圖像的復(fù)雜的凸出形狀相對(duì)應(yīng)的三維空間中的操作位置。另外，根據(jù)本公開(kāi)的實(shí)施例的信息處理裝置，立體圖像是作為幻象生成的，并且二維圖像被表現(xiàn)為落在顯示部14的平坦面上的立體圖像的影子。結(jié)果，在以更高的真實(shí)感感知凸出的立體圖像的同時(shí)，用戶可操作落在該平坦面上的立體圖像的影子，而不會(huì)有不適感。以下，參考附圖詳細(xì)說(shuō)明本公開(kāi)的示例性實(shí)施例。然而，本技術(shù)并不限于上述示例。本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，取決于設(shè)計(jì)要求和其他因素，可以進(jìn)行各種修改、組合、子組合和變更，只要它們落在所附權(quán)利要求或其等同物的范圍內(nèi)即可。例如，本說(shuō)明書中描述的信息處理裝置10的處理中的各個(gè)步驟不一定要按圖8和圖9所示的流程圖中描述的順序按時(shí)序執(zhí)行。例如，信息處理裝置10的處理中的各個(gè)步驟可按與流程圖中描述的順序不同的順序執(zhí)行，或者可并行執(zhí)行。具體而言，例如，可按不同的順序處理或者可并行處理圖8中所示的步驟S104和步驟S106。另外，根據(jù)上述實(shí)施例的信息處理裝置10的每個(gè)結(jié)構(gòu)元素可由諸如中央處理單元(CPU)、只讀存儲(chǔ)器(ROM)和隨機(jī)訪問(wèn)存儲(chǔ)器(RAM)之類的硬件配置實(shí)現(xiàn)。另外，也可創(chuàng)建計(jì)算機(jī)程序來(lái)實(shí)現(xiàn)等同于根據(jù)上述實(shí)施例的信息處理裝置10的每個(gè)結(jié)構(gòu)元素的功能。另外，還提供了存儲(chǔ)該計(jì)算機(jī)程序的存儲(chǔ)介質(zhì)。存儲(chǔ)介質(zhì)例如是磁 盤、光盤、磁光盤、閃存等等。另外，上述計(jì)算機(jī)程序可例如經(jīng)由網(wǎng)絡(luò)分發(fā)，而不使用記錄介質(zhì)。注意，本技術(shù)也可采取以下配置。(I) 一種信息處理裝置，包括圖像生成部，該圖像生成部通過(guò)將立體圖像和與所述立體圖像相關(guān)聯(lián)的二維圖像相合成來(lái)生成合成圖像，所述立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及識(shí)別部，當(dāng)檢測(cè)到對(duì)所述二維圖像的用戶操作時(shí)，所述識(shí)別部識(shí)別與所述二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。(2)根據(jù)以上(I)所述的信息處理裝置，其中，所述圖像生成部使得所述識(shí)別部所識(shí)別的立體圖像和所述二維圖像中的至少一個(gè)根據(jù)所述用戶操作而變化。(3)根據(jù)以上⑴或(2)所述的信息處理裝置，其中，所述二維圖像通過(guò)被顯示為所述立體圖像的影子而與所述立體圖像相關(guān)聯(lián)。(4)根據(jù)以上(I)至(3)中任何一項(xiàng)所述的信息處理裝置，其中，所述二維圖像通過(guò)包括指示所述立體圖像的顯示而與所述立體圖像相關(guān)聯(lián)。(5)根據(jù)以上(I)至(4)中任何一項(xiàng)所述的信息處理裝置，其中，所述圖像生成部使得所述識(shí)別部所識(shí)別的立體圖像和所述二維圖像中的至少一個(gè)的顏色變化。(6)根據(jù)以上(I)至(5)中任何一項(xiàng)所述的信息處理裝置，其中，所述圖像生成部使得所述二維圖像和所識(shí)別的立體圖像的顯示位置根據(jù)對(duì)所述二維圖像的用戶操作而變化。(7)根據(jù)以上(I)至￠)中任何一項(xiàng)所述的信息處理裝置，其中，所述圖像生成部使得所述二維圖像的大小根據(jù)用戶操作而變化，而且使得所識(shí)別的立體圖像的大小根據(jù)所述二維圖像的大小的變化而變化。(8)根據(jù)以上(I)至(6)中任何一項(xiàng)所述的信息處理裝置，其中，當(dāng)所識(shí)別的立體圖像被以漂浮方式顯示時(shí)，所述圖像生成部使得所述二維圖像的大小根據(jù)用戶操作而變化，而且使得所識(shí)別的立體圖像的顯示位置根據(jù)所述二維圖像的大小的變化而變化。(9)根據(jù)以上⑴至⑶中任何一項(xiàng)所述的信息處理裝置，其中，根據(jù)使得所述二維圖像繞與顯示所述合成圖像的顯示畫面垂直的軸旋轉(zhuǎn)的用戶操作，所述圖像生成部使得所識(shí)別的立體圖像繞所述軸旋轉(zhuǎn)。
(10) 一種信息處理方法,包括通過(guò)將立體圖像和與所述立體圖像相關(guān)聯(lián)的二維圖像相合成來(lái)生成合成圖像，所述立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及當(dāng)檢測(cè)到對(duì)所述二維圖像的用戶操作時(shí)，識(shí)別與所述二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。(11) 一種包括指令的程序，所述指令命令計(jì)算機(jī)執(zhí)行通過(guò)將立體圖像和與所述立體圖像相關(guān)聯(lián)的二維圖像相合成來(lái)生成合成圖像的處理，所述立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及當(dāng)檢測(cè)到對(duì)所述二維圖像的用戶操作時(shí)，識(shí)別與所述二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象的處理。
(12)根據(jù)以上(11)所述的程序，其中，所述生成合成圖像的處理使得所述識(shí)別處理所識(shí)別的立體圖像和所述二維圖像中的至少一個(gè)根據(jù)所述用戶操作而變化。(13)根據(jù)以上(11)或(12)所述的程序，其中，所述二維圖像通過(guò)被顯示為所述立體圖像的影子而與所述立體圖像相關(guān)聯(lián)。(14)根據(jù)以上(11)至(13)中任何一項(xiàng)所述的程序，其中，所述二維圖像通過(guò)包括指示所述立體圖像的顯示而與所述立體圖像相關(guān)聯(lián)。(15)根據(jù)以上(11)至(14)中任何一項(xiàng)所述的程序，其中，所述生成合成圖像的處理使得所述識(shí)別處理所識(shí)別的立體圖像和所述二維圖像中的至少一個(gè)的顏色變化。(16)根據(jù)以上(11)至(15)中任何一項(xiàng)所述的程序，其中，所述生成合成圖像的處理使得所述二維圖像和所識(shí)別的立體圖像的顯示位置根據(jù)對(duì)所述二維圖像的用戶操作而變化。(17)根據(jù)以上(11)至(16)中任何一項(xiàng)所述的程序，其中，所述生成合成圖像的處理使得所述二維圖像的大小根據(jù)用戶操作而變化，而且使得所識(shí)別的立體圖像的大小根據(jù)所述二維圖像的大小的變化而變化。(18)根據(jù)以上(11)至(16)中任何一項(xiàng)所述的程序，其中，當(dāng)所識(shí)別的立體圖像被以漂浮方式顯示時(shí)，所述生成合成圖像的處理使得所述二維圖像的大小根據(jù)用戶操作而變化，而且使得所識(shí)別的立體圖像的顯示位置根據(jù)所述二維圖像的大小的變化而變化。(19)根據(jù)以上(11)至(18)中任何一項(xiàng)所述的程序，其中，根據(jù)使得所述二維圖像繞與顯示所述合成圖像的顯示畫面垂直的軸旋轉(zhuǎn)的用戶操作，所述生成合成圖像的處理使得所識(shí)別的立體圖像繞所述軸旋轉(zhuǎn)。本公開(kāi)包含與2011年6月9日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP2011-129014中公開(kāi)的主題相關(guān)的主題，特此通過(guò)引用將該申請(qǐng)的全部?jī)?nèi)容并入。
權(quán)利要求
1.ー種信息處理裝置，包括 圖像生成部，該圖像生成部通過(guò)將立體圖像和與所述立體圖像相關(guān)聯(lián)的ニ維圖像相合成來(lái)生成合成圖像，所述立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及 識(shí)別部，當(dāng)檢測(cè)到對(duì)所述ニ維圖像的用戶操作時(shí)，所述識(shí)別部識(shí)別與所述ニ維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。
2.根據(jù)權(quán)利要求I所述的信息處理裝置，其中 所述圖像生成部使得所述識(shí)別部所識(shí)別的立體圖像和所述ニ維圖像中的至少ー個(gè)根據(jù)所述用戶操作而變化。
3.根據(jù)權(quán)利要求I所述的信息處理裝置，其中 所述ニ維圖像通過(guò)被顯示為所述立體圖像的影子而與所述立體圖像相關(guān)聯(lián)。
4.根據(jù)權(quán)利要求I所述的信息處理裝置，其中 所述ニ維圖像通過(guò)包括指示所述立體圖像的顯示而與所述立體圖像相關(guān)聯(lián)。
5.根據(jù)權(quán)利要求I所述的信息處理裝置，其中 所述圖像生成部使得所述識(shí)別部所識(shí)別的立體圖像和所述ニ維圖像中的至少ー個(gè)的顏色變化。
6.根據(jù)權(quán)利要求I所述的信息處理裝置，其中 所述圖像生成部使得所述ニ維圖像和所識(shí)別的立體圖像的顯示位置根據(jù)對(duì)所述ニ維圖像的用戶操作而變化。
7.根據(jù)權(quán)利要求I所述的信息處理裝置，其中 所述圖像生成部使得所述ニ維圖像的大小根據(jù)用戶操作而變化，而且使得所識(shí)別的立體圖像的大小根據(jù)所述ニ維圖像的大小的變化而變化。
8.根據(jù)權(quán)利要求I所述的信息處理裝置，其中 當(dāng)所識(shí)別的立體圖像被以漂浮方式顯示時(shí)，所述圖像生成部使得所述ニ維圖像的大小根據(jù)用戶操作而變化，而且使得所識(shí)別的立體圖像的顯示位置根據(jù)所述ニ維圖像的大小的變化而變化。
9.根據(jù)權(quán)利要求I所述的信息處理裝置，其中 根據(jù)使得所述ニ維圖像繞與顯示所述合成圖像的顯示畫面垂直的軸旋轉(zhuǎn)的用戶操作，所述圖像生成部使得所識(shí)別的立體圖像繞所述軸旋轉(zhuǎn)。
10.一種信息處理方法,包括 通過(guò)將立體圖像和與所述立體圖像相關(guān)聯(lián)的ニ維圖像相合成來(lái)生成合成圖像，所述立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及 當(dāng)檢測(cè)到對(duì)所述ニ維圖像的用戶操作吋，識(shí)別與所述ニ維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。
11.ー種包括指令的程序，所述指令命令計(jì)算機(jī)執(zhí)行 通過(guò)將立體圖像和與所述立體圖像相關(guān)聯(lián)的ニ維圖像相合成來(lái)生成合成圖像的處理，所述立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及 當(dāng)檢測(cè)到對(duì)所述ニ維圖像的用戶操作吋，識(shí)別與所述ニ維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象的處理。
12.根據(jù)權(quán)利要求11所述的程序，其中 所述生成合成圖像的處理使得所述識(shí)別處理所識(shí)別的立體圖像和所述ニ維圖像中的至少ー個(gè)根據(jù)所述用戶操作而變化。
13.根據(jù)權(quán)利要求11所述的程序，其中 所述ニ維圖像通過(guò)被顯示為所述立體圖像的影子而與所述立體圖像相關(guān)聯(lián)。
14.根據(jù)權(quán)利要求11所述的程序，其中 所述ニ維圖像通過(guò)包括指示所述立體圖像的顯示而與所述立體圖像相關(guān)聯(lián)。
15.根據(jù)權(quán)利要求11所述的程序，其中 所述生成合成圖像的處理使得所述識(shí)別處理所識(shí)別的立體圖像和所述ニ維圖像中的至少ー個(gè)的顏色變化。
16.根據(jù)權(quán)利要求11所述的程序，其中 所述生成合成圖像的處理使得所述ニ維圖像和所識(shí)別的立體圖像的顯示位置根據(jù)對(duì)所述ニ維圖像的用戶操作而變化。
17.根據(jù)權(quán)利要求11所述的程序，其中 所述生成合成圖像的處理使得所述ニ維圖像的大小根據(jù)用戶操作而變化，而且使得所識(shí)別的立體圖像的大小根據(jù)所述ニ維圖像的大小的變化而變化。
18.根據(jù)權(quán)利要求11所述的程序，其中 當(dāng)所識(shí)別的立體圖像被以漂浮方式顯示時(shí)，所述生成合成圖像的處理使得所述ニ維圖像的大小根據(jù)用戶操作而變化，而且使得所識(shí)別的立體圖像的顯示位置根據(jù)所述ニ維圖像的大小的變化而變化。
19.根據(jù)權(quán)利要求11所述的程序，其中 根據(jù)使得所述ニ維圖像繞與顯示所述合成圖像的顯示畫面垂直的軸旋轉(zhuǎn)的用戶操作，所述生成合成圖像的處理使得所識(shí)別的立體圖像繞所述軸旋轉(zhuǎn)。
全文摘要
公開(kāi)了信息處理裝置、信息處理方法和程序。提供了一種信息處理裝置，包括圖像生成部，該圖像生成部通過(guò)將立體圖像和與該立體圖像相關(guān)聯(lián)的二維圖像相合成來(lái)生成合成圖像，該立體圖像是從其間具有視差并且被執(zhí)行透視校正的右眼圖像和左眼圖像生成的，以及識(shí)別部，當(dāng)檢測(cè)到對(duì)二維圖像的用戶操作時(shí)，識(shí)別部識(shí)別與該二維圖像相關(guān)聯(lián)的立體圖像作為選擇對(duì)象。
文檔編號(hào)G06F3/048GK102819385SQ20121019325
公開(kāi)日2012年12月12日 申請(qǐng)日期2012年6月4日 優(yōu)先權(quán)日2011年6月9日
發(fā)明者工藤祐介, 上原朋樹(shù) 申請(qǐng)人:索尼公司