移動(dòng)終端及其全景拍攝方法
【專利摘要】移動(dòng)終端及其全景拍攝方法。一種控制移動(dòng)終端的方法,該方法包括以下步驟:在所述移動(dòng)終端的顯示器上顯示相機(jī)預(yù)覽;在所述相機(jī)預(yù)覽中選擇要拍攝的對(duì)象;在所述顯示器上沿著所選擇的對(duì)象的移動(dòng)方向顯示指示后續(xù)拍攝區(qū)域的拍攝指引;以及當(dāng)所述移動(dòng)終端移動(dòng)以使得所述相機(jī)預(yù)覽在預(yù)定量內(nèi)與所述拍攝指引基本上對(duì)準(zhǔn)時(shí),經(jīng)由所述移動(dòng)終端的控制器拍攝包括所述相機(jī)預(yù)覽中的所述對(duì)象的移動(dòng)路徑的全景圖像。
【專利說明】移動(dòng)終端及其全景拍攝方法 【技術(shù)領(lǐng)域】
[0001] 本說明書涉及虛擬現(xiàn)實(shí)(VR)全景,更具體地講,涉及一種能夠通過提供拍攝指引 來拍攝包括對(duì)象的整個(gè)移動(dòng)路徑的全景圖像的移動(dòng)終端及其全景拍攝方法。 【背景技術(shù)】
[0002] 移動(dòng)終端可執(zhí)行各種功能,例如數(shù)據(jù)和語音通信、拍攝圖像或視頻、存儲(chǔ)語音、經(jīng) 由揚(yáng)聲器系統(tǒng)再現(xiàn)音樂文件、顯示圖像或視頻等。一些移動(dòng)終端可包括玩游戲的附加功能, 其它移動(dòng)終端可被實(shí)現(xiàn)為多媒體播放器。另外,移動(dòng)終端可接收廣播或多播信號(hào)以使得能 夠觀看視頻或電視節(jié)目。
[0003] 移動(dòng)終端可通過改變拍攝角度來拍攝圖像,拍攝的圖像被順序連接并重構(gòu)成一個(gè) 圖像,以獲得類似于用戶的視角的相片。這被稱作全景照片。
[0004] 移動(dòng)終端在全景拍攝模式下在水平和垂直方向上連續(xù)拍攝許多張圖像,并將連續(xù) 拍攝的圖像存儲(chǔ)在存儲(chǔ)器中。存儲(chǔ)在存儲(chǔ)器中的圖像在內(nèi)部/外部圖像處理器中被連接成 一個(gè)圖像。
[0005] 然而,現(xiàn)有技術(shù)的終端需要用戶通過隨機(jī)改變拍攝角度和拍攝方向來拍攝圖像并 將所拍攝的圖像重構(gòu)為全景圖像。因此,各個(gè)圖像不自然地連接。另外,在現(xiàn)有技術(shù)中,通 過僅在一個(gè)相機(jī)預(yù)覽中拍攝對(duì)象的移動(dòng)來構(gòu)造全景圖像,由此難以構(gòu)造包括對(duì)象的整個(gè)移 動(dòng)路徑的全景圖像。
【發(fā)明內(nèi)容】
[0006] 因此,【具體實(shí)施方式】的一個(gè)方面在于提供一種通過利用在多個(gè)連續(xù)的相機(jī)取景中 拍攝的對(duì)象的移動(dòng)實(shí)現(xiàn)全景圖像來將寬闊空間置于一個(gè)畫面中的移動(dòng)終端及其全景拍攝 方法。
【具體實(shí)施方式】 [0007] 的另一方面在于提供一種用于通過提供拍攝指引來拍攝包括對(duì)象 的整個(gè)移動(dòng)路徑的全景圖像的移動(dòng)終端及其全景拍攝方法。
[0008] 為了實(shí)現(xiàn)這些和其它優(yōu)點(diǎn)并且根據(jù)本說明書的目的,如本文具體實(shí)現(xiàn)并廣義描述 的,提供了一種移動(dòng)終端的全景拍攝方法,該全景拍攝方法包括以下步驟:顯示相機(jī)預(yù)覽; 通過識(shí)別在所述相機(jī)預(yù)覽中水平和垂直移動(dòng)的至少一個(gè)對(duì)象來選擇要拍攝的對(duì)象;沿著所 選擇的對(duì)象的移動(dòng)方向顯不指不后續(xù)拍攝區(qū)域的拍攝指引;以及在沿著所述拍攝指引移動(dòng) 的所述相機(jī)預(yù)覽中拍攝包括對(duì)象的移動(dòng)路徑的全景圖像。
[0009] 所述對(duì)象指引可以是指示對(duì)象是要跟蹤的目標(biāo)的指示符,并針對(duì)各個(gè)對(duì)象區(qū)別地 顯不。
[0010] 所述對(duì)象指引可被輸出在選擇的對(duì)象上或者自動(dòng)顯示在移動(dòng)對(duì)象上。
[0011] 當(dāng)對(duì)象遠(yuǎn)離預(yù)覽的中心移動(dòng)預(yù)定距離以上時(shí),拍攝指引可被顯示為與相機(jī)預(yù)覽部 分交疊。拍攝指引可按照與相機(jī)預(yù)覽相同形狀的線或面(或板)的形式形成。
[0012] 拍攝指引可在對(duì)象遠(yuǎn)離預(yù)覽的中心移動(dòng)預(yù)定距離時(shí)被清晰地顯示,或者被顯示為 從遠(yuǎn)離預(yù)覽的中心預(yù)定距離的時(shí)間點(diǎn)開始,根據(jù)對(duì)象的移動(dòng)距離而逐漸清晰。
[0013] 在拍攝全景圖像時(shí),在各個(gè)預(yù)覽中可拍攝背景一次,在各個(gè)預(yù)覽中可連續(xù)拍攝對(duì) 象的移動(dòng)路徑預(yù)定次數(shù)以輸出到該預(yù)覽。
[0014] 所述方法還可包括以下步驟:顯示所拍攝的全景圖像。可在輸出全景圖像時(shí)按照 時(shí)間順序顯示對(duì)象的移動(dòng)路徑。
[0015] 為了實(shí)現(xiàn)這些和其它優(yōu)點(diǎn)并且根據(jù)本說明書的目的,如本文具體實(shí)現(xiàn)并廣義描述 的,提供了一種移動(dòng)終端,該移動(dòng)終端包括:顯示單元,其被配置為顯示相機(jī)預(yù)覽;控制器, 其被配置為當(dāng)對(duì)象在相機(jī)預(yù)覽中移動(dòng)時(shí)沿著對(duì)象的移動(dòng)方向顯示指示后續(xù)拍攝區(qū)域的拍 攝指引,在沿著拍攝指引移動(dòng)的相機(jī)取景中跟蹤對(duì)象,并拍攝包括對(duì)象的移動(dòng)路徑的全景 圖像;以及存儲(chǔ)器,其被配置為存儲(chǔ)所拍攝的全景圖像。
[0016] 當(dāng)選擇了至少一個(gè)要跟蹤的對(duì)象或者感測到至少一個(gè)對(duì)象的移動(dòng)時(shí),所述控制器 可針對(duì)各個(gè)對(duì)象自動(dòng)地區(qū)別地顯示對(duì)象指引。
[0017] 所述控制器在對(duì)象遠(yuǎn)離預(yù)覽的中心移動(dòng)預(yù)定距離以上時(shí)可將拍攝指引顯示為與 相機(jī)預(yù)覽部分交疊,拍攝指引可按照與相機(jī)預(yù)覽形狀相同的線或面(或板)的形式形成。
[0018] 所述控制器可在對(duì)象遠(yuǎn)離預(yù)覽的中心移動(dòng)預(yù)定距離時(shí)清晰地顯示拍攝指引,或者 從遠(yuǎn)離預(yù)覽的中心預(yù)定距離的時(shí)間點(diǎn)開始根據(jù)對(duì)象的移動(dòng)距離來逐漸清晰地顯示拍攝指 引。
[0019] 所述控制器在拍攝全景圖像時(shí)可在各個(gè)預(yù)覽中拍攝背景一次,并在各個(gè)預(yù)覽中連 續(xù)拍攝對(duì)象的移動(dòng)路徑預(yù)定次數(shù)以輸出到該預(yù)覽。
[0020] 當(dāng)輸出所拍攝的全景圖像時(shí),所述控制器可顯示所拍攝的全景圖像,并按照時(shí)間 順序顯示對(duì)象的移動(dòng)路徑。
[0021] 本申請(qǐng)的進(jìn)一步的適用范圍將從下文給出的【具體實(shí)施方式】而變得更明顯。然而, 應(yīng)該理解,【具體實(shí)施方式】和具體示例盡管指示了本發(fā)明的優(yōu)選實(shí)施方式,但是僅以示意性 方式給出,因?yàn)閷?duì)于本領(lǐng)域技術(shù)人員而言,本發(fā)明的精神和范圍內(nèi)的各種改變和修改將從 【具體實(shí)施方式】而變得明顯。 【專利附圖】
【附圖說明】
[0022] 附圖被包括以提供對(duì)本發(fā)明的進(jìn)一步理解,并且被并入本說明書并構(gòu)成本說明書 的一部分,附圖示出實(shí)施方式并與說明書一起用于說明本發(fā)明的原理。
[0023] 附圖中:
[0024] 圖1是根據(jù)本發(fā)明的一個(gè)實(shí)施方式的移動(dòng)終端的框圖;
[0025] 圖2A是能夠與根據(jù)一個(gè)實(shí)施方式的移動(dòng)終端一起工作的無線通信系統(tǒng)的框圖;
[0026] 圖2B是能夠與根據(jù)一個(gè)實(shí)施方式的移動(dòng)終端一起工作的Wi-Fi定位系統(tǒng)的概 覽;
[0027] 圖3是示出提供本文公開的拍攝指引的實(shí)施方式的示圖;
[0028] 圖4的(a)至圖4的(f)是示出對(duì)象指引的各種形狀的示例的示圖;
[0029] 圖5A和圖5B是示出拍攝指引的顯示(輸出、指示)形式的示例的示圖;
[0030] 圖6A至圖6C是示出根據(jù)本發(fā)明的實(shí)施方式的自動(dòng)選擇要跟蹤的對(duì)象的示例的示 圖;
[0031] 圖7是示出指示被指定為要跟蹤的目標(biāo)的對(duì)象的示例的示圖;
[0032] 圖8是示出根據(jù)實(shí)施方式的移動(dòng)終端中的全景圖像生成方法的流程圖;
[0033] 圖9A和圖9B是示出在拍攝全景圖像時(shí)調(diào)節(jié)拍攝姿態(tài)的方法的實(shí)施方式的示圖; [0034] 圖10的(a)至圖10的(c)是示出根據(jù)對(duì)象的尺寸變化(改變)和移動(dòng)路徑收集 并存儲(chǔ)與對(duì)象有關(guān)的移動(dòng)信息的操作的示圖;
[0035] 圖11的(a)至圖11的(d)是示出輸出(顯示、指示)較少移動(dòng)的對(duì)象的移動(dòng)路 徑的示例的示圖;
[0036] 圖12是示出在拍攝對(duì)象的移動(dòng)路徑時(shí)填充未拍攝部分的操作的流程圖;
[0037] 圖13A至圖13C是圖12的詳細(xì)示圖;
[0038] 圖14是示出在移動(dòng)期間當(dāng)對(duì)象移回到已經(jīng)拍攝的區(qū)域時(shí)的圖像處理方法的示 圖;
[0039] 圖15A和圖15B是示出當(dāng)對(duì)象不同于預(yù)期方向移動(dòng)時(shí)的處理方法的示圖;
[0040] 圖16是示出當(dāng)對(duì)象位于拍攝區(qū)域的邊界處時(shí)的圖像處理方法的流程圖;
[0041] 圖17是圖16的詳細(xì)示圖;
[0042] 圖18是不出利用跟蹤的對(duì)象的移動(dòng)路徑構(gòu)建全景圖像的另一實(shí)施方式的不圖;
[0043] 圖19是示出圖18的可用場景的示圖;
[0044] 圖20A和圖20B是示出在拍攝VR全景圖像的同時(shí)使得相機(jī)向空白空間移動(dòng)的實(shí) 施方式的示圖;
[0045] 圖21是示出根據(jù)本文公開的實(shí)施方式的播放全景圖像的操作的流程圖;
[0046] 圖22A和圖22B是示出在全景圖像中顯示(輸出)對(duì)象的移動(dòng)路徑的實(shí)施方式的 詳細(xì)示圖;
[0047] 圖23是示出當(dāng)對(duì)象的移動(dòng)路徑交疊時(shí)的顯示方法的示圖;
[0048] 圖24A和圖24B是示出當(dāng)生成全景圖像時(shí)在畫面上記錄從聲源生成的聲音的操作 的示圖;
[0049] 圖25是示出在拍攝全景圖像的同時(shí)自動(dòng)記錄音頻采集目標(biāo)的聲音的操作的示 圖;
[0050] 圖26A和圖26B是用于拍攝全景圖像的用戶設(shè)定的示圖;
[0051] 圖27A和圖27B是示出在拍攝全景圖像之后在畫面上選擇性地存儲(chǔ)對(duì)象日志和音 頻變焦的操作的實(shí)施方式的示圖;
[0052] 圖28是示出存儲(chǔ)在圖庫中的全景圖像的示圖;
[0053] 圖29是利用分割視圖顯示對(duì)象的移動(dòng)的示圖;以及
[0054] 圖30是示出根據(jù)本文公開的實(shí)施方式的移動(dòng)終端的全景拍攝方法的效果的示 圖。 【具體實(shí)施方式】
[0055] 現(xiàn)在將參照附圖詳細(xì)描述根據(jù)本發(fā)明的實(shí)施方式的移動(dòng)終端的優(yōu)選配置。以下, 本文描述中所使用的部件的后綴"模塊"和"單元或部分"僅是為了方便準(zhǔn)備本說明書而提 供,因此并未賦予其特定含義或功能。因此,應(yīng)該注意的是,"模塊"和"單元或部分"可一起 使用。此外,在描述本發(fā)明時(shí),當(dāng)與本發(fā)明有關(guān)的公知技術(shù)的具體描述被判斷為會(huì)使本發(fā)明 的主旨模糊時(shí),將省略詳細(xì)描述。另外,應(yīng)該注意的是,附圖僅是為了容易說明本發(fā)明的精 神而示出,因此,不應(yīng)被解釋為本發(fā)明的精神被附圖限制。
[0056] 本文公開的移動(dòng)終端可利用各種不同類型的終端來實(shí)現(xiàn)。這些終端的示例包括諸 如蜂窩電話、智能電話、膝上型計(jì)算機(jī)、數(shù)字廣播終端、個(gè)人數(shù)字助理(PDA)、便攜式多媒體 播放器(PMP)、導(dǎo)航儀、平板PC、超極本等的移動(dòng)終端以及諸如數(shù)字TV、臺(tái)式計(jì)算機(jī)等的固 定終端。以下描述假設(shè)終端是移動(dòng)終端。然而,本領(lǐng)域技術(shù)人員可容易理解,除了特別為移 動(dòng)性提供的組件之外,根據(jù)以下描述的配置也可應(yīng)用于固定終端。
[0057] 圖1是根據(jù)本發(fā)明的一個(gè)實(shí)施方式的移動(dòng)終端的框圖。移動(dòng)終端100可包括諸如 無線通信單元110、音頻/視頻(A/V)輸入單元120、用戶輸入單元130、感測單元140、輸出 單元150、存儲(chǔ)器160、接口單元170、控制器180、電源190等的組件。圖1示出移動(dòng)終端 1〇〇具有各種組件,但是應(yīng)該理解,并不要求實(shí)現(xiàn)所有示出的組件。另選地,可實(shí)現(xiàn)更多或更 少的組件。
[0058] 以下,按順序描述各個(gè)組件。
[0059] 無線通信單元110通常可包括允許移動(dòng)終端100與無線通信系統(tǒng)之間或者移動(dòng)終 端100與移動(dòng)終端100所在的網(wǎng)絡(luò)之間的無線通信的一個(gè)或更多個(gè)組件。例如,無線通信 單元110可包括廣播接收模塊111、移動(dòng)通信模塊112、無線互聯(lián)網(wǎng)模塊113、短距離通信模 塊114、定位模塊115等中的至少一個(gè)。
[0060] 廣播接收模塊111經(jīng)由廣播信道從外部廣播管理實(shí)體接收廣播信號(hào)和/或廣播相 關(guān)信息。廣播信道可包括衛(wèi)星信道和/或地面信道。廣播管理服務(wù)器通??梢允巧刹l(fā) 送廣播信號(hào)和/或廣播相關(guān)信息的服務(wù)器,或者是接收先前生成的廣播信號(hào)和/或廣播相 關(guān)信息并將其發(fā)送給終端的服務(wù)器。廣播信號(hào)可包括TV廣播信號(hào)、無線電廣播信號(hào)、數(shù)據(jù) 廣播信號(hào)等。另外,廣播信號(hào)還可包括與TV或無線電廣播信號(hào)結(jié)合的廣播信號(hào)。
[0061] 廣播相關(guān)信息可以指與廣播信道、廣播節(jié)目或廣播服務(wù)提供商相關(guān)的信息。廣播 相關(guān)信息還可經(jīng)由移動(dòng)通信網(wǎng)絡(luò)來提供,在這種情況下,廣播相關(guān)信息可通過移動(dòng)通信模 塊112來接收。
[0062] 廣播信號(hào)可按照各種形式存在。例如,它可按照數(shù)字多媒體廣播(DMB)系統(tǒng)的電 子節(jié)目指南(EPG)、手持?jǐn)?shù)字視頻廣播(DVB-H)系統(tǒng)的電子服務(wù)指南(ESG)等形式存在。
[0063] 廣播接收模塊111可利用諸如地面數(shù)字多媒體廣播(DMB-T)系統(tǒng)、衛(wèi)星數(shù)字多媒 體廣播(DMB-S)系統(tǒng)的數(shù)字廣播系統(tǒng)、諸如僅媒體前向鏈路(McdiaFL〇K))、手持?jǐn)?shù)字視頻 廣播(DVB-H)系統(tǒng)、地面綜合業(yè)務(wù)數(shù)字廣播(ISDB-T)的數(shù)據(jù)廣播系統(tǒng)等來接收數(shù)字廣播。 廣播接收模塊111可被配置為除了上述數(shù)字廣播系統(tǒng)以外還適用于提供廣播信號(hào)的另外 的廣播系統(tǒng)。經(jīng)由廣播接收模塊111接收的廣播信號(hào)和/或廣播相關(guān)信息可存儲(chǔ)在存儲(chǔ)器 160 (或其它類型的存儲(chǔ)介質(zhì))中。
[0064] 移動(dòng)通信模塊112可在移動(dòng)通信網(wǎng)絡(luò)上向至少一個(gè)網(wǎng)絡(luò)實(shí)體(例如,基站、外部移 動(dòng)終端、服務(wù)器等)發(fā)送無線信號(hào)/從其接收無線信號(hào)。這里,無線信號(hào)可包括音頻呼叫信 號(hào)、視頻呼叫信號(hào)、或者根據(jù)文本/多媒體消息的發(fā)送/接收的各種格式的數(shù)據(jù)。
[0065] 移動(dòng)通信模塊112可實(shí)現(xiàn)視頻(電話)呼叫模式和語音呼叫模式。視頻呼叫模式 是指在看到被呼叫者的圖像的情況下的呼叫狀態(tài)。語音呼叫模式是指在沒有看到被呼叫者 的圖像的情況下的呼叫狀態(tài)。移動(dòng)通信模塊112可發(fā)送和接收語音和圖像中的至少一個(gè)以 便實(shí)現(xiàn)視頻呼叫模式和語音呼叫模式。
[0066] 無線互聯(lián)網(wǎng)模塊113可支持移動(dòng)終端的無線互聯(lián)網(wǎng)接入。該模塊可內(nèi)部或外部 耦合至移動(dòng)終端。這種無線互聯(lián)網(wǎng)接入的示例可包括無線LAN(WLAN)、Wi-Fi、無線寬帶 (Wibro)、全球微波接入互操作性(Wimax)、高速下行鏈路分組接入(HSDPA)等。
[0067] 短距離通信模塊114表示用于短距離通信的模塊。用于實(shí)現(xiàn)此模塊的合適的技術(shù) 可包括BLUETOOTH、射頻識(shí)別(RFID)、紅外數(shù)據(jù)協(xié)會(huì)(IrDA)、超寬帶(UWB)、ZigBee、近場通 信(NFC)等。
[0068] 位置信息模塊115表示用于檢測或計(jì)算移動(dòng)終端的位置的模塊。位置信息模塊 115的示例可包括全球定位系統(tǒng)(GPS)模塊或Wi-Fi模塊。
[0069] 參照?qǐng)D1,A/V輸入單元120被配置為向移動(dòng)終端提供音頻或視頻信號(hào)輸入。A/V輸入單元120可包括相機(jī)121和麥克風(fēng)122。相機(jī)121接收并處理在視頻呼叫模式或拍攝 模式下通過圖像傳感器獲得的靜止畫面或視頻的圖像幀。經(jīng)處理的圖像幀可顯示在顯示器 151 上。
[0070] 由相機(jī)121處理的圖像幀可存儲(chǔ)在存儲(chǔ)器160中,或者經(jīng)由無線通信單元110向 外部發(fā)送。可從自相機(jī)121獲得的圖像幀提取與用戶有關(guān)的位置信息等??筛鶕?jù)移動(dòng)終端 的配置設(shè)置兩個(gè)或更多個(gè)相機(jī)121。
[0071] 在移動(dòng)終端處于特定模式(例如,電話呼叫模式、錄制模式和語音識(shí)別模式等) 時(shí),麥克風(fēng)122可經(jīng)由麥克風(fēng)接收外部音頻信號(hào)。該音頻信號(hào)被處理成電音頻數(shù)據(jù)。當(dāng)電 話呼叫模式時(shí),為了輸出將處理的數(shù)字?jǐn)?shù)據(jù)變換成能夠經(jīng)由移動(dòng)通信模塊112發(fā)送給移動(dòng) 通信基站的格式。麥克風(fēng)122可包括各種各樣的噪聲去除算法以去除在接收外部音頻信號(hào) 的過程中生成的噪聲。
[0072] 用戶輸入單元130可生成用戶為了控制移動(dòng)終端的操作而輸入的輸入數(shù)據(jù)。用 戶輸入單元130可包括鍵區(qū)、薄膜開關(guān)(domeswitch)、觸摸板(例如,靜壓/電容)、滾輪 (jogwheel)、觸合式開關(guān)(jogswitch)等。
[0073] 感測單元140可提供移動(dòng)終端的各個(gè)方面的狀態(tài)測量值。例如,感測單元140可 檢測移動(dòng)終端的打開/關(guān)閉狀態(tài)、移動(dòng)終端1〇〇的位置的改變、是否存在用戶與移動(dòng)終端 100的接觸、移動(dòng)終端100的位置、移動(dòng)終端100的加速/減速等,以生成用于控制移動(dòng)終端 100的操作的感測信號(hào)。例如,關(guān)于滑蓋型移動(dòng)終端,感測單元140可感測移動(dòng)終端的滑動(dòng) 部分是打開還是閉合。其它示例包括諸如感測單元140感測電源190是否供電、接口單元 170與外部裝置之間是否存在耦合或其它連接等的感測功能。
[0074] 輸出單元150被配置為輸出音頻信號(hào)、視頻信號(hào)或報(bào)警信號(hào)。輸出單元150可包 括前顯示單元151、音頻輸出模塊152、報(bào)警單元154和后顯示單元155等。前顯示單元151 可輸出移動(dòng)終端100中處理的信息。例如,當(dāng)移動(dòng)終端在電話呼叫模式下操作時(shí),顯示單元 151可提供包括與呼叫關(guān)聯(lián)的信息的用戶界面(UI)或圖形用戶界面(GUI)。又如,如果移 動(dòng)終端處于視頻呼叫模式或拍攝模式下,則顯示單元151可另外地或另選地顯示拍攝和/ 或接收的圖像、n或⑶I。
[0075] 顯示模塊151可利用(例如)液晶顯示器(LCD)、薄膜晶體管液晶顯示器 (TFT-IXD)、有機(jī)發(fā)光二極管顯示器(0LED)、柔性顯示器、三維(3D)顯示器、電子墨水顯示 器等中的至少一個(gè)來實(shí)現(xiàn)。
[0076] 這些顯示器中的一些可被實(shí)現(xiàn)為可透過其看到外部的透明型或光學(xué)透明型(其 被稱作透明顯示器)。透明顯示器的代表性示例可包括透明OLED(TOLED)等。顯示單元151 的后表面也可被實(shí)現(xiàn)為光學(xué)透明的。在這種配置下,用戶能夠透過終端主體被顯示單元151 占據(jù)的區(qū)域看到位于終端主體背后的對(duì)象。
[0077] 根據(jù)移動(dòng)終端100的配置的方面,顯示單元151可按照兩個(gè)或更多個(gè)數(shù)量來實(shí)現(xiàn)。 例如,多個(gè)顯示單元151可彼此間隔開或彼此成一體地布置在一個(gè)表面上,或者可布置在 不同的表面上。后顯示單元155包括與前顯示單元151相似的特性。
[0078] 顯示單元151還可被實(shí)現(xiàn)為用于顯示立體圖像的立體顯示單元152。這里,立體圖 像可以是三維(3D)立體圖像。3D立體圖像是指使觀看者感覺到漸變深度的圖像,監(jiān)視器或 屏幕上的對(duì)象的真實(shí)感與現(xiàn)實(shí)空間相同。3D立體圖像可利用雙目視差來實(shí)現(xiàn)。雙目視差是 指由雙眼的位置造成的視差。當(dāng)兩只眼睛看到不同的2D圖像時(shí),圖像通過視網(wǎng)膜被傳遞給 大腦并在大腦中被組合以提供深度感和真實(shí)感。
[0079] 這里,如果顯示單元151和觸敏傳感器(稱作"觸摸傳感器")之間具有分層結(jié)構(gòu) (稱作"觸摸屏"),則除了輸出裝置以外,顯示單元151還可用作輸入裝置。觸摸傳感器可 被實(shí)現(xiàn)為觸摸膜、觸摸片、觸摸板等。
[0080] 觸摸傳感器可被配置為將施加于顯示單元151的特定部分的壓力的變化或者從 顯示單元151的特定部分發(fā)生的電容的變化轉(zhuǎn)換為電輸入信號(hào)。另外,觸摸傳感器可被配 置為不僅感測觸摸位置和觸摸區(qū)域,而且還感測觸摸壓力。這里,觸摸對(duì)象是對(duì)觸摸傳感器 施加觸摸輸入的對(duì)象。觸摸對(duì)象的示例可包括手指、觸摸筆、手寫筆、指點(diǎn)器等。
[0081] 當(dāng)通過觸摸傳感器感測到觸摸輸入時(shí),對(duì)應(yīng)信號(hào)可被發(fā)送給觸摸控制器。觸摸控 制器可處理所接收到的信號(hào),然后將對(duì)應(yīng)數(shù)據(jù)發(fā)送給控制器180。因此,控制器180可感測 到顯示單元151的哪一區(qū)域被觸摸。
[0082] 仍參照?qǐng)D1,可在移動(dòng)終端100被觸摸屏覆蓋的內(nèi)部區(qū)域或觸摸屏附近布置接近 傳感器141。接近傳感器141可被提供作為感測單元140的一個(gè)示例。接近傳感器141是 指在沒有機(jī)械接觸的情況下,利用電磁場或紅外線感測是否存在靠近待感測表面的物體或 者設(shè)置在待感測表面附近的物體的傳感器。與接觸型傳感器相比,接近傳感器141可具有 更長的壽命和更增強(qiáng)的實(shí)用性。
[0083] 接近傳感器141可包括透射型光電傳感器、直接反射型光電傳感器、反射鏡反射 型光電傳感器、高頻振蕩接近傳感器、電容型接近傳感器、磁型接近傳感器、紅外線接近傳 感器等。當(dāng)觸摸屏被實(shí)現(xiàn)為電容型時(shí),可通過電場的變化來感測指點(diǎn)器對(duì)觸摸屏的接近。在 這種情況下,觸摸屏(觸摸傳感器)可被歸類為接近傳感器。
[0084] 以下,為了簡要說明起見,指點(diǎn)器被定位成接近觸摸屏上但未接觸的狀態(tài)將被稱 作"接近觸摸",而指點(diǎn)器與觸摸屏實(shí)際接觸的狀態(tài)將稱作"接觸觸摸"。對(duì)于與指點(diǎn)器在觸 摸屏上的接近觸摸對(duì)應(yīng)的位置,這種位置將對(duì)應(yīng)于當(dāng)指點(diǎn)器接近觸摸時(shí)指點(diǎn)器垂直面向觸 摸屏的位置。
[0085] 接近傳感器141可感測接近觸摸和接近觸摸模式(例如,距離、方向、速度、時(shí)間、 位置、移動(dòng)狀態(tài)等)。與所感測到的接近觸摸和所感測到的接近觸摸模式有關(guān)的信息可被輸 出到觸摸屏上。
[0086] 當(dāng)觸摸傳感器按照分層方式被疊置于立體顯示單元152上時(shí)(以下稱作"立體觸 摸屏"),或者當(dāng)立體顯示單元152與感測觸摸操作的3D傳感器組合時(shí),立體顯示單元152 也可用作3D輸入裝置。
[0087] 作為3D傳感器的示例,感測單元140可包括接近傳感器141、立體觸摸感測單元 142、超聲感測單元143和相機(jī)感測單元144。
[0088] 接近傳感器141可檢測在沒有機(jī)械接觸的情況下利用電磁力或紅外線施加觸摸 的感測對(duì)象(例如,用戶的手指或手寫筆)與檢測表面之間的距離。利用該距離,終端可識(shí) 別立體圖像的哪一部分被觸摸。具體地講,當(dāng)觸摸屏是靜電觸摸屏?xí)r,可基于電場根據(jù)感測 對(duì)象的接近而發(fā)生的變化來檢測感測對(duì)象的接近程度,可利用接近程度識(shí)別對(duì)3D圖像的 觸摸。
[0089] 立體觸摸感測單元142可檢測施加到觸摸屏的觸摸的強(qiáng)度或持續(xù)時(shí)間。例如,立 體觸摸感測單元142可感測觸摸壓力。當(dāng)壓力較強(qiáng)時(shí),可將觸摸識(shí)別為對(duì)朝著終端的內(nèi)部 較遠(yuǎn)離觸摸屏的對(duì)象的觸摸。
[0090] 超聲感測單元143可利用超聲波識(shí)別與感測對(duì)象有關(guān)的位置信息。超聲感測單元 143可包括(例如)光學(xué)傳感器和多個(gè)超聲傳感器。光學(xué)傳感器可被配置為感測光,超聲傳 感器可被配置為感測超聲波。由于光遠(yuǎn)快于超聲波,所以光到達(dá)光學(xué)傳感器的時(shí)間可遠(yuǎn)短 于超聲波到達(dá)超聲傳感器的時(shí)間。因此,可基于光作為參考信號(hào)利用距超聲波到達(dá)的時(shí)間 的時(shí)間差計(jì)算波生成源的位置。
[0091] 相機(jī)感測單元144可包括相機(jī)121、光電傳感器和激光傳感器中的至少一個(gè)。例 如,相機(jī)121和激光傳感器可被組合以檢測感測對(duì)象對(duì)3D立體圖像的觸摸。當(dāng)將激光傳感 器所檢測的距離信息添加到由相機(jī)拍攝的2D圖像時(shí),可獲得3D信息。
[0092] 在另一示例中,光電傳感器可層疊在顯示裝置上。光電傳感器可被配置為掃描接 近觸摸屏的感測對(duì)象的移動(dòng)。更詳細(xì)地講,光電傳感器可包括成行和列的光電二極管和晶 體管,以利用根據(jù)施加的光的量而變化的電信號(hào)掃描設(shè)置在光電傳感器上的內(nèi)容。即,光電 傳感器可根據(jù)光的變化計(jì)算感測對(duì)象的坐標(biāo),以因此獲得感測對(duì)象的位置信息。
[0093] 音頻輸出模塊152可在呼叫信號(hào)接收模式、呼叫模式、錄制模式、語音識(shí)別模式、 廣播接收模式等下輸出從無線通信單元110接收或存儲(chǔ)在存儲(chǔ)器160中的音頻數(shù)據(jù)。另外, 音頻輸出模塊152可提供與移動(dòng)終端100所執(zhí)行的特定功能有關(guān)的可聽輸出信號(hào)(例如, 呼叫信號(hào)接收音、消息接收音等)。音頻輸出模塊152可包括受話器、揚(yáng)聲器、蜂鳴器等。
[0094] 報(bào)警單元153可輸出用于通知移動(dòng)終端100的事件的發(fā)生的信號(hào)。移動(dòng)終端中產(chǎn) 生的事件(例如)可包括呼叫信號(hào)接收、消息接收、鍵信號(hào)輸入、觸摸輸入等。除了視頻或 音頻信號(hào)以外,報(bào)警單元154可按照不同的方式(例如,利用振動(dòng))輸出信號(hào)以告知事件的 發(fā)生。視頻或音頻信號(hào)還可經(jīng)由顯示單元151和音頻輸出模塊152輸出。因此,顯示單元 151和音頻輸出模塊152可被分類為報(bào)警單元153的部分。
[0095] 觸覺模塊154可生成用戶可感覺到的各種觸覺效果。由觸覺模塊154生成的觸覺 效果的典型示例是振動(dòng)??赏ㄟ^用戶選擇或控制器的設(shè)定來控制由觸覺模塊154生成的振 動(dòng)的強(qiáng)度、模式等。例如,不同的振動(dòng)可被組合輸出或者順序輸出。
[0096] 除了振動(dòng)之外,觸覺模塊154還可生成各種其它觸覺效果,包括通過諸如插針排 列相對(duì)于接觸皮膚垂直移動(dòng)、穿過噴射孔或抽吸開口對(duì)空氣的噴射力或抽吸力、觸摸皮膚、 接觸電極、靜電力等的刺激的效果、通過利用可吸熱或發(fā)熱的元件再現(xiàn)冷和熱的感覺的效 果等。
[0097] 除了通過直接接觸傳遞觸覺效果以外,觸覺模塊154還可被實(shí)現(xiàn)為允許用戶通過 諸如用戶的手指或手臂的肌肉覺來感覺到觸覺效果。根據(jù)移動(dòng)終端1〇〇的配置,可設(shè)置兩 個(gè)或更多個(gè)觸覺模塊154。
[0098] 存儲(chǔ)器160可存儲(chǔ)用于由控制器執(zhí)行的操作的程序,或者可臨時(shí)存儲(chǔ)輸入和/或 輸出數(shù)據(jù)(例如,電話簿、消息、靜止圖像、視頻等)。另外,存儲(chǔ)單元160可存儲(chǔ)關(guān)于在觸摸 屏上感測到觸摸輸入時(shí)輸出的各種模式的振動(dòng)和音頻信號(hào)的數(shù)據(jù)。
[0099] 存儲(chǔ)器160可包括至少一種類型的存儲(chǔ)介質(zhì),所述存儲(chǔ)介質(zhì)包括閃存、硬盤、微型 多媒體卡、卡型存儲(chǔ)器(例如,SD或DX存儲(chǔ)器等)、隨機(jī)存取存儲(chǔ)器(RAM)、靜態(tài)隨機(jī)存取 存儲(chǔ)器(SRAM)、只讀存儲(chǔ)器(ROM)、電可擦除可編程只讀存儲(chǔ)器(EEPR0M)、可編程只讀存儲(chǔ) 器(PR0M)、磁存儲(chǔ)器、磁盤和光盤。另外,移動(dòng)終端100可通過互聯(lián)網(wǎng)與執(zhí)行存儲(chǔ)器160的 存儲(chǔ)功能的網(wǎng)絡(luò)存儲(chǔ)裝置關(guān)聯(lián)地操作。
[0100] 接口單元170可充當(dāng)與移動(dòng)終端100連接的每一個(gè)外部裝置的接口。例如,接口 單元170可接收從外部裝置發(fā)送的數(shù)據(jù),接收電力以傳送給移動(dòng)終端100內(nèi)的各個(gè)元件,或 者將移動(dòng)終端100的內(nèi)部數(shù)據(jù)發(fā)送給外部裝置。例如,接口單元170可包括有線或無線頭 戴式耳機(jī)端口、外部供電端口、有線或無線數(shù)據(jù)端口、存儲(chǔ)卡端口、用于連接具有標(biāo)識(shí)模塊 的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機(jī)端口等。
[0101] 所述標(biāo)識(shí)模塊可以是存儲(chǔ)用于驗(yàn)證移動(dòng)終端100的使用權(quán)限的各種信息的芯片, 并且可包括用戶標(biāo)識(shí)模塊(UM)、訂戶標(biāo)識(shí)模塊(SM)、全球訂戶標(biāo)識(shí)模塊(USM)等。另外, 具有標(biāo)識(shí)模塊的裝置(以下稱作"標(biāo)識(shí)裝置")可采取智能卡的形式。因此,標(biāo)識(shí)裝置可經(jīng) 由接口單元170與終端100連接。
[0102] 當(dāng)移動(dòng)終端110與外部托架連接時(shí),接口單元170可充當(dāng)允許電力通過其從托架 供應(yīng)至移動(dòng)終端100的通道,或者可充當(dāng)允許由用戶從托架輸入的各種命令信號(hào)通過其傳 送給移動(dòng)終端100的通道。從托架輸入的各種命令信號(hào)或電力可用作用于識(shí)別移動(dòng)終端 100被正確安裝在托架上的信號(hào)。
[0103] 控制器180通??煽刂埔苿?dòng)終端100的總體操作。例如,控制器180可執(zhí)行與語 音呼叫、數(shù)據(jù)通信、視頻呼叫等相關(guān)的控制和處理。控制器180可包括用于回放多媒體數(shù)據(jù) 的多媒體模塊181。多媒體模塊181可被配置在控制器180內(nèi),或者可被配置為與控制器 180分離。
[0104] 控制器180可執(zhí)行模式識(shí)別處理,以將觸摸屏上所執(zhí)行的書寫輸入或繪畫輸入分 別識(shí)別為字符或圖像。另外,當(dāng)移動(dòng)終端的狀態(tài)滿足預(yù)設(shè)條件時(shí)控制器180可執(zhí)行鎖定狀 態(tài)以限制用戶針對(duì)應(yīng)用輸入控制命令。另外,在移動(dòng)終端的鎖定狀態(tài)下,控制器180可基于 在顯示單元151上感測到的觸摸輸入來控制在鎖定狀態(tài)下顯示的鎖定畫面。
[0105] 電源單元190可接收外部電力或內(nèi)部電力,并在控制器180的控制下供應(yīng)操作各 個(gè)元件和組件所需的適當(dāng)電力。
[0106] 本文所述的各種實(shí)施方式可利用(例如)軟件、硬件或其任何組合在計(jì)算機(jī)可讀 介質(zhì)或其類似介質(zhì)中實(shí)現(xiàn)。對(duì)于硬件實(shí)現(xiàn)方式,本文所述的實(shí)施方式可利用專用集成電路 (ASIC)、數(shù)字信號(hào)處理器(DSP)、數(shù)字信號(hào)處理裝置(DSPD)、可編程邏輯器件(PLD)、現(xiàn)場可 編程門陣列(FPGA)、處理器、控制器、微控制器、微處理器以及被設(shè)計(jì)為執(zhí)行本文所述的功 能的電子單元中的至少一個(gè)來實(shí)現(xiàn)。在一些情況下,這些實(shí)施方式可通過控制器180本身 來實(shí)現(xiàn)。
[0107] 對(duì)于軟件實(shí)現(xiàn)方式,本文所述的諸如過程或函數(shù)的實(shí)施方式可通過單獨(dú)的軟件模 塊來實(shí)現(xiàn)。各個(gè)軟件模塊可執(zhí)行本文所述的一個(gè)或更多個(gè)功能或操作。軟件代碼可通過以 任何合適的編程語言編寫的軟件應(yīng)用來實(shí)現(xiàn)。軟件代碼可被存儲(chǔ)在存儲(chǔ)器160中并由控制 器180執(zhí)行。
[0108] 以下,將描述能夠與根據(jù)本發(fā)明的移動(dòng)終端一起工作的通信系統(tǒng)。圖2A和圖2B 是能夠與本文公開的移動(dòng)終端100 -起工作的通信系統(tǒng)的概念圖。
[0109] 首先,參照?qǐng)D2A,這種通信系統(tǒng)使用不同的空中接口和/或物理層。通信系統(tǒng)所使 用的這些空中接口的示例包括頻分多址(FDMA)、時(shí)分多址(TDMA)、碼分多址(CDMA)和通用 移動(dòng)電信系統(tǒng)(UMTS)、UMTS的長期演進(jìn)(LTE)、全球移動(dòng)通信系統(tǒng)(GSM)等。
[0110] 僅作為非限制性示例,進(jìn)一步的描述將涉及CDMA通信系統(tǒng),但是這些教導(dǎo)同樣適 用于包括CDMA無線通信系統(tǒng)在內(nèi)的其它系統(tǒng)類型。
[0111] 現(xiàn)在參照?qǐng)D2A,CDMA無線通信系統(tǒng)被示出為具有多個(gè)移動(dòng)終端100、多個(gè)基站 (BS)270、基站控制器(BSC)275和移動(dòng)交換中心(MSC)280。MSC280被配置為與傳統(tǒng)公共 交換電話網(wǎng)絡(luò)(PSTN)290接口。MSC280還被配置為與BSC275接口。BSC275經(jīng)由回程線 路連接到基站270?;爻叹€路可根據(jù)包括(例如)E1/T1、ATM、IP、PPP、幀中繼、HDSL、ADSL 或xDSL在內(nèi)的多種已知接口中的任一種來配置。因此,如圖2A所示的系統(tǒng)中可包括多個(gè) BSC275。
[0112] 各個(gè)基站270可包括一個(gè)或更多個(gè)扇區(qū),各個(gè)扇區(qū)具有全向天線或者遠(yuǎn)離基站 270放射狀指向特定方向的天線。另選地,各個(gè)扇區(qū)可包括兩個(gè)或更多個(gè)不同的天線。各個(gè) 基站270可被配置為支持多個(gè)頻率指派,各個(gè)頻率指派具有特定頻譜(例如,1. 25MHz、5MHz 等)。
[0113] 扇區(qū)和頻率指派的交匯處可被稱作CDMA信道?;?70還可被稱作基站收發(fā)機(jī) 子系統(tǒng)(BTS)。在一些情況下,術(shù)語"基站"可用于統(tǒng)稱BSC275以及一個(gè)或更多個(gè)基站270。 基站還可被表示為"蜂窩基站(cellsite)"。另選地,給定基站270的各個(gè)扇區(qū)可被稱作 蜂窩基站。
[0114] 如圖2A所示,廣播發(fā)送機(jī)(BT)295將廣播信號(hào)發(fā)送給在系統(tǒng)內(nèi)工作的移動(dòng)終端 1〇〇。廣播接收模塊111 (圖1)通常被配置在移動(dòng)終端1〇〇內(nèi)以接收由BT295發(fā)送的廣播 信號(hào)。
[0115] 參照?qǐng)D2A,廣播發(fā)送機(jī)(BT) 295可將廣播信號(hào)發(fā)送給在系統(tǒng)內(nèi)工作的終端。終端 中可設(shè)置圖1所示的廣播接收模塊111以用于接收從BT295發(fā)送來的廣播信號(hào)。
[0116] 圖2A還示出多種全球定位系統(tǒng)(GPS)衛(wèi)星300。這些衛(wèi)星300有利于對(duì)多個(gè)移動(dòng) 終端100中的至少一個(gè)的位置進(jìn)行定位。圖2A中示出兩個(gè)衛(wèi)星,但是應(yīng)該理解,可利用比 兩個(gè)衛(wèi)星更多或更少的衛(wèi)星來獲得有用位置信息。GPS模塊115 (圖1)通常被配置為與衛(wèi) 星300協(xié)作以獲得期望的位置信息。將理解,另選地,可實(shí)現(xiàn)其它類型的位置檢測技術(shù)(即, 除了GPS定位技術(shù)以外或可代替GPS定位技術(shù)使用的定位技術(shù))。如果需要,GPS衛(wèi)星300 中的至少一個(gè)可另選地或另外地被配置為提供衛(wèi)星DMB傳輸。
[0117] 在無線通信系統(tǒng)的典型操作期間,基站270從各種移動(dòng)終端100接收反向鏈路信 號(hào)集合。移動(dòng)終端100進(jìn)行呼叫、消息收發(fā)并且執(zhí)行其它通信。在該基站270內(nèi)處理由給 定基站270接收的各個(gè)反向鏈路信號(hào)。所得數(shù)據(jù)被轉(zhuǎn)發(fā)給關(guān)聯(lián)的BSC275。BSC275提供呼 叫資源分配以及包括基站270之間的軟切換的編排在內(nèi)的移動(dòng)性管理功能。
[0118] BSC275還將所接收到的數(shù)據(jù)路由至MSC280,MSC280然后提供用于與PSTN290接 口的附加路由服務(wù)。類似地,PSTN290與MSC280接口,MSC280與BSC275接口,BSC275繼而 控制基站270將前向鏈路信號(hào)集合發(fā)送給移動(dòng)終端100。
[0119]Wi-Fi定位系統(tǒng)(WPS) 300是指使用Wi-Fi的基于無線局域網(wǎng)(WLAN)的位置確定 技術(shù),它是利用設(shè)置在移動(dòng)終端100中的Wi-Fi模塊跟蹤移動(dòng)終端100的位置并且利用無 線接入點(diǎn)(AP) 320向Wi-Fi模塊發(fā)送并且從Wi-Fi模塊接收位置的技術(shù)。
[0120]Wi-Fi定位系統(tǒng)300可包括Wi-Fi位置確定服務(wù)器310、移動(dòng)終端100、連接到移動(dòng) 終端100的無線接入點(diǎn)(AP) 320以及存儲(chǔ)有任何無線AP信息的數(shù)據(jù)庫330。
[0121]Wi-Fi位置確定服務(wù)器310可基于移動(dòng)終端100的位置信息請(qǐng)求消息(或信號(hào)) 提取連接到移動(dòng)終端100的無線AP320的信息。與無線AP320有關(guān)的信息可通過移動(dòng)終端 100被發(fā)送至Wi-Fi位置確定服務(wù)器310或者從無線AP320發(fā)送至Wi-Fi位置確定服務(wù)器 310。
[0122] 基于移動(dòng)終端100的位置信息請(qǐng)求消息提取的與無線AP有關(guān)的信息可以是MAC 地址、SSID、RSSI、信道信息、隱私、網(wǎng)絡(luò)類型、信號(hào)強(qiáng)度和噪聲強(qiáng)度中的至少一個(gè)。
[0123]Wi-Fi位置確定服務(wù)器310可如上所述接收連接到移動(dòng)終端100的無線AP320的 信息,并將所接收到的無線AP320信息與預(yù)先建立的數(shù)據(jù)庫330中所包含的信息進(jìn)行比較, 以提?。ɑ蚍治觯┮苿?dòng)終端100的位置信息。
[0124] 另外,參照?qǐng)D2B,作為示例,連接到移動(dòng)終端100的無線AP被示出為第一、第二和 第三無線AP320。然而,連接到移動(dòng)終端100的無線AP的數(shù)量可根據(jù)移動(dòng)終端100所在的 無線通信環(huán)境來按照各種方式改變。當(dāng)移動(dòng)終端100連接到至少一個(gè)無線AP時(shí),Wi-Fi定 位系統(tǒng)300可跟蹤移動(dòng)終端100的位置。
[0125] 接下來,更詳細(xì)地考慮存儲(chǔ)有任何無線AP信息的數(shù)據(jù)庫330,與設(shè)置在不同位置 處的任何無線AP有關(guān)的各種信息可存儲(chǔ)在數(shù)據(jù)庫330中。
[0126] 存儲(chǔ)在數(shù)據(jù)庫330中的與任何無線AP有關(guān)的信息可以是諸如MAC地址、SSID、 RSSI、信道信息、隱私、網(wǎng)絡(luò)類型、無線AP的緯度和經(jīng)度坐標(biāo)、無線AP所在的建筑物、樓層 號(hào)、詳細(xì)室內(nèi)位置信息(GPS坐標(biāo)可用)、AP所有者的地址、電話號(hào)碼等的信息。
[0127] 因此,與任何無線AP對(duì)應(yīng)的任何無線AP信息和位置信息可一起存儲(chǔ)在數(shù)據(jù)庫330 中,因此Wi-Fi位置確定服務(wù)器310可從數(shù)據(jù)庫330檢索與連接到移動(dòng)終端100的無線 AP320有關(guān)的信息所對(duì)應(yīng)的無線AP信息,并提取與所檢索到的無線AP匹配的位置信息,從 而提取移動(dòng)終端100的位置信息。
[0128] 另外,所提取的移動(dòng)終端100的位置信息可通過Wi-Fi位置確定服務(wù)器310被發(fā) 送給移動(dòng)終端100,從而獲取移動(dòng)終端100的位置信息。
[0129] 另外,關(guān)于相機(jī)121,全景是通過移動(dòng)相機(jī)取景來拍攝無法被置于一個(gè)畫面中的寬 闊空間的方法。本發(fā)明的一個(gè)實(shí)施方式在虛擬現(xiàn)實(shí)(VR)全景模式下通過創(chuàng)建全景圖像作 為背景,并連續(xù)拍攝對(duì)象的移動(dòng)路徑以在背景上輸出,來生成包括對(duì)象的整個(gè)移動(dòng)路徑的 VR全景圖像。
[0130] 即,每一預(yù)覽拍攝一次背景,在每一預(yù)覽中將移動(dòng)路徑拍攝預(yù)設(shè)次數(shù)以顯示在背 景上。換言之,本發(fā)明的一個(gè)實(shí)施方式利用在多個(gè)連續(xù)的相機(jī)取景中拍攝的對(duì)象的移動(dòng)來 實(shí)現(xiàn)全景圖像。
[0131] 本發(fā)明的一個(gè)實(shí)施方式還提供了一種用于在拍攝對(duì)象的移動(dòng)路徑時(shí)通過隨對(duì)象 (要拍攝的對(duì)象)一起提供拍攝指引來使得用戶能夠自動(dòng)拍攝指引區(qū)域(該指引區(qū)域被設(shè) 定為后續(xù)的預(yù)覽)的方法。
[0132] 另外,指引可包括拍攝指引或拍攝指不符。指引方向?qū)?yīng)于對(duì)象的移動(dòng)方向。本文 公開的描述假設(shè)用戶沿著指引方向移動(dòng)相機(jī)。因此,用戶可通過沿著指引移動(dòng)相機(jī)來連續(xù) 拍攝對(duì)象以獲得全景圖像,該全景圖像包括對(duì)象的整個(gè)移動(dòng)路徑(具體地講,對(duì)象的360° 移動(dòng))。
[0133] 對(duì)象指引和拍攝指引的顯不
[0134] 圖3是根據(jù)本發(fā)明的提供拍攝指引的實(shí)施方式的示圖。如圖3所示,在全景模式 下,控制器180可在相機(jī)預(yù)覽中識(shí)別其移動(dòng)路徑待跟蹤的對(duì)象。另外,用戶可在相機(jī)預(yù)覽中 選擇特定對(duì)象。全景模式在不存在對(duì)象時(shí)是指一般全景模式,在存在要跟蹤的對(duì)象時(shí)是指 VR全景模式。
[0135] 一旦識(shí)別或選擇要跟蹤的對(duì)象,控制器180就可關(guān)于對(duì)應(yīng)的對(duì)象操作跟蹤焦點(diǎn), 并將對(duì)象指引50 (或指示符)(例如," □"形式的對(duì)象指引)輸出給所識(shí)別的對(duì)象。
[0136] 對(duì)象指引50是指示對(duì)應(yīng)對(duì)象是要跟蹤的對(duì)象的指示符,并且可被輸出給至少一 個(gè)對(duì)象。對(duì)象指引50可針對(duì)各個(gè)對(duì)象區(qū)別地輸出,并按照各種形式(形狀或尺寸)來提供。
[0137] 此后,當(dāng)對(duì)象移動(dòng)時(shí),可在預(yù)覽內(nèi)每一秒拍攝N張(大約3至6張)相片(圖像), 從而收集與對(duì)應(yīng)對(duì)象有關(guān)的移動(dòng)信息(對(duì)象的變化)。這里,可(例如)利用旋轉(zhuǎn)矢量矩陣 差或者利用對(duì)象交疊(或?qū)ο笾貜?fù))來執(zhí)行對(duì)象的移動(dòng)的確定。
[0138] 即,當(dāng)對(duì)象的中心點(diǎn)基于預(yù)覽區(qū)域的中心的角度改變時(shí),或者當(dāng)先前對(duì)象和當(dāng)前 對(duì)象沒有交疊或者交疊預(yù)定水平以上時(shí),控制器180可確定對(duì)應(yīng)的對(duì)象已經(jīng)移動(dòng)。
[0139] 當(dāng)對(duì)象遠(yuǎn)離當(dāng)前預(yù)覽區(qū)域的中心移動(dòng)了預(yù)定距離以上時(shí),控制器180可預(yù)測對(duì)象 的移動(dòng)方向并顯示拍攝指引(或指引區(qū)域)51以用于指引用戶將相機(jī)(或終端)朝著對(duì)應(yīng) 方向移動(dòng)(移動(dòng)相機(jī)取景)。
[0140] 拍攝指引51可指引拍攝方向和拍攝區(qū)域。拍攝指引51可基本上具有與預(yù)覽相冋 的形狀(例如,矩形)(當(dāng)相機(jī)水平移動(dòng)時(shí)),并且當(dāng)用戶在垂直方向上或在水平-垂直方向 (水平+垂直)上移動(dòng)相機(jī)時(shí),以略微傾斜的矩形形狀輸出。
[0141] 拍攝指引51可與相機(jī)預(yù)覽部分交疊,使得可生成連續(xù)全景圖像。拍攝指引51可 按照直線形式或面(或板)形式(填充矩形)輸出,以幫助用戶容易地識(shí)別。用戶因此可 通過向拍攝指引51所指示(或指引)的區(qū)域移動(dòng)相機(jī)來連續(xù)拍攝對(duì)應(yīng)對(duì)象,從而創(chuàng)建包括 對(duì)象的整個(gè)移動(dòng)路徑的全景圖像。
[0142] 對(duì)象指引的各種形狀
[0143] 圖4的(a)至圖4的(f)是示出對(duì)象指引的各種形狀(或形式)的示例的示圖。 如圖4的(a)和圖4的(b)所示,拍攝指引可按照直線或面(填充矩形)形式提供,各種對(duì) 象指引可隨要跟蹤的對(duì)象一起被加標(biāo)簽。可利用用戶菜單來選擇性地設(shè)定對(duì)象指引的形式 (形狀和尺寸)。
[0144] S卩,控制器180可根據(jù)用戶設(shè)定利用輪廓(參見圖4的(a))或以特定顏色(參見 圖4的(b))指示當(dāng)前跟蹤的對(duì)象。在其它示例中,控制器180可利用線和箭頭(參見圖4 的(c))、利用指示符("框形箭頭")(參見圖4的(d))、利用陰影(參見圖4的(e))、或者 以聚光照明方式(參見圖4的(f))指示跟蹤的對(duì)象。本發(fā)明不限于那些示例,而是還采用 各種強(qiáng)調(diào)和區(qū)別方式來指示跟蹤的對(duì)象。
[0145] 拍攝指引(指引區(qū)域)的顯示形式
[0146] 圖5A和圖5B是示出拍攝指引的顯示(輸出、指示)形式的示例的示圖。如圖5 所示,當(dāng)用戶從先前相機(jī)預(yù)覽(以虛線指示)更靠近拍攝指引51移動(dòng)相機(jī)時(shí),本文公開的 拍攝指引(指引區(qū)域)51可更清楚地輸出(顯示)。
[0147] 例如,假設(shè)從先前預(yù)覽A至新拍攝指引區(qū)域51的距離為100,隨著預(yù)覽A接近新拍 攝指引區(qū)域51,指引區(qū)域51可變得更清楚(透明度值減?。?。
[0148] 圖5A示出在不輸出對(duì)象的情況下僅顯示預(yù)覽A的輪廓和指引區(qū)域51的輪廓,使 得用戶可集中于那些輪廓的示例,圖5B示出僅顯示對(duì)象和指引區(qū)域51,使得用戶可集中于 對(duì)象和指引區(qū)域51的示例。
[0149] 因此,通過調(diào)節(jié)拍攝指引的清晰度,用戶可具有相機(jī)"接近拍攝指引"(即,"拍攝將 要開始")的感覺。這是因?yàn)楫?dāng)相機(jī)預(yù)覽基本上在預(yù)定的距離或量內(nèi)與指引區(qū)域匹配或?qū)?準(zhǔn)時(shí)開始拍攝。例如,當(dāng)用戶移動(dòng)終端時(shí),相機(jī)預(yù)覽圖像可與所顯示的拍攝指引交疊。然后 可拍攝全景圖像。
[0150] 要跟蹤的對(duì)象(目標(biāo))的選擇
[0151] 移動(dòng)路徑要被跟蹤的對(duì)象可直接由用戶在預(yù)覽畫面中選擇。在另一示例中,控制 器可在沒有用戶的觸摸輸入的情況下,基于用戶的移動(dòng)執(zhí)行要跟蹤的對(duì)象的自動(dòng)選擇。
[0152] 具體地講,圖6是示出根據(jù)本發(fā)明的實(shí)施方式的自動(dòng)選擇要跟蹤的對(duì)象的示例的 示圖。如圖6所示,在開始跟蹤之前,通過在預(yù)覽(相機(jī)預(yù)覽或預(yù)覽畫面)中顯示至少一個(gè) 對(duì)象,用戶可選擇日志(移動(dòng)路徑)要被輸出的候選對(duì)象。這里,各個(gè)候選可按照不同的顏 色來指示。利用虛線指示的對(duì)象可以是移動(dòng)之前的對(duì)象(先前對(duì)象)。
[0153] 在這種狀態(tài)下,當(dāng)對(duì)象在各個(gè)方向上移動(dòng)并且用戶跟蹤移出預(yù)覽之外的對(duì)象時(shí), 如圖6A所示,控制器180可將對(duì)應(yīng)方向上的對(duì)象自動(dòng)選擇為要跟蹤的對(duì)象。如果跟蹤方向 上存在不止一個(gè)對(duì)象,則可將它們?nèi)窟x擇為要跟蹤的對(duì)象。
[0154] 在另一示例中,參照?qǐng)D6B,當(dāng)由用戶拍攝的最后場景中僅留下一個(gè)對(duì)象時(shí),控制器 180可認(rèn)為用戶對(duì)對(duì)應(yīng)對(duì)象感興趣并且在整個(gè)相片上僅留下該對(duì)象。在另一示例中,參照 圖6C,當(dāng)一個(gè)對(duì)象在移動(dòng)方向上向前移動(dòng)并且尺寸增大時(shí),如果尺寸增大的對(duì)象遮擋了其 它對(duì)象,則控制器180可自動(dòng)跟蹤最大的對(duì)象。
[0155] 要跟蹤的目標(biāo)(對(duì)象)的顯示形式
[0156] 圖7是示出指示被指定為要跟蹤的目標(biāo)的對(duì)象的示例的示圖。一旦選擇了要跟蹤 的目標(biāo),控制器180就可關(guān)于各個(gè)對(duì)象輸出對(duì)象指引。對(duì)象指引可按照如圖4的(a)至圖4 的(f)所示利用" □"、利用輪廓、輸出移動(dòng)路徑、利用顏色、陰影或聚光照明、或者如圖7所 示提供數(shù)字的方式被輸出(顯示、指示)。
[0157] 接下來,圖8是示出根據(jù)本文公開的實(shí)施方式的移動(dòng)終端中的全景圖像生成方法 的流程圖。如圖8所示,當(dāng)在預(yù)覽中選擇要跟蹤的對(duì)象時(shí),控制器180可顯示指示對(duì)應(yīng)的要 跟蹤的對(duì)象(目標(biāo))已被選擇的對(duì)象指引(S100)。
[0158] 當(dāng)對(duì)象移動(dòng)時(shí),控制器180可在當(dāng)前預(yù)覽內(nèi)連續(xù)拍攝對(duì)象(S110)??赏ㄟ^每秒拍 攝N張(大約3至6張)圖像來執(zhí)彳丁連續(xù)拍攝,所拍攝的圖像可被存儲(chǔ)在存儲(chǔ)器160中。
[0159] 控制器180可檢查對(duì)象是否遠(yuǎn)離預(yù)覽的中心移動(dòng)了預(yù)定距離以上(S120)。當(dāng)對(duì) 象移動(dòng)了預(yù)定距離以上時(shí)(S120為"是"),控制器180可在對(duì)象移動(dòng)方向上顯示拍攝指引 (指引區(qū)域)(S130)??稍趯?duì)象移動(dòng)了預(yù)定距離時(shí)立即顯示拍攝指引,或者可根據(jù)對(duì)象的移 動(dòng)距離來逐漸顯示拍攝指引。
[0160] 用戶可響應(yīng)于對(duì)象的移動(dòng)移動(dòng)相機(jī)預(yù)覽以與拍攝指引(指引區(qū)域)對(duì)準(zhǔn)(S140)。 當(dāng)預(yù)覽與拍攝指引對(duì)準(zhǔn)時(shí),控制器180可再次拍攝對(duì)應(yīng)預(yù)覽中的背景,并連續(xù)拍攝對(duì)應(yīng)對(duì) 象(每秒3至6張)。
[0161] 因此,用戶可根據(jù)對(duì)象的移動(dòng)使預(yù)覽與指引對(duì)象的拍攝的拍攝指引(指引區(qū)域) 對(duì)準(zhǔn),并對(duì)對(duì)象執(zhí)行連續(xù)拍攝(S150)。此后,當(dāng)對(duì)對(duì)象的拍攝完成時(shí),可獲得包括對(duì)象的整 個(gè)移動(dòng)路徑的全景圖像(S160)。
[0162] 接下來,圖9A和圖9B是示出用于在拍攝全景圖像時(shí)調(diào)節(jié)拍攝姿態(tài)的方法的實(shí)施 方式的示圖。可優(yōu)選的是,允許終端移動(dòng)到預(yù)定高度以便穩(wěn)定地拍攝VR全景圖像。如果使 用雙重記錄,則前相機(jī)可與后相機(jī)同時(shí)使用。
[0163] 因此,在本發(fā)明的實(shí)施方式中,在設(shè)定VR全景模式時(shí),如圖9A所示,姿態(tài)指引60 可顯示在畫面上,使得用戶可按照預(yù)定高度執(zhí)行拍攝。姿態(tài)指引60可由顯示臉部的部分和 指引消息(例如,"將臉保持在中央")組成。
[0164] 如圖9B所示,當(dāng)用戶持握的終端在全景拍攝期間向下移動(dòng)時(shí),臉部相對(duì)上移。因 此,可利用框形箭頭等指引用戶使他的臉部移至中央。具體地講,當(dāng)用戶將終端旋轉(zhuǎn)360° 時(shí)控制器180可識(shí)別臉部,以指引用戶水平地和垂直地保持終端。
[0165] 因此,當(dāng)利用姿態(tài)指引60執(zhí)行全景拍攝時(shí),用戶可總是按照正確的姿態(tài)執(zhí)行拍 攝,從而獲得質(zhì)量改進(jìn)的全景圖像。以下,將更詳細(xì)地描述沿其移動(dòng)路徑拍攝對(duì)象、生成全 景圖像并顯示所生成的全景圖像的操作。
[0166] 移動(dòng)路徑(日志)的存儲(chǔ)和輸出
[0167] 當(dāng)識(shí)別出要跟蹤的對(duì)象時(shí),控制器180可通過在預(yù)覽中每秒存儲(chǔ)(拍攝)對(duì)象的N 張(大約3至6張)相片(圖像)來存儲(chǔ)對(duì)象的變化。這里,可僅在顯示新的預(yù)覽時(shí)才拍 攝背景,可在預(yù)覽內(nèi)連續(xù)拍攝對(duì)象的移動(dòng)路徑以將其顯示在背景上。
[0168] 具體地講,圖10的(a)至圖10的(c)是示出根據(jù)對(duì)象的尺寸變化(尺寸改變) 和移動(dòng)路徑收集并顯示與對(duì)象有關(guān)的移動(dòng)信息的操作的示圖??刂破?80可識(shí)別對(duì)象并通 過每秒存儲(chǔ)對(duì)象的N張(大約3至6張)圖像來收集與對(duì)象有關(guān)的移動(dòng)信息。即,由于VR 全景拍攝是使用預(yù)覽的拍攝,所以在識(shí)別對(duì)象之后每秒收集對(duì)象的N張相片作為移動(dòng)信息 (日志)。
[0169] 如圖10的(a)所示,當(dāng)對(duì)象水平和垂直移動(dòng),并且尺寸變化較小時(shí),控制器180可 在不改變對(duì)象的透明度的情況下輸出日志。當(dāng)如圖10的(b)所示,對(duì)象的尺寸變化較小并 且較少移動(dòng)時(shí),控制器180可輸出對(duì)應(yīng)位置的最佳鏡頭或最后圖像作為日志。這里,對(duì)象的 尺寸變化可指示對(duì)象靠近或后退的情況。
[0170] 另外,如圖10的(C)所示,當(dāng)對(duì)象的尺寸變化極大時(shí),控制器180可通過改變對(duì)象 的透明度來輸出日志。如果對(duì)象的移動(dòng)交疊以生成交疊的區(qū)域,則對(duì)象的透明度可被調(diào)節(jié) 為 30%。
[0171] 接下來,圖11是示出顯示較少移動(dòng)的對(duì)象的移動(dòng)路徑的示例的示圖。如果對(duì)于拍 攝的N張以上的相片,對(duì)象不存在大的移動(dòng),則控制器180可通過將各個(gè)相片的a值調(diào)節(jié) 為100/N來將那些照片疊置,并在前面顯示最佳鏡頭。另選地,控制器180可在前面顯示最 后鏡頭,并將其它相片附到后面,而不調(diào)節(jié)a值。
[0172] 另外,控制器180可通過分類為有移動(dòng)的鏡頭和沒有移動(dòng)的鏡頭來顯示那些鏡 頭。即,如果對(duì)象很少移動(dòng),則控制器180可顯示最佳鏡頭或最后鏡頭,并直接在最佳鏡頭 或最后鏡頭上輸出指示沒有發(fā)生任何移動(dòng)的指示符61。隨后,控制器180可接著最佳鏡頭 或最后鏡頭顯示有移動(dòng)的鏡頭。用戶可因此選擇指示符61以查看另一鏡頭。
[0173] 在執(zhí)行VR全景拍攝的同時(shí),如果對(duì)象(要跟蹤的目標(biāo))快速移動(dòng),則在對(duì)應(yīng)區(qū)段 中未拍攝到對(duì)象。在對(duì)象快速移動(dòng)的區(qū)段內(nèi)還難以知道對(duì)象的移動(dòng)方向。因此,對(duì)象的移 動(dòng)路徑會(huì)不完全。因此,本發(fā)明的一個(gè)實(shí)施方式提供了一種用于通過有效填充由于對(duì)象的 快速移動(dòng)而導(dǎo)致的未拍攝部分來生成自然全景圖像的方法。
[0174] 具體地講,圖12是示出在拍攝對(duì)象的移動(dòng)路徑時(shí)填充未拍攝部分的操作的流程 圖,圖13A至圖13C是圖12的詳細(xì)示圖。如果對(duì)象(要跟蹤的目標(biāo))在預(yù)定區(qū)段內(nèi)快速移 動(dòng),則在對(duì)應(yīng)區(qū)段中未拍攝到對(duì)象。另外,由于難以在該區(qū)段內(nèi)知道對(duì)象的移動(dòng)方向,所以 對(duì)象的移動(dòng)路徑也是不完全的。
[0175] 控制器180可在拍攝對(duì)象的移動(dòng)路徑的同時(shí)基于相機(jī)(終端)的移動(dòng)來確定當(dāng)前 跟蹤的對(duì)象(要跟蹤的目標(biāo))是否快速移動(dòng)(S200和S210)??苫谟脩舢?dāng)前移動(dòng)相機(jī)的 平均速度來執(zhí)行對(duì)象的移動(dòng)速度的確定。如果相機(jī)比平均速度移動(dòng)得快,則控制器180可 識(shí)別出對(duì)象快速移動(dòng)。
[0176] 在另一示例中,當(dāng)所收集的對(duì)象的移動(dòng)路徑(日志)間隔開預(yù)定距離時(shí),控制器 180可認(rèn)為對(duì)象快速移動(dòng),當(dāng)移動(dòng)路徑具有交疊部分時(shí)確定對(duì)象很少移動(dòng)。
[0177] 當(dāng)確定(識(shí)別出)對(duì)應(yīng)對(duì)象在預(yù)定區(qū)段中快速移動(dòng)時(shí),控制器180可按照各個(gè)預(yù) 定間隔將先前對(duì)象62插入移動(dòng)路徑中,并處理所插入的對(duì)象以與實(shí)際拍攝的對(duì)象相區(qū)分 (S220)。
[0178]S卩,如圖13A所示,當(dāng)對(duì)象在預(yù)定區(qū)段中在不同于先前方向的方向上快速移動(dòng)時(shí), 控制器180無法識(shí)別對(duì)象的確切移動(dòng)方向。在這種情況下,如圖13A所示,控制器180可將 對(duì)象的移動(dòng)方向視為直線。因此,如圖13B所示,控制器180可按照各個(gè)預(yù)定間隔插入先前 對(duì)象62,并將所插入的對(duì)象62處理成半透明或不同的顏色,使得所插入的對(duì)象62可與實(shí)際 拍攝的對(duì)象相區(qū)分(S220)。
[0179] 在另一示例中,如圖13C所示,控制器180可將對(duì)象的移動(dòng)方向視作曲線,并按照 各個(gè)預(yù)定間隔插入先前對(duì)象62??刂破?80然后可將所插入的對(duì)象62處理成半透明或不 同的顏色,使得所插入的對(duì)象62可與實(shí)際拍攝的對(duì)象相區(qū)分。即,此示例示出除了直線以 夕卜,以曲線指示對(duì)象的移動(dòng)矢量,這即使在對(duì)象快速移動(dòng)時(shí)也可提供獲得自然的全景圖像 的效果。
[0180] 接下來,圖14是示出在移動(dòng)期間當(dāng)對(duì)象移回到已經(jīng)拍攝的區(qū)域時(shí)的圖像處理方 法的示圖。即,對(duì)象可在不同的方向上移動(dòng)。因此,當(dāng)一些對(duì)象移回到已經(jīng)拍攝的區(qū)域中時(shí), 難以進(jìn)行基于時(shí)間的區(qū)分。即,回到已經(jīng)拍攝的區(qū)域中的對(duì)象的鏡頭與先前拍攝區(qū)域(預(yù) 覽)中的已拍攝的鏡頭交疊或重復(fù)。這使得難以將鏡頭彼此區(qū)分。
[0181] 本發(fā)明的一個(gè)實(shí)施方式通過調(diào)節(jié)對(duì)象的透明度來解決這一問題。即,在當(dāng)前跟蹤 的對(duì)象移回到先前拍攝的區(qū)域中時(shí),控制器180可利用不同的透明度指示對(duì)應(yīng)對(duì)象和先前 拍攝的對(duì)象。
[0182] 例如,透明度可被調(diào)節(jié)為使得先前對(duì)象比當(dāng)前對(duì)象更模糊(模糊20%)。具體地 講,考慮到可見性,在調(diào)節(jié)透明度時(shí),控制器180可防止對(duì)象的透明度被降低至預(yù)定范圍 (例如,20%)以下。因此,參照?qǐng)D14,當(dāng)拍攝多張相片時(shí),以更暗的顏色指示的相片可對(duì)應(yīng) 于最后位置。
[0183] 接下來,圖15A和圖15B是示出當(dāng)對(duì)象不同于預(yù)期方向移動(dòng)時(shí)的處理方法的示圖。 如圖15A所示,在用戶跟蹤對(duì)象的移動(dòng)路徑的同時(shí),如果對(duì)象突然從取景器消失,則在預(yù)覽 (拍攝區(qū)域)中對(duì)象可能不可見。當(dāng)在拍攝區(qū)域中對(duì)象不可見時(shí),如圖15B所示,控制器 180可通知對(duì)象跟蹤失敗,并輸出用于檢查是跟蹤新的對(duì)象還是繼續(xù)跟蹤先前對(duì)象的消息 (S300 和S310)。
[0184] 如果用戶想要跟蹤新的對(duì)象,則控制器180可僅從所拍攝的相片中去除跟蹤的對(duì) 象,并在當(dāng)前位置搜索新的對(duì)象。另外,如果用戶想要搜索先前對(duì)象,則控制器180可存儲(chǔ) 已經(jīng)拍攝的區(qū)域,并指示用戶將相機(jī)朝著對(duì)象移動(dòng)。
[0185]當(dāng)用戶已移動(dòng)相機(jī)并且搜索對(duì)應(yīng)對(duì)象時(shí),那么控制器180可從對(duì)應(yīng)位置開始執(zhí)行 拍攝。然而,如果用戶不再想要跟蹤新的對(duì)象或先前對(duì)象,則控制器180可在對(duì)應(yīng)位置停止 拍攝,并存儲(chǔ)所拍攝的區(qū)域。
[0186] 圖16是示出當(dāng)對(duì)象位于拍攝區(qū)域的邊界處時(shí)的圖像處理方法的流程圖,圖17是 圖16的詳細(xì)示圖。如圖16和圖17所示,如果在對(duì)象位于拍攝區(qū)域的邊緣(邊界)處的同 時(shí)拍攝對(duì)象,則對(duì)象的一部分可能被切除。
[0187] 為了解決對(duì)象的切割,本發(fā)明的一個(gè)實(shí)施方式使得能夠再次觸摸對(duì)象以從最近拍 攝(先前)的完整對(duì)象選擇切割部分并插入切割部分。當(dāng)再次觸摸切割部分時(shí)并且當(dāng)創(chuàng)建 矩形相片時(shí),可在對(duì)應(yīng)位置處生成空白空間63。因此,控制器180可利用黑色填充空白空間 63,或者按照漸變方式填充拍攝區(qū)域的端部的顏色。
[0188] 圖18是不出利用跟蹤的對(duì)象的移動(dòng)路徑創(chuàng)建全景圖像的另一實(shí)施方式的不圖, 圖19是不出圖18的可用場景的不圖。在隨對(duì)象的移動(dòng)拍攝對(duì)象的同時(shí),在對(duì)象周圍可能 存在未被完全拍攝的環(huán)境。因此,如果在跟蹤對(duì)象的移動(dòng)路徑之后全景圖像被生成為矩形 形狀,則可生成空白空間(例如圖18中的黑色部分)。
[0189]因此,本發(fā)明的一個(gè)實(shí)施方式使用這樣的方法:使用GPS信息利用在相同位置處 拍攝的圖像(例如,相片)來填充空白空間。填充空白空間的圖像可從網(wǎng)絡(luò)(例如,Google、 SNS等)下載,或者可以是存儲(chǔ)在存儲(chǔ)器160中的圖像。這里,對(duì)象的位置可從所拍攝的圖 像的背景猜測,或者在拍攝時(shí)利用與對(duì)象有關(guān)的羅盤信息來獲得。
[0190]S卩,參照?qǐng)D19,在攀巖期間,人在各種方向上(水平和垂直)移動(dòng)。為了在畫面中 包括人的圖像,應(yīng)該從遠(yuǎn)處拍攝這種場景。因此,為了在多山環(huán)境或室內(nèi)環(huán)境中看到完整圖 像,拍攝距離應(yīng)該相當(dāng)遠(yuǎn)。然而,在該環(huán)境下難以確保這種距離。然而,如果使用圖18所示 的示例,則用戶可從近處拍攝寬闊的巖石和攀緣根。
[0191] 因此,如示例中所示的成像方法可不限于填充空白空間,而是還適用于將未拍攝 的對(duì)象插入360°拍攝的圖像(或相片)中的方法。當(dāng)拍攝移動(dòng)方向頻繁地改變并且具有 大的變化角度的對(duì)象時(shí),可有效地應(yīng)用該示例。
[0192] 圖20A和圖20B是示出在拍攝VR全景圖像的同時(shí)使得相機(jī)向空白空間移動(dòng)的實(shí) 施方式的不圖。當(dāng)在跟S示對(duì)象的移動(dòng)路徑的冋時(shí)360°拍攝對(duì)象時(shí),可能存在未被拍攝的空 白空間。在這種情況下,如圖20A所示,控制器180可在預(yù)覽中輸出指示空白空間的指示符 64,使得用戶可使得相機(jī)向?qū)?yīng)方向移動(dòng)。該指示符可被表示為箭頭或者以漸變方式表示。
[0193] 當(dāng)相機(jī)向指示符所指示的方向移動(dòng)時(shí),如圖20B所示,控制器180可利用輪廓、顏 色、變焦效果等來強(qiáng)調(diào)空白空間,使得用戶可容易地找到未拍攝的空白空間。
[0194] 對(duì)象移動(dòng)路徑的表示(再現(xiàn))
[0195] 在全屏觀看拍攝的VR全景圖像時(shí)需要各種方法來查看對(duì)象的移動(dòng)路徑。這是因 為對(duì)象的數(shù)量可能不止一個(gè),并且各個(gè)對(duì)象在不同的方向上按照不同的速度移動(dòng)。
[0196] 當(dāng)存在要跟蹤其路徑的多個(gè)對(duì)象時(shí),那些路徑可按照分割方式基于對(duì)象來顯示。 在這種情況下,可通過按照時(shí)間順序調(diào)節(jié)顏色或透明度來區(qū)別地顯示各個(gè)對(duì)象的路徑。具 體地講,當(dāng)那些路徑交疊時(shí),最新的路徑可較早顯示或最后顯示。
[0197] 圖21是示出根據(jù)本文公開的實(shí)施方式的再現(xiàn)全景圖像的操作的流程圖。如圖21 所示,當(dāng)選擇再現(xiàn)(回放)全景圖像時(shí),控制器180可識(shí)別包括在拍攝的全景圖像中的對(duì)象 (更詳細(xì)地講,移動(dòng)路徑已被跟蹤的對(duì)象)(S500和S510)。
[0198] 控制器180然后可檢查所識(shí)別的對(duì)象是否移動(dòng)很多(快速移動(dòng))(S520)。如果對(duì) 象快速移動(dòng)(S520為"是"),則控制器180可在移動(dòng)路徑中填充先前對(duì)象(S530)。另外,如 果對(duì)象移動(dòng)很少(S520為"否"),則控制器180可輸出最佳鏡頭(S540)。
[0199] 另外,控制器180可檢查是否僅存在一個(gè)識(shí)別的對(duì)象(S550)。如果識(shí)別出至少一 個(gè)對(duì)象(S550為"是"),則控制器180可分割畫面并根據(jù)時(shí)間順序在各個(gè)分割的視圖中顯 示各個(gè)對(duì)象的移動(dòng)路徑(S560)。如果僅識(shí)別出一個(gè)對(duì)象(S550為"否"),則控制器180可 根據(jù)時(shí)間順序在單個(gè)視圖中顯示這一個(gè)對(duì)象的移動(dòng)路徑(S570)。
[0200] 具體地講,當(dāng)在分割的視圖或單個(gè)視圖中顯示時(shí),如果對(duì)象的移動(dòng)路徑交疊,則控 制器180可不同地調(diào)節(jié)其透明度以進(jìn)行輸出。例如,控制器180可控制最后拍攝的對(duì)象以 較暗的顏色顯示(S580)。
[0201] 圖22A和圖22B是示出在全景圖像中顯示(指示)對(duì)象的移動(dòng)路徑的實(shí)施方式的 詳細(xì)示圖。為了說明,假設(shè)對(duì)象的移動(dòng)路徑是預(yù)覽(a)-第一拍攝指引(b)-第二拍攝指 弓丨(c)-第一拍攝指引(b)。沿著移動(dòng)路徑拍攝的對(duì)象的全景圖像可被存儲(chǔ)在存儲(chǔ)器160 中。用戶可因此通過選擇開始按鈕在顯示單元151上顯示(回放)全景圖像。這里,顯示 全景圖像的方法可由用戶設(shè)定來決定。
[0202] 如圖22A所示,當(dāng)用戶設(shè)定是"時(shí)間順序"時(shí),控制器180可按照時(shí)間順序 (a-b-c)以滑動(dòng)形式或者類似回放視頻地顯示背景和對(duì)象。
[0203] 在另一示例中,控制器180可僅控制要以單獨(dú)方式查看的對(duì)象。對(duì)象的輸出(再 現(xiàn)、回放)可利用按鈕被暫停,并且還利用倒回或向前按鈕或者按照左/右輕拂方式移至先 前位置或后續(xù)位置。
[0204] 如圖22B所示,對(duì)象的移動(dòng)路徑可交疊在第二拍攝指引(c)上。當(dāng)對(duì)象的移動(dòng)路 徑交疊時(shí),即,當(dāng)對(duì)象移動(dòng)到相同的位置(在相同的預(yù)覽中)時(shí),控制器180可僅移動(dòng)對(duì)象, 而保持背景。具體地講,當(dāng)對(duì)象的移動(dòng)路徑交疊時(shí),控制器180可清晰地輸出先前拍攝的對(duì) 象(基于時(shí)間較早拍攝的對(duì)象),或者按照時(shí)間順序輸出對(duì)象。如果觸摸模糊的對(duì)象,則時(shí) 間移至對(duì)應(yīng)對(duì)象,從時(shí)間移至的點(diǎn)開始查看對(duì)象的移動(dòng)路徑。
[0205] 另外,當(dāng)根據(jù)時(shí)間順序輸出對(duì)象時(shí),用戶可傾斜終端,或者施加觸摸輸入或按鈕輸 入。因此,可在相同的位置處對(duì)基于時(shí)間較早拍攝的對(duì)象進(jìn)行查看、暫停、放大等。
[0206] 如果由于對(duì)象的移動(dòng)路徑交疊,在暫停的位置或放大的位置處輸出多個(gè)對(duì)象,則 根據(jù)終端的傾斜,各個(gè)對(duì)象可模糊,根據(jù)時(shí)間的過去順序輸出,或者像全息圖一樣順序地輸 出。具體地講,為了以全息圖的形式輸出對(duì)象,如果在播放按鈕的箭頭所指示的方向上傾斜 或觸摸電話(終端),則基于時(shí)間先前拍攝的對(duì)象(位于后面的對(duì)象)可移到前面以便于輸 出。如果以相反方式觸摸或傾斜電話,則對(duì)象可按照原始狀態(tài)顯示。
[0207] 接下來,圖23是示出當(dāng)對(duì)象的移動(dòng)路徑交疊時(shí)的顯示方法的示圖。如圖23所示, 當(dāng)對(duì)象的移動(dòng)路徑交疊時(shí),當(dāng)前拍攝的對(duì)象可清晰地輸出。當(dāng)在按照時(shí)間順序輸出對(duì)象的 同時(shí)用戶傾斜終端或?qū)K端施加觸摸輸入或按鈕輸入時(shí),用戶可在相同的位置處查看基于 時(shí)間先前拍攝的對(duì)象。
[0208] 圖24和圖24B是示出當(dāng)生成全景圖像時(shí)在畫面中聚焦從聲源生成的音頻聲音 (秒)的操作的示圖。在本發(fā)明的實(shí)施方式中,在拍攝對(duì)象的移動(dòng)路徑的同時(shí),可利用音頻 變焦記錄在預(yù)覽中當(dāng)前觀看的方向上生成的聲音(例如,環(huán)境聲音)。音頻變焦是指通過麥 克風(fēng)在預(yù)定方向上聚焦、采集和處理聲音并選擇性地記錄期望的聲音的一系列操作。
[0209] 這種操作被稱作音頻日志并與對(duì)象日志一起使用。因此,如果在全景模式下環(huán)境 聲音與對(duì)象的移動(dòng)路徑一起存儲(chǔ),則在再現(xiàn)全景時(shí),對(duì)象日志和音頻日志可同時(shí)輸出。
[0210] 重放模式:通過音頻變焦記錄的聲音和在拍攝時(shí)存儲(chǔ)的對(duì)象的位置被播放。這里, 如圖24A所示,可在再現(xiàn)畫面上指示音頻變焦區(qū)域70。
[0211] 自由移動(dòng)模式:在播放通過音頻變焦采集的聲音的同時(shí),如果用戶觀看的位置和 音頻變焦位置彼此相同,則可在對(duì)應(yīng)位置處輸出音頻采集的聲音。當(dāng)觀看位置和音頻變焦 位置彼此不同時(shí),可輸出環(huán)境聲音。這里,如圖24B所示,控制器180可在畫面的下部輸出 微型地圖71以指示音頻變焦位置,并且利用前相機(jī)通過用戶的瞳孔識(shí)別或臉部識(shí)別來識(shí) 別用戶的眼睛。
[0212] 圖25是示出在拍攝全景圖像的同時(shí)自動(dòng)記錄音頻采集目標(biāo)的聲音的操作的示 圖。在拍攝全景圖像的同時(shí),如果識(shí)別出各種聲源(例如,人、移動(dòng)對(duì)象、固定對(duì)象(TV或電 子公告牌等),則可針對(duì)對(duì)應(yīng)聲源執(zhí)行音頻變焦。當(dāng)存在多個(gè)聲源(對(duì)象)時(shí),控制器180 可選擇最大的對(duì)象,并選擇性地對(duì)用戶選擇的聲源(對(duì)象)的聲音進(jìn)行音頻采集。
[0213] 然后,控制器180可在再現(xiàn)全景圖像時(shí)輸出音頻變焦的聲源的圖標(biāo),以通知從該 聲源生成的聲音被音頻采集。因此,當(dāng)在觀看VR全景時(shí)音頻變焦的對(duì)象位于前面時(shí),可聽 到對(duì)應(yīng)對(duì)象的聲音。如果不存在這種音頻變焦的對(duì)象,則可聽到環(huán)境聲音。
[0214] 圖26A和圖26B是用于拍攝全景圖像的用戶設(shè)定的示圖。拍攝模式可基本上分為 指示正常拍攝的拍攝模式以及指示全景拍攝的VR全景模式(左側(cè)配置)。
[0215] 如圖26A所示,本文公開的VR全景模式的詳細(xì)菜單可包括對(duì)象日志和音頻日志。 對(duì)象日志和音頻日志可按照切換形式(中間配置)或者單獨(dú)設(shè)定的形式(后側(cè)配置)來構(gòu) 造。因此,用戶可通過從用戶菜單選擇日志和音頻變焦來針對(duì)期望的對(duì)象進(jìn)行全景拍攝。
[0216] 在另一示例中,如圖26B所示,在正常拍攝期間,對(duì)象日志和音頻變焦按鈕可設(shè)置 在畫面的一側(cè)以設(shè)定全景拍攝。然后,當(dāng)全景拍攝完成時(shí),用戶可通過選擇指示全景圖像的 指示符來播放所拍攝的全景。
[0217] 圖27A和圖27B是示出在拍攝全景圖像之后在畫面上選擇性地存儲(chǔ)對(duì)象日志和音 頻變焦的操作的實(shí)施方式的示圖。根據(jù)本發(fā)明的實(shí)施方式,在拍攝已應(yīng)用對(duì)象日志和音頻 變焦的全景圖像之后,可在對(duì)應(yīng)畫面上選擇性地編輯并存儲(chǔ)對(duì)象日志和音頻變焦。
[0218] 在第一實(shí)施方式中,如圖27A所示,在拍攝之后,至少一個(gè)按鈕(例如,無、對(duì)象去 除、對(duì)象日志、僅對(duì)象和音頻日志切換)可被輸出在畫面上。然后,可根據(jù)按鈕設(shè)定來選擇 性地編輯(例如,去除)并存儲(chǔ)跟蹤的數(shù)據(jù)(對(duì)象日志)和音頻。
[0219] S卩,在設(shè)定按鈕"無"時(shí),控制器180可在沒有日志的情況下存儲(chǔ)拍攝的圖像。在 設(shè)定按鈕"對(duì)象去除"時(shí),控制器180可通過僅去除跟蹤的對(duì)象來存儲(chǔ)所拍攝的圖像。在設(shè) 定"對(duì)象日志"時(shí),控制器180可存儲(chǔ)對(duì)象跟蹤日志。在設(shè)定"僅對(duì)象"時(shí),控制器180可在 去除所跟蹤的對(duì)象以外的其它對(duì)象之后存儲(chǔ)所拍攝的圖像。
[0220] 當(dāng)選擇按鈕"無、對(duì)象日志和僅對(duì)象"時(shí),控制器180可按照切換方式去除基本上 包括的音頻日志。每當(dāng)各個(gè)按鈕被操縱時(shí),按鈕操縱可被立即施加到畫面,由此導(dǎo)致的變化 可見。
[0221] 在本文公開的第二實(shí)施方式中,對(duì)象的跟蹤數(shù)據(jù)(日志)和音頻可在不被去除的 情況下存儲(chǔ),隨后被選擇性地輸出??筛鶕?jù)設(shè)定來限定文件格式的代表性圖像。所限定的 代表性圖像可在圖庫上輸出。因此,用戶可在圖庫中通過附加操縱來激活對(duì)象日志和音頻 日志。
[0222] 因此,參照?qǐng)D27B,當(dāng)根據(jù)第一實(shí)施方式存儲(chǔ)全景圖像時(shí),位于畫面的上端的指示 符可指示是否存在對(duì)象日志或音頻日志。當(dāng)根據(jù)第二實(shí)施方式存儲(chǔ)全景圖像時(shí),可按照切 換方式操作指示符以激活期望的功能(日志和/或音頻變焦)。另外,用戶可按下跟蹤的對(duì) 象上的指示符,激活用戶布置在中央的對(duì)象的日志和音頻變焦,或者打開由用戶放大的對(duì) 象的日志和音頻變焦。
[0223] 圖28是示出存儲(chǔ)在圖庫中的全景圖像的示圖。如圖28所示,在圖庫中可利用圖 標(biāo)(日志圖標(biāo)和音頻變焦圖標(biāo))按照區(qū)別于其它內(nèi)容的方式顯示全景圖像。當(dāng)用戶觸摸對(duì) 應(yīng)圖標(biāo)時(shí),可激活視圖模式,使得播放全景圖像。
[0224] 圖29是利用分割的視圖顯示對(duì)象的移動(dòng)的示圖。如圖29所示,控制器180可在 播放全景圖像時(shí)通過根據(jù)用戶選擇將畫面分割成多個(gè)視圖來顯示對(duì)象的移動(dòng)。這里,分割 的視圖(畫面)的數(shù)量可被設(shè)定為對(duì)應(yīng)于對(duì)象的數(shù)量。例如,如果在一個(gè)全景圖像中識(shí)別 多個(gè)對(duì)象,則用戶可自動(dòng)地或者通過選擇分割的視圖來查看各個(gè)對(duì)象的移動(dòng)。
[0225] 在另一示例中,用戶可按照將畫面分割成視圖的方式,將跟蹤的對(duì)象顯示在一個(gè) 分割的視圖上,并將所跟蹤的對(duì)象的相反畫面顯示在另一分割的視圖上。這可使得能夠在 一個(gè)畫面上查看不同的場景。在另一示例中,利用分割視圖功能,可在一個(gè)分割的視圖中自 動(dòng)再現(xiàn)所跟蹤的對(duì)象的移動(dòng)姿態(tài),可在另一分割的視圖中由用戶手動(dòng)移動(dòng)對(duì)象。
[0226] 圖30是示出根據(jù)本文公開的實(shí)施方式的移動(dòng)終端的全景拍攝方法的效果的示 圖。如圖30所示,由于在現(xiàn)有技術(shù)僅可拍攝一個(gè)動(dòng)作(圖像)(例如,僅體操中的跳躍和落 地部分(最后部分)),所以無法生成包括完整動(dòng)作(移動(dòng)路徑)的全景。
[0227] 然而,在本發(fā)明的實(shí)施方式中,通過沿著對(duì)象的移動(dòng)路徑提供指引來執(zhí)行拍攝。因 此,在體操、田徑運(yùn)動(dòng)、跳遠(yuǎn)、撐桿跳等中拍攝跳躍時(shí),可從奔跑開始輸出日志。這使得能夠 生成包括運(yùn)動(dòng)員的整個(gè)移動(dòng)路徑的全景。具體地講,本發(fā)明的實(shí)施方式可用在拍攝包括移 動(dòng)路徑的360°拍攝時(shí)。
[0228] 如所述,本發(fā)明的實(shí)施方式在全景模式下拍攝對(duì)應(yīng)對(duì)象時(shí)根據(jù)對(duì)象提供指引區(qū) 域,使得用戶可自動(dòng)拍攝被設(shè)定為后續(xù)預(yù)覽的指引區(qū)域。這從而得到包括對(duì)象的完整移動(dòng) 路徑的全景圖像。
[0229] 另外,根據(jù)本發(fā)明的一個(gè)實(shí)施方式,所述方法可被實(shí)現(xiàn)為程序記錄介質(zhì)中的計(jì)算 機(jī)可讀代碼。計(jì)算機(jī)可讀介質(zhì)可包括各自存儲(chǔ)可由計(jì)算機(jī)系統(tǒng)讀取的數(shù)據(jù)的所有類型的記 錄裝置。這些計(jì)算機(jī)可讀介質(zhì)的示例可包括1?(通、狀11、^-1?(通、磁帶、軟盤、光學(xué)數(shù)據(jù)存儲(chǔ)元 件等。另外,計(jì)算機(jī)可讀介質(zhì)還可被實(shí)現(xiàn)為載波的格式(例如,經(jīng)由互聯(lián)網(wǎng)的傳輸)。計(jì)算 機(jī)可包括移動(dòng)終端的控制器180。
[0230] 上述實(shí)施方式中的移動(dòng)終端的配置和方法可不受限制地應(yīng)用,這些實(shí)施方式可通 過所有或部分實(shí)施方式的選擇性組合來配置,以實(shí)現(xiàn)許多變型。
[0231] 由于本發(fā)明特征在不脫離其特性的情況下可按照多種形式具體實(shí)現(xiàn),所以還應(yīng)該 理解,除非另外指明,否則上述實(shí)施方式不受以上描述的任何細(xì)節(jié)的限制,而是應(yīng)該在由所 附權(quán)利要求限定的范圍內(nèi)概括地解釋,因此,落入權(quán)利要求的界限或這些界限的等同物內(nèi) 的所有改變和修改因此旨在被所附權(quán)利要求涵蓋。
【權(quán)利要求】
1. 一種控制移動(dòng)終端的方法,該方法包括w下步驟: 在所述移動(dòng)終端的顯示器上顯示相機(jī)預(yù)覽; 在所述相機(jī)預(yù)覽中選擇要拍攝的對(duì)象; 在所述顯示器上沿著所選擇的對(duì)象的移動(dòng)方向顯示指示后續(xù)拍攝區(qū)域的拍攝指引;W 及 當(dāng)所述移動(dòng)終端移動(dòng)W使得所述相機(jī)預(yù)覽在預(yù)定量內(nèi)與所述拍攝指引基本上對(duì)準(zhǔn)時(shí), 經(jīng)由所述移動(dòng)終端的控制器拍攝包括所述相機(jī)預(yù)覽中的所述對(duì)象的移動(dòng)路徑的全景圖像。
2. 根據(jù)權(quán)利要求1所述的方法,該方法還包括W下步驟: 在所述對(duì)象上顯示對(duì)象指引,W指示所述對(duì)象是要跟蹤的目標(biāo), 其中,所述拍攝指引具有類似于所述相機(jī)預(yù)覽的形狀,并且在所述對(duì)象遠(yuǎn)離所述相機(jī) 預(yù)覽的中也移動(dòng)預(yù)定距離W上時(shí),所述拍攝指引被顯示為與所述相機(jī)預(yù)覽部分交疊。
3. 根據(jù)權(quán)利要求1所述的方法,其中,所述拍攝指引在所述對(duì)象遠(yuǎn)離所述相機(jī)預(yù)覽的 中也移動(dòng)預(yù)定距離時(shí)被清晰地顯示,或者被顯示為根據(jù)所述對(duì)象相對(duì)于所述相機(jī)預(yù)覽的所 述中也的移動(dòng)距離而逐漸清晰。
4. 根據(jù)權(quán)利要求1所述的方法,該方法還包括W下步驟: 在各個(gè)相機(jī)預(yù)覽中拍攝背景一次; 在各個(gè)相機(jī)預(yù)覽中拍攝所述對(duì)象的所述移動(dòng)路徑預(yù)定次數(shù);W及 利用針對(duì)多個(gè)相機(jī)預(yù)覽的所拍攝的背景W及所拍攝的所述對(duì)象的移動(dòng)路徑來生成所 述全景圖像。
5. 根據(jù)權(quán)利要求1所述的方法,該方法還包括W下步驟: 顯示所拍攝的全景圖像; 在所述全景圖像上按照時(shí)間順序顯示所述對(duì)象的所述移動(dòng)路徑;W及 當(dāng)顯示所述全景圖像時(shí),如果在各個(gè)相機(jī)預(yù)覽中所述對(duì)象尺寸改變并且移動(dòng)少于預(yù)定 量,則顯示最佳鏡頭。
6. 根據(jù)權(quán)利要求5所述的方法,該方法還包括W下步驟: 當(dāng)所述全景圖像中包括多個(gè)對(duì)象時(shí),利用分割的視圖顯示所述多個(gè)對(duì)象的移動(dòng)路徑; 當(dāng)所述對(duì)象的所述移動(dòng)路徑的一部分由于所述對(duì)象的快速移動(dòng)而未被拍攝時(shí),每隔預(yù) 定間隔將先前對(duì)象插入未拍攝區(qū)段中;W及 區(qū)別地顯示所插入的先前對(duì)象。
7. 根據(jù)權(quán)利要求4所述的方法,該方法還包括W下步驟: 當(dāng)一個(gè)對(duì)象的移動(dòng)路徑交疊時(shí),利用不同的透明度來顯示當(dāng)前拍攝的對(duì)象和先前拍攝 的對(duì)象擬及 當(dāng)多個(gè)對(duì)象的移動(dòng)路徑交疊時(shí),利用不同的顏色來顯示所述多個(gè)對(duì)象。
8. 根據(jù)權(quán)利要求1所述的方法,該方法還包括W下步驟: 當(dāng)在所述相機(jī)預(yù)覽的邊界處在部分切割的部分中拍攝所述對(duì)象時(shí),利用先前位置的對(duì) 象再次觸摸(S420)所述切割的部分,并通過使相鄰部分的顏色漸變來處理所述全景圖像 的由于所再次觸摸的部分而生成的空白空間。
9. 根據(jù)權(quán)利要求1所述的方法,該方法還包括W下步驟: 當(dāng)生成包括所述對(duì)象的所述移動(dòng)路徑的矩形形狀的完整全景圖像時(shí),基于全球定位系 統(tǒng)GPS信息利用已經(jīng)在相同的位置處拍攝的圖像來填充空白空間。
10. -種移動(dòng)終端,該移動(dòng)終端包括: 相機(jī); 顯示器,該顯示器被配置為顯示由所述相機(jī)獲得的相機(jī)預(yù)覽,并在所述相機(jī)預(yù)覽中沿 著選擇的對(duì)象的移動(dòng)方向顯示指示后續(xù)拍攝區(qū)域的拍攝指引;W及 控制器,該控制器被配置為在所述移動(dòng)終端移動(dòng)W使得所述相機(jī)預(yù)覽在預(yù)定量內(nèi)與所 述拍攝指引基本上對(duì)準(zhǔn)時(shí),拍攝包括所述相機(jī)預(yù)覽中的所述對(duì)象的移動(dòng)路徑的全景圖像。
11. 根據(jù)權(quán)利要求10所述的移動(dòng)終端,其中,所述控制器還被配置為控制所述對(duì)象上 的對(duì)象指引的顯示,W指示所述對(duì)象是要跟蹤的目標(biāo)。
12. 根據(jù)權(quán)利要求10所述的移動(dòng)終端,其中,所述拍攝指引具有類似于所述相機(jī)預(yù)覽 的形狀,并且在所述對(duì)象遠(yuǎn)離所述相機(jī)預(yù)覽的中也移動(dòng)預(yù)定距離W上時(shí),所述拍攝指引被 顯示為與所述相機(jī)預(yù)覽部分交疊。
13. 根據(jù)權(quán)利要求10所述的移動(dòng)終端,其中,所述控制器還被配置為在所述對(duì)象遠(yuǎn)離 所述相機(jī)預(yù)覽的中也移動(dòng)預(yù)定距離時(shí)清晰地顯示所述拍攝指引,或者根據(jù)所述對(duì)象相對(duì)于 所述相機(jī)預(yù)覽的所述中也的移動(dòng)距離來逐漸清晰地顯示所述拍攝指引。
14. 根據(jù)權(quán)利要求10所述的移動(dòng)終端,其中,所述控制器還被配置為: 在各個(gè)相機(jī)預(yù)覽中拍攝背景一次, 在各個(gè)相機(jī)預(yù)覽中拍攝所述對(duì)象的所述移動(dòng)路徑預(yù)定次數(shù),并且 利用針對(duì)多個(gè)相機(jī)預(yù)覽的所拍攝的背景W及所拍攝的所述對(duì)象的移動(dòng)路徑來生成所 述全景圖像。
15. 根據(jù)權(quán)利要求10所述的移動(dòng)終端,其中,所述控制器還被配置為: 顯示所拍攝的全景圖像, 在所述全景圖像上按照時(shí)間順序顯示所述對(duì)象的所述移動(dòng)路徑, 當(dāng)顯示所述全景圖像時(shí),如果在各個(gè)相機(jī)預(yù)覽中所述對(duì)象尺寸改變并且移動(dòng)少于預(yù)定 量,則顯示最佳鏡頭,并且 當(dāng)所述全景圖像中包括多個(gè)對(duì)象時(shí),利用分割的視圖來顯示所述多個(gè)對(duì)象的移動(dòng)路 徑。
【文檔編號(hào)】H04N5/232GK104349052SQ201410351049
【公開日】2015年2月11日 申請(qǐng)日期:2014年7月22日 優(yōu)先權(quán)日:2013年7月23日
【發(fā)明者】樸鐘景 申請(qǐng)人:Lg電子株式會(huì)社