用于提供增強現(xiàn)實視圖的技術(shù)的制作方法
【技術(shù)領域】
[0001]本文描述的實施例一般涉及基于跟蹤眼睛移動來提供當前位置周圍的增強現(xiàn)實視圖以區(qū)分可能感興趣的項目與在增強現(xiàn)實視圖中的其它項目。
【背景技術(shù)】
[0002]使用配備有位置檢測器、相機和顯示器的查看裝置來提供周圍的增強現(xiàn)實視圖正在得到接受。此類查看裝置采用各種位置檢測技術(shù)(例如，全球定位系統(tǒng)衛(wèi)星信號、磁羅盤等)來確定其當前位置以及其相機相對于地表面的當前方位，并請求有關其緊接周圍內(nèi)的項目的信息。此類裝置然后在視覺上呈現(xiàn)由其相機所捕捉的周圍視圖，其中該視圖覆蓋有標識視圖內(nèi)項目的指示符，由此創(chuàng)建增強現(xiàn)實視圖。
[0003]實質(zhì)上，此類查看裝置變成了“虛擬窗格”，通過其操作員以使得能夠定位項目并使用被添加到那些周圍的視圖的那些項目的指示符更快速地標識項目的方式查看他或她的周圍。作為示例，可采用此類查看裝置發(fā)現(xiàn)像餐館、廁所、酒店住宿、旅游勝地這樣的項目。
[0004]可惜，提供此類增強現(xiàn)實視圖的當前查看裝置未將在任何給定時間對操作員來說可能都感興趣的項目考慮進去。因此，此類查看裝置傾向于提供填充有太多在緊接周圍內(nèi)項目的指示符的增強現(xiàn)實視圖。對操作員來說，這通過實質(zhì)上用如此多不感興趣的項目的指示符使視圖“雜亂”而降低了增強現(xiàn)實視圖的功用，操作員很難挑出感興趣的項目的指示符，并且實際上很難在增強現(xiàn)實視圖中看到許多周圍事物。
【附圖說明】
[0005]圖1圖示了增強現(xiàn)實查看系統(tǒng)的實施例。
[0006]圖2A和2B圖示了根據(jù)實施例的查看裝置的透視圖。
[0007]圖3圖示了根據(jù)實施例的查看裝置的操作。
[0008]圖4A、4B和4C各圖示了根據(jù)實施例的增強現(xiàn)實視圖的視覺呈現(xiàn)。
[0009]圖5圖示了根據(jù)另一實施例的增強現(xiàn)實視圖的視覺呈現(xiàn)。
[0010]圖6圖示了增強現(xiàn)實系統(tǒng)查看系統(tǒng)的實施例的一部分。
[0011]圖7-8各圖示了根據(jù)實施例的邏輯流程。
[0012]圖9圖示了根據(jù)實施例的處理架構(gòu)。
【具體實施方式】
[0013]各種實施例一般指向用于提供增強現(xiàn)實視圖的技術(shù)，其中采用眼睛移動來標識在增強現(xiàn)實視圖中在視覺上呈現(xiàn)指示符的可能感興趣的項目。采用各種位置檢測技術(shù)來確定查看裝置的當前位置以及其相機相對于那個位置的當前方位，并檢索標識位于當前位置附近周圍的項目的信息。當操作員看查看裝置的顯示器以通過相機和顯示器查看周圍時，查看裝置的眼睛跟蹤器確定操作員在顯示器上哪里看以使得能夠確定在周圍的什么項目是感興趣的?？赡芨信d趣的那些標識的項目的視覺指示符然后以覆蓋由相機捕捉的圖像的方式在視覺上呈現(xiàn)在顯示器上。
[0014]位置檢測技術(shù)可包含全球定位系統(tǒng)(GPS)衛(wèi)星信號接收、檢測無線接入點(AP)的方向和/或距離、檢測地磁場方向的磁羅盤、檢測重力方向的加速計等中的一個或多個。檢測相機的方位除了檢測其水平方位(例如，其水平方位的其羅盤方向)之外，還可包含檢測相機的仰角。
[0015]在檢索有關位于當前位置(附近)周圍的項目的信息時，查看裝置可向服務器傳送其當前位置，但不傳送其方位，并接收有關位于整個來自當前位置的全圓范圍方向的項目的信息。給定相機相對于當前位置的當前方位，基于哪些項目在相機的視野內(nèi)，最初可對于可能的視覺呈現(xiàn)選擇那些項目的子集。備選地，查看裝置此外可向服務器傳送其相機的當前方位和/或相機視野的角寬度的指示，以使服務器能夠?qū)⒂嘘P它向查看裝置傳送的項目的信息僅限于也在相機視野內(nèi)的周圍的項目。
[0016]不管基于相機的視野最初對于指示符的可能的視覺呈現(xiàn)選擇項目的確切方式如何，然后都基于查看裝置的操作員的眼睛移動進一步限制項目的選擇。隨時間跟蹤操作員的眼睛移動以確定操作員注視顯示器的什么部分與其它部分不同，并且確定注視顯示器的什么部分用于標識相機視野中的周圍的哪個(哪些)項目對操作員來說感興趣。
[0017]在標識相機視野中對操作員來說可能感興趣的項目時，那些項目的指示符以覆蓋相機視野的視覺呈現(xiàn)的方式在視覺上呈現(xiàn)在顯示器上。此類指示符可包含向操作員標識那些項目的文本和/或圖形指示符(例如，商家的名稱和/或標志、提供的服務的標識、街道地址等)。操作員注視顯示器一部分的閾值最小時間量可被用作開始可能感興趣的項目的一個或多個指示符的觸發(fā)器的視覺呈現(xiàn)，以確保此類指示符不被錯誤觸發(fā)以在視覺上呈現(xiàn)為注視的結(jié)果。備選地或附加地，可施加停止在視覺上呈現(xiàn)可能感興趣的對象的一個或多個指示符的延遲，以確保此類視覺呈現(xiàn)的停止不被匆匆一瞥顯示器的某一其它部分和/或與顯示器不同的對象而錯誤觸發(fā)。
[0018]在一些實施例中，可能感興趣的項目的指示符可布置在顯示器上與確定操作員注視的顯示器的部分鄰近(例如周圍)的位置，以免使在顯示器那個部分可見的周圍的操作員視圖模糊不清。在其它實施例中，可能感興趣的項目的指示符中的一個或多個可按某一透明度在視覺上呈現(xiàn)，使得操作員能夠透過此類指示符看，以繼續(xù)注視顯示器的那個部分而沒有中斷。應該指出，本文所描述的查看裝置的操作可在室內(nèi)或室外。從而，查看裝置的當前位置附近周圍的景色可以是室內(nèi)景色(例如，建筑物或房子內(nèi)部、幾件家具、書架或書桌上的物品、存儲區(qū)中幾件藝術(shù)品或庫存)或室外景色(例如，自然或人造室外特征、建筑物或山峰、道路或河流、地理特征或古跡等)。不管周圍的景色由什么組成，其圖像都被捕捉，并與相機視野內(nèi)的那個景色中可能感興趣的一個或多個項目的指示符一起在視覺上呈現(xiàn)。
[0019]一般參考本文使用的符號和命名，隨后的詳細描述部分可依據(jù)在計算機或計算機網(wǎng)絡上執(zhí)行的程序過程呈現(xiàn)。這些過程描述和表示是本領域技術(shù)人員用于最高效地將它們工作的實質(zhì)傳達給本領域其它技術(shù)人員。過程在此并且一般被視為導致期望結(jié)果的前后一致的操作序列。這些操作是需要物理量的物理操控的操作。通常，盡管不是必要的，但這些量采取能夠被存儲、轉(zhuǎn)移、組合、比較和以另外方式操控的電、磁或光信號的形式。已經(jīng)證明方便的是，有時主要出于常見用法的原因，將這些信號稱為位、值、單元、符號、字符、項、數(shù)字等等。然而，應該注意，所有這些和類似的術(shù)語都與適當?shù)奈锢砹肯嚓P聯(lián)，并且僅僅是應用于這些量的方便標簽。
[0020]另外，這些操控經(jīng)常用諸如添加或比較的術(shù)語來提及，這些術(shù)語一般與人操作員執(zhí)行的心理操作關聯(lián)。然而，人操作員的此類能力不是必要的，或者在多數(shù)情況下在形成一個或多個實施例一部分的本文描述的任何操作中不是可取的。而是，這些操作是機器操作。用于執(zhí)行各種實施例的操作的有用機器包含由在其內(nèi)存儲的根據(jù)本文教導所寫的計算機程序有選擇地激活或配置的通用數(shù)字計算機，和/或包含為了所需目的專門構(gòu)造的設備。各種實施例還涉及用于執(zhí)行這些操作的設備或系統(tǒng)。這些設備可為了所需目的專門構(gòu)造，或可包含通用計算機。用于各種各樣這些機器的所需結(jié)構(gòu)根據(jù)給出的描述將顯而易見。
[0021]現(xiàn)在參考附圖，其中通篇相似的附圖標記用于指相似的單元。在如下描述中，為了說明的目的，闡述了大量特定細節(jié)以便提供對其的透徹理解。然而，可能顯然的是，新穎的實施例沒有這些特定細節(jié)也可實行。在其它實例中，眾所周知的結(jié)構(gòu)和裝置以框圖形式示出了以便便于其描述。意圖是含蓋權(quán)利要求書范圍內(nèi)的所有修改、等同物和備選。
[0022]圖1是包含位置服務器300和查看裝置500中一個或多個的增強現(xiàn)實查看系統(tǒng)1000的實施例的框圖。這些計算裝置中的每個裝置都可以是各種各樣類型計算裝置中的任何裝置，包含而非限制，臺式計算機系統(tǒng)、數(shù)據(jù)錄入終端、膝上型計算機、筆記本計算機、平板計算機、手持個人數(shù)據(jù)助理、智能電話、數(shù)字相機、結(jié)合到衣服中的身體穿戴計算裝置、集成到車輛(例如轎車、自行車、輪椅等沖的計算裝置、服務器、服務器群集、服務器場等。
[0023]如所描繪的，這些計算裝置300和500的子集經(jīng)由網(wǎng)絡999交換與確定相機當前位置和方位關聯(lián)的和與提供標識當前位置附近的項目的信息關聯(lián)的信號。然而，這些計算裝置中的一個或多個可經(jīng)由網(wǎng)絡999彼此交換和/或與又一些其它計算裝置(未示出)交換與位置或標識位置處的項目完全不相關的其它數(shù)據(jù)。在各種實施例中，網(wǎng)絡999可以是可能被限制于在單個建筑物或其它比較有限的區(qū)域內(nèi)延伸的單個網(wǎng)絡，可能延伸相當大距離的連接的網(wǎng)絡的組合，和/或可包含因特網(wǎng)。從而，網(wǎng)絡999可基于可交換信號的各種各樣通信技術(shù)中的任何技術(shù)(或組合)，包含而非限制，采用電學和/或光學傳導電纜的有線技術(shù)以及采用紅外、射頻或其它形式無線傳送的無線技術(shù)。
[0024]在各種實施例中，查看裝置500包含處理器組件550、存儲裝置560、羅盤510、仰角傳感器515、控制器520、相機570、眼睛跟蹤器575、顯示器580以及將查看裝置500耦合到網(wǎng)絡999的接口 590中的一個或多個。存儲裝置560存儲收集例程540、位置數(shù)據(jù)530、注視數(shù)據(jù)533、裝置數(shù)據(jù)535、視覺數(shù)據(jù)537、查看例程545和位置數(shù)據(jù)330中的一個或多個。收集例程540和查看例程545中的每個都包含在處理器組件550上可操作的指令序列，在其角色上作為查看裝置500的主處理器組件以實現(xiàn)執(zhí)行各種功能的邏輯。
[0025]在執(zhí)行收集例程540時，處理器組件550操作接口 590、羅盤510和仰角傳感器515中的一個或多個來確定查看裝置500的當前位置以及相機570的視野相對于當前位置的當前方位，將之一或二者作為位置數(shù)據(jù)530存儲。處理器組件550可操作接口 590以接收由環(huán)繞地球軌道運行的全球定位系統(tǒng)(GPS)衛(wèi)星傳送的無線射頻信號以確定當前位置。備選地或附加地，處理器組件550可操作接口 590以接收一個或多個網(wǎng)絡(例如網(wǎng)絡999)的網(wǎng)絡接入點(AP)的無線射頻信號來確定當前位置。更確切地說，處理器組件550可操作接口 590來確定AP與查看裝置500的方向和/或距離，以及接收標識來自AP的信息，并且可請求服務器(例如服務器300)將標識各種AP的信息與它們的位置相關的信息。