專利名稱：自動調(diào)節(jié)終端界面顯示的方法及裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及移動通訊領(lǐng)域，特別是涉及一種自動調(diào)節(jié)終端界面顯示的方法及裝置。
背景技術(shù)：
現(xiàn)有技術(shù)中，在用戶與手機(jī)進(jìn)行交互時，用戶可以通過手機(jī)的觸摸屏對手機(jī)進(jìn)行操作，例如，在對圖片進(jìn)行放大時，用戶只要兩個手指在手機(jī)屏幕上由內(nèi)向外滑動，手機(jī)自動根據(jù)手指頭滑動的速度和距離等計算出要放大的倍數(shù)，并根據(jù)計算出的放大倍數(shù)在手機(jī)界面上顯示出放大后的圖片。 目前，這種基于觸摸感應(yīng)的智能交互方式相比以往通過按鍵進(jìn)行交互的方式具有突破性的進(jìn)步，更加符合人性化交互設(shè)計的趨勢、以及用戶的自然行為習(xí)慣，是下一代手機(jī)界面設(shè)計的基本原則和要求。但基于觸摸感應(yīng)的智能交互方式仍然存在以下不足之處在對圖片進(jìn)行放大時，用戶至少要用一只手進(jìn)行操作，因此，對于沒有手臂的殘疾人來說，就無法完成上述操作；其次，用戶還要用手做滑動操作，即便操作很簡單，但對初學(xué)者來說，也是需要學(xué)習(xí)成本去習(xí)慣這種交互模式。

發(fā)明內(nèi)容
本發(fā)明提供一種自動調(diào)節(jié)終端界面顯示的方法及裝置。本發(fā)明提供一種自動調(diào)節(jié)終端界面顯示的方法，包括獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)和/或目標(biāo)對象的目標(biāo)區(qū)域模型；根據(jù)目標(biāo)區(qū)域模型和/或物理距離數(shù)據(jù)確定目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系，獲取與目標(biāo)區(qū)域追蹤數(shù)據(jù)模型相對應(yīng)的終端界面顯示參數(shù)；根據(jù)獲取的終端界面顯示參數(shù)對當(dāng)前終端界面顯示內(nèi)容和/或顯示方式進(jìn)行調(diào)節(jié)。本發(fā)明還提供了一種自動調(diào)節(jié)終端界面顯示的裝置，包括獲取單元，用于獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)和/或目標(biāo)對象的目標(biāo)區(qū)域模型；監(jiān)測單元，用于根據(jù)目標(biāo)區(qū)域模型和/或物理距離數(shù)據(jù)確定目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系，獲取與目標(biāo)區(qū)域追蹤數(shù)據(jù)模型相對應(yīng)的終端界面顯示參數(shù)；控制單元，用于根據(jù)獲取的終端界面顯示參數(shù)對當(dāng)前終端界面顯示內(nèi)容和/或顯示方式進(jìn)行調(diào)節(jié)。本發(fā)明有益效果如下通過建立目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系對終端屏幕的顯示進(jìn)行控制，對現(xiàn)有的手機(jī)操作方式進(jìn)行了擴(kuò)充，提供了一種新的人機(jī)智能交互模式，本發(fā)明能夠模擬用戶的閱讀習(xí)慣，并根據(jù)用戶的閱讀習(xí)慣對屏幕顯示的內(nèi)容進(jìn)行上下左右調(diào)節(jié)和/或字體大小的調(diào)節(jié)，能夠減小用戶學(xué)習(xí)成本，提高用戶的使用體驗(yàn)，使手機(jī)操作更加方便靈活，有利于提高終端的市場競爭力，特別是對于手臂有殘缺的使用者，使其不用動手便可以對手機(jī)屏幕所顯示的內(nèi)容和顯示的方式進(jìn)行調(diào)節(jié)。


圖I是本發(fā)明實(shí)施例的自動調(diào)節(jié)終端界面顯示的裝置的結(jié)構(gòu)示意圖；圖2是本發(fā)明實(shí)施例的優(yōu)選結(jié)構(gòu)示意圖； 圖3是本發(fā)明實(shí)施例的自動調(diào)節(jié)終端界面顯示的方法的流程圖。
具體實(shí)施例方式本發(fā)明提供了一種自動調(diào)節(jié)終端界面顯示的方法及裝置，在實(shí)際生活中，如果需要細(xì)看某個物品，在人的自然行為習(xí)慣中，最自然的行為是靠近該物品，靠近的方式有兩個1、把人眼湊過去看；2、把物品拿得近一些。可以看出如果不使用手，要放大看某個物品，人們最自然的習(xí)慣是湊近去看，只要把人眼靠近物品，就可以放大看。如果使用手，這只手實(shí)際上也沒有多余操作，只把物品挪近，挪近的物品，如果想看上半部或下半部，上下移動物品即可。根據(jù)以上的分析，本發(fā)明實(shí)施例提出一種根據(jù)人眼與屏幕的距離自動調(diào)節(jié)手機(jī)界面顯示的方法和裝置，該方法和裝置模仿上述人類的自然行為，是一種更人性化的交互方案，不會讓使用者付出任何學(xué)習(xí)成本。以下結(jié)合附圖以及實(shí)施例，對本發(fā)明進(jìn)行進(jìn)一步詳細(xì)說明。應(yīng)當(dāng)理解，此處所描述的具體實(shí)施例僅僅用以解釋本發(fā)明，并不限定本發(fā)明。裝置實(shí)施例根據(jù)本發(fā)明的實(shí)施例，提供了一種自動調(diào)節(jié)終端界面顯示的裝置，圖I是本發(fā)明實(shí)施例的自動調(diào)節(jié)終端界面顯示的裝置的結(jié)構(gòu)示意圖，如圖I所示，根據(jù)本發(fā)明實(shí)施例的自動調(diào)節(jié)終端界面顯示的裝置包括獲取單元10、監(jiān)測單元12、以及控制單元14。以下對本發(fā)明實(shí)施例的各個模塊進(jìn)行詳細(xì)的說明。具體地，獲取單元10用于獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)和/或目標(biāo)對象的目標(biāo)區(qū)域模型；具體地，獲取單元10包括影像流收集單元、測距單元、識別單元、以及智能單元。影像流收集單元用于收集影像流，采集影像流中目標(biāo)對象的影像數(shù)據(jù)；優(yōu)選地，在本發(fā)明實(shí)施例中，目標(biāo)對象為人臉或人。在實(shí)際應(yīng)用中，為了確定一個物體在空間中的具體位置，至少需要三個點(diǎn)，因此，影像流收集單元需要收集至少三組影像流，分別采集至少三組影像流中目標(biāo)對象的影像數(shù)據(jù)；從上述描述可以看出，影像流收集單元具有在動態(tài)或靜態(tài)的影像流中采集對應(yīng)影像的功能，此外，在實(shí)際應(yīng)用中，影像流收集單元還能通過私有協(xié)議進(jìn)行影像數(shù)據(jù)傳輸給測距單元。測距單元用于根據(jù)目標(biāo)對象的影像數(shù)據(jù)計算出目標(biāo)對象到終端的物理距離數(shù)據(jù)(即，人或人臉到終端的距離)；在實(shí)際應(yīng)用中，測距單元將采集的至少三組影像數(shù)據(jù)分別標(biāo)記為特定編碼，分析并計算特定編碼間的相互關(guān)系，獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)。也就是說，測距單元支持對影像流的預(yù)處理，此外，測距單元還同時具有通過私有協(xié)議把物理距離數(shù)據(jù)傳輸?shù)阶R別單元的能力；優(yōu)選地，在實(shí)際應(yīng)用中，影像流收集單元和測距單元可以組成終端追蹤傳感模塊，終端追蹤傳感模塊是指具有一定的智能采集和計算能力、并能夠采集對應(yīng)物體影像的設(shè)備或裝置，此外，終端追蹤傳感模塊還能夠計算出對應(yīng)物體到終端的具體物理距離，并以私有協(xié)議進(jìn)行數(shù)據(jù)傳輸。識別單元用于將目標(biāo)區(qū)域從目標(biāo)對象中區(qū)分出來生成目標(biāo)區(qū)域數(shù)據(jù)；優(yōu)選地，在本發(fā)明實(shí)施例中，目標(biāo)區(qū)域?yàn)槿搜邸＞唧w地，識別單元包括分割處理模塊和參數(shù)匹配模塊。其中，分割處理模塊用于根據(jù)智能分割策略初步將目標(biāo)區(qū)域從目標(biāo)對象中區(qū)分出 來，生成初步目標(biāo)區(qū)域數(shù)據(jù)；也就是說，分割處理模塊具有通過傳輸協(xié)議收集影像數(shù)據(jù)流和物理距離數(shù)據(jù)的能力，同時具有智能分割策略，能夠把人眼區(qū)域從背景和/或臉部中區(qū)分出來。參數(shù)匹配模塊用于將初步目標(biāo)區(qū)域數(shù)據(jù)與目標(biāo)區(qū)域模型屬性特征參數(shù)進(jìn)行匹配，確定目標(biāo)區(qū)域的真實(shí)影像，根據(jù)目標(biāo)區(qū)域的真實(shí)影像最終獲取目標(biāo)區(qū)域數(shù)據(jù)。在實(shí)際應(yīng)用中，參數(shù)匹配模塊通過確定的人眼屬性，計算出人眼的特征向量并對人眼做出匹配，具有識別出人眼真實(shí)影像的能力。智能單元接收參數(shù)匹配模塊匹配出的目標(biāo)區(qū)域數(shù)據(jù)(人眼真實(shí)影像數(shù)據(jù))，根據(jù)目標(biāo)區(qū)域數(shù)據(jù)、以及物理距離數(shù)據(jù)計算目標(biāo)區(qū)域模型，具體地，智能單元根據(jù)目標(biāo)區(qū)域數(shù)據(jù)、以及物理距離數(shù)據(jù)計算目標(biāo)區(qū)域的聚焦區(qū)、以及目標(biāo)區(qū)域與終端的角度，并根據(jù)目標(biāo)區(qū)域的聚焦區(qū)、以及目標(biāo)區(qū)域與終端的角度生成目標(biāo)區(qū)域模型；也就是說，智能單元具有根據(jù)距離數(shù)據(jù)計算出人眼聚焦區(qū)和人眼與屏幕角度數(shù)據(jù)，建立具有人眼影像、距離角度數(shù)據(jù)、聚焦數(shù)據(jù)的映射關(guān)系的智能人眼模型的能力。優(yōu)選地，在實(shí)際應(yīng)用中，參數(shù)匹配模塊和智能單元可以組成系統(tǒng)智能模塊，該模塊具有數(shù)據(jù)計算、智能辨別、記憶存儲，提供建立智能人眼模型的功能；監(jiān)測單元12用于根據(jù)目標(biāo)區(qū)域模型和/或物理距離數(shù)據(jù)計算目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系，獲取與追蹤數(shù)據(jù)模型相對應(yīng)的終端界面顯示參數(shù)；也就是說，監(jiān)測單元12具有根據(jù)智能人眼模型和物理距離數(shù)據(jù)的關(guān)系，建立具有人眼追蹤功能的智能人眼追蹤數(shù)據(jù)模型的能力、以及具有通過監(jiān)測物理距離數(shù)據(jù)的變化來觸發(fā)控制單元14的能力。優(yōu)選地，在實(shí)際應(yīng)用中，還可以包括預(yù)設(shè)模塊，用于根據(jù)用戶的設(shè)置對終端界面顯示參數(shù)進(jìn)行調(diào)整，其中，終端界面顯示參數(shù)具體包括內(nèi)容排版、界面風(fēng)格、字體大小、以及移動方式。也就是說，預(yù)設(shè)模塊具有存儲用戶設(shè)置的終端界面顯示參數(shù)的功能；控制單元14用于根據(jù)獲取的終端界面顯示參數(shù)對當(dāng)前終端界面顯示內(nèi)容和/或顯示方式進(jìn)行調(diào)節(jié)。終端顯示模塊在控制單元14的控制下進(jìn)行用戶界面(UserInterface，簡稱為n)的顯示。也就是說，控制單元15支持關(guān)聯(lián)監(jiān)測單元12和預(yù)設(shè)模塊的數(shù)據(jù)，并建立映射關(guān)系，通過發(fā)送調(diào)用預(yù)設(shè)模塊中配置參數(shù)的指令，達(dá)到管理和使用終端顯示模塊的作用。具體地，在實(shí)際應(yīng)用中，如果目標(biāo)區(qū)域追蹤數(shù)據(jù)模型中的目標(biāo)區(qū)域模型發(fā)生變化，則可以只根據(jù)目標(biāo)區(qū)域模型的變化對顯示內(nèi)容進(jìn)行上下左右的調(diào)節(jié)；如果目標(biāo)區(qū)域追蹤數(shù)據(jù)模型中的物理距離數(shù)據(jù)發(fā)生了變化，則可以只根據(jù)物理距離數(shù)據(jù)的變化對顯示方式中字體的大小進(jìn)行調(diào)節(jié)；在目標(biāo)區(qū)域模型和物理距離數(shù)據(jù)都發(fā)生了變化時，可以對顯示內(nèi)容和顯示方式同時進(jìn)行調(diào)節(jié)。從上述處理過程可以看出，需要建立采集的影像流、目標(biāo)對象到終端的物理距離數(shù)據(jù)、目標(biāo)區(qū)域模型(例如，智能人眼模型)、目標(biāo)區(qū)域追蹤數(shù)據(jù)模型(例如，智能人眼追蹤模型)及終端界面顯示參數(shù)之間的映射關(guān)系，具體包括建立每組采集影像流與物理距離數(shù)據(jù)的映射關(guān)系，建立采集影像流、物理距離數(shù)據(jù)與目標(biāo)區(qū)域模型(智能人眼模型)之間的映射關(guān)系，建立目標(biāo)區(qū)域模型(智能人眼模型)、物理距離數(shù)據(jù)與目標(biāo)區(qū)域追蹤數(shù)據(jù)模型(智能人眼追蹤模型)之間的對應(yīng)關(guān)系，建立目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)之間的對應(yīng)關(guān)系。在實(shí)際應(yīng)用中，通過監(jiān)測單元12監(jiān)測到目標(biāo)區(qū)域的變化，啟動控制單元14對這些映射關(guān)系進(jìn)行控制，從而達(dá)到控制終端顯示模塊的目的。
下面結(jié)合附圖，以人眼為例，對本發(fā)明實(shí)施例中上述各個模塊的處理流程進(jìn)行說明。圖2是本發(fā)明實(shí)施例的優(yōu)選結(jié)構(gòu)示意圖，如圖2所示，具體包括終端追蹤傳感模塊、分割處理模塊、系統(tǒng)智能模塊、監(jiān)測模塊、預(yù)設(shè)模塊、系統(tǒng)控制模塊、以及終端顯示模塊，其中，終端追蹤傳感模塊包括影像流收集單元、測距單元，系統(tǒng)智能模塊包括參數(shù)匹配模塊、智能單元，如圖2所示的自動調(diào)節(jié)終端界面顯示的裝置在根據(jù)人眼進(jìn)行終端界面自動調(diào)節(jié)時，需要執(zhí)行如下處理步驟I、用戶拿起手機(jī)，該手機(jī)的終端追蹤傳感模塊立即啟動，終端追蹤傳感模塊同步收集影像流和計算得出物品與終端屏幕的物理距離，以私有協(xié)議向分割處理模塊進(jìn)行數(shù)據(jù)傳輸。具體地，終端追蹤傳感模塊中的影像流收集單元中3個或3個以上的攝像頭開始通過多個方向收集手機(jī)屏幕前方對應(yīng)物體的動態(tài)和靜態(tài)影像流，測距單元接收到這些物體 的影像流后，快速做出影像標(biāo)記，并計算獲得對應(yīng)物體與該傳感模塊之間的物理距離數(shù)據(jù)。通過私有協(xié)議，將收集到的多組影像流和物理距離數(shù)據(jù)傳輸?shù)椒指钐幚砟K。
步驟2、分割處理模塊通過智能影像分割、影像處理等技術(shù)，在獲得影像流和物理距離數(shù)據(jù)后將人眼從影像流中初步區(qū)分出來，生成多組人眼影像數(shù)據(jù)，并建立每組人眼影像流與對應(yīng)物理距離數(shù)據(jù)的映射關(guān)系。人眼影像流通過私有協(xié)議傳輸?shù)较到y(tǒng)智能模塊中的識別單元進(jìn)行再次識別。步驟3、系統(tǒng)智能模塊的參數(shù)匹配模塊接收到多組人眼影像流后，通過多次分析比對人眼的特征向量，對人眼做出匹配，進(jìn)一步確定識別出該人眼的真實(shí)影像，并將該人眼真實(shí)影像的多組數(shù)據(jù)傳輸?shù)街悄軉卧?，進(jìn)行下一步分析。步驟4、系統(tǒng)智能模塊通過智能單元將識別出的多組人眼真實(shí)影像數(shù)據(jù)進(jìn)行存儲，同步接收每組人眼真實(shí)影像數(shù)據(jù)對應(yīng)的物理距離數(shù)據(jù)的映射關(guān)系，根據(jù)該映射關(guān)系獲得人眼聚焦區(qū)和人眼與屏幕的角度數(shù)據(jù)；建立人眼聚焦區(qū)與人眼真實(shí)影像、人眼與屏幕的距離、以及人眼與屏幕的角度之間的映射關(guān)系，生成人眼智能模型，并傳輸給監(jiān)測模塊。步驟5、監(jiān)測模塊通過的物理距離數(shù)據(jù)與人眼智能模型的映射關(guān)系，生成一個智能人眼追蹤數(shù)據(jù)模型。通過監(jiān)測終端追蹤傳感模塊收集的物理距離數(shù)據(jù)，對系統(tǒng)控制模塊發(fā)送指令。一旦用戶移動手機(jī)，用戶與手機(jī)屏幕距離發(fā)生變化，人眼智能模型的映射關(guān)系中的人眼聚焦區(qū)、人眼與屏幕角度將隨之發(fā)生變化，系統(tǒng)控制模塊被啟動。同時，該距離下對應(yīng)的智能人眼追蹤模型中的人眼聚焦區(qū)、人眼與屏幕角度、人眼與距離等數(shù)據(jù)被傳輸?shù)较到y(tǒng)控制|吳塊。步驟6、系統(tǒng)控制模塊通過接口調(diào)用預(yù)設(shè)模塊的預(yù)設(shè)參數(shù)。該預(yù)設(shè)數(shù)據(jù)包括手機(jī)UI界面在距離變化下能展現(xiàn)的一切配置參數(shù)，例如，內(nèi)容排版、界面風(fēng)格、內(nèi)容大小、移動方式等。優(yōu)選地，在用戶在初次使用時，可以根據(jù)用戶的習(xí)慣在預(yù)設(shè)模塊中設(shè)置終端界面顯示參數(shù)。步驟7、系統(tǒng)控制模塊建立監(jiān)測模塊與預(yù)設(shè)模塊 的映射關(guān)系，監(jiān)測模塊一旦監(jiān)測到距離改變，即會觸發(fā)系統(tǒng)控制模塊。系統(tǒng)控制模塊根據(jù)預(yù)設(shè)模塊的參數(shù)控制終端顯示模塊的顯示內(nèi)容和方式，終端顯示模塊收到操作指令后，根據(jù)收到的人眼聚焦區(qū)、人眼與屏幕角度、人眼與距離等數(shù)據(jù)調(diào)用終端界面顯示參數(shù)，發(fā)送指令調(diào)整手機(jī)屏幕上內(nèi)容的顯示排版和風(fēng)格。例如，監(jiān)測模塊檢測到人眼與屏幕水平距離的近遠(yuǎn)變化，終端顯示模塊則在終端n界面上的人眼聚焦區(qū)進(jìn)行放大縮小顯示；同時，根據(jù)人眼與屏幕的角度變化，終端顯示模塊對終端n界面進(jìn)行內(nèi)容的上移下移。具體地，當(dāng)用戶人眼水平靠近屏幕5cm時，監(jiān)測模塊計算出距離數(shù)據(jù)縮短了 5cm，觸發(fā)了系統(tǒng)控制模塊執(zhí)行預(yù)設(shè)模塊的控制操作，系統(tǒng)控制模塊根據(jù)人眼聚焦區(qū)、人眼與屏幕角度數(shù)據(jù)，使n界面人眼聚焦區(qū)內(nèi)容放大I倍。此時手機(jī)終端豎直上移3cm，監(jiān)測模塊會監(jiān)測到人眼和屏幕的人眼聚焦區(qū)距離發(fā)生變化，隨之人眼追蹤模型中對應(yīng)的人眼與屏幕的角度變大，使n界面內(nèi)容下移，用戶非常容易的看到n界面內(nèi)容的上部分。從上述處理可以看出，在本發(fā)明實(shí)施例中，手機(jī)界面的內(nèi)容展現(xiàn)有足夠的靈活度和自由度。手機(jī)系統(tǒng)能夠根據(jù)屏幕和人眼的距離數(shù)據(jù)，調(diào)整手機(jī)屏幕上內(nèi)容顯示的排版和風(fēng)格，例如，屏幕和人眼的距離變小后，屏幕內(nèi)容會自動變大。手機(jī)上存儲了一張圖片，手機(jī)屏幕的圖像就可以根據(jù)人眼和屏幕的距離，自動調(diào)節(jié)成合適的圖像給用戶看，人眼距離屏幕30cm的時候，可以看到整個人物頭像；人眼距離屏幕20cm，屏幕自動調(diào)節(jié)成看到人物頭像的嘴唇。此外，在本發(fā)明實(shí)施例中，手機(jī)系統(tǒng)能夠根據(jù)手機(jī)持有者的習(xí)慣和特征，以最佳界面進(jìn)行展現(xiàn)。例如，某位老人是遠(yuǎn)視，在初始化設(shè)置遠(yuǎn)視數(shù)據(jù)后，在有效值范圍內(nèi)，無論該老人的手機(jī)離人眼遠(yuǎn)還是近，都能很清晰瀏覽界面，而不再受遠(yuǎn)視障礙的影響。借助于本發(fā)明的上述技術(shù)方案，通過建立目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系對終端屏幕的顯示的控制，解決了現(xiàn)有技術(shù)中基于觸摸感應(yīng)的智能交互方式不利于殘疾人操作且需要使用者付出學(xué)習(xí)成本的問題，能夠?qū)ΜF(xiàn)有的手機(jī)操作方式進(jìn)行擴(kuò)充，能夠模擬用戶的生活習(xí)慣，減小用戶學(xué)習(xí)成本，縮小用戶個體差異，提高用戶的使用體驗(yàn)，使手機(jī)操作更加方便靈活，有利于提高終端的市場競爭力。方法實(shí)施例根據(jù)本發(fā)明的實(shí)施例，提供了一種自動調(diào)節(jié)終端界面顯示的方法，圖3是本發(fā)明實(shí)施例的自動調(diào)節(jié)終端界面顯示的方法的流程圖，如圖3所示，根據(jù)本發(fā)明實(shí)施例的自動調(diào)節(jié)終端界面顯示的方法包括如下處理步驟301，獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)和/或目標(biāo)對象的目標(biāo)區(qū)域模型；具體地，步驟301中獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)包括如下處理收集影像流，采集影像流中目標(biāo)對象的影像數(shù)據(jù)，根據(jù)目標(biāo)對象的影像數(shù)據(jù)計算出目標(biāo)對象到終端的物理距離數(shù)據(jù)；優(yōu)選地，在本發(fā)明實(shí)施例中，目標(biāo)對象為人臉或人。在實(shí)際應(yīng)用中，為了確定一個物體在空間中的具體位置，至少需要三個點(diǎn)，因此，在步驟301中，需要執(zhí)行下述處理1、收集至少三組影像流，分別采集至少三組影像流中目標(biāo)對象的影像數(shù)據(jù)；2、將采集的至少三組影像數(shù)據(jù)分別標(biāo)記為特定編碼，分析并計算特定編碼間的相互關(guān)系，獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)。具體地，步驟301中獲取目標(biāo)對象的目標(biāo)區(qū)域模型具體包括1、收集影像流，采集影像流中目標(biāo)對象的影像數(shù)據(jù)，根據(jù)目標(biāo)對象的影像數(shù)據(jù)計算出目標(biāo)對象到終端的物理距離數(shù)據(jù)；2、將目標(biāo)區(qū)域從目標(biāo)對象中區(qū)分出來生成目標(biāo)區(qū)域數(shù)據(jù)，并根據(jù)目標(biāo)區(qū)域數(shù)據(jù)、以及物理距離數(shù)據(jù)確定目標(biāo)區(qū)域模型；在本發(fā)明實(shí)施例中，目標(biāo)區(qū)域?yàn)槿搜邸?
具體地，將目標(biāo)區(qū)域從目標(biāo)對象中區(qū)分出來生成目標(biāo)區(qū)域數(shù)據(jù)具體包括I、根據(jù)智能分割策略初步將目標(biāo)區(qū)域從目標(biāo)對象中區(qū)分出來，生成初步目標(biāo)區(qū)域數(shù)據(jù)；2、將初步目標(biāo)區(qū)域數(shù)據(jù)與目標(biāo)區(qū)域模型屬性特征參數(shù)進(jìn)行匹配，確定目標(biāo)區(qū)域的真實(shí)影像，根據(jù)目標(biāo)區(qū)域的真實(shí)影像最終獲取目標(biāo)區(qū)域數(shù)據(jù)。根據(jù)目標(biāo)區(qū)域數(shù)據(jù)、以及物理距離數(shù)據(jù)計算目標(biāo)區(qū)域模型具體包括I、根據(jù)目標(biāo)區(qū)域數(shù)據(jù)、以及物理距離數(shù)據(jù)計算目標(biāo)區(qū)域的聚焦區(qū)、以及目標(biāo)區(qū)域與終端的角度；2、根據(jù)目標(biāo)區(qū)域的聚焦區(qū)、以及目標(biāo)區(qū)域與終端的角度生成目標(biāo)區(qū)域模型。步驟302，根據(jù)目標(biāo)區(qū)域模型和/或物理距離數(shù)據(jù)確定目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系，獲取與追蹤數(shù)據(jù)模型相對應(yīng)的終端界面顯示參數(shù)；步驟303，根據(jù)獲取的終端界面顯示參數(shù)對當(dāng)前終端界面顯示，內(nèi)容和/或顯示方式進(jìn)行調(diào)節(jié)。具體地，在實(shí)際應(yīng)用中，如果目標(biāo)區(qū)域追蹤數(shù)據(jù)模型中的目標(biāo)區(qū)域模型發(fā)生變化，則可以只根據(jù)目標(biāo)區(qū)域模型的變化對顯示內(nèi)容進(jìn)行上下左右的調(diào)節(jié)；如果目標(biāo)區(qū)域追蹤數(shù)據(jù)模型中的物理距離數(shù)據(jù)發(fā)生了變化，則可以只根據(jù)物理距離數(shù)據(jù)的變化對顯示方式中字體的大小進(jìn)行調(diào)節(jié)；在目標(biāo)區(qū)域模型和物理距離數(shù)據(jù)都發(fā)生了變化時，可以對顯示內(nèi)容和顯示方式同時進(jìn)行調(diào)節(jié)。優(yōu)選地，在實(shí)際應(yīng)用中，還可以根據(jù)用戶的設(shè)置對終端界面顯示參數(shù)進(jìn)行調(diào)整，其中，終端界面顯示參數(shù)具體包括內(nèi)容排版、界面風(fēng)格、字體大小、以及移動方式。從上述處理過程可以看出，需要建立采集的影像流、目標(biāo)對象到終端的物理距離數(shù)據(jù)、目標(biāo)區(qū)域模型(例如，智能人眼模型)、目標(biāo)區(qū)域追蹤數(shù)據(jù)模型(例如，智能人眼追蹤模型)及終端界面顯示參數(shù)之間的映射關(guān)系，具體包括建立每組采集影像流與物理距離數(shù)據(jù)的映射關(guān)系，建立采集影像流、物理距離數(shù)據(jù)與目標(biāo)區(qū)域模型(智能人眼模型)之間的映射關(guān)系，建立目標(biāo)區(qū)域模型(智能人眼模型)、物理距離數(shù)據(jù)與目標(biāo)區(qū)域追蹤數(shù)據(jù)模型(智能人眼追蹤模型)之間的對應(yīng)關(guān)系，建立目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)之間的對應(yīng)關(guān)系。在實(shí)際應(yīng)用中，通過監(jiān)測單元監(jiān)測到目標(biāo)區(qū)域的變化，啟動控制單元對這些映射關(guān)系進(jìn)行控制，從而達(dá)到控制終端顯示模塊的目的。下面結(jié)合附圖，以人眼為例，對本發(fā)明實(shí)施例中上述各個模塊的處理流程進(jìn)行說明。步驟I、用戶拿起手機(jī)，該手機(jī)的終端追蹤傳感模塊立即啟動，終端追蹤傳感模塊同步收集影像流和計算得出物品與終端屏幕的物理距離，以私有協(xié)議向分割處理模塊進(jìn)行數(shù)據(jù)傳輸。具體地，終端追蹤傳感模塊中的影像流收集單元中3個或3個以上的攝像頭開始通過多個方向收集手機(jī)屏幕前方對應(yīng)物體的動態(tài)和靜態(tài)影像流，測距單元接收到這些物體的影像流后，快速做出影像標(biāo)記，通過內(nèi)部的計算方法獲得對應(yīng)物體與該傳感模塊之間的物理距離數(shù)據(jù)。通過私有協(xié)議，將收集到的多組影像流和物理距離數(shù)據(jù)傳輸?shù)椒指钐幚砟K。步驟2、分割處理模塊通過智能影像分割、影像處理等技術(shù)，在獲得影像流和物理距離數(shù)據(jù)后將人眼從影像流中初步區(qū)分出來，生成多組人眼影像數(shù)據(jù)，并建立每組人眼影像流與對應(yīng)物理距離數(shù)據(jù)的映射關(guān)系。人眼影像流通過私有協(xié)議傳輸?shù)较到y(tǒng)智能模塊中的識別單元進(jìn)行再次識別。步驟3、系統(tǒng)智能模塊的識別單元接收到多組人眼影像流后，通過多次分析比對人眼的特征向量，對人眼做出匹配，進(jìn)一步確定識別出該人眼的真實(shí)影像，并將該人眼真實(shí)影像的多組數(shù)據(jù)傳輸?shù)街悄軉卧?，進(jìn)行下一步分析。步驟4、系統(tǒng)智能模塊通過智能單元將識別出的多組人眼真實(shí)影像數(shù)據(jù)進(jìn)行存儲， 同步接收每組人眼真實(shí)影像數(shù)據(jù)對應(yīng)的物理距離數(shù)據(jù)的映射關(guān)系，根據(jù)該映射關(guān)系獲得人眼聚焦區(qū)和人眼與屏幕的角度數(shù)據(jù)；建立人眼聚焦區(qū)與人眼真實(shí)影像、人眼與屏幕的距離、以及人眼與屏幕的角度之間的映射關(guān)系，生成人眼智能模型，并傳輸給監(jiān)測模塊。步驟5、監(jiān)測模塊通過的物理距離數(shù)據(jù)與人眼智能模型的映射關(guān)系，生成一個智能人眼追蹤數(shù)據(jù)模型。通過監(jiān)測終端追蹤傳感模塊收集的物理距離數(shù)據(jù)，對系統(tǒng)控制模塊發(fā)送指令。一旦用戶移動手機(jī)，用戶與手機(jī)屏幕距離發(fā)生變化，人眼智能模型的映射關(guān)系中的人眼聚焦區(qū)、人眼與屏幕角度將隨之發(fā)生變化，系統(tǒng)控制模塊被啟動。同時，該距離下對應(yīng)的智能人眼追蹤模型中的人眼聚焦區(qū)、人眼與屏幕角度、人眼與距離等數(shù)據(jù)被傳輸?shù)较到y(tǒng)控制1吳塊。步驟6、系統(tǒng)控制模塊通過接口調(diào)用預(yù)設(shè)模塊的預(yù)設(shè)參數(shù)。該預(yù)設(shè)數(shù)據(jù)包括手機(jī)UI界面在距離變化下能展現(xiàn)的一切配置參數(shù)，例如，內(nèi)容排版、界面風(fēng)格、內(nèi)容大小、移動方式等。優(yōu)選地，在用戶在初次使用時，可以根據(jù)用戶的習(xí)慣在預(yù)設(shè)模塊中設(shè)置終端界面顯示參數(shù)。步驟7、系統(tǒng)控制模塊建立監(jiān)測模塊與預(yù)設(shè)模塊的映射關(guān)系，監(jiān)測模塊一旦監(jiān)測到距離改變，即會觸發(fā)系統(tǒng)控制模塊。系統(tǒng)控制模塊根據(jù)預(yù)設(shè)模塊的參數(shù)控制終端顯示模塊的顯示內(nèi)容和方式，終端顯示模塊收到操作指令后，根據(jù)收到的人眼聚焦區(qū)、人眼與屏幕角度、人眼與屏幕距離等數(shù)據(jù)調(diào)用終端界面顯示參數(shù)，發(fā)送指令調(diào)整手機(jī)屏幕上內(nèi)容的顯示排版和風(fēng)格。例如，監(jiān)測模塊檢測到人眼與屏幕水平距離的近遠(yuǎn)變化，終端顯示模塊則在終端W界面上的人眼聚焦區(qū)進(jìn)行放大縮小顯示；同時，根據(jù)人眼與屏幕的角度變化，終端顯示模塊對終端n界面進(jìn)行內(nèi)容的上移下移。具體地，當(dāng)用戶人眼水平靠近屏幕5cm時，監(jiān)測模塊計算出距離數(shù)據(jù)縮短了 5cm，觸發(fā)了系統(tǒng)控制模塊執(zhí)行預(yù)設(shè)模塊的控制操作，系統(tǒng)控制模塊根據(jù)人眼聚焦區(qū)、人眼與屏幕角度數(shù)據(jù)，使UI界面人眼聚焦區(qū)內(nèi)容放大I倍。此時手機(jī)終端豎直上移3cm，監(jiān)測模塊會監(jiān)測到人眼和屏幕的人眼聚焦區(qū)距離發(fā)生變化，隨之人眼追蹤模型中對應(yīng)的人眼與屏幕的角度變大，使n界面內(nèi)容下移，用戶非常容易的看到n界面內(nèi)容的上部分。
從上述處理可以看出，在本發(fā)明實(shí)施例中，手機(jī)界面的內(nèi)容展現(xiàn)有足夠的靈活度和自由度。手機(jī)系統(tǒng)能夠根據(jù)屏幕和人眼的距離數(shù)據(jù)，調(diào)整手機(jī)屏幕上內(nèi)容顯示的排版和風(fēng)格，例如，屏幕和人眼的距離變小后，屏幕內(nèi)容會自動變大。手機(jī)上存儲了一張圖片，手機(jī)屏幕的圖像就可以根據(jù)人眼和屏幕的距離，自動調(diào)節(jié)成合適的圖像給用戶看，人眼距離屏幕30cm的時候，可以看到整個人物頭像；人眼距離屏幕20cm，屏幕自動調(diào)節(jié)成看到人物頭像的嘴唇。此外，在本發(fā)明實(shí)施例中，手機(jī)系統(tǒng)能夠根據(jù)手機(jī)持有者的習(xí)慣和特征，以最佳界面進(jìn)行展現(xiàn)。例如，某位老人是遠(yuǎn)視，在初始化設(shè)置遠(yuǎn)視數(shù)據(jù)后，在有效值范圍內(nèi)，無論該老人的手機(jī)離人眼遠(yuǎn)還是近，都能很清晰瀏覽界面，而不再受遠(yuǎn)視障礙的影響。借助于本發(fā)明的上述技術(shù)方案，通過建立目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系對終端屏幕的顯示進(jìn)行控制，對現(xiàn)有的手機(jī)操作方式進(jìn)行了擴(kuò)充，提供了一種新的人機(jī)智能交互模式，本發(fā)明能夠模擬用戶的閱讀習(xí)慣，并根據(jù)用戶的閱讀習(xí)慣對屏幕顯示的內(nèi)容進(jìn)行上下左右調(diào)節(jié)和/或字體大小的調(diào)節(jié)，能夠減小用戶學(xué)習(xí)成本，提高用戶的使用體驗(yàn)，使手機(jī)操作更加方便靈活，有利于提高終端的市場競爭力，特別是對于手臂有殘缺的使用者，使其不用動手便可以對手機(jī)屏幕所顯示的內(nèi)容和顯示的方式進(jìn)行調(diào)節(jié)。
盡管為示例目的，已經(jīng)公開了本發(fā)明的優(yōu)選實(shí)施例，本領(lǐng)域的技術(shù)人員將意識到各種改進(jìn)、增加和取代也是可能的，因此，本發(fā)明的范圍應(yīng)當(dāng)不限于上述實(shí)施例。
權(quán)利要求
1.一種自動調(diào)節(jié)終端界面顯示的方法，其特征在于，包括 獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)和/或所述目標(biāo)對象的目標(biāo)區(qū)域模型； 根據(jù)所述目標(biāo)區(qū)域模型和/或所述物理距離數(shù)據(jù)確定目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)所述目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系，獲取與所述目標(biāo)區(qū)域追蹤數(shù)據(jù)模型相對應(yīng)的終端界面顯示參數(shù)； 根據(jù)獲取的所述終端界面顯示參數(shù)對當(dāng)前終端界面顯示內(nèi)容和/或顯示方式進(jìn)行調(diào)節(jié)。
2.如權(quán)利要求I所述的方法，其特征在于， 所述獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)具體包括 收集影像流，采集所述影像流中目標(biāo)對象的影像數(shù)據(jù)，根據(jù)所述目標(biāo)對象的影像數(shù)據(jù)計算出所述目標(biāo)對象到所述終端的所述物理距離數(shù)據(jù)； 獲取所述目標(biāo)對象的目標(biāo)區(qū)域模型具體包括 收集影像流，采集所述影像流中目標(biāo)對象的影像數(shù)據(jù)，根據(jù)所述目標(biāo)對象的影像數(shù)據(jù)計算出所述目標(biāo)對象到所述終端的所述物理距離數(shù)據(jù)； 將目標(biāo)區(qū)域從所述目標(biāo)對象中區(qū)分出來生成目標(biāo)區(qū)域數(shù)據(jù)，并根據(jù)所述所述目標(biāo)區(qū)域數(shù)據(jù)、以及所述物理距離數(shù)據(jù)確定所述目標(biāo)區(qū)域模型。
3.如權(quán)利要求2所述的方法，其特征在于，將所述目標(biāo)區(qū)域從所述目標(biāo)對象中區(qū)分出來生成目標(biāo)區(qū)域數(shù)據(jù)具體包括 根據(jù)智能分割策略初步將所述目標(biāo)區(qū)域從所述目標(biāo)對象中區(qū)分出來，生成初步目標(biāo)區(qū)域數(shù)據(jù)； 將所述初步目標(biāo)區(qū)域數(shù)據(jù)與目標(biāo)區(qū)域模型屬性特征參數(shù)進(jìn)行匹配，確定所述目標(biāo)區(qū)域的真實(shí)影像，根據(jù)所述目標(biāo)區(qū)域的真實(shí)影像最終獲取所述目標(biāo)區(qū)域數(shù)據(jù)。
4.如權(quán)利要求I所述的方法，其特征在于，所述方法還包括 根據(jù)用戶的設(shè)置對所述終端界面顯示參數(shù)進(jìn)行調(diào)整，其中，所述終端界面顯示參數(shù)具體包括內(nèi)容排版、界面風(fēng)格、字體大小、以及移動方式。
5.如權(quán)利要求2所述的方法，其特征在于，所述目標(biāo)對象為人臉，所述目標(biāo)區(qū)域?yàn)槿搜郏? 根據(jù)所述所述目標(biāo)區(qū)域數(shù)據(jù)、以及所述物理距離數(shù)據(jù)計算目標(biāo)區(qū)域模型具體包括 根據(jù)所述所述目標(biāo)區(qū)域數(shù)據(jù)、以及所述物理距離數(shù)據(jù)計算所述目標(biāo)區(qū)域的聚焦區(qū)、以及所述目標(biāo)區(qū)域與所述終端的角度； 根據(jù)所述目標(biāo)區(qū)域的聚焦區(qū)、以及所述目標(biāo)區(qū)域與所述終端的角度生成所述目標(biāo)區(qū)域模型。
6.一種自動調(diào)節(jié)終端界面顯示的裝置，其特征在于，包括 獲取單元，用于獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)和/或所述目標(biāo)對象的目標(biāo)區(qū)域模型； 監(jiān)測單元，用于根據(jù)所述目標(biāo)區(qū)域模型和/或所述物理距離數(shù)據(jù)確定目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)所述目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系，獲取與所述目標(biāo)區(qū)域追蹤數(shù)據(jù)模型相對應(yīng)的終端界面顯示參數(shù)； 控制單元，用于根據(jù)獲取的所述終端界面顯示參數(shù)對當(dāng)前終端界面顯示內(nèi)容和/或顯示方式進(jìn)行調(diào)節(jié)。
7.如權(quán)利要求6所述的裝置，其特征在于，所述獲取單元具體包括 影像流收集單元，用于收集影像流，采集所述影像流中目標(biāo)對象的影像數(shù)據(jù)； 測距單元，用于根據(jù)所述目標(biāo)對象的影像數(shù)據(jù)計算出所述目標(biāo)對象到所述終端的物理距離數(shù)據(jù)； 識別單元，用于將目標(biāo)區(qū)域從所述目標(biāo)對象中區(qū)分出來生成目標(biāo)區(qū)域數(shù)據(jù)； 智能單元，用于根據(jù)所述目標(biāo)區(qū)域數(shù)據(jù)、以及所述物理距離數(shù)據(jù)確定目標(biāo)區(qū)域模型。
8.如權(quán)利要求7所述的裝置，其特征在于，所述識別單元具體包括 分割處理模塊，用于根據(jù)智能分割策略初步將所述目標(biāo)區(qū)域從所述目標(biāo)對象中區(qū)分出來，生成初步目標(biāo)區(qū)域數(shù)據(jù)； 參數(shù)匹配模塊，用于將所述初步目標(biāo)區(qū)域數(shù)據(jù)與目標(biāo)區(qū)域模型屬性特征參數(shù)進(jìn)行匹配，確定所述目標(biāo)區(qū)域的真實(shí)影像，根據(jù)所述目標(biāo)區(qū)域的真實(shí)影像最終獲取所述目標(biāo)區(qū)域數(shù)據(jù)。
9.如權(quán)利要求6所述的裝置，其特征在于，所述裝置還包括 預(yù)設(shè)模塊，用于根據(jù)用戶的設(shè)置對所述終端界面顯示參數(shù)進(jìn)行調(diào)整，其中，所述終端界面顯示參數(shù)具體包括內(nèi)容排版、界面風(fēng)格、字體大小、以及移動方式。
10.如權(quán)利要求7所述的裝置，其特征在于，所述目標(biāo)對象為人臉，所述目標(biāo)區(qū)域?yàn)槿搜郏? 所述智能單元具體用于根據(jù)所述所述目標(biāo)區(qū)域數(shù)據(jù)、以及所述物理距離數(shù)據(jù)計算所述目標(biāo)區(qū)域的聚焦區(qū)、以及所述目標(biāo)區(qū)域與所述終端的角度，根據(jù)所述目標(biāo)區(qū)域的聚焦區(qū)、以及所述目標(biāo)區(qū)域與所述終端的角度生成所述目標(biāo)區(qū)域模型。
全文摘要
本發(fā)明公開了一種自動調(diào)節(jié)終端界面顯示的方法及裝置。該方法包括獲取目標(biāo)對象到終端的物理距離數(shù)據(jù)和/或目標(biāo)對象的目標(biāo)區(qū)域模型；根據(jù)目標(biāo)區(qū)域模型和/或物理距離數(shù)據(jù)確定目標(biāo)區(qū)域追蹤數(shù)據(jù)模型，并根據(jù)目標(biāo)區(qū)域追蹤數(shù)據(jù)模型與終端界面顯示參數(shù)的映射關(guān)系，獲取與目標(biāo)區(qū)域追蹤數(shù)據(jù)模型相對應(yīng)的終端界面顯示參數(shù)；根據(jù)獲取的終端界面顯示參數(shù)對當(dāng)前終端界面顯示內(nèi)容和/或顯示方式進(jìn)行調(diào)節(jié)。借助于本發(fā)明的技術(shù)方案，能夠減小用戶學(xué)習(xí)成本，提高用戶的使用體驗(yàn)，使手機(jī)操作更加方便靈活。
文檔編號G06F3/01GK102752438SQ20111009927
公開日2012年10月24日 申請日期2011年4月20日 優(yōu)先權(quán)日2011年4月20日
發(fā)明者廖芯, 李滿海, 耿亮亮, 陳春燕 申請人:中興通訊股份有限公司