顯示管理方法和關(guān)聯(lián)計算機(jī)程序產(chǎn)品及電子設(shè)備的制造方法
【專利摘要】提供了用于管理與裝置有關(guān)的至少一個信息項在電子設(shè)備(2)的屏幕上的顯示的方法、計算機(jī)程序產(chǎn)品及電子設(shè)備。所述方法包括如下步驟：a)提供該裝置的豐富圖像，該豐富圖像包括該裝置的圖像和該裝置的興趣點，b)從多個興趣點中選擇至少一個興趣點，以獲得一組所選興趣點，c)選擇要顯示的信息，d)提供對裝置可用的裝置的一組圖，e)通過將要顯示的信息的預(yù)覽插入可用的裝置的每個圖中，根據(jù)預(yù)定義準(zhǔn)則，優(yōu)化裝置的圖，以至少獲得豐富示意表示，f)根據(jù)預(yù)定義準(zhǔn)則對所述豐富示意表示進(jìn)行分類，以及h)顯示所獲得的豐富示意表示的至少一個，以代替所述豐富圖像。
【專利說明】
顯示管理方法和關(guān)聯(lián)計算機(jī)程序產(chǎn)品及電子設(shè)備
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及一種用于管理與一個裝備或者裝置有關(guān)的至少一個信息項在電子設(shè)備的屏幕上的顯示的方法。本發(fā)明還涉及一個實施該方法的計算機(jī)程序產(chǎn)品和實施該計算機(jī)程序產(chǎn)品的電子設(shè)備。
【背景技術(shù)】
[0002]在多個工業(yè)領(lǐng)域，公知將虛擬模型疊加在電子設(shè)備所獲取的一個工業(yè)裝備或者裝置的圖像上。這種疊加能夠以關(guān)于工業(yè)裝置的信息已經(jīng)疊加在其上或與其者關(guān)聯(lián)的新圖像的形式顯示于電子設(shè)備的屏幕上。因此，這種圖像稱為豐富(enriched)圖像。這種顯示方法通常以增強(qiáng)現(xiàn)實的名稱所公知。
[0003]在這方面，例如，文獻(xiàn)FR-A-2990286公開了指出存在信息項的裝置的部件的興趣點。該文獻(xiàn)還披露將興趣點定位于關(guān)于裝置的部件而獲取的圖像上的可能性。
[0004]還已知下面的文獻(xiàn):文獻(xiàn)US-A-2011/0115816、以及Sanghoon Lee等人編寫的文章:《Augmented reality-based computat1nal fieldwork support for equipmentoperat1ns and maintenance)),Automat1n In Construct1n,第20卷，第4號，2010年 11月4日，第338-352頁，D01:10.1016/J.AUTC0N.2010.1l.004;和Hugo Alvarez等人編寫的文章:《Providing guidance for maintenance operat1ns using automatic markerlessAugmented Reality system》，10TH IEEE Internat1nal Symposium On Mixed AndAugmented Reality，2011年10月26日，第181-190頁，DO1:10.1109/ISMAR.2011.6092385。
[0005]還已知從增強(qiáng)現(xiàn)實的顯示模式轉(zhuǎn)到部件的枚舉和在豐富圖像上標(biāo)識的信息。在這種方式中，以列表的形式簡單地擬定(draw up)信息。然而，未提供所考慮的工業(yè)裝置的虛擬表示，這無助于考慮并且分析顯示的數(shù)據(jù)。
[0006]需要一種有助于訪問與用戶有關(guān)的信息的顯示管理方法。

【發(fā)明內(nèi)容】

[0007]為此，本發(fā)明的主題是一種用于管理與裝置有關(guān)的至少一個信息項在電子設(shè)備的屏幕上的顯示的方法，該方法包括如下步驟:
[0008]a)提供該裝置的豐富圖像，該豐富圖像包括該裝置的圖像和該裝置的興趣點，每個興趣點與該裝置的元件所特定的信息項關(guān)聯(lián)，
[0009]b)從多個興趣點中選擇至少一個興趣點，以獲得一組所選興趣點，
[0010]c)選擇要顯示的信息，要顯示的信息是與所選興趣點關(guān)聯(lián)的信息，
[0011 ] d)提供對該裝置可用的該裝置的一組圖，
[0012]e)通過將要顯示的信息的預(yù)覽插入可用的該裝置的每個圖中，根據(jù)預(yù)定義準(zhǔn)則，優(yōu)化該裝置的圖，以至少獲得不同于所述豐富圖像、并且包括該裝置的圖和要顯示的信息項之一的至少一個預(yù)覽的豐富示意表示，其中，該預(yù)覽與該圖兼容，
[0013]f)根據(jù)預(yù)定義準(zhǔn)則對所述豐富示意表示進(jìn)行分類，以及
[0014]h)顯示所獲得的豐富示意表示的至少一個以代替該豐富圖像。
[0015]由于本發(fā)明，顯示管理方法提供在該裝置上標(biāo)識的信息的至少一個豐富示意表示。該表示尤其更為示意性的，并因此提供一種用于分析標(biāo)識信息的簡化方法。
[0016]根據(jù)本發(fā)明的有利的但并非強(qiáng)制性的方面，這種顯示管理方法包括根據(jù)所有技術(shù)上可接受的組合而獲得的以下特征中的一個或多個:
[0017]—該方法還包括選擇數(shù)據(jù)的步驟g)，該數(shù)據(jù)不是與所選興趣點關(guān)聯(lián)的信息，并且電子設(shè)備可以訪問該數(shù)據(jù)，要顯示的信息還包括所選數(shù)據(jù)。
[0018]—所選數(shù)據(jù)源自電子設(shè)備的至少一個傳感器。
[0019]一優(yōu)化步驟e)包括以格(lattice)的形式排序要顯示的信息。
[0020]一優(yōu)化步驟e)包括使用選擇過濾器。
[0021]—優(yōu)化步驟e)包括使用使信息的唯一預(yù)覽與每個興趣點關(guān)聯(lián)的關(guān)聯(lián)陣列，其中興趣點與該信息關(guān)聯(lián)。
[0022]一該方法還包括顯示根據(jù)預(yù)定義準(zhǔn)則的值排序的豐富示意表示的步驟h)。
[0023]—該方法還包括顯示表示預(yù)定義準(zhǔn)則的最高值的豐富示意表示。
[0024]一至少一個步驟由用戶的動作觸發(fā)。
[0025]—用戶的動作是繞著垂直于電子設(shè)備的屏幕的軸旋轉(zhuǎn)電子設(shè)備，并且電子設(shè)備包括至少一個致動按鈕或者觸摸按鈕，并且用戶的動作是按壓致動按鈕或者觸摸按鈕。
[0026]本發(fā)明的主題還是一種計算機(jī)程序產(chǎn)品，該計算機(jī)程序產(chǎn)品包括軟件指令，該軟件指令當(dāng)由并入電子設(shè)備中的信息處理單元實施時實施如上所述的方法。
[0027]本發(fā)明的主題還是一種電子設(shè)備，該電子設(shè)備包括:檢測器;一組傳感器;屏幕;使數(shù)據(jù)顯示于屏幕上的單元；以及信息處理單元，在該信息處理單元上，實施如上所述的計算機(jī)程序產(chǎn)品。
【附圖說明】
[0028]根據(jù)下面參考附圖而僅作為非限制性例子給出的描述，能夠更好地理解本發(fā)明并且本發(fā)明的其他優(yōu)點將更加顯而易見，其中:
[0029]圖1是電子設(shè)備的例子的不意表不；
[0030]圖2是裝置的例子的示意圖；
[0031]圖3是圖1的電子設(shè)備和計算機(jī)程序產(chǎn)品的例子的示意圖；
[0032]圖4是圖3中表示的計算機(jī)程序產(chǎn)品的詳細(xì)示意圖；
[0033]圖5是顯示管理方法的例子的流程圖；
[0034]圖6是在提供了圖2中的裝置的豐富圖像之后獲得的結(jié)果的示意圖；
[00；35]圖7是用戶的動作的示意圖；以及
[0036]圖8是在顯示了豐富示意表示之后獲得的結(jié)果的示意圖。
【具體實施方式】
[0037]在圖1和2中分別表不了電子設(shè)備2和裝置4。
[0038]電子設(shè)備2是用于用戶的。
[0039]優(yōu)選地，電子設(shè)備2是便攜式電子設(shè)備，例如，移動電話或者電子平板電腦。
[0040]作為變型，電子設(shè)備2是計算機(jī)。
[0041]電子設(shè)備2能夠?qū)嵤┯嬎銠C(jī)程序產(chǎn)品，該計算機(jī)程序產(chǎn)品包括用于執(zhí)行顯示管理方法的軟件指令。
[0042]電子設(shè)備2包括:檢測器20、一組傳感器21、顯示單元22、屏幕24、信息處理單元26、收發(fā)機(jī)28以及電源單元30。
[0043]檢測器20例如是適用于獲取裝置4的一個或者多個連續(xù)圖像的圖像傳感器。
[0044]例如，檢測器20是矩陣傳感器，諸如CCD(電荷耦合器件)傳感器或者CM0S(互補(bǔ)金屬氧化物半導(dǎo)體)傳感器。
[0045]檢測器20適用于將獲取的裝置4的圖像13傳送到處理單元26，或者適用于提供所述裝置4的連續(xù)圖像的視頻。
[0046]該組傳感器21例如包括:地理定位單元211、加速度計212、陀螺儀213、觸摸傳感器214、眼睛運動傳感器215以及麥克風(fēng)216。
[0047]作為變型，該組傳感器21包括上述傳感器的任意組合。
[0048]根據(jù)另一變型，該組傳感器21包括其他傳感器，以允許訪問對于用戶來說可能有興趣的其他信息。
[0049]地理定位單元211、加速度計212和陀螺儀213適用于為電子設(shè)備2提供位置數(shù)據(jù)。在其余描述中，將與電子設(shè)備2有關(guān)的位置數(shù)據(jù)稱為數(shù)據(jù)D2。
[0050]例如，地理定位單元211被配置用于與地理定位系統(tǒng)通信，該地理定位系統(tǒng)例如:室內(nèi)定位系統(tǒng)或者室外定位系統(tǒng)，諸如，本身已知的GPS系統(tǒng)(全球定位系統(tǒng))。
[0051]加速度計212用于在至少一個方向上測量電子設(shè)備2的加速度。根據(jù)一種變型，加速度計212包括多個傳感器，用于在三個獨立方向上測量電子設(shè)備2的加速度。
[0052]陀螺儀213用于測量電子設(shè)備2沿著至少一個軸的旋轉(zhuǎn)。根據(jù)一種變型，陀螺儀213包括多個傳感器，用于沿著三個獨立軸測量電子設(shè)備2的旋轉(zhuǎn)。
[0053]觸摸傳感器214、眼睛運動傳感器215和麥克風(fēng)216適用于將與用戶的命令有關(guān)的至少一個信息項發(fā)送到處理單元26。
[0054]觸摸傳感器214被布置在屏幕24的下面，使得屏幕24是能夠顯示觸摸按鈕和/或觸摸鍵盤的觸摸屏。
[0055]眼睛運動傳感器215例如是眼睛紀(jì)錄器(oculometer)，其使得能夠追隨用戶的眼睛運動。
[0056]麥克風(fēng)216用于記錄用戶的聲音。
[0057]顯示單元22能夠使數(shù)據(jù)顯示于屏幕24上。具體地，顯示單元22適用于將任何類型的圖像(尤其是檢測器20所獲取的圖像13或者由處理單元26獲取并隨后修改的圖像)顯示于電子設(shè)備2的屏幕24上。顯示單元22例如是用于使圖像Ia顯示于屏幕24上的軟件程序或者圖形卡。
[0058]屏幕24被配置用于顯示一個或者多個連續(xù)圖像，尤其與檢測器20和/或者顯示單元22交互地。
[0059]對于其余描述，將垂直于屏幕24的表面的軸稱為法軸(normalaxis)X2。
[0060]屏幕24具有可以容易地觀看獲取的圖像Ia的尺寸，諸如，具有大于5英寸、優(yōu)選地大于7英寸、更優(yōu)選地大于9英寸的長度的對角線。
[0061]處理單元26適用于計算機(jī)處理信息。具體地，處理單元26適用于對所獲取的圖像13實施修改、轉(zhuǎn)換和分析。
[0062]處理單元26包括處理器260和與處理器260關(guān)聯(lián)的存儲器262。
[0063]處理器260能夠?qū)嵤┐鎯τ诖鎯ζ?62中的一個或者多個軟件指令。
[0064]電子設(shè)備2的處理單元26的存儲器262能夠存儲數(shù)據(jù)以及計算機(jī)程序產(chǎn)品27。
[0065]存儲器262所存儲的數(shù)據(jù)例如是關(guān)于裝置4的并且以文件、數(shù)值和/或者文本值的形式記錄的數(shù)據(jù)D4。存儲器262所存儲的數(shù)據(jù)也可以是由該組傳感器21提供的電子設(shè)備2的位置數(shù)據(jù)D2。
[0066]計算機(jī)程序產(chǎn)品27包括軟件指令，當(dāng)處理單元26實施該軟件指令時，該軟件指令實施顯示與裝置4有關(guān)的信息項14的方法。
[0067]如圖3中可見，計算機(jī)程序產(chǎn)品27包括第一軟件指令272、第二軟件指令274以及第三軟件指令275。
[0068]第一軟件指令272例如是使得以增強(qiáng)現(xiàn)實方式顯示的軟件指令。
[0069]通過將多個興趣點P與所獲取的圖像Ia關(guān)聯(lián)，第一增強(qiáng)現(xiàn)實軟件指令272能夠提供裝置4的豐富圖像L.。每個興趣點P指示裝置4的元件，并且與有關(guān)元件所特定的信息項Ip關(guān)聯(lián)。興趣點P例如是數(shù)字?jǐn)?shù)據(jù)項Dp，諸如文本值、測量值、圖像、圖形構(gòu)件(graphicalwidget)(圖形界面部件、圖形界面的視覺元件、或者按鈕、滾動條、下拉菜單，等等)、超文本鏈接或者用于以增強(qiáng)現(xiàn)實顯示的任何其他相關(guān)數(shù)據(jù)。
[0070]第二軟件指令274例如是使得以傳統(tǒng)方式顯示的軟件指令。
[0071]第二軟件指令274能夠提供裝置4的豐富圖像Ie3的豐富示意表示匕。
[0072]豐富示意表示Re3例如是圖畫、曲線圖、模型、人機(jī)界面、或者諸如SCADA(數(shù)據(jù)采集與監(jiān)控系統(tǒng))模擬圖的模擬圖。豐富示意表示Re包括多個對象O。
[0073]作為一種變型，如果豐富示意表示Re3是人機(jī)界面或者模擬圖，則其也可以不包括對象O。
[0074]每個對象O指示裝置4的元件，并且與豐富圖像Ie3的相應(yīng)興趣點P關(guān)聯(lián)。因此，每個對象O與有關(guān)元件所特定的信息項1關(guān)聯(lián)。
[0075]對象O例如是數(shù)字?jǐn)?shù)據(jù)項Do，諸如，文本值、測量值、圖像、超文本鏈接或者用于以傳統(tǒng)模式顯示的任何其他相關(guān)數(shù)據(jù)。
[0076]如圖4中可見，第二軟件指令274包括選擇軟件指令276、準(zhǔn)備軟件指令277、分類軟件指令278和預(yù)覽軟件指令279。
[0077]選擇軟件指令276被配置用于檢索與要顯示的興趣點P關(guān)聯(lián)的信息IP。
[0078]準(zhǔn)備軟件指令277能夠提供裝置4的一組圖。
[0079]裝置4的圖是描述裝置4的二維視圖或者三維視圖。每個圖包括要顯示的信息14的預(yù)覽。
[0080]準(zhǔn)備軟件指令277還能夠根據(jù)預(yù)定義準(zhǔn)則C優(yōu)化裝置4的每個圖，以便獲得豐富示意表示Re ο
[0081]預(yù)定義準(zhǔn)則C例如由用戶選擇。于是，預(yù)定義準(zhǔn)則C表示由用戶表達(dá)的關(guān)于豐富示意表示Re的命令。于是，預(yù)定義準(zhǔn)則C可以是“示出最感興趣點P的圖”或者“示出具有要顯示的最多信息的興趣點P的圖”。用戶可以考慮其他準(zhǔn)則C。
[0082]分類軟件指令278被配置用于根據(jù)同一準(zhǔn)則C分類或者排序豐富示意表示Re。
[0083]預(yù)覽軟件指令279能夠顯示示出預(yù)定義準(zhǔn)則C的最高值的豐富示意表示Re。
[0084]作為一種變型，預(yù)覽軟件指令279能夠顯示由用戶選擇的豐富示意表示Re。
[0085]第三軟件指令275是執(zhí)行軟件指令，其被配置用于使豐富圖像Ie的興趣點P與豐富示意表示Re的每個對象O關(guān)聯(lián)。第三軟件指令275由第二軟件指令274控制。
[0086]收發(fā)機(jī)28例如是天線。天線28被配置用于在電子設(shè)備2與電子設(shè)備2外部的至少一個單元之間建立雙向無線電通信。這種外部單元能夠傳遞關(guān)于裝置4的信息14。
[0087]外部單元例如是位于裝置4外的其他位置的服務(wù)器6，還稱為遠(yuǎn)程服務(wù)器。服務(wù)器6尤其在圖1中表示。
[0088]作為一種變型，服務(wù)器6例如以局域網(wǎng)將服務(wù)器6連接到裝置4的方式位于裝置4的附近。
[0089]作為又一種變型，多個外部單元能夠傳遞關(guān)于裝置4的信息14。外部單元例如是遠(yuǎn)程和/或本地服務(wù)器。
[0090]電源單元30被配置用于將電能供給檢測器20、該組傳感器21、顯示單元22、屏幕24、處理單元26以及收發(fā)機(jī)28。
[0091]電源單元30例如是電池。這種電池優(yōu)選地可充電。
[0092]裝置4例如是栗站。栗站4包括管道40、栗42、電動機(jī)、傳感器(未示出)、以及包括變速驅(qū)動器、控制器和致動器的保護(hù)柜(未示出)。
[0093]服務(wù)器6包括數(shù)據(jù)庫60、和用于將數(shù)據(jù)發(fā)送到電子設(shè)備2的單元62。
[0094]數(shù)據(jù)庫60適用于存儲與裝置4有關(guān)的數(shù)據(jù)D4，特別是，與管道40、栗42和該圖未示出的其他部件的狀態(tài)和操作有關(guān)的數(shù)據(jù)。所存儲的數(shù)據(jù)D4例如是每個電動機(jī)消耗的電功率、每個管道40的溫度、每個栗42的壓力、以及每個部件存在還是不存在操作故障。
[0095]此外，以諸如SCADA模擬圖、人機(jī)界面或者因特網(wǎng)頁面的豐富示意表示Re的形式顯示所存儲的數(shù)據(jù)D4。
[0096]發(fā)送單元62被配置用于將存儲于數(shù)據(jù)庫60中的與裝置4有關(guān)的數(shù)據(jù)D4發(fā)送到電子設(shè)備2。
[0097]在以下對顯示方法的實施例子的描述中，解釋電子設(shè)備2和計算機(jī)程序產(chǎn)品27的操作。
[0098]如下所述，由用戶的動作觸發(fā)顯示管理方法的每個步驟。用戶的動作例如是繞著法軸X2旋轉(zhuǎn)電子設(shè)備2、或者按壓電子設(shè)備2的致動按鈕、或者借助觸摸傳感器214按壓屏幕24上的觸摸按鈕。
[0099]用戶使用電子設(shè)備2提取關(guān)于裝置4的多個信息。然后，用戶在電子設(shè)備2上啟動(launch)計算機(jī)程序產(chǎn)品27。產(chǎn)品27實施顯示管理方法。該方法包括多個步驟，如圖5所示并且如下面的描述中所解釋的。
[0100]該顯示方法包括第一步驟a):提供包括獲取的裝置4的圖像Ia和裝置4的興趣點P的裝置4的豐富圖像L.。
[0101]步驟a)由處理單元26實施。
[0102]作為一種變型，在步驟a)中，將裝置4的豐富圖像Ie提供給處理單元26，然后，處理單元26分析興趣點P。當(dāng)模式發(fā)生變化時動態(tài)地執(zhí)行該分析，或者，靜態(tài)地，特別是在屏幕24凍結(jié)之后，執(zhí)行該分析。
[0103]具體地，在步驟a)期間，處理單元26啟動第一軟件指令272。
[0104]根據(jù)一個實施例，電子設(shè)備2通過地理定位識別裝置4。電子設(shè)備2利用地理定位單元211，計算裝置4的坐標(biāo)以及裝置4的定向(orientat1n)。作為例子，所計算的坐標(biāo)是GPS坐標(biāo)。然后，電子設(shè)備2經(jīng)由其天線28，通過發(fā)送單元62與服務(wù)器6的數(shù)據(jù)庫60建立無線電通
?目O
[0105]然后，將電子設(shè)備2的GPS坐標(biāo)和定向發(fā)送到識別裝置4的服務(wù)器6。
[0106]作為一種變型，通過辨識裝置4的圖像來識別裝置4。換句話說，電子設(shè)備2利用檢測器20獲取裝置4的圖像Ia或者連續(xù)圖像。然后，將一個或者多個圖像發(fā)送到識別裝置4的服務(wù)器6。
[0107]作為又一種變型，利用裝置4上存在的唯一代碼，識別裝置4。唯一代碼例如是二維識別碼、條形碼、識別圖像或者符號、還稱為矩陣碼的QR(快速響應(yīng))碼、或者可以明確識別裝置4的任何其他手段。換句話說，電子設(shè)備2利用檢測器20獲取唯一代碼的圖像，然后，將該圖像發(fā)送到服務(wù)器6，用以識別裝置4。
[0108]當(dāng)服務(wù)器6已經(jīng)識別了裝置4時，服務(wù)器6將與所識別的裝置4上存在的興趣點P有關(guān)的信息Ip發(fā)送到電子設(shè)備2。然后，顯示單元22將多個興趣點P顯示于所獲取的圖像Ia上，所獲取的圖像Ia變成豐富圖像Ie。如上所述，每個興趣點P與用戶可以訪問的、裝置4的元件所特定的信息項Ip關(guān)聯(lián)。
[0109]作為一種變型，在步驟a)中，提供裝置4的連續(xù)的豐富圖像(例如視頻)，包括裝置4的獲取的連續(xù)圖像和裝置4的興趣點P。然后，如上所述地識別裝置4。具體地，當(dāng)服務(wù)器6已經(jīng)發(fā)送了與興趣點P有關(guān)的信息Ip時，顯示單元22將多個興趣點P顯示于獲取的連續(xù)圖像上，獲取的連續(xù)圖像變成連續(xù)的豐富圖像。
[0110]在步驟a)結(jié)束時，計算機(jī)程序產(chǎn)品27已經(jīng)以增強(qiáng)現(xiàn)實方式提供了裝置4的視圖。例如，如圖6中所示，借助于顯示單元22，豐富圖像Ie顯示于電子設(shè)備2的屏幕24上。豐富圖像Ie包括獲取的裝置4的一部分的圖像Ia和已經(jīng)在裝置4的該部分上標(biāo)識的興趣點P。具體地，在豐富圖像Ie上，可以看到兩個栗42、管道40和四個興趣點P。在這種情況下，興趣點P是故障消息、包括由裝置4的傳感器進(jìn)行的測量的兩個消息、以及與裝置4的部件的操作有關(guān)的文本消息。
[0111]然而，用戶希望從增強(qiáng)現(xiàn)實的視圖變更為傳統(tǒng)模式的視圖。為此，用戶使電子設(shè)備2繞著法軸X2旋轉(zhuǎn)例如90度，如圖7中所示。用戶的該動作啟動第三軟件指令274。
[0112]然后，該方法包括步驟b):從多個興趣點P中選擇至少一個興趣點P以獲得一組所選興趣點。
[0113]選擇步驟b)由用戶與電子設(shè)備2交互地實施。
[0114]具體地，用戶選擇用戶希望保持的興趣點P。例如，參考圖6，用戶選擇與故障消息和具有測量的消息有關(guān)的興趣點P?？梢允謩拥?例如，利用屏幕24上的觸摸傳感器214、或者利用用于語音辨識的麥克風(fēng)218、或者經(jīng)由任何其他手動選擇方式)或者自動地(例如，通過選擇屏幕24的含有興趣點P的區(qū)域，或者任何其他自動選擇方式)執(zhí)行該用戶選擇。
[0115]在步驟b)結(jié)束時，用戶獲得對應(yīng)于裝置4的最相關(guān)或者最感興趣的元件的該組興趣點P。
[0116]然后，該方法包括步驟c):選擇要顯示的信息，要顯示的信息是與所選興趣點關(guān)聯(lián)的?目息Ip。
[0117]步驟C)由選擇軟件指令276實施。更確切地說，軟件指令276從服務(wù)器6中檢索與所選興趣點P關(guān)聯(lián)的信息Ip。例如，參考圖6，選擇軟件指令276從服務(wù)器6檢索關(guān)于故障和在有關(guān)裝置4的元件上執(zhí)行的測量的信息Ip。作為說明，信息Ip與每個管道40的壓力有關(guān)。
[0118]然后，該方法包括步驟g):選擇數(shù)據(jù)。意欲顯示在步驟g)中選擇的數(shù)據(jù)。
[0119]步驟g)由選擇軟件指令276實施。
[0120]—般地說，在步驟g)中，用戶利用對于用戶認(rèn)為相關(guān)的信息的其他請求完成步驟
c)的選擇。這樣的附加信息源由電子設(shè)備2產(chǎn)生或者生成。作為例子，數(shù)據(jù)由GPS坐標(biāo)、從文件提取的數(shù)據(jù)、數(shù)值輸入或者文本數(shù)據(jù)構(gòu)成。替代地或者附加地，電子設(shè)備2通過在一個或者多個遠(yuǎn)程服務(wù)器上遠(yuǎn)程訪問和檢索數(shù)據(jù)，尋找該數(shù)據(jù)。
[0121]因此，該數(shù)據(jù)不是與所選興趣點P關(guān)聯(lián)的信息Ip，而是對電子設(shè)備2可訪問的數(shù)據(jù)。通常由選擇軟件指令276使得可以這樣訪問數(shù)據(jù)。
[0122]更確切地說，根據(jù)所示的例子，選擇軟件指令276從檢測器20和該組傳感器21檢索數(shù)據(jù)。
[0123]例如，選擇軟件指令276檢索電子設(shè)備2的位置數(shù)據(jù)D2。
[0124]選擇軟件指令276還從處理單元26的存儲器262檢索與裝置4有關(guān)的數(shù)據(jù)D4。作為提示，數(shù)據(jù)D4是關(guān)于裝置4的數(shù)值和文本值。
[0125]例如，參考圖6，選擇軟件指令276從存儲器262檢索來自檢測器20的圖像和為了校正故障而要執(zhí)行的校正動作列表。在步驟g)結(jié)束時，要顯示的信息包括在步驟c)中檢索的信息Ip和在步驟g)中檢索的數(shù)據(jù)。
[0126]然后，該方法包括步驟d):提供對裝置4可用的裝置4的一組圖。
[0127]作為一種變型，只有一個圖可用于裝置4。
[0128]例如，準(zhǔn)備軟件指令277提供包括二維圖和三維圖等的可用圖列表。
[0129]步驟d)由用以以傳統(tǒng)模式274顯示的軟件指令的準(zhǔn)備軟件指令277實施。
[0130]因此，在步驟d)結(jié)束時，對于裝置4，獲得一組圖。這些圖不包括要顯示的信息。
[0131]然后，該方法包括步驟e):優(yōu)化可用于獲得豐富示意表示Re3的、裝置4的每個圖。優(yōu)化步驟e)由準(zhǔn)備軟件指令277實施。根據(jù)預(yù)定義準(zhǔn)則C，執(zhí)行優(yōu)化。
[0132]優(yōu)化包括將要顯示的信息14的預(yù)覽插入裝置4的圖中。預(yù)覽與該圖兼容。
[0133]在步驟e)結(jié)束時，獲得一組豐富示意表示Re3，每個豐富示意表示Re3包括裝置4的圖、和要顯示的信息14的預(yù)覽。與用戶在豐富圖像Ie上選擇的興趣點P關(guān)聯(lián)的對象O被疊加在每個豐富示意表示Re上。
[0134]然后，該方法包括步驟f):根據(jù)預(yù)定義準(zhǔn)則C，對豐富示意表示Re3分類。
[0135]實際上，根據(jù)用戶請求的命令和/或信息，分類對豐富示意表示Re排序。
[0136]在該分類結(jié)束時，該方法能夠確定最佳豐富示意表示Re。
[0137]步驟f)由分類軟件指令278實施。
[0138]提供了幾個實施例，用于特別是同時實施步驟e)和f)。
[0139]根據(jù)第一實施例，為了插入要顯示的信息14的預(yù)覽圖，優(yōu)化步驟e)例如包括使用關(guān)聯(lián)陣列。該陣列包括裝置4的所有興趣點P，并且將諸如URI(統(tǒng)一資源標(biāo)識符)字符串的文本值與每個興趣點P關(guān)聯(lián)。URI指示諸如要顯示的信息的預(yù)覽的資源。信息的這種預(yù)覽例如是SCADA模擬圖或者人機(jī)界面或者因特網(wǎng)頁面。換句話說，該陣列將信息Ip的唯一預(yù)覽與每個興趣點P關(guān)聯(lián)。
[0140]在優(yōu)化期間，用戶為特定圖選擇最相關(guān)的興趣點P。準(zhǔn)備軟件指令277通過關(guān)聯(lián)陣列提取預(yù)覽，并且繼而將該預(yù)覽插入有關(guān)圖中。
[0141]根據(jù)第二實施例，優(yōu)化步驟e)包括使用至少一個選擇過濾器。
[0142]每個選擇過濾器例如是LDAP(輕量級目錄訪問協(xié)議)過濾器。
[0143]LDAP過濾器使得能夠獲得根據(jù)分層樹結(jié)構(gòu)化的數(shù)據(jù)。
[0144]LDAP過濾器例如是近似過濾器。查詢類型“其拼寫接近Peter的名稱”是近似濾波器的示例。
[0145]根據(jù)另一個例子，LDAP過濾器是等同性(equality)過濾器，S卩，查詢類型“完全等同于Peter”。
[0146]根據(jù)又一個例子，LDAP過濾器是比較過濾器、或者“與”、“或”、“異或”型等的邏輯運算。
[0147]每個LDAP過濾器通常由適合于過濾器的語法來表達(dá)。
[0148]在優(yōu)化期間，采用觸摸傳感器214，屏幕24顯示觸摸鍵盤。用戶輸入對應(yīng)于LDAP過濾器的語法。
[0149]作為一種變型，屏幕24顯示對應(yīng)于LDAP過濾器的觸摸按鈕。用戶選擇所需過濾器。
[0150]準(zhǔn)備軟件指令277僅提取與該過濾器關(guān)聯(lián)的興趣點P。然后，關(guān)聯(lián)陣列將諸如URI字符串的文本值、與LDAP過濾器所識別的每個興趣點P關(guān)聯(lián)。URI或者統(tǒng)一資源標(biāo)識符是標(biāo)識網(wǎng)絡(luò)上的物理資源或者抽象資源(例如，網(wǎng)絡(luò)資源)的短字符串，其語法符合對于萬維網(wǎng)建立的互聯(lián)網(wǎng)標(biāo)準(zhǔn)。
[0151]如上所述，URI指示預(yù)覽。因此，用戶可對于特定圖選擇最相關(guān)的興趣點P。準(zhǔn)備軟件指令277通過關(guān)聯(lián)陣列提取預(yù)覽，并且繼而將該預(yù)覽插入有關(guān)圖中。
[0152]LDAP過濾器的使用可用于選擇多個興趣點P。
[0153]在又一個變型中，優(yōu)化步驟e)包括以格的形式對顯示的信息排序。例如，利用形式概念分析(通常以首字母縮略語FCA所公知)執(zhí)行該排序。
[0154]當(dāng)在形式上描述概念，即，完全并且準(zhǔn)確地定義該概念和語境時，F(xiàn)CA分析開始研究概念。這種分析由Rudolf Wille于1982年提出，在格論中作為軟件指令。記得，概念可以由其內(nèi)涵和其外延定義:外延是屬于該概念的對象組，而內(nèi)涵是這些對象共享的屬性組。
[0155]因此，F(xiàn)CA分析是其目標(biāo)是識別對象編組或者屬性編組的一組數(shù)據(jù)分析技術(shù)，也稱為形式概念。
[0156]FCA分析基于格，在數(shù)學(xué)上，格是每對要素具有上限和下限的部分排序集。
[0157]每個FCA分析技術(shù)基于采用將所考慮的形式概念與每個對象和屬性關(guān)聯(lián)的陣列。實施了分析后，輸出其要素被排序的格。
[0158]在步驟e)的特定情況下，形式概念的對象是增強(qiáng)現(xiàn)實視圖中呈現(xiàn)的對象，而形式概念的屬性是指示預(yù)覽的URI字符串。
[0159]替代地，屬性是增強(qiáng)現(xiàn)實視圖中呈現(xiàn)的對象的特性、或者圖形對象的特性。
[0160]如上所述，在所示的例子中，對象是興趣點P，使得該組所選興趣點P是FCA分析中考慮的輸入。
[0161]FCA分析的實施創(chuàng)建包括興趣點P和相應(yīng)預(yù)覽的陣列。由于一個興趣點P可以與多個預(yù)覽關(guān)聯(lián)，所以FCP分析定義格，并且以格方式對形式概念排序。實際上，通過格，分析提供最適當(dāng)?shù)念A(yù)覽。
[0162]因此，采用FCP分析使得能夠?qū)τ脩舫尸F(xiàn)排序預(yù)覽。值得注意的是，F(xiàn)CA分析用于表示類型“最小X和最大Y”的過濾器，并且呈現(xiàn)關(guān)系未“編碼”并因此而事先知道的視圖。
[0163]然后，準(zhǔn)備軟件指令277提取此預(yù)覽并且繼而將該預(yù)覽插入有關(guān)圖中。
[0164]然后，該方法包括步驟h):顯示根據(jù)預(yù)定義準(zhǔn)則C的值排序的豐富示意表示Re3，以代替豐富圖像Ie。步驟h)由預(yù)覽軟件指令279和顯示單元22實施。然后，用戶可以選擇其認(rèn)為最適合其要求的豐富示意表示Re。然后，借助顯示單元22，在屏幕24上顯示所選擇的豐富示意表示Re，以代替豐富圖像L.，并且完全取代豐富圖像L.。
[0165]例如，如圖8所示，用戶選擇表示預(yù)定義準(zhǔn)則C的最高值的豐富示意表示Re3。該豐富示意表示Re包括裝置4的部件的二維圖和預(yù)覽。具體地，在豐富示意表示Re上看到栗42和管道40、以及與豐富圖像Ie的興趣點P關(guān)聯(lián)的對象O。
[0166]如果豐富示意表示Re3是因特網(wǎng)頁面，則預(yù)覽軟件指令279能夠用于咨詢網(wǎng)絡(luò)瀏覽器。如果所選豐富示意表示Re是人機(jī)界面或者模擬圖，則預(yù)覽軟件指令279能夠用于執(zhí)行能夠顯示有關(guān)界面或者模擬圖的特定軟件指令。
[0167]此外，顯示管理方法包括用于從以傳統(tǒng)模式顯示變更為以增強(qiáng)現(xiàn)實顯示的步驟。后面的這些步驟未在圖中示出，并且將在下面的描述中解釋。
[0168]實際上，用戶的動作(例如，將電子設(shè)備2繞著法軸X2旋轉(zhuǎn)90°、或者按壓致動按鈕或者觸摸按鈕)之后，用戶可以觸發(fā)將豐富示意表示Re轉(zhuǎn)換為豐富圖像L.、或者轉(zhuǎn)換為以增強(qiáng)現(xiàn)實顯示的連續(xù)豐富圖像。
[0169]然后，顯示單元22將使得用戶能夠選擇豐富示意表示Re的一部分的觸摸按鈕顯示于屏幕24上。具體地，用戶必須選擇包括至少一個對象O的部分。在該例子中，用戶選擇豐富示意表示Re的包括多個對象O的所需部分。
[0170]作為一種變型，用戶選擇整個豐富示意表示匕。
[0171]然后，利用執(zhí)行軟件指令275，該方法識別與所選擇的對象O關(guān)聯(lián)的興趣點P。
[0172]然后，該方法包括將所選擇的部分或者整個豐富示意表示Re3轉(zhuǎn)換為新的豐富圖像或者新的連續(xù)豐富圖像。
[0173]如上所述，電子設(shè)備2經(jīng)由服務(wù)器6，利用用于唯一地識別裝置4的唯一代碼或者任何其他機(jī)制，通過地理定位、通過圖像辨識，識別裝置4。電子設(shè)備2利用該組傳感器21，計算其GPS坐標(biāo)、其定向、以及檢測器20的相對位置。換句話說，在該步驟結(jié)束時，顯示管理方法已經(jīng)能夠辨識電子設(shè)備2所位于的環(huán)境。
[0174]然后，計算機(jī)程序產(chǎn)品27在裝置4的圖像、或者連續(xù)圖像上定位并且顯示識別的興趣點P。
[0175]更確切地說，該方法定位興趣點P;如果興趣點P位于所選擇的豐富示意表示1的一部分中，則顯示興趣點P;或者，當(dāng)該興趣點P不屬于所選擇的豐富示意表示Re的該部分時，則指示它們的相對位置并且引導(dǎo)用戶找到它們。
[0176]作為一種變型，當(dāng)新的豐富圖像Ie3或者新的連續(xù)圖像不對應(yīng)于所選部分或者整個豐富示意表示RJ寸、并且當(dāng)在圖像Ie上不能直接看到興趣點P時，計算機(jī)程序產(chǎn)品27使指示興趣點P的相對位置的標(biāo)記顯示于屏幕24上。
[0177]該顯示管理方法適用于在增強(qiáng)現(xiàn)實方式的顯示與傳統(tǒng)模式的顯示之間執(zhí)行流暢且平滑的過渡。該方法能夠用于搜索用戶選擇的模式中的正確的視覺界面。然后，該方法呈現(xiàn)具有有序匹配率的界面或者界面列表。當(dāng)有多個滿意界面時，用戶選擇最適當(dāng)?shù)慕缑妗?br>[0178]因此，用戶可以在兩個顯示中發(fā)現(xiàn)相同的信息。第一增強(qiáng)現(xiàn)實顯示對應(yīng)于地理和真實空間，而傳統(tǒng)模式的第二顯示對應(yīng)于專業(yè)視圖，即，用戶更容易理解的邏輯和抽象空間。
[0179]因此，顯示管理方法是用戶獲得傳統(tǒng)模式的顯示的工具，用于對識別的信息執(zhí)行更簡單、示意性的且有效的分析?？梢栽谥T如栗站4的工業(yè)環(huán)境下、以及例如實施三次(tertiary)活動的環(huán)境或者醫(yī)院環(huán)境的非工業(yè)環(huán)境下，采用如上所述的顯示管理方法。
【主權(quán)項】
1.用于管理與裝置(4)有關(guān)的至少一個信息項(14)在電子設(shè)備(2)的屏幕(24)上的顯示的方法，所述方法包括如下步驟: a)提供所述裝置(4)的豐富圖像(Ie3)，所述豐富圖像(Ie3)包括所述裝置(4)的圖像(Ia)和所述裝置(4)的興趣點(P)，每個興趣點(P)與所述裝置(4)的元件所特定的信息項(Ip)關(guān)聯(lián)， b)從多個興趣點(P)中選擇至少一個興趣點(P)，以獲得一組所選興趣點(P)， c)選擇要顯示的信息，要顯示的信息是與所選興趣點(P)關(guān)聯(lián)的信息(Ip)， d)提供對所述裝置(4)可用的所述裝置(4)的一組圖， e)通過將要顯示的信息的預(yù)覽插入可用的所述裝置(4)的每個圖中，根據(jù)預(yù)定義準(zhǔn)則(C)，優(yōu)化所述裝置(4)的所述圖，以至少獲得與所述豐富圖像(Ie)不同、并且包括所述裝置(4)的圖和要顯示的所述信息項中的一個的至少一個預(yù)覽的豐富示意表示(Re)，其中所述預(yù)覽與所述圖兼容， f)根據(jù)所述預(yù)定義準(zhǔn)則(C)對所述豐富示意表示(Re)進(jìn)行分類，以及 h)顯示所獲得的豐富示意表示(Re)的至少一個，以代替所述豐富圖像(Ie)。2.根據(jù)權(quán)利要求1所述的方法，其中所述方法還包括選擇數(shù)據(jù)(D2，D4)的步驟g)，所述數(shù)據(jù)(D2，D4)不是與所選興趣點(P)關(guān)聯(lián)的信息(Ip)，并且所述電子設(shè)備(2)能夠訪問所述數(shù)據(jù)(D2，D4)，要顯示的信息還包括所選數(shù)據(jù)(D2，D4)。3.根據(jù)權(quán)利要求2所述的方法，其中所選數(shù)據(jù)(D2，D4)源自所述電子設(shè)備(2)的至少一個傳感器(20，21)。4.根據(jù)權(quán)利要求1至3中的任何一項所述的方法，其中優(yōu)化步驟e)包括以格的形式排序要顯示的信息。5.根據(jù)權(quán)利要求1至3中的任何一項所述的方法，其中優(yōu)化步驟e)包括使用選擇過濾器。6.根據(jù)權(quán)利要求1至3中的任何一項所述的方法，其中優(yōu)化步驟e)包括使用將信息(Ip)的唯一預(yù)覽與每個興趣點(P)關(guān)聯(lián)的關(guān)聯(lián)陣列，所述興趣點(P)與所述信息(Ip)關(guān)聯(lián)。7.根據(jù)權(quán)利要求1至6中的任何一項所述的方法，其中顯示步驟h)包括顯示根據(jù)所述預(yù)定義準(zhǔn)則(C)的值排序的豐富示意表示(Re3)。8.根據(jù)權(quán)利要求7所述的方法，其中所述方法還包括顯示呈現(xiàn)所述預(yù)定義準(zhǔn)則(C)的最高值的豐富示意表示(Re)。9.根據(jù)權(quán)利要求1至8中的任何一項所述的方法，其中至少一個步驟由用戶的動作觸發(fā)。10.根據(jù)權(quán)利要求9所述的方法，其中所述用戶的動作是繞著垂直于所述電子設(shè)備(2)的屏幕(24)的軸(X2)旋轉(zhuǎn)所述電子設(shè)備(2)，并且其中所述電子設(shè)備(2)包括至少一個致動按鈕或者觸摸按鈕，并且所述用戶的動作是按壓所述致動按鈕或者所述觸摸按鈕。11.計算機(jī)程序產(chǎn)品(27)，包括軟件指令(272、274、275、276、277、278,279),所述軟件指令(272、274、275、276、277、278、279)當(dāng)由并入電子設(shè)備(2)中的處理單元(26)實施時實施根據(jù)權(quán)利要求1至10中的任何一項所述的方法。12.電子設(shè)備(2)，包括:檢測器(20);—組傳感器(21);屏幕(24);用于在所述屏幕上顯示(22)數(shù)據(jù)的單元；以及處理單元(26)，在其上實施根據(jù)權(quán)利要求11所述的計算機(jī)程序產(chǎn)CO
【文檔編號】G06F3/0488GK105867612SQ201610081191
【公開日】2016年8月17日
【申請日】2016年2月5日
【發(fā)明人】D.莫蘭德, T.梅夫塔
【申請人】施耐德電器工業(yè)公司