可編程顯示器、控制方法及程序的制作方法
【專利摘要】本發(fā)明提供能夠在事后確定通過(guò)進(jìn)行臉部認(rèn)證來(lái)容許了對(duì)應(yīng)用程序的訪問(wèn)的用戶的可編程顯示器、控制方法及程序?？删幊田@示器(1)中相對(duì)應(yīng)地存儲(chǔ)有用戶的臉部的特征數(shù)據(jù)和用戶的識(shí)別信息。可編程顯示器(1)基于通過(guò)拍攝得到的用戶的圖像數(shù)據(jù)和特征數(shù)據(jù)來(lái)進(jìn)行臉部認(rèn)證。可編程顯示器(1)在用戶認(rèn)證成功的情況下，容許用戶對(duì)應(yīng)用程序的訪問(wèn)?？删幊田@示器(1)在相對(duì)應(yīng)地存儲(chǔ)有認(rèn)證成功的用戶的識(shí)別信息和用于表示成為了容許訪問(wèn)的狀態(tài)的履歷。
【專利說(shuō)明】可編程顯示器、控制方法及程序

【技術(shù)領(lǐng)域】
[0001 ] 本發(fā)明涉及可編程顯示器、可編程顯示器的控制方法以及用于控制可編程顯示器的程序。

【背景技術(shù)】
[0002]以往，已知有以能夠進(jìn)行通信的方式與可編程邏輯控制器(PLC)連接的可編程顯示器。例如，專利文獻(xiàn)I公開了具有HMI (人機(jī)界面)處理部和臉部記錄處理部的可編程顯示器。臉部記錄處理部具有臉部圖像數(shù)據(jù)庫(kù)、臉部檢測(cè)部、共用保存器、臉部記錄(logging)部、臉部記錄控制部、臉部記錄文件。另外，該可編程顯示器以能夠進(jìn)行通信的方式與照相機(jī)相連。
[0003]在操作人員在顯示于可編程顯示器的畫面上進(jìn)行規(guī)定的開關(guān)操作時(shí)，HMI處理部向臉部記錄處理部發(fā)送指示，以使該臉部記錄處理部執(zhí)行用于記錄操作人員的臉部圖像的處理。在臉部記錄處理部接收到該指示后，由臉部檢測(cè)部從通過(guò)照相機(jī)拍攝得到的操作人員的圖像中檢測(cè)出正面的臉部圖像，并將其作為文件保存到規(guī)定的臉部圖像數(shù)據(jù)庫(kù)中。另夕卜，臉部檢測(cè)部將臉部圖像數(shù)據(jù)庫(kù)中的文件的路徑名，與開關(guān)操作內(nèi)容、檢測(cè)了臉部的日期與時(shí)刻、進(jìn)行了開關(guān)操作的畫面的畫面編號(hào)等的與操作履歷相關(guān)的信息一起寫入到共用保存器中。臉部記錄部按照臉部記錄控制部的指示，將寫入到共用保存器中的數(shù)據(jù)保存至臉部記錄文件中。
[0004]另外，以往，已知有臉部認(rèn)證的技術(shù)。例如，專利文獻(xiàn)2公開了進(jìn)行臉部認(rèn)證的出入管理系統(tǒng)。該出入管理系統(tǒng)利用臉部核對(duì)裝置來(lái)管理對(duì)設(shè)施的出入，所述臉部核對(duì)裝置根據(jù)出入人員的臉部圖像，來(lái)核對(duì)該出入人員是否為事先登錄的人物。在出入管理系統(tǒng)中，在臉部核對(duì)裝置的附近設(shè)置有用于拍攝出入人員的圖像的監(jiān)視照相機(jī)，由此利用記錄部記錄來(lái)自監(jiān)視照相機(jī)的圖像，并且將其與臉部核對(duì)裝置的核對(duì)結(jié)果等出入履歷一起發(fā)送至出入管理服務(wù)器。
[0005]專利文獻(xiàn)3公開了具有拍攝裝置、操作畫面控制部及顯示部的圖像形成裝置。操作畫面控制部具有臉部區(qū)域檢測(cè)部、移動(dòng)判斷部、臉部特征提取部、屬性檢測(cè)部及顯示控制部。臉部區(qū)域檢測(cè)部從由拍攝裝置拍攝得到的圖像數(shù)據(jù)中檢測(cè)出用戶的臉部區(qū)域。移動(dòng)判斷部判斷用戶是否已靠近上述圖像形成裝置。在通過(guò)移動(dòng)判斷部判斷為用戶已靠近圖像形成裝置的情況下，臉部特征提取部從臉部區(qū)域中提取臉部的特征。屬性檢測(cè)部基于由臉部特征提取部提取到的臉部特征，來(lái)檢測(cè)用戶的屬性。顯示控制部將與由屬性檢測(cè)部檢測(cè)出的用戶的屬性相對(duì)應(yīng)的操作畫面顯示到圖像形成裝置的顯示部上。
[0006]專利文獻(xiàn)4公開了監(jiān)視對(duì)監(jiān)視裝置進(jìn)行操作的人員的監(jiān)視系統(tǒng)。該監(jiān)視系統(tǒng)具有操作人員監(jiān)視裝置。操作人員監(jiān)視裝置具有照相機(jī)、臉部圖像存儲(chǔ)部及操作權(quán)限確定部。照相機(jī)對(duì)進(jìn)行操作的人的臉部進(jìn)行拍攝，并輸出拍攝得到的臉部圖像數(shù)據(jù)。臉部圖像存儲(chǔ)部中預(yù)先與操作權(quán)限的范圍相對(duì)應(yīng)地登錄有核對(duì)用臉部圖像數(shù)據(jù)。操作權(quán)限確定部通過(guò)對(duì)周期性導(dǎo)入的或在每次操作時(shí)導(dǎo)入的正在進(jìn)行操作的人的臉部圖像數(shù)據(jù)與上述核對(duì)用臉部圖像數(shù)據(jù)進(jìn)行核對(duì)，來(lái)確定正在進(jìn)行操作的人所具有的操作權(quán)限的范圍，并且根據(jù)該操作權(quán)限的范圍來(lái)變更能夠?qū)ΡO(jiān)視裝置進(jìn)行操作的范圍。
[0007]現(xiàn)有技術(shù)文獻(xiàn)
[0008]專利文獻(xiàn)
[0009]專利文獻(xiàn)1:日本特開2008 - 112222號(hào)公報(bào)
[0010]專利文獻(xiàn)2:日本特開2004 - 78687號(hào)公報(bào)
[0011]專利文獻(xiàn)3:日本特開2011 — 59194號(hào)公報(bào)
[0012]專利文獻(xiàn)4:日本特開2008 - 165353號(hào)公報(bào)
[0013]但是，在專利文獻(xiàn)I的可編程顯示器中，能夠?qū)⑦M(jìn)行臉部認(rèn)證的結(jié)果作為履歷來(lái)保留，但是不能通過(guò)進(jìn)行臉部認(rèn)證來(lái)容許對(duì)應(yīng)用程序的訪問(wèn)。因此，在專利文獻(xiàn)I中，不能基于通過(guò)進(jìn)行臉部認(rèn)證來(lái)容許了對(duì)應(yīng)用程序的訪問(wèn)的情況來(lái)記錄用于表示成為了容許對(duì)應(yīng)用程序的訪問(wèn)的狀態(tài)的情況的履歷。在專利文獻(xiàn)2至4中，并未公開或提示對(duì)通過(guò)進(jìn)行臉部認(rèn)證來(lái)容許對(duì)應(yīng)用程序的訪問(wèn)的技術(shù)。


【發(fā)明內(nèi)容】

[0014]本申請(qǐng)發(fā)明是鑒于上述問(wèn)題而提出的，其目的在于，提供能夠在事后確定通過(guò)進(jìn)行臉部認(rèn)證來(lái)容許了對(duì)應(yīng)用程序的訪問(wèn)的用戶的可編程顯示器、該可編程顯示器的控制方法以及用于控制該可編程顯示器的程序。
[0015]根據(jù)本發(fā)明的一個(gè)方案，可編程顯示器能夠控制對(duì)應(yīng)用程序的訪問(wèn)?？删幊田@示器具有:存儲(chǔ)單元，其對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)有用戶的臉部的特征數(shù)據(jù)和用戶的識(shí)別信息；認(rèn)證單元，其基于拍攝得到的用戶的圖像數(shù)據(jù)和特征數(shù)據(jù)來(lái)進(jìn)行臉部認(rèn)證；訪問(wèn)控制單元，其在用戶認(rèn)證成功的情況下，容許用戶對(duì)應(yīng)用程序的訪問(wèn)；管理單元，其將認(rèn)證成功的用戶的識(shí)別信息和用于表示處于容許訪問(wèn)的狀態(tài)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)單元中。
[0016]優(yōu)選地，還具有:顯示屏，顯示控制單元，其將包含操作按鈕的圖像的操作畫面顯示到顯示屏上。管理單元，在容許了用戶對(duì)應(yīng)用程序的訪問(wèn)的狀態(tài)下進(jìn)行了用于對(duì)操作按鈕的圖像進(jìn)行指定的操作的情況下，還將用戶的識(shí)別信息與和操作按鈕相對(duì)應(yīng)的操作的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)單元中。
[0017]優(yōu)選地，管理單元，在用戶通過(guò)臉部認(rèn)證來(lái)未認(rèn)證成功的情況下，還將拍攝得到的用戶的圖像數(shù)據(jù)中的臉部的圖像數(shù)據(jù)存儲(chǔ)到存儲(chǔ)單元中。
[0018]優(yōu)選地，可編程顯示器還具有確定單元，在容許了用戶對(duì)應(yīng)用程序的訪問(wèn)時(shí)拍攝得到的用戶的圖像數(shù)據(jù)中包含臉部的圖像數(shù)據(jù)的情況下，該確定單元確定該臉部的視線方向。顯示控制單元在發(fā)生了預(yù)先規(guī)定的事件的情況下，將預(yù)先規(guī)定的圖像顯示到顯示屏上。管理單元，將發(fā)生了預(yù)先規(guī)定的事件時(shí)的視線方向與事件關(guān)聯(lián)對(duì)應(yīng)地存儲(chǔ)到存儲(chǔ)單元中。
[0019]優(yōu)選地，可編程顯示器還具有判斷單元，該判斷單元基于拍攝，來(lái)判斷用戶的臉部區(qū)域是否大于預(yù)先規(guī)定的尺寸。訪問(wèn)控制單元，將判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸作為條件，容許用戶對(duì)應(yīng)用程序的訪問(wèn)。管理單元，在拍攝得到的圖像數(shù)據(jù)中包含多個(gè)用戶的情況下，將多個(gè)用戶中的判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶的識(shí)別信息與表示容許了訪問(wèn)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)單元中。
[0020]優(yōu)選地，管理單元，還將多個(gè)用戶中的除了判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶的識(shí)別信息存儲(chǔ)到存儲(chǔ)單元中。
[0021]優(yōu)選地，管理單元，還將在除了判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶中的未認(rèn)證成功的用戶的圖像數(shù)據(jù)，存儲(chǔ)到存儲(chǔ)單元中。
[0022]根據(jù)本發(fā)明的另一方案，控制方法用于對(duì)應(yīng)用程序的訪問(wèn)進(jìn)行控制的可編程顯示器。該控制方法包括:臉部認(rèn)證步驟，基于拍攝得到的被拍攝體的圖像數(shù)據(jù)和用于表示用戶的臉部的特征的特征數(shù)據(jù)，來(lái)進(jìn)行臉部認(rèn)證；訪問(wèn)容許步驟，在通過(guò)臉部認(rèn)證來(lái)確定了用戶的情況下，容許用戶對(duì)應(yīng)用程序的訪問(wèn)；存儲(chǔ)步驟，將所確定的用戶的識(shí)別信息和用于表示容許了訪問(wèn)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器中。
[0023]優(yōu)選地，控制方法還包括將包含操作按鈕的圖像的操作畫面顯示到顯示屏上的步驟。在存儲(chǔ)步驟中，在容許了用戶對(duì)應(yīng)用程序的訪問(wèn)的狀態(tài)下進(jìn)行了用于對(duì)操作按鈕的圖像進(jìn)行指定的操作的情況下，將用戶的識(shí)別信息與和操作按鈕相對(duì)應(yīng)的操作的履歷相對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器中。
[0024]優(yōu)選地，在存儲(chǔ)步驟中，在用戶通過(guò)臉部認(rèn)證來(lái)未認(rèn)證成功的情況下，將拍攝得到的用戶的圖像數(shù)據(jù)中的臉部的圖像數(shù)據(jù)存儲(chǔ)到存儲(chǔ)器中。
[0025]優(yōu)選地，控制方法包括:在容許了用戶對(duì)應(yīng)用程序的訪問(wèn)時(shí)進(jìn)行拍攝得到的用戶的圖像數(shù)據(jù)中包含臉部的圖像數(shù)據(jù)的情況下，確定該臉部的視線方向的步驟；在發(fā)生了預(yù)先規(guī)定的事件的情況下，將預(yù)先規(guī)定的圖像顯示到顯示屏上的步驟；將發(fā)生了預(yù)先規(guī)定的事件時(shí)的視線方向與事件關(guān)聯(lián)對(duì)應(yīng)地存儲(chǔ)到存儲(chǔ)單元中的步驟。
[0026]優(yōu)選地，還包括基于拍攝來(lái)判斷被拍攝體的臉部區(qū)域是否大于預(yù)先規(guī)定的尺寸的步驟。在訪問(wèn)容許步驟中，將判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸作為條件，容許用戶對(duì)應(yīng)用程序的訪問(wèn)。在存儲(chǔ)步驟中，在拍攝得到的圖像數(shù)據(jù)中包含多個(gè)用戶的情況下，將多個(gè)用戶中的判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶的識(shí)別信息與表示容許了訪問(wèn)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)單元中。
[0027]優(yōu)選地，在存儲(chǔ)步驟中，將多個(gè)用戶中的除了判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶的識(shí)別信息存儲(chǔ)到存儲(chǔ)單元中。
[0028]優(yōu)選地，在存儲(chǔ)步驟中，將在除了判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶中的未認(rèn)證成功的用戶的圖像數(shù)據(jù)，存儲(chǔ)到存儲(chǔ)單元中。
[0029]根據(jù)本發(fā)明的又一方案，程序用于對(duì)用于控制對(duì)應(yīng)用程序的訪問(wèn)的可編程顯示器進(jìn)行控制。程序使可編程顯示器的處理器執(zhí)行以下步驟:臉部認(rèn)證步驟，基于拍攝得到的被拍攝體的圖像數(shù)據(jù)和用于表示用戶的臉部的特征的特征數(shù)據(jù)，來(lái)進(jìn)行臉部認(rèn)證；訪問(wèn)容許步驟，在通過(guò)臉部認(rèn)證來(lái)確定了用戶的情況下，容許用戶對(duì)應(yīng)用程序的訪問(wèn)；存儲(chǔ)步驟，將所確定的用戶的識(shí)別信息和用于表示容許了訪問(wèn)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器中。
[0030]根據(jù)本發(fā)明，能夠在事后確定通過(guò)進(jìn)行臉部認(rèn)證來(lái)容許了對(duì)應(yīng)用程序的訪問(wèn)的用戶。

【專利附圖】

【附圖說(shuō)明】
[0031]圖1是顯示器的主視圖。
[0032]圖2是用于說(shuō)明顯示器的認(rèn)證處理的圖。
[0033]圖3是用于說(shuō)明用戶通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功之后的操作畫面的例子的圖。
[0034]圖4是用于說(shuō)明顯示器的處理履歷的圖。
[0035]圖5是用于說(shuō)明顯示器的硬件結(jié)構(gòu)的一個(gè)例子的圖。
[0036]圖6是表示顯示器的功能結(jié)構(gòu)的功能框圖。
[0037]圖7A、圖7B、圖7C是用于說(shuō)明用于進(jìn)行與臉部認(rèn)證相關(guān)的系統(tǒng)設(shè)定的畫面的圖。
[0038]圖8是用于說(shuō)明保存在登錄圖像DB中的數(shù)據(jù)的圖。
[0039]圖9A、圖9B、圖9C是用于說(shuō)明圖8的臉部圖像數(shù)據(jù)的圖。
[0040]圖10A、圖10B、圖1OC是與認(rèn)證成功的用戶相對(duì)應(yīng)的畫面的例子，表示了與圖3的例子不同的畫面。
[0041]圖11是表示在顯示圖10A、圖10B、圖1OC的各用戶畫面時(shí)所參照的數(shù)據(jù)D3的圖。
[0042]圖12是表示由管理部管理的履歷數(shù)據(jù)D5的圖。
[0043]圖13是表示保存在未登錄人員DB中的數(shù)據(jù)D7的圖。
[0044]圖14A、圖14B是表示在由限制部限制進(jìn)行處理的情況下顯示的畫面的圖。
[0045]圖15是用于說(shuō)明顯示器的處理流程的流程圖。
[0046]圖16是用于說(shuō)明取代圖8所示的數(shù)據(jù)Dl而保存在登錄圖像DB351中的數(shù)據(jù)的圖。
[0047]圖17是用于說(shuō)明檢測(cè)用戶的視線方向的結(jié)構(gòu)的圖。
[0048]圖18是表示利用照相機(jī)17拍攝得到的被拍攝體的圖像數(shù)據(jù)中包含多個(gè)用戶的狀態(tài)的圖。
[0049]其中，附圖標(biāo)記說(shuō)明如下:
[0050]1:顯示器
[0051]11:CPU
[0052]12:R0M
[0053]13:RAM
[0054]14:閃存 ROM
[0055]15:時(shí)鐘
[0056]16:操作鍵
[0057]17:照相機(jī)
[0058]18:觸摸屏
[0059]19:通信接口
[0060]81:顯示屏
[0061]82:觸控面板
[0062]101:拍攝部
[0063]102:尺寸判斷部
[0064]103:生成部
[0065]104:臉部認(rèn)證部
[0066]105:訪問(wèn)控制部
[0067]106:管理部
[0068]107:輸入部
[0069]108:接收部
[0070]109:顯示控制部
[0071]110:顯示部
[0072]111:字符串判斷部
[0073]112:通信處理部
[0074]113:限制部
[0075]114:視線確定部
[0076]115:存儲(chǔ)部
[0077]511: 一般設(shè)定畫面
[0078]512:臉部認(rèn)證設(shè)定畫面
[0079]513:詳細(xì)設(shè)定畫面
[0080]531、532、533:用戶畫面
[0081]801,802,803,804,834,891:對(duì)象
[0082]831:狀態(tài)
[0083]832:維護(hù)菜單
[0084]833:管理菜單
[0085]910、920、930:人物
[0086]351:登錄圖像DB
[0087]352:視線 DB
[0088]353:未登錄人員DB
[0089]354:履歷 DB
[0090]355:1D 以及密碼 DB
[0091]356:畫面數(shù)據(jù)DB

【具體實(shí)施方式】
[0092]一邊參照附圖，一邊對(duì)于本發(fā)明的實(shí)施方式的可編程顯示器(下面，僅稱為“顯示器”)進(jìn)行詳細(xì)說(shuō)明。此外，對(duì)于圖中的相同或等同部分，標(biāo)注相同附圖標(biāo)記，不反復(fù)進(jìn)行說(shuō)明。
[0093]< A.外觀 >
[0094]圖1是本實(shí)施方式的顯示器I的主視圖。將顯示器I與PLC (可編程邏輯控制器)連接起來(lái)使用，該顯示器I發(fā)揮PLC的人機(jī)接口(HMI)的功能。參照?qǐng)D1，顯示器I具有操作鍵16、照相機(jī)17、觸摸屏18。觸摸屏18包括顯示屏和觸控面板。
[0095]<Β.處理概要>
[0096]顯示器I通過(guò)對(duì)用戶的臉部圖像進(jìn)行認(rèn)證，來(lái)控制對(duì)預(yù)先保存在顯示器I中的應(yīng)用程序的訪問(wèn)。具體地說(shuō)，在用戶認(rèn)證成功的情況下，顯示器I容許對(duì)該應(yīng)用程序的訪問(wèn)。下面，舉例說(shuō)明容許對(duì)應(yīng)用程序的訪問(wèn)的處理(即，“登錄處理”)。而且，下面，針對(duì)顯示器I所執(zhí)行的其它的主要處理的內(nèi)容，還說(shuō)明“編輯處理”和“履歷記錄處理”。
[0097]此外，下面，“登錄狀態(tài)”是指容許了對(duì)應(yīng)用程序的訪問(wèn)的狀態(tài)，“注銷狀態(tài)”是指未容許對(duì)應(yīng)用程序的訪問(wèn)的狀態(tài)。另外，在顯示器I中，當(dāng)容許了對(duì)應(yīng)用程序的訪問(wèn)時(shí)，發(fā)行對(duì)應(yīng)用程序的訪問(wèn)權(quán)，當(dāng)未容許對(duì)應(yīng)用程序的訪問(wèn)時(shí)，取消對(duì)應(yīng)用程序的訪問(wèn)權(quán)。
[0098](bl.登錄處理)
[0099]圖2是用于說(shuō)明顯示器I的認(rèn)證處理的圖。參照?qǐng)D2，當(dāng)人站在顯示器I的前方(觸摸屏18 —側(cè))時(shí)，開始基于由照相機(jī)17拍攝得到的被拍攝體(人及背景)的圖像數(shù)據(jù)和預(yù)先存儲(chǔ)在顯示器I中的用戶的臉部的特征數(shù)據(jù)，來(lái)進(jìn)行臉部認(rèn)證。此外，臉部認(rèn)證為以往已知的技術(shù)，因此在此不反復(fù)詳細(xì)說(shuō)明。
[0100]在用戶通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的情況下，顯示器I容許對(duì)應(yīng)用程序的訪問(wèn)。即，在本實(shí)施方式中，顯示器I容許成為認(rèn)證對(duì)象的用戶的登錄。具體地說(shuō)，顯示器I轉(zhuǎn)移至容許對(duì)預(yù)先存儲(chǔ)在顯示器I中的數(shù)據(jù)的訪問(wèn)的狀態(tài)。而且，換言之，在用戶通過(guò)臉部認(rèn)證來(lái)認(rèn)證認(rèn)證的情況(認(rèn)證成功的情況)下，顯示器I將顯示器I的狀態(tài)從注銷狀態(tài)切換到登錄狀態(tài)。另外，顯示器I基于切換到登錄狀態(tài)的情況，將預(yù)先規(guī)定的用戶畫面顯示到觸摸屏18的顯示屏上。如上所述，根據(jù)顯示器1，能夠通過(guò)臉部認(rèn)證來(lái)進(jìn)行登錄。此外，用戶畫面是用戶用于進(jìn)行操作及/或確認(rèn)的畫面。用戶畫面包括包含操作按鈕的操作畫面和不包含操作按鈕的畫面。
[0101](b2.編輯處理)
[0102]圖3是用于說(shuō)明用戶通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功之后的用戶畫面的例子的圖。圖3的(A)部分是用于說(shuō)明在判斷為通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶是對(duì)應(yīng)用程序的操作權(quán)限比一般操作人員(下面，僅稱為“操作人員”)更高的管理人員的情況下顯示到顯示器I上的畫面的圖。圖3的(B)部分是用于說(shuō)明在判斷為通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶是操作人員的情況下顯示到顯示器I上的畫面的圖。
[0103]參照?qǐng)D3，顯示器I基于通過(guò)臉部認(rèn)證來(lái)容許了對(duì)應(yīng)用程序的訪問(wèn)的情況，將多個(gè)畫面中的與認(rèn)證成功的用戶相對(duì)應(yīng)的畫面顯示到顯示屏上。例如，在男性α為管理人員的情況下，顯示器I將多個(gè)能夠選擇的對(duì)象(Object)801、802、803、804顯示到顯示屏上。另夕卜，在女性β為操作人員的情況下，顯示器I不顯示(或者，以不能選擇的方式顯示)與僅容許管理人員進(jìn)行操作的處理相對(duì)應(yīng)的對(duì)象802、803。如上所述，顯示器I能夠顯示與認(rèn)證成功的用戶相對(duì)應(yīng)的用戶畫面。
[0104](b3.履歷記錄處理)
[0105]圖4是用于說(shuō)明顯示器I的處理履歷的圖。參照?qǐng)D4，當(dāng)基于預(yù)先規(guī)定的指令進(jìn)行處理時(shí)，顯示器I將時(shí)刻、指令、對(duì)顯示器I開始進(jìn)行處理的用戶(通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶)的姓名相關(guān)聯(lián)對(duì)應(yīng)地進(jìn)行存儲(chǔ)來(lái)作為履歷。此外，履歷中包括與登錄及注銷相關(guān)的履歷和登錄狀態(tài)下的用戶的操作履歷。
[0106]例如，在一個(gè)方案中，顯示器I至少將通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶的識(shí)別信息(姓名)和用于表示容許了對(duì)應(yīng)用程序的訪問(wèn)的情況(即，成為登錄狀態(tài)的情況、已登錄的情況)的履歷(“登錄”)相對(duì)應(yīng)地進(jìn)行存儲(chǔ)。另外，在一個(gè)方案中，在登錄狀態(tài)下用戶進(jìn)行了對(duì)用戶畫面中包含的操作按鈕的圖像進(jìn)行指定的操作的情況下，顯示器I將通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶的識(shí)別信息和與該指定的操作按鈕相對(duì)應(yīng)的操作的履歷(例如“開始按壓”、“顯示圖表”)相對(duì)應(yīng)地進(jìn)行存儲(chǔ)。
[0107]能夠通過(guò)由顯示器I的用戶(例如，管理人員或后述的維護(hù)人員)向顯示器I輸入用于將所存儲(chǔ)的履歷顯示到顯示屏上的指示，來(lái)如圖4那樣確認(rèn)履歷。即，該用戶能夠在事后對(duì)通過(guò)臉部認(rèn)證來(lái)登錄的用戶進(jìn)行認(rèn)證。
[0108]下面，對(duì)用于實(shí)現(xiàn)上述處理的顯示器I的具體結(jié)構(gòu)以及除了上述處理之外的處理，進(jìn)行詳細(xì)說(shuō)明。
[0109]< C.硬件結(jié)構(gòu)>
[0110]圖5是用于說(shuō)明顯示器I的硬件結(jié)構(gòu)的一個(gè)例子的圖。參照?qǐng)D5，顯示器I具有用于進(jìn)行各種運(yùn)算的CPU (Central Processing Unit:中央處理單兀)11、R0M(Read OnlyMemory:只讀存儲(chǔ)器)12>RAM (Random Access Memory:隨機(jī)存取存儲(chǔ)器)13、非易失性地保存各種程序的閃存R0M14、時(shí)鐘15、操作鍵16、照相機(jī)17、觸摸屏18、通信接口 19。此外，這些構(gòu)件經(jīng)由內(nèi)部總線彼此相連。
[0111]觸摸屏18具有:顯示屏81 ;觸控面板82，其以覆蓋顯示屏81的方式設(shè)置。通信接口 19 具有以太網(wǎng)(登錄商標(biāo))接口(InterFace) 91、串行接口 92、USB (Universal SerialBus:共用串行總線)接口 93。
[0112]CPUll將保存在閃存R0M14中的程序展開到RAM13等中來(lái)執(zhí)行。R0M12中一般保存有操作系統(tǒng)(OS Operating System)等程序。RAM13為易失性存儲(chǔ)器，用作工作存儲(chǔ)器。
[0113]以太網(wǎng)用接口 91支持以太網(wǎng)的通信協(xié)議，與PLC進(jìn)行數(shù)據(jù)通信。串行接口 92支持串行通信的協(xié)議，例如與PC(Personal Computer:個(gè)人計(jì)算機(jī))進(jìn)行數(shù)據(jù)通信。USB接口93支持USB的通信協(xié)議，例如與USB存儲(chǔ)器進(jìn)行數(shù)據(jù)通信。
[0114]此外，圖5所示的構(gòu)成顯示器I的各結(jié)構(gòu)要素是常規(guī)性的。因此，還可以說(shuō)本發(fā)明的本質(zhì)的部分是保存在閃存R0M14等保存器中的軟件或能夠通過(guò)網(wǎng)絡(luò)下載的軟件。此外，顯示器I的各硬件的動(dòng)作是公知的，因此不反復(fù)進(jìn)行詳細(xì)說(shuō)明。
[0115]< D.處理的詳細(xì)內(nèi)容>
[0116]圖6是示出了顯示器I的功能結(jié)構(gòu)的功能框圖。參照?qǐng)D6，顯示器I具有拍攝部101、尺寸判斷部102、生成部103、臉部認(rèn)證部104、訪問(wèn)控制部105、管理部106、輸入部107、接收部108、顯示控制部109、顯示部110、字符串判斷部111、通信處理部112、限制部113、視線確定部114及存儲(chǔ)部115。
[0117]此外，拍攝部101與圖5等中示出的照相機(jī)17相對(duì)應(yīng)。輸入部107與觸控面板82相對(duì)應(yīng)。顯示部I1與顯示屏81相對(duì)應(yīng)。存儲(chǔ)部115與閃存R0M14以及R0M12相對(duì)應(yīng)。
[0118]存儲(chǔ)部115具有登錄圖像DB(Data Base:數(shù)據(jù)庫(kù))351、視線DB352、未登錄人員DB353、履歷 DB354、ID(Identificat1n)以及密碼 DB355 及畫面數(shù)據(jù) DB356。
[0119]在登錄圖像DB351中，以使用戶的識(shí)別信息、用戶的臉部的臉部圖像數(shù)據(jù)、用戶的臉部的特征數(shù)據(jù)、表示對(duì)應(yīng)用程序的操作權(quán)限的識(shí)別信息(例如，管理人員、操作人員等)相對(duì)應(yīng)的狀態(tài)，登錄有多人的信息。具體地說(shuō)，針對(duì)每個(gè)特征數(shù)據(jù)相對(duì)應(yīng)地存儲(chǔ)有表示操作權(quán)限的識(shí)別信息。此外，通過(guò)執(zhí)行預(yù)先規(guī)定的應(yīng)用程序，根據(jù)臉部圖像數(shù)據(jù)來(lái)生成特征數(shù)據(jù)。另外，作為一個(gè)例子，通過(guò)利用照相機(jī)17進(jìn)行拍攝來(lái)登錄臉部圖像。
[0120]在用戶通過(guò)臉部認(rèn)證來(lái)未認(rèn)證成功的情況下，將未認(rèn)證成功的該用戶的臉部的圖像數(shù)據(jù)記錄到未登錄人員DB353中。在履歷DB354中記錄有用戶的各種履歷(登錄履歷、注銷履歷、各種操作履歷)。在畫面數(shù)據(jù)DB356中記錄有用于在顯示器I的顯示屏81上顯示各種畫面(用戶畫面、后述系統(tǒng)設(shè)定畫面)的畫面數(shù)據(jù)。
[0121]在視線DB352中記錄有用于表示顯示器I的用戶的視線方向的信息。對(duì)于利用該視線DB352的結(jié)構(gòu)，在后面進(jìn)行敘述(圖16)。在ID及密碼DB355中，針對(duì)每個(gè)用戶記錄有顯示器I的用戶的ID及密碼。對(duì)于利用ID及密碼DB355的結(jié)構(gòu)，也在后面進(jìn)行敘述。
[0122]拍攝部101拍攝被拍攝體，將通過(guò)該拍攝得到的圖像數(shù)據(jù)(包括臉部圖像數(shù)據(jù)的被拍攝體的圖像數(shù)據(jù))發(fā)送至尺寸判斷部102。典型地，無(wú)論在注銷狀態(tài)還是登錄狀態(tài)下，拍攝部101都在預(yù)先指定的時(shí)刻進(jìn)行拍攝處理。圖像數(shù)據(jù)與進(jìn)行拍攝的日期與時(shí)刻相對(duì)應(yīng)。更詳細(xì)地說(shuō)，在進(jìn)行認(rèn)證時(shí)對(duì)為了認(rèn)證用戶而進(jìn)行多次拍攝得到的臉部圖像數(shù)據(jù)和特征數(shù)據(jù)進(jìn)行比較，因此拍攝部101進(jìn)行連續(xù)拍攝。下面，為了便于說(shuō)明，將通過(guò)該連續(xù)攝影得到的圖像數(shù)據(jù)稱為“幀數(shù)據(jù)”。
[0123]尺寸判斷部102判斷圖像數(shù)據(jù)所包括的臉部區(qū)域是否大于預(yù)先規(guī)定的尺寸。詳細(xì)地說(shuō)，尺寸判斷部102基于拍攝部101拍攝得到的圖像數(shù)據(jù)，來(lái)判斷被拍攝體的臉部區(qū)域是否大于預(yù)先規(guī)定的尺寸(后述最小值)。另外，尺寸判斷部102將判斷結(jié)果發(fā)送至生成部103及臉部認(rèn)證部104。
[0124]在登錄臉部圖像數(shù)據(jù)的動(dòng)作模式中，生成部103基于臉部圖像數(shù)據(jù)來(lái)生成特征數(shù)據(jù)。生成部103將臉部圖像數(shù)據(jù)和特征數(shù)據(jù)相關(guān)聯(lián)對(duì)應(yīng)地記錄至登錄圖像DB中。典型地，在判斷為被拍攝體的臉部區(qū)域大于預(yù)先規(guī)定的尺寸(后述最小值)的情況下，生成部103將臉部圖像數(shù)據(jù)和特征數(shù)據(jù)相關(guān)聯(lián)對(duì)應(yīng)地記錄至登錄圖像DB中。
[0125]臉部認(rèn)證部104在注銷狀態(tài)(未容許對(duì)應(yīng)用程序的訪問(wèn)的狀態(tài))下，在人物的臉部靠近顯示器I的拍攝部101時(shí)，自動(dòng)進(jìn)行臉部認(rèn)證。另外，在登錄狀態(tài)下，臉部認(rèn)證部104在接受了用戶的操作的情況下，也進(jìn)行臉部認(rèn)證。
[0126]具體地說(shuō)，臉部認(rèn)證部104基于通過(guò)拍攝得到的用戶的圖像數(shù)據(jù)(稱為“第一圖像數(shù)據(jù)”)及特征數(shù)據(jù)，來(lái)進(jìn)行對(duì)用戶的認(rèn)證(下面，還稱為“第一臉部認(rèn)證”)。詳細(xì)地說(shuō)，臉部認(rèn)證部104基于表示被拍攝體中包含的臉部的臉部圖像數(shù)據(jù)和記錄在登錄圖像DB中的特征數(shù)據(jù)，來(lái)進(jìn)行臉部認(rèn)證。更詳細(xì)地說(shuō)，臉部認(rèn)證部104對(duì)多個(gè)幀數(shù)據(jù)分別進(jìn)行臉部認(rèn)證，從而對(duì)用戶進(jìn)行認(rèn)證。
[0127]臉部認(rèn)證部104將認(rèn)證結(jié)果發(fā)送至訪問(wèn)控制部105。另外，在未認(rèn)證成功的用戶的情況下，臉部認(rèn)證部104將未認(rèn)證成功的臉部的圖像數(shù)據(jù)(下面，還稱為“未登錄圖像數(shù)據(jù)”)發(fā)送至管理部106。
[0128]另外，臉部認(rèn)證部104在預(yù)先指定的時(shí)刻，基于通過(guò)在登錄狀態(tài)下進(jìn)行拍攝(在容許了對(duì)應(yīng)用程序的訪問(wèn)的情況下的拍攝)得到的用戶的臉部的圖像數(shù)據(jù)(還稱為“第二圖像數(shù)據(jù)”)和特征數(shù)據(jù)，來(lái)進(jìn)行對(duì)用戶的認(rèn)證(下面，還稱為“第二臉部認(rèn)證”)。將該認(rèn)證的結(jié)果發(fā)送至限制部113。
[0129]更詳細(xì)地說(shuō)，臉部認(rèn)證部104關(guān)注眼部來(lái)進(jìn)行臉部認(rèn)證。因?yàn)樵谑褂蔑@示器I的場(chǎng)所，除了眼部之外的部分被衣服覆蓋的可能性高。
[0130]在用戶認(rèn)證成功的情況下，訪問(wèn)控制部105容許該用戶對(duì)應(yīng)用程序的訪問(wèn)。詳細(xì)地說(shuō)，訪問(wèn)控制部105將判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸作為條件，容許對(duì)應(yīng)用程序的訪問(wèn)。
[0131]具體地說(shuō)，在注銷狀態(tài)下用戶通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的情況下，訪問(wèn)控制部105將顯示器I的狀態(tài)從注銷狀態(tài)切換到登錄狀態(tài)。詳細(xì)地說(shuō)，當(dāng)容許對(duì)應(yīng)用程序的訪問(wèn)時(shí)，訪問(wèn)控制部105以從多個(gè)畫面中基于認(rèn)證成功的用戶的特征數(shù)據(jù)來(lái)將畫面(參照?qǐng)D3)顯示到顯示屏81 (即顯示部110)上的方式，控制顯示控制部109。
[0132]另外，在從臉部認(rèn)證部104接收到表示尺寸最大的用戶的信息的情況下，訪問(wèn)控制部105將與該用戶相對(duì)應(yīng)的畫面顯示到顯示屏81上。在將顯示器I的狀態(tài)從注銷狀態(tài)切換到登錄狀態(tài)的情況下，訪問(wèn)控制部105向管理部106發(fā)送用于表示成為了登錄狀態(tài)的信息。
[0133]詳細(xì)地說(shuō)，訪問(wèn)控制部105將基于多個(gè)幀數(shù)據(jù)中的預(yù)先規(guī)定的數(shù)量以上的幀數(shù)據(jù)認(rèn)證為同一用戶作為條件，容許對(duì)應(yīng)用程序的訪問(wèn)(即，從注銷狀態(tài)切換到登錄狀態(tài))。
[0134]輸入部107接受對(duì)象的指定及字符串的輸入這樣的各種用戶操作。例如，輸入部107接受用戶畫面上的觸摸操作。此時(shí)，輸入部107將觸摸輸入的坐標(biāo)值發(fā)送至接收部108。
[0135]接收部108從輸入部107接收坐標(biāo)值。接收部108基于所接收的坐標(biāo)值和顯示在顯示部110上的畫面信息，來(lái)判斷所輸入的指示(用戶操作)以及字符串等。接收部108將用于表示該用戶操作的信息發(fā)送至管理部106。另外，在接收了作為字符串的ID及密碼時(shí)，接收部108將該ID及密碼發(fā)送至字符串判斷部111。
[0136]顯示控制部109將畫面顯示到顯示屏81 (即顯示部110)上。例如,顯示控制部109根據(jù)用于表示上述操作權(quán)限的識(shí)別信息，來(lái)將不同的所述畫面顯示到所述顯示屏上(參照?qǐng)D3)。詳細(xì)地說(shuō)，顯示控制部109根據(jù)來(lái)自各部的指示，在顯示部110上顯示各種畫面等。
[0137]具體地說(shuō)，顯示控制部109例如將用戶畫面(圖2、圖3等)、用于進(jìn)行系統(tǒng)設(shè)定的畫面(圖7A、圖7B、圖7C)及履歷畫面(圖4)顯示到顯示部110上。另外，顯示控制部109將預(yù)先規(guī)定的對(duì)象圖像重疊顯示到這些畫面上。另外，顯示控制部109將從PLC發(fā)送來(lái)的各種信息(例如數(shù)值、字符串)顯示到顯示部110上。
[0138]管理部106將認(rèn)證成功的用戶的識(shí)別信息和用于表示成為了容許訪問(wèn)的狀態(tài)的履歷相對(duì)應(yīng)地存儲(chǔ)到存儲(chǔ)部115中。具體地說(shuō)，管理部106將認(rèn)證成功的用戶的識(shí)別信息和用于表示已登錄的履歷(“登錄”)相對(duì)應(yīng)地存儲(chǔ)到存儲(chǔ)部115的履歷DB354中。另外，在已容許對(duì)應(yīng)用程序的訪問(wèn)的狀態(tài)(登錄狀態(tài))下，在進(jìn)行了用于對(duì)用戶畫面所包含的操作按鈕的圖像進(jìn)行指定的操作的情況下，管理部106將認(rèn)證成功的用戶的識(shí)別信息和與該操作按鈕相對(duì)應(yīng)的操作的履歷(例如，“開始按壓”、“顯示圖表”)相對(duì)應(yīng)地，存儲(chǔ)到履歷DB354中。在將各種履歷存儲(chǔ)到履歷DB354中時(shí)，與表示進(jìn)行了與該履歷相對(duì)應(yīng)的處理或者操作的日期與時(shí)刻的日期與時(shí)刻信息相對(duì)應(yīng)地進(jìn)行存儲(chǔ)。
[0139]而且，在從臉部認(rèn)證部104接收到未登錄圖像數(shù)據(jù)的情況下，管理部106將該未登錄圖像數(shù)據(jù)存儲(chǔ)到未登錄人員DB353中。此時(shí)，未登錄圖像數(shù)據(jù)與表示進(jìn)行拍攝的日期與時(shí)刻的日期與時(shí)刻信息建立有對(duì)應(yīng)關(guān)系。
[0140]更詳細(xì)地說(shuō)，管理部106將由管理人員進(jìn)行了用于記錄履歷的設(shè)定作為條件，將上述各履歷存儲(chǔ)到履歷DB354中。在注銷狀態(tài)及登錄狀態(tài)中的任意狀態(tài)下，管理部106都可以將通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶的圖像數(shù)據(jù)存儲(chǔ)到存儲(chǔ)部115中，或者也可以不存儲(chǔ)到存儲(chǔ)部115中。由管理人員選擇采用何種方式。
[0141]通信處理部112進(jìn)行用于與PLC進(jìn)行通信的數(shù)據(jù)處理。在后面敘述限制部113、字符串判斷部111及視線確定部114。
[0142]下面，對(duì)于編輯處理及履歷記錄處理，進(jìn)行更詳細(xì)的說(shuō)明。另外，還對(duì)作為顯示器I的處理的初始設(shè)定處理和變更檢測(cè)進(jìn)行說(shuō)明。此外，編輯處理是指，顯示控制部109通過(guò)接受訪問(wèn)控制部105的控制來(lái)顯示與認(rèn)證成功的用戶相對(duì)應(yīng)的用戶畫面的處理(參照?qǐng)D3)。另外，履歷記錄處理是指，由管理部106將未登錄圖像數(shù)據(jù)及履歷存儲(chǔ)到存儲(chǔ)部115中的處理。
[0143]另外，下面，為了便于說(shuō)明，假定規(guī)定了操作應(yīng)用程序的操作權(quán)限(使用權(quán)限)的范圍不同的三種人(“管理人員”、“維護(hù)人員”、“操作人員”)作為顯示器I的用戶的情況來(lái)進(jìn)行說(shuō)明。此外，管理人員、維護(hù)人員、操作人員的上述操作權(quán)限的范圍依次變小。
[0144](dl.初始設(shè)定處理)
[0145]圖7A、圖7B、圖7C是用于說(shuō)明用于進(jìn)行與臉部認(rèn)證相關(guān)的系統(tǒng)設(shè)定的畫面的圖。圖7A是表示一般設(shè)定畫面511的圖。圖7B是表示臉部認(rèn)證設(shè)定畫面512的圖。圖7C是表示詳細(xì)設(shè)定畫面513的圖。通過(guò)顯示控制部109和顯示部110來(lái)實(shí)現(xiàn)用于進(jìn)行這些系統(tǒng)設(shè)定的畫面的顯示。
[0146]顯示器I僅對(duì)管理人員容許對(duì)系統(tǒng)的設(shè)定。即，僅能夠由作為管理人員登錄到顯示器I的人，顯示圖7A至圖7C的畫面。
[0147]參照?qǐng)D7A、圖7B、圖7C，能夠通過(guò)選擇畫面上部的3個(gè)標(biāo)簽(tag)中的一個(gè)標(biāo)簽，來(lái)顯示圖7A至圖7C的各畫面。在圖7A所示的一般設(shè)定畫面511中，能夠進(jìn)行是否記錄履歷的設(shè)定、是否記錄進(jìn)行臉部認(rèn)證時(shí)的臉部圖像數(shù)據(jù)的設(shè)定、與人物的變更檢測(cè)相關(guān)的設(shè)定以及與未登錄人員檢測(cè)相關(guān)的設(shè)定。
[0148]在圖7B所示的臉部認(rèn)證設(shè)定畫面512中，能夠進(jìn)行以下處理，S卩，對(duì)需要通過(guò)臉部認(rèn)證來(lái)認(rèn)證的用戶進(jìn)行用戶登錄的處理、以及刪除該用戶登錄的處理。另外，在臉部認(rèn)證設(shè)定畫面512中，能夠?qū)ν蝗宋锏卿浂鄠€(gè)臉部圖像數(shù)據(jù)。此外，在登錄了多個(gè)臉部圖像數(shù)據(jù)的情況下，生成多個(gè)特征數(shù)據(jù)。另外，在“角色”的欄中設(shè)定管理人員、維護(hù)人員以及操作人員中的某一個(gè)。
[0149]圖7C所示的詳細(xì)設(shè)定畫面513中，能夠設(shè)定通過(guò)進(jìn)行臉部認(rèn)證來(lái)認(rèn)可登錄時(shí)使用的被拍攝體(人物以及背景)的臉部尺寸的最小值以及最大值。另外，在詳細(xì)設(shè)定畫面513中，能夠設(shè)定通過(guò)進(jìn)行臉部認(rèn)證來(lái)可判斷為本人的匹配度(像本人)的下限值(閾值)。例如，作為該閾值的一個(gè)例子，可舉出98%。
[0150]圖8是用于說(shuō)明保存在登錄圖像DB351中的數(shù)據(jù)的圖。參照?qǐng)D8，在數(shù)據(jù)Dl中，相對(duì)應(yīng)地記錄有姓名、職務(wù)、數(shù)據(jù)的更新日、臉部圖像數(shù)據(jù)及特征數(shù)據(jù)。作為一個(gè)例子，針對(duì)“Yamashita Takeshi ”的姓名，相對(duì)應(yīng)地存儲(chǔ)有“管理人員”這樣的職務(wù)、“2012/08/16”這樣的更新日、三個(gè)臉部圖像數(shù)據(jù)(“1023KD”、“7544KD”、“9118KD”)及三個(gè)特征數(shù)據(jù)(“1023TD”、“7544TD”、“9118TD”)。此外，各特征數(shù)據(jù)是根據(jù)同欄中記載的臉部圖像數(shù)據(jù)來(lái)生成的數(shù)據(jù)。例如，根據(jù)臉部圖像數(shù)據(jù)“ 1023KD”來(lái)生成特征數(shù)據(jù)“ 1023TD”。
[0151]能夠最多設(shè)定預(yù)先規(guī)定的數(shù)量(例如，分別10個(gè))的臉部圖像數(shù)據(jù)及特征數(shù)據(jù)。顯示器I的臉部認(rèn)證部104也可以在與多個(gè)特征數(shù)據(jù)中的至少一個(gè)特征數(shù)據(jù)之間的匹配度大于所設(shè)定的下限值(閾值)時(shí)，判斷為認(rèn)證成功(用戶得到了認(rèn)證)?；蛘?，臉部認(rèn)證部104也可以在與上述多個(gè)特征數(shù)據(jù)中的全部特征數(shù)據(jù)之間的匹配度大于所設(shè)定的下限值時(shí)，判斷為認(rèn)證成功(用戶得到了認(rèn)證)。
[0152]圖9A、圖9B、圖9C是用于說(shuō)明圖8的臉部圖像數(shù)據(jù)的圖。詳細(xì)地說(shuō)，圖9A是基于“Yamashita Takeshi”的第一個(gè)臉部圖像數(shù)據(jù)“ 1023KD”的圖像。圖9B是基于“YamashitaTakeshi”的第二個(gè)臉部圖像數(shù)據(jù)“7544KD”的圖像。圖9C是基于“Yamashita Takeshi”的第三個(gè)臉部圖像數(shù)據(jù)“9118KD”的圖像。這樣，登錄不同狀態(tài)的多個(gè)臉部圖像數(shù)據(jù)，利用上述臉部圖像數(shù)據(jù)來(lái)進(jìn)行臉部認(rèn)證，從而能夠提高顯示器I的認(rèn)證精度。
[0153](d2.編輯處理)
[0154]如上所述，在顯示器I上顯示與通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶相對(duì)應(yīng)的畫面。圖10A、圖10B、圖1OC為與認(rèn)證成功的用戶相對(duì)應(yīng)的畫面的例子,表不了與圖3的例子不同的畫面。
[0155]圖1OA是表示管理人員的用戶畫面531的圖。S卩，圖1OA是通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶已事先登錄為管理人員的情況下顯示的用戶畫面。圖1OB是表示維護(hù)人員的用戶畫面532的圖。即，圖1OB是通過(guò)進(jìn)行臉部認(rèn)證來(lái)認(rèn)證成功的用戶已事先登錄為維護(hù)人員的情況下顯示的用戶畫面。圖1OC是表示操作人員的用戶畫面533的圖。S卩，圖1OC是通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶已事先登錄為操作人員的情況下顯示的用戶畫面。
[0156]參照?qǐng)D10A，用戶畫面531包括狀態(tài)(Status)831、維護(hù)菜單832、管理菜單833及用于注銷的對(duì)象834。
[0157]參照?qǐng)D10B，用戶畫面532包括狀態(tài)831、維護(hù)菜單832、對(duì)象834。用戶畫面532與用戶畫面531不同，不包括管理菜單833。
[0158]參照?qǐng)D10C，用戶畫面533包括狀態(tài)831和對(duì)象834。用戶畫面533與用戶畫面531不同，不包括管理菜單833和維護(hù)菜單832。
[0159]如上所述，顯示器I基于臉部認(rèn)證的結(jié)果，顯示與操作權(quán)限相對(duì)應(yīng)的用戶畫面。
[0160]圖11是表示在顯示圖10A、圖10B、圖1OC的各用戶畫面531、532、533時(shí)所參照的數(shù)據(jù)D3的圖。參照?qǐng)D11，在數(shù)據(jù)D3中，對(duì)對(duì)象名、坐標(biāo)信息、表示針對(duì)每個(gè)職務(wù)是否顯示對(duì)象圖像的信息建立有對(duì)應(yīng)關(guān)系。例如，記述有如下內(nèi)容，即，對(duì)管理人員和維護(hù)人員顯示作為三個(gè)對(duì)象圖像的開始按鈕、停止按鈕及暫停按鈕。并且，記述有對(duì)管理人員顯示系統(tǒng)菜單的對(duì)象圖像的內(nèi)容。并且，記述有對(duì)所有用戶顯示用于注銷的對(duì)象圖像的內(nèi)容。
[0161]另外，坐標(biāo)信息是指在將對(duì)象圖像顯示到顯示屏81上時(shí)利用的信息。利用坐標(biāo)信息，來(lái)規(guī)定對(duì)象圖像的左上部的坐標(biāo)、對(duì)象圖像的寬度和高度。
[0162](d3.履歷記錄處理)
[0163]圖12是表示由管理部106管理的履歷數(shù)據(jù)D5的圖。S卩，圖12表示保存在履歷DB354中的履歷數(shù)據(jù)D5。參照?qǐng)D12，在履歷數(shù)據(jù)D5中相對(duì)應(yīng)地記錄有日期與時(shí)刻、指令、姓名。在從用戶(例如，管理人員)接受到顯示履歷數(shù)據(jù)D5的指示時(shí)，顯示器I顯示圖4所示的畫面。
[0164]圖13是表示保存在未登錄人員DB353中的數(shù)據(jù)D7的圖。參照?qǐng)D13，在數(shù)據(jù)D7中，相對(duì)應(yīng)地記錄有用戶通過(guò)臉部認(rèn)證來(lái)未認(rèn)證成功的人物的圖像(未登錄人員圖像)和進(jìn)行拍攝的日期與時(shí)刻。
[0165]例如，在操作人員對(duì)顯示器I進(jìn)行了用于確認(rèn)未登錄人員的輸入的情況下，顯示器I參照數(shù)據(jù)D7，將未登錄人員的圖像顯示在顯示屏81上。
[0166](d4.變更檢測(cè))
[0167]接著，對(duì)于變更檢測(cè)進(jìn)行說(shuō)明。變更檢測(cè)是指，在通過(guò)對(duì)某人物進(jìn)行了臉部認(rèn)證來(lái)顯示器I處于登錄狀態(tài)的情況下，顯示器I再次通過(guò)進(jìn)行臉部認(rèn)證來(lái)檢測(cè)與該人物不同的人物的檢測(cè)。
[0168]如上所述，即使在登錄狀態(tài)下，臉部認(rèn)證部104也在預(yù)先指定的時(shí)刻基于在登錄狀態(tài)下進(jìn)行拍攝得到的臉部的圖像數(shù)據(jù)和特征數(shù)據(jù)，來(lái)進(jìn)行臉部認(rèn)證。
[0169]在通過(guò)上述第一臉部認(rèn)證來(lái)認(rèn)證成功的用戶和通過(guò)上述第二臉部認(rèn)證來(lái)認(rèn)證成功的用戶為不同的用戶的情況下，限制部113限制應(yīng)用程序的處理的執(zhí)行。另外，在用戶通過(guò)第二臉部認(rèn)證來(lái)未認(rèn)證成功的情況下，限制部113限制應(yīng)用程序的處理的執(zhí)行。具體地說(shuō)，通過(guò)登錄狀態(tài)下的臉部認(rèn)證來(lái)得到的認(rèn)證結(jié)果不表示通過(guò)注銷狀態(tài)下的臉部認(rèn)證來(lái)認(rèn)證成功的用戶的情況下，或者用戶通過(guò)登錄狀態(tài)下的臉部認(rèn)證來(lái)未認(rèn)證成功的情況下，限制部113限制在登錄狀態(tài)下認(rèn)可的預(yù)先規(guī)定的處理的執(zhí)行。
[0170]例如，假設(shè)在顯示管理人員的用戶畫面531的狀態(tài)(圖10A)下，該管理人員之外的人物站在顯示器I前，并對(duì)該人物進(jìn)行了拍攝及認(rèn)證。此時(shí)，限制部113至少限制在登錄狀態(tài)下認(rèn)可的處理的執(zhí)行。優(yōu)選地，限制部113不接受對(duì)在登錄狀態(tài)下表示的對(duì)象圖像進(jìn)行的選擇。
[0171]圖14A、圖14B是表示在由限制部113限制進(jìn)行處理的情況下顯示的畫面的圖。圖14A是表示帶有警告顯示的畫面的圖。圖14B是表示從登錄狀態(tài)轉(zhuǎn)移到注銷狀態(tài)之后的畫面的圖?？蓪@示圖14A所示的畫面還是顯示圖14B所示的畫面的信息,預(yù)先規(guī)定到顯示器I中。管理人員還能夠變更該設(shè)定。
[0172]參照?qǐng)D14A，在限制應(yīng)用程序的處理的執(zhí)行的情況下，訪問(wèn)控制部105以如下方式控制顯示控制部109，該方式是指，以將預(yù)先規(guī)定的對(duì)象圖像，以重疊到在容許訪問(wèn)的狀態(tài)(登錄狀態(tài))下顯示的畫面上的狀態(tài)，顯示到顯示屏81 (顯示部110)上的方式。由此，顯示控制部109將通過(guò)在圖1OA所示的用戶畫面531上重疊表示警告的對(duì)象圖像來(lái)得到的畫面551，顯示到顯示部110上。
[0173]參照?qǐng)D14B，訪問(wèn)控制部105將顯示器I的狀態(tài)從登錄狀態(tài)切換到注銷狀態(tài)。伴隨與此，在限制應(yīng)用程序的處理的執(zhí)行的情況下，顯示控制部109取代在容許所述訪問(wèn)的狀態(tài)下顯示的畫面而將未容許該訪問(wèn)的狀態(tài)的畫面顯示到顯示屏81上。具體地說(shuō)，顯示控制部109將注銷狀態(tài)的畫面顯示到顯示部110上。此時(shí)，顯示器I執(zhí)行注銷狀態(tài)下的拍攝及臉部認(rèn)證處理。
[0174]此外，在上述中，舉出在由限制部113限制了處理時(shí)將用戶畫面轉(zhuǎn)移至其它畫面的例子來(lái)進(jìn)行了說(shuō)明，但是并不限定于此。例如，顯示器I也可以不轉(zhuǎn)移畫面而僅限制處理。由管理人員指定用于實(shí)現(xiàn)這種方式的設(shè)定。
[0175]另外，在通過(guò)登錄狀態(tài)下的臉部認(rèn)證來(lái)得到的認(rèn)證結(jié)果不表示通過(guò)注銷狀態(tài)下的臉部認(rèn)證來(lái)認(rèn)證成功的用戶的情況下，也可以執(zhí)行如下的處理。即，也可以使顯示器I顯示與在登錄狀態(tài)下認(rèn)證成功的用戶的操作權(quán)限相對(duì)應(yīng)的用戶畫面。例如，在顯示管理人員的用戶畫面531 (圖10A)的狀態(tài)下，由操作人員通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的情況下，顯示器I也可以顯示操作人員的用戶畫面533(圖10C)。另外，在不同的管理人員通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的情況下，也可以不限制管理人員的操作權(quán)限，而保持用戶畫面531的狀態(tài)。
[0176]< E.控制結(jié)構(gòu)>
[0177]圖15是用于說(shuō)明顯示器I的處理流程的流程圖。具體地說(shuō)，圖15是表示從未容許對(duì)應(yīng)用程序的訪問(wèn)的狀態(tài)(注銷狀態(tài))經(jīng)由容許了訪問(wèn)的狀態(tài)(登錄狀態(tài))轉(zhuǎn)移至未容許訪問(wèn)的狀態(tài)(注銷狀態(tài))的情況的圖。
[0178]參照?qǐng)D15，在步驟S2中，顯示器I在起動(dòng)之后開始進(jìn)行拍攝。在步驟S4中，顯示器I基于通過(guò)拍攝得到的被拍攝體的圖像數(shù)據(jù)，來(lái)判斷是否檢測(cè)到臉部。在判斷為到臉部的情況(在步驟S4中為“是”)下，顯示器I在步驟S6中進(jìn)行臉部認(rèn)證。在判斷為未檢測(cè)到臉部的情況(在步驟S4中為“否”)下，顯示器I使處理進(jìn)入步驟S4。
[0179]在步驟S8中，顯示器I判斷用戶通過(guò)臉部認(rèn)證來(lái)是否認(rèn)證成功。在判斷為用戶認(rèn)證成功的情況(在步驟S8中為“是”)下，在步驟SlO中，顯示器I將顯示器I的狀態(tài)從注銷狀態(tài)切換到登錄狀態(tài)。即，顯示器I容許對(duì)應(yīng)用程序的訪問(wèn)。在判斷為用戶未認(rèn)證成功的情況(在步驟S8中為“否”)下，在步驟S36中，顯示器I將圖像數(shù)據(jù)存儲(chǔ)到未登錄人員DB353 中。
[0180]在步驟S12中，顯示器I顯示與認(rèn)證成功的用戶相對(duì)應(yīng)的用戶畫面。在步驟S14中，顯示器I將用于表示進(jìn)行了登錄的履歷，與時(shí)刻及通過(guò)進(jìn)行認(rèn)證來(lái)認(rèn)證成功的用戶的姓名相關(guān)聯(lián)對(duì)應(yīng)地，記錄至履歷DB354中。S卩，顯示器I將用于表示容許了對(duì)應(yīng)用程序的訪問(wèn)的履歷，與時(shí)刻及通過(guò)進(jìn)行認(rèn)證來(lái)認(rèn)證成功的用戶的姓名相關(guān)聯(lián)對(duì)應(yīng)地進(jìn)行記錄。在步驟S16中，顯示器I判斷在用戶畫面上是否接受到操作。典型地，顯示器I判斷是否選擇了對(duì)象圖像。
[0181]在判斷為接受到操作的情況(在步驟S16中為“是”)下，在步驟S18中，顯示器I將該操作的履歷，與進(jìn)行操作的時(shí)刻以及通過(guò)進(jìn)行認(rèn)證來(lái)認(rèn)證成功的用戶的姓名相對(duì)應(yīng)地，存儲(chǔ)至履歷DB354中。在判斷為未接受到操作的情況(在步驟S16中為“否”)下，顯示器I使處理進(jìn)入步驟S20。
[0182]在步驟S20中，顯示器I基于通過(guò)拍攝得到的被拍攝體的圖像數(shù)據(jù)，來(lái)判斷是否檢測(cè)到臉部。在判斷為檢測(cè)到臉部的情況(在步驟S20中為“是”)下，在步驟S22中，顯示器I進(jìn)行臉部認(rèn)證。在判斷為未檢測(cè)到臉部的情況(在步驟S20中為“否”)下，顯示器I使處理進(jìn)入步驟S20。
[0183]在步驟S24中，顯示器I判斷用戶通過(guò)臉部認(rèn)證來(lái)是否認(rèn)證成功。在判斷為用戶認(rèn)證成功的情況(在步驟S24中為“是”)下，在步驟S26中，顯示器I判斷認(rèn)證成功的用戶是否為與在登錄之前的注銷狀態(tài)下認(rèn)證成功的用戶是同一人物。在判斷為用戶未認(rèn)證成功的情況(在步驟S24中為“否”)下，在步驟S38中，顯示器I將圖像數(shù)據(jù)存儲(chǔ)到未登錄人員DB353中。作為一個(gè)例子，在步驟S40中，顯示器I進(jìn)行警告顯示(圖14A)。
[0184]在判斷為同一人物的情況(在步驟S26中為“是”)下，在步驟S28中，顯示器I判斷在用戶畫面上是否接受到操作。在判斷為不是同一人物的情況(在步驟S26中為“否”)下，顯示器I使處理進(jìn)入步驟S40。
[0185]在判斷為接受到操作的情況(在步驟S28中為“是”)下，在步驟S30中，顯示器I將該操作的履歷，與進(jìn)行了操作的時(shí)刻以及通過(guò)進(jìn)行認(rèn)證來(lái)認(rèn)證成功的用戶的姓名相對(duì)應(yīng)地，存儲(chǔ)到履歷DB354中。在判斷為未接受到操作的情況(在步驟S28中為“否”)下，顯示器I使處理進(jìn)入步驟S32。
[0186]在步驟S32中，顯示器I判斷是否接受到用于注銷的操作。在判斷為未接受到用于注銷的操作的情況(在步驟S32中為“否”)下，顯示器I使處理進(jìn)入步驟S20。在判斷為接受到用于注銷的操作的情況(在步驟S32中為“是”)下，在步驟S34中，顯示器I將該操作的履歷、與進(jìn)行了操作的時(shí)刻以及通過(guò)進(jìn)行認(rèn)證來(lái)認(rèn)證成功的用戶的姓名相對(duì)應(yīng)地，存儲(chǔ)到履歷DB354中。由此，顯示器I再次返回至注銷的狀態(tài)，從而結(jié)束一系列處理。
[0187]<F.變形例>
[0188](fl.編輯處理的變形例)
[0189]在上述中，說(shuō)明了顯示器I顯示與通過(guò)進(jìn)行臉部認(rèn)證來(lái)認(rèn)證成功的用戶相對(duì)應(yīng)的畫面的結(jié)構(gòu)。具體地說(shuō)，說(shuō)明了顯示器I基于認(rèn)證成功的用戶的操作權(quán)限(管理人員的操作權(quán)限、維護(hù)人員的操作權(quán)限、操作人員的操作權(quán)限)來(lái)顯示畫面的結(jié)構(gòu)。下面，說(shuō)明基于這樣的操作權(quán)限和與認(rèn)證成功的用戶相關(guān)的各種信息來(lái)顯示畫面的結(jié)構(gòu)。
[0190]圖16是用于說(shuō)明取代圖8所示的數(shù)據(jù)Dl而保存在登錄圖像DB351中的數(shù)據(jù)的圖。參照?qǐng)D16，在數(shù)據(jù)D9中，相對(duì)應(yīng)地記錄有姓名、職務(wù)、數(shù)據(jù)的更新日、臉部圖像數(shù)據(jù)以及特征數(shù)據(jù)、用于規(guī)定顯示方式的數(shù)據(jù)(年齡數(shù)據(jù)、性別數(shù)據(jù)、國(guó)籍?dāng)?shù)據(jù)、靈活手?jǐn)?shù)據(jù))。在包括用于規(guī)定顯示方式的數(shù)據(jù)這一點(diǎn)上，數(shù)據(jù)D9與圖8所示的數(shù)據(jù)Dl存在差異。
[0191]顯示器I基于操作權(quán)限和用于規(guī)定顯示方式的數(shù)據(jù)來(lái)顯示畫面。例如，在通過(guò)進(jìn)行臉部認(rèn)證來(lái)認(rèn)證用戶為“Yamashita Takeshi ”的情況下,在顯示管理人員的畫面時(shí)，將該畫面中所包含的語(yǔ)種設(shè)定為日語(yǔ)。另外，顯示器I將字符的尺寸、畫面的輝度以及畫面的對(duì)比度等，調(diào)整為與年齡相對(duì)應(yīng)的值。而且，在左利手(左撇子)用的對(duì)象圖像(菜單、操作按鈕)的配置方式及右利手(右撇子)用的對(duì)象圖像的配置方式中，顯示器I以右撇子用配置方式顯示畫面。
[0192]另外，在通過(guò)進(jìn)行臉部認(rèn)證來(lái)認(rèn)證用戶為“01 iver WiIliams”的情況下，在顯示維護(hù)人員的畫面時(shí)，將該畫面中所包含的語(yǔ)種設(shè)定為英語(yǔ)。另外，將可編程顯示器、字符的尺寸、畫面的輝度以及畫面的對(duì)比度等，調(diào)整為與年齡相對(duì)應(yīng)的值。而且，顯示器I以右利手(右撇子)用配置方式顯示畫面。另外，顯示器I從維護(hù)人員用的多個(gè)畫面中顯示為了女性預(yù)先準(zhǔn)備的維護(hù)人員用畫面。
[0193]如上所述，在顯示器I中，針對(duì)多個(gè)特征數(shù)據(jù)分別對(duì)應(yīng)有用于規(guī)定畫面的顯示方式的信息。顯示器I的顯示控制部109以由與認(rèn)證成功的用戶的特征數(shù)據(jù)相對(duì)應(yīng)的信息來(lái)規(guī)定的顯示方式，將與認(rèn)證成功的用戶相對(duì)應(yīng)的畫面顯示到顯示部110上。因此，顯示器I能夠顯示對(duì)通過(guò)進(jìn)行臉部認(rèn)證來(lái)認(rèn)證成功的用戶定制的畫面。
[0194]另外，如上所述，上述顯示方式包括語(yǔ)種及字符尺寸中的至少一種。因此，顯示器I能夠利用認(rèn)為適合于認(rèn)證成功的用戶的語(yǔ)種及字符尺寸，來(lái)顯示畫面。
[0195]而且，用于規(guī)定畫面的顯示方式的信息包括年齡、性別及國(guó)籍中的至少一個(gè)。顯示器I能夠通過(guò)利用上述信息，顯示適合于通過(guò)進(jìn)行臉部認(rèn)證來(lái)認(rèn)證成功的用戶的畫面。
[0196](f2.與視線相關(guān)的處理)
[0197]圖17是用于說(shuō)明檢測(cè)用戶的視線方向的結(jié)構(gòu)的圖。參照?qǐng)D17，在登錄狀態(tài)下，顯示器I基于發(fā)生了預(yù)先規(guī)定的事件的情況，顯示與該事件相對(duì)應(yīng)的預(yù)先規(guī)定的對(duì)象891。
[0198]在通過(guò)在容許對(duì)應(yīng)用程序的訪問(wèn)時(shí)(登錄狀態(tài))拍攝得到的用戶的圖像數(shù)據(jù)中包含臉部的圖像數(shù)據(jù)的情況下，顯示器I的視線確定部114(參照?qǐng)D6)確定該臉部的視線方向。此時(shí)，管理部106將發(fā)生了上述預(yù)先規(guī)定的事件時(shí)的視線方向與該事件相關(guān)聯(lián)對(duì)應(yīng)地存儲(chǔ)至存儲(chǔ)部115的視線DB352中。此外，能夠通過(guò)研究所拍攝的圖像數(shù)據(jù)中的臉部的大小(眼睛的大小)和該臉部中的虹膜(或者瞳孔)的位置，來(lái)確定視線方向。
[0199]因此，登錄的管理人員等能夠通過(guò)確認(rèn)視線DB352的數(shù)據(jù)，來(lái)判斷在發(fā)生了預(yù)先規(guī)定的事件時(shí)操作人員等在發(fā)生事件時(shí)在現(xiàn)場(chǎng)工作的人是否正在看顯示器I的畫面。
[0200](f3.多個(gè)人的臉部認(rèn)證處理)
[0201]在上述中，舉例說(shuō)明了通過(guò)進(jìn)行一次拍攝來(lái)拍攝到一個(gè)人的情況。下面，說(shuō)明通過(guò)進(jìn)行一次拍攝來(lái)拍攝到多個(gè)人的情況的處理。
[0202]圖18是表示利用照相機(jī)17拍攝得到的被拍攝體的圖像數(shù)據(jù)中包含多個(gè)用戶的狀態(tài)的圖。參照?qǐng)D18，在圖像的最前方拍攝到了人物910。另外，在人物910的后方依次拍攝到了人物920及人物930。因此，按照人物910、人物920、人物930的順序，臉部區(qū)域的尺寸依次變小。
[0203]在從拍攝部101接收到通過(guò)進(jìn)行一次拍攝來(lái)拍攝到多個(gè)人物的圖像數(shù)據(jù)的情況下，尺寸判斷部102判斷各人物的臉部區(qū)域是否大于預(yù)先規(guī)定的尺寸。在圖18的情況下，尺寸判斷部102判斷人物910、人物920、人物930的臉部區(qū)域是否大于預(yù)先規(guī)定的尺寸。
[0204]在從尺寸判斷部102接收到通過(guò)進(jìn)行一次拍攝來(lái)拍攝到多個(gè)人物的圖像數(shù)據(jù)和上述判斷結(jié)果的情況下，臉部認(rèn)證部104對(duì)該多個(gè)人物進(jìn)行臉部認(rèn)證。此時(shí)，臉部認(rèn)證部104至少將認(rèn)證成功的用戶中的尺寸最大的用戶的識(shí)別信息發(fā)送至訪問(wèn)控制部105。例如，在圖18的情況下，臉部認(rèn)證部104將人物910的識(shí)別信息(典型地，姓名)發(fā)送至訪問(wèn)控制部105。
[0205]在通過(guò)拍攝得到的圖像數(shù)據(jù)中包含多個(gè)用戶的情況下，管理部106將該多個(gè)用戶中的判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸(下限值)的用戶的識(shí)別信息，與用于表示容許了對(duì)應(yīng)用程序的訪問(wèn)的情況(即，登錄的情況)的履歷相對(duì)應(yīng)地，存儲(chǔ)到存儲(chǔ)部115的履歷DB354中。例如，在圖18的情況下，管理部106將人物910的識(shí)別信息與用于表示已登錄的情況的履歷相對(duì)應(yīng)地存儲(chǔ)到履歷DB354中。
[0206]另外，管理部106將上述多個(gè)用戶中的除了判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶的識(shí)別信息，存儲(chǔ)到存儲(chǔ)部115中。例如，在圖18的情況下，管理部106將人物920的用戶信息和人物930的用戶信息存儲(chǔ)到存儲(chǔ)部115中。
[0207]因此，顯示器I的用戶(例如管理人員)能夠通過(guò)識(shí)別信息，來(lái)確定在顯示器I的狀態(tài)從注銷狀態(tài)切換到登錄狀態(tài)時(shí)在進(jìn)行登錄的人物(在圖18的情況下為人物910)的周圍存在哪些人。在圖18的例子中，管理人員能夠確定人物920的姓名和人物930的姓名。
[0208]而且，管理部106將除了判斷為臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶中的用戶未認(rèn)證成功的人的圖像數(shù)據(jù)，進(jìn)而存儲(chǔ)到存儲(chǔ)部115中。例如，在圖18的情況下，在由臉部認(rèn)證部104判斷為人物930是未登錄人員的情況下，管理部106將人物930的圖像數(shù)據(jù)存儲(chǔ)到存儲(chǔ)部115中。
[0209]因此，顯示器I的用戶(例如管理人員)能夠確認(rèn)，在顯示器I的狀態(tài)從注銷狀態(tài)切換到登錄狀態(tài)時(shí)、位于登錄的人物(在圖18的情況下為人物910)的周圍的未登錄的人物的臉部。
[0210](f4.1D以及密碼的利用)
[0211]接著，說(shuō)明利用ID以及密碼的結(jié)構(gòu)。在顯示器I中，在比操作人員的操作權(quán)限大的管理人員及維護(hù)人員的情況下，為了登錄，除了用戶通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的情況之外，還可以將ID及密碼一致作為條件，來(lái)容許對(duì)應(yīng)用程序的訪問(wèn)(將顯示器I的狀態(tài)從注銷狀態(tài)切換到登錄狀態(tài))。對(duì)該處理如下進(jìn)行詳細(xì)說(shuō)明。
[0212]在通過(guò)臉部認(rèn)證來(lái)認(rèn)證成功的用戶為具有管理人員或者維護(hù)人員的操作權(quán)限的人的情況下，接收部108接收作為字符串的ID以及密碼的輸入。另外，字符串判斷部111判斷接收部108接收的ID以及密碼和預(yù)先登錄在ID以及密碼DB355中的ID以及密碼(預(yù)先規(guī)定的字符串)是否一致。而且，將由字符串判斷部111判斷為一致作為條件，訪問(wèn)控制部105將顯示器I的狀態(tài)從注銷狀態(tài)切換到登錄狀態(tài)。
[0213]根據(jù)這樣的結(jié)構(gòu)，與操作權(quán)限的大小無(wú)關(guān)地僅通過(guò)進(jìn)行臉部認(rèn)證來(lái)容許登錄的結(jié)構(gòu)相比，能夠提高安全性。此外，在上述中，舉例說(shuō)明了向管理人員和維護(hù)人員請(qǐng)求輸入ID及密碼的結(jié)構(gòu)，但是也可以僅向管理人員請(qǐng)求輸入ID及密碼。另外，也可以以僅請(qǐng)求輸入ID及密碼中的某一個(gè)的方式構(gòu)成顯示器I。
[0214](f4.不內(nèi)置照相機(jī)的結(jié)構(gòu))
[0215]在上述中，舉例說(shuō)明了可編程顯示器內(nèi)置有照相機(jī)的結(jié)構(gòu)，但是并不限定于此。也可以采用可編程顯示器與外置的照相機(jī)進(jìn)行通信的結(jié)構(gòu)。即，也可以采用顯示器I從外置的照相機(jī)獲取圖像數(shù)據(jù)的結(jié)構(gòu)。
[0216](f5.對(duì)于操作權(quán)限)
[0217]在上述中，說(shuō)明了管理人員、維護(hù)人員、操作人員這三個(gè)具有不同的操作權(quán)限的人的例子，但是并不限定于此。操作權(quán)限的種類(劃分)的數(shù)目可以是二個(gè)，也可以是四個(gè)以上。
[0218](f6.對(duì)除了可編程顯示器之外的裝置的應(yīng)用)
[0219]在上述中，舉例說(shuō)明了可編程顯示器(顯示器I)。但是，上述各種處理，不僅能夠應(yīng)用于可編程顯示器，還能夠應(yīng)用于包含該可編程顯示器的監(jiān)視器(顯示裝置)。
[0220]應(yīng)當(dāng)認(rèn)為本公開的實(shí)施方式是在全部點(diǎn)的例示而非限制。本發(fā)明的范圍并不由上述的說(shuō)明來(lái)表示，而是由權(quán)利要求書來(lái)表示，意在包括在與權(quán)利要求書等同的意思和范圍內(nèi)的全部變更。
【權(quán)利要求】
1.一種可編程顯示器，能夠控制對(duì)應(yīng)用程序的訪問(wèn)，其特征在于， 具有: 存儲(chǔ)單元，其對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)有用戶的臉部的特征數(shù)據(jù)和所述用戶的識(shí)別信息； 認(rèn)證單元，其基于拍攝得到的用戶的圖像數(shù)據(jù)和所述特征數(shù)據(jù)來(lái)進(jìn)行臉部認(rèn)證； 訪問(wèn)控制單元，其在用戶認(rèn)證成功的情況下，容許所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)； 管理單元，其將認(rèn)證成功的所述用戶的識(shí)別信息和用于表示處于容許所述訪問(wèn)的狀態(tài)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到所述存儲(chǔ)單元中。
2.根據(jù)權(quán)利要求1所述的可編程顯示器，其特征在于， 還具有: 顯示屏， 顯示控制單元，其將包含操作按鈕的圖像的操作畫面顯示到所述顯示屏上； 所述管理單元，在容許了所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)的狀態(tài)下進(jìn)行了用于對(duì)所述操作按鈕的圖像進(jìn)行指定的操作的情況下，還將所述用戶的識(shí)別信息與和所述操作按鈕相對(duì)應(yīng)的操作的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到所述存儲(chǔ)單元中。
3.根據(jù)權(quán)利要求2所述的可編程顯示器，其特征在于，所述管理單元，在用戶通過(guò)所述臉部認(rèn)證來(lái)未認(rèn)證成功的情況下，還將所述拍攝得到的用戶的圖像數(shù)據(jù)中的臉部的圖像數(shù)據(jù)存儲(chǔ)到所述存儲(chǔ)單元中。
4.根據(jù)權(quán)利要求3所述的可編程顯示器，其特征在于， 還具有確定單元，在容許了所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)時(shí)拍攝得到的用戶的圖像數(shù)據(jù)中包含臉部的圖像數(shù)據(jù)的情況下，該確定單元確定該臉部的視線方向； 所述顯示控制單元在發(fā)生了預(yù)先規(guī)定的事件的情況下，將預(yù)先規(guī)定的圖像顯示到所述顯示屏上； 所述管理單元，將發(fā)生了所述預(yù)先規(guī)定的事件時(shí)的所述視線方向與所述事件關(guān)聯(lián)對(duì)應(yīng)地存儲(chǔ)到所述存儲(chǔ)單元中。
5.根據(jù)權(quán)利要求1至4中任一項(xiàng)所述的可編程顯示器，其特征在于， 還具有判斷單元，該判斷單元基于所述拍攝，來(lái)判斷所述用戶的臉部區(qū)域是否大于預(yù)先規(guī)定的尺寸； 所述訪問(wèn)控制單元，將判斷為所述臉部區(qū)域大于預(yù)先規(guī)定的尺寸作為條件，容許所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)； 所述管理單元，在所述拍攝得到的圖像數(shù)據(jù)中包含多個(gè)用戶的情況下，將所述多個(gè)用戶中的判斷為所述臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶的識(shí)別信息與表示容許了所述訪問(wèn)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到所述存儲(chǔ)單元中。
6.根據(jù)權(quán)利要求5所述的可編程顯示器，其特征在于， 所述管理單元，還將所述多個(gè)用戶中的除了判斷為所述臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶的識(shí)別信息存儲(chǔ)到所述存儲(chǔ)單元中。
7.根據(jù)權(quán)利要求6所述的可編程顯示器，其特征在于， 所述管理單元，還將在除了判斷為所述臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶中的未認(rèn)證成功的用戶的圖像數(shù)據(jù)，存儲(chǔ)到所述存儲(chǔ)單元中。
8.—種控制方法，用于對(duì)應(yīng)用程序的訪問(wèn)進(jìn)行控制的可編程顯示器，其特征在于， 包括: 臉部認(rèn)證步驟，基于拍攝得到的被拍攝體的圖像數(shù)據(jù)和用于表示用戶的臉部的特征的特征數(shù)據(jù)，來(lái)進(jìn)行臉部認(rèn)證； 訪問(wèn)容許步驟，在通過(guò)所述臉部認(rèn)證來(lái)確定了用戶的情況下，容許所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)； 存儲(chǔ)步驟，將所確定的所述用戶的識(shí)別信息和用于表示容許了所述訪問(wèn)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器中。
9.根據(jù)權(quán)利要求8所述的控制方法，其特征在于， 所述控制方法還包括將包含操作按鈕的圖像的操作畫面顯示到顯示屏上的步驟， 在所述存儲(chǔ)步驟中，在容許了所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)的狀態(tài)下進(jìn)行了用于對(duì)所述操作按鈕的圖像進(jìn)行指定的操作的情況下，將所述用戶的識(shí)別信息與和所述操作按鈕相對(duì)應(yīng)的操作的履歷相對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到所述存儲(chǔ)器中。
10.根據(jù)權(quán)利要求9所述的控制方法，其特征在于， 在所述存儲(chǔ)步驟中，在用戶通過(guò)所述臉部認(rèn)證來(lái)未認(rèn)證成功的情況下，將所述拍攝得到的用戶的圖像數(shù)據(jù)中的臉部的圖像數(shù)據(jù)存儲(chǔ)到所述存儲(chǔ)器中。
11.根據(jù)權(quán)利要求10所述的控制方法，其特征在于， 包括: 在容許了所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)時(shí)進(jìn)行拍攝得到的用戶的圖像數(shù)據(jù)中包含臉部的圖像數(shù)據(jù)的情況下，確定該臉部的視線方向的步驟； 在發(fā)生了預(yù)先規(guī)定的事件的情況下，將預(yù)先規(guī)定的圖像顯示到所述顯示屏上的步驟；將發(fā)生了所述預(yù)先規(guī)定的事件時(shí)的所述視線方向與所述事件關(guān)聯(lián)對(duì)應(yīng)地存儲(chǔ)到所述存儲(chǔ)單元中的步驟。
12.根據(jù)權(quán)利要求8至11中任一項(xiàng)所述的控制方法，其特征在于， 還包括基于所述拍攝來(lái)判斷所述被拍攝體的臉部區(qū)域是否大于預(yù)先規(guī)定的尺寸的步驟； 在所述訪問(wèn)容許步驟中，將判斷為所述臉部區(qū)域大于預(yù)先規(guī)定的尺寸作為條件，容許所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)； 在所述存儲(chǔ)步驟中，在所述拍攝得到的圖像數(shù)據(jù)中包含多個(gè)用戶的情況下，將所述多個(gè)用戶中的判斷為所述臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶的識(shí)別信息與表示容許了所述訪問(wèn)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到所述存儲(chǔ)單元中。
13.根據(jù)權(quán)利要求12所述的控制方法，其特征在于， 在所述存儲(chǔ)步驟中，將所述多個(gè)用戶中的除了判斷為所述臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶的識(shí)別信息存儲(chǔ)到所述存儲(chǔ)單元中。
14.根據(jù)權(quán)利要求13所述的控制方法，其特征在于， 在所述存儲(chǔ)步驟中，將在除了判斷為所述臉部區(qū)域大于預(yù)先規(guī)定的尺寸的用戶之外的用戶中的未認(rèn)證成功的用戶的圖像數(shù)據(jù)，存儲(chǔ)到所述存儲(chǔ)單元中。
15.一種程序，對(duì)用于控制對(duì)應(yīng)用程序的訪問(wèn)的可編程顯示器進(jìn)行控制，其特征在于， 使所述可編程顯示器的處理器執(zhí)行以下步驟: 臉部認(rèn)證步驟，基于拍攝得到的被拍攝體的圖像數(shù)據(jù)和用于表示用戶的臉部的特征的特征數(shù)據(jù)，來(lái)進(jìn)行臉部認(rèn)證； 訪問(wèn)容許步驟，在通過(guò)所述臉部認(rèn)證來(lái)確定了用戶的情況下，容許所述用戶對(duì)所述應(yīng)用程序的訪問(wèn)； 存儲(chǔ)步驟，將所確定的所述用戶的識(shí)別信息和用于表示容許了所述訪問(wèn)的履歷對(duì)應(yīng)關(guān)聯(lián)地存儲(chǔ)到存儲(chǔ)器中。
【文檔編號(hào)】G06F21/32GK104346554SQ201410363161
【公開日】2015年2月11日 申請(qǐng)日期:2014年7月28日 優(yōu)先權(quán)日:2013年7月29日
【發(fā)明者】藤原靖卓, 山下隆義, 川上文雄 申請(qǐng)人:歐姆龍株式會(huì)社