本發(fā)明涉及認(rèn)證設(shè)備和處理設(shè)備。

背景技術(shù)：

作為出版物中公開的現(xiàn)有技術(shù)中的技術(shù)，有這樣一種技術(shù)，其中設(shè)置第一成像單元以在圖像形成設(shè)備中的前側(cè)朝前，設(shè)置第二成像單元以在設(shè)置在圖像形成設(shè)備的上部上的用戶界面13上朝上，圖像形成設(shè)備的主系統(tǒng)基于通過第一成像單元捕獲的圖像在確定人員接近圖像形成設(shè)備的情況下從睡眠模式返回等待模式，第二成像單元捕獲站在圖像形成設(shè)備前面的用戶的面部的圖像，并且利用獲得的面部圖像執(zhí)行關(guān)于人員的認(rèn)證處理(參照專利文獻(xiàn)1(JP-A-2015-11537))。

技術(shù)實(shí)現(xiàn)要素：

這里可存在一種方法，其中當(dāng)圖像形成設(shè)備周圍存在的人員的面部圖像被捕獲時(shí)在人員到達(dá)圖像形成設(shè)備之前執(zhí)行利用面部圖像的認(rèn)證處理。然而，如果采用這種方法，則不能說圖像形成設(shè)備周圍存在的人員是想要使用圖像形成設(shè)備的人員(用戶)，并且可出現(xiàn)除用戶之外的人員被認(rèn)證的情況。

與當(dāng)人員的面部圖像被捕獲時(shí)立即開始認(rèn)證的情況相比，本發(fā)明致力于防止除認(rèn)證目標(biāo)人員之外的人員被認(rèn)證。

[1]本發(fā)明的一方面提供了一種認(rèn)證設(shè)備，該認(rèn)證設(shè)備包括：成像單元，其對(duì)認(rèn)證設(shè)備周圍的人員進(jìn)行成像；認(rèn)證單元，其利用通過成像單元成像的人員的面部圖像來認(rèn)證個(gè)體；以及指令單元，其給出用于開始認(rèn)證的指令，其中，認(rèn)證單元在指令單元給出指令之前獲取面部圖像并且在指令單元給出指令之后執(zhí)行認(rèn)證。

[2]可存在根據(jù)[1]所述的認(rèn)證設(shè)備，其中成像單元捕獲在第一 區(qū)中存在的人員的圖像，并且指令單元在第二區(qū)中存在人員的情況下給出用于開始認(rèn)證的指令，第二區(qū)位于第一區(qū)內(nèi)部并且比第一區(qū)更窄。

[3]可存在根據(jù)[1]所述的認(rèn)證設(shè)備，其中成像單元捕獲在第一區(qū)中存在的人員的圖像，并且指令單元在存在于第一區(qū)中的人員在第一區(qū)中停留預(yù)先設(shè)定的設(shè)定時(shí)段或更久的情況下給出用于開始認(rèn)證的指令。

[4]可存在根據(jù)[1]所述的認(rèn)證設(shè)備，其中成像單元捕獲在第一區(qū)中存在的人員的圖像，并且指令單元在存在于第一區(qū)中的人員接近認(rèn)證設(shè)備的情況下給出用于開始認(rèn)證的指令。

[5]可存在根據(jù)[1]至[4]中的任一個(gè)所述的認(rèn)證設(shè)備，其中指令單元在人員滿足該人員被估計(jì)為意圖使用認(rèn)證設(shè)備的條件的情況下給出用于開始認(rèn)證的指令。

[6]可存在根據(jù)[1]所述的認(rèn)證設(shè)備，還包括：保存單元，其保存通過成像單元捕獲的面部圖像，其中，保存單元從通過成像單元捕獲的多個(gè)圖像中提取滿足預(yù)定條件的面部圖像并且保存該面部圖像。

[7]可存在根據(jù)[1]所述的認(rèn)證設(shè)備，還包括：保存單元，其保存通過成像單元捕獲的面部圖像，其中，在成像單元捕獲多個(gè)人員的面部圖像的情況下，保存單元保存每個(gè)面部圖像。

[8]可存在根據(jù)[7]所述的認(rèn)證設(shè)備，還包括：選擇單元，其在保存單元保存多個(gè)人員的面部圖像的情況下選擇用于認(rèn)證的面部圖像。

[9]可存在根據(jù)[6]至[8]中的任一個(gè)所述的認(rèn)證設(shè)備，其中保存單元在認(rèn)證單元執(zhí)行認(rèn)證之后刪除除用于認(rèn)證的人員的面部圖像以外的面部圖像。

[10]可存在根據(jù)[1]至[9]中的任一個(gè)所述的認(rèn)證設(shè)備，還包括：通知單元，其執(zhí)行認(rèn)證單元中的認(rèn)證是否成功的通知。

[11]本發(fā)明的另一方面提供了一種處理設(shè)備，該處理設(shè)備包括：成像單元；指定單元，其利用通過成像單元捕獲的面部圖像指定個(gè)體；處理單元，其針對(duì)每個(gè)指定的個(gè)體執(zhí)行不同的處理；以及指令單元，其在人員滿足該人員被估計(jì)為意圖使用處理設(shè)備的條件的情況下給 出用于認(rèn)證人員的指令，其中，指定單元在指令給出之前已指定了個(gè)體，并且處理單元在指令給出之后開始與所指定的個(gè)體對(duì)應(yīng)的處理。

根據(jù)[1]，與在捕獲人員的面部圖像時(shí)立即開始認(rèn)證的情況相比，可防止除認(rèn)證目標(biāo)人員以外的人員被認(rèn)證。

根據(jù)[2]，與對(duì)存在于第一區(qū)而不存在于第二區(qū)中的人員進(jìn)行認(rèn)證的情況相比，可防止除認(rèn)證目標(biāo)人員以外的人員被認(rèn)證。

根據(jù)[3]，與對(duì)在第一區(qū)中停留比預(yù)定時(shí)間段更短的時(shí)間段的人員進(jìn)行認(rèn)證的情況相比，可防止除認(rèn)證目標(biāo)人員以外的人員被認(rèn)證。

根據(jù)[4]，與對(duì)在第一區(qū)中逐漸遠(yuǎn)離認(rèn)證設(shè)備的人員進(jìn)行認(rèn)證的情況相比，可防止除認(rèn)證目標(biāo)人員以外的人員被認(rèn)證。

根據(jù)[5]，與對(duì)不滿足人員被估計(jì)為意圖使用認(rèn)證設(shè)備的條件的人員進(jìn)行認(rèn)證的情況相比，可防止除認(rèn)證目標(biāo)人員以外的人員被認(rèn)證。

根據(jù)[6]，與將包括不滿足預(yù)定條件的面部圖像的面部圖像保存的情況相比，可減小在保存單元中需要的存儲(chǔ)容量。

根據(jù)[7]，與僅保存單個(gè)人員的面部圖像的情況相比，可防止除認(rèn)證目標(biāo)人員以外的人員被認(rèn)證。

根據(jù)[8]，與不從多個(gè)人員的面部圖像中選擇面部圖像的情況相比，可防止除認(rèn)證目標(biāo)人員以外的人員被認(rèn)證。

根據(jù)[9]，與將包括不用于認(rèn)證的面部圖像的面部圖像保存的情況相比，可減小在保存單元中需要的存儲(chǔ)容量。

根據(jù)[10]，與不執(zhí)行認(rèn)證是否成功的通知的情況相比，可在認(rèn)證未完成的狀態(tài)下防止靠近認(rèn)證設(shè)備的人員逐漸遠(yuǎn)離用于認(rèn)證的認(rèn)證設(shè)備。

根據(jù)[11]，與在人員的面部圖像被捕獲時(shí)立即開始認(rèn)證的情況相比，可防止除認(rèn)證目標(biāo)人員以外的人員被認(rèn)證。

附圖說明

將基于以下附圖詳細(xì)描述本發(fā)明的示例性實(shí)施例，其中

圖1是圖像形成設(shè)備的透視圖；

圖2是用戶界面的俯視圖；

圖3是用于解釋人員的存在被圖像形成設(shè)備檢測(cè)到的區(qū)域的俯視圖；

圖4是用于解釋人員的存在被圖像形成設(shè)備檢測(cè)到的區(qū)域的側(cè)視圖；

圖5圖像形成設(shè)備的功能性框圖；

圖6是示出與圖像形成設(shè)備的模式的控制有關(guān)的處理的流程圖；

圖7是示出圖像形成設(shè)備中的認(rèn)證過程的流程的流程圖；

圖8是示出認(rèn)證過程中的面部檢測(cè)和面部圖像獲取處理的流程的流程圖；

圖9是示出認(rèn)證過程中的面部認(rèn)證處理的流程的流程圖；

圖10A示出了預(yù)先由用戶在圖像形成設(shè)備中注冊(cè)的注冊(cè)表的示例，并且圖10B示出了用于面部檢測(cè)和面部圖像獲取處理的跟蹤表的示例；

圖11A至圖11E是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第一示例的示意圖；

圖12A至圖12D是示出在面部認(rèn)證處理中顯示在用戶界面上的引導(dǎo)屏幕的示例的示意圖；

圖13A和圖13B是示出通過第一相機(jī)捕獲的第一相機(jī)圖像的示例的示意圖；

圖14A和圖14B是示出通過第一相機(jī)捕獲的第一相機(jī)圖像的其它示例的示意圖；

圖15A至圖15D是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第二示例的示意圖；

圖16A至圖16E是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第三示例的示意圖；

圖17A至圖17E是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第四示例的示意圖；

圖18是示出圖像形成設(shè)備中的認(rèn)證過程的流程的流程圖；

圖19是示出認(rèn)證過程中的面部認(rèn)證處理的流程的流程圖；

圖20A至圖20D是示出圖像形成設(shè)備周圍存在的人員的位置的 時(shí)間變化的第一示例中的第一模式的示意圖；

圖21A至圖21D是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第一示例中的第二模式的示意圖；

圖22A至圖22D是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第二示例中的第一模式的示意圖；

圖23A至圖23D是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第二示例中的第二模式的示意圖；

圖24A至圖24D是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第三示例中的第一模式的示意圖；以及

圖25A至圖25D是示出圖像形成設(shè)備周圍存在的人員的位置的時(shí)間變化的第三示例中的第二模式的示意圖。

具體實(shí)施方式

[示例性實(shí)施例1]

下文中，將參照附圖詳細(xì)描述本發(fā)明的示例性實(shí)施例1。

圖1是應(yīng)用了當(dāng)前實(shí)施例的圖像形成設(shè)備10的透視圖。作為認(rèn)證設(shè)備、處理設(shè)備和顯示設(shè)備的示例的圖像形成設(shè)備10是具有掃描功能、打印功能、復(fù)印功能和傳真功能的所謂的多功能外設(shè)。

圖像形成設(shè)備10包括掃描儀11、打印機(jī)12和用戶界面(UI)13。在這些元件中，掃描儀11是一種讀取原始形成的圖像的裝置，而打印機(jī)12是一種將圖像形成在記錄材料上的裝置。用戶界面13是一種當(dāng)用戶使用圖像形成設(shè)備10時(shí)從用戶接收操作(指令)并向用戶顯示各種信息的裝置。

當(dāng)前實(shí)施例的掃描儀11布置在打印機(jī)12上方。用戶界面13附著至掃描儀11。這里，用戶界面13布置在用戶當(dāng)使用圖像形成設(shè)備10時(shí)所站的圖像形成設(shè)備10(掃描儀11)中的前側(cè)。用戶界面13布置為朝上，以使得站在圖像形成設(shè)備10的前側(cè)的用戶可在從上側(cè)觀看下側(cè)的同時(shí)操作用戶界面13。

圖像形成設(shè)備10還包括熱釋電傳感器14、第一相機(jī)15和第二相機(jī)16。在這些元件中，熱釋電傳感器14和第一相機(jī)15分別附著 于打印機(jī)12的前側(cè)和左側(cè)，以朝前。第一相機(jī)15布置在熱釋電傳感器14上方。第二相機(jī)16附著為在用戶界面13中的左側(cè)上朝上。

這里，熱釋電傳感器14具有檢測(cè)包括位于圖像形成設(shè)備10的前側(cè)的用戶的運(yùn)動(dòng)對(duì)象(人員等)的運(yùn)動(dòng)的功能。第一相機(jī)15由所謂的視頻相機(jī)構(gòu)成，并且具有捕獲圖像形成設(shè)備10的前側(cè)的圖像的功能。第二相機(jī)16也由所謂的視頻相機(jī)構(gòu)成，并且具有捕獲圖像形成設(shè)備10的上側(cè)的圖像的功能。這里，魚眼鏡頭設(shè)置在第一相機(jī)15和第二相機(jī)16中的每一個(gè)中。因此，與使用普通鏡頭的情況相比，第一相機(jī)15和第二相機(jī)16以更寬的角度捕獲圖像。

圖像形成設(shè)備10還包括投影儀17。在該示例中，當(dāng)從前側(cè)看時(shí)，投影儀17布置在圖像形成設(shè)備10的主體的右側(cè)上。投影儀17將各種畫面投影在圖像形成設(shè)備10的背側(cè)上設(shè)置的屏幕(未示出)上。這里，所述屏幕不限于所謂的投影屏幕，并且可使用墻壁等。投影儀17相對(duì)于圖像形成設(shè)備10的主體的安裝位置可改變。在該示例中，圖像形成設(shè)備10的主體和投影儀17彼此分離地設(shè)置，但是圖像形成設(shè)備10的主體和投影儀17可通過利用將投影儀17附著于掃描儀11的背面?zhèn)鹊姆椒ǖ纫惑w地設(shè)置。

圖2是圖1所示的用戶界面13的俯視圖。然而，圖2還示出了布置在用戶界面13中的第二相機(jī)16。

用戶界面13包括觸摸面板130、第一操作按鈕組131、第二操作按鈕組132和USB存儲(chǔ)器附接部分133。這里，第一操作按鈕組131布置在觸摸面板130的右側(cè)上。第二操作按鈕組132、USB存儲(chǔ)器附接部分133和第二相機(jī)16布置在觸摸面板130的右側(cè)上。

這里，觸摸面板130具有利用圖像向用戶顯示信息和從用戶接收輸入操作的功能。第一操作按鈕組131和第二操作按鈕組132具有從用戶接收輸入操作的功能。USB存儲(chǔ)器附接部分133允許用戶將USB存儲(chǔ)器附接于其上。

設(shè)置在用戶界面13中的第二相機(jī)16布置在可捕獲使用圖像形成設(shè)備10的用戶的面部的圖像的位置。通過第二相機(jī)16捕獲的圖像(包括用戶的面部的圖像)顯示在觸摸面板130上。這里，在當(dāng)前實(shí) 施例的圖像形成設(shè)備10中，如將在稍后描述的，通過利用捕獲接近圖像形成設(shè)備10的人員的面部的第一相機(jī)15獲得的面部圖像來執(zhí)行針對(duì)允許使用圖像形成設(shè)備10的認(rèn)證。因?yàn)檫@個(gè)原因，想要使用圖像形成設(shè)備10的人員(用戶)需要預(yù)先注冊(cè)他的面部圖像。當(dāng)前實(shí)施例中的第二相機(jī)16用于在該面部圖像被注冊(cè)時(shí)捕獲人員的面部。

在當(dāng)前實(shí)施例中，通過第一相機(jī)15捕獲的圖像可顯示在觸摸面板130上。在以下描述中，通過第一相機(jī)15捕獲的圖像將被稱作第一相機(jī)圖像，并且通過第二相機(jī)16捕獲的圖像將被稱作第二相機(jī)圖像。

圖3是用于解釋人員的存在被圖像形成設(shè)備10檢測(cè)到的區(qū)域的俯視圖。圖3是當(dāng)沿著圖像形成設(shè)備10的高度方向從頂部觀看圖像形成設(shè)備10及其附近時(shí)獲得的示圖。

圖4是用于解釋人員的存在被圖像形成設(shè)備10檢測(cè)到的區(qū)域的側(cè)視圖。圖4是當(dāng)從圖像形成設(shè)備10的側(cè)面(在該示例中，當(dāng)從圖像形成設(shè)備10的前側(cè)觀看時(shí)的右側(cè))觀看圖像形成設(shè)備10及其附近時(shí)獲得的示圖。圖4還示出了人員H，但未示出圖3所示的檢測(cè)區(qū)F。

這里，如圖3和圖4所示，第一相機(jī)15(參照?qǐng)D1)在圖像形成設(shè)備10中附著的位置被稱作圖像形成設(shè)備10的位置P。

在該示例中，熱釋電傳感器14(參照?qǐng)D1)檢測(cè)在檢測(cè)區(qū)F中存在的人員H。檢測(cè)區(qū)F形成在圖像形成設(shè)備10的前側(cè)上，并且當(dāng)沿著高度方向從頂部觀看時(shí)呈現(xiàn)圓心角設(shè)為小于180度的扇形。

在該示例中，通過利用對(duì)第一相機(jī)15(參照?qǐng)D1)所捕獲的第一相機(jī)圖像進(jìn)行分析的結(jié)果，檢測(cè)在人員檢測(cè)區(qū)R1、人員操作區(qū)R2、進(jìn)入檢測(cè)區(qū)R3和接近檢測(cè)區(qū)R4中存在的人員H。

在這些區(qū)中，人員檢測(cè)區(qū)R1形成在圖像形成設(shè)備10的前側(cè)上，并當(dāng)沿著高度方向從頂部觀看時(shí)呈現(xiàn)圓心角設(shè)為小于180度的扇形。人員檢測(cè)區(qū)R1設(shè)為包括整個(gè)檢測(cè)區(qū)F(在該示例中，不是包括其一部分)。人員檢測(cè)區(qū)R1的圓心角可設(shè)為除180度以外的角度。然而，第一相機(jī)15至少具有整個(gè)人員檢測(cè)區(qū)R1作為成像區(qū)。

接著，人員操作區(qū)R2設(shè)在圖像形成設(shè)備10的前側(cè)上，并且當(dāng) 沿著高度方向從頂部觀看時(shí)呈現(xiàn)矩形形狀。在該示例中，矩形區(qū)沿著寬度方向的長(zhǎng)度等于圖像形成設(shè)備10沿著寬度方向的長(zhǎng)度。整個(gè)人員操作區(qū)R2位于人員檢測(cè)區(qū)R1以內(nèi)。在人員檢測(cè)區(qū)R1中，人員操作區(qū)R2布置在更靠近圖像形成設(shè)備10的一側(cè)上。

進(jìn)入檢測(cè)區(qū)R3形成在圖像形成設(shè)備10的前側(cè)上，并且當(dāng)沿著高度方向從頂部觀看時(shí)呈現(xiàn)圓心角設(shè)為180度的扇形。整個(gè)進(jìn)入檢測(cè)區(qū)R3位于人員檢測(cè)區(qū)R1以內(nèi)。在人員檢測(cè)區(qū)R1中，進(jìn)入檢測(cè)區(qū)R3布置在更靠近圖像形成設(shè)備10的一側(cè)上。上述的整個(gè)人員操作區(qū)R2位于進(jìn)入檢測(cè)區(qū)R3以內(nèi)。在進(jìn)入檢測(cè)區(qū)R3中，人員操作區(qū)R2布置在更靠近圖像形成設(shè)備10的一側(cè)上。

接近檢測(cè)區(qū)R4形成在圖像形成設(shè)備10的前側(cè)上，并且當(dāng)沿著高度方向從頂部觀看時(shí)呈現(xiàn)圓心角設(shè)為180度的扇形。整個(gè)接近檢測(cè)區(qū)R4位于進(jìn)入檢測(cè)區(qū)R3以內(nèi)。在進(jìn)入檢測(cè)區(qū)R3中，接近檢測(cè)區(qū)R4布置在更靠近圖像形成設(shè)備10的一側(cè)上。上述的整個(gè)人員操作區(qū)R2位于接近檢測(cè)區(qū)R4以內(nèi)。在接近檢測(cè)區(qū)R4中，人員操作區(qū)R2布置在更靠近圖像形成設(shè)備10的一側(cè)上。

在當(dāng)前實(shí)施例的圖像形成設(shè)備10中，如將在稍后描述的，通過利用對(duì)接近圖像形成設(shè)備10的人員H的面部進(jìn)行成像的第一相機(jī)15所獲得的面部圖像來執(zhí)行針對(duì)使用圖像形成設(shè)備10的認(rèn)證。在圖像形成設(shè)備10中，如將在稍后描述的，檢測(cè)在人員檢測(cè)區(qū)R1中存在的人員H的腳尖，并且利用由第一相機(jī)15捕獲的第一相機(jī)圖像來確定人員H是否接近圖像形成設(shè)備10。

這里，為了便于使用，圖像形成設(shè)備10的高度通常設(shè)為約1000mm至1300mm，因此，第一相機(jī)15距離安裝表面的高度為約700mm至900mm。如上所述，需要利用第一相機(jī)15對(duì)人員H的腳尖成像，因此在一定程度上，第一相機(jī)15的高度限于低的位置。因?yàn)檫@個(gè)原因，第一相機(jī)15距離安裝表面的高度(位置P)小于普通成人(人員H)的面部的高度，如圖4所示。因此，在人員H太過靠近圖像形成設(shè)備10的情況下，即使使用了魚眼鏡頭，第一相機(jī)15也難以對(duì)人員H的面部成像，并且即使對(duì)人員H的面部成像，也難以分析獲得的 面部圖像。

因此，在該示例中，將可通過分析第一相機(jī)15捕獲的第一相機(jī)圖像來分析人員H的面部圖像的距離的極限定義為面部檢測(cè)極限L。基于可通過第一相機(jī)15對(duì)具有正常身高的人員H的面部成像的距離來確定面部檢測(cè)極限L。在該示例中，面部檢測(cè)極限L位于人員操作區(qū)R2以外且位于接近檢測(cè)區(qū)R4以內(nèi)。

在有人員H想要使用當(dāng)前實(shí)施例的圖像形成設(shè)備10的情況下，人員H首先進(jìn)入檢測(cè)區(qū)F。進(jìn)入檢測(cè)區(qū)F的人員H接著進(jìn)入人員檢測(cè)區(qū)R1，并且從進(jìn)入檢測(cè)區(qū)R3經(jīng)接近檢測(cè)區(qū)R4再進(jìn)入人員操作區(qū)R2。在該示例中，運(yùn)動(dòng)經(jīng)過人員檢測(cè)區(qū)R1的人員H在從接近檢測(cè)區(qū)R4進(jìn)入人員操作區(qū)R2時(shí)經(jīng)過面部檢測(cè)極限L。進(jìn)入人員操作區(qū)R2的人員H在停留在人員操作區(qū)R2中時(shí)利用用戶界面13執(zhí)行操作。人員檢測(cè)區(qū)R1、人員操作區(qū)R2、進(jìn)入檢測(cè)區(qū)R3和接近檢測(cè)區(qū)R4中的每一個(gè)不一定需要如圖3所示地設(shè)置，并且在可基于通過第一相機(jī)15捕獲的第一相機(jī)圖像來指定各個(gè)區(qū)的情況下足矣。面部檢測(cè)極限L不需要設(shè)置在人員操作區(qū)R2與接近檢測(cè)區(qū)R4之間，而是可根據(jù)第一相機(jī)15的性能或附著位置(位置P距離安裝表面的高度)改變。

圖5是圖像形成設(shè)備10的功能性框圖。當(dāng)前實(shí)施例的圖像形成設(shè)備10包括控制單元101、通信單元102、操作單元103、顯示單元104、存儲(chǔ)單元105、圖像讀取單元106和圖像形成單元107。圖像形成設(shè)備10還包括檢測(cè)單元108、成像單元109、人員檢測(cè)單元110、面部檢測(cè)單元111、面部注冊(cè)/認(rèn)證單元112、指令單元113、選擇單元114和通知單元115。

例如，控制單元101包括中央處理單元(CPU)和存儲(chǔ)器，并且控制圖像形成設(shè)備10的各個(gè)單元。CPU執(zhí)行存儲(chǔ)在存儲(chǔ)器或存儲(chǔ)單元105中的程序。例如，存儲(chǔ)器包括只讀存儲(chǔ)器(ROM)和隨機(jī)存取存儲(chǔ)器(RAM)。ROM預(yù)先存儲(chǔ)程序或數(shù)據(jù)。RAM臨時(shí)存儲(chǔ)程序或數(shù)據(jù)，并當(dāng)CPU執(zhí)行程序時(shí)用作工作區(qū)域。

通信單元102是連接至通信線(未示出)的通信接口。通信單元102經(jīng)由通信線與客戶端設(shè)備或其它圖像形成設(shè)備(都未示出)執(zhí) 行通信。

操作單元103將與用戶的操作相對(duì)應(yīng)的信息輸入至控制單元101。在該示例中，通過設(shè)置在用戶界面13中的觸摸面板130、第一操作按鈕組131和第二操作按鈕組132實(shí)現(xiàn)操作單元103。

顯示單元104向用戶顯示各種信息。在該示例中，通過設(shè)置在用戶界面13中的觸摸面板130實(shí)現(xiàn)顯示單元104。

例如，存儲(chǔ)單元105是硬盤，并且存儲(chǔ)由控制單元101使用的各種程序或數(shù)據(jù)。

圖像讀取單元106讀取原始圖像以產(chǎn)生圖像數(shù)據(jù)。在該示例中，通過掃描儀11實(shí)現(xiàn)圖像讀取單元106。

圖像形成單元107在諸如紙張的片狀記錄材料上形成對(duì)應(yīng)于圖像數(shù)據(jù)的圖像。在這種情況下，通過打印機(jī)12實(shí)現(xiàn)圖像形成單元107。圖像形成單元107可根據(jù)電子照相法形成圖像，并且可根據(jù)其它方法形成圖像。

檢測(cè)單元108對(duì)包括人員H的運(yùn)動(dòng)對(duì)象執(zhí)行檢測(cè)。在該示例中，通過熱釋電傳感器14實(shí)現(xiàn)檢測(cè)單元108。

成像單元109對(duì)包括人員H的成像目標(biāo)進(jìn)行成像。在該示例中，通過第一相機(jī)15和第二相機(jī)16實(shí)現(xiàn)成像單元109。

人員檢測(cè)單元110分析通過第一相機(jī)15捕獲的第一相機(jī)圖像，以檢測(cè)在人員檢測(cè)區(qū)R1、人員操作區(qū)R2、進(jìn)入檢測(cè)區(qū)R3和接近檢測(cè)區(qū)R4中存在的人員H。

面部檢測(cè)單元111分析通過第一相機(jī)15捕獲的第一相機(jī)圖像，以檢測(cè)在人員檢測(cè)區(qū)R1以內(nèi)和面部檢測(cè)極限L以外存在的人員H的面部圖像。

面部注冊(cè)/認(rèn)證單元112關(guān)于可使用圖像形成設(shè)備10的人員H(用戶)預(yù)先利用用戶的面部圖像執(zhí)行注冊(cè)。這里，在注冊(cè)中，利用第二相機(jī)16捕獲用戶的面部圖像，并且從捕獲的面部圖像中提取特征量。用戶的ID(注冊(cè)ID)、由用戶設(shè)置的各種信息(稱作注冊(cè)人員信息)和從用戶的面部圖像提取的特征量(稱作面部信息)彼此關(guān)聯(lián)，并且存儲(chǔ)在存儲(chǔ)單元105中。在以下描述中，其中注冊(cè)ID、注 冊(cè)人員信息和面部信息彼此關(guān)聯(lián)的表將被稱作注冊(cè)表，并且在注冊(cè)表中注冊(cè)的用戶(人員H)將被稱作注冊(cè)人員。

面部注冊(cè)/認(rèn)證單元112在用戶將要使用圖像形成設(shè)備10時(shí)利用用戶的面部圖像執(zhí)行認(rèn)證。這里，在認(rèn)證過程中，利用第一相機(jī)15捕獲人員H(用戶)的面部圖像，并且還從捕獲的面部圖像中提取特征量。檢查通過當(dāng)前成像獲得的特征量是否與預(yù)先注冊(cè)的特征量匹配，并且在存在匹配特征量的情況下(注冊(cè)為用戶的注冊(cè)人員的情況)，允許使用圖像形成設(shè)備10。在無匹配特征量的情況下(未注冊(cè)為用戶的未注冊(cè)人員的情況)，禁止使用圖像形成設(shè)備10。

指令單元113將用于利用由第一相機(jī)15捕獲的面部圖像開始認(rèn)證處理的指令輸出至面部注冊(cè)/認(rèn)證單元112。

在關(guān)于同一人員H利用第一相機(jī)15獲取所述多個(gè)面部圖像的情況下，選擇單元114選擇多個(gè)面部圖像中的一個(gè)面部圖像。

通知單元115向在例如人員檢測(cè)區(qū)R1中存在的人員H通知期望根據(jù)需要提供的信息。通過投影儀17實(shí)現(xiàn)通知單元115。

在當(dāng)前實(shí)施例中，成像單元109(更具體地說，第一相機(jī)15)是成像單元的示例，面部注冊(cè)/認(rèn)證單元112是認(rèn)證單元的示例，并且存儲(chǔ)單元105是保存單元的示例。面部檢測(cè)單元111和面部注冊(cè)/認(rèn)證單元112是指定單元的示例，并且面部注冊(cè)/認(rèn)證單元112是處理單元的示例。在人員檢測(cè)區(qū)R1中比面部檢測(cè)極限L更加靠?jī)?nèi)的區(qū)(更靠近圖像形成設(shè)備10的區(qū))是設(shè)置區(qū)的示例，并且人員檢測(cè)區(qū)R1是第一區(qū)的示例。進(jìn)入檢測(cè)區(qū)R3是第二區(qū)的示例，并且在人員檢測(cè)區(qū)R1中比面部檢測(cè)極限L更加靠外的區(qū)是第三區(qū)的示例。

這里，當(dāng)前實(shí)施例的圖像形成設(shè)備10根據(jù)功耗量不同的兩種模式(諸如“正常模式”和“睡眠模式”)之一進(jìn)行操作。在圖像形成設(shè)備10在正常模式下操作的情況下，將執(zhí)行各種處理所需的電力供應(yīng)至圖像形成設(shè)備10的各個(gè)單元。另一方面，在圖像形成設(shè)備10在睡眠模式下操作的情況下，停止將電力供應(yīng)至圖像形成設(shè)備10中的至少一些單元，并且圖像形成設(shè)備10功耗量變得比在正常模式下更小。然而，即使在圖像形成設(shè)備10在睡眠模式下操作的情況下， 也將電力供應(yīng)至控制單元101、熱釋電傳感器14和第一相機(jī)15，并且上述元件即使在睡眠模式下也可操作。

圖6是示出與對(duì)圖像形成設(shè)備10的模式的控制有關(guān)的處理的流程的的流程圖。

在該示例中，在初始狀態(tài)下，圖像形成設(shè)備10設(shè)為睡眠模式(步驟S1)。即使在睡眠模式下，也將熱釋電傳感器14激活以執(zhí)行操作。另一方面，此時(shí)，假設(shè)第一相機(jī)15未被激活。當(dāng)圖像形成設(shè)備10在睡眠模式下操作時(shí)，控制單元101監(jiān)控?zé)後岆妭鞲衅?4中的紅外線的量的檢測(cè)結(jié)果，以確定在檢測(cè)區(qū)F中是否存在人員H(步驟S2)。在步驟S2中執(zhí)行否定確定(否)的情況下，流程返回至步驟S2，并且重復(fù)執(zhí)行該處理。

另一方面，在步驟S2中執(zhí)行肯定確定(是)的情況下，也就是說，在檢測(cè)區(qū)F中檢測(cè)到人員H的情況下，控制單元101開始將電力供應(yīng)至第一相機(jī)15，并且還激活第一相機(jī)15以開始對(duì)人員檢測(cè)區(qū)R1成像(步驟S3)。如果通過第一相機(jī)15開始成像，則人員檢測(cè)單元110分析從第一相機(jī)15獲取的第一相機(jī)圖像，并且開始檢測(cè)人員H的運(yùn)動(dòng)的處理(步驟S4)。

在步驟S4中開始的檢測(cè)人員H的運(yùn)動(dòng)的處理中，人員檢測(cè)單元110估計(jì)從圖像形成設(shè)備10至人員H的距離，并且計(jì)算指示人員H的運(yùn)動(dòng)的運(yùn)動(dòng)向量?？筛鶕?jù)公知方法執(zhí)行檢測(cè)人員H的運(yùn)動(dòng)的處理，但是，例如，人員檢測(cè)單元110基于從捕獲的圖像檢測(cè)的身體部分的大小來估計(jì)從圖像形成設(shè)備10至人員H的距離。人員檢測(cè)單元110對(duì)通過第一相機(jī)15獲得的捕獲的圖像執(zhí)行框架處理，并且按照時(shí)間次序?qū)?duì)應(yīng)于多個(gè)框架的捕獲的圖像彼此比較。此時(shí)，人員檢測(cè)單元110檢測(cè)作為人員H的身體部分的腳尖，并且分析檢測(cè)的部分的運(yùn)動(dòng)，以計(jì)算運(yùn)動(dòng)向量。人員檢測(cè)單元110將從第一相機(jī)15獲取的第一相機(jī)圖像(利用魚眼鏡頭獲得的失真圖像)校正為平面圖像(在平面圖中顯影第一相機(jī)圖像)，并且隨后檢測(cè)人員H的運(yùn)動(dòng)。

接著，人員檢測(cè)單元110確定是否檢測(cè)到在人員檢測(cè)區(qū)R1中存在的接近圖像形成設(shè)備10的人員H(步驟S5)。例如，在確定有人 員H在人員檢測(cè)區(qū)R1中并且朝著圖像形成設(shè)備10運(yùn)動(dòng)的情況下，人員檢測(cè)單元110在步驟S5中執(zhí)行肯定確定(是)。在步驟S5中執(zhí)行否定確定(否)的情況下，流程返回步驟S5，并且重復(fù)執(zhí)行該處理。

相反，在步驟S5中執(zhí)行肯定確定(是)的情況下，控制單元101使得圖像形成設(shè)備10的模式從睡眠模式轉(zhuǎn)變?yōu)檎ＤＪ?步驟S6)。此時(shí)，控制單元101指示將對(duì)應(yīng)于正常模式的電力供應(yīng)至圖像形成設(shè)備10的各個(gè)單元，以激活圖像形成設(shè)備10的各個(gè)單元。另外，控制單元101開始將電力供應(yīng)至第二相機(jī)16，以激活第二相機(jī)16。

在當(dāng)前實(shí)施例中，當(dāng)檢測(cè)到在人員檢測(cè)區(qū)R1中存在人員H時(shí)，不會(huì)發(fā)生從睡眠模式瞬時(shí)轉(zhuǎn)變?yōu)檎ＤＪ?，但是?dāng)檢測(cè)到在人員檢測(cè)區(qū)R1中存在的人員H接近圖像形成設(shè)備10時(shí)發(fā)生從睡眠模式轉(zhuǎn)變?yōu)檎ＤＪ健Ｗ鳛閳?zhí)行這種控制的結(jié)果，例如，在人員H只是經(jīng)過人員檢測(cè)區(qū)R1的情況下，圖像形成設(shè)備10從睡眠模式轉(zhuǎn)變?yōu)檎ＤＪ降臋C(jī)會(huì)減小。

如果在步驟S6中發(fā)生從睡眠模式至正常模式的轉(zhuǎn)變，則面部檢測(cè)單元111分析從第一相機(jī)15獲取的第一相機(jī)圖像，并且開始檢測(cè)在人員檢測(cè)區(qū)R1中存在的人員H的面部的處理(步驟S7)。

接著，人員檢測(cè)單元110分析從第一相機(jī)15獲取的第一相機(jī)圖像，以確定人員H是否存在(停留)于人員操作區(qū)R2中(步驟S8)。此時(shí)，人員檢測(cè)單元110分析來自第一相機(jī)15的第一相機(jī)圖像，以檢測(cè)人員H的身體部分，并且基于檢測(cè)到的部分的位置和大小來檢測(cè)人員H在人員操作區(qū)R2中的存在。例如，人員檢測(cè)單元110基于檢測(cè)到的身體部分的大小來估計(jì)從圖像形成設(shè)備10至人員H的距離，并且基于檢測(cè)到的身體部分的位置來指定人員H存在的方向。

在步驟S8中執(zhí)行肯定確定(是)的情況下，流程返回至步驟S8，并且步驟S7中開始的對(duì)人員H的面部的檢測(cè)處理繼續(xù)。因此，人員檢測(cè)單元110在正常模式下也重復(fù)執(zhí)行對(duì)人員H在人員操作區(qū)R2中的存在的檢測(cè)處理，直至在人員操作區(qū)R2中未檢測(cè)到存在人員H為止。

另一方面，在步驟S8中執(zhí)行否定確定(否)的情況下，也就是 說，在人員操作區(qū)R2中不存在人員H(人員H已退出人員操作區(qū)R2)的情況下，控制單元101開始利用計(jì)時(shí)器計(jì)時(shí)(步驟S9)。換句話說，控制單元101利用計(jì)時(shí)器測(cè)量從人員操作區(qū)R2中不存在人員H的時(shí)刻經(jīng)過的時(shí)間。

接著，人員檢測(cè)單元110確定在人員操作區(qū)R2中是否存在人員H(步驟S10)。在步驟S10中，在人員操作區(qū)R2中不存在人員H之后，人員檢測(cè)單元110再次確定在人員操作區(qū)R2中是否存在人員H。

在步驟S10中執(zhí)行否定確定(否)的情況下，控制單元101確定通過計(jì)時(shí)器測(cè)量的時(shí)間點(diǎn)是否已經(jīng)超出設(shè)定時(shí)段(步驟S11)。例如，設(shè)定時(shí)段是一分鐘，但是可設(shè)為除一分鐘以外的時(shí)間段。在步驟S11中執(zhí)行否定確定(否)的情況下，控制單元101返回至步驟S10并且繼續(xù)進(jìn)行處理。在步驟S10和步驟S11中，確定人員操作區(qū)R2中不存在人員H的時(shí)段是否持續(xù)設(shè)定時(shí)段。

相反，在步驟S11中執(zhí)行肯定確定(是)的情況下，控制單元101使得圖像形成設(shè)備10的模式從正常模式轉(zhuǎn)變?yōu)樗吣Ｊ?步驟S12)。此時(shí)，控制單元101指示將對(duì)應(yīng)于睡眠模式的電力供應(yīng)至圖像形成設(shè)備10的各個(gè)單元，并且使在睡眠模式中停止的圖像形成設(shè)備10的各個(gè)單元的操作停止。然后，在熱釋電傳感器14未檢測(cè)到人員H在檢測(cè)區(qū)F中的存在的情況下，控制單元101使第一相機(jī)15的操作停止。

這里，假設(shè)這樣一種情況，其中，在計(jì)時(shí)器在步驟S9中開始計(jì)時(shí)之后，從在人員操作區(qū)R2中不存在人員H時(shí)的時(shí)刻開始過去設(shè)定時(shí)段之前，在人員操作區(qū)R2中再次檢測(cè)人員H的存在。在這種情況下，控制單元101在步驟S10中執(zhí)行肯定確定(是)，并且再次停止計(jì)時(shí)器的計(jì)時(shí)，以使計(jì)時(shí)器復(fù)位(步驟S13)?？刂茊卧?01返回步驟S8，并且繼續(xù)進(jìn)行處理。換句話說，再次執(zhí)行在人員操作區(qū)R2中存在人員H的情況下執(zhí)行的處理。這里，舉例了同一人員H返回人員操作區(qū)R2的情況，但是同樣在另一人員H運(yùn)動(dòng)進(jìn)入人員操作區(qū)R2的情況下，人員檢測(cè)單元110在步驟S10中執(zhí)行肯定確定(是)。

這里，在現(xiàn)有技術(shù)中，想要使用圖像形成設(shè)備10的人員H(用 戶)給出捕獲面部圖像的指令，并且在利用用戶的面部圖像執(zhí)行認(rèn)證的情況下請(qǐng)求對(duì)他/她自己的認(rèn)證。例如，人員H站在人員操作區(qū)R2中，并且在用戶的面部朝向設(shè)置在用戶界面13中的第二相機(jī)16的狀態(tài)下使得面部圖像被捕獲。相反，在當(dāng)前實(shí)施例的圖像形成設(shè)備10中，預(yù)先通過第一相機(jī)15捕獲在人員檢測(cè)區(qū)R1中存在的人員H的面部圖像，并且在滿足特定條件的狀態(tài)下利用捕獲到的人員H的面部圖像執(zhí)行認(rèn)證處理。

圖7是示出圖像形成設(shè)備10中的認(rèn)證過程的流程的流程圖。在圖像形成設(shè)備10設(shè)為正常模式的狀態(tài)下執(zhí)行圖7所示的處理。

如圖6的步驟S7所示，如果圖像形成設(shè)備10設(shè)為正常模式，則分析從第一相機(jī)15獲取的第一相機(jī)圖像，并且開始檢測(cè)在人員檢測(cè)區(qū)R1中存在的人員H的面部的處理。與此同時(shí)，面部檢測(cè)單元111執(zhí)行從第一相機(jī)圖像檢測(cè)人員H的面部以及獲取檢測(cè)到的面部圖像的面部檢測(cè)和面部圖像獲取處理(步驟S20)。面部注冊(cè)/認(rèn)證單元112確定是否存在來自指令單元113的用于開始面部認(rèn)證處理的指令(步驟S40)。在步驟S40中執(zhí)行否定確定(否)的情況下，流程返回至步驟S20，并且繼續(xù)進(jìn)行處理。

另一方面，在步驟S40中執(zhí)行肯定確定(是)的情況下，面部注冊(cè)/認(rèn)證單元112利用步驟S20中的面部檢測(cè)和面部圖像獲取處理的結(jié)果(也就是說，從自第一相機(jī)15獲取的第一相機(jī)圖像中獲得的人員H的面部圖像)執(zhí)行設(shè)置是否成功認(rèn)證的面部認(rèn)證處理(步驟S60)，并且完成處理。

在圖7中，在執(zhí)行步驟S20之后執(zhí)行步驟S40，但實(shí)際上，步驟S20和步驟S40并行執(zhí)行。因此，在執(zhí)行步驟S20中的處理的過程中在步驟S40中執(zhí)行肯定確定(是)的情況下，也就是說，存在用于開始認(rèn)證處理的指令的情況下，步驟S20中的處理停止，并且流程前進(jìn)至步驟S60。

將更詳細(xì)地描述在以上步驟S20中的面部檢測(cè)和面部圖像獲取處理和在以上步驟S60中的面部認(rèn)證處理中的每一個(gè)。

圖8是示出當(dāng)前實(shí)施例的認(rèn)證過程中的面部檢測(cè)和面部圖像獲 取處理(步驟S20)的流程的流程圖。圖9是示出當(dāng)前實(shí)施例的認(rèn)證過程中的認(rèn)證處理(步驟S60)的流程的流程圖。

首先，參照?qǐng)D8，將描述步驟S20中的面部檢測(cè)和面部圖像獲取處理的內(nèi)容。

這里，首先，人員檢測(cè)單元110和面部檢測(cè)單元111獲取由第一相機(jī)15捕獲的第一相機(jī)圖像(步驟S21)。接著，人員檢測(cè)單元110分析在步驟S21中獲取的第一相機(jī)圖像，以確定人員H是否存在于人員檢測(cè)區(qū)R1中(步驟S22)。在步驟S22中執(zhí)行否定確定(否)的情況下，流程返回至步驟S21，并且處理繼續(xù)進(jìn)行。

另一方面，在步驟S22中執(zhí)行肯定確定(是)的情況下，人員檢測(cè)單元110確定在步驟S22中已檢測(cè)到存在的人員H是否處于已檢測(cè)到存在并且是被跟蹤人員的狀態(tài)(步驟S23)。在步驟S23中執(zhí)行肯定確定(是)的情況下，流程前進(jìn)至將在稍后描述的步驟S25。

相反，在步驟S23中執(zhí)行否定確定(否)的情況下，人員檢測(cè)單元110獲取在步驟S22中已檢測(cè)到存在的人員H的跟蹤ID并且將跟蹤ID存儲(chǔ)在存儲(chǔ)單元105中，并且開始人員H的跟蹤(步驟S24)。面部檢測(cè)單元111分析在步驟S21中獲取的第一相機(jī)圖像，以搜索被跟蹤人員的面部(步驟S25)。

接著，面部檢測(cè)單元111確定是否已從第一相機(jī)圖像中檢測(cè)到被跟蹤人員的面部(步驟S26)。在步驟S26中執(zhí)行否定確定(否)的情況下，流程前進(jìn)至將在稍后描述的步驟S30。

另一方面，在步驟S26中執(zhí)行肯定確定(是)的情況下，面部檢測(cè)單元111將從被跟蹤人員的面部圖像中提取的面部信息與被跟蹤人員的跟蹤ID關(guān)聯(lián)地注冊(cè)在存儲(chǔ)單元105中(步驟S27)。在以下描述中，其中跟蹤ID與面部信息關(guān)聯(lián)的表將被稱作跟蹤表。面部檢測(cè)單元111確定同一被跟蹤人員的面部信息是否關(guān)于該被跟蹤人員在跟蹤表中多次(在該示例中，兩次)注冊(cè)(步驟S28)。在步驟S28中執(zhí)行否定確定(否)的情況下，流程前進(jìn)至將在稍后描述的步驟S30。

相反，在步驟S28中執(zhí)行肯定確定(是)的情況下，選擇單元 114在存儲(chǔ)單元105中選擇作為跟蹤表注冊(cè)的兩個(gè)面部信息之一，并且從存儲(chǔ)單元105中刪除未被選擇的另一個(gè)面部信息(步驟S29)。

人員檢測(cè)單元110獲取通過第一相機(jī)15捕獲的第一相機(jī)圖像(步驟S30)。接著，人員檢測(cè)單元110分析在步驟S30中獲取的第一相機(jī)圖像，以確定被跟蹤人員是否在存在于人員檢測(cè)區(qū)R1中(步驟S31)。在步驟S31中執(zhí)行肯定確定(是)的情況下，流程返回至步驟S21，并且處理繼續(xù)進(jìn)行。

另一方面，在步驟S31中執(zhí)行否定確定(否)的情況下，人員檢測(cè)單元110從跟蹤表中刪除在步驟S31中未檢測(cè)到存在的被跟蹤人員(人員H)的跟蹤ID和面部信息(步驟S32)，返回至步驟S21，并且處理繼續(xù)進(jìn)行。

接著，參照?qǐng)D9，將描述步驟S60中的面部認(rèn)證處理的內(nèi)容。

這里，首先，選擇單元114選擇作為針對(duì)其在圖7所示的步驟S40中給出用于面部認(rèn)證處理的指令的目標(biāo)的人員H(目標(biāo)人員)，并且面部注冊(cè)/認(rèn)證單元112確定目標(biāo)人員是否是在跟蹤表中注冊(cè)的被跟蹤人員(步驟S61)。在步驟S61中執(zhí)行否定確定(否)的情況下，流程前進(jìn)至將在稍后描述的步驟S71。

相反，在步驟S61中執(zhí)行肯定確定(是)的情況下，面部注冊(cè)/認(rèn)證單元112確定作為目標(biāo)人員的同一被跟蹤人員的面部信息是否被注冊(cè)在存儲(chǔ)單元105中(步驟S62)。在步驟S62中執(zhí)行否定確定(否)的情況下，流程前進(jìn)至將在稍后描述的步驟S71。

另一方面，在步驟S62中執(zhí)行肯定確定(是)的情況下，面部注冊(cè)/認(rèn)證單元112利用在步驟S62中確認(rèn)在跟蹤表中注冊(cè)的目標(biāo)人員的面部信息來請(qǐng)求面部認(rèn)證(步驟S63)。接著，面部注冊(cè)/認(rèn)證單元112將目標(biāo)人員的面部信息與在注冊(cè)表中注冊(cè)的全部注冊(cè)人員的面部信息進(jìn)行比對(duì)(步驟S64)。面部注冊(cè)/認(rèn)證單元112確定認(rèn)證是否成功(步驟S65)。這里，在步驟S65中，如果目標(biāo)人員的面部信息與全部注冊(cè)人員的面部信息中的任一個(gè)匹配，則執(zhí)行肯定確定(是)，如果目標(biāo)人員的面部信息與全部注冊(cè)人員的面部信息中的任一個(gè)都不匹配，則執(zhí)行否定確定(否)。

在步驟S65中執(zhí)行肯定確定(是)的情況下，通知單元115利用投影儀17向目標(biāo)人員等通知已成功認(rèn)證(步驟S66)。顯示單元104向該目標(biāo)人員顯示針對(duì)認(rèn)證過的目標(biāo)人員設(shè)置的UI屏幕(在執(zhí)行認(rèn)證之后的屏幕)(步驟S67)，并且前進(jìn)至將稍后描述的步驟S74。

另一方面，在步驟S65中執(zhí)行否定確定(否)的情況下，人員檢測(cè)單元110確定目標(biāo)人員是否存在于接近檢測(cè)區(qū)R4中(步驟S68)。在步驟S68中執(zhí)行否定確定(否)的情況下，流程返回至步驟S61，并且處理繼續(xù)進(jìn)行。

相反，在步驟S68中執(zhí)行肯定確定(是)的情況下，通知單元115利用投影儀17向目標(biāo)人員等通知認(rèn)證失敗(步驟S69)。顯示單元104顯示針對(duì)認(rèn)證失敗設(shè)置的對(duì)應(yīng)于認(rèn)證失敗的UI屏幕(在執(zhí)行認(rèn)證之前的屏幕)(步驟S70)，并且前進(jìn)至將在稍后描述的步驟S74。

另一方面，在步驟S61中執(zhí)行否定確定(否)的情況下并且在步驟S62中執(zhí)行否定確定(否)的情況下，人員檢測(cè)單元110確定目標(biāo)人員是否存在于接近檢測(cè)區(qū)R4中(步驟S71)。在步驟S71中執(zhí)行否定確定(否)的情況下，流程返回至步驟S61，并且處理繼續(xù)進(jìn)行。

相反，在步驟S71中執(zhí)行肯定確定(是)的情況下，通知單元115利用投影儀17向目標(biāo)人員等通知未獲取目標(biāo)人員的面部圖像(步驟S72)。顯示單元104顯示與針對(duì)利用手動(dòng)輸入的認(rèn)證處理設(shè)置的手動(dòng)輸入認(rèn)證相對(duì)應(yīng)的UI屏幕(在執(zhí)行認(rèn)證之前的屏幕)(步驟S73)，并且前進(jìn)至將在稍后描述的步驟S74。

面部注冊(cè)/認(rèn)證單元112刪除在跟蹤表中注冊(cè)的全部被跟蹤人員的跟蹤ID和面部信息(步驟S74)，并且完成處理。

接著，將利用特定示例更詳細(xì)地描述當(dāng)前實(shí)施例。

圖10A是示出由用戶在圖像形成設(shè)備10中注冊(cè)的注冊(cè)表的示例的示意圖，并且圖10B是示出用于步驟S20中的面部檢測(cè)和面部圖像獲取處理的跟蹤表的示例的示意圖。注冊(cè)表和跟蹤表存儲(chǔ)在存儲(chǔ)單元105中。

首先，將描述圖10A所示的注冊(cè)表。

在圖10A所示的注冊(cè)表中，如上所述，賦予用戶的注冊(cè)ID、用戶設(shè)置的注冊(cè)人員信息和從用戶的面部圖像中提取的面部信息彼此關(guān)聯(lián)。在這些要素中，注冊(cè)人員信息包括賦予用戶他/她自己的用戶名、用戶的UI屏幕中使用的應(yīng)用名稱、對(duì)應(yīng)于應(yīng)用名稱的應(yīng)用功能和對(duì)應(yīng)于應(yīng)用名稱的按鈕設(shè)計(jì)。

在圖10A所示的注冊(cè)表中，將兩個(gè)人員H(注冊(cè)ID“R001”和“R002”)注冊(cè)為用戶(注冊(cè)人員)。這里，舉例了將兩個(gè)人員H注冊(cè)為用戶的情況，但是可注冊(cè)單個(gè)人員或者三個(gè)或更多個(gè)人員。

在這兩個(gè)人員中，注冊(cè)人員信息與注冊(cè)ID為“R001”的用戶關(guān)聯(lián)地如下注冊(cè)。首先，將“Fujitaro”注冊(cè)為用戶名，并且將“簡(jiǎn)單復(fù)印”、“自動(dòng)掃描”、“簡(jiǎn)單盒保存”、“簡(jiǎn)單盒操作”、“傳真”和“私人打印(集體輸出)”注冊(cè)為應(yīng)用名稱。對(duì)應(yīng)于各個(gè)應(yīng)用名稱的應(yīng)用功能和按鈕設(shè)計(jì)也被注冊(cè)。關(guān)于注冊(cè)ID為“R001”的用戶的面部信息也被注冊(cè)。

注冊(cè)人員信息與注冊(cè)ID為“R002”的用戶關(guān)聯(lián)地如下注冊(cè)。首先，將“Fuji Hanako”注冊(cè)為用戶名，并且將“簡(jiǎn)單復(fù)印”、“自動(dòng)掃描”、“簡(jiǎn)單盒保存”、“私人打印(簡(jiǎn)單確認(rèn))”、“正常復(fù)印三頁”、“保存的復(fù)印”、“開始打印第一張”和“高度清潔掃描”注冊(cè)為應(yīng)用名稱。對(duì)應(yīng)于各個(gè)應(yīng)用名稱的應(yīng)用功能和按鈕設(shè)計(jì)也被注冊(cè)。關(guān)于注冊(cè)ID為“R002”的用戶的面部信息也被注冊(cè)。

接著，將描述圖10B所示的跟蹤表。

在圖10B所示的跟蹤表中，如上所述，在人員檢測(cè)區(qū)R1中跟蹤的過程中賦予作為人員H的被跟蹤人員的跟蹤ID與從被跟蹤人員的面部圖像提取的面部信息關(guān)聯(lián)。在步驟S20中的面部檢測(cè)和面部圖像獲取處理中，在針對(duì)被跟蹤人員設(shè)置了跟蹤ID但是不能檢測(cè)到被跟蹤人員的面部的情況下，可出現(xiàn)在跟蹤表中存在跟蹤ID但是不存在與跟蹤ID關(guān)聯(lián)的面部信息的情況。

在圖10B所示的跟蹤表中，將三個(gè)人員H(跟蹤ID“C001”至“C003”)注冊(cè)為被跟蹤人員。這里，舉例了將三個(gè)人員H注冊(cè)為被跟蹤人員的情況，但是可注冊(cè)兩個(gè)或更少的人員或者四個(gè)或更多的人 員。

將描述圖7的步驟S40所示的用于開始面部認(rèn)證處理的指令。

在當(dāng)前實(shí)施例中，在基于通過第一相機(jī)15捕獲的第一相機(jī)圖像的分析結(jié)果檢測(cè)到在人員檢測(cè)區(qū)R1中存在的一個(gè)或多個(gè)人員H中特定(單個(gè))人員H執(zhí)行滿足特定條件的行為的情況下，指令單元113在步驟S60中輸出用于開始認(rèn)證處理的指令。

[第一示例]

圖11A至圖11E示出了在圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第一示例。這里，圖11A至圖11E例示了將在人員檢測(cè)區(qū)R1中存在的任一個(gè)人員H從人員檢測(cè)區(qū)R1進(jìn)入至進(jìn)入檢測(cè)區(qū)R3用作用于在步驟S40中開始認(rèn)證處理的指令的情況。

在下面描述的圖11A至圖11E(第一示例)以及接著描述的圖15A至圖17E(第二示例至第四示例)中，舉例了在圖像形成設(shè)備10周圍存在包括第一人員H1和第二人員H2的兩個(gè)人員作為人員H的情況。下面描述的圖11A至圖11E和接著描述的圖15A至圖17E示出了通過投影儀17將圖像投影于其上的屏幕18。

圖11A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。在這種情況下，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第一人員H1并且開始跟蹤，因此在步驟S25中搜索第一人員H1的面部。在這種情況下，由于第二人員H2存在于人員檢測(cè)區(qū)R1以外，因此第二人員H2不是處理的目標(biāo)。

圖11B示出了第一人員H1仍在人員檢測(cè)區(qū)R1中并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。此時(shí)，在步驟S23中關(guān)于第一人員H1執(zhí)行否定確定(否)，并且持續(xù)搜索第一人員H1的面部。另外，此時(shí)，關(guān)于第二人員H2，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第二人員H2并且開始跟蹤，因此在步驟S25中搜索第二人員H2的面部。

圖11C示出了第一人員H1仍在人員檢測(cè)區(qū)R1中并且第二人員H2從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的狀態(tài)。在圖11C所示的第一示例中，在特定人員H(在該示例中，第二人員H2)從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的情況下，指令單元113輸出用于開始認(rèn)證處理的指令，因此在步驟S40中執(zhí)行肯定確定(是)，以使得步驟S60中的認(rèn)證處理開始。因此，在該示例中，選擇單元114選擇第二人員H2作為兩個(gè)被跟蹤人員(第一人員H1和第二人員H2)中的目標(biāo)人員。

這里，在第一示例中，在特定人員H(在該示例中，第二人員H2)從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3并因此被選擇為被跟蹤人員之后，在特定人員H繼續(xù)留在進(jìn)入檢測(cè)區(qū)R3中的狀態(tài)下，即使另一人員H(在該示例中，第一人員H1)從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3，被跟蹤人員也不從該特定人員H改變?yōu)榱硪蝗藛TH。

圖11D示出了第一人員H1仍在人員檢測(cè)區(qū)R1中并且第二人員H2經(jīng)過接近檢測(cè)區(qū)R4中的面部檢測(cè)極限L之前的狀態(tài)。在該示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的被跟蹤人員(這里，第二人員H2)經(jīng)過面部檢測(cè)極限L之前，步驟S61至步驟S65中的各個(gè)處理完成。在該示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的被跟蹤人員(這里，第二人員H2)經(jīng)過面部檢測(cè)極限L之前執(zhí)行步驟S66、步驟S69或步驟S72中的通知。與此同時(shí)，投影儀17在屏幕18上顯示消息M。這里，在步驟S61和步驟S62中執(zhí)行肯定確定(是)并且然后在步驟S65中執(zhí)行肯定確定(是)的情況下，在步驟S66中，投影儀17顯示例如“已成功認(rèn)證”文本圖像作為消息M。在步驟S61和步驟S62中執(zhí)行肯定確定(是)并且然后在步驟S65中執(zhí)行否定確定(否)的情況下，在步驟S69中，投影儀17顯示例如“認(rèn)證失敗”或“未注冊(cè)為用戶”的文本圖像作為消息M。在步驟S61或步驟S62中執(zhí)行否定確定(否)的情況下，在步驟S72中，投影儀17顯示例如“不能獲取面部圖像”的文本圖像。

在按照上述方式成功認(rèn)證的情況下，作為目標(biāo)人員的第二人員H2靠近圖像形成設(shè)備10。在認(rèn)證失敗或者不能獲取面部圖像的情況 下，作為被跟蹤人員的第二人員H2在經(jīng)過其中利用第一相機(jī)15難以獲取面部圖像的面部檢測(cè)極限L之前知道認(rèn)證未成功。

這里，已描述了在步驟S72中呈現(xiàn)“不能獲取面部圖像”的信息的情況，但是呈現(xiàn)的信息不限于此。例如，在步驟S72中，可執(zhí)行請(qǐng)求人員H不要靠近設(shè)備(圖像形成設(shè)備10)的通知、由于人員H的面部認(rèn)證未完成而請(qǐng)求人員H不要靠近設(shè)備(圖像形成設(shè)備10)的通知、請(qǐng)求人員H停止的通知、由于人員H的面部認(rèn)證未完成而請(qǐng)求人員H停止的通知、用于通知人員H的面部部分偏離第一相機(jī)15的成像區(qū)的通知等。

圖11E示出了第一人員H1仍在人員檢測(cè)區(qū)R1中并且第二人員H2進(jìn)入接近檢測(cè)區(qū)R4中的人員操作區(qū)R2之前的狀態(tài)。在該示例中，在從圖11D所示的狀態(tài)至圖11E所示的狀態(tài)的轉(zhuǎn)變過程中，投影儀17完成消息M的通知。在該示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第二人員H2)進(jìn)入人員操作區(qū)R2之前，執(zhí)行步驟S67、步驟S70或步驟S73中的顯示。

按照上述方式，在作為已經(jīng)過面部認(rèn)證處理的目標(biāo)人員的第二人員H2進(jìn)入人員操作區(qū)R2并站在用戶界面13前的狀態(tài)下，已經(jīng)在觸摸面板130上顯示了對(duì)應(yīng)于第二人員H2的UI屏幕。

這里，將描述在步驟S67、步驟S70和步驟S73中顯示在觸摸面板130上的UI屏幕。

圖12A至圖12D是示出在圖9所示的面部認(rèn)證處理中顯示在用戶界面13(更具體地說，觸摸面板130)上的UI屏幕的示例的示意圖。這里，圖12A和圖12B示出了圖9所示的步驟S67中的關(guān)于顯示在觸摸面板130上的目標(biāo)人員的UI屏幕(在執(zhí)行認(rèn)證之后的屏幕)的示例。圖12C示出了圖9所示的步驟S70中的顯示在觸摸面板130上的對(duì)應(yīng)于認(rèn)證失敗的UI屏幕(執(zhí)行認(rèn)證之前的屏幕)的示例。圖12D示出了圖9所示的步驟S73中的顯示在觸摸面板130上的對(duì)應(yīng)于手動(dòng)輸入認(rèn)證的UI屏幕(執(zhí)行認(rèn)證之前的屏幕)的示例。

首先，在目標(biāo)人員是作為在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的注冊(cè)人員的“Fujitaro”，在跟蹤表(參照?qǐng)D10B)中“Fujitaro”注冊(cè) 為被跟蹤人員(步驟S61中的是)，在跟蹤表中注冊(cè)“Fujitaro”的面部信息(步驟S62中的是)并且在步驟S65中認(rèn)證成功(是)的情況下，在步驟S67中顯示圖12A所示的UI屏幕。根據(jù)圖10A所示的針對(duì)“Fujitaro”的注冊(cè)表，用戶名和對(duì)應(yīng)的應(yīng)用按鈕(在該示例中，六個(gè)按鈕)顯示在UI屏幕上。在觸摸面板130中，按下任一個(gè)按鈕，因此執(zhí)行對(duì)應(yīng)于該按鈕的應(yīng)用功能。

接著，在目標(biāo)人員是作為在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的注冊(cè)人員的“Fuji Hanako”，在跟蹤表(參照?qǐng)D10B)中“Fuji Hanako”注冊(cè)為被跟蹤人員(步驟S61中的是)，在跟蹤表中注冊(cè)“Fuji Hanako”的面部信息(步驟S62中的是)并且在步驟S65中認(rèn)證成功(是)的情況下，在步驟S67中顯示圖12B所示的UI屏幕。根據(jù)圖10A所示的針對(duì)“Fuji Hanako”的注冊(cè)表，用戶名和對(duì)應(yīng)的應(yīng)用按鈕(在該示例中，八個(gè)按鈕)顯示在UI屏幕上。在觸摸面板130中，按下任一個(gè)按鈕，因此執(zhí)行對(duì)應(yīng)于該按鈕的應(yīng)用功能。

接著，在目標(biāo)人員是未在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的未注冊(cè)人員(例如，“Fujijirou”)，在跟蹤表(參照?qǐng)D10B)中“Fujijirou”注冊(cè)為被跟蹤人員(步驟S61中的是)，在跟蹤表中注冊(cè)“Fujijirou”的面部信息(步驟S62中的是)并且在步驟S65中認(rèn)證失敗(否)的情況下，在步驟S70中顯示圖12C所示的UI屏幕。例如，文本“認(rèn)證失敗”和”關(guān)閉”按鈕顯示在UI屏幕上。

最后，在目標(biāo)人員是在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的注冊(cè)人員(這里為“Fujitaro”，但可以是“Fuji Hanako”)并且“Fujitaro”未在跟蹤表(參照?qǐng)D10B)中注冊(cè)為被跟蹤人員(步驟S61中的否)的情況下，在步驟S73中顯示圖12D所示的UI屏幕。在目標(biāo)人員是在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的注冊(cè)人員(這里為“Fujitaro”，但可以是“Fuji Hanako”)，在跟蹤表(參照?qǐng)D10B)中“Fujitaro”注冊(cè)為被跟蹤人員(步驟S61中的是)并且在跟蹤表中未注冊(cè)“Fujitaro”的面部信息(步驟S62中的否)的情況下，在步驟S73中顯示圖12D所示的UI屏幕。在目標(biāo)人員是未在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的未注冊(cè)人員(例如，“Fujijirou”)并且在跟蹤表中未將 “Fujijirou”注冊(cè)為被跟蹤人員(步驟S61中的否)的情況下，在步驟S73中顯示圖12D所示的UI屏幕。在目標(biāo)人員是未在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的未注冊(cè)人員(例如，“Fujijirou”)，在跟蹤表(參照?qǐng)D10B)中“Fujijirou”注冊(cè)為被跟蹤人員(步驟S61中的是)并且未在跟蹤表中注冊(cè)“Fujijirou”的面部信息(步驟S62中的否)的情況下，在步驟S73中顯示圖12D所示的UI屏幕。顯示UI屏幕以通過用戶的手動(dòng)輸入接收認(rèn)證請(qǐng)求。虛擬鍵盤、顯示利用虛擬鍵盤輸入的內(nèi)容(用戶ID或密碼)的顯示區(qū)、“取消”按鈕和“進(jìn)入”按鈕顯示在UI屏幕上。

如上所述，在當(dāng)前實(shí)施例中，圖12A和圖12B所示的在執(zhí)行認(rèn)證之后(當(dāng)認(rèn)證成功時(shí))的屏幕內(nèi)容、圖12C所示的在執(zhí)行認(rèn)證之前(當(dāng)認(rèn)證失敗時(shí))的屏幕內(nèi)容以及圖12D所示的對(duì)應(yīng)于手動(dòng)輸入的在執(zhí)行認(rèn)證之前(當(dāng)不可認(rèn)證時(shí))的屏幕內(nèi)容彼此不同。在當(dāng)前實(shí)施例中，如圖12A和圖12B所示，對(duì)于各個(gè)注冊(cè)人員，在執(zhí)行認(rèn)證之后的屏幕內(nèi)容不同。

這里，將對(duì)于可檢測(cè)和不可檢測(cè)被跟蹤人員的面部圖像的情況進(jìn)行簡(jiǎn)單描述。

圖13A和圖13B示出了通過第一相機(jī)15捕獲的第一相機(jī)圖像的示例。這里，圖13A示出了通過對(duì)未戴面罩的人員H的面部進(jìn)行成像而獲得的第一相機(jī)圖像，并且圖13B示出了通過對(duì)佩戴面罩的人員H的面部進(jìn)行成像而獲得的第一相機(jī)圖像。

當(dāng)前實(shí)施例的面部注冊(cè)/認(rèn)證單元112在面部注冊(cè)和面部認(rèn)證中檢測(cè)諸如眼、鼻和嘴的多個(gè)面部部分(例如，14個(gè)部分或更多)處的特征點(diǎn)，并且在按照三維方式校正面部的大小、方向等之后提取面部的特征量。因?yàn)檫@個(gè)原因，在人員H佩戴面罩或太陽鏡以覆蓋其面部的一部分的情況下，即使在第一相機(jī)圖像中包括了包括人員H的面部的圖像，也不能從第一相機(jī)圖像執(zhí)行面部的特征點(diǎn)的檢測(cè)和特征點(diǎn)的提取。另外，在人員H相對(duì)于第一相機(jī)15面對(duì)正側(cè)面或面向后的情況下，不能從第一相機(jī)圖像中執(zhí)行面部的特征點(diǎn)的檢測(cè)和特征點(diǎn)的提取。在這種情況下，在圖8所示的步驟S26中執(zhí)行否定確定(否)。

接著，將對(duì)關(guān)于同一被跟蹤人員獲取多個(gè)面部信息的情況下選擇一個(gè)面部信息的方法進(jìn)行簡(jiǎn)單描述。

圖14A和圖14B示出了通過第一相機(jī)15捕獲的第一相機(jī)圖像的示例。這里，圖14A示出了通過對(duì)在人員檢測(cè)區(qū)R1中位于相對(duì)遠(yuǎn)離面部檢測(cè)極限L的位置處的人員H進(jìn)行成像而獲得的第一相機(jī)圖像，并且圖14B示出了通過對(duì)在人員檢測(cè)區(qū)R1中相對(duì)靠近面部檢測(cè)極限L的位置處的人員H進(jìn)行成像而獲得的第一相機(jī)圖像。

從圖14A和圖14B中清楚的是，隨著人員H靠近第一相機(jī)15，圖14B所示的面部圖像比圖14A所示的面部圖像更大(像素?cái)?shù)量更大)，因此，更容易提取特征量。因此，例如，在從圖14A所示的第一相機(jī)圖像中獲取人員H的面部信息并且其注冊(cè)在跟蹤表中，然后從圖14B所示的第一相機(jī)圖像中獲取人員H的面部信息的情況下，在步驟S29中選擇后一個(gè)面部信息并且刪除前一個(gè)面部信息。

另外，例如，在從通過對(duì)傾斜地面對(duì)第一相機(jī)15的人員H的面部進(jìn)行成像而獲得的第一相機(jī)圖像中獲取人員H的面部信息并且其注冊(cè)在跟蹤表中，然后從通過對(duì)面朝第一相機(jī)15的前部的人員H的面部進(jìn)行成像而獲得的第一相機(jī)圖像中獲取人員H的面部信息的情況下，可在步驟S29中選擇后一個(gè)面部信息并且刪除前一個(gè)面部信息。

在上述第一示例中，對(duì)第二人員H2比第一人員H1更早進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的情況進(jìn)行了描述，并且因此第二人員H2成為目標(biāo)人員。然而，在第一人員H1比第二人員H2更早進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的情況下，第一人員H1成為目標(biāo)人員。

[第二示例]

圖15A至圖15D示出了圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第二示例。這里，按照與圖11A至圖11E所示的第一示例的方式相同的方式，圖15A至圖15D例示了將在人員檢測(cè)區(qū)R1中存在的任一個(gè)人員H從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3用作用于在步驟S40中的開始認(rèn)證處理的指令的情況。

圖15A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。在這種情 況下，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，以使得在步驟S24中將跟蹤ID賦予第一人員H1并且開始跟蹤，因此在步驟S25中搜索第一人員H1的面部。此時(shí)，由于第二人員H2存在于人員檢測(cè)區(qū)R1以外，因此第二人員H2不是處理目標(biāo)。

圖15B示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。此時(shí)，在步驟S23中關(guān)于第一人員H1執(zhí)行否定確定(否)，并且持續(xù)搜索第一人員H1的面部。另外，此時(shí)，關(guān)于第二人員H2，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第二人員H2并且開始跟蹤，因此在步驟S25中搜索第二人員H2的面部。

圖15C示出了第一人員H1從人員檢測(cè)區(qū)R1的內(nèi)部運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部并且第二人員H2在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。此時(shí)，關(guān)于第一人員H1，在步驟S31中執(zhí)行否定確定(否)，因此在步驟S32中從跟蹤表中刪除關(guān)于第一人員H1的跟蹤ID和面部信息。此時(shí)，關(guān)于第二人員H2，在步驟S23中執(zhí)行否定確定(否)，并且持續(xù)搜索第二人員H2的面部。

圖15D示出了其中第一人員H1運(yùn)動(dòng)至人員檢測(cè)區(qū)R1以外并且第二人員H2從人員檢測(cè)區(qū)R1的內(nèi)部運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部的狀態(tài)。此時(shí)，關(guān)于第二人員H2，在步驟S31中執(zhí)行否定確定(否)，并且因此在步驟S32中從跟蹤表中刪除關(guān)于第二人員H2的跟蹤ID和面部信息。此時(shí)，第一人員H1存在于人員檢測(cè)區(qū)R1以外，因此第一人員H1不是處理目標(biāo)。

按照上述方式，除非在人員檢測(cè)區(qū)R1中被跟蹤的第一人員H1或第二人員H2進(jìn)入到進(jìn)入檢測(cè)區(qū)R3，否則不產(chǎn)生目標(biāo)人員，并且作為結(jié)果，步驟S60中的面部認(rèn)證處理不開始。

[第三示例]

圖16A至圖16E示出了圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第三示例。這里，與第一示例和第二示例不同的是，圖 16A至圖16E例示了將從關(guān)于在人員檢測(cè)區(qū)R1中存在的任一個(gè)人員H進(jìn)入人員檢測(cè)區(qū)R1開始所經(jīng)過的時(shí)間(在人員檢測(cè)區(qū)R1中的停留時(shí)間段)達(dá)到預(yù)定時(shí)間段(設(shè)定時(shí)間段的示例)用作用于開始步驟S40中的認(rèn)證處理的指令的情況。

圖16A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。在這種情況下，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第一人員H1并且開始跟蹤，因此在步驟S25中搜索第一人員H1的面部。當(dāng)?shù)谝蝗藛TH1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1時(shí)，利用計(jì)時(shí)器開始計(jì)時(shí)，并且將第一人員H1停留在人員檢測(cè)區(qū)R1中的第一停留時(shí)間段T1設(shè)為0(T1＝0)。在這種情況下，由于第二人員H2存在于人員檢測(cè)區(qū)R1以外，因此第二人員H2不是處理目標(biāo)。

圖16B示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。在這種情況下，關(guān)于第一人員H1在步驟S23中執(zhí)行否定確定(否)，并且持續(xù)搜索第一人員H1的面部。此時(shí)，關(guān)于第二人員H2，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第二人員H2并且開始跟蹤，因此在步驟S25中搜索第二人員H2的面部。當(dāng)?shù)诙藛TH2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1時(shí)，利用計(jì)時(shí)器開始計(jì)時(shí)，并且將第二人員H2停留在人員檢測(cè)區(qū)R1中的第二停留時(shí)間段T2設(shè)為0(T2＝0)。在這種情況下，隨著從圖16A所示的狀態(tài)的時(shí)間的流逝，第一人員H1的第一停留時(shí)間段T1比第二人員H2的第二停留時(shí)間段T2更長(zhǎng)(T1＞T2)。

圖16C示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)并且第二人員H2也在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。在這種情況下，關(guān)于第一人員H1，在步驟S23中執(zhí)行否定確定(否)，并且持續(xù)搜索第一人員H1的面部。此時(shí)，另外關(guān)于第二人員H2，在步驟S23中執(zhí)行否定確定(否)，并且持續(xù)搜索第二人員H2的面部。在這種情況下，第一 人員H1的第一停留時(shí)間段T1達(dá)到預(yù)定時(shí)間段T0(T1＝T0)，并且第二人員H2的第二停留時(shí)間段T2比第一停留時(shí)間段T1(也就是說，預(yù)定時(shí)間段T0)更短(T2＜T0)。在圖16C所示的第三示例中，在特定人員H(在該示例中，第一人員H1)停留在人員檢測(cè)區(qū)R1中的時(shí)間段(在該示例中，第一停留時(shí)間段T1)達(dá)到預(yù)定時(shí)間段T0的情況下，指令單元113輸出用于開始面部認(rèn)證處理的指令，因此在步驟S40中執(zhí)行肯定確定(是)，以使得步驟S60中的面部認(rèn)證處理開始。因此，在該示例中，選擇單元114選擇第一人員H1作為兩個(gè)被跟蹤人員(第一人員H1和第二人員H2)中的被跟蹤人員。

這里，在第三示例中，在特定人員H(在該示例中，第一人員H1)的第一停留時(shí)間段T1達(dá)到預(yù)定時(shí)間段T0，因此選擇特定人員H作為目標(biāo)人員之后，在特定人員H持續(xù)停留在人員檢測(cè)區(qū)R1中的狀態(tài)下，即使另一人員(在該示例中，第二人員H2)的第二停留時(shí)間段T2達(dá)到預(yù)定時(shí)間段T0，目標(biāo)人員也不從該特定人員H改變?yōu)榱硪蝗藛T。

圖16D示出了第一人員H1從人員檢測(cè)區(qū)R1通過進(jìn)入檢測(cè)區(qū)R3而進(jìn)入接近檢測(cè)區(qū)R4并且第二人員H2在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。在該示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)通過面部檢測(cè)極限L之前完成了步驟S61至步驟S65中的各個(gè)處理。在該示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)通過面部檢測(cè)極限L之前執(zhí)行步驟S66、步驟S69或步驟S72中的通知。與此同時(shí)，投影儀17在屏幕18上顯示消息M。這里，消息M的內(nèi)容與參照?qǐng)D11A至圖11E描述的內(nèi)容相同。

在按照上述方式成功認(rèn)證的情況下，作為目標(biāo)人員的第一人員H1靠近圖像形成設(shè)備10。在認(rèn)證失敗或者不能獲取面部圖像的情況下，作為被跟蹤人員的第一人員H1在通過難以利用第一相機(jī)15獲取面部圖像的面部檢測(cè)極限L之前發(fā)現(xiàn)未成功認(rèn)證。

圖16E示出了第一人員H1就要進(jìn)入接近檢測(cè)區(qū)R4中的人員操作區(qū)R2并且第二人員H2仍保持在人員檢測(cè)區(qū)R1中的狀態(tài)。在該示例中，投影儀17在從圖16D所示的狀態(tài)轉(zhuǎn)變至圖16E所示的狀態(tài)的 過程中完成消息M的通知。在該示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)進(jìn)入人員操作區(qū)R2之前執(zhí)行步驟S67、步驟S70或步驟S73中的顯示。這里，顯示的內(nèi)容與參照?qǐng)D12A至圖12D描述的內(nèi)容相同。

按照上述方式，在已經(jīng)歷面部認(rèn)證處理的作為目標(biāo)人員的第一人員H1進(jìn)入人員操作區(qū)R2并且站在用戶界面13前的狀態(tài)下，對(duì)應(yīng)于第一人員H1的UI屏幕已顯示在觸摸面板130上。

在上述第三示例中，對(duì)第一人員H1的第一停留時(shí)間段T1比第二人員H2的第二停留時(shí)間段T2更早達(dá)到預(yù)定時(shí)間段T0，因此第一人員H1變?yōu)槟繕?biāo)人員的情況進(jìn)行了描述。然而，在第二人員H2的第二停留時(shí)間段T2比第一人員H1的第一停留時(shí)間段T1更早達(dá)到預(yù)定時(shí)間段T0的情況下，第二人員H2變?yōu)槟繕?biāo)人員。

在上述第三示例中，對(duì)第一人員H1和第二人員H2二者均進(jìn)入人員檢測(cè)區(qū)R1并且然后持續(xù)停留在人員檢測(cè)區(qū)R1中的情況進(jìn)行了描述。然而，例如，在第一人員H1的第一停留時(shí)間段T1達(dá)到預(yù)定時(shí)間段T0之前第一人員H1運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部，并且在第二人員H2的第二停留時(shí)間段T2達(dá)到預(yù)定時(shí)間段T0之前第二人員H2運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部的情況下，按照與在第二示例中的方式相同的方式，不產(chǎn)生目標(biāo)人員，并且步驟S60中的面部認(rèn)證處理不開始。

[第四示例]

圖17A至圖17E示出了在圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第四示例。這里，與第一示例至第三示例不同，圖17A至圖17E例示了將在人員檢測(cè)區(qū)R1中存在的任一個(gè)人員H進(jìn)入人員檢測(cè)區(qū)R1然后接近圖像形成設(shè)備10用作用于開始步驟S40中的認(rèn)證處理的指令的情況。

圖17A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。在這種情況下，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第一人員H1并且開始跟蹤，因此在步驟S25中搜索第一人員H1 的面部。在這種情況下，由于第二人員H2存在于人員檢測(cè)區(qū)R1之外，因此第二人員H2不是處理的目標(biāo)。

圖17B示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。在這種情況下，關(guān)于第一人員H1在步驟S23中執(zhí)行否定確定(否)，并且持續(xù)搜索第一人員H1的面部。此時(shí)，關(guān)于第二人員H2，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第二人員H2并且開始跟蹤，因此在步驟S25中搜索第二人員H2的面部。

圖17C示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)并且第二人員H2也在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。在這種情況下，然而，第一人員H1沿著逐漸遠(yuǎn)離圖像形成設(shè)備10的方向運(yùn)動(dòng)，并且第二人員H2沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)。在圖17C所示的第四示例中，在檢測(cè)到特定人員H(在該示例中，第二人員H2)靠近圖像形成設(shè)備10(第一相機(jī)15)的情況下，指令單元113輸出用于開始面部認(rèn)證處理的指令，因此在步驟S40中執(zhí)行肯定確定(是)，以使得步驟S60中的面部認(rèn)證處理開始。因此，在該示例中，選擇單元114選擇第二人員H2作為兩個(gè)被跟蹤人員(第一人員H1和第二人員H2)中的被跟蹤人員。

這里，在第四示例中，在特定人員H(在該示例中，第二人員H2)接近圖像形成設(shè)備10并且因此被選為目標(biāo)人員之后，在特定人員H持續(xù)接近圖像形成設(shè)備10的狀態(tài)下，即使另一人員(在該示例中，第一人員H1)接近圖像形成設(shè)備10，目標(biāo)人員也不從該特定人員改變?yōu)榱硪蝗藛T。

圖17D示出了第一人員H1從人員檢測(cè)區(qū)R1的內(nèi)部運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部并且第二人員H2從人員檢測(cè)區(qū)R1經(jīng)由進(jìn)入檢測(cè)區(qū)R3進(jìn)入接近檢測(cè)區(qū)R4的狀態(tài)。在該示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第二人員H2)通過面部檢測(cè)極限L之前完成步驟S61至步驟S65中的各個(gè)處理。在該示例中，在以進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第二人員H2)通過面部檢測(cè)極限L之前 執(zhí)行步驟S66、步驟S69或步驟S72中的通知。與此同時(shí)，投影儀17在屏幕18上顯示消息M。這里，消息M的內(nèi)容與參照?qǐng)D11A至圖11E描述的內(nèi)容相同。

在按照上述方式成功認(rèn)證的情況下，作為目標(biāo)人員的第二人員H2靠近圖像形成設(shè)備10。在認(rèn)證失敗或者不能獲取面部圖像的情況下，作為被跟蹤人員的第二人員H2在通過利用第一相機(jī)15難以獲取面部圖像的面部檢測(cè)極限L之前發(fā)現(xiàn)認(rèn)證不成功。

在圖17D所示的狀態(tài)下，關(guān)于第一人員H1，在步驟S31中執(zhí)行否定確定(否)，并且在步驟S32中從跟蹤表中刪除關(guān)于第一人員H1的跟蹤ID和面部信息。

圖17E示出了第一人員H1運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部并且第二人員H2就要進(jìn)入接近檢測(cè)區(qū)R4中的人員操作區(qū)R2的狀態(tài)。在該示例中，投影儀17在圖17D所示的狀態(tài)轉(zhuǎn)變至圖17E所示的狀態(tài)的過程中完成消息M的通知。在該示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第二人員H2)進(jìn)入人員操作區(qū)R2之前執(zhí)行步驟S67、步驟S70或步驟S73中的顯示。這里，顯示的內(nèi)容與參照?qǐng)D12A至圖12D描述的內(nèi)容相同。

按照上述方式，在經(jīng)歷了面部認(rèn)證處理的作為目標(biāo)人員的第二人員H2進(jìn)入人員操作區(qū)R2并且站在用戶界面13前面的狀態(tài)下，已在觸摸面板130上顯示了對(duì)應(yīng)于第二人員H2的UI屏幕。

在上述第四示例中，對(duì)在人員檢測(cè)區(qū)R1中存在的第二人員H2接近圖像形成設(shè)備10、并且在相同人員檢測(cè)區(qū)R1中存在的第一人員H1逐漸遠(yuǎn)離圖像形成設(shè)備10、從而第二人員H2變成目標(biāo)人員的情況進(jìn)行了描述。然而，在人員檢測(cè)區(qū)R1中存在的第一人員H1接近圖像形成設(shè)備10并且在相同人員檢測(cè)區(qū)R1中存在的第二人員H2逐漸遠(yuǎn)離圖像形成設(shè)備10的情況下，第一人員H1成為目標(biāo)人員。

在上述第四示例中，對(duì)在人員檢測(cè)區(qū)R1中存在的第二人員H2接近圖像形成設(shè)備10并且在相同人員檢測(cè)區(qū)R1中存在的第一人員H1逐漸遠(yuǎn)離圖像形成設(shè)備10的情況進(jìn)行了描述。然而，在第一人員H1和第二人員H2二者按照與上述第二示例中的方式相同的方式逐漸 遠(yuǎn)離圖像形成設(shè)備10的情況下，不產(chǎn)生目標(biāo)人員，并且步驟S60中的面部認(rèn)證處理不開始。另一方面，在第一人員H1和第二人員H2二者接近圖像形成設(shè)備10的情況下，更快地接近圖像形成設(shè)備10的人員H成為目標(biāo)人員。

[其它示例]

這里，在上述第一示例至第四示例中，對(duì)在圖像形成設(shè)備10周圍存在兩個(gè)人員H(第一人員H1和第二人員H2)的情況進(jìn)行了描述，可以存在圖像形成設(shè)備10周圍存在單個(gè)人員H的情況和圖像形成設(shè)備10周圍存在三個(gè)或更多個(gè)人員H的情況。

在當(dāng)前實(shí)施例中，在圖9所示的步驟S62中未在面部認(rèn)證處理中注冊(cè)目標(biāo)人員(被跟蹤人員)的面部信息(否)的情況下，在步驟S71中在觸摸面板130上顯示用于手動(dòng)輸入認(rèn)證的UI屏幕(圖12D)，從而通過手動(dòng)輸入接收認(rèn)證，但是本發(fā)明不限于此。例如，可利用設(shè)置在用戶界面13中的第二相機(jī)16捕獲停留在人員操作區(qū)R2中的人員H的面部圖像，并且可從獲得的第二相機(jī)圖像中獲取面部信息，從而可再次執(zhí)行面部認(rèn)證。在這種情況下，可將第二相機(jī)圖像在觸摸面板130上與提示利用第二相機(jī)16捕獲面部圖像的指令一起顯示。

在當(dāng)前實(shí)施例中，在圖6所示的控制圖像形成設(shè)備10的模式的過程中，在步驟S6中發(fā)生從睡眠模式轉(zhuǎn)變?yōu)檎ＤＪ?，然后在步驟S7中開始人員H的面部的檢測(cè)，但是本發(fā)明不限于此。例如，可與步驟S4中的開始檢測(cè)人員H的運(yùn)動(dòng)的處理結(jié)合地開始對(duì)人員H的面部的檢測(cè)。在這種情況下，在設(shè)置睡眠模式的狀態(tài)下開始對(duì)人員H的面部的檢測(cè)。在采用了在設(shè)置睡眠模式的狀態(tài)下開始對(duì)人員H的面部檢測(cè)的構(gòu)造的情況下，例如，當(dāng)存在用于在圖7所示的步驟S40中開始面部認(rèn)證處理的指令時(shí)(步驟S40中的是)，可使得圖像形成設(shè)備10從睡眠模式轉(zhuǎn)變?yōu)檎ＤＪ健?/p>

在當(dāng)前實(shí)施例中，將顯示圖像的投影儀17用作通知單元115的情況描述為示例，但是本發(fā)明不限于此?？墒褂脧睦缏曉摧敵雎曇艋蛘邚睦绻庠?燈)發(fā)射光的方法。這里，在當(dāng)前實(shí)施例中，當(dāng)利用獲取的面部圖像的認(rèn)證成功時(shí)(步驟S66)，當(dāng)利用獲取的面部圖 像的認(rèn)證失敗時(shí)(步驟S69)，以及當(dāng)由于不能獲取面部圖像而不能執(zhí)行認(rèn)證時(shí)(步驟S72)，執(zhí)行通知，但是本發(fā)明不限于此。例如，(1)在從第一相機(jī)圖像檢測(cè)面部圖像之前，(2)在從第一相機(jī)圖像檢測(cè)到面部圖像之后執(zhí)行利用面部圖像的認(rèn)證之前，以及(3)在執(zhí)行認(rèn)證處理之后，可執(zhí)行通知。

[示例性實(shí)施例2]

接著，將詳細(xì)描述本發(fā)明的示例性實(shí)施例2。下文中，將適當(dāng)?shù)厥÷詫?duì)與實(shí)施例1中的構(gòu)成元件相同的構(gòu)成元件的描述。

在當(dāng)前實(shí)施例中，指令單元113將利用由第一相機(jī)15捕獲的面部圖像開始認(rèn)證處理的指令輸出至面部注冊(cè)/認(rèn)證單元112。指令單元113將用于在觸摸面板130上顯示執(zhí)行認(rèn)證處理的認(rèn)證結(jié)果作為UI屏幕的指令輸出至顯示單元104。

在當(dāng)前實(shí)施例中，在執(zhí)行認(rèn)證處理之后不立刻在觸摸面板130上顯示對(duì)應(yīng)于認(rèn)證結(jié)果的UI屏幕，而是在執(zhí)行認(rèn)證處理之后滿足預(yù)定條件的情況下在觸摸面板130上顯示對(duì)應(yīng)于認(rèn)證結(jié)果的UI屏幕。

圖18是示出圖像形成設(shè)備10中的認(rèn)證過程的流程的流程圖。在圖像形成設(shè)備10設(shè)為正常模式的狀態(tài)下執(zhí)行圖18所示的處理。

如果圖像形成設(shè)備10設(shè)為正常模式，如圖6的步驟S7所示，則分析從第一相機(jī)15獲取的第一相機(jī)圖像，并且開始用于檢測(cè)人員檢測(cè)區(qū)R1中存在的人員H的面部的處理。與此同時(shí)，面部檢測(cè)單元111執(zhí)行從第一相機(jī)圖像檢測(cè)人員H的面部以及獲取檢測(cè)到的面部圖像的面部檢測(cè)和面部圖像獲取處理(步驟S20)。面部注冊(cè)/認(rèn)證單元112確定是否具有來自指令單元113的用于開始面部認(rèn)證處理的指令(步驟S40)。在步驟S40中執(zhí)行否定確定(否)的情況下，流程返回至步驟S20，并且處理繼續(xù)進(jìn)行。

另一方面，在步驟S40中執(zhí)行肯定確定(是)的情況下，面部注冊(cè)/認(rèn)證單元112執(zhí)行利用步驟S20中的面部檢測(cè)和面部圖像獲取處理的結(jié)果(也就是說，從第一相機(jī)15獲取的第一相機(jī)圖像獲得的人員H的面部圖像)設(shè)置認(rèn)證是否成功的面部認(rèn)證處理(步驟S60B)。

在圖18中，在執(zhí)行步驟S20之后執(zhí)行步驟S40，但是實(shí)際上， 步驟S20和步驟S40并行執(zhí)行。因此，在執(zhí)行步驟S20中的面部檢測(cè)和面部圖像獲取處理的過程中在步驟S40中執(zhí)行肯定確定(是)(也就是說，存在用于開始認(rèn)證處理的指令)的情況下，步驟S20中的處理停止，并且流程前進(jìn)至步驟S60B。

在完成步驟S60B中的面部認(rèn)證處理之后，控制單元101確定是否存在來自指令單元113的用于開始在觸摸面板130上顯示與作為面部認(rèn)證處理的結(jié)果的認(rèn)證結(jié)果相對(duì)應(yīng)的UI屏幕的指令(步驟S80)。

在步驟S80中執(zhí)行肯定確定(是)的情況下，顯示單元104在觸摸面板130上顯示與在步驟S60B中的面部認(rèn)證處理中做出的認(rèn)證結(jié)果相對(duì)應(yīng)的UI屏幕(步驟S100)。將稍后描述在步驟S60B中的面部認(rèn)證處理中準(zhǔn)備并且在步驟S100中顯示的UI屏幕的內(nèi)容。面部注冊(cè)/認(rèn)證單元112刪除在跟蹤表中注冊(cè)的所有被跟蹤人員的跟蹤ID和面部信息(步驟S120)，并且完成處理。將稍后描述跟蹤表(被跟蹤人員的跟蹤ID和面部信息)。

相反，在步驟S80中執(zhí)行否定確定(否)的情況下，人員檢測(cè)單元110分析從第一相機(jī)15獲取的第一相機(jī)圖像，以確定作為步驟S60B中的面部認(rèn)證處理的目標(biāo)的人員H(稱作目標(biāo)人員)是否存在于人員檢測(cè)區(qū)R1中(步驟S140)。在步驟S140中執(zhí)行肯定確定(是)的情況下，流程返回至步驟S80，并且處理繼續(xù)進(jìn)行。

另一方面，在步驟S140中執(zhí)行否定確定(否)的情況下，面部注冊(cè)/認(rèn)證單元112確定在步驟S60B中的面部認(rèn)證處理中目標(biāo)人員的認(rèn)證是否成功(認(rèn)證了面部)(步驟S160)。在步驟S160中執(zhí)行否定確定(否)的情況下，流程前進(jìn)至將稍后描述的步驟S200。

相反，在步驟S160中執(zhí)行肯定確定(是)的情況下，面部注冊(cè)/認(rèn)證單元112取消在步驟S60B中的面部認(rèn)證處理中執(zhí)行的面部認(rèn)證(步驟S180)，并且前進(jìn)至下一步驟S200。

控制單元101放棄在步驟S60B的面部認(rèn)證處理中準(zhǔn)備的與認(rèn)證結(jié)果相對(duì)應(yīng)的UI屏幕(步驟S200)。這里，在步驟S200中放棄的UI屏幕的內(nèi)容與在以上步驟S100中描述的內(nèi)容相同。

然后，人員檢測(cè)單元110從跟蹤表中刪除在步驟S140中未檢測(cè) 到存在的人員H(被跟蹤人員)的跟蹤ID和面部信息(步驟S220)，返回至步驟S20，并且處理繼續(xù)進(jìn)行。

將更詳細(xì)地描述以上步驟S20中的面部檢測(cè)和面部圖像獲取處理和以上步驟S60B中的面部認(rèn)證處理中的每一個(gè)。

如上所述，圖8是示出當(dāng)前實(shí)施例的認(rèn)證過程中的面部檢測(cè)和面部圖像獲取處理(步驟S20)的流程的流程圖。圖19是示出當(dāng)前實(shí)施例的認(rèn)證過程中的認(rèn)證處理(步驟S60B)的流程的流程圖。

接著，參照?qǐng)D19，將描述步驟S60B中的面部認(rèn)證處理的內(nèi)容。

這里，首先，選擇單元114選擇作為目標(biāo)的人員H(目標(biāo)人員)，對(duì)人員H在圖18所示的步驟S40中給出了用于面部認(rèn)證處理的指令，并且面部注冊(cè)/認(rèn)證單元112確定目標(biāo)人員是否是在跟蹤表中注冊(cè)的被跟蹤人員(步驟S61)。在步驟S61中執(zhí)行否定確定(否)的情況下，流程前進(jìn)至將稍后描述的步驟S71。

相反，在步驟S61中執(zhí)行肯定確定(是)的情況下，面部注冊(cè)/認(rèn)證單元112確定是否在存儲(chǔ)單元105中注冊(cè)了作為目標(biāo)人員的相同被跟蹤人員的面部信息(步驟S62)。在步驟S62中執(zhí)行否定確定(否)的情況下，流程前進(jìn)至將在稍后描述的步驟S71。

另一方面，在步驟S62中執(zhí)行肯定確定(是)的情況下，面部注冊(cè)/認(rèn)證單元112利用在步驟S62中確認(rèn)其在跟蹤表中的注冊(cè)的目標(biāo)人員的面部信息來請(qǐng)求面部認(rèn)證(步驟S63)。接著，面部注冊(cè)/認(rèn)證單元112將目標(biāo)人員的面部信息與在注冊(cè)表中注冊(cè)的所有注冊(cè)人員的面部信息進(jìn)行比對(duì)(步驟S64)。面部注冊(cè)/認(rèn)證單元112確定認(rèn)證是否成功(步驟S65)。這里，在步驟S65中，在目標(biāo)人員的面部信息與所有注冊(cè)人員的面部信息中的任一個(gè)匹配的情況下執(zhí)行肯定確定(是)，在目標(biāo)人員的面部信息與所有注冊(cè)人員的面部信息中的任一個(gè)不匹配的情況下執(zhí)行否定確定(否)。

在步驟S65中執(zhí)行肯定確定(是)的情況下，通知單元115利用投影儀17向目標(biāo)人員等通知認(rèn)證成功(步驟S66)。顯示單元104針對(duì)該目標(biāo)人員準(zhǔn)備針對(duì)認(rèn)證過的目標(biāo)人員設(shè)置的UI屏幕(在執(zhí)行認(rèn)證之后的屏幕)(步驟S67B)，并且完成處理。

另一方面，在步驟S65中執(zhí)行否定確定(否)的情況下，人員檢測(cè)單元110確定目標(biāo)人員是否存在于接近檢測(cè)區(qū)R4中(步驟S68)。在步驟S68中執(zhí)行否定確定(否)的情況下，流程返回至步驟S61，并且處理繼續(xù)進(jìn)行。

相反，在步驟S68中執(zhí)行肯定確定(是)的情況下，通知單元115利用投影儀17向目標(biāo)人員等通知認(rèn)證失敗(步驟S69)。顯示單元104準(zhǔn)備針對(duì)認(rèn)證失敗設(shè)置的對(duì)應(yīng)于認(rèn)證失敗的UI屏幕(在執(zhí)行認(rèn)證之前的屏幕)(步驟S70B)，并且完成處理。

另一方面，在步驟S61中執(zhí)行否定確定(否)的情況下以及在步驟S62中執(zhí)行否定確定(否)的情況下，人員檢測(cè)單元110確定目標(biāo)人員是否存在于接近檢測(cè)區(qū)R4中(步驟S71)。在步驟S71中執(zhí)行否定確定(否)的情況下，流程返回至步驟S61，并且處理繼續(xù)進(jìn)行。

相反，在步驟S71中執(zhí)行肯定確定(是)的情況下，通知單元115利用投影儀17向目標(biāo)人員等通知沒有獲取到目標(biāo)人員的面部圖像(步驟S72)。顯示單元104準(zhǔn)備針對(duì)利用手動(dòng)輸入的認(rèn)證處理設(shè)置的對(duì)應(yīng)于手動(dòng)輸入認(rèn)證的UI屏幕(在執(zhí)行認(rèn)證之前的屏幕)(步驟S73B)，并且完成處理。

然后，將利用特定示例描述圖18所示的(包括圖8和圖19)認(rèn)證過程。

在當(dāng)前實(shí)施例中，在基于通過第一相機(jī)15捕獲的第一相機(jī)圖像的分析結(jié)果檢測(cè)到在人員檢測(cè)區(qū)R1中存在的一個(gè)或多個(gè)人員H中的特定(單個(gè))人員H執(zhí)行滿足特定條件的行為的情況下，在步驟S40中，指令單元113輸出用于開始步驟S60B中的認(rèn)證處理的指令。在當(dāng)前實(shí)施例中，在檢測(cè)到特定人員H在完成步驟S60B中的面部認(rèn)證處理之后執(zhí)行滿足預(yù)定條件的行為的情況下，在步驟S80中，指令單元113輸出用于開始步驟S100中的顯示UI屏幕的指令。

下文中，將按次序描述“特定條件”和“預(yù)定條件”不同的三個(gè)示例(第一示例至第三示例)。在這三個(gè)示例中的每一個(gè)中，將描述被準(zhǔn)備為與作為步驟S60B中的面部認(rèn)證處理的目標(biāo)的特定人員H 相對(duì)應(yīng)的UI屏幕顯示在觸摸面板130上的模式(稱作第一模式)和不顯示該UI屏幕的模式(稱作第二模式)。

這里，在下面描述的圖20A至圖21D(第一示例)和接著描述的圖22A至圖25D(第二示例和第三示例)中，例示了在圖像形成設(shè)備10周圍存在的包括第一人員H1和第二人員H2的兩個(gè)人員作為人員H的情況。圖20A至圖25D示出了通過投影儀17在其上投影圖像的屏幕18。

[第一示例]

首先，將描述“第一示例”，其中將在人員檢測(cè)區(qū)R1中存在的任一個(gè)人員H從人員檢測(cè)區(qū)R1進(jìn)入至進(jìn)入檢測(cè)區(qū)R3用作用于開始步驟S40中的認(rèn)證處理的指令，并且將已經(jīng)從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的人員H進(jìn)一步從進(jìn)入檢測(cè)區(qū)R3進(jìn)入接近檢測(cè)區(qū)R4用作用于步驟S80中的顯示開始處理的指令。

(第一模式)

圖20A至圖20D示出了圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第一示例中的第一模式。

圖20A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。在這種情況下，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第一人員H1并且開始跟蹤，因此在步驟S25中搜索第一人員H1的面部。在這種情況下，由于第二人員H2存在于人員檢測(cè)區(qū)R1以外，因此第二人員H2不是處理的目標(biāo)。

圖20B示出了第一人員H1仍保持在人員檢測(cè)區(qū)R1并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。此時(shí)，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)，并且還在步驟S23中執(zhí)行肯定確定(是)，并且持續(xù)搜索第一人員H1的面部。另外，此時(shí)，關(guān)于第二人員H2，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第二人員H2并且開始跟蹤，因此在步驟S25中搜索第二人員 H2的面部。

圖20C示出了第一人員H1從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3并且第二人員H2仍保持在人員檢測(cè)區(qū)R1中的狀態(tài)。這里，在第一示例中，在特定人員H從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的情況下，指令單元113輸出用于開始認(rèn)證處理的指令，因此在步驟S40中執(zhí)行肯定確定(是)，以使得步驟S60B中的認(rèn)證處理開始(執(zhí)行)。因此，在該示例中，選擇單元114選擇第一人員H1作為兩個(gè)被跟蹤人員(第一人員H1和第二人員H2)中的目標(biāo)人員。

在第一示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的被跟蹤人員(這里，第一人員H1)通過面部檢測(cè)極限L之前完成了步驟S61至步驟S65中的各個(gè)處理。在第一示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的被跟蹤人員(這里，第一人員H1)通過面部檢測(cè)極限L之前執(zhí)行步驟S66、步驟S69或步驟S72中的通知。與此同時(shí)，投影儀17在屏幕18上顯示消息M。這里，在步驟S61和步驟S62中執(zhí)行肯定確定(是)并且然后在步驟S65中執(zhí)行肯定確定(是)的情況下，在步驟S66中，投影儀17顯示例如“認(rèn)證成功”的文本圖像作為消息M。在步驟S61和步驟S62中執(zhí)行肯定確定(是)并且然后在步驟S65中執(zhí)行否定確定(否)的情況下，在步驟S69中，投影儀17顯示例如“認(rèn)證失敗”或者“未注冊(cè)為用戶”的文本圖像作為消息M。在步驟S61或步驟S62中執(zhí)行否定確定(否)的情況下，在步驟S72中，投影儀17顯示例如“不能獲取面部圖像”的文本圖像。

在認(rèn)證按照上述方式成功的情況下，作為目標(biāo)人員的特定人員H(這里，第一人員H1)靠近圖像形成設(shè)備10。在認(rèn)證失敗或不能獲取面部圖像的情況下，作為被跟蹤人員的特定人員H(這里，第一人員H1)在通過利用第一相機(jī)15難以獲取面部圖像的面部檢測(cè)極限L之前發(fā)現(xiàn)認(rèn)證未成功。

這里，已描述了在步驟S72中呈現(xiàn)“不能獲取面部圖像”的信息的情況，但是呈現(xiàn)的信息不限于此。例如，在步驟S72中，可以執(zhí)行請(qǐng)求人員H不要靠近設(shè)備(圖像形成設(shè)備10)的通知、由于未完成人員H的面部認(rèn)證而請(qǐng)求人員H不要靠近設(shè)備(圖像形成設(shè)備10) 的通知、請(qǐng)求人員H停止的通知、由于未完成人員H的面部認(rèn)證而請(qǐng)求人員H停止的通知、用于通知人員H的面部部分偏離第一相機(jī)15的成像區(qū)的通知等。

在第一示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)進(jìn)入接近檢測(cè)區(qū)R4之前完成步驟S67B、步驟S70B和步驟S73B中的各個(gè)處理。稍后將描述分別在步驟S67B、步驟S70B和步驟S73B中準(zhǔn)備的UI屏幕的內(nèi)容。

圖20D示出了作為目標(biāo)人員的第一人員H1從進(jìn)入檢測(cè)區(qū)R3進(jìn)入接近檢測(cè)區(qū)R4并且并不是目標(biāo)人員的第二人員H2仍保持在人員檢測(cè)區(qū)R1中的狀態(tài)。這里，在第一示例中，在作為從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的結(jié)果而變成目標(biāo)人員的特定人員H(在該示例中，第一人員H1)從進(jìn)入檢測(cè)區(qū)R3進(jìn)入接近檢測(cè)區(qū)R4的情況下，指令單元113輸出用于開始顯示處理的指令，因此在步驟S80中執(zhí)行肯定確定(是)，以使得步驟S100中的UI屏幕的顯示開始。在第一示例中，投影儀17在從圖20C所示的狀態(tài)轉(zhuǎn)變至圖20D所示的狀態(tài)的過程中完成消息M的通知。

這里，在第一示例中，可以在已進(jìn)入到接近檢測(cè)區(qū)R4的目標(biāo)人員(這里，第一人員H1)進(jìn)入人員操作區(qū)R2之前執(zhí)行步驟S100中的UI屏幕的顯示。按照上述方式，在目標(biāo)人員(這里，第一人員H1)進(jìn)入人員操作區(qū)R2并且站在用戶界面13前面的狀態(tài)下，已在觸摸面板130上顯示對(duì)應(yīng)于目標(biāo)人員的認(rèn)證結(jié)果的UI屏幕。

然后，這里，將描述在步驟S67B、步驟S70B和步驟S73B中準(zhǔn)備的并且在步驟S100中顯示在觸摸面板130上的UI屏幕。

圖12A至圖12D是示出在圖19所示的面部認(rèn)證處理中準(zhǔn)備的UI屏幕的示例的示意圖。這里，圖12A和圖12B示出了在圖19所示的步驟S67B中準(zhǔn)備的關(guān)于目標(biāo)人員的UI屏幕(在執(zhí)行認(rèn)證之后的屏幕)的示例。圖12C示出了在圖19所示的步驟S70B中準(zhǔn)備的對(duì)應(yīng)于認(rèn)證失敗的UI屏幕(執(zhí)行認(rèn)證之前的屏幕)的示例。圖12D示出了在圖19所示的步驟S73B中準(zhǔn)備的對(duì)應(yīng)于手動(dòng)輸入認(rèn)證的UI屏幕(執(zhí)行認(rèn)證之前的屏幕)的示例。

首先，在目標(biāo)人員是在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的注冊(cè)人員“Fujitaro”，在跟蹤表(參照?qǐng)D10B)中“Fujitaro”注冊(cè)為被跟蹤人員(步驟S61中的是)，在跟蹤表中注冊(cè)“Fujitaro”的面部信息(步驟S62中的是)并且在步驟S65中認(rèn)證成功(是)的情況下，在步驟S67B中準(zhǔn)備圖12A所示的UI屏幕。根據(jù)圖10A所示的用于“Fujitaro”的注冊(cè)表，在UI屏幕上顯示用戶名和對(duì)應(yīng)的應(yīng)用按鈕(在該示例中，六個(gè)按鈕)。在觸摸面板130中，按下任一個(gè)按鈕，因此執(zhí)行對(duì)應(yīng)于該按鈕的應(yīng)用功能。

接著，在目標(biāo)人員是在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的注冊(cè)人員“Fuji Hanako”，在跟蹤表(參照?qǐng)D10B)中“Fuji Hanako”注冊(cè)為被跟蹤人員(步驟S61中的是)，在跟蹤表中注冊(cè)“Fuji Hanako”的面部信息(步驟S62中的是)并且在步驟S65中認(rèn)證成功(是)的情況下，在步驟S67B中準(zhǔn)備圖12B所示的UI屏幕。根據(jù)圖10A所示的用于“Fuji Hanako”的注冊(cè)表，在UI屏幕上顯示用戶名和對(duì)應(yīng)的應(yīng)用按鈕(在該示例中，八個(gè)按鈕)。在觸摸面板130中，按下任一個(gè)按鈕，因此執(zhí)行對(duì)應(yīng)于該按鈕的應(yīng)用功能。

接著，在目標(biāo)人員是未在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的未注冊(cè)人員(例如，“Fujijirou”)，在跟蹤表(參照?qǐng)D10B)中“Fujijirou”注冊(cè)為被跟蹤人員(步驟S61中的是)，在跟蹤表中注冊(cè)“Fujijirou”的面部信息(步驟S62中的是)并且在步驟S65中認(rèn)證失敗(否)的情況下，在步驟S70B中準(zhǔn)備圖12C所示的UI屏幕。例如，在UI屏幕上顯示文本“認(rèn)證失敗”和“關(guān)閉”按鈕。

最后，在目標(biāo)人員是在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的注冊(cè)人員(這里是“Fujitaro”但可以是“Fuji Hanako”)并且“Fujitaro”未在跟蹤表(參照?qǐng)D10B)中注冊(cè)為被跟蹤人員(步驟S61中的否)的情況下，在步驟S73B中準(zhǔn)備圖12D所示的UI屏幕。在目標(biāo)人員是在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的注冊(cè)人員(這里是“Fujitaro”但可以是“FujiHanako”)，在跟蹤表(參照?qǐng)D10B)中“Fujitaro”注冊(cè)為被跟蹤人員(步驟S61中的是)并且未在跟蹤表中注冊(cè)“Fujitaro”的面部信息(步驟S62中的否)的情況下，在步驟S73B 中準(zhǔn)備圖12D所示的UI屏幕。在目標(biāo)人員是未在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的未注冊(cè)人員(例如，“Fujijirou”)并且未將“Fujijirou”在跟蹤表中注冊(cè)為被跟蹤人員(步驟S61中的否)的情況下，在步驟S73B中準(zhǔn)備圖12D所示的UI屏幕。在目標(biāo)人員是未在注冊(cè)表(參照?qǐng)D10A)中注冊(cè)的未注冊(cè)人員(例如，“Fujijirou”)，在跟蹤表(參照?qǐng)D10B)中“Fujijirou”注冊(cè)為被跟蹤人員(步驟S61中的是)并且未在跟蹤表中注冊(cè)“Fujijirou”的面部信息(步驟S62中的否)的情況下，在步驟S73B中準(zhǔn)備圖12D所示的UI屏幕。顯示UI屏幕，以通過用戶的手動(dòng)輸入接收認(rèn)證請(qǐng)求。虛擬鍵盤、顯示利用虛擬鍵盤輸入的內(nèi)容(用戶ID或密碼)的顯示區(qū)、“取消”按鈕和“進(jìn)入”按鈕顯示在UI屏幕上。

如上所述，在當(dāng)前實(shí)施例中，圖12A和圖12B所示的在執(zhí)行認(rèn)證之后(當(dāng)認(rèn)證成功時(shí))的屏幕的內(nèi)容、圖12C所示的在執(zhí)行認(rèn)證之前(當(dāng)認(rèn)證失敗時(shí))的屏幕的內(nèi)容和圖12D所示的對(duì)應(yīng)于手動(dòng)輸入的在執(zhí)行認(rèn)證之前(當(dāng)不可認(rèn)證時(shí))的屏幕的內(nèi)容彼此不同。在當(dāng)前實(shí)施例中，如圖12A和圖12B所示，在執(zhí)行認(rèn)證之后的屏幕的內(nèi)容針對(duì)各個(gè)注冊(cè)人員不同。

這里，將對(duì)于可檢測(cè)和不可檢測(cè)被跟蹤人員的面部圖像的情況進(jìn)行簡(jiǎn)單描述。

圖13A和圖13B示出了通過第一相機(jī)15捕獲的第一相機(jī)圖像的示例。這里，圖13A示出了通過對(duì)未戴面罩的人員H的面部成像獲得的第一相機(jī)圖像，并且圖13B示出了通過對(duì)佩戴面罩的人員H的面部成像獲得的第一相機(jī)圖像。

當(dāng)前實(shí)施例的面部注冊(cè)/認(rèn)證單元112在面部注冊(cè)和面部認(rèn)證中檢測(cè)諸如眼、鼻和嘴的多個(gè)面部部分(例如，14個(gè)部分或更多)的特征點(diǎn)，并且在按照三維方式校正面部的大小、方向等之后提取面部的特征量。因?yàn)檫@個(gè)原因，在人員H佩戴面罩或太陽鏡以覆蓋其面部的一部分的情況下，即使在第一相機(jī)圖像中包括了包括人員H的面部的圖像，也不能從第一相機(jī)圖像執(zhí)行面部的特征點(diǎn)的檢測(cè)和特征點(diǎn)的提取。另外，在人員H相對(duì)于第一相機(jī)15面對(duì)正側(cè)面或面向后的情 況下，不能從第一相機(jī)圖像中執(zhí)行面部的特征點(diǎn)的檢測(cè)和特征點(diǎn)的提取。在這種情況下，在圖8所示的步驟S26中執(zhí)行否定確定(否)。

接著，將對(duì)在關(guān)于相同被跟蹤人員獲取了多個(gè)面部信息的情況下選擇一個(gè)面部信息的方法進(jìn)行簡(jiǎn)單描述。

圖14A和圖14B示出了通過第一相機(jī)15捕獲的第一相機(jī)圖像的示例。這里，圖14A示出了通過對(duì)在人員檢測(cè)區(qū)R1中位于相對(duì)遠(yuǎn)離面部檢測(cè)極限L的位置處的人員H進(jìn)行成像而獲得的第一相機(jī)圖像，并且圖14B示出了通過對(duì)在人員檢測(cè)區(qū)R1中位于相對(duì)靠近面部檢測(cè)極限L的位置處的人員H進(jìn)行成像而獲得的第一相機(jī)圖像。

如從圖14A和圖14B中清楚的是，隨著人員H靠近第一相機(jī)15，圖14B所示的面部圖像比圖14A所示的面部圖像更大(像素?cái)?shù)量更大)，因此，更容易提取特征量。因此，例如，在從圖14A所示的第一相機(jī)圖像中獲取人員H的面部信息并且將其注冊(cè)在跟蹤表中，然后從圖14B所示的第一相機(jī)圖像中獲取人員H的面部信息的情況下，在步驟S29中選擇后一個(gè)面部信息并且刪除前一個(gè)面部信息。

另外，例如，在從通過對(duì)傾斜地面對(duì)第一相機(jī)15的人員H的面部進(jìn)行成像而獲得的第一相機(jī)圖像中獲取人員H的面部信息并且將其注冊(cè)在跟蹤表中，然后從通過對(duì)面朝第一相機(jī)15的前部的人員H的面部進(jìn)行成像而獲得的第一相機(jī)圖像中獲取人員H的面部信息的情況下，在步驟S29中可選擇后一個(gè)面部信息并且可刪除前一個(gè)面部信息。

(第二模式)

圖21A至圖21D示出了在圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第一示例中的第二模式。

圖21A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1，并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。

圖21B示出了第一人員H1仍保持在人員檢測(cè)區(qū)R1，并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。

圖21C示出了第一人員H1從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3，并且第二人員H2仍保持在人員檢測(cè)區(qū)R1的狀態(tài)。

圖21A至圖21C分別與在第一模式中描述的圖20A至圖20C相同，因此這里將省略對(duì)其的詳細(xì)描述。

圖21D示出了作為目標(biāo)人員的第一人員H1從進(jìn)入檢測(cè)區(qū)R3運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部，并且不是目標(biāo)人員的第二人員H2仍保持在人員檢測(cè)區(qū)R1中的狀態(tài)。在第一示例中，在通過從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3而成為目標(biāo)人員的第一人員H1運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部的情況下，在步驟S140中執(zhí)行否定確定(否)。

這里，在步驟S60B中的面部認(rèn)證處理中認(rèn)證成功的情況下(步驟S160中的是)，在步驟S180中取消面部認(rèn)證。在認(rèn)證成功(步驟S160中的是)以及在步驟S60B中的面部認(rèn)證處理中認(rèn)證失敗(步驟S160中的否)的情況下，在步驟S200中均放棄在步驟S67B、步驟S70B和步驟S73B中準(zhǔn)備的UI屏幕。在步驟S220中，從跟蹤表中刪除關(guān)于目標(biāo)人員(這里，第一人員H1)的跟蹤ID和面部信息。然而，關(guān)于除目標(biāo)人員以外的人員H(這里，第二人員H2)的信息不會(huì)從跟蹤表中刪除，流程返回至步驟S20，并且隨后繼續(xù)執(zhí)行跟蹤和搜索面部。

(第一示例的總結(jié))

如上所述，在第一示例中，除非在人員檢測(cè)區(qū)R1中被跟蹤的第一人員H1或第二人員H2進(jìn)入到進(jìn)入檢測(cè)區(qū)R3，否則不產(chǎn)生目標(biāo)人員，并且因此步驟S60B中的面部認(rèn)證處理不開始。在第一示例中，除非作為目標(biāo)人員的特定人員H進(jìn)一步進(jìn)入接近檢測(cè)區(qū)R4，否則不在觸摸面板130上顯示步驟S100中作為目標(biāo)人員(特定人員H)的認(rèn)證結(jié)果的UI屏幕。

這里，在第一示例中，對(duì)第一人員H1和第二人員H2二者進(jìn)入人員檢測(cè)區(qū)R1、然后第一人員H1比第二人員H2更早進(jìn)入到進(jìn)入檢測(cè)區(qū)R3、因此第一人員H1成為目標(biāo)人員的情況進(jìn)行了描述。然而，在第二人員H2比第一人員H1更早進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的情況下，第二人員H2成為目標(biāo)人員。在第一人員H1和第二人員H2二者進(jìn)入人員檢測(cè)區(qū)R1、然后第一人員H1和第二人員H2二者運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部而不進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的情況下，不產(chǎn)生目標(biāo)人員， 因此步驟S60B中的面部認(rèn)證處理不開始。

這里，在第一示例中，在特定人員H(在該示例中，第一人員H1)從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3并因此被選擇為被跟蹤人員之后，在特定人員H持續(xù)停留在進(jìn)入檢測(cè)區(qū)R3中的狀態(tài)下，即使另一人員H(在該示例中，第二人員H2)從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3，被跟蹤人員也不從特定人員H(第一人員H1)改變?yōu)榱硪蝗藛TH(第二人員H2)。

[第二示例]

接著，將描述“第二示例”，其中將關(guān)于在人員檢測(cè)區(qū)R1中存在的任一個(gè)人員H從進(jìn)入人員檢測(cè)區(qū)R1開始的停留時(shí)間段達(dá)到預(yù)先設(shè)置的第一預(yù)定時(shí)間段用作用于開始步驟S40中的認(rèn)證處理的指令，并且將停留時(shí)間段達(dá)到第二預(yù)定時(shí)間段(第二預(yù)定時(shí)間段＞第一預(yù)定時(shí)間段)用作用于開始步驟S80中的顯示處理的指令。

(第一模式)

圖22A至圖22D示出了在圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第二示例中的第一模式。

圖22A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1，并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。在這種情況下，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第一人員H1并且開始跟蹤，因此在步驟S25中搜索第一人員H1的面部。當(dāng)?shù)谝蝗藛TH1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1時(shí)，利用計(jì)時(shí)器開始計(jì)時(shí)，并且第一人員H1停留在人員檢測(cè)區(qū)R1中的第一停留時(shí)間段T1設(shè)為0(T1＝0)。在這種情況下，由于第二人員H2存在于人員檢測(cè)區(qū)R1以外，因此第二人員H2不是處理的目標(biāo)。

圖22B示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)，并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。此時(shí)，在步驟S22中執(zhí)行肯定確定(是)并且在步驟S23中執(zhí)行肯定確定(是)，并且持續(xù)搜索第一人員H1的面部。另外，此時(shí)，關(guān)于第二人員H2， 在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第二人員H2并且開始跟蹤，因此在步驟S25中搜索第二人員H2的面部。當(dāng)?shù)诙藛TH2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1時(shí)，利用計(jì)時(shí)器開始計(jì)時(shí)，并且第二人員H2停留在人員檢測(cè)區(qū)R1中的第二停留時(shí)間段T2設(shè)為0(T2＝0)。在這種情況下，隨著從圖22A所示狀態(tài)的時(shí)間的流逝，第一人員H1的第一停留時(shí)間段T1比第二人員H2的第二停留時(shí)間段T2更長(zhǎng)(T1＞T2)。

圖22C示出了第一人員H1仍保持在人員檢測(cè)區(qū)R1，并且第二人員H2在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。在這種情況下，第一人員H1的第一停留時(shí)間段T1達(dá)到第一預(yù)定時(shí)間段Ta(T1＝Ta)，并且第二人員H2的第二停留時(shí)間段T2比第一停留時(shí)間段T1更短，也就是說，比預(yù)定時(shí)間段Ta更短(T2＜Ta)。這里，在第二示例中，在特定人員H的停留時(shí)間段T達(dá)到第一預(yù)定時(shí)間段Ta的情況下(T＝Ta)，指令單元113輸出用于開始面部認(rèn)證處理的指令，因此在步驟S40中執(zhí)行肯定確定(是)，以使得步驟S60B中的面部認(rèn)證處理開始(執(zhí)行)。因此，在該示例中，選擇單元114選擇第一人員H1作為兩個(gè)被跟蹤人員(第一人員H1和第二人員H2)中的被跟蹤人員。

另外，在第二示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)通過面部檢測(cè)極限L之前完成了步驟S61至步驟S65中的各個(gè)處理。另外，在第二示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)通過面部檢測(cè)極限L之前執(zhí)行步驟S66、步驟S69或者步驟S72中的通知。與此同時(shí)，投影儀17在屏幕18上顯示消息M。消息M的內(nèi)容與在圖20A至圖20D所示的第一示例中的第一模式中描述的相同。

在第二示例中，在達(dá)到第一預(yù)定時(shí)間段Ta的目標(biāo)人員(這里，第一人員H1)的停留時(shí)間段T達(dá)到第二預(yù)定時(shí)間段Tb(Tb＞Ta)之前完成步驟S67B、步驟S70B和步驟S73B中的各個(gè)處理。在步驟S67B、步驟S70B和步驟S73B中準(zhǔn)備的UI屏幕的內(nèi)容與參照?qǐng)D12A至圖12D描述的內(nèi)容相同。

圖22D示出了作為目標(biāo)人員的第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)，并且不是目標(biāo)人員的第二人員H2仍保持在人員檢測(cè)區(qū)R1中的狀態(tài)。在這種情況下，第一人員H1的第一停留時(shí)間段T1達(dá)到第二預(yù)定時(shí)間段Tb(設(shè)定時(shí)間段的示例)(T1＝Tb)，并且第二人員H2的第二停留時(shí)間段T2比第一停留時(shí)間段T1更短(T2＜T1)。這里，在第二示例中，在作為停留時(shí)間段T達(dá)到第一預(yù)定時(shí)間段Ta的結(jié)果而成為被跟蹤人員的特定人員H(在該示例中，第一人員H1)的停留時(shí)間段T(這里，第一停留時(shí)間段T1)進(jìn)一步達(dá)到第二預(yù)定時(shí)間段Tb(T＝Tb)的情況下，指令單元113輸出用于開始顯示處理的指令，因此在步驟S80中執(zhí)行肯定確定(是)，以使得步驟S100中的UI屏幕的顯示開始。在第二示例中，在從圖22C所示的狀態(tài)轉(zhuǎn)變至圖22D所示的狀態(tài)的過程中，投影儀17完成消息M的通知。

這里，在第二示例中，可在其停留時(shí)間段T已達(dá)到第二預(yù)定時(shí)間段Tb的目標(biāo)人員(這里，第一人員H1)進(jìn)入人員操作區(qū)R2之前執(zhí)行步驟S100中的UI屏幕的顯示。按照上述方式，在目標(biāo)人員(這里，第一人員H1)進(jìn)入人員操作區(qū)R2并且站在用戶界面13前面的狀態(tài)下，已在觸摸面板130上顯示對(duì)應(yīng)于目標(biāo)人員的認(rèn)證結(jié)果的UI屏幕。

(第二模式)

圖23A至圖23D示出了在圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第二示例中的第二模式。

圖23A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1，并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。

圖23B示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)，并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。

圖23C示出了第一人員H1仍保持在人員檢測(cè)區(qū)R1中，并且第二人員H2在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。

圖23A至圖23C分別與在第一模式中描述的圖22A至圖22C相同，因此本文將省略對(duì)其的詳細(xì)描述。

圖23D示出了作為目標(biāo)人員的第一人員H1從人員檢測(cè)區(qū)R1運(yùn) 動(dòng)至人員檢測(cè)區(qū)R1的外部，并且不是目標(biāo)人員的第二人員H2仍保持在人員檢測(cè)區(qū)R1中的狀態(tài)。在這種情況下，第一人員H1的第一停留時(shí)間段T1沒有達(dá)到第二預(yù)定時(shí)間段Tb(T1＜Tb)，并且第二人員H2的第二停留時(shí)間段T2比第一停留時(shí)間段T1更短(T2＜T1)。在第二示例中，在作為停留時(shí)間段T(這里，第一停留時(shí)間段T1)達(dá)到第一預(yù)定時(shí)間段Ta的結(jié)果而成為目標(biāo)人員的第一人員H1在停留時(shí)間段T達(dá)到第二預(yù)定時(shí)間段Tb之前運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部的情況下，在步驟S140中執(zhí)行否定確定(否)。

這里，在步驟S60B中的面部認(rèn)證處理中認(rèn)證成功的情況下(步驟S160中的是)，在步驟S180中取消面部認(rèn)證。在認(rèn)證成功(步驟S160中的是)以及在步驟S60B中的面部認(rèn)證處理中認(rèn)證失敗(步驟S160中的否)的情況下，在步驟S200中均放棄在步驟S67B、步驟S70B和步驟S73B中準(zhǔn)備的UI屏幕。在步驟S220中，從跟蹤表中刪除關(guān)于目標(biāo)人員(這里，第一人員H1)的跟蹤ID和面部信息。然而，關(guān)于除目標(biāo)人員以外的人員H(這里，第二人員H2)的信息不會(huì)從跟蹤表中刪除，流程返回至步驟S20，并且隨后繼續(xù)執(zhí)行跟蹤和搜索面部。

(第二示例的總結(jié))

如上所述，在第二示例中，除非在人員檢測(cè)區(qū)R1中被跟蹤的第一人員H1或第二人員H2的停留時(shí)間段T達(dá)到第一預(yù)定時(shí)間段Ta，否則不產(chǎn)生目標(biāo)人員，并且因此步驟S60B中的面部認(rèn)證處理不開始。在第二示例中，除非作為目標(biāo)人員的特定人員H的停留時(shí)間段T進(jìn)一步達(dá)到第二預(yù)定時(shí)間段Tb，否則不在觸摸面板130上顯示步驟S100中的作為目標(biāo)人員(特定人員H)的認(rèn)證結(jié)果的UI屏幕。

這里，在第二示例中，對(duì)第一人員H1和第二人員H2二者進(jìn)入人員檢測(cè)區(qū)R1、然后第一人員H1的第一停留時(shí)間段T1比第二人員H2的第二停留時(shí)間段T2更早達(dá)到第一預(yù)定時(shí)間段Ta、因此第一人員H1成為目標(biāo)人員的情況進(jìn)行了描述。然而，在第二人員H2的第二停留時(shí)間段T2比第一人員H1的第一停留時(shí)間段T1更早達(dá)到第一預(yù)定時(shí)間段Ta的情況下，第二人員H2成為目標(biāo)人員。在第一人員H1和 第二人員H2二者進(jìn)入人員檢測(cè)區(qū)R1并且然后第一人員H1和第二人員H2二者在其停留時(shí)間段T達(dá)到第一預(yù)定時(shí)間段Ta之前運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部的情況下，不產(chǎn)生目標(biāo)人員，因此步驟S60B中的面部認(rèn)證處理不開始。

這里，在第二示例中，在特定人員H(在該示例中，第一人員H1)的停留時(shí)間段T(這里，第一停留時(shí)間段T1)達(dá)到第一預(yù)定時(shí)間段Ta，因此特定人員H被選為被跟蹤人員之后，在特定人員H持續(xù)停留在人員檢測(cè)區(qū)R1中的狀態(tài)下，即使另一人員H(在該示例中，第二人員H2)的停留時(shí)間段(這里，第二停留時(shí)間段T2)達(dá)到第一預(yù)定時(shí)間段Ta，被跟蹤人員也不從特定人員H(第一人員H1)改變?yōu)榱硪蝗藛TH(第二人員H2)。

[第三示例]

最后，將描述“第三示例”，其中將在人員檢測(cè)區(qū)R1中存在的任一個(gè)人員H進(jìn)入人員檢測(cè)區(qū)R1并且然后接近圖像形成設(shè)備10用作用于開始步驟S40中的面部認(rèn)證處理的指令，并且將進(jìn)入人員檢測(cè)區(qū)R1并且然后接近圖像形成設(shè)備10的人員H進(jìn)一步接近圖像形成設(shè)備10用作用于開始步驟S80中的顯示處理的指令。

(第一模式)

圖24A至圖24D示出了在圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第三示例中的第一模式。

圖24A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1，并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。在這種情況下，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第一人員H1并且開始跟蹤，因此在步驟S25中搜索第一人員H1的面部。在這種情況下，由于第二人員H2存在于人員檢測(cè)區(qū)R1以外，因此第二人員H2不是處理的目標(biāo)。

圖24B示出了第一人員H1仍保持在人員檢測(cè)區(qū)R1中，并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。在這種情況下，關(guān)于第一人員H1，在步驟S22中執(zhí)行肯定確定(是)并 且還在步驟S23中執(zhí)行肯定確定(是)，并且持續(xù)搜索第一人員H1的面部。此時(shí)，關(guān)于第二人員H2，在步驟S22中執(zhí)行肯定確定(是)，并且在步驟S23中執(zhí)行否定確定(否)，從而在步驟S24中將跟蹤ID賦予第二人員H2并且開始跟蹤，因此在步驟S25中搜索第二人員H2的面部。

圖24C示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)，并且第二人員H2也在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。然而，在這種情況下，第一人員H1沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)，并且第二人員H2沿著與第一人員H1相比不逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)。這里，在第三示例中，在特定人員H進(jìn)入人員檢測(cè)區(qū)R1并且然后接近圖像形成設(shè)備10的情況下，指令單元113輸出用于開始認(rèn)證處理的指令，因此在步驟S40中執(zhí)行肯定確定(是)，從而步驟S60中的認(rèn)證處理開始(執(zhí)行)。因此，在該示例中，選擇單元114選擇第一人員H1作為兩個(gè)被跟蹤人員(第一人員H1和第二人員H2)中的目標(biāo)人員。

另外，在第三示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)通過面部檢測(cè)極限L之前完成步驟S61至步驟S65中的各個(gè)處理。另外，在第三示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)通過面部檢測(cè)極限L之前執(zhí)行步驟S66、步驟S69或步驟S72中的通知。與此同時(shí)，投影儀17在屏幕18上顯示消息M。消息M的內(nèi)容與在圖20A至圖20D所示的第一示例中的第一模式中描述的內(nèi)容相同。

在第三示例中，在已進(jìn)入到進(jìn)入檢測(cè)區(qū)R3的目標(biāo)人員(這里，第一人員H1)進(jìn)入接近檢測(cè)區(qū)R4之前完成步驟S67B、步驟S70B和步驟S73B中的對(duì)應(yīng)的處理。在步驟S67B、步驟S70B和步驟S73B中準(zhǔn)備的UI屏幕的內(nèi)容與參照?qǐng)D12A至圖12D描述的相同。

圖24D示出了作為目標(biāo)人員的第一人員H1從人員檢測(cè)區(qū)R1進(jìn)入到進(jìn)入檢測(cè)區(qū)R3，并且不是目標(biāo)人員的第二人員H2在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。然而，在這種情況下，第一人員H1沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)，并且第二人員H2沿著與第一人員H1 相比逐漸遠(yuǎn)離圖像形成設(shè)備10的方向運(yùn)動(dòng)。這里，在第三示例中，在通過進(jìn)入人員檢測(cè)區(qū)R1然后接近圖像形成設(shè)備10而成為目標(biāo)人員的特定人員H(在該示例中，第一人員H1)進(jìn)一步接近圖像形成設(shè)備10的情況下，指令單元113輸出用于開始顯示處理的指令，并且因此在步驟S80中執(zhí)行肯定確定(是)，從而步驟S100中的UI屏幕的顯示開始。在第三示例中，投影儀17在從圖24C所示的狀態(tài)轉(zhuǎn)變至圖24D所示的狀態(tài)的過程中完成消息M的通知。

這里，在第三示例中，可在人員檢測(cè)區(qū)R1中接近圖像形成設(shè)備10的目標(biāo)人員(這里，第一人員H1)進(jìn)入人員操作區(qū)R2之前執(zhí)行步驟S100中的UI屏幕的顯示。按照上述方式，在目標(biāo)人員(這里，第一人員H1)進(jìn)入人員操作區(qū)R2并站在用戶界面13前面的狀態(tài)下，已在觸摸面板130上顯示對(duì)應(yīng)于目標(biāo)人員的認(rèn)證結(jié)果的UI屏幕。

(第二模式)

圖25A至圖25D示出了在圖像形成設(shè)備10周圍的人員H的位置的時(shí)間變化的第三示例中的第二模式。

圖25A示出了第一人員H1從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1，并且第二人員H2位于人員檢測(cè)區(qū)R1以外的狀態(tài)。

圖25B示出了第一人員H1仍保持在人員檢測(cè)區(qū)R1中，并且第二人員H2從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的狀態(tài)。

圖25C示出了第一人員H1在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)，并且第二人員H2也在人員檢測(cè)區(qū)R1中運(yùn)動(dòng)的狀態(tài)。

圖25A至圖25C分別與在第一模式中描述的圖24A至圖24C相同，因此本文將省略對(duì)其的詳細(xì)描述。

圖25D示出了作為目標(biāo)人員的第一人員H1從人員檢測(cè)區(qū)R1運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部，并且不是目標(biāo)人員的第二人員H2仍保持在人員檢測(cè)區(qū)R1中的狀態(tài)。在第三示例中，在作為在人員檢測(cè)區(qū)R1中沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)的結(jié)果而成為目標(biāo)人員的第一人員H1運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部的情況下，在步驟S140中執(zhí)行否定確定(否)。

這里，在步驟S60B中的面部認(rèn)證處理中認(rèn)證成功的情況下(步 驟S160中的是)，在步驟S180中取消面部認(rèn)證。在認(rèn)證成功(步驟S160中的是)以及在步驟S60B中的面部認(rèn)證處理中認(rèn)證失敗(步驟S160中的否)的情況下，在步驟S200中均放棄在步驟S67B、步驟S70B和步驟S73B中準(zhǔn)備的UI屏幕。在步驟S220中，從跟蹤表中刪除關(guān)于目標(biāo)人員(這里，第一人員H1)的跟蹤ID和面部信息。然而，關(guān)于除目標(biāo)人員以外的人員H(這里，第二人員H2)的信息不會(huì)從跟蹤表中刪除，流程返回至步驟S20，并且隨后繼續(xù)執(zhí)行跟蹤和搜索面部。

(第三示例的總結(jié))

如上所述，在第三示例中，除非在人員檢測(cè)區(qū)R1中被跟蹤的第一人員H1或第二人員H2沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)，否則不產(chǎn)生目標(biāo)人員，并且因此步驟S60B中的面部認(rèn)證處理不開始。在第三示例中，除非作為目標(biāo)人員的特定人員H沿著接近圖像形成設(shè)備10的方向進(jìn)一步運(yùn)動(dòng)，否則不在觸摸面板130上顯示步驟S100中的作為目標(biāo)人員(特定人員H)的認(rèn)證結(jié)果的UI屏幕。

這里，在第三示例中，對(duì)第一人員H1和第二人員H2二者進(jìn)入人員檢測(cè)區(qū)R1、然后第一人員H1更早沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)、因此第一人員H1成為目標(biāo)人員的情況進(jìn)行了描述。然而，在第二人員H2比第一人員H1更早沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)的情況下，第二人員H2成為目標(biāo)人員。在第一人員H1和第二人員H2二者進(jìn)入人員檢測(cè)區(qū)R1，并且然后第一人員H1和第二人員H2二者運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部而不沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)的情況下，不產(chǎn)生目標(biāo)人員，因此步驟S60B中的面部認(rèn)證處理不開始。

這里，在第三示例中，在特定人員H(在該示例中，第一人員H1)在人員檢測(cè)區(qū)R1中沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)并因此被選為被跟蹤人員之后，在特定人員H繼續(xù)在人員檢測(cè)區(qū)R1中沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)的狀態(tài)下，即使另一人員H(在該示例中，第二人員H2)沿著逐漸靠近圖像形成設(shè)備10的方向運(yùn)動(dòng)，被跟蹤人員也不從特定人員H(第一人員H1)改變?yōu)榱硪蝗? 員H(第二人員H2)。

[其它示例]

這里，在上述第一示例至第三示例中，對(duì)在圖像形成設(shè)備10周圍存在兩個(gè)人員H(第一人員H1和第二人員H2)的情況進(jìn)行了描述，可以存在圖像形成設(shè)備10周圍存在單個(gè)人員H的情況以及圖像形成設(shè)備10周圍存在三個(gè)或更多個(gè)人員H的情況。

雖然在第一示例至第三示例中未描述，在作為從人員檢測(cè)區(qū)R1的外部進(jìn)入人員檢測(cè)區(qū)R1的結(jié)果而在步驟S24中被賦予跟蹤ID但是在步驟S60B中未成為目標(biāo)人員的被跟蹤人員(例如，第二人員H2)從人員檢測(cè)區(qū)R1的內(nèi)部運(yùn)動(dòng)至人員檢測(cè)區(qū)R1的外部的情況下，在步驟S32中從跟蹤表中刪除關(guān)于該被跟蹤人員(這里，第二人員H2)的跟蹤ID和面部信息。

在當(dāng)前實(shí)施例中，在圖19所示的步驟S62中的面部認(rèn)證處理中未注冊(cè)目標(biāo)人員(被跟蹤人員)的面部信息的情況下(否)，在步驟S71中在觸摸面板130上顯示用于手動(dòng)輸入認(rèn)證的UI屏幕(參照?qǐng)D12D)，從而通過手動(dòng)輸入接收認(rèn)證，但是本發(fā)明不限于此。例如，可利用設(shè)置在用戶界面13中的第二相機(jī)16捕獲停留在人員操作區(qū)R2中的人員H的面部圖像，并且可從獲得的第二相機(jī)圖像中獲取面部信息，從而可再次執(zhí)行面部認(rèn)證。在這種情況下，第二相機(jī)圖像可與用于提示利用第二相機(jī)16捕獲面部圖像的指令一起顯示在觸摸面板130上。

在當(dāng)前實(shí)施例中，在圖6所示的控制圖像形成設(shè)備10的模式的過程中，在步驟S6中發(fā)生從睡眠模式轉(zhuǎn)變?yōu)檎ＤＪ?，然后在步驟S7中開始人員H的面部的檢測(cè)，但是本發(fā)明不限于此。例如，人員H的面部的檢測(cè)可與開始步驟S4中的檢測(cè)人員H的運(yùn)動(dòng)的處理結(jié)合地開始。在這種情況下，在設(shè)定睡眠模式的狀態(tài)下開始人員H的面部的檢測(cè)。在采用了在設(shè)定睡眠模式的狀態(tài)下開始人員H的面部的檢測(cè)的構(gòu)造的情況下，例如，當(dāng)在圖18所示的步驟S40中存在用于開始面部認(rèn)證處理的指令時(shí)(步驟S40中的是)，可使得圖像形成設(shè)備10從睡眠模式轉(zhuǎn)變?yōu)檎ＤＪ健?/p>

在當(dāng)前實(shí)施例中，顯示圖像的投影儀17用作通知單元115的情況作為示例進(jìn)行了描述，但是本發(fā)明不限于此?？墒褂脧睦缏曉摧敵雎曇艋蛘邚睦绻庠?燈)發(fā)射光的方法。這里，在當(dāng)前實(shí)施例中，當(dāng)利用獲取的面部圖像的認(rèn)證成功時(shí)(步驟S66)，當(dāng)利用獲取的面部圖像的認(rèn)證失敗時(shí)(步驟S69)，以及當(dāng)由于不能獲取面部圖像而不能執(zhí)行認(rèn)證時(shí)(步驟S72)，執(zhí)行通知，但是本發(fā)明不限于此。例如，(1)在從第一相機(jī)圖像檢測(cè)面部圖像之前，(2)在從第一相機(jī)圖像檢測(cè)到面部圖像之后在利用面部圖像執(zhí)行認(rèn)證之前，以及(3)在執(zhí)行認(rèn)證處理之后，可執(zhí)行通知。

上面討論的實(shí)施例可公開以下內(nèi)容。

[1]一種處理設(shè)備，包括：

成像單元，其對(duì)處理設(shè)備的附近進(jìn)行成像；

顯示單元，其顯示與通過成像單元捕獲的人員的圖像相關(guān)的屏幕；以及

指令單元，其指示顯示單元開始顯示，

其中，成像單元在通過指令單元給出指令之前開始成像，并且

在通過指令單元給出指令之后，顯示單元開始顯示與通過成像單元捕獲的人員的圖像相關(guān)的屏幕。

[2]可存在根據(jù)[1]所述的處理設(shè)備，其中，成像單元捕獲在第一區(qū)中存在的人員的圖像，并且

指令單元在第二區(qū)中存在人員的情況下指示顯示單元開始顯示，第二區(qū)位于第一區(qū)內(nèi)部并且比第一區(qū)更窄。

[3]可存在根據(jù)[1]所述的處理設(shè)備，其中，成像單元捕獲在第一區(qū)中存在的人員的圖像，并且

指令單元在存在于第一區(qū)中的人員在第一區(qū)中停留預(yù)先設(shè)定的設(shè)定時(shí)段或更久的情況下指示顯示單元開始顯示。

[4]可存在根據(jù)所述[1]的處理設(shè)備，其中，成像單元捕獲在第一區(qū)中存在的人員的圖像，并且

指令單元在存在于第一區(qū)中的人員接近處理設(shè)備的情況下指示顯示單元開始顯示。

針對(duì)示出和描述的目的提供了本發(fā)明的示例性實(shí)施例的以上描述。該描述不旨在是全面的，或者將本發(fā)明限于公開的具體形式。明顯的是，許多修改和改變將對(duì)于本領(lǐng)域技術(shù)人員來說是顯而易見的。選擇和描述實(shí)施例以最好地解釋本發(fā)明的原理及其實(shí)際應(yīng)用，從而使得其它技術(shù)人員能夠理解本發(fā)明的各個(gè)實(shí)施例以及適合于考慮的特定用途的各種變型例。本發(fā)明的范圍旨在由權(quán)利要求及其等同物限定。