面部認證系統(tǒng)的制作方法
【專利摘要】本發(fā)明的一個實施例的面部認證系統(tǒng)，具備：從由攝像機拍攝到的第一攝像圖像中檢測第一面部圖像的第一面部區(qū)域檢測部；使用模板面部圖像對所述第一面部圖像進行非線性變形的第一變形部；記錄變形后的所述第一面部圖像作為登錄面部圖像的面部圖像記錄部；從由攝像機拍攝到的第二攝像圖像中檢測第二面部圖像的第二面部區(qū)域檢測部；使用所述模板面部圖像對所述第二面部圖像進行非線性變形的第二變形部；以及將變形后的所述第二面部圖像和所述登錄面部圖像進行對照的面部圖像對照部。
【專利說明】
面部認證系統(tǒng)
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及進行面部圖像的攝像/登錄，并用其來對用戶進行認證的技術(shù)。
【背景技術(shù)】
[0002]公共設(shè)施內(nèi)的反恐對策、犯罪對策逐年成為重要的課題。因此，關(guān)注使用生物體信息(指紋、靜脈、面部等)的生物認證，其中，對面部認證的期待不斷升高。在面部認證技術(shù)中，由于能夠從遠離的場所對面部圖像進行拍攝，因而具有對象者無需認證動作的優(yōu)點等其他生物認證技術(shù)所不具有的優(yōu)勢。因此，期待著以邊境管理、監(jiān)視警備用途為中心的廣泛利用。
[0003]使用面部圖像的個人認證系統(tǒng)預先輸入個人用戶的面部圖像而登錄為辭典信息。例如，當用戶要使用設(shè)施時，與拍攝用戶的面部圖像而登錄的面部圖像進行對照，由此判定該人物是否是本人。
[0004]在以往的這樣的認證系統(tǒng)中，當進行面部登錄和面部認證時，需要用戶在認證系統(tǒng)的攝像機前止步，在用戶朝向攝像機的鏡頭并使面部面向鏡頭的狀態(tài)下拍攝面部圖像。難以進行在用戶不注意時拍攝面部圖像，且減少姿勢或表情的變動的無意識個人認證。
[0005]針對上述問題，例如，專利文獻I公開了如下技術(shù)，其中，將拍攝到的面部圖像與預先準備了面部的三維測量數(shù)據(jù)的三維模型進行擬合(fitting)，對姿勢、表情的變動進行修正。
[0006]現(xiàn)有技術(shù)文獻
[0007]專利文獻
[0008]專利文獻I:日本特開2007-122454號公報

【發(fā)明內(nèi)容】

[0009]發(fā)明要解決的課題
[0010]但是，在專利文獻I記載的認證系統(tǒng)中，為了進行三維面部認證，需要同時使用多臺攝像機來拍攝用戶的面部圖像，使用所得的多張面部圖像來進行三維重建處理，生成面部的三維測量數(shù)據(jù)。并且，在進行上述的三維重建處理時，需要高精度地從輸入圖像中確定在面部的特征部位設(shè)定的多個特征點的2維坐標。在用戶的姿勢、表情的變動中進行高精度的特征點檢測是非常困難的。
[0011]因此，希望對姿勢、表情的變動具有魯棒性的面部認證技術(shù)。
[0012]用于解決課題的手段
[0013]本發(fā)明的一種方式的面部認證系統(tǒng)，具備:從由攝像機拍攝到的第一攝像圖像中檢測第一面部圖像的第一面部區(qū)域檢測部;使用模板面部圖像對所述第一面部圖像非線性地進行變形的第一變形部;記錄變形后的所述第一面部圖像作為登錄面部圖像的面部圖像記錄部;從由攝像機拍攝到的第二攝像圖像中檢測第二面部圖像的第二面部區(qū)域檢測部；使用所述模板面部圖像對所述第二面部圖像非線性地進行變形的第二變形部;將變形后的所述第二面部圖像和所述登錄面部圖像進行對照的面部圖像對照部。
[0014]發(fā)明效果
[0015]根據(jù)本發(fā)明一種方式，能夠?qū)崿F(xiàn)對姿勢、表情的變動具有魯棒性的面部認證。
【附圖說明】
[0016]圖1A是表示實施方式I的面部認證系統(tǒng)的邏輯結(jié)構(gòu)的框圖。
[0017]圖1B是表示實施方式I的面部登錄裝置和面部認證裝置的硬件結(jié)構(gòu)的框圖。
[0018]圖2是實施方式I的面部登錄處理的流程圖。
[0019]圖3是實施方式I的面部認證處理的流程圖。
[0020]圖4是表示面部圖像變形部的邏輯結(jié)構(gòu)的框圖。
[0021 ]圖5是說明面部變形處理的流程圖。
[0022]圖6是標準模板面部圖像和表示采樣點數(shù)量的權(quán)重的采樣掩碼(sampling mask)的說明圖。
[0023]圖7是實施方式2的面部對照處理的流程圖。
[0024]圖8是實施方式2的面部變形處理的流程圖。
[0025]圖9是表示實施方式2的面部對照部的邏輯結(jié)構(gòu)的框圖。
[0026]圖10是表示實施方式I和實施方式2的登錄面部圖像變形中的圖像的例子的說明圖。
[0027]圖11是表示實施方式I和實施方式2的認證對象面部圖像變形中的圖像的例子的說明圖。
[0028]圖12是表示在實施方式2的面部對照處理中執(zhí)行的面部圖像變形中的圖像的例子的說明圖。
[0029]圖13是表示實施方式3的進出管理以及服務(wù)提供系統(tǒng)的邏輯結(jié)構(gòu)的框圖。
【具體實施方式】
[0030]以下，參照【附圖說明】本發(fā)明的實施方式。應(yīng)該注意，本實施方式不過是用于實現(xiàn)本發(fā)明的一例，不對本發(fā)明的技術(shù)范圍進行限定。在各個圖中，針對相同的結(jié)構(gòu)賦予相同的參照符號。
[0031](實施方式I)
[0032]〈概要〉
[0033]本實施方式的面部登錄裝置和面部認證裝置對登錄用面部圖像和認證用面部圖像的每一個，將面部部分的配置、各個面部部分的大小、各個面部部分的形狀、輪廓的大小、輪廓的形狀等非線性地進行變形。面部登錄裝置和面部認證裝置在進行變形時，使用預先制作出的通用的標準模板面部圖像作為參照面部圖像。
[0034]通過參照模板圖像來對登錄用面部圖像和認證用面部圖像非線性地進行變形，從面部的朝向、位置不同的圖像，也能夠生成適合于認證的面部圖像，提高了認證精度。由此，降低了在用戶面部圖像的攝像中由于用戶的面部朝向、表情的變動等造成的影響，在用戶進行面部登錄和面部認證時即使未特別意識到圖像拍攝也能夠?qū)崿F(xiàn)高精度的面部認證。
[0035]〈結(jié)構(gòu)和動作〉
[0036]圖1A是表示本實施方式的面部認證系統(tǒng)的邏輯結(jié)構(gòu)的框圖。本實施方式的面部認證系統(tǒng)100具備:攝像機121、122、面部登錄裝置I和面部認證裝置2。面部登錄裝置I具備:面部區(qū)域檢測部12、面部圖像變形部15和面部圖像記錄部18。面部認證裝置2具備:面部區(qū)域檢測部13、面部圖像變形部14和面部圖像對照部19。
[0037]面部認證系統(tǒng)100還包含:在面部登錄裝置I中輸入的登錄用圖像10、面部認證裝置2使用的認證用圖像11、預先制作出的標準模板面部圖像24、以及登錄用戶數(shù)據(jù)庫20。在以下說明的例中，標準模板面部圖像和登錄面部圖像是二維圖像。
[0038]圖1B表示面部認證系統(tǒng)100的硬件結(jié)構(gòu)例。登錄用戶數(shù)據(jù)庫20和標準模板面部圖像24被存儲在面部圖像服務(wù)器241的易失性存儲設(shè)備或非易失性存儲設(shè)備中。攝像機121、122、面部登錄裝置1、面部認證裝置2和面部圖像服務(wù)器241經(jīng)由網(wǎng)絡(luò)27而連接。
[0039]圖1B表示面部登錄裝置I的硬件結(jié)構(gòu)例。面部認證裝置2和面部圖像服務(wù)器241也可以具有相同的結(jié)構(gòu)。面部登錄裝置I具有:輸入設(shè)備510、輸出設(shè)備520、處理器530、磁盤設(shè)備540、接口(I/F)550以及存儲器560。
[0040]輸入設(shè)備510是用于使管理者向面部登錄裝置I輸入信息的設(shè)備。輸入設(shè)備510例如是鍵盤、指點設(shè)備、開關(guān)、觸摸屏、話筒等。輸出設(shè)備520是用于面部登錄裝置I向管理者輸出信息的設(shè)備。輸出設(shè)備520例如是監(jiān)視顯示器、揚聲器、打印機等。
[0041 ]處理器530按照存儲器560中存儲的程序、運算參數(shù)等來控制面部登錄裝置I的動作，實現(xiàn)圖1A所示的各種功能。具體地，按照面部區(qū)域檢測程序、面部圖像變形程序以及面部圖像記錄程序，作為各功能部進行動作。
[0042]磁盤設(shè)備540是物理存儲設(shè)備。磁盤設(shè)備540例如是HDD(硬盤驅(qū)動器)、SSD(固態(tài)驅(qū)動器)等，對所需要的程序、運算參數(shù)進行存儲。
[0043]存儲器560存儲用于實現(xiàn)圖1A所示的各種功能的程序。存儲器560中除了存儲有用于實現(xiàn)圖1A所示的各種功能的應(yīng)用程序之外，還存儲有包含OS的本系統(tǒng)中的動作所需要的程序。I/F550是用于經(jīng)由網(wǎng)絡(luò)27與其他裝置進行通信的通信接口。
[0044]在面部認證裝置2中，面部區(qū)域檢測部13、面部圖像變形部14以及面部對照部19可通過按照程序進行動作的處理器來實現(xiàn)。面部登錄裝置I和面部認證裝置2的功能部的至少一部分可以由用集成電路設(shè)計的硬件構(gòu)成。
[0045]在圖1B中，面部登錄裝置I和面部認證裝置2分別被安裝在不同的計算機中，然而它們也可以被包含在同一計算機中。標準模板面部圖像24和登錄用戶數(shù)據(jù)庫20可以包含在任意的計算機中。例如，登錄用戶數(shù)據(jù)庫20可以存儲在面部登錄裝置I中，標準模板面部圖像24可以存儲在面部認證裝置2中。
[0046]接著，根據(jù)圖1A和圖1B、以及圖2和圖3的流程圖來說明本實施方式的動作。首先，說明圖2所示的面部登錄裝置I的動作。面部登錄裝置I經(jīng)由網(wǎng)絡(luò)27接收由攝像機121拍攝出的登錄用圖像10，登錄用圖像10被輸入到面部區(qū)域檢測部12中(SlOl)。面部區(qū)域檢測部12從登錄用圖像10檢測登錄對象即用戶的面部區(qū)域，來生成該面部區(qū)域的面部圖像22(S102)。面部區(qū)域檢測部12將生成的面部圖像22供給到面部圖像變形部15。
[0047]面部圖像變形部15經(jīng)由網(wǎng)絡(luò)27從面部圖像服務(wù)器241取得預先制作的標準模板面部圖像24(S103)。標準模板面部圖像24例如是對多個人的面部圖像進行合成而生成的平均面部圖像。通過將平均面部圖像用作標準模板面部圖像24，能夠針對各個不同的用戶，通過面部認證來生成合適的登錄面部圖像。標準模板面部圖像24可以是特定的人的面部圖像。
[0048]面部圖像變形部15使用標準模板面部圖像24來對面部圖像22進行非線性變形。標準模板面部圖像24是參照圖像，面部圖像22是浮動圖像。面部圖像變形部15針對面部圖像22進行伴隨著非線性變形的非剛性變形。面部圖像變形部15對面部圖像22的面部部分的配置、各面部部分的大小、各面部部分的形狀、輪廓的形狀等進行非線性變形，生成已變形面部圖像16(S104)。面部圖像變形部15將生成的已變形面部圖像16供給到面部圖像記錄部18。
[0049]這里，非剛性變形是剛性變形以外的變形。剛性變形僅進行平行移動和旋轉(zhuǎn)。非線性變形是線性變形以外的變形。線性變形除了包含平行移動和旋轉(zhuǎn)之外，還包含擴大縮小和剪斷。
[0050]攝像機121對多個登錄用圖像10進行拍攝，并供給到面部圖像變形部15。面部圖像變形部15分別從多個登錄用圖像10生成已變形面部圖像16，并將多個已變形面部圖像16供給到面部圖像記錄部18。
[0051]面部圖像記錄部18接收在預定時間內(nèi)輸入的多個已變形面部圖像16，并計算這些已變形面部圖像16和標準模板面部圖像24的圖像類似度。面部圖像記錄部18按照與標準模板面部圖像24的類似度從高到低的順序來選擇預定張數(shù)的已變形面部圖像(S105)。
[0052]面部圖像記錄部18將所選擇出的已變形面部圖像作為用戶的登錄面部圖像記錄到登錄用戶數(shù)據(jù)庫20中(S106)。然后，面部圖像記錄部18從各個登錄面部圖像中提取圖像特征量，登錄到登錄用戶數(shù)據(jù)庫20中(S107)。選擇出的已變形面部圖像及其圖像特征量，經(jīng)由網(wǎng)絡(luò)27被發(fā)送到面部圖像服務(wù)器241。
[0053]接著，說明圖3所示的面部認證裝置2的動作。面部認證裝置2經(jīng)由網(wǎng)絡(luò)27接收由攝像機122拍攝出的認證用圖像11。認證用圖像11被輸入到面部區(qū)域檢測部13中(S201)。面部區(qū)域檢測部13從認證用圖像11檢測認證對象即用戶的面部區(qū)域，生成面部圖像23(S202)，并供給到面部圖像變形部14。
[0054]面部圖像變形部14經(jīng)由網(wǎng)絡(luò)27從面部圖像服務(wù)器241取得預先制作的標準模板面部圖像24(S203)。在本例中，標準模板面部圖像24在面部登錄裝置I和面部認證裝置2中是共通的，然而也可以不同。
[0055]面部圖像變形部14使用標準模板面部圖像24對面部圖像23進行非線性變形。標準模板面部圖像24是參照圖像，面部圖像23是浮動圖像。面部圖像變形部14針對面部圖像23進行伴隨著非線性變形的非剛性變形。變形的方法(算法)可以與面部登錄裝置I相同，也可以不同。
[0056]面部圖像變形部14對面部圖像23的各面部部分的配置、各面部部分的大小、各面部部分的形狀、輪廓的形狀等進行非線性變形，生成已變形面部圖像17(S204)。面部圖像變形部14將生成的已變形面部圖像17供給到面部圖像對照部19。
[0057]面部圖像對照部19從登錄用戶數(shù)據(jù)庫20取得多個登錄面部圖像，進行已變形面部圖像17和各個登錄面部圖像之間的面部圖像對照處理(S206)。面部圖像對照部19將對照的認證結(jié)果輸出到輸出設(shè)備或其他程序(S207)。具體來說，面部圖像對照部19判定已變形面部圖像17是否與某一個登錄面部圖像匹配。例如，在已變形面部圖像17與登錄面部圖像的類似度達到規(guī)定的情況下，判定為它們匹配。面部圖像對照部19在已變形面部圖像17與登錄面部圖像匹配的情況下，認證為該用戶是登錄用戶。
[0058]以下，詳細說明圖2和圖3所示的處理中的若干個步驟。
[0059]〈面部區(qū)域檢測部〉
[0060]說明面部區(qū)域檢測部12的面部區(qū)域檢測S102。面部區(qū)域檢測部13通過與面部區(qū)域檢測部12同樣的方法，能夠從認證用圖像11生成面部圖像23(S202)。
[0061]面部區(qū)域檢測部12接受登錄用圖像10，確定登錄用圖像10中與面部區(qū)域相當?shù)膱D像區(qū)域，從登錄用圖像10中切出該圖像區(qū)域來生成面部圖像22。
[0062]針對面部區(qū)域檢測方法，可以使用公知的方法。作為公知的方法，例如可以使Haar-1ike檢測器。V1la-Jones法是面部區(qū)域檢測方法的一例。面部區(qū)域檢測部12將從登錄用圖像10檢測出的面部區(qū)域變換為預定的圖像尺寸，作為面部圖像22供給到面部圖像變形部15。
[0063]〈面部圖像變形部〉
[0064]說明面部圖像變形部15的面部圖像變形處理S104。面部圖像變形部14通過與面部圖像變形部15相同的方法，能夠從面部圖像23生成已變形面部圖像17(S204)。面部圖像變形部14也可以使用與面部圖像變形部15不同的算法。
[0065]面部圖像變形部15取得所生成的面部圖像22和標準模板面部圖像24。面部圖像變形部15以標準模板面部圖像24作為參照圖像，對面部圖像22中的面部部分的配置、各面部部分的大小、各面部部分的形狀、輪廓的形狀等進行非線性變形，生成已變形面部圖像16。
[0066]面部圖像變形部15可以使用公知的面部圖像變形方法。作為公知的方法，例如可以使用基于Free-Form Deformat1n(自由變形)(FFD)法的非剛性變形法。此外，還可以使用TPS法(Thin-Plate Splines(薄板樣條法))JPS法計算通過散布的點數(shù)據(jù)的平面的連續(xù)形變，并使平面的彎曲能量最小化，由此對通過散布的點數(shù)據(jù)的表面進行插補。
[0067]以下，作為伴隨非線性變形的非剛性變形法的例子，說明FFD非剛性變形法。面部圖像變形部15在FFD非剛性變形法中在面部圖像上配置控制點。FFD非剛性變形法通過移動控制點來使對面部圖像變形。由此，能夠合適且高效率地進行變形運算。
[0068]面部圖像變形部15以增大面部圖像22和標準模板面部圖像24之間的類似度的方式對面部圖像22進行變形。例如，面部圖像變形部15在變形后的面部圖像22和標準模板面部圖像24之間求出圖像類似度，并計算基于求出的圖像類似度的優(yōu)化計算。通過優(yōu)化計算，求出用于再變形的控制點的移動量(變形量)?？刂泣c的移動量可以由表示移動方向和移動距離的向量來表示。
[0069]面部圖像變形部15針對控制點間的像素的移動量，通過在該像素的周圍配置的控制點的移動量的插補來進行計算。面部圖像變形部15使用所得到的各像素的移動量來進行面部圖像22的坐標變換，并對面部圖像22進行變形。可以選擇全部的像素作為控制點。
[0070]面部圖像變形部15通過重復進行面部圖像22的變形，得到最終的已變形面部圖像
16。后面對優(yōu)化計算進行描述。這樣，面部圖像變形部15使面部圖像22局部變形，來對面部圖像22和標準模板面部圖像24進行位置對準。此外，通過使控制點的間隔即控制點數(shù)變化，可以實施多重分辨率變形。
[0071 ]圖4是表示使用FFD法的面部圖像變形部15的邏輯結(jié)構(gòu)的框圖。面部圖像變形部15具備:圖像采樣部401、控制點設(shè)定部402、坐標幾何變換部404、圖像類似度計算部405、圖像類似度最大化部406、面部圖像變形部407。
[0072]接著，根據(jù)圖4的框圖、圖5的流程圖、圖6的說明圖來說明面部圖像變形部15的動作。圖像采樣部401從標準模板面部圖像24中提取圖像采樣點的采樣數(shù)據(jù)，并輸出給坐標幾何變換部404(S301和S302)。在非剛性變形處理中，在面部圖像22和標準模板面部圖像24之間的圖像類似度的計算中，使用采樣數(shù)據(jù)。
[0073]圖像采樣點可以是成為非剛性變形處理的對象的圖像區(qū)域的全部像素。但是，為了提高非剛性變形處理的速度，圖像采樣部401可以在圖像上設(shè)置格子，僅選擇格子點中的像素作為采樣點。
[0074]此外，圖像采樣部401可以在采樣對象區(qū)域中隨機生成預定數(shù)的坐標，選擇所得的坐標的像素作為圖像采樣點。生成的坐標的亮度值是采樣數(shù)據(jù)。在生成預定數(shù)的采樣點的坐標的情況下，圖像采樣部401可以針對每個部分區(qū)域?qū)Σ蓸狱c的數(shù)量進行加權(quán)，在各部分區(qū)域內(nèi)隨機生成采樣點的坐標。由此，提高面部圖像的非剛性變形處理的精度和魯棒性。
[0075]說明部分區(qū)域的加權(quán)的一例。圖6表示了標準模板面部圖像24的一例、和表示標準模板中的米樣點數(shù)的加權(quán)的米樣掩碼602的一例。
[0076]被分割的各個框(部分區(qū)域)的亮度表示各個框中的采樣點的數(shù)量的權(quán)重。例如，黑色框的權(quán)重為0，斜線陰影的框的權(quán)重為I，白色框的權(quán)重為2。例如，特征部位(例如眼、眉、鼻、口等)的權(quán)重值大，除此以外的部分的權(quán)重小。
[0077]圖像采樣部401從權(quán)重值大的框中選擇大量采樣點。也就是說，權(quán)重值大的框的采樣數(shù)大于權(quán)重值小的框的采樣數(shù)。同一權(quán)重的框的采樣數(shù)可以相同，也可以不同。在各框內(nèi)，可以選擇隨機的坐標的像素。
[0078]接著，控制點設(shè)定部402在被輸入的面部圖像22上配置控制點(S303和S304)。生成控制點移動量信息403，并向坐標幾何變換部404輸出?？刂泣c移動量信息403表示相距各控制點的初始位置的移動量。
[0079]控制點的初始位置可以配置為格子狀。為了提高非剛性變形的精度和速度，控制點設(shè)定部402可以在標準模板面部圖像24和面部圖像22中提取對應(yīng)的特征點對，并使用所得到的特征點對的位置信息來決定各控制點的初始位置?？梢詮拿娌康奶卣鞑课?例如眼、眉、鼻、口等)的位置檢測特征點。例如，控制點設(shè)定部402確定與標準模板面部圖像24的預定特征點(像素)對應(yīng)的面部圖像22的特征點，將該特征點(像素)定義為控制點。
[0080]坐標幾何變換部404取得標準模板面部圖像24的采樣點的坐標、和面部圖像22。此夕卜，坐標幾何變換部404取得控制點移動量信息403。坐標幾何變換部404使用控制點移動量信息403，對標準模板面部圖像24的采樣點的坐標實施坐標變換(S305)。
[0081]在步驟S305的坐標變換中，計算與標準模板面部圖像24的各采樣點的坐標對應(yīng)的、變形前的面部圖像22上的點的坐標。也就是說，計算通過面部圖像22的變形而移動到采樣點的坐標處的、變形前的面部圖像22的坐標。變形前的面部圖像22的這些坐標是面部圖像22中的對應(yīng)采樣點的坐標。
[0082]坐標幾何變換部404例如對某采樣點的坐標，根據(jù)其周圍的控制點的坐標，使用公知的B-sp I ine函數(shù)進行坐標的插補，計算變形前的面部圖像22中的對應(yīng)采樣點的坐標。
[0083]例如，坐標幾何變換部404通過插補運算，計算變形前的面部圖像22中的采樣點的移動目的地的坐標。坐標幾何變換部404計算由采樣點的移動前的坐標和移動目的地的坐標規(guī)定的向量的逆向量。在采樣點的移動前的坐標上加上逆向量，計算變形前的面部圖像22的對應(yīng)采樣點的坐標。
[0084]對應(yīng)采樣點的坐標不一定與像素的坐標一致。因此，坐標幾何變換部404針對面部圖像22的各對應(yīng)采樣點(標準模板面部圖像24的各采樣點所對應(yīng)的點)，例如通過線性插補運算，計算各對應(yīng)采樣點的亮度值(各對應(yīng)采樣點的數(shù)據(jù))(S306)。
[0085]通過以上步驟，求出伴隨著控制點的移動而移動的面部圖像22的對應(yīng)采樣點的坐標(對應(yīng)采樣點)、以及該坐標(對應(yīng)采樣點)的亮度值。即，在該坐標幾何變換部404中進行伴隨控制點的移動的浮動圖像22的變形。
[0086]圖像類似度計算部405取得標準模板面部圖像24的采樣點的數(shù)據(jù)(采樣數(shù)據(jù))、和幾何變換后的面部圖像22的對應(yīng)采樣點的數(shù)據(jù)(步驟S306中生成的數(shù)據(jù))。圖像類似度計算部405對這些采樣點中的亮度值應(yīng)用預定的評價函數(shù)來計算標準模板面部圖像24和變形后的面部圖像22之間的圖像類似度(S307)。作為基于預定的評價函數(shù)的圖像類似度，可以使用公知的殘差平方和、歸一化互相關(guān)函數(shù)、互信息量等?；バ畔⒘渴潜硎驹谝环綀D像中能夠以多大程度表現(xiàn)另一方圖像的指標。
[0087]圖像類似度最大化部406取得圖像類似度計算部405所計算出的、標準模板面部圖像24和面部圖像22之間的圖像類似度。圖像類似度最大化部406為了求出標準模板面部圖像24和面部圖像22之間的圖像類似度成為最大(或極大)的各控制點的移動量，實施收斂計算(S308)。
[0088]在步驟S308中圖像類似度未收斂的情況下，為了得到更高的圖像類似度，圖像類似度最大化部406對控制點移動量信息403進行更新(S309)。然后，使用更新后的控制點移動量信息403，重新實施步驟S305?S308。
[0089]為了進行控制點移動量信息403的更新，圖像類似度最大化部406通過多變量函數(shù)來計算圖像類似度。各變量是各控制點的移動量。圖像類似度最大化部406通過迭代法求出使該函數(shù)最大化的各控制點的最佳移動量。作為迭代法，例如可以使用L-BFGS法(Limited-memory Broyden-Fletcher-Goldfarb-Shanno(有限記憶BFGS法))。圖像類似度最大化部406可以預先保持控制點的移動量的多個模式，并按照這些模式對控制部移動量信息403依次進行更新。
[0090]另一方面，在步驟S308中在圖像類似度發(fā)生了收斂的情況下，圖像類似度最大化部406將該控制點移動量信息403輸出給面部圖像變形部407。
[0091]面部圖像變形部407取得面部圖像22和控制點移動量信息403。面部圖像變形部407對面部圖像22的全部像素，根據(jù)控制點移動量信息403，通過與步驟S305同樣的插補運算來計算各像素的坐標。接著，面部圖像變形部407通過與步驟S306同樣的插補運算，計算在移動了全部像素后的圖像中各像素的移動前的坐標的亮度，并生成已變形面部圖像16(S310)。
[0092]〈面部圖像記錄部〉
[0093]面部登錄裝置I中的面部圖像記錄部18取得從由攝像機121在預定時間內(nèi)連續(xù)拍攝而得的同一登錄用戶的多個登錄用圖像10而分別生成的已變形面部圖像16。計算這些多個已變形面部圖像16的每一個與標準模板面部圖像24之間的圖像類似度。面部圖像記錄部18能夠通過與圖像類似度計算部405同樣的方法來計算類似度，并能夠使用公知的互信息量作為圖像類似度。
[0094]接著，面部圖像記錄部18從這些已變形面部圖像16中，按照與標準模板面部圖像24的類似度從高到低的順序選擇預定張數(shù)的已變形面部圖像16(S105)，作為用戶的登錄面部圖像記錄到登錄用戶數(shù)據(jù)庫20中(S106)。此外，從選擇出的登錄面部圖像中提取圖像特征量，并記錄到登錄用戶數(shù)據(jù)庫20中。
[0095]作為圖像特征量，可以使用公知的Linear Binary Patterns(線性二值模式)(LBP)特征量。通過從多個攝像圖像生成多個已變形面部圖像16，能夠選擇適合于登錄面部圖像的面部圖像。通過準備多個登錄面部圖像，能夠在認證處理中選擇更合適的登錄面部圖像。
[0096]〈面部圖像對照部〉
[0097]面部認證裝置2中的面部圖像對照部19取得已變形面部圖像17(認證對象面部圖像)，并從面部圖像服務(wù)器241取得由登錄用戶數(shù)據(jù)庫20存儲的信息(登錄面部圖像和特征量)，面部圖像對照部19進行已變形面部圖像17的面部圖像對照處理，判定該用戶是否是已登錄的用戶(S206)，并輸出認證結(jié)果21(S207)。
[0098]更加具體地進行說明。如上述，面部認證裝置2中的面部圖像變形部14具有與面部圖像變形部15同樣的結(jié)構(gòu)，并通過同樣的方法，使認證用的面部圖像23變形而生成已變形面部圖像17。采樣點、控制點初始位置的坐標在面部圖像變形部14、15中是相同的。面部圖像變形部14也可以通過與面部圖像變形部15不同的方法使面部圖像變形。例如，可以不選擇采樣點，而將全部像素進行比較。
[0099]登錄用戶數(shù)據(jù)庫20存儲有多個用戶各自的多個登錄面部圖像。面部圖像對照部19在已變形面部圖像17和每一個登錄面部圖像之間進行面部圖像對照處理。
[0100]面部圖像對照部19例如從已變形面部圖像17中提取出圖像特征量，并計算其與記錄在登錄用戶數(shù)據(jù)庫20中的多個登錄面部圖像的各自的特征量的類似度。面部圖像對照部19將該類似度與預定的閾值進行比較，求出對照結(jié)果。面部圖像對照部19將類似度為閾值以上登錄面部圖像和類似度包含在認證結(jié)果21中。
[0101]如上述，作為特征量，例如能夠使用LBP特征量。作為LBP特征量的類似度，例如能夠使用公知的Ch1-Square距離(卡方距離)。登錄用戶數(shù)據(jù)庫存儲了包含登錄用戶的識別信息的個人信息，面部圖像對照部19也可以在對照結(jié)果中包含選擇出的登錄面部圖像的登錄用戶的個人信息。
[0102]〈總結(jié)〉
[0103]根據(jù)本實施方式，參照標準模板面部圖像，對登錄用面部圖像和認證用面部圖像的每一個進行非線性變形。由此，能夠降低面部圖像認證中的用戶的面部朝向或表情的變動的影響，即使在登錄時和認證時用戶未有意識地面向攝像機，也能夠進行高精度的面部認證。
[0104](實施方式2)
[0105]〈概要〉
[0106]本實施方式的面部認證裝置2從認證對象面部圖像中提取圖像特征量，計算與登錄圖像的圖像特征量之間的距離，并確定與認證對象對應(yīng)的登錄用戶候補的登錄對象面部圖像。參照所得到的登錄對象面部圖像，對認證對象面部圖像進行非線性變形。使用所得到的已變形的認證對象面部圖像，再次提取出圖像特征量，計算其與登錄用戶圖像特征量之間的距離，并輸出面部認證結(jié)果。
[0107]〈結(jié)構(gòu)和動作〉
[0108]圖9是表示實施方式2的面部圖像對照部19的邏輯結(jié)構(gòu)的框圖。本實施方式的面部圖像對照部19具備類似度計算部901、面部圖像變形部903。在圖9中，已變形面部圖像17是在面部認證裝置2中通過面部圖像變形部14而生成的認證對象的面部圖像。登錄用戶數(shù)據(jù)庫20存儲了通過面部登錄裝置I而記錄的登錄用戶的面部圖像和面部圖像的特征量。
[0109]接著，根據(jù)圖1和圖9的框圖、圖7和圖8的流程圖來說明本實施方式的動作。類似度計算部901取得從認證用圖像而得到的已變形面部圖像17，作為認證對象面部圖像(S701)，提取LBP特征量作為圖像特征量(S702)。接著，類似度計算部901取得登錄用戶數(shù)據(jù)庫20所存儲的信息，計算認證對象面部圖像17的LBP特征量和登錄用戶數(shù)據(jù)庫20中記錄的各登錄面部圖像的LBP特征量的類似度(S704)。
[0110]類似度計算部901根據(jù)得到的圖像類似度，選擇與認證對象對應(yīng)的(與認證對象面部圖像的類似度最接近)的一個或多個登錄用戶的登錄面部圖像902(S705)，并輸出給面部圖像變形部903。
[0111]面部圖像變形部903參照確定出的登錄面部圖像902，使認證對象面部圖像17進行變形(S706)?；诿娌繄D像變形部903的認證對象面部圖像變形(S706)的方法可以與上述實施方式I相同。
[0112]類似度計算部901使用所得到的已變形的認證對象面部圖像和確定出的登錄面部圖像，與步驟S704同樣地，重新提取已變形認證對象面部圖像和確定出的登錄面部圖像中的每一個的LBP特征量圖像特征量，計算所得的特征量的類似度(S707)，判定該用戶是否是登錄用戶本人，并作為認證結(jié)果21而輸出(S708)。
[0113]圖8表示該認證對象面部圖像的變形處理流程。面部圖像變形部903取得在步驟S705中確定出的登錄面部圖像902(S801)，與上述步驟S302同樣地，生成圖像采樣點數(shù)據(jù)(S802)。面部圖像變形部903取得已變形面部圖像17作為認證對象面部圖像(S803)，并與步驟S304同樣地，設(shè)定變形用控制點的初始位置(S804)。
[0114]接著，面部圖像變形部903對認證對象面部圖像17實施與步驟305同樣的坐標幾何變換處理(S805)，并如步驟S306那樣計算變形后的認證對象面部圖像17的各對應(yīng)采樣點(與登錄面部圖像902的各采樣點對應(yīng)的采樣點)的亮度值(S806)。
[0115]面部圖像變形部903與步驟S307同樣地，針對采樣點的亮度值應(yīng)用預定的評價函數(shù)，運算登錄面部圖像902與變形后的認證對象面部圖像17之間的圖像類似度(S807)。
[0116]接著，面部圖像變形部903與步驟S308同樣地，為了求出登錄面部圖像902與變形后的認證對象面部圖像17之間的圖像類似度成為最大(或極大)的各控制點的移動量，實施收斂計算(S808)。
[0117]在步驟S808中圖像類似度未收斂的情況下，面部圖像變形部903與步驟S309同樣地，為了得到更高的圖像類似度，對控制點移動量信息進行更新(S809)。然后，重新實施步驟S805?S808。
[0118]另一方面，在步驟S808中圖像類似度發(fā)生了收斂的情況下，與步驟S310同樣地，面部圖像變形部903使用求出的控制點移動量信息來對認證對象面部圖像17進行變形，生成其已變形圖像(S810)。
[0119]〈總結(jié)〉
[0120]如以上那樣，實施方式2的面部認證裝置取得認證對象面部圖像，確定與認證對象對應(yīng)的登錄用戶候補的登錄面部圖像。以所得到的登錄面部圖像作為參照圖像，實施認證對象面部圖像的非剛性變形。使用所得到的已變形的認證對象面部圖像，重新實施與對應(yīng)于認證對象的登錄用戶候補的登錄面部圖像的對照，并輸出面部認證結(jié)果。由此，在認證對象和登錄對象為同一人物的情況下，已變形的認證對象面部圖像與登錄面部圖像之間的圖像類似度升高，并能夠進一步提高面部認證的精度。
[0121]〈應(yīng)用例〉
[0122]接著，使用圖10至圖12說明應(yīng)用于面部圖像的情況下的應(yīng)用例。圖10表示了標準模板面部圖像24、變形前的登錄用面部圖像即面部圖像22、以及面部圖像22的已變形面部圖像16的一例。在標準模板面部圖像24上配置有格子狀的控制點。針對面部圖像22實施步驟S301?步驟S310的變形處理。將控制點配置在變形處理的收斂后的位置。
[0123]在開始變形處理之前，在初始位置(格子位置)配置控制點。在標準模板面部圖像24上示出的控制點被配置在初始位置。面部圖像22上示出的控制點被配置在變形處理的收斂后的位置。使用控制點的收斂后的位置與初始位置來求出控制點移動向量。根據(jù)移動向量，計算面部圖像22的各個像素的移動目的地。通過插補處理來計算在各個像素的移動目的地的位置的亮度值，將所得的亮度值設(shè)定給各個像素的初始位置。當計算全部像素的亮度值時，得到已變形圖像16。
[0124]圖11表示標準模板面部圖像24、變形前的認證用面部圖像即面部圖像23、以及面部圖像23的已變形面部圖像17的一例。在標準模板面部圖像24上配置有格子狀控制點。針對面部圖像23實施步驟S301?步驟S310的變形處理。在圖11中，將變形前面部圖像22上的控制點配置在變形處理的收斂后的位置。
[0125]圖12表示了已變形面部圖像16、即通過步驟S705確定出的登錄用戶數(shù)據(jù)庫20中記錄的登錄面部圖像902的一例。圖12還表示了已變形面部圖像17即認證對象面部圖像、和認證對象面部圖像的已變形面部圖像(已變形的認證對象面部圖像)907的一例。
[0126]針對認證對象面部圖像(已變形面部圖像17)實施步驟S706(即步驟S801?步驟S810)的變形處理，生成已變形認證對象面部圖像907?？刂泣c被配置在變形處理的收斂后的位置。登錄面部圖像902和已變形認證對象面部圖像907被輸入到類似度計算部901中，通過步驟S707的處理而求出認證結(jié)果。
[0127](實施方式3)
[0128]〈概要〉
[0129]本發(fā)明實施方式3的系統(tǒng)使用實施方式I或?qū)嵤┓绞?的面部認證系統(tǒng)100，對利用房屋或設(shè)施的用戶實施進出管理、服務(wù)提供等。用戶在入場前實施ID認證而入場。在入場時，面部登錄裝置取得用戶的面部圖像而記錄到登錄用戶數(shù)據(jù)庫中。使用面部認證裝置來進行用戶入場后的進出管理、設(shè)施內(nèi)的服務(wù)提供等。
[0130]〈結(jié)構(gòu)和動作〉
[0131]圖13是表示本實施方式的邏輯結(jié)構(gòu)的框圖。本實施方式具備:面部認證系統(tǒng)100、ID認證裝置102、門控制裝置103、管理服務(wù)器104、門控制裝置1005、信息提示控制裝置106、攝像機107、攝像機108、攝像機109、門110、門111以及信息提示裝置1012。
[0132]針對本實施方式的使用生物體認證的進出管理、服務(wù)提供系統(tǒng)，以應(yīng)用于機場的登機、信息提示服務(wù)為代表性例子進行說明。
[0133]接著，根據(jù)圖13的框圖說明本實施方式的動作。管理服務(wù)器104與面部認證系統(tǒng)100、ID認證裝置102、門控制裝置103、門控制裝置105以及信息提示控制裝置106連接，實施登錄用戶數(shù)據(jù)庫的記錄、用戶的認證結(jié)果的日志的記錄、以及面部登錄/面部認證裝置、ID認證裝置、門控制裝置、信息提示控制裝置的管理等。
[0134]ID認證裝置102作為機場的簽到裝置對搭乘者進行認證，代替車票而發(fā)行搭乘者的認證ID，并發(fā)送管理服務(wù)器104。管理服務(wù)器104記錄搭乘者的認證ID，向門控制裝置103發(fā)送門解鎖的控制信號。門控制裝置1003取得解鎖的控制信號，使門110解鎖而使搭乘者進入到機場中。
[0135]作為ID認證的手段，還可以使用高精度的生物體認證，例如手指靜脈認證。例如，航空公司事前登錄搭乘者的個人信息、航班信息、以及手指靜脈生物體信息。然后，搭乘者使用ID認證裝置102來實施手指靜脈認證，并進入機場。作為生物體信息的形式，除了手指靜脈之外，例如還可以使用指紋、虹膜、手掌、聲音等。此外，ID認證裝置102可以不使用生物體認證，而使用搭乘者進行的個人識別號碼的輸入。
[0136]當搭乘者被所述ID認證裝置102認證出時，管理服務(wù)器104從ID認證裝置102取得搭乘者的認證ID并進行記錄。接著，管理服務(wù)器104向面部認證系統(tǒng)100發(fā)送控制信號以便登錄搭乘者的面部圖像。面部認證系統(tǒng)100接受管理服務(wù)器104的控制信號，啟動攝像機107，對搭乘者的面部圖像進行拍攝而作為登錄用圖像。
[0137]面部認證系統(tǒng)100針對所得到的登錄用圖像，實施前述說明的步驟SlOl?步驟S107的處理，將搭乘者的變形后的面部圖像和面部圖像特征量發(fā)送給管理服務(wù)器。管理服務(wù)器104取得搭乘者的登錄面部圖像和面部圖像特征量，并將其與搭乘者的認證ID相對應(yīng)地記錄到登錄用戶數(shù)據(jù)庫中。
[0138]面部認證系統(tǒng)100始終取得設(shè)置在機場中的信息提示裝置112附近的攝像機108的攝像圖像。面部認證系統(tǒng)100實施步驟S201?S207的面部認證處理，對接近信息提示裝置112前方的搭乘者進行認證，并通知給管理服務(wù)器104。管理服務(wù)器104保存搭乘者的認證記錄，并向信息提示控制裝置106發(fā)送控制信號和面向搭乘者本人的電子信息。信息提示控制裝置106取得控制信號和面向搭乘者本人的電子信息，對信息提示裝置1012進行控制，并使其向搭乘者提示。
[0139]面部認證系統(tǒng)100取得設(shè)置在登機門111附近的攝像機109的攝像圖像，并在搭乘者要搭乘飛機時即離開機場設(shè)施時，實施步驟S201?S207的面部認證處理。在認證對象為搭乘者本人的情況下，面部認證系統(tǒng)100向管理服務(wù)器104發(fā)送該認證結(jié)果。管理服務(wù)器104保存搭乘者的認證記錄，向門控制裝置105發(fā)送控制信號。門控制裝置105接受控制信號，使門111解鎖，使搭乘者搭乘。
[0140]〈總結(jié)〉
[0141]如以上那樣，在本實施方式中，使用實施方式I或?qū)嵤┓绞?的面部認證系統(tǒng)100，對利用房屋或設(shè)施的用戶實施進出管理、服務(wù)提供等。在ID認證裝置對入場前的用戶進行了認證后，面部登錄裝置取得用戶的面部圖像而記錄到登錄用戶數(shù)據(jù)庫中。通過面部認證裝置來實施用戶入場后的進出管理、在設(shè)施內(nèi)的服務(wù)提供等。由此，即使是在安全級別高的設(shè)施中，也能夠?qū)崿F(xiàn)對利用者低負擔、且高精度的面部認證。
[0142]此外，本發(fā)明不限于上述實施方式，而包含各種變形例。例如，上述實施方式是為了使本發(fā)明易于理解而進行了詳細說明，不必限定為包含所說明的全部結(jié)構(gòu)。此外，可以將某實施方式的結(jié)構(gòu)的一部分置換為另一實施方式的結(jié)構(gòu)，并且可以在某實施方式的結(jié)構(gòu)的基礎(chǔ)上追加其他實施方式的結(jié)構(gòu)。此外，可以針對各實施方式的結(jié)構(gòu)的一部分進行其他結(jié)構(gòu)的追加、刪除、置換。
[0143]此外，上述各結(jié)構(gòu)、功能、處理部等的一部分或全部，可以通過以例如集成電路設(shè)計等以硬件而實現(xiàn)。此外，可以通過處理器對用于實現(xiàn)各個功能的程序進行解釋、執(zhí)行而以軟件實現(xiàn)上述各結(jié)構(gòu)、功能等。可以將實現(xiàn)各功能的程序、表格、文件等信息置于存儲器、硬盤、SSD (固態(tài)驅(qū)動器)等記錄裝置、或IC卡、SD卡等記錄介質(zhì)中。
【主權(quán)項】
1.一種面部認證系統(tǒng)，其特征在于，具備: 第一面部區(qū)域檢測部，其從由攝像機拍攝到的第一攝像圖像中檢測第一面部圖像； 第一變形部，其使用模板面部圖像來對所述第一面部圖像非線性地進行變形； 面部圖像記錄部，其記錄變形后的所述第一面部圖像作為登錄面部圖像； 第二面部區(qū)域檢測部，其從由攝像機拍攝到的第二攝像圖像中檢測第二面部圖像； 第二變形部，其使用所述模板面部圖像來對所述第二面部圖像非線性地進行變形；以及 面部圖像對照部，其將變形后的所述第二面部圖像和所述登錄面部圖像進行對照。2.根據(jù)權(quán)利要求1所述的面部認證系統(tǒng)，其特征在于， 所述第一變形部進行如下處理: 從所述模板面部圖像中提取采樣點， 提取與所述模板面部圖像中的采樣點相對應(yīng)的、變形后的所述第一面部圖像中的采樣點， 使用從所述模板面部圖像提取出的采樣點和從所述第一面部圖像提取出的采樣點，計算所述模板面部圖像和變形后的所述第一面部圖像之間的類似度， 根據(jù)所述類似度，對所述第一面部圖像進行再變形。3.根據(jù)權(quán)利要求1所述的面部認證系統(tǒng)，其特征在于， 所述第二變形部進行如下處理: 提取與所述模板面部圖像中的采樣點相對應(yīng)的、變形后的所述第二面部圖像中的采樣點， 使用從所述模板面部圖像提取出的采樣點和從所述第二面部圖像提取出的采樣點，計算所述模板面部圖像和變形后的所述第二面部圖像之間的類似度， 根據(jù)所述類似度，對所述第二面部圖像進行變形。4.根據(jù)權(quán)利要求2所述的面部認證系統(tǒng)，其特征在于， 所述第一變形部為了對所述第一面部圖像進行變形，對所述第一面部圖像設(shè)置控制點，并移動所述第一面部圖像中的控制點的位置，由此來使所述第一面部圖像變形。5.根據(jù)權(quán)利要求3所述的面部認證系統(tǒng)，其特征在于， 所述第一變形部和所述第二變形部將所述模板面部圖像的面部區(qū)域分割為多個部分，根據(jù)對所述多個部分的各個部分分配的權(quán)重，來決定從所述多個部分的各個部分提取的采樣數(shù)。6.根據(jù)權(quán)利要求1所述的面部認證系統(tǒng)，其特征在于， 所述面部圖像記錄部記錄從同一人物的多個第一攝像圖像取得的多個變形后的第一面部圖像，作為登錄面部圖像。7.根據(jù)權(quán)利要求1所述的面部認證系統(tǒng)，其特征在于， 所述模板面部圖像是將多個不同的面部圖像合成而生成的面部圖像。8.根據(jù)權(quán)利要求1所述的面部認證系統(tǒng)，其特征在于， 所述第二變形部使用所述登錄面部圖像，對使用所述模板面部圖像而變形后的所述第二面部圖像非線性地進行變形， 所述面部圖像對照部將使用所述登錄面部圖像變形后的所述第二面部圖像和所述登錄面部圖像進行對照。9.一種面部認證方法，其特征在于，包含以下步驟: 從由攝像機拍攝到的第一攝像圖像中檢測第一面部圖像的步驟； 使用模板面部圖像來對所述第一面部圖像非線性地進行變形的步驟； 記錄變形后的所述第一面部圖像作為登錄面部圖像的步驟； 從由攝像機拍攝到的第二攝像圖像中檢測第二面部圖像的步驟； 使用所述模板面部圖像來對所述第二面部圖像非線性地進行變形的步驟；以及 將變形后的所述第二面部圖像和所述登錄面部圖像進行對照的步驟。10.根據(jù)權(quán)利要求9所述的面部認證方法，其特征在于， 在對所述第一面部圖像進行變形的步驟中，包含如下處理: 從所述模板面部圖像中提取采樣點， 提取與所述模板面部圖像中的采樣點相對應(yīng)的、變形后的所述第一面部圖像中的采樣點， 使用從所述模板面部圖像提取出的采樣點和從變形后的所述第一面部圖像提取出的采樣點，計算所述模板面部圖像和變形后的所述第一面部圖像之間的類似度， 根據(jù)所述類似度，對所述第一面部圖像進行再變形， 在對所述第二面部圖像進行變形的步驟中，包含如下處理: 從所述模板面部圖像中提取采樣點， 提取與所述模板面部圖像中的采樣點相對應(yīng)的、變形后的所述第二面部圖像中的采樣點， 使用從所述模板面部圖像提取出的采樣點和從變形后的所述第二面部圖像提取出的采樣點，計算所述模板面部圖像和變形后的所述第二面部圖像之間的類似度， 根據(jù)所述類似度，對所述第二面部圖像進行再變形。11.根據(jù)權(quán)利要求10所述的面部認證方法，其特征在于， 在對所述第一面部圖像進行變形的步驟中，為了對所述第一面部圖像進行變形，對所述第一面部圖像設(shè)置控制點，并移動所述第一面部圖像中的控制點的位置，由此來使所述第一面部圖像變形； 在對所述第二面部圖像進行變形的步驟中，為了對所述第二面部圖像進行變形，對所述第二面部圖像設(shè)置控制點，并移動所述第二面部圖像中的控制點的位置，由此來使所述第二面部圖像變形。12.根據(jù)權(quán)利要求10所述的面部認證方法，其特征在于， 在對所述第一面部圖像進行變形的步驟和對所述第二面部圖像進行變形的步驟中，將所述模板面部圖像的面部區(qū)域分割為多個部分，根據(jù)對所述多個部分的各個部分分配的權(quán)重，來決定從所述多個部分的各個部分提取的采樣數(shù)。13.根據(jù)權(quán)利要求9所述的面部認證方法，其特征在于， 記錄從同一人物的多個第一攝像圖像取得的多個變形后的第一面部圖像，作為登錄面部圖像。14.根據(jù)權(quán)利要求9所述的面部認證方法，其特征在于， 在對所述第二面部圖像進行變形的步驟中，使用所述登錄面部圖像，對所述第二面部圖像非線性地進行變形， 在所述進行對照的步驟中，將使用所述登錄面部圖像變形后的所述第二面部圖像和所述登錄面部圖像進行對照。15.—種對利用設(shè)施的用戶實施進出管理和服務(wù)提供的系統(tǒng)，其特征在于， 具備: ID認證裝置，其在用戶入場前實施ID認證處理； 權(quán)利要求1所述的面部認證系統(tǒng)； 入場門，其在基于所述面部認證系統(tǒng)的面部登錄之后使用戶入場； 信息提供裝置，其對入場后的所述用戶進行認證，并向所述用戶提供信息；以及 退場管理裝置，其使用基于所述面部認證系統(tǒng)的所述用戶的認證來實施退場管理。
【文檔編號】G06T7/00GK106030654SQ201480076517
【公開日】2016年10月12日
【申請日】2014年2月26日
【發(fā)明人】黎子盛, 栗原恒彌, 清水春美, 影廣達彥
【申請人】株式會社日立制作所