檢測(cè)人員使用手持裝置的方法及裝置的制造方法
【專利摘要】本發(fā)明提供一種檢測(cè)人員使用手持裝置的方法及裝置。此裝置包括圖像獲取單元、存儲(chǔ)單元以及處理單元。圖像獲取單元獲取人員的圖像序列。存儲(chǔ)單元存儲(chǔ)圖像序列以及預(yù)設(shè)嘴部信息。處理單元耦接至存儲(chǔ)單元以取得圖像序列。處理單元分析圖像序列的每一個(gè)圖像，以獲得臉部目標(biāo)。處理單元依據(jù)臉部目標(biāo)決定耳側(cè)位置區(qū)域以及嘴部位置區(qū)域。處理單元在圖像序列的每一個(gè)圖像，檢測(cè)目標(biāo)物體，以計(jì)算目標(biāo)物體的移動(dòng)軌跡。在處理單元檢測(cè)到移動(dòng)軌跡為目標(biāo)物體朝向耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，來判斷人員是否正在使用手持裝置。
【專利說明】
檢測(cè)人員使用手持裝置的方法及裝置
技術(shù)領(lǐng)域
[0001]本發(fā)明是有關(guān)于一種圖像識(shí)別技術(shù)，且特別是有關(guān)于一種利用圖像識(shí)別技術(shù)來檢測(cè)人員使用手持裝置的方法及裝置。
【背景技術(shù)】
[0002]隨著移動(dòng)通信等技術(shù)的快速發(fā)展，人們可使用諸如功能型手機(jī)(feature phone)或智能手機(jī)(smart phone)等類型的手持裝置來進(jìn)行通話、傳信息甚至是網(wǎng)際網(wǎng)絡(luò)(Internet)瀏覽。此外，隨著半導(dǎo)體制作工藝、材料、機(jī)構(gòu)設(shè)計(jì)等技術(shù)的進(jìn)步，手持裝置逐漸具備符合輕薄設(shè)計(jì)以方便手持操作。因此，手持裝置所帶來的方便性，使得人們的生活逐漸無法脫離手持裝置。
[0003]另一方面，隨著交通運(yùn)輸?shù)陌l(fā)達(dá)，促進(jìn)了地方的發(fā)展，但是人為駕駛交通工具不當(dāng)所造成的交通事故，儼然成為危害社會(huì)安全的主要因素。然而，人們時(shí)常會(huì)在駕駛交通工具同時(shí)還使用手持裝置，此時(shí)，人們往往會(huì)因?yàn)樽⒁饬Ψ稚⒌纫蛩?，而?dǎo)致交通意外發(fā)生。因此，如何有效且即時(shí)地監(jiān)控駕駛行為或其他不適合使用手持裝置的情況，以避免意外發(fā)生，將會(huì)是此領(lǐng)域中亟需解決的問題。

【發(fā)明內(nèi)容】

[0004]本發(fā)明提供一種檢測(cè)人員使用手持裝置的方法及裝置，其可通過圖像識(shí)別技術(shù)來判斷手持裝置的移動(dòng)軌跡以及人員的嘴部動(dòng)作，以準(zhǔn)確且快速地判斷人員是否使用手持裝置。
[0005]本發(fā)明提供一種檢測(cè)人員使用手持裝置的方法，適用于電子裝置，此方法包括下列步驟。獲取人員的圖像序列。分析圖像序列的每一個(gè)圖像，以獲得臉部目標(biāo)。依據(jù)臉部目標(biāo)來決定耳側(cè)位置區(qū)域以及嘴部位置區(qū)域。在圖像序列的每一個(gè)圖像，檢測(cè)目標(biāo)物體，以計(jì)算目標(biāo)物體的移動(dòng)軌跡。在檢測(cè)到移動(dòng)軌跡為目標(biāo)物體朝向耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，來判斷人員是否正在使用手持裝置。
[0006]在本發(fā)明的一實(shí)施例中，上述在圖像序列的每一個(gè)圖像，檢測(cè)目標(biāo)物體，以計(jì)算目標(biāo)物體的移動(dòng)軌跡包括下列步驟。計(jì)算目標(biāo)物體的垂直投影量與水平投影量，以獲得目標(biāo)物體的尺寸范圍。在尺寸范圍內(nèi)取基準(zhǔn)點(diǎn)。通過圖像序列的每一個(gè)圖像中的基準(zhǔn)點(diǎn)的位置，獲得移動(dòng)軌跡。
[0007]在本發(fā)明的一實(shí)施例中，上述依據(jù)臉部目標(biāo)決定耳側(cè)位置區(qū)域以及嘴部位置區(qū)域包括下列步驟。通過人臉檢測(cè)算法獲得臉部目標(biāo)。在臉部目標(biāo)中搜索鼻孔目標(biāo)?；诒强啄繕?biāo)的位置，往水平方向搜索耳側(cè)位置區(qū)域。由鼻孔目標(biāo)中識(shí)別出鼻孔定位點(diǎn)?；诒强锥ㄎ稽c(diǎn)設(shè)定嘴部區(qū)域。對(duì)嘴部區(qū)域的圖像進(jìn)行圖像處理以判斷人員的嘴部目標(biāo)。依據(jù)嘴部目標(biāo)在嘴部區(qū)域決定嘴部位置區(qū)域。
[0008]在本發(fā)明的一實(shí)施例中，上述在檢測(cè)到移動(dòng)軌跡為目標(biāo)物體朝向耳側(cè)位置區(qū)域移動(dòng)包括下列步驟。依據(jù)耳側(cè)位置區(qū)域獲得興趣區(qū)域。將圖像序列中的當(dāng)前圖像與參考圖像兩者各自的興趣區(qū)域，執(zhí)行圖像相減算法，以獲得目標(biāo)區(qū)域圖像。通過參考圖像的興趣區(qū)±或，濾除目標(biāo)區(qū)域圖像的噪聲，以獲得目標(biāo)物體。
[0009]在本發(fā)明的一實(shí)施例中，上述在檢測(cè)到移動(dòng)軌跡為目標(biāo)物體朝向耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，來判斷人員是否正在使用手持裝置包括下列步驟。取得嘴部圖像，且依據(jù)嘴部圖像取得嘴部特征。依據(jù)嘴部特征來判斷嘴部圖像為張開動(dòng)作圖像或閉合動(dòng)作圖像。在嘴部記錄時(shí)間內(nèi)，依序記錄嘴部位置區(qū)域中所檢測(cè)到的所有閉合動(dòng)作圖像或張開動(dòng)作圖像并轉(zhuǎn)換成編碼序列。將編碼序列存入嘴部動(dòng)作信息。
[0010]在本發(fā)明的一實(shí)施例中，上述在檢測(cè)到移動(dòng)軌跡為目標(biāo)物體朝向耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，來判斷人員是否正在使用手持裝置包括下列步驟。在嘴部比對(duì)時(shí)間內(nèi)，將嘴部位置區(qū)域的圖像與樣板圖像進(jìn)行比對(duì)，以產(chǎn)生嘴型編碼。將嘴型編碼存入編碼序列中。將編碼序列存入嘴部動(dòng)作信息。
[0011]本發(fā)明提供一種檢測(cè)人員使用手持裝置的裝置，此裝置包括圖像獲取單元、存儲(chǔ)單元以及處理單元。圖像獲取單元獲取人員的圖像序列。存儲(chǔ)單元存儲(chǔ)圖像序列以及預(yù)設(shè)嘴部信息。處理單元耦接至存儲(chǔ)單元以取得圖像序列。處理單元分析圖像序列的每一個(gè)圖像，以獲得臉部目標(biāo)。處理單元依據(jù)臉部目標(biāo)決定耳側(cè)位置區(qū)域以及嘴部位置區(qū)域。在圖像序列的每一個(gè)圖像，檢測(cè)目標(biāo)物體，以計(jì)算目標(biāo)物體的移動(dòng)軌跡。在處理單元檢測(cè)到移動(dòng)軌跡為目標(biāo)物體朝向耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，來判斷人員是否正在使用手持裝置。
[0012]在本發(fā)明的一實(shí)施例中，上述的處理單元計(jì)算目標(biāo)物體的垂直投影量與水平投影量，以獲得目標(biāo)物體的尺寸范圍，在尺寸范圍內(nèi)取基準(zhǔn)點(diǎn)，且通過圖像序列的每一個(gè)圖像中的基準(zhǔn)點(diǎn)的位置，獲得移動(dòng)軌跡。
[0013]在本發(fā)明的一實(shí)施例中，上述的處理單元通過人臉檢測(cè)算法獲得臉部目標(biāo)，在臉部目標(biāo)中搜索鼻孔目標(biāo)，且基于鼻孔目標(biāo)的位置，往水平方向搜索耳側(cè)位置區(qū)域。處理單元由鼻孔目標(biāo)中識(shí)別出鼻孔定位點(diǎn)，基于鼻孔定位點(diǎn)設(shè)定嘴部區(qū)域，對(duì)嘴部區(qū)域的圖像進(jìn)行圖像處理以判斷人員的嘴部目標(biāo)，且依據(jù)嘴部目標(biāo)在嘴部區(qū)域決定嘴部位置區(qū)域。
[0014]在本發(fā)明的一實(shí)施例中，上述的處理單元依據(jù)耳側(cè)位置區(qū)域獲得興趣區(qū)域，將圖像序列中的當(dāng)前圖像與參考圖像兩者各自的興趣區(qū)域，執(zhí)行圖像相減算法，以獲得目標(biāo)區(qū)域圖像。處理單元通過參考圖像的興趣區(qū)域，濾除目標(biāo)區(qū)域圖像的噪聲，以獲得目標(biāo)物體。
[0015]在本發(fā)明的一實(shí)施例中，上述的處理單元取得嘴部圖像，且依據(jù)嘴部圖像取得嘴部特征，依據(jù)嘴部特征來判斷嘴部圖像為張開動(dòng)作圖像或閉合動(dòng)作圖像，在嘴部記錄時(shí)間內(nèi)。處理單元依序記錄嘴部位置區(qū)域中所檢測(cè)到的所有閉合動(dòng)作圖像或張開動(dòng)作圖像并轉(zhuǎn)換成編碼序列，且將編碼序列存入嘴部動(dòng)作信息。
[0016]在本發(fā)明的一實(shí)施例中，在嘴部比對(duì)時(shí)間內(nèi)，處理單元將嘴部位置區(qū)域的圖像與樣板圖像進(jìn)行比對(duì)，以產(chǎn)生嘴型編碼。處理單元將嘴型編碼存入編碼序列中，且將編碼序列存入嘴部動(dòng)作信息。
[0017]在本發(fā)明的一實(shí)施例中，上述的裝置還包括警示模塊。警示模塊耦接處理單元。當(dāng)處理單元判斷人員正使用手持裝置時(shí)，通過警示模塊啟動(dòng)警示程序。
[0018]基于上述，本發(fā)明實(shí)施例可通過圖像識(shí)別技術(shù)監(jiān)控目標(biāo)物體的移動(dòng)軌跡是否朝向人員的耳側(cè)位置區(qū)域，再比對(duì)人員的嘴部動(dòng)作是否符合預(yù)設(shè)嘴部信息，以判斷人員是否正在使用手持裝置。藉此，便能有效且準(zhǔn)確地判斷人員是否正使用手持裝置。
[0019]為讓本發(fā)明的上述特征和優(yōu)點(diǎn)能更明顯易懂，下文特舉實(shí)施例，并配合附圖作詳細(xì)說明如下。
【附圖說明】
[0020]圖1是依據(jù)本發(fā)明一實(shí)施例說明一種檢測(cè)人員使用手持裝置的方塊圖；
[0021]圖2是依據(jù)本發(fā)明一實(shí)施例說明一種檢測(cè)人員使用手持裝置的方法流程圖；
[0022]圖3是依照本發(fā)明一實(shí)施例的圖像的示意圖；
[0023]圖4是依據(jù)本發(fā)明一實(shí)施例說明決定嘴部位置區(qū)域的流程范例示意圖；
[0024]圖5A?圖5E是依照本發(fā)明一實(shí)施例的檢測(cè)目標(biāo)物體的示意圖；
[0025]圖6是依據(jù)本發(fā)明一實(shí)施例說明記錄嘴部動(dòng)作信息的流程范例示意圖；
[0026]圖7是依據(jù)本發(fā)明另一實(shí)施例說明記錄嘴部動(dòng)作信息的流程范例示意圖。
[0027]附圖標(biāo)記說明:
[0028]100:裝置；
[0029]110:圖像獲取單元；
[0030]130:存儲(chǔ)單元；
[0031]150:處理單元；
[0032]S210 ?S290、S410 ?S490、S610 ?S690、S710 ?S770:步驟；
[0033]300:圖像；
[0034]510:參考圖像；
[0035]520:當(dāng)前圖像；
[0036]530:目標(biāo)區(qū)域圖像；
[0037]540:濾除區(qū)域圖像；
[0038]550:具有目標(biāo)物體的區(qū)域圖像；
[0039]310:臉部目標(biāo)；
[0040]320:鼻孔目標(biāo)；
[0041]511、521、551、R:興趣區(qū)域;
[0042]B:基準(zhǔn)點(diǎn)；
[0043]C1、C2:邊界；
[0044]E:耳側(cè)位置區(qū)域；
[0045]O:目標(biāo)物體。
【具體實(shí)施方式】
[0046]人們?cè)谧ト∫苿?dòng)電話接聽來電的過程中，移動(dòng)電話通常會(huì)朝向耳側(cè)移動(dòng)，以使移動(dòng)電話的聽筒朝向耳朵，并使移動(dòng)電話的話筒貼近嘴部。據(jù)此，本發(fā)明實(shí)施例便是對(duì)人員進(jìn)行圖像監(jiān)控，且利用圖像識(shí)別技術(shù)來判斷人員是否將手持裝置朝向耳朵移動(dòng)。同時(shí)，本發(fā)明實(shí)施例還判斷人員的嘴部動(dòng)作是否符合預(yù)設(shè)嘴部信息。藉此，便能有效且準(zhǔn)確地判斷人員是否正使用手持裝置。以下提出符合本發(fā)明的精神的多個(gè)實(shí)施例，應(yīng)用本實(shí)施例者可依其需求而對(duì)這些實(shí)施例進(jìn)行適度調(diào)整，而不僅限于下述描述中的內(nèi)容。
[0047]圖1是依據(jù)本發(fā)明一實(shí)施例說明一種檢測(cè)人員使用手持裝置的方塊圖。請(qǐng)參照?qǐng)D1，裝置100包括圖像獲取單元110、存儲(chǔ)單元130及處理單元150。在一實(shí)施例中，裝置100例如是設(shè)置在行車內(nèi)，以對(duì)駕駛?cè)诉M(jìn)行檢測(cè)。在其他實(shí)施例中，裝置100也可以使用于自動(dòng)柜員機(jī)(Automated Teller Machine ;簡(jiǎn)稱ATM)等自動(dòng)交易裝置，以判斷例如是操作者是否正接聽手持裝置而進(jìn)行轉(zhuǎn)帳操作。需說明的是，應(yīng)用本發(fā)明實(shí)施例者可依據(jù)需求，將裝置100設(shè)置于任何需要監(jiān)控人員是否正使用手持裝置的電子裝置或場(chǎng)所，本發(fā)明實(shí)施例不加以限制。
[0048]圖像獲取單元110可以是電荷親合元件(Charge coupled device ;簡(jiǎn)稱CO))鏡頭、互補(bǔ)金屬氧化物半導(dǎo)體(Complementary metal oxide semiconductor transistors ；簡(jiǎn)稱CMOS)鏡頭、或紅外線鏡頭的攝像機(jī)、照相機(jī)。圖像獲取單元110用以獲取人員的圖像，并將圖像存放存儲(chǔ)單元130。
[0049]存儲(chǔ)單元130可以是任何形態(tài)的固定或可移動(dòng)隨機(jī)存取存儲(chǔ)器(random accessmemory ；簡(jiǎn)稱RAM)、只讀存儲(chǔ)器(read-only memory ；簡(jiǎn)稱ROM)、快閃存儲(chǔ)器(flashmemory)、硬盤(Hard Disk Drive ;簡(jiǎn)稱HDD)或類似元件或上述元件的組合。
[0050]處理單元150耦接圖像獲取單元110以及存儲(chǔ)單元130。處理單元150可以是中央處理器(Central Processing Unit ;簡(jiǎn)稱0?1])具有運(yùn)算功能的芯片組、微處理器或微控制器(micro control unit ;簡(jiǎn)稱MCU)。本發(fā)明實(shí)施例處理單元150用以處理本實(shí)施例的裝置100的所有操作。處理單元150可通過圖像獲取單元110取得圖像，將圖像存儲(chǔ)至存儲(chǔ)單元130中，并對(duì)圖像進(jìn)行圖像處理的程序。
[0051]需說明的是，在其他實(shí)施例中，圖像獲取單元110還具有照明元件，用以在光線不足時(shí)適時(shí)進(jìn)行補(bǔ)光，以確保其所拍攝到的圖像的清晰度。
[0052]為幫助理解本發(fā)明的技術(shù)，以下舉一情境說明本發(fā)明的應(yīng)用方式。假設(shè)本發(fā)明實(shí)施例的裝置100設(shè)置于汽車上，一位駕駛?cè)藛T坐在駕駛位置(未方便說明，以下以“人員”作為此駕駛?cè)藛T)，裝置100上的圖像獲取單元110可對(duì)人員進(jìn)行拍攝。圖像獲取單元110所獲取到人員的圖像可包含人員的臉部、肩部甚至是半身。此外，假設(shè)手持裝置放置于排檔附近或儀表板上方等任何位置。在此，以下將依據(jù)此情境搭配諸多實(shí)施例來進(jìn)行詳細(xì)說明。
[0053]圖2是依據(jù)本發(fā)明一實(shí)施例說明一種檢測(cè)人員使用手持裝置的方法流程圖，該檢測(cè)人員使用手持裝置可以為功能型手機(jī)或智能手機(jī)等類型的移動(dòng)電話。請(qǐng)參照?qǐng)D2，本實(shí)施例的方法適用于圖1的裝置100。下文中，將搭配裝置100中的各項(xiàng)元件說明本發(fā)明實(shí)施例所述的方法。本方法的各個(gè)流程可依照實(shí)施情形而隨之調(diào)整，且并不僅限于此。
[0054]在步驟S210中，處理單元150通過圖像獲取單元110獲取人員的圖像序列。例如，圖像獲取單元110可設(shè)定為每秒30張、45張等拍攝速度，以對(duì)人員進(jìn)行拍攝，并將包括連續(xù)獲取的多張圖像的圖像序列存儲(chǔ)在存儲(chǔ)單元130中。
[0055]在其他實(shí)施例中，處理單元150也可事先設(shè)定啟動(dòng)條件。當(dāng)符合此啟動(dòng)條件時(shí)，處理單元150可致能圖像獲取單元110來獲取人員的圖像。例如，可在圖像獲取單元110的附近設(shè)置傳感器(例如，紅外線傳感器)，裝置100利用紅外線傳感器來檢測(cè)是否有人員位于圖像獲取單元110可獲取圖像的范圍內(nèi)。倘若紅外線傳感器檢測(cè)到在圖像獲取單元110前方有人員出現(xiàn)(即，符合啟動(dòng)條件)時(shí)，處理單元150便會(huì)觸發(fā)圖像獲取單元110開始獲取圖像。另外，裝置100上也可設(shè)置啟動(dòng)鈕，當(dāng)此啟動(dòng)紐被按壓時(shí)，處理單元150才啟動(dòng)圖像獲取單元110。需說明的是，上述僅為舉例說明，本發(fā)明并不以此為限。
[0056]此外，處理單元150也可對(duì)獲取到的圖像序列執(zhí)行背景濾除動(dòng)作。例如，將第I張圖像與第1+1張圖像進(jìn)行差分處理，I為正整數(shù)。之后，處理單元150可將濾除背影的圖像轉(zhuǎn)為灰階圖像，藉此進(jìn)行后續(xù)動(dòng)作。
[0057]接著，由處理單元150開始對(duì)上述圖像序列的每一張圖像進(jìn)行圖像處理程序。在步驟S230中，處理單元150分析圖像序列的每一個(gè)圖像，以獲得臉部目標(biāo)。具體而言，處理單元150分析圖像序列以取得臉部特征(例如，眼睛、鼻子、嘴唇等)，再利用臉部特征的比對(duì)，來找出圖像中的臉部目標(biāo)。例如，存儲(chǔ)單元130存儲(chǔ)有特征數(shù)據(jù)庫。此特征數(shù)據(jù)庫包括了臉部特征樣本(pattern)。而處理單元150通過與特征數(shù)據(jù)庫中的樣本進(jìn)行比對(duì)來獲得臉部目標(biāo)。針對(duì)檢測(cè)臉部的技術(shù)，本發(fā)明實(shí)施例可利用AdaBoost算法或其他人臉檢測(cè)算法(例如，主成份分析(Principal Component Analysis ;簡(jiǎn)稱PCA)、獨(dú)立成份分析(Independent Component Analysis ;簡(jiǎn)稱ICA)等算法或利用Haar-like特征來進(jìn)行人臉檢測(cè)動(dòng)作等)來獲得每一個(gè)圖像中的臉部目標(biāo)。
[0058]而在其他實(shí)施例中，在檢測(cè)臉部特征之前，處理單元150還可先執(zhí)行背景濾除動(dòng)作。例如，處理單元150可通過圖像獲取單元110事先獲取至少一張未存在人像的背景圖像，以在獲得人員的圖像之后，處理單元150可將包括人像的圖像與背景圖像進(jìn)行相減，如此便能夠?qū)⒈尘盀V除。之后，處理單元150可將濾除背影的圖像轉(zhuǎn)為灰階圖像，再轉(zhuǎn)為二值化圖像。此時(shí)，處理單元150便可在二值化圖像中來檢測(cè)臉部特征。
[0059]在步驟S250中，處理單元150依據(jù)臉部目標(biāo)決定至少一個(gè)耳側(cè)位置區(qū)域以及嘴部位置區(qū)域。
[0060]在一實(shí)施例中，為了更精準(zhǔn)地獲得耳側(cè)位置區(qū)域，處理單元150還可在獲得臉部目標(biāo)之后，在臉部目標(biāo)中搜索鼻孔目標(biāo)，進(jìn)而基于鼻孔目標(biāo)的位置，往水平方向搜索耳側(cè)位置區(qū)域。例如，往鼻孔目標(biāo)的左右兩側(cè)搜索左右臉頰的邊界。之后，處理單元150依據(jù)人臉與耳朵的相對(duì)位置，搜索到的邊界為基準(zhǔn)來獲得左右兩邊的耳側(cè)位置區(qū)域。接著，處理單元150可依據(jù)耳側(cè)位置區(qū)域獲得興趣區(qū)域(Reg1n of Interest ;簡(jiǎn)稱R0I)。
[0061]舉例而言，圖3是依照本發(fā)明一實(shí)施例的圖像的示意圖。處理單元150在檢測(cè)到圖像300的臉部目標(biāo)310之后，便可獲得鼻孔目標(biāo)320，再由鼻孔目標(biāo)320來找到左右兩邊的邊界C1、C2，并以邊界C1、C2為基準(zhǔn)而獲得耳側(cè)位置區(qū)域。為方便說明，范例中僅舉其中一側(cè)臉頰的邊界Cl來進(jìn)行說明，然而，可依此類推至另一側(cè)臉頰的邊界C2。以邊界Cl的坐標(biāo)為基準(zhǔn)，處理單元150利用預(yù)先設(shè)定好的尺寸范圍而獲得耳側(cè)位置區(qū)域E。然后，處理單元150根據(jù)耳側(cè)位置區(qū)域E，再以另一預(yù)設(shè)尺寸范圍而獲得興趣區(qū)域R。需說明的是，圖3中耳側(cè)位置區(qū)域E以及興趣區(qū)域R的大小、位置及形狀在其他實(shí)施例中可能不同，本發(fā)明實(shí)施例不加以限制。
[0062]在另一實(shí)施例中，處理單元150由鼻孔目標(biāo)中識(shí)別出鼻孔定位點(diǎn)，基于鼻孔定位點(diǎn)設(shè)定嘴部區(qū)域，對(duì)嘴部區(qū)域的圖像進(jìn)行圖像處理以判斷人員的嘴部目標(biāo)，且依據(jù)嘴部目標(biāo)在嘴部區(qū)域決定嘴部位置區(qū)域。
[0063]舉例而言，圖4是依據(jù)本發(fā)明一實(shí)施例說明決定嘴部位置區(qū)域的流程范例示意圖。處理單元150可基于鼻孔位置信息設(shè)定嘴部區(qū)域，通過例如是嘴唇顏色與皮膚、牙齒顏色深淺不同的差異，通過調(diào)整嘴部區(qū)域內(nèi)的對(duì)比而獲得加強(qiáng)圖像(步驟S410)，并進(jìn)一步對(duì)此加強(qiáng)圖像進(jìn)行去雜點(diǎn)處理。例如，通過像素矩陣將雜點(diǎn)濾除。處理單元150便可獲得相對(duì)于加強(qiáng)圖像更清晰的去雜點(diǎn)圖像(步驟S430)。接著，處理單元150根據(jù)圖像中某個(gè)顏色與另一個(gè)顏色的對(duì)比程度進(jìn)行邊緣銳利化處理，以決定此去雜點(diǎn)圖像中的邊緣，因而獲得銳化圖像(步驟S450)。由于圖像的復(fù)雜程度將決定圖像占用的存儲(chǔ)容量，為提高比對(duì)的效能，處理單元150還對(duì)此銳化圖像進(jìn)行二值化處理。例如，處理單元150先設(shè)定門濫值，并將圖像中的像素分為超出或低于此門檻值的二種數(shù)值，而可獲得二值化圖像(步驟S470)。最后，處理單元150再次對(duì)二值化圖像進(jìn)行邊緣銳利化處理。此時(shí)，二值化圖像中人員的嘴唇部位已相當(dāng)明顯，處理單元150便可于嘴部區(qū)域中取出嘴部位置區(qū)域(步驟S490)。
[0064]需說明的是，應(yīng)用本發(fā)明實(shí)施例者，可以依據(jù)設(shè)計(jì)需求來決定耳側(cè)位置區(qū)域以及嘴部位置區(qū)域，例如針對(duì)不同人員的臉部特征(例如，臉寬、耳朵大小、嘴唇寬度等)進(jìn)行調(diào)整，本發(fā)明并不以此為限。
[0065]在步驟S270中，處理單元150在圖像序列的每一個(gè)圖像，檢測(cè)目標(biāo)物體，以計(jì)算此目標(biāo)物體的移動(dòng)軌跡。例如，目標(biāo)物體例如為手持裝置。處理單元150便在每一個(gè)圖像中檢測(cè)手持裝置。此外，人員手腕上配戴的手表或手指都可依據(jù)設(shè)計(jì)需求而作為目標(biāo)物體。在一實(shí)施例中，處理單元150依據(jù)耳側(cè)位置區(qū)域獲得興趣區(qū)域，將當(dāng)前圖像與參考圖像(可以是先前圖像，例如此當(dāng)前圖像的前一幅圖像或前N幅圖像，也或是預(yù)先設(shè)定的任一幅圖像)兩者各自的興趣區(qū)域(例如，圖3的興趣區(qū)域R)執(zhí)行圖像相減算法，以獲得目標(biāo)區(qū)域圖像。處理單元150并通過參考圖像的興趣區(qū)域，濾除目標(biāo)區(qū)域圖像的噪聲，以獲得目標(biāo)物體。
[0066]舉例而言，圖5A?圖5E是依照本發(fā)明一實(shí)施例的檢測(cè)目標(biāo)物體的示意圖。為了方便說明，圖5A?圖5E的灰階度將省略，而僅描繪出灰階的邊緣來進(jìn)行說明。圖5A所示為參考圖像510以及興趣區(qū)域511。圖5B所示為目前圖像獲取單元110所獲取的當(dāng)前圖像520、興趣區(qū)域521以及耳側(cè)位置區(qū)域E。圖5C所示為目標(biāo)區(qū)域圖像530。圖所示為濾除區(qū)域圖像540。圖5E所示為具有目標(biāo)物體O的區(qū)域圖像550。
[0067]具體而言，處理單元150將參考圖像510的興趣區(qū)域511與當(dāng)前圖像520的興趣區(qū)域521執(zhí)行圖像相減算法之后，便能夠獲得兩張圖像中具有差異的目標(biāo)區(qū)域圖像530。也就是說，目標(biāo)區(qū)域圖像530為興趣區(qū)域511與興趣區(qū)域521進(jìn)行圖像相減算法后所獲得的結(jié)果。在目標(biāo)區(qū)域圖像530中，以虛線來表示非目標(biāo)物體的其他噪聲。接著，為了濾除噪聲以獲得目標(biāo)物體，處理單元150對(duì)參考圖像510的興趣區(qū)域511的執(zhí)行邊緣檢測(cè)算法及膨脹(dilate)算法等，以獲得濾除區(qū)域圖像540。然后，處理單元150將目標(biāo)區(qū)域圖像530與濾除區(qū)域圖像540進(jìn)行圖像相減算法后，便可獲得如圖5E所示具有目標(biāo)物體O的區(qū)域圖像550。
[0068]然后，處理單元150獲得目標(biāo)物體之后，根據(jù)圖像序列計(jì)算目標(biāo)物體的移動(dòng)軌跡。在一實(shí)施例中，處理單元150計(jì)算目標(biāo)物體的垂直投影量與水平投影量，以獲得目標(biāo)物體的尺寸范圍。舉例而言，處理單元150計(jì)算目標(biāo)物體的垂直投影量，以獲得目標(biāo)物體在垂直軸上的長(zhǎng)度，且計(jì)算目標(biāo)物體的水平投影量而獲得目標(biāo)物體位于水平軸上的寬度。通過上述長(zhǎng)度與寬度，處理單元150便可獲得目標(biāo)物體的尺寸范圍。
[0069]接著，處理單元150在尺寸范圍內(nèi)取基準(zhǔn)點(diǎn)，且通過圖像序列的每一個(gè)圖像中的基準(zhǔn)點(diǎn)的位置，獲得移動(dòng)軌跡。處理單元150可依據(jù)目標(biāo)物體的其中一點(diǎn)作為基準(zhǔn)點(diǎn)，對(duì)每張圖像中基準(zhǔn)點(diǎn)的位置進(jìn)行統(tǒng)計(jì)，進(jìn)而獲得目標(biāo)物體的移動(dòng)軌跡。舉例而言，以圖5E為例，處理單元150計(jì)算出目標(biāo)物體O的長(zhǎng)度與寬度，以獲得尺寸范圍551。并且，處理單元150以尺寸范圍551的左上方頂點(diǎn)B作為基準(zhǔn)點(diǎn)。而后續(xù)其他張圖像的目標(biāo)物體也可依據(jù)尺寸范圍的左上方頂點(diǎn)作為基準(zhǔn)點(diǎn)。據(jù)此，由多張圖像的基準(zhǔn)點(diǎn)便可得知目標(biāo)物體的移動(dòng)軌跡。需說明的是，上述依據(jù)尺寸范圍的左上方頂點(diǎn)作為基準(zhǔn)點(diǎn)僅為舉例說明，本發(fā)明實(shí)施例不以此為限。
[0070]在步驟S290中，在處理單元150檢測(cè)到移動(dòng)軌跡為目標(biāo)物體朝向耳側(cè)位置區(qū)域(例如，左耳側(cè)區(qū)域或右耳側(cè)區(qū)域)移動(dòng)之后，比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，來判斷人員是否正在使用手持裝置。
[0071]舉例而言，存儲(chǔ)單元130可事先存儲(chǔ)預(yù)設(shè)移動(dòng)軌跡，處理單元150便可將檢測(cè)到的移動(dòng)軌跡與預(yù)設(shè)移動(dòng)軌跡進(jìn)行比對(duì)，以判斷檢測(cè)到的移動(dòng)軌跡是否朝向耳側(cè)位置區(qū)域。此預(yù)設(shè)移動(dòng)軌跡可以是自興趣區(qū)域的任何位置點(diǎn)，以任何角度至耳側(cè)位置區(qū)域的直線或任何不規(guī)則的線段。此外，裝置100可事先以圖像獲取單元110記錄多次人員執(zhí)行拿取手持裝置的動(dòng)作，并將記錄的移動(dòng)軌跡進(jìn)行分析，以存儲(chǔ)作為預(yù)設(shè)移動(dòng)軌跡。
[0072]接著，在處理單元150檢測(cè)到移動(dòng)軌跡為朝向耳側(cè)位置區(qū)域移動(dòng)后，處理單元150持續(xù)依據(jù)圖像獲取單元110所獲取到的后續(xù)圖像序列，來比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息。例如，預(yù)設(shè)嘴部信息是編碼序列、圖像變動(dòng)率或像素變動(dòng)率等。在一個(gè)比對(duì)時(shí)間(例如，2秒、5秒等)內(nèi)，處理單元150可比對(duì)圖像序列所取得的嘴部動(dòng)作信息是否符合預(yù)設(shè)的編碼序列、圖像變動(dòng)率或像素變動(dòng)率。若處理單元150判斷嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，則判定人員正在使用手持裝置。反之，則判斷人員并未使用手持裝置。
[0073]需說明的是，在比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息之前，處理單元150還記錄嘴部動(dòng)作信息以便后續(xù)比對(duì)。以下將舉實(shí)施例說明。
[0074]在一實(shí)施例中，處理單元150取得嘴部圖像，且依據(jù)嘴部圖像取得嘴部特征，依據(jù)嘴部特征來判斷嘴部圖像為張開動(dòng)作圖像或閉合動(dòng)作圖像。在嘴部記錄時(shí)間內(nèi)，處理單元150依序記錄嘴部位置區(qū)域中所檢測(cè)到的所有閉合動(dòng)作圖像或張開動(dòng)作圖像并轉(zhuǎn)換成編碼序列，且將編碼序列存入嘴部動(dòng)作信息。
[0075]舉例而言，圖6是依據(jù)本發(fā)明一實(shí)施例說明記錄嘴部動(dòng)作信息的流程范例示意圖。請(qǐng)參照?qǐng)D6，處理單元150在嘴部位置區(qū)域中取出數(shù)個(gè)嘴部特征(步驟S610)，例如，嘴部特征包括上唇部位以及下唇部位。具體而言，處理單元150取出嘴部特征的方法，可通過找出嘴部區(qū)域的左右兩側(cè)邊界，定義出左側(cè)嘴角與右側(cè)嘴角。同樣的，處理單元150通過找出嘴部位置區(qū)域的上下兩側(cè)的輪廓線，并通過左側(cè)嘴角與右側(cè)嘴角的連線識(shí)別出上唇部位與下唇部位。接著，處理單元150將上唇部位與下唇部位的間距與間隙值(例如，0.5厘米、I厘米等)進(jìn)行比較(步驟S620)。判斷上唇部位與下唇部位間的間距是否大于間隙值(步驟S630)。若上唇部位與下唇部位間的間距大于間隙值，則代表使用者的嘴巴是張開的，并藉以獲得一張張開動(dòng)作圖像(步驟S640)。反之，則處理單元150獲得一張閉合動(dòng)作圖像(步驟 S650) ο
[0076]處理單元150依據(jù)閉合動(dòng)作圖像或張開動(dòng)作圖像產(chǎn)生編碼，并將編碼存入編碼序列中(例如，第N欄，N為正整數(shù))(步驟S660)。編碼序列可以是二元編碼，或以摩斯電碼的方式編碼。例如，將張開動(dòng)作圖像定義為1，而閉合動(dòng)作圖像定義為O。若人員張開嘴巴兩個(gè)單位時(shí)間后再閉起嘴巴兩個(gè)單位時(shí)間，則編碼序列即為(1，1，0，0)。接著，處理單元150判斷是否達(dá)到嘴部記錄時(shí)間(步驟S670)。例如，處理單元150在步驟S610時(shí)啟動(dòng)計(jì)時(shí)器，并在步驟S670判斷計(jì)時(shí)器是否到達(dá)嘴部記錄時(shí)間。若處理單元150判斷計(jì)時(shí)器尚未達(dá)到嘴部記錄時(shí)間，則使N = N+1 (步驟S680)，并返回步驟S610繼續(xù)分辨嘴部的開闔狀況。并且，下次產(chǎn)生的編碼將會(huì)存儲(chǔ)至例如是編碼序列中的下一字段(例如，第N+1欄)。其中，每一個(gè)第N字段均代表一個(gè)單位時(shí)間(例如，200毫秒、500毫秒等)，存儲(chǔ)于字段中的編碼則代表一個(gè)單位時(shí)間所記錄的所有張開動(dòng)作圖像以及閉合動(dòng)作圖像的順序。
[0077]需說明的是，此范例中可在步驟S610至S680的流程中加入延遲時(shí)間(例如，100毫秒、200毫秒等)，使步驟S610至S680流程所耗費(fèi)的時(shí)間等于單位時(shí)間，以使每個(gè)第N字段代表一個(gè)單位時(shí)間。最后，處理單元150將編碼序列存入嘴部動(dòng)作信息(步驟S690)。
[0078]而在另一實(shí)施例中，在嘴部比對(duì)時(shí)間內(nèi)，處理單元150將嘴部位置區(qū)域的圖像與樣板圖像進(jìn)行比對(duì)，以產(chǎn)生嘴型編碼。處理單元150將嘴型編碼存入編碼序列中，且將編碼序列存入嘴部動(dòng)作信息。
[0079]舉例而言，圖7是依據(jù)本發(fā)明另一實(shí)施例說明記錄嘴部動(dòng)作信息的流程范例示意圖。在本實(shí)施例中，嘴部動(dòng)作信息也可代表多種嘴型的組合序列。請(qǐng)參照?qǐng)D7，處理單元150將嘴部位置區(qū)域的圖像與存儲(chǔ)單元130中的數(shù)個(gè)樣板(pattern)圖像進(jìn)行比對(duì)(步驟S710)。樣板圖像可以是具有辨識(shí)性的特定嘴部動(dòng)作圖像或唇語等，例如，朗讀日文五十音的“態(tài)、(^、)、文、朽”、中文的“喂、您好、請(qǐng)說、我是”或英文的“hello”等的嘴部各處肌肉呈現(xiàn)的動(dòng)作。這些樣板圖像分別具有一定的變動(dòng)彈性，即便人員臉部圖像中的嘴型與樣板圖像具有些微的差異，只要差異在變動(dòng)彈性可容許的范圍內(nèi)，處理單元150依然可辨識(shí)為與樣板圖像相符。
[0080]接著，處理單元150判斷嘴部位置區(qū)域的圖像相符于樣板圖像(步驟S720)。若比對(duì)結(jié)果為相符，則處理單元150產(chǎn)生嘴型編碼，并將嘴型編碼存入編碼序列中(例如，第M欄，M為正整數(shù))(步驟S730)。若比對(duì)結(jié)果為不符合，則處理單元150將M = M+1 (步驟S740)，并返回步驟S710。接著，處理單元150判斷是否達(dá)到嘴部比對(duì)時(shí)間(步驟S750)。例如，處理單元150在步驟S710時(shí)啟動(dòng)計(jì)時(shí)器，并在步驟S740判斷計(jì)時(shí)器是否到達(dá)嘴部比對(duì)時(shí)間。當(dāng)計(jì)時(shí)器到達(dá)嘴部比對(duì)時(shí)間后，處理單元150將編碼序列存入嘴部動(dòng)作信息(步驟S770)。若處理單元150判斷計(jì)時(shí)器尚未達(dá)到嘴部比對(duì)時(shí)間，則使M = M+1 (步驟S760)，并返回步驟S710繼續(xù)將嘴部位置區(qū)域的圖像與樣板圖像進(jìn)行比對(duì)。
[0081 ] 另一方面，人員通常會(huì)在抓取手持裝置至耳側(cè)附近后，待手持裝置位于適合通話的位置或人員可聽到手持裝置的聽筒發(fā)出的聲音，才會(huì)進(jìn)行講話。因此，在一實(shí)施例中，處理單元150還判斷目標(biāo)物體(例如，手持裝置)停留于耳側(cè)位置區(qū)域的停留時(shí)間是否超過預(yù)設(shè)時(shí)間(例如，I秒、3秒等)。當(dāng)停留時(shí)間超過預(yù)設(shè)時(shí)間時(shí)，處理單元150比對(duì)在嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息。
[0082]此外，本發(fā)明實(shí)施例的裝置100也可包括警示模塊。警示模塊耦接處理單元150。警示模塊可以是顯示模塊、燈光模塊、振動(dòng)模塊或揚(yáng)聲器模塊其中之一或其組合。當(dāng)處理單元150判斷人員正使用手持裝置時(shí)，通過警示模塊啟動(dòng)警示程序。具體而言，處理單元150產(chǎn)生提示信號(hào)至警示模塊，警示模塊便可依據(jù)提示信號(hào)來警示人員。例如，顯示模塊可顯示文字、圖像或圖像說明警告事宜(例如，小心！駕駛過程請(qǐng)勿使用手持裝置！)。燈光模塊可以特定頻率閃爍燈光或發(fā)出特定顏色的燈光(例如，紅色、綠色等)。振動(dòng)模塊例如是包括振動(dòng)馬達(dá)以產(chǎn)生固定頻率或變動(dòng)頻率等振動(dòng)。揚(yáng)聲器模塊可發(fā)出提示音。
[0083]在一些實(shí)施例中，預(yù)先存儲(chǔ)在存儲(chǔ)單元130中的預(yù)設(shè)嘴部信息可以是取自樣板圖像排列組合而成的預(yù)設(shè)嘴型編碼序列，且各預(yù)設(shè)嘴型編碼序列均對(duì)應(yīng)于提示信號(hào)。例如，當(dāng)使用者受到挾持時(shí)，人員可由嘴部作出念誦“求救”的動(dòng)作，但不必發(fā)出聲音。處理單元150便能以難以被察覺的方式，使警示模塊產(chǎn)生求救信號(hào)并發(fā)送至保全中心等處求援(警示模塊可包括通信模塊)。
[0084]需說明的是，上述駕駛汽車(也可以是飛機(jī)、船等)的情境是為了幫助實(shí)施例說明，但本發(fā)明實(shí)施例也可應(yīng)用在自動(dòng)交易裝置或其他監(jiān)控人員是否正使用手持裝置的電子裝置或場(chǎng)所。
[0085]綜上所述，本發(fā)明實(shí)施例所述的裝置可通過圖像識(shí)別技術(shù)判斷目標(biāo)物體的移動(dòng)軌跡是否朝向人員的耳側(cè)位置區(qū)域，再判斷人員的嘴部動(dòng)作是否符合預(yù)設(shè)嘴部信息。當(dāng)判斷結(jié)果都符合時(shí)，本發(fā)明實(shí)施例的裝置便可判斷人員正在使用手持裝置，也可發(fā)出提示信號(hào)來警示人員。藉此，本發(fā)明實(shí)施例可有效且即時(shí)地監(jiān)控駕駛行為或其他不適合使用手持裝置的情況，例如，駕駛?cè)藛T更可提高警覺，自動(dòng)交易裝置可幫助警察單位快速處理電話詐欺等問題。
[0086]最后應(yīng)說明的是:以上各實(shí)施例僅用以說明本發(fā)明的技術(shù)方案，而非對(duì)其限制；盡管參照前述各實(shí)施例對(duì)本發(fā)明進(jìn)行了詳細(xì)的說明，本領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解:其依然可以對(duì)前述各實(shí)施例所記載的技術(shù)方案進(jìn)行修改，或者對(duì)其中部分或者全部技術(shù)特征進(jìn)行等同替換；而這些修改或者替換，并不使相應(yīng)技術(shù)方案的本質(zhì)脫離本發(fā)明各實(shí)施例技術(shù)方案的范圍。
【主權(quán)項(xiàng)】
1.一種檢測(cè)人員使用手持裝置的方法，適用于電子裝置，其特征在于，包括: 獲取人員的圖像序列； 分析該圖像序列的每一個(gè)圖像，以獲得臉部目標(biāo)； 依據(jù)該臉部目標(biāo)決定至少一耳側(cè)位置區(qū)域以及嘴部位置區(qū)域； 在該圖像序列的每一個(gè)圖像，檢測(cè)目標(biāo)物體，以計(jì)算該目標(biāo)物體的移動(dòng)軌跡；以及其中在檢測(cè)到該移動(dòng)軌跡為該目標(biāo)物體朝向該至少一耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在該嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，來判斷該人員是否正在使用手持裝置。2.根據(jù)權(quán)利要求1所述的方法，其特征在于，在該圖像序列的每一個(gè)圖像，檢測(cè)該目標(biāo)物體，以計(jì)算該目標(biāo)物體的該移動(dòng)軌跡的步驟包括: 計(jì)算該目標(biāo)物體的垂直投影量與水平投影量，以獲得該目標(biāo)物體的尺寸范圍； 在該尺寸范圍內(nèi)取基準(zhǔn)點(diǎn)；以及 通過該圖像序列的該每一個(gè)圖像中的該基準(zhǔn)點(diǎn)的位置，獲得該移動(dòng)軌跡。3.根據(jù)權(quán)利要求1所述的方法，其特征在于，依據(jù)該臉部目標(biāo)決定至少耳側(cè)位置區(qū)域以及嘴部位置區(qū)域的步驟包括: 通過人臉檢測(cè)算法獲得該臉部目標(biāo)； 在該臉部目標(biāo)中搜索鼻孔目標(biāo)； 基于該鼻孔目標(biāo)的位置，往水平方向搜索該耳側(cè)位置區(qū)域； 由該鼻孔目標(biāo)中識(shí)別出鼻孔定位點(diǎn)； 基于該鼻孔定位點(diǎn)設(shè)定嘴部區(qū)域； 對(duì)該嘴部區(qū)域的圖像進(jìn)行圖像處理以判斷該人員的嘴部目標(biāo)；以及 依據(jù)該嘴部目標(biāo)在該嘴部區(qū)域決定該嘴部位置區(qū)域。4.根據(jù)權(quán)利要求1所述的方法，其特征在于，在檢測(cè)到該移動(dòng)軌跡為該目標(biāo)物體朝向該至少一耳側(cè)位置區(qū)域中移動(dòng)的步驟包括: 依據(jù)該耳側(cè)位置區(qū)域獲得興趣區(qū)域； 將該圖像序列中的當(dāng)前圖像與參考圖像兩者各自的該興趣區(qū)域，執(zhí)行圖像相減算法，以獲得目標(biāo)區(qū)域圖像；以及 通過該參考圖像的該興趣區(qū)域，濾除該目標(biāo)區(qū)域圖像的噪聲，以獲得該目標(biāo)物體。5.根據(jù)權(quán)利要求1所述的方法，其特征在于，在檢測(cè)到該移動(dòng)軌跡為該目標(biāo)物體朝向該至少一耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在該嘴部位置區(qū)域中所檢測(cè)的該嘴部動(dòng)作信息是否符合該預(yù)設(shè)嘴部信息，來判斷該人員是否正在使用該手持裝置的步驟包括: 取得至少一嘴部圖像，且依據(jù)該至少一嘴部圖像取得多個(gè)嘴部特征； 依據(jù)該些嘴部特征來判斷該至少一嘴部圖像為張開動(dòng)作圖像或閉合動(dòng)作圖像； 在嘴部記錄時(shí)間內(nèi)，依序記錄該嘴部位置區(qū)域中所檢測(cè)到的所有該閉合動(dòng)作圖像或該張開動(dòng)作圖像并轉(zhuǎn)換成編碼序列；以及將該編碼序列存入該嘴部動(dòng)作信息。6.根據(jù)權(quán)利要求1所述的方法，其特征在于，在檢測(cè)到該移動(dòng)軌跡為該目標(biāo)物體朝向該至少一耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在該嘴部位置區(qū)域中所檢測(cè)的該嘴部動(dòng)作信息是否符合該預(yù)設(shè)嘴部信息，來判斷該人員是否正在使用該手持裝置的步驟包括: 在嘴部比對(duì)時(shí)間內(nèi)，將該嘴部位置區(qū)域的圖像與多個(gè)樣板圖像進(jìn)行比對(duì)，以產(chǎn)生嘴型編碼； 將該嘴型編碼存入編碼序列中；以及 將該編碼序列存入該嘴部動(dòng)作信息。7.—種檢測(cè)人員使用手持裝置的裝置，其特征在于，包括: 圖像獲取單元，獲取人員的圖像序列； 存儲(chǔ)單元，存儲(chǔ)該圖像序列以及預(yù)設(shè)嘴部信息；以及 處理單元，耦接至該存儲(chǔ)單元以取得該圖像序列；其中該處理單元分析該圖像序列的每一個(gè)圖像，以獲得臉部目標(biāo)；該處理單元依據(jù)該臉部目標(biāo)決定至少一耳側(cè)位置區(qū)域以及嘴部位置區(qū)域；在該圖像序列的每一個(gè)圖像中檢測(cè)目標(biāo)物體，以計(jì)算該目標(biāo)物體的移動(dòng)軌跡；在該處理單元檢測(cè)到該移動(dòng)軌跡為該目標(biāo)物體朝向該至少一耳側(cè)位置區(qū)域移動(dòng)之后，比對(duì)在該嘴部位置區(qū)域中所檢測(cè)的嘴部動(dòng)作信息是否符合預(yù)設(shè)嘴部信息，來判斷該人員是否正在使用手持裝置。8.根據(jù)權(quán)利要求7所述的裝置，其特征在于，該處理單元計(jì)算該目標(biāo)物體的垂直投影量與水平投影量，以獲得該目標(biāo)物體的尺寸范圍，在該尺寸范圍內(nèi)取基準(zhǔn)點(diǎn)，且通過該圖像序列的該每一個(gè)圖像中的該基準(zhǔn)點(diǎn)的位置，獲得該移動(dòng)軌跡。9.根據(jù)權(quán)利要求7所述的裝置，其特征在于，該處理單元通過人臉檢測(cè)算法獲得該臉部目標(biāo)，在該臉部目標(biāo)中搜索鼻孔目標(biāo)，且基于該鼻孔目標(biāo)的位置，往水平方向搜索該耳側(cè)位置區(qū)域； 其中該處理單元由該鼻孔目標(biāo)中識(shí)別出鼻孔定位點(diǎn)，基于該鼻孔定位點(diǎn)設(shè)定嘴部區(qū)域，對(duì)該嘴部區(qū)域的圖像進(jìn)行圖像處理以判斷該人員的嘴部目標(biāo)，且依據(jù)該嘴部目標(biāo)在該嘴部區(qū)域決定該嘴部位置區(qū)域。10.根據(jù)權(quán)利要求7所述的裝置，其特征在于，該處理單元依據(jù)該耳側(cè)位置區(qū)域獲得興趣區(qū)域，將該圖像序列中的當(dāng)前圖像與參考圖像兩者各自的該興趣區(qū)域，執(zhí)行圖像相減算法，以獲得目標(biāo)區(qū)域圖像，且該處理單元通過該參考圖像的該興趣區(qū)域，濾除該目標(biāo)區(qū)域圖像的噪聲，以獲得該目標(biāo)物體。11.根據(jù)權(quán)利要求7所述的裝置，其特征在于，該處理單元取得至少一嘴部圖像，且依據(jù)該至少一嘴部圖像取得多個(gè)嘴部特征，依據(jù)該些嘴部特征來判斷該至少一嘴部圖像為張開動(dòng)作圖像或閉合動(dòng)作圖像，在嘴部記錄時(shí)間內(nèi)，該處理單元依序記錄該嘴部位置區(qū)域中所檢測(cè)到的所有該閉合動(dòng)作圖像或該張開動(dòng)作圖像并轉(zhuǎn)換成編碼序列，且將該編碼序列存入該嘴部動(dòng)作信息。12.根據(jù)權(quán)利要求7所述的裝置，其特征在于，在嘴部比對(duì)時(shí)間內(nèi)，該處理單元將該嘴部位置區(qū)域的圖像與多個(gè)樣板圖像進(jìn)行比對(duì)，以產(chǎn)生嘴型編碼，該處理單元將該嘴型編碼存入編碼序列中，且將該編碼序列存入該嘴部動(dòng)作信息。13.根據(jù)權(quán)利要求7所述的裝置，其特征在于，該裝置還包括: 警示模塊，當(dāng)該處理單元判斷該人員正使用該手持裝置時(shí)，通過該警示模塊啟動(dòng)警示程序。
【文檔編號(hào)】G06K9/00GK105989328SQ201510054941
【公開日】2016年10月5日
【申請(qǐng)日】2015年2月3日
【發(fā)明人】林伯聰, 許佳微
【申請(qǐng)人】由田新技股份有限公司