本發(fā)明涉及一種駕駛員異常行為狀態(tài)的智能圖像分析方法和告警系統(tǒng)。

背景技術(shù)：

在機(jī)車駕駛過程中，駕駛員可能存在著駕駛過程中接打手機(jī)、查看短信、微信聊天、QQ聊天、疲勞駕駛、離開駕駛位置、回頭與他人說話交談、尋找物品等不良駕駛習(xí)慣，這些都是釀成車禍的重要因素，在現(xiàn)有技術(shù)中，對駕駛員不規(guī)范的駕駛行為，有的采用超速告警，當(dāng)車輛駕駛速度超過設(shè)定速度限制時(shí)進(jìn)行告警提醒，有的采用人為監(jiān)控方式，即通過攝像頭監(jiān)控駕駛員的駕駛狀態(tài)，當(dāng)發(fā)現(xiàn)有不規(guī)范的駕駛行為時(shí)，對其進(jìn)行告警，其監(jiān)控任務(wù)比較繁重，同時(shí)，對于監(jiān)督者而言，必須保持實(shí)時(shí)的監(jiān)控狀態(tài)，如果稍有疏忽，則可能釀成大錯(cuò)，并不能有效的控制駕駛員的不規(guī)范駕駛行為。

因此，本領(lǐng)域的專業(yè)技術(shù)人員迫切需要解決的一個(gè)技術(shù)問題是，如何創(chuàng)新的提出一種措施，實(shí)現(xiàn)對駕駛員不規(guī)范駕駛行為的有效分析和告警，智能輔助分析判斷告警系統(tǒng)，并對駕駛員不規(guī)范駕駛行為進(jìn)行分析、存儲(chǔ)、回放，達(dá)到智能化的防范駕駛員不規(guī)范駕駛行為的目的，有效降低機(jī)車事故的發(fā)生。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明實(shí)施例所要解決的一個(gè)技術(shù)問題是：提供一種駕駛員異常行為狀態(tài)的智能圖像分析方法和告警系統(tǒng)，實(shí)現(xiàn)對駕駛員不規(guī)范駕駛行為的有效分析和告警，智能輔助分析判斷告警系統(tǒng)，并對駕駛員不規(guī)范駕駛行為進(jìn)行分析、存儲(chǔ)、回放，達(dá)到智能化的防范駕駛員不規(guī)范駕駛行為的目的，有效降低機(jī)車事故的發(fā)生概率。

根據(jù)本發(fā)明實(shí)施例的一個(gè)方面，提供的一種駕駛員異常行為狀態(tài)的智能圖像分析方法，包括：

攝像裝置對機(jī)車駕駛室內(nèi)的駕駛員進(jìn)行圖像采集，對機(jī)車駕駛室內(nèi)的駕駛員圖像采集主要采集駕駛員的人臉圖像、手上動(dòng)作圖像、駕駛位置圖像和駕駛員大幅度的動(dòng)作圖像；

圖像分析設(shè)備對采集的圖像進(jìn)行智能分析計(jì)算，通過智能分析計(jì)算，解析駕駛員的駕駛狀態(tài)，建立駕駛員規(guī)范操作模型，所述駕駛員規(guī)范操作模型包括規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型和不規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型；

將采集圖像與機(jī)車駕駛員狀態(tài)模型比對，檢索不規(guī)范動(dòng)作的視頻圖像和事件點(diǎn)圖片，通過逐幀比對檢索分析的方法，識別出機(jī)車駕駛員在駕駛過程中的每一個(gè)不規(guī)范動(dòng)作，設(shè)定檢索視頻圖像時(shí)間閾值，自動(dòng)檢索出不規(guī)范動(dòng)作的檢索視頻圖像時(shí)間閾值內(nèi)的視頻圖像，對于機(jī)車駕駛員在駕駛過程中的每一個(gè)不規(guī)范動(dòng)作，自動(dòng)采集不規(guī)范動(dòng)作的事件點(diǎn)圖片；

分析主機(jī)判斷駕駛員處于不規(guī)范的駕駛狀態(tài)時(shí)進(jìn)行聲光告警；

將不規(guī)范動(dòng)作視頻圖像、事件點(diǎn)圖片及事件日志，生成不規(guī)范動(dòng)作視頻文件。

基于上述方法的另一個(gè)實(shí)施例中，所述不規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型包括：

駕駛員玩手機(jī)的狀態(tài)模型，是指駕駛員雙手或單手處于持手機(jī)狀態(tài)，眼睛脫離機(jī)車行駛正前方，并超過設(shè)定時(shí)間閾值的狀態(tài)；

駕駛員長時(shí)間不動(dòng)、假寐的狀態(tài)模型，是指駕駛員眼睛閉合、身體保持靜止，并超過設(shè)定時(shí)間閾值的狀態(tài)；

駕駛員離崗狀態(tài)模型，是指駕駛員離開駕駛員座位超過設(shè)定時(shí)間閾值的狀態(tài)；

駕駛員大幅度動(dòng)作狀態(tài)模型，是指駕駛員身體大幅度扭曲、眼睛脫離機(jī)車行駛正前方，并超過設(shè)定時(shí)間閾值的狀態(tài)。

基于上述方法的另一個(gè)實(shí)施例中，所述設(shè)定檢索視頻圖像時(shí)間閾值可以自定義。

基于上述方法的另一個(gè)實(shí)施例中，所述將不規(guī)范動(dòng)作視頻圖像、事件點(diǎn)圖片及事件日志，生成不規(guī)范動(dòng)作視頻文件數(shù)據(jù)庫包括：

事件名稱、事件時(shí)間、事件發(fā)生的車型車次、事件圖片的文件名、源文件名，數(shù)據(jù)庫采用標(biāo)準(zhǔn)數(shù)據(jù)庫。

根據(jù)本發(fā)明實(shí)施例的另一個(gè)方面，提供的一種駕駛員異常行為狀態(tài)的告警系統(tǒng)，包括：圖像采集器、電源設(shè)備、分析主機(jī)、存儲(chǔ)設(shè)備、告警輸出模塊；

所述圖像采集器用于采集機(jī)車駕駛室內(nèi)駕駛員的圖像信息，所采集的駕駛員圖像信息包括：駕駛員的人臉圖像、手上動(dòng)作圖像、駕駛位置圖像和駕駛員大幅度的動(dòng)作圖像；

所述電源設(shè)備為分析主機(jī)提供電力供應(yīng)；

所述分析主機(jī)通過對圖像采集器采集的視頻圖像與駕駛員規(guī)范操作模型的視頻圖像進(jìn)行逐幀對比，分析駕駛員的不規(guī)范動(dòng)作，并自動(dòng)檢索不規(guī)范動(dòng)作的視頻圖像，采集不規(guī)范動(dòng)作的事件點(diǎn)圖片，對不規(guī)范動(dòng)作進(jìn)行告警，對不規(guī)范動(dòng)作的視頻圖像、事件點(diǎn)圖片及事件日志進(jìn)行存儲(chǔ)；

所述存儲(chǔ)設(shè)備對分析主機(jī)生成的視頻文件進(jìn)行存儲(chǔ)；

所述告警輸出模塊是接收分析主機(jī)對采集的視頻圖像進(jìn)行自動(dòng)分析計(jì)算結(jié)果，判斷駕駛員是否處于不規(guī)范的駕駛狀態(tài)，對于不規(guī)范的駕駛狀態(tài)，進(jìn)行聲光告警。

所述圖像采集器采集到駕駛員視頻圖像以后，將視頻圖像發(fā)送至分析主機(jī)，分析主機(jī)對采集的視頻圖像進(jìn)行自動(dòng)分析計(jì)算，判斷駕駛員是否處于不規(guī)范的駕駛狀態(tài)，對不規(guī)范的駕駛狀態(tài)，進(jìn)行告警，并自動(dòng)檢索不規(guī)范動(dòng)作的視頻圖像，采集不規(guī)范動(dòng)作的事件點(diǎn)圖片，對不規(guī)范動(dòng)作的視頻圖像、事件點(diǎn)圖片及事件日志以后，上傳至存儲(chǔ)設(shè)備，電源設(shè)備為分析主機(jī)提供電力供應(yīng)。

基于上述系統(tǒng)的另一個(gè)實(shí)施例中，所述駕駛員規(guī)范操作模型包括：規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型和不規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型；

所述不規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型包括：

駕駛員玩手機(jī)的狀態(tài)模型，是指駕駛員雙手或單手處于持手機(jī)狀態(tài)，眼睛脫離機(jī)車行駛正前方，并超過設(shè)定時(shí)間閾值的狀態(tài)；

駕駛員長時(shí)間不動(dòng)、假寐的狀態(tài)模型，是指駕駛員眼睛閉合、身體保持靜止，并超過設(shè)定時(shí)間閾值的狀態(tài)；

駕駛員離崗狀態(tài)模型，是指駕駛員離開駕駛員座位超過設(shè)定時(shí)間閾值的狀態(tài)；

駕駛員大幅度動(dòng)作狀態(tài)模型，是指駕駛員身體大幅度扭曲、眼睛脫離機(jī)車行駛正前方，并超過設(shè)定時(shí)間閾值的狀態(tài)。

基于上述系統(tǒng)的另一個(gè)實(shí)施例中，所述對不規(guī)范動(dòng)作的視頻圖像、事件點(diǎn)圖片及事件日志包括：

事件名稱、事件時(shí)間、事件發(fā)生的車型車次、事件圖片的文件名、源文件名。

本發(fā)明實(shí)施例提供的一種駕駛員異常行為狀態(tài)的智能圖像分析方法和告警系統(tǒng)，通過圖像采集設(shè)備實(shí)時(shí)采集駕駛員圖像信息，通過分析主機(jī)對采集的視頻圖像進(jìn)行自動(dòng)分析計(jì)算，判斷駕駛員是否處于不規(guī)范的駕駛狀態(tài)，對不規(guī)范的駕駛狀態(tài)，進(jìn)行告警，并自動(dòng)檢索不規(guī)范動(dòng)作的視頻圖像，采集不規(guī)范動(dòng)作的事件點(diǎn)圖片，對不規(guī)范動(dòng)作的視頻圖像、事件點(diǎn)圖片及事件日志以后，上傳至存儲(chǔ)設(shè)備，對駕駛員的不規(guī)范駕駛行為進(jìn)行分析、存儲(chǔ)、回放、告警，達(dá)到智能化的防范駕駛員不規(guī)范駕駛行為的目的，有效降低機(jī)車事故的發(fā)生概率。

下面通過附圖和實(shí)施例，對本發(fā)明的技術(shù)方案做進(jìn)一步的詳細(xì)描述。

附圖說明

構(gòu)成說明書的一部分的附圖描述了本發(fā)明的實(shí)施例，并且連同描述一起用于解釋本發(fā)明的原理。

參照附圖，根據(jù)下面的詳細(xì)描述，可以更加清楚地理解本發(fā)明，其中：

圖1為本發(fā)明駕駛員異常行為狀態(tài)的智能圖像分析方法的一個(gè)實(shí)施例的流程圖。

圖2為本發(fā)明駕駛員異常行為狀態(tài)的告警系統(tǒng)的一個(gè)實(shí)施例的結(jié)構(gòu)示意圖。

具體實(shí)施方式

現(xiàn)在將參照附圖來詳細(xì)描述本發(fā)明的各種示例性實(shí)施例。應(yīng)注意到：除非另外具體說明，否則在這些實(shí)施例中闡述的部件和步驟的相對布置、數(shù)字表達(dá)式和數(shù)值不限制本發(fā)明的范圍。

同時(shí)，應(yīng)當(dāng)明白，為了便于描述，附圖中所示出的各個(gè)部分的尺寸并不是按照實(shí)際的比例關(guān)系繪制的。

以下對至少一個(gè)示例性實(shí)施例的描述實(shí)際上僅僅是說明性的，決不作為對本發(fā)明及其應(yīng)用或使用的任何限制。

對于相關(guān)領(lǐng)域普通技術(shù)人員已知的技術(shù)、方法和設(shè)備可能不作詳細(xì)討論，但在適當(dāng)情況下，所述技術(shù)、方法和設(shè)備應(yīng)當(dāng)被視為說明書的一部分。

應(yīng)注意到：相似的標(biāo)號和字母在下面的附圖中表示類似項(xiàng)，因此，一旦某一項(xiàng)在一個(gè)附圖中被定義，則在隨后的附圖中不需要對其進(jìn)行進(jìn)一步討論。

圖1為本發(fā)明駕駛員異常行為狀態(tài)的智能圖像分析方法的一個(gè)實(shí)施例的流程圖，如圖1所示，該實(shí)施例的駕駛員異常行為狀態(tài)的智能圖像分析方法包括：

10，攝像裝置對機(jī)車駕駛室內(nèi)的駕駛員進(jìn)行圖像采集，對機(jī)車駕駛室內(nèi)的駕駛員圖像采集主要采集駕駛員的人臉圖像、手上動(dòng)作圖像、駕駛位置圖像和駕駛員大幅度的動(dòng)作圖像；

20，圖像分析設(shè)備對采集的圖像進(jìn)行智能分析計(jì)算，通過智能分析計(jì)算，解析駕駛員的駕駛狀態(tài)，建立駕駛員規(guī)范操作模型，所述駕駛員規(guī)范操作模型包括規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型和不規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型；

30，將采集圖像與機(jī)車駕駛員狀態(tài)模型比對，檢索不規(guī)范動(dòng)作的視頻圖像和事件點(diǎn)圖片，通過逐幀比對檢索分析的方法，識別出機(jī)車駕駛員在駕駛過程中的每一個(gè)不規(guī)范動(dòng)作，設(shè)定檢索視頻圖像時(shí)間閾值，自動(dòng)檢索出不規(guī)范動(dòng)作的檢索視頻圖像時(shí)間閾值內(nèi)的視頻圖像，對于機(jī)車駕駛員在駕駛過程中的每一個(gè)不規(guī)范動(dòng)作，自動(dòng)采集不規(guī)范動(dòng)作的事件點(diǎn)圖片；

40，分析主機(jī)判斷駕駛員是否處于不規(guī)范的駕駛狀態(tài)時(shí)進(jìn)行聲光告警；

50，不規(guī)范動(dòng)作視頻圖像、事件點(diǎn)圖片及事件日志，生成不規(guī)范動(dòng)作視頻文件數(shù)據(jù)庫。

所述不規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型包括：

駕駛員玩手機(jī)的狀態(tài)模型，是指駕駛員雙手或單手處于持手機(jī)狀態(tài)，眼睛脫離機(jī)車行駛正前方，并超過設(shè)定時(shí)間閾值的狀態(tài)，所述功能設(shè)置方式包括：系統(tǒng)推薦設(shè)定、單位統(tǒng)一設(shè)定、駕駛員設(shè)定，不規(guī)范動(dòng)作持續(xù)時(shí)間閾值設(shè)定；

駕駛員長時(shí)間不動(dòng)、假寐的狀態(tài)模型，是指駕駛員眼睛閉合、身體保持靜止，并超過設(shè)定時(shí)間閾值的狀態(tài)，所述功能設(shè)置方式包括：系統(tǒng)推薦設(shè)定、單位統(tǒng)一設(shè)定、駕駛員設(shè)定，不規(guī)范動(dòng)作持續(xù)時(shí)間閾值設(shè)定；

駕駛員離崗狀態(tài)模型，是指駕駛員離開駕駛員座位超過設(shè)定時(shí)間閾值的狀態(tài)，所述功能設(shè)置方式包括：系統(tǒng)推薦設(shè)定、單位統(tǒng)一設(shè)定、駕駛員設(shè)定，不規(guī)范動(dòng)作持續(xù)時(shí)間閾值設(shè)定；

駕駛員大幅度動(dòng)作狀態(tài)模型，是指駕駛員身體大幅度扭曲、眼睛脫離機(jī)車行駛正前方，并超過設(shè)定時(shí)間閾值的狀態(tài)，所述功能設(shè)置方式包括：系統(tǒng)推薦設(shè)定、單位統(tǒng)一設(shè)定、駕駛員設(shè)定，不規(guī)范動(dòng)作持續(xù)時(shí)間閾值設(shè)定。

所述設(shè)定檢索視頻圖像時(shí)間閾值可以自定義。

所述將不規(guī)范動(dòng)作視頻圖像、事件點(diǎn)圖片及事件日志，生成不規(guī)范動(dòng)作視頻文件數(shù)據(jù)庫包括：

事件名稱、事件時(shí)間、事件發(fā)生的車型車次、事件圖片的文件名、源文件名，數(shù)據(jù)庫采用標(biāo)準(zhǔn)數(shù)據(jù)庫。

根據(jù)本發(fā)明實(shí)施例的另一個(gè)方面，提供的一種駕駛員異常行為狀態(tài)的告警系統(tǒng)，圖2為本發(fā)明駕駛員異常行為狀態(tài)的告警系統(tǒng)的一個(gè)實(shí)施例的結(jié)構(gòu)示意圖，如圖2所示，所述駕駛員異常行為狀態(tài)的告警系統(tǒng)包括：圖像采集器1、電源設(shè)備2、分析主機(jī)3、存儲(chǔ)設(shè)備4，告警輸出模塊5；

所述圖像采集器1用于采集機(jī)車駕駛室內(nèi)駕駛員的圖像信息，所采集的駕駛員圖像信息包括：駕駛員的人臉圖像、手上動(dòng)作圖像、駕駛位置圖像和駕駛員大幅度的動(dòng)作圖像；

所述電源設(shè)備2為分析主機(jī)提供電力供應(yīng)；

所述分析主機(jī)3通過對圖像采集器1采集的視頻圖像與駕駛員規(guī)范操作模型的視頻圖像進(jìn)行逐幀對比，分析駕駛員的不規(guī)范動(dòng)作，并自動(dòng)檢索不規(guī)范動(dòng)作的視頻圖像，采集不規(guī)范動(dòng)作的事件點(diǎn)圖片，對不規(guī)范動(dòng)作進(jìn)行告警，對不規(guī)范動(dòng)作的視頻圖像、事件點(diǎn)圖片及事件日志；

所述存儲(chǔ)設(shè)備4對分析主機(jī)3生成的視頻文件進(jìn)行存儲(chǔ)；

所述告警輸出模塊5是接收分析主機(jī)3對采集的視頻圖像進(jìn)行自動(dòng)分析計(jì)算結(jié)果，判斷駕駛員是否處于不規(guī)范的駕駛狀態(tài)，對于不規(guī)范的駕駛狀態(tài)，進(jìn)行聲光告警。

所述圖像采集器1采集到駕駛員視頻圖像以后，將視頻圖像發(fā)送至分析主機(jī)3，分析主機(jī)3對采集的視頻圖像進(jìn)行自動(dòng)分析計(jì)算，判斷駕駛員是否處于不規(guī)范的駕駛狀態(tài)，對不規(guī)范的駕駛狀態(tài)，通過警輸出模塊5進(jìn)行告警，并自動(dòng)檢索不規(guī)范動(dòng)作的視頻圖像，采集不規(guī)范動(dòng)作的事件點(diǎn)圖片，對不規(guī)范動(dòng)作的視頻圖像、事件點(diǎn)圖片及事件日志以后，上傳至存儲(chǔ)設(shè)備4，電源設(shè)備2為分析主機(jī)3提供電力供應(yīng)。

所述駕駛員規(guī)范操作模型包括：規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型和不規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型；

所述不規(guī)范動(dòng)作的機(jī)車駕駛員狀態(tài)模型包括：

駕駛員玩手機(jī)的狀態(tài)模型，是指駕駛員雙手或單手處于持手機(jī)狀態(tài)，眼睛脫離機(jī)車行駛正前方，并超過設(shè)定時(shí)間閾值的狀態(tài)，所述功能設(shè)置方式包括：系統(tǒng)推薦設(shè)定、單位統(tǒng)一設(shè)定、駕駛員設(shè)定，不規(guī)范動(dòng)作持續(xù)時(shí)間閾值設(shè)定；

駕駛員長時(shí)間不動(dòng)、假寐的狀態(tài)模型，是指駕駛員眼睛閉合、身體保持靜止，并超過設(shè)定時(shí)間閾值的狀態(tài)，所述功能設(shè)置方式包括：系統(tǒng)推薦設(shè)定、單位統(tǒng)一設(shè)定、駕駛員設(shè)定，不規(guī)范動(dòng)作持續(xù)時(shí)間閾值設(shè)定；

駕駛員離崗狀態(tài)模型，是指駕駛員離開駕駛員座位超過設(shè)定時(shí)間閾值的狀態(tài)，所述功能設(shè)置方式包括：系統(tǒng)推薦設(shè)定、單位統(tǒng)一設(shè)定、駕駛員設(shè)定，不規(guī)范動(dòng)作持續(xù)時(shí)間閾值設(shè)定；

駕駛員大幅度動(dòng)作狀態(tài)模型，是指駕駛員身體大幅度扭曲、眼睛脫離機(jī)車行駛正前方，并超過設(shè)定時(shí)間閾值的狀態(tài)，所述功能設(shè)置方式包括：系統(tǒng)推薦設(shè)定、單位統(tǒng)一設(shè)定、駕駛員設(shè)定，不規(guī)范動(dòng)作持續(xù)時(shí)間閾值設(shè)定。

所述對不規(guī)范動(dòng)作的視頻圖像、事件點(diǎn)圖片及事件日志包括：

事件名稱、事件時(shí)間、事件發(fā)生的車型車次、事件圖片的文件名、源文件名。

本說明書中各個(gè)實(shí)施例均采用遞進(jìn)的方式描述，每個(gè)實(shí)施例重點(diǎn)說明的都是與其它實(shí)施例的不同之處，各個(gè)實(shí)施例之間相同或相似的部分相互參見即可。對于系統(tǒng)實(shí)施例而言，由于其與方法實(shí)施例基本對應(yīng)，所以描述的比較簡單，相關(guān)之處參見方法實(shí)施例的部分說明即可。

可能以許多方式來實(shí)現(xiàn)本發(fā)明的方法和系統(tǒng)。例如，可通過軟件、硬件、固件或者軟件、硬件、固件的任何組合來實(shí)現(xiàn)本發(fā)明的方法和系統(tǒng)。用于所述方法的步驟的上述順序僅是為了進(jìn)行說明，本發(fā)明的方法的步驟不限于以上具體描述的順序，除非以其它方式特別說明。此外，在一些實(shí)施例中，還可將本發(fā)明實(shí)施為記錄在記錄介質(zhì)中的程序，這些程序包括用于實(shí)現(xiàn)根據(jù)本發(fā)明的方法的機(jī)器可讀指令。因而，本發(fā)明還覆蓋存儲(chǔ)用于執(zhí)行根據(jù)本發(fā)明的方法的程序的記錄介質(zhì)。

本發(fā)明的描述是為了示例和描述起見而給出的，而并不是無遺漏的或者將本發(fā)明限于所公開的形式。很多修改和變化對于本領(lǐng)域的普通技術(shù)人員而言是顯然的。選擇和描述實(shí)施例是為了更好說明本發(fā)明的原理和實(shí)際應(yīng)用，并且使本領(lǐng)域的普通技術(shù)人員能夠理解本發(fā)明從而設(shè)計(jì)適于特定用途的帶有各種修改的各種實(shí)施例。