專利名稱:視頻檢索方法、系統(tǒng)、設(shè)備及視頻存儲(chǔ)方法、系統(tǒng)的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及視頻監(jiān)控技術(shù)領(lǐng)域,具體涉及視頻檢索方法、系統(tǒng)、設(shè)備及視頻存儲(chǔ)方
法、系統(tǒng)。
背景技術(shù):
隨著多媒體技術(shù)和網(wǎng)絡(luò)技術(shù)的飛速發(fā)展,視頻監(jiān)控技術(shù)在安防的各個(gè)領(lǐng)域得到廣 泛的應(yīng)用。對(duì)這些海量的而且包含大量非結(jié)構(gòu)化信息的監(jiān)控視頻數(shù)據(jù)進(jìn)行組織、表達(dá)、管 理、查詢和檢索成為迫切的需求。因此,監(jiān)控視頻的智能視頻檢索技術(shù)成為近年來安防領(lǐng)域 的重要研究課題之一。 現(xiàn)有技術(shù)在進(jìn)行視頻內(nèi)容回查檢索的時(shí)候,多采用人工手動(dòng)回查的方式,也即采 用播放所保存的視頻,并對(duì)視頻進(jìn)行人工判斷,這種回查方式效率低下且容易出現(xiàn)疏漏。人 工手動(dòng)回查時(shí),視頻播放的速度不能太快,否則目標(biāo)物體很可能一閃即過而不被注意到,因 此一段10小時(shí)的視頻,正常速度從頭到尾進(jìn)行回查的話就需要10個(gè)小時(shí)左右,而很可能有 意義的視頻內(nèi)容只有幾秒鐘或者幾十秒鐘,因此效率十分低下。而且對(duì)于人工回查,回查人 員長(zhǎng)時(shí)間地觀看視頻過程中,注意力不能保持長(zhǎng)時(shí)間集中,很容易產(chǎn)生疲勞,因此即便是按 正常速度回查,也很可能出現(xiàn)疏漏而錯(cuò)過相關(guān)信息。 另外,現(xiàn)有的視頻監(jiān)控系統(tǒng)在存儲(chǔ)視頻圖像時(shí),一般是將攝像頭所采集到的視頻 實(shí)時(shí)、完整地保存在數(shù)據(jù)庫中,以備后續(xù)回查等應(yīng)用,但這需要較大的存儲(chǔ)空間。 一般情況 下,監(jiān)控視頻中絕大部分(通常情況下80%左右)數(shù)據(jù)都是只包含監(jiān)控場(chǎng)景的數(shù)據(jù),這些數(shù) 據(jù)對(duì)于安防毫無意義。如果把所有的監(jiān)控?cái)?shù)據(jù)都保存下來,就會(huì)占用大量的硬盤空間,導(dǎo)致 數(shù)據(jù)爆炸的后果。假設(shè)視頻圖像為320X240的彩色圖像,采用MPG4的編碼方式,壓縮率為 5%,則保存一天的視頻所需的存儲(chǔ)空間至少20G。
發(fā)明內(nèi)容
本發(fā)明提供視頻檢索方法、系統(tǒng)及設(shè)備,以提高視頻檢索效率;
本發(fā)明還提供視頻存儲(chǔ)方法及系統(tǒng),以減少視頻存儲(chǔ)空間的占用。
本發(fā)明的技術(shù)方案是這樣實(shí)現(xiàn)的
—種視頻檢索方法,包括 對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,若發(fā)現(xiàn)視頻圖像中存在危險(xiǎn)事件,則記錄該危 險(xiǎn)事件的描述信息,該危險(xiǎn)事件描述信息中至少包含存在危險(xiǎn)事件的圖像標(biāo)識(shí);
當(dāng)要檢索存在危險(xiǎn)事件的視頻圖像時(shí),接收檢索條件,將檢索條件與記錄的危險(xiǎn) 事件描述信息匹配,若匹配上,則根據(jù)危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲 取視頻圖像,并將視頻圖像顯示給用戶。 所述危險(xiǎn)事件為入侵事件,和/或逆行事件,和/或多人聚集事件,和/或危險(xiǎn)物 遺留事件,和/或違規(guī)停車事件,和/或貴重物體丟失事件。 所述危險(xiǎn)事件描述信息進(jìn)一步包括危險(xiǎn)事件類型、發(fā)生位置、發(fā)生時(shí)刻、持續(xù)時(shí)
4長(zhǎng)中的一種或任意組合。 所述發(fā)現(xiàn)視頻圖像中存在危險(xiǎn)事件之后進(jìn)一步包括對(duì)危險(xiǎn)事件中的運(yùn)動(dòng)物體進(jìn) 行類型,和/或身份,和/或特征檢測(cè), 所述危險(xiǎn)事件描述信息進(jìn)一步包括危險(xiǎn)事件中的運(yùn)動(dòng)物體的類型、位置、身份、 特征、出現(xiàn)時(shí)刻、持續(xù)時(shí)長(zhǎng)中的一種或任意組合。 所述檢索條件包含查詢時(shí)段、危險(xiǎn)事件的類型、發(fā)生位置、發(fā)生時(shí)刻、持續(xù)時(shí)長(zhǎng)中 的一種或任意組合, 和/或,危險(xiǎn)事件中的運(yùn)動(dòng)物體的類型、位置、身份、特征、出現(xiàn)時(shí)刻、持續(xù)時(shí)長(zhǎng)中 的一種或任意組合。
所述運(yùn)動(dòng)物體的類型為人臉,或人體,或車輛, 所述運(yùn)動(dòng)物體的特征為人體的體形,或人體的衣服顏色、或人體的性別,或車輛 的型號(hào),或車輛的顏色。 所述方法進(jìn)一步包括為每類危險(xiǎn)事件選擇一幀最具代表性的圖像,將該圖像標(biāo) 識(shí)記錄在該危險(xiǎn)事件的描述信息中。 所述最具代表性的圖像為運(yùn)動(dòng)物體面積最大的圖像或運(yùn)動(dòng)物體最靠近預(yù)設(shè)目標(biāo) 區(qū)域的圖像。 —種視頻檢索系統(tǒng),包括 視頻分析設(shè)備,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,若發(fā)現(xiàn)視頻圖像中存在危險(xiǎn)事 件,則將危險(xiǎn)事件描述信息發(fā)送給視頻檢索設(shè)備,危險(xiǎn)事件描述信息至少包含存在危險(xiǎn)事 件的圖像標(biāo)識(shí); 視頻檢索設(shè)備,存儲(chǔ)危險(xiǎn)事件描述信息;接收檢索條件,將檢索條件與各危險(xiǎn)事件 描述信息匹配,若匹配上,則將危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí)顯示給用戶,或者,根據(jù)危 險(xiǎn)事件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲取視頻圖像,并將視頻圖像顯示給用戶。
所述視頻分析設(shè)備包括 危險(xiǎn)事件檢測(cè)模塊,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,對(duì)于每幀視頻圖像,若發(fā)現(xiàn) 該幀視頻圖像中存在危險(xiǎn)事件,則將危險(xiǎn)事件描述信息發(fā)送給運(yùn)動(dòng)物體分析模塊;
運(yùn)動(dòng)物體分析模塊,接收危險(xiǎn)事件描述信息,對(duì)危險(xiǎn)事件中的運(yùn)動(dòng)物體進(jìn)行檢測(cè), 將檢測(cè)結(jié)果記錄在危險(xiǎn)事件描述信息中,將危險(xiǎn)事件描述信息發(fā)送給視頻檢索設(shè)備。
—種視頻檢索設(shè)備,包括 危險(xiǎn)事件描述模塊,存儲(chǔ)危險(xiǎn)事件描述信息,該信息至少包含存在危險(xiǎn)事件的圖 像標(biāo)識(shí); 檢索模塊,接收檢索條件,將該檢索條件與危險(xiǎn)事件描述模塊中的各危險(xiǎn)事件描 述信息匹配,若匹配上,則將危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí)顯示給用戶,或者,根據(jù)危險(xiǎn) 事件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲取視頻圖像,并將視頻圖像顯示給用戶。
—種視頻存儲(chǔ)方法,包括 對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,對(duì)于每幀視頻圖像,根據(jù)檢測(cè)和跟蹤結(jié)果以及 預(yù)設(shè)的危險(xiǎn)事件觸發(fā)規(guī)則,判斷該幀圖像中是否存在危險(xiǎn)事件,若是,則存儲(chǔ)該視頻圖像; 否則,丟棄該幀視頻圖像。 所述危險(xiǎn)事件為入侵事件,和/或逆行事件,和/或多人聚集事件,和/或危險(xiǎn)物遺留事件,和/或違規(guī)停車事件,和/或貴重物體丟失事件。
—種視頻存儲(chǔ)系統(tǒng),包括 視頻分析設(shè)備,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,對(duì)于每幀視頻圖像,根據(jù)檢測(cè)和 跟蹤結(jié)果以及預(yù)設(shè)的危險(xiǎn)事件觸發(fā)規(guī)則,判斷該幀圖像中是否存在危險(xiǎn)事件,若是,將該幀 視頻圖像存儲(chǔ)到存儲(chǔ)設(shè)備上;否則,丟棄該幀視頻圖像;
存儲(chǔ)設(shè)備,存儲(chǔ)存在危險(xiǎn)事件的視頻圖像。 與現(xiàn)有技術(shù)相比,本發(fā)明中,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,若發(fā)現(xiàn)視頻圖像中 存在危險(xiǎn)事件,則記錄該危險(xiǎn)事件的描述信息,該危險(xiǎn)事件描述信息中至少包含存在危險(xiǎn) 事件的圖像標(biāo)識(shí);當(dāng)要檢索存在危險(xiǎn)事件的視頻圖像時(shí),接收檢索條件,將檢索條件與記錄 的危險(xiǎn)事件描述信息匹配,若匹配上,則根據(jù)危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ) 設(shè)備獲取視頻圖像,并將視頻圖像顯示給用戶。本發(fā)明減少了人工的參與,降低了檢索工作 量,且加快了檢索速度、提高了檢索精確度。 另外,本發(fā)明只將存在危險(xiǎn)事件的視頻存儲(chǔ),這樣不僅保存了有效視頻,且大大節(jié) 省了存儲(chǔ)空間。
圖1為本發(fā)明實(shí)施例提供的在視頻圖像中檢測(cè)危險(xiǎn)事件的流程圖; 圖2為本發(fā)明實(shí)施例提供的檢索存在危險(xiǎn)事件的視頻圖像的流程圖; 圖3為本發(fā)明實(shí)施例提供的視頻檢索系統(tǒng)的組成圖; 圖4為本發(fā)明實(shí)施例提供的視頻分析設(shè)備的結(jié)構(gòu)示意圖; 圖5為本發(fā)明實(shí)施例提供的視頻檢索設(shè)備的結(jié)構(gòu)示意圖; 圖6為本發(fā)明實(shí)施例提供的視頻存儲(chǔ)系統(tǒng)的組成圖。
具體實(shí)施例方式
本發(fā)明的基本思想是對(duì)每幀視頻圖像進(jìn)行危險(xiǎn)事件檢測(cè),并記錄危險(xiǎn)事件描述 信息;當(dāng)用戶要檢索存在危險(xiǎn)事件的視頻圖像時(shí),輸入檢索條件,視頻檢索設(shè)備先將檢索條 件與各危險(xiǎn)事件描述信息匹配,若匹配上,再根據(jù)危險(xiǎn)事件描述信息找到存在危險(xiǎn)事件的 視頻圖像,將視頻圖像顯示給用戶。 本發(fā)明還可只存儲(chǔ)存在危險(xiǎn)事件的視頻圖像,以節(jié)省存儲(chǔ)空間。
下面結(jié)合附圖及具體實(shí)施例對(duì)本發(fā)明再作進(jìn)一步詳細(xì)的說明。 圖l為本發(fā)明實(shí)施例提供的在視頻圖像中檢測(cè)危險(xiǎn)事件的流程圖,如圖l所示,其 具體步驟如下 步驟100 :預(yù)先設(shè)置危險(xiǎn)事件觸發(fā)規(guī)則。
步驟101 :攝像頭采集監(jiān)控場(chǎng)景下的視頻圖像。
對(duì)每幀視頻圖像進(jìn)行如下步驟102 108的處理
步驟102 :對(duì)該幀視頻圖像進(jìn)行運(yùn)動(dòng)檢測(cè)與跟蹤。
步驟103 :判斷是否檢測(cè)到運(yùn)動(dòng)物體,若是,執(zhí)行步驟104 ;否則,本流程結(jié)束。
步驟104 :記錄各運(yùn)動(dòng)物體的運(yùn)動(dòng)信息如位置、尺寸、速度、運(yùn)動(dòng)軌跡等。 通常每個(gè)運(yùn)動(dòng)物體以一個(gè)矩形框標(biāo)定,則運(yùn)動(dòng)物體的位置可以運(yùn)動(dòng)物體的左上端點(diǎn)和右下端點(diǎn)坐標(biāo)來表示;運(yùn)動(dòng)物體的尺寸可以矩形框的面積表示;運(yùn)動(dòng)物體的運(yùn)動(dòng)軌跡
可以運(yùn)動(dòng)物體在連續(xù)幀中的中心點(diǎn)連線表示。 本步驟可采用現(xiàn)有技術(shù)實(shí)現(xiàn)。 步驟105 :根據(jù)運(yùn)動(dòng)物體的運(yùn)動(dòng)信息和預(yù)先設(shè)置的危險(xiǎn)事件觸發(fā)規(guī)則,判斷當(dāng)前 幀圖像中是否存在危險(xiǎn)事件,若是,執(zhí)行步驟106 ;否則,不作處理,本流程結(jié)束。
對(duì)于不同類型的危險(xiǎn)事件其觸發(fā)規(guī)則不同,例如
—、危險(xiǎn)事件為入侵。
觸發(fā)規(guī)則可為若進(jìn)入預(yù)設(shè)警戒區(qū)域內(nèi)的運(yùn)動(dòng)物體的面積與運(yùn)動(dòng)物體總面積的比
值大于預(yù)設(shè)百分比,則確定入侵事件發(fā)生。
二、危險(xiǎn)事件為逆行。 觸發(fā)規(guī)則可為若有運(yùn)動(dòng)物體的運(yùn)動(dòng)方向與預(yù)設(shè)運(yùn)動(dòng)正向的夾角位于預(yù)設(shè)范圍之 外,則確定逆行事件發(fā)生。
在實(shí)際應(yīng)用中,由于運(yùn)動(dòng)物體的速度可由幅度和角度兩個(gè)參數(shù)表示,因此,可由速 度的角度來確定運(yùn)動(dòng)物體是否發(fā)生了逆行若速度的角度與預(yù)設(shè)運(yùn)動(dòng)正向的夾角在預(yù)設(shè)范 圍之外,則確認(rèn)該運(yùn)動(dòng)物體發(fā)生逆行。
三、危險(xiǎn)事件為多人聚集。 觸發(fā)規(guī)則可為若在一個(gè)區(qū)域內(nèi)人體的數(shù)量大于預(yù)設(shè)數(shù)目,則確認(rèn)多人聚集事件 發(fā)生。
四、危險(xiǎn)事件為危險(xiǎn)物遺留。
觸發(fā)規(guī)則可為若一個(gè)運(yùn)動(dòng)物體從某一時(shí)刻起靜止,且靜止?fàn)顟B(tài)持續(xù)時(shí)長(zhǎng)超過預(yù) 定時(shí)長(zhǎng),則確定有危險(xiǎn)物遺留事件發(fā)生。
五、危險(xiǎn)事件為違規(guī)停車事件。
觸發(fā)規(guī)則可為若預(yù)設(shè)禁止停車區(qū)域發(fā)現(xiàn)車輛,則確定違規(guī)停車事件發(fā)生。
六、危險(xiǎn)事件為貴重物體丟失。 觸發(fā)規(guī)則可為若預(yù)設(shè)貴重物體所在區(qū)域的像素值發(fā)生變化,且變化持續(xù)時(shí)長(zhǎng)超 過預(yù)定時(shí)長(zhǎng),則確認(rèn)有貴重物體丟失事件發(fā)生。 步驟106 :判斷該危險(xiǎn)事件是否為新發(fā)生事件,若是,執(zhí)行步驟107 ;否則,執(zhí)行步 驟108。 步驟107 :記錄該危險(xiǎn)事件的描述信息如該危險(xiǎn)事件的類型、發(fā)生時(shí)刻、持續(xù)時(shí) 長(zhǎng)、發(fā)生位置等,本流程結(jié)束。 進(jìn)一步地,危險(xiǎn)事件的描述信息還可包括危險(xiǎn)事件中的每個(gè)運(yùn)動(dòng)物體的描述信 息如位置、出現(xiàn)時(shí)刻、持續(xù)時(shí)長(zhǎng)等。此時(shí),若危險(xiǎn)事件中有新的運(yùn)動(dòng)物體出現(xiàn),就需在危險(xiǎn) 事件描述信息中增加該運(yùn)動(dòng)物體的描述信息;對(duì)于已存在的運(yùn)動(dòng)物體,則需更新危險(xiǎn)事件 描述信息中該運(yùn)動(dòng)物體的描述信息。 運(yùn)動(dòng)物體的位置可以運(yùn)動(dòng)物體的中心點(diǎn)表示,或者以運(yùn)動(dòng)物體的外框如左上端 點(diǎn)和右下端點(diǎn)表示。
步驟108 :更新已記錄的該危險(xiǎn)事件的描述信息,如該危險(xiǎn)事件的持續(xù)時(shí)長(zhǎng)、發(fā)
生位置等。
例如若危險(xiǎn)事件為入侵,且該危險(xiǎn)事件已存在于之前幀中,則當(dāng)前幀只需更新持續(xù)時(shí)長(zhǎng)即可。 在實(shí)際應(yīng)用中,步驟105中,在判定當(dāng)前幀存在危險(xiǎn)事件后,還可進(jìn)一步對(duì)危險(xiǎn)事 件中的每個(gè)運(yùn)動(dòng)物體進(jìn)行類型檢測(cè)如人臉、人體、車輛檢測(cè),并在危險(xiǎn)事件描述信息中記 錄各運(yùn)動(dòng)物體的類型信息。 同時(shí),在確定運(yùn)動(dòng)物體的類型之后,還可進(jìn)一步識(shí)別各運(yùn)動(dòng)物體的身份,并在危險(xiǎn) 事件描述信息中記錄各運(yùn)動(dòng)物體的身份。例如若一個(gè)運(yùn)動(dòng)物體為人臉,則將該運(yùn)動(dòng)物體與 人臉數(shù)據(jù)庫中的各人臉匹配,以確認(rèn)該運(yùn)動(dòng)物體的身份;若一個(gè)運(yùn)動(dòng)物體為車輛,則可識(shí)別 該車輛的車牌號(hào)碼。 另外,在確定運(yùn)動(dòng)物體的類型之后,還可進(jìn)一步提取各運(yùn)動(dòng)物體的特征,并在危險(xiǎn) 事件描述信息中記錄各運(yùn)動(dòng)物體的特征信息。例如若一個(gè)運(yùn)動(dòng)物體為人體,則可提取該人 體的體形特征如高矮胖瘦、衣服的顏色、性別等;若一個(gè)運(yùn)動(dòng)物體為車輛,則可提取該車 輛的車型、顏色等特征。 在實(shí)際應(yīng)用中,還可為每類危險(xiǎn)事件選擇一幀最具代表性的圖像,例如可在存在 該危險(xiǎn)事件的視頻片段中,選擇一幀包含運(yùn)動(dòng)物體面積最大的圖像,或者選擇一幀運(yùn)動(dòng)物 體最靠近預(yù)設(shè)目標(biāo)區(qū)域的圖像作為最具代表性的圖像,在危險(xiǎn)事件描述信息中記錄該最具 代表性圖像的標(biāo)識(shí)如幀序號(hào)、接收時(shí)刻等。
在實(shí)際應(yīng)用中,步驟105中,在判定當(dāng)前幀存在危險(xiǎn)事件后,可保存當(dāng)前幀圖像,
而對(duì)于不存在危險(xiǎn)事件的視頻圖像則不保存,這樣,可以大大節(jié)省存儲(chǔ)空間。
圖2為本發(fā)明實(shí)施例提供的檢索存在危險(xiǎn)事件的視頻圖像的流程圖,如圖2所示,
其具體步驟如下 步驟201 :用戶要檢索存在危險(xiǎn)事件的視頻圖像,向視頻檢索設(shè)備輸入檢索條件。
當(dāng)危險(xiǎn)事件多于一類時(shí),該檢索條件至少包含危險(xiǎn)事件的類型,還可包含該 危險(xiǎn)事件的其它描述信息中的一種或任意組合,還可包含查詢時(shí)段,例如逆行+車輛 +08/12/01 8:00-20:00,即要檢索08年12月1日8:00-20:00之間發(fā)生了逆行事件且逆行 對(duì)象為車輛的視頻圖像,或者入侵+人臉+張三,即要檢索發(fā)生了入侵事件且入侵區(qū)域包 含張三的臉的視頻圖像。 步驟202 :視頻檢索設(shè)備接收檢索條件,將該檢索條件與記錄的各危險(xiǎn)事件描述 信息依次匹配。 步驟203 :視頻檢索設(shè)備判斷是否匹配上,若是,執(zhí)行步驟205 ;否則,執(zhí)行步驟 204。 步驟204 :輸出"無符合檢索條件的視頻"的字樣給用戶,本流程結(jié)束。
步驟205 :視頻檢索設(shè)備根據(jù)匹配的危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí)如發(fā)生時(shí)
刻、持續(xù)時(shí)長(zhǎng)等,在視頻存儲(chǔ)設(shè)備中查找視頻,將查找到的視頻顯示給用戶。 若視頻檢索設(shè)備不與視頻存儲(chǔ)設(shè)備相連,則視頻檢索設(shè)備可以只將危險(xiǎn)事件描述
信息中的圖像標(biāo)識(shí)顯示給用戶,用戶根據(jù)圖像標(biāo)識(shí)如發(fā)生時(shí)刻、持續(xù)時(shí)長(zhǎng)等,從視頻存儲(chǔ)
設(shè)備獲取視頻圖像。 若檢索條件中除了包含危險(xiǎn)事件類型外,還包含查詢時(shí)段,則視頻檢索設(shè)備在將 檢索條件與各危險(xiǎn)事件描述信息匹配時(shí),會(huì)首先將檢索條件中的危險(xiǎn)事件類型與危險(xiǎn)事件 描述信息中的危險(xiǎn)事件類型匹配,若匹配上,則判斷危險(xiǎn)事件描述信息中的發(fā)生時(shí)刻是否位于查詢時(shí)段內(nèi),若位于,則判斷危險(xiǎn)事件描述信息中的發(fā)生時(shí)刻+持續(xù)時(shí)長(zhǎng)所得時(shí)刻是 否在查詢時(shí)段外,若是,則將發(fā)生時(shí)刻至查詢時(shí)段的結(jié)束時(shí)刻之間的視頻顯示給用戶;否 則,將發(fā)生時(shí)刻至發(fā)生時(shí)刻+持續(xù)時(shí)長(zhǎng)所得時(shí)刻之間的視頻顯示給用戶。 當(dāng)危險(xiǎn)事件描述信息中包含最具代表性圖像標(biāo)識(shí)時(shí),用戶可在檢索條件中設(shè)置 "要求輸出最具代表性圖像"項(xiàng)目,視頻檢索設(shè)備接收到檢索條件后,發(fā)現(xiàn)該項(xiàng)目,則從危險(xiǎn) 事件描述信息中獲取最具代表性圖像標(biāo)識(shí),然后從視頻存儲(chǔ)設(shè)備獲取該最具代表性圖像顯 示給用戶。 在實(shí)際應(yīng)用中,用戶可同時(shí)輸入多組檢索條件,視頻檢索設(shè)備可順序?qū)⒏鹘M檢索 條件對(duì)應(yīng)的視頻顯示給用戶。 圖3為本發(fā)明實(shí)施例提供的視頻檢索系統(tǒng)的組成圖,如圖3所示,其主要包括視 頻分析設(shè)備31和視頻檢索設(shè)備32,其中 視頻分析設(shè)備31 :接收視頻序列,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,若發(fā)現(xiàn)視頻 圖像中存在危險(xiǎn)事件,則將危險(xiǎn)事件描述信息發(fā)送給視頻檢索設(shè)備32,危險(xiǎn)事件描述信息 至少包含存在危險(xiǎn)事件的圖像標(biāo)識(shí)。 視頻檢索設(shè)備32 :存儲(chǔ)視頻分析設(shè)備31發(fā)來的危險(xiǎn)事件描述信息;接收用戶輸入 的檢索條件,將檢索條件與各危險(xiǎn)事件描述信息匹配,若匹配上,則將危險(xiǎn)事件描述信息中 的圖像標(biāo)識(shí)顯示給用戶,或者,根據(jù)危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲取 視頻圖像,并將視頻圖像顯示給用戶。 在實(shí)際應(yīng)用中,如圖4所示,視頻分析設(shè)備31可包括危險(xiǎn)事件檢測(cè)模塊311和運(yùn) 動(dòng)物體分析模塊312,其中 危險(xiǎn)事件檢測(cè)模塊311 :接收視頻序列,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,對(duì)于每 幀視頻圖像,若發(fā)現(xiàn)該幀視頻圖像中存在危險(xiǎn)事件,則將危險(xiǎn)事件描述信息發(fā)送給運(yùn)動(dòng)物 體分析模塊312。 運(yùn)動(dòng)物體分析模塊312 :接收危險(xiǎn)事件檢測(cè)模塊311發(fā)來的危險(xiǎn)事件描述信息,對(duì) 危險(xiǎn)事件中的運(yùn)動(dòng)物體進(jìn)行檢測(cè),將檢測(cè)結(jié)果記錄在危險(xiǎn)事件描述信息中,將危險(xiǎn)事件描 述信息發(fā)送給視頻檢索設(shè)備32。 圖5為視頻檢索設(shè)備32的結(jié)構(gòu)示意圖,如圖5所示,其主要包括危險(xiǎn)事件描述模 塊321和檢索模塊322,其中 危險(xiǎn)事件描述模塊321 :存儲(chǔ)視頻分析設(shè)備31發(fā)來的危險(xiǎn)事件描述信息,該信息 至少包含存在危險(xiǎn)事件的圖像標(biāo)識(shí)。 檢索模塊322 :接收用戶輸入的檢索條件,將該檢索條件與危險(xiǎn)事件描述模塊321 中的各危險(xiǎn)事件描述信息匹配,若匹配上,則將危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí)顯示給用 戶,或者,根據(jù)危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲取視頻圖像,并將視頻 圖像顯示給用戶。 圖6為本發(fā)明實(shí)施例提供的視頻存儲(chǔ)系統(tǒng)的組成圖,如圖6所示,其主要包括視 頻分析設(shè)備61和存儲(chǔ)設(shè)備62,其中 視頻分析設(shè)備61 :接收視頻序列,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,對(duì)于每幀視 頻圖像,根據(jù)檢測(cè)和跟蹤結(jié)果以及預(yù)設(shè)的危險(xiǎn)事件觸發(fā)規(guī)則,判斷該幀圖像中是否存在危 險(xiǎn)事件,若是,將該幀視頻圖像存儲(chǔ)到存儲(chǔ)設(shè)備62上;否則,丟棄該幀視頻圖像。
存儲(chǔ)設(shè)備62 :存儲(chǔ)存在危險(xiǎn)事件的視頻圖像。 以上所述僅為本發(fā)明的過程及方法實(shí)施例,并不用以限制本發(fā)明,凡在本發(fā)明的 精神和原則之內(nèi)所做的任何修改、等同替換、改進(jìn)等,均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
權(quán)利要求
一種視頻檢索方法,其特征在于,該方法包括對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,若發(fā)現(xiàn)視頻圖像中存在危險(xiǎn)事件,則記錄該危險(xiǎn)事件的描述信息,該危險(xiǎn)事件描述信息中至少包含存在危險(xiǎn)事件的圖像標(biāo)識(shí);當(dāng)要檢索存在危險(xiǎn)事件的視頻圖像時(shí),接收檢索條件,將檢索條件與記錄的危險(xiǎn)事件描述信息匹配,若匹配上,則根據(jù)危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲取視頻圖像,并將視頻圖像顯示給用戶。
2. 如權(quán)利要求1所述的方法,其特征在于,所述危險(xiǎn)事件為入侵事件,和/或逆行事 件,和/或多人聚集事件,和/或危險(xiǎn)物遺留事件,和/或違規(guī)停車事件,和/或貴重物體丟 失事件。
3. 如權(quán)利要求1所述的方法,其特征在于,所述危險(xiǎn)事件描述信息進(jìn)一步包括危險(xiǎn)事 件類型、發(fā)生位置、發(fā)生時(shí)刻、持續(xù)時(shí)長(zhǎng)中的一種或任意組合。
4. 如權(quán)利要求1所述的方法,其特征在于,所述發(fā)現(xiàn)視頻圖像中存在危險(xiǎn)事件之后進(jìn) 一步包括對(duì)危險(xiǎn)事件中的運(yùn)動(dòng)物體進(jìn)行類型,和/或身份,和/或特征檢測(cè),所述危險(xiǎn)事件描述信息進(jìn)一步包括危險(xiǎn)事件中的運(yùn)動(dòng)物體的類型、位置、身份、特征、 出現(xiàn)時(shí)刻、持續(xù)時(shí)長(zhǎng)中的一種或任意組合。
5. 如權(quán)利要求1所述的方法,其特征在于,所述檢索條件包含查詢時(shí)段、危險(xiǎn)事件的 類型、發(fā)生位置、發(fā)生時(shí)刻、持續(xù)時(shí)長(zhǎng)中的一種或任意組合,和/或,危險(xiǎn)事件中的運(yùn)動(dòng)物體的類型、位置、身份、特征、出現(xiàn)時(shí)刻、持續(xù)時(shí)長(zhǎng)中的一 種或任意組合。
6. 如權(quán)利要求5所述的方法,其特征在于,所述運(yùn)動(dòng)物體的類型為人臉,或人體,或車輛,所述運(yùn)動(dòng)物體的特征為人體的體形,或人體的衣服顏色、或人體的性別,或車輛的型 號(hào),或車輛的顏色。
7. 如權(quán)利要求l所述的方法,其特征在于,所述方法進(jìn)一步包括為每類危險(xiǎn)事件選擇 一幀最具代表性的圖像,將該圖像標(biāo)識(shí)記錄在該危險(xiǎn)事件的描述信息中。
8. 如權(quán)利要求7所述的方法,其特征在于,所述最具代表性的圖像為運(yùn)動(dòng)物體面積最 大的圖像或運(yùn)動(dòng)物體最靠近預(yù)設(shè)目標(biāo)區(qū)域的圖像。
9. 一種視頻檢索系統(tǒng),其特征在于,包括視頻分析設(shè)備,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,若發(fā)現(xiàn)視頻圖像中存在危險(xiǎn)事件,則 將危險(xiǎn)事件描述信息發(fā)送給視頻檢索設(shè)備,危險(xiǎn)事件描述信息至少包含存在危險(xiǎn)事件的 圖像標(biāo)識(shí);視頻檢索設(shè)備,存儲(chǔ)危險(xiǎn)事件描述信息;接收檢索條件,將檢索條件與各危險(xiǎn)事件描述 信息匹配,若匹配上,則將危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí)顯示給用戶,或者,根據(jù)危險(xiǎn)事 件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲取視頻圖像,并將視頻圖像顯示給用戶。
10. 如權(quán)利要求9所述的系統(tǒng),其特征在于,所述視頻分析設(shè)備包括 危險(xiǎn)事件檢測(cè)模塊,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,對(duì)于每幀視頻圖像,若發(fā)現(xiàn)該幀視頻圖像中存在危險(xiǎn)事件,則將危險(xiǎn)事件描述信息發(fā)送給運(yùn)動(dòng)物體分析模塊;運(yùn)動(dòng)物體分析模塊,接收危險(xiǎn)事件描述信息,對(duì)危險(xiǎn)事件中的運(yùn)動(dòng)物體進(jìn)行檢測(cè),將檢 測(cè)結(jié)果記錄在危險(xiǎn)事件描述信息中,將危險(xiǎn)事件描述信息發(fā)送給視頻檢索設(shè)備。
11. 一種視頻檢索設(shè)備,其特征在于,包括危險(xiǎn)事件描述模塊,存儲(chǔ)危險(xiǎn)事件描述信息,該信息至少包含存在危險(xiǎn)事件的圖像標(biāo)識(shí);檢索模塊,接收檢索條件,將該檢索條件與危險(xiǎn)事件描述模塊中的各危險(xiǎn)事件描述信 息匹配,若匹配上,則將危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí)顯示給用戶,或者,根據(jù)危險(xiǎn)事件 描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲取視頻圖像,并將視頻圖像顯示給用戶。
12. —種視頻存儲(chǔ)方法,其特征在于,該方法包括對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,對(duì)于每幀視頻圖像,根據(jù)檢測(cè)和跟蹤結(jié)果以及預(yù)設(shè) 的危險(xiǎn)事件觸發(fā)規(guī)則,判斷該幀圖像中是否存在危險(xiǎn)事件,若是,則存儲(chǔ)該視頻圖像;否則, 丟棄該幀視頻圖像。
13. 如權(quán)利要求12所述的方法,其特征在于,所述危險(xiǎn)事件為入侵事件,和/或逆行事 件,和/或多人聚集事件,和/或危險(xiǎn)物遺留事件,和/或違規(guī)停車事件,和/或貴重物體丟 失事件。
14. 一種視頻存儲(chǔ)系統(tǒng),其特征在于,包括視頻分析設(shè)備,對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,對(duì)于每幀視頻圖像,根據(jù)檢測(cè)和跟蹤 結(jié)果以及預(yù)設(shè)的危險(xiǎn)事件觸發(fā)規(guī)則,判斷該幀圖像中是否存在危險(xiǎn)事件,若是,將該幀視頻 圖像存儲(chǔ)到存儲(chǔ)設(shè)備上;否則,丟棄該幀視頻圖像;存儲(chǔ)設(shè)備,存儲(chǔ)存在危險(xiǎn)事件的視頻圖像。
全文摘要
本發(fā)明公開了視頻檢索方法、系統(tǒng)、設(shè)備及視頻存儲(chǔ)方法、系統(tǒng)。視頻檢索方法包括對(duì)視頻序列進(jìn)行運(yùn)動(dòng)檢測(cè)和跟蹤,若發(fā)現(xiàn)視頻圖像中存在危險(xiǎn)事件,則記錄該危險(xiǎn)事件的描述信息,該危險(xiǎn)事件描述信息中至少包含存在危險(xiǎn)事件的圖像標(biāo)識(shí);當(dāng)要檢索存在危險(xiǎn)事件的視頻圖像時(shí),接收檢索條件,將檢索條件與記錄的危險(xiǎn)事件描述信息匹配,若匹配上,則根據(jù)危險(xiǎn)事件描述信息中的圖像標(biāo)識(shí),從視頻存儲(chǔ)設(shè)備獲取視頻圖像,并將視頻圖像顯示給用戶。本發(fā)明提高了視頻檢索效率。另外,本發(fā)明只保存存在危險(xiǎn)事件的視頻圖像,節(jié)省了存儲(chǔ)空間。
文檔編號(hào)G06F17/30GK101763388SQ20081024105
公開日2010年6月30日 申請(qǐng)日期2008年12月25日 優(yōu)先權(quán)日2008年12月25日
發(fā)明者王磊, 高飛, 黃英 申請(qǐng)人:北京中星微電子有限公司