專利名稱：一種智能交通監(jiān)控視頻的檢索方法及裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及視頻檢索領(lǐng)域，尤其是涉及一種智能交通監(jiān)控視頻的檢索方法及裝置。
背景技術(shù)：
目前世界各國(guó)都對(duì)智能交通系統(tǒng)展開廣泛研究，希望借此解決日益嚴(yán)重的交通問題。另外由于多媒體技術(shù)的迅猛發(fā)展也使得視頻技術(shù)廣泛用于智能交通系統(tǒng)之中:通過(guò)利用由圖像傳感器構(gòu)成的攝像頭監(jiān)控道路實(shí)時(shí)采集交通信息，之后對(duì)采集到的交通信息進(jìn)行后臺(tái)分析，最終為用戶提供決策依據(jù)。但傳統(tǒng)的智能視頻處理技術(shù)只能提取視頻的底層視覺特征，如顏色、紋理，這些視覺特征對(duì)于終端用戶來(lái)說(shuō)是沒有太大意義的，他們?cè)诓樵?、檢索感興趣的視頻數(shù)據(jù)時(shí)往往是基于高層語(yǔ)義信息，這樣高層語(yǔ)義和底層視覺特征之間不可避免地存在語(yǔ)義鴻溝。為滿足用戶查詢、檢索的需求，需要對(duì)視頻數(shù)據(jù)進(jìn)行語(yǔ)義描述。目前學(xué)術(shù)界對(duì)于視頻語(yǔ)義信息方面的研究工作已廣泛開展起來(lái)，涌現(xiàn)了很多成果。其中比較著名的是運(yùn)動(dòng)圖像專家組(MPEG)提出的MPEG-7標(biāo)準(zhǔn)，即多媒體內(nèi)容描述接口(Multimedia Content Description Interface)。MPEG-7 標(biāo)準(zhǔn)的目標(biāo)就是定義一套標(biāo)準(zhǔn)的描述框架，該框架能夠?qū)Χ嗝襟w內(nèi)容提供高效的、準(zhǔn)確的并且具有互操作特性的語(yǔ)義描述，以便于進(jìn)一步對(duì)多媒體信息內(nèi)容進(jìn)行語(yǔ)義檢索。但將這一標(biāo)準(zhǔn)應(yīng)用在智能交通監(jiān)控系統(tǒng)中時(shí)，會(huì)對(duì)智能交通監(jiān)控視頻中的所有信息進(jìn)行識(shí)別并描述。但在實(shí)際的檢索中，對(duì)于智能交通監(jiān)控視頻，用戶檢索的只是與交通有關(guān)的信息。即檢索具有針對(duì)性。因此現(xiàn)有技術(shù)MPEG-7標(biāo)準(zhǔn)語(yǔ)義描述的全面性與用戶有針對(duì)性的檢索不相匹配。直接應(yīng)用MPEG-7標(biāo)準(zhǔn)進(jìn)行描述，會(huì)生成許多不必要的信息，需要占用一定的存儲(chǔ)空間，而且提取的信息多，增加了工作量，造成了資源浪費(fèi)。

發(fā)明內(nèi)容
本發(fā)明提供了一種智能交通監(jiān)控視頻的檢索方法及裝置，通過(guò)只提取智能交通監(jiān)控視頻中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，避免產(chǎn)生不必要的語(yǔ)義信息，節(jié)省了存儲(chǔ)空間。本發(fā)明提供了一種智能交通監(jiān)控視頻的檢索方法，所述方法包括:提取所述智能交通監(jiān)控視頻中的交通數(shù)據(jù)；對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系；接收用戶輸入的檢索信息；判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息；若存在，輸出與所述相匹配的第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。優(yōu)選的，所述方法還包括:對(duì)所述智能交通監(jiān)控視頻進(jìn)行結(jié)構(gòu)化處理，獲得至少一個(gè)視頻段；所述提取智能交通監(jiān)控視頻中的交通數(shù)據(jù)包括:提取所述視頻段中的交通數(shù)據(jù)；
所述對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系包括:對(duì)所述視頻段中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第二語(yǔ)義描述信息及所述第二語(yǔ)義描述信息與所述智能交通監(jiān)控視頻段的對(duì)應(yīng)關(guān)系；所述輸出與所述第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視包括:輸出與所述第二語(yǔ)義描述信息對(duì)應(yīng)的視頻段。優(yōu)選的，當(dāng)所述交通數(shù)據(jù)為交通對(duì)象時(shí)，所述的對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述包括:對(duì)所述交通對(duì)象的視覺特征和語(yǔ)義特征進(jìn)行描述。優(yōu)選的，所述交通對(duì)象包括車輛，行人，道路和交通標(biāo)識(shí)。優(yōu)選的，當(dāng)所述交通數(shù)據(jù)為交通事件時(shí)，所述的對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述包括:對(duì)所述交通事件涉及的交通對(duì)象和所述交通對(duì)象間的關(guān)系進(jìn)行描述；其中，對(duì)所述交通事件涉及的交通對(duì)象的描述引自之前對(duì)所述交通對(duì)象的描述。優(yōu)選的，所述對(duì)所述交通對(duì)象間的關(guān)系進(jìn)行描述包括對(duì)所述交通對(duì)象間的空間關(guān)系和邏輯關(guān)系進(jìn)行描述。優(yōu)選的，所述交通事件包括:車輛直行駛過(guò)、車輛左拐、車輛右拐、闖紅燈、變道、違章停車和行人走過(guò)。優(yōu)選的，所述方法還包括:提取所述智能交通監(jiān)控視頻的屬性信息；對(duì)所述屬性信息進(jìn)行語(yǔ)義描述，并保存第三語(yǔ)義描述信息及所述第三語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系；所述判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息包括:判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息和/或第三語(yǔ)義描述信息；所述若存在，輸出與所述第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻包括:若存在，輸出與所述第一語(yǔ)義描述信息和/或所述第三語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。優(yōu)選的，所述方法還包括:對(duì)所述智能交通監(jiān)控視頻所處的交通環(huán)境進(jìn)行語(yǔ)義描述，并保存第四語(yǔ)義描述信息及所述第四語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系；所述判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息包括:判斷是否存在與所述檢索信息匹配的所述第一語(yǔ)義描述信息和/或第四語(yǔ)義描述信息；若存在，輸出與所述第一語(yǔ)義描述信息和/或第四語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。本發(fā)明還提供了一種智能交通監(jiān)控視頻的檢索裝置，所述裝置包括:第一提取單元，用于提取所述智能交通監(jiān)控視頻中的交通數(shù)據(jù)；語(yǔ)義描述單元，用于對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系；接收單元，用于接收用戶輸入的檢索信息；檢索單元，用于檢索與所述檢索信息相匹配的第一語(yǔ)義描述信息；輸出單兀,用于在存在與所述檢索信息匹配的第一語(yǔ)義描述信息時(shí),輸出與所述相匹配的第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。優(yōu)選的，所述裝置還包括:結(jié)構(gòu)化處理單元，用于對(duì)所述智能交通監(jiān)控視頻進(jìn)行結(jié)構(gòu)化處理，獲得至少一個(gè)視頻段；所述第一提取單元還用于提取所述視頻段中的交通數(shù)據(jù)；所述語(yǔ)義描述單元還用于對(duì)所述視頻段中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第二語(yǔ)義描述信息及所述第二語(yǔ)義描述信息與視頻段的對(duì)應(yīng)關(guān)系；所述檢索單元，還用于檢索與所述檢索信息相匹配的第二語(yǔ)義描述信息；所述輸出單元，用于在存在與所述檢索信息匹配的第二語(yǔ)義描述信息時(shí)，輸出與所述相匹配的第二語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻段。優(yōu)選的，所述裝置還包括:第二提取單元，用于提取所述智能交通監(jiān)控視頻的屬性信息；所述語(yǔ)義描述單元，還用于對(duì)所述屬性信息進(jìn)行語(yǔ)義描述，并保存第三語(yǔ)義描述信息及所述第三語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系；所述檢索單元，還用于判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息和/或第二語(yǔ)義描述息；所述輸出單元，還用于在存在與所述檢索信息匹配的第一語(yǔ)義描述信息和/或第三語(yǔ)義描述信息時(shí)，輸出與所述第一語(yǔ)義描述信息和/或所述第三語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。優(yōu)選的，所述裝置還包括:保存單元，用于保存所述智能交通監(jiān)控視頻所處的交通環(huán)境語(yǔ)義描述信息及所述交通環(huán)境語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系；所述檢索單元，還用于檢索與所述檢索信息匹配的所述第一語(yǔ)義描述信息和/或交通環(huán)境語(yǔ)義描述信息；所述輸出單元，還用于在存在與所述檢索信息匹配的所述第一語(yǔ)義描述信息和/或交通環(huán)境語(yǔ)義描述信息時(shí)，輸出與所述第一語(yǔ)義描述信息和/或所述交通環(huán)境語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。與現(xiàn)有技術(shù)相比，本發(fā)明具有如下有益效果:本發(fā)明通過(guò)只提取智能交通監(jiān)控視頻中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，使得最后得到的語(yǔ)義描述信息與用戶的檢索需求相匹配的同時(shí)，減少了不必要的工作量，也避免了產(chǎn)生不必要的語(yǔ)義信息，節(jié)省了存儲(chǔ)空間。


為了更清楚地說(shuō)明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對(duì)實(shí)施例中所需要使用的附圖作簡(jiǎn)單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講，在不付出創(chuàng)造性勞動(dòng)的前提下，還可以根據(jù)這些附圖獲得其他的附圖。圖1是本發(fā)明方法實(shí)施例1流程圖；圖2是本發(fā)明實(shí)施例6中交通信息存儲(chǔ)結(jié)構(gòu)圖；圖3是本發(fā)明實(shí)施例6中視頻屬性信息存儲(chǔ)結(jié)構(gòu)圖；圖4是本發(fā)明實(shí)施例6中交通傳感器存儲(chǔ)結(jié)構(gòu)圖；圖5是本發(fā)明實(shí)施例6中視頻語(yǔ)義信息存儲(chǔ)結(jié)構(gòu)圖；圖6是本發(fā)明實(shí)施例6中交通環(huán)境信息存儲(chǔ)結(jié)構(gòu)圖；圖7是本發(fā)明裝置實(shí)施例結(jié)構(gòu)圖。
具體實(shí)施例方式下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對(duì)本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員所獲得的所有其他實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。參見圖1，本發(fā)明實(shí)施例1提供了一種智能交通監(jiān)控視頻的檢索方法，該方法包括:S11、提取所述智能交通監(jiān)控視頻中的交通數(shù)據(jù)。交通數(shù)據(jù)涉及多個(gè)方面，在本發(fā)明的實(shí)施例中，交通數(shù)據(jù)具體包括交通對(duì)象和交通事件。其中，交通對(duì)象主要包括:車輛，行人，道路和交通標(biāo)識(shí)。交通事件主要包括:車輛直行駛過(guò)、車輛左拐、車輛右拐、闖紅燈、變道、違章停車和行人走過(guò)。在具體的提取過(guò)程中，可首先對(duì)視頻中的數(shù)據(jù)類型進(jìn)行識(shí)別，當(dāng)判定出其為交通數(shù)據(jù)時(shí)，將其提取出來(lái)。S12、對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系。具體的，可米用MPEG (Multimedia Content Description Interface,多媒體內(nèi)容描述接口)_7標(biāo)準(zhǔn)進(jìn)行語(yǔ)義描述?，F(xiàn)有的攝像頭采集到的視頻數(shù)據(jù)的結(jié)構(gòu)性和層次性比較低。最頂層是整個(gè)視頻文件，最底層就是單個(gè)的視頻幀，之間沒有任何的過(guò)渡。這就意味著用戶如果要查詢、定位自己感興趣的內(nèi)容，只能在找到該視頻后，對(duì)這個(gè)視頻進(jìn)行線性瀏覽。比如，用戶通過(guò)想要查看某一視頻中的車輛A，那么用戶就需要瀏覽整個(gè)視頻才能確定車輛A具體在視頻中的哪個(gè)部分。因此，查詢效率很低。為此，在本發(fā)明的優(yōu)選實(shí)施例2中，可以先對(duì)智能交通監(jiān)控視頻進(jìn)行結(jié)構(gòu)化處理，獲得至少一個(gè)視頻段。視頻結(jié)構(gòu)化是指對(duì)非結(jié)構(gòu)化的圖像流進(jìn)行處理，形成關(guān)于視頻內(nèi)容的結(jié)構(gòu)化數(shù)據(jù)，即形成一個(gè)個(gè)可以獨(dú)立訪問的視頻片段。目前主要通過(guò)鏡頭邊界檢測(cè)和關(guān)鍵幀提取技術(shù)對(duì)視頻進(jìn)行結(jié)構(gòu)化處理。另外，在本發(fā)明中，可以基于視頻的內(nèi)容特征或視頻的數(shù)據(jù)量大小，決定要獲得的視頻段數(shù)量。比如，該視頻中在時(shí)間順序上先后發(fā)生5個(gè)交通事件，那么就可以將該視頻提取出5個(gè)視頻段。本發(fā)明不對(duì)具體的結(jié)構(gòu)化處理方法和要提取的視頻段數(shù)量作出限制。然后分別提取每個(gè)視頻段中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第二語(yǔ)義描述信息及第二語(yǔ)義描述信息與視頻段的對(duì)應(yīng)關(guān)系。這樣用戶在進(jìn)行檢索時(shí)，就能根據(jù)輸入的檢索信息搜索到對(duì)應(yīng)的視頻段而不是整個(gè)視頻，因此，節(jié)省了之后瀏覽的時(shí)間，提高了用戶的瀏覽效率。當(dāng)交通數(shù)據(jù)為交通對(duì)象時(shí)，對(duì)交通數(shù)據(jù)進(jìn)行語(yǔ)義描述包括:對(duì)所述交通對(duì)象的視覺特征和語(yǔ)義特征進(jìn)行描述。具體的，當(dāng)交通對(duì)象為車輛時(shí)，其視覺特征主要包括:顏色、紋理、形狀以及運(yùn)動(dòng)狀態(tài)。其語(yǔ)義特征包括:車輛類型、車牌號(hào)碼。在語(yǔ)義描述時(shí)，可以對(duì)視覺特征和語(yǔ)義特征中的至少一個(gè)特征進(jìn)行描述。當(dāng)然，為使檢索結(jié)果更加精確，最優(yōu)選的方式是對(duì)上述所有特征同時(shí)描述。當(dāng)交通對(duì)象為行人時(shí)，視覺特征包括:顏色、紋理、形狀、運(yùn)動(dòng)；語(yǔ)義特征具體為:是否是行人。在具體的語(yǔ)義描述中，可以對(duì)視覺特征中的至少一個(gè)特征進(jìn)行描述。當(dāng)交通對(duì)象為道路時(shí)，道路的視覺特征包括:顏色、紋理、形狀；道路的語(yǔ)義特征包括:是否允許行人經(jīng)過(guò)或停留，是否允許車輛經(jīng)過(guò)或停留，允許哪種類型的車輛行駛，允許車輛行駛的方向，是否允許左拐以及是否允許右拐。當(dāng)交通對(duì)象為交通標(biāo)識(shí)時(shí)，交通標(biāo)識(shí)的視覺特征包括:顏色、紋理、形狀以及位置；交通標(biāo)識(shí)的語(yǔ)義特征包括:交通標(biāo)識(shí)的類型、是否允許行人跨越以及是否允許車輛越過(guò)。同之前一樣，在對(duì)道路和交通標(biāo)識(shí)進(jìn)行語(yǔ)義描述時(shí)，可以對(duì)視覺特征和語(yǔ)義特征中的至少一個(gè)特征進(jìn)行描述。本發(fā)明對(duì)此不做具體限制。當(dāng)交通數(shù)據(jù)為交通事件時(shí)，對(duì)交通數(shù)據(jù)進(jìn)行語(yǔ)義描述包括:對(duì)交通事件涉及的交通對(duì)象和交通對(duì)象間的關(guān)系進(jìn)行描述。其中，對(duì)交通事件涉及的交通對(duì)象的描述引自之前對(duì)交通對(duì)象的描述。這樣可以避免對(duì)象的重復(fù)定義。在對(duì)交通事件進(jìn)行描述時(shí)，需要指出交通事件涉及的交通對(duì)象，這是事件的主體。還要指出交通對(duì)象間的關(guān)系。具體的，交通對(duì)象間的關(guān)系包括:空間關(guān)系和邏輯關(guān)系?？臻g關(guān)系包括:在...之上，在...之下，在...右邊，在...左邊，與...相鄰，接近...，在...之中，包含...等。邏輯關(guān)系包括:越過(guò)...，屬于...，同...一樣等。如，對(duì)于闖紅燈事件，涉及到的對(duì)象為行駛中的車輛、變?yōu)榧t燈的交通信號(hào)燈和停車先，車和停車線的關(guān)系就是車越過(guò)停車線。S13、接收用戶輸入的檢索信息。在本發(fā)明中，用戶輸入的檢索信息可以一個(gè)，也可以是多個(gè)。S14、判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息。具體的，通過(guò)在保存的語(yǔ)義描述信息中查看是否包含用戶輸入的檢索信息進(jìn)行。在本發(fā)明中，當(dāng)用戶輸入的檢索信息中的檢索字段為一個(gè)時(shí)，判斷是否存在與檢索信息匹配的第一語(yǔ)義描述信息具體可以包括:判斷第一描述信息中是否有該檢索字段。當(dāng)用戶輸入的檢索字段為至少兩個(gè)時(shí)，判斷是否存在與檢索信息匹配的第一語(yǔ)義描述信息還可以包括:判斷第一語(yǔ)義描述信息中是否包含用戶輸入的所有檢索字段。也可以是判斷第一語(yǔ)義描述信息中是否至少包含一個(gè)用戶輸入的檢索字段。
需要說(shuō)明的是，本發(fā)明實(shí)施例并不將檢索信息與語(yǔ)義描述信息的匹配規(guī)則限定為上述兩種情況，也可以根據(jù)需要設(shè)定為其他的匹配規(guī)則。S15、若存在，輸出與所述相匹配的第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。具體的，當(dāng)為結(jié)構(gòu)化處理后的視頻時(shí)，此處輸出的是與相匹配的語(yǔ)義描述信息對(duì)應(yīng)的視頻段。為向用戶提供更加全面的檢索信息，可以對(duì)相關(guān)的其它交通信息進(jìn)行描述。在本發(fā)明實(shí)施例3中，該方法還包括:提取智能交通監(jiān)控視頻的屬性信息。屬性信息主要包括視覺元信息和語(yǔ)義元信息。其中視覺元信息主要包括:格式、大小、分辨率顏色深度、是否壓縮等信息。語(yǔ)義元信息主要包括文本標(biāo)注、時(shí)間、地點(diǎn)、該視頻的編號(hào)等信息。這些信息不包含視頻內(nèi)容本身，是對(duì)視頻的一般性描述。對(duì)屬性信息進(jìn)行語(yǔ)義描述，并保存第三語(yǔ)義描述信息及第三語(yǔ)義描述信息與智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系。所述的判斷是否存在與檢索信息匹配的第一語(yǔ)義描述信息包括:判斷是否存在與檢索信息匹配的第一語(yǔ)義描述信息和/或第三語(yǔ)義描述信息。具體的，當(dāng)用戶輸入檢索信息時(shí)，可在第一語(yǔ)義描述信息和第三語(yǔ)義描述信息中分別或同時(shí)查看是否包含該檢索信息。所述若存在，輸出與第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻包括:若存在，輸出與第一語(yǔ)義描述信息和/或第三語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。如，當(dāng)用戶輸入的檢索信息是車輛A、視頻大小為B時(shí)，可向用戶輸出包含車輛A，同時(shí)視頻大小為B的視頻。當(dāng)然，也可以向用戶輸出包含車輛A或視頻大小為B的視頻。進(jìn)一步的，為使用戶能夠了解交通環(huán)境，在本發(fā)明的實(shí)施例4中，該方法還包括:對(duì)智能交通監(jiān)控視頻所處的交通環(huán)境進(jìn)行語(yǔ)義描述，并保存第四語(yǔ)義描述信息及第四語(yǔ)義描述信息與智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系。交通環(huán)境主要包括天氣氣候、光照條件、路網(wǎng)或路段運(yùn)行情況。對(duì)交通環(huán)境的描述可以從交通環(huán)境信息的內(nèi)容和交通環(huán)境信息的來(lái)源進(jìn)行描述。其信息的來(lái)源比如是氣象傳感器、光照傳感器或智能交通傳感器與圖像傳感器的融合等。所述判斷是否存在與檢索信息匹配的第一語(yǔ)義描述信息包括:判斷是否存在與所述檢索信息匹配的所述第一語(yǔ)義描述信息和/或第四語(yǔ)義描述信息。具體的，可在第一語(yǔ)義描述信息和第四語(yǔ)義描述信息中分別或同時(shí)查看是否包含用戶輸入的檢索信息。若存在，輸出與所述第一語(yǔ)義描述信息和/或第四語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。如，當(dāng)用戶輸入的檢索信息是車輛A、天氣晴時(shí)，可向用戶輸出包含車輛A，同時(shí)天氣晴好的視頻。當(dāng)然，也可以向用戶輸出包含車輛A或天氣晴好的視頻。在本發(fā)明的實(shí)施例5中，還可以對(duì)某一路段上設(shè)置的交通傳感器的類型、位置及任務(wù)進(jìn)行描述，以便用戶可以查詢?cè)撀范沃械慕煌▊鞲衅餍畔ⅰ?br> 更加優(yōu)選的，可以建立并保存圖像傳感器與其生成的視頻的對(duì)應(yīng)關(guān)系。同時(shí)將該圖像傳感器的信息與相應(yīng)視頻的語(yǔ)義描述信息映射在一起。在用戶查詢到某一視頻時(shí)，同時(shí)獲取該視頻對(duì)應(yīng)的圖像傳感器信息并輸出。本發(fā)明實(shí)施例6，提供了一種交通信息的存儲(chǔ)結(jié)構(gòu)。參見圖2，該結(jié)構(gòu)包括視頻屬性、交通傳感器、視頻語(yǔ)義信息和交通環(huán)境四個(gè)部分。參見圖3，視頻屬性部分包括視頻視覺元信息和視頻語(yǔ)義元信息兩部分。視覺元信息包括格式、大小、分辨率、顏色深度和壓縮特性五個(gè)小部分。語(yǔ)義元信息包括文本標(biāo)注、時(shí)間、地點(diǎn)、鏡頭編號(hào)和視頻編號(hào)。參見圖4，交通傳感器部分包括交通傳感器集合，其中存儲(chǔ)有所有交通傳感器的ID。交通傳感器集合又包括每個(gè)具體的傳感器(以ID標(biāo)識(shí))。每個(gè)ID下對(duì)應(yīng)著該傳感器的類型、布設(shè)的位置和該傳感器的功能，即該傳感器負(fù)責(zé)檢測(cè)哪一類的交通信息。參見圖5，視頻語(yǔ)義信息部分包括交通對(duì)象和交通事件。交通對(duì)象下對(duì)應(yīng)交通對(duì)象的集合和交通事件集合。集合下對(duì)應(yīng)著每個(gè)具體的交通對(duì)象和每個(gè)具體的交通事件，每個(gè)具體的交通對(duì)象又包括該交通對(duì)象的視覺特征描述信息和語(yǔ)義特征描述信息。交通事件下對(duì)應(yīng)每一具體的交通事件，每個(gè)具體的交通事件下又對(duì)應(yīng)該交通事件的事件主體,事件主體間的關(guān)系，事件結(jié)果以及文本標(biāo)注。需要明確的對(duì)主體的描述引自交通對(duì)象部分對(duì)交通對(duì)象的描述。以避免重復(fù)定義。事件結(jié)果是指當(dāng)有交通事件出現(xiàn)時(shí)，相關(guān)的交通傳感器的檢測(cè)信息，主要包括交通傳感器信息和交通傳感器的檢測(cè)結(jié)果。其中交通傳感器的信息引自之前對(duì)交通傳感器的描述。參見圖6，交通環(huán)境部分包括天氣氣候、光照條件和路網(wǎng)或路段運(yùn)行情況三部分。通過(guò)上述結(jié)構(gòu)，用戶可以分別檢索相關(guān)的信息。比如用戶輸入交通傳感器，那么就可以檢索到某一路段所有交通傳感器的相關(guān)信息。需要說(shuō)明的是，在本發(fā)明的優(yōu)選實(shí)施例中，可將上述幾部分信息映射在一起，在用戶檢索時(shí)，一同展現(xiàn)給用戶。比如用戶通過(guò)輸入車輛A檢索到了相應(yīng)的視頻，那么就可以同時(shí)將該視頻的屬性信息、獲取該視頻的交通傳感器以及該交通傳感器的具體信息和該視頻對(duì)應(yīng)的交通環(huán)境一同展現(xiàn)給用戶。本發(fā)明還提供了一種智能交通監(jiān)控視頻的檢索裝置，參見圖7，所述裝置包括:11、第一提取單元，用于提取所述智能交通監(jiān)控視頻中的交通數(shù)據(jù)；12、語(yǔ)義描述單元，用于對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系；13、接收單元，用于接收用戶輸入的檢索信息；14、檢索單元，用于檢索與所述檢索信息相匹配的第一語(yǔ)義描述信息；15、輸出單元，用于在存在與所述檢索信息匹配的第一語(yǔ)義描述信息時(shí)，輸出與所述相匹配的第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。 現(xiàn)有的攝像頭采集到的視頻數(shù)據(jù)的結(jié)構(gòu)性和層次性比較低。最頂層是整個(gè)視頻文件，最底層就是單個(gè)的視頻幀，之間沒有任何的過(guò)渡。這就意味著用戶如果要查詢、定位自己感興趣的內(nèi)容，只能在找到該視頻后，對(duì)這個(gè)視頻進(jìn)行線性瀏覽。因此，查詢效率很低。為此，在本發(fā)明的優(yōu)選實(shí)施例中，所述裝置還包括:結(jié)構(gòu)化處理單元，用于對(duì)智能交通監(jiān)控視頻進(jìn)行結(jié)構(gòu)化處理，獲得至少一個(gè)視頻段。第一提取單元11還用于提取視頻段中的交通數(shù)據(jù)。語(yǔ)義描述單元12還用于對(duì)視頻段中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第二語(yǔ)義描述信息及第二語(yǔ)義描述信息與視頻段的對(duì)應(yīng)關(guān)系。檢索單元14，還用于檢索與檢索信息相匹配的第二語(yǔ)義描述信息。輸出單元15，還用于在存在與檢索信息匹配的第二語(yǔ)義描述信息時(shí)，輸出與相匹配的第二語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻段。為向用戶提供更加全面的檢索信息，可以對(duì)相關(guān)的其它交通信息進(jìn)行描述。在本發(fā)明的另一實(shí)施例中，該裝置還包括:第二提取單元，用于提取智能交通監(jiān)控視頻的屬性信息。語(yǔ)義描述單元12，還用于對(duì)屬性信息進(jìn)行語(yǔ)義描述，并保存第三語(yǔ)義描述信息及第三語(yǔ)義描述信息與智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系。檢索單元14，還用于判斷是否存在與檢索信息匹配的第一語(yǔ)義描述信息和/或第二語(yǔ)義描述息；輸出單元15，還用于在存在與檢索信息匹配的第一語(yǔ)義描述信息和/或第三語(yǔ)義描述信息時(shí)，輸出與第一語(yǔ)義描述信息和/或第三語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。進(jìn)一步的，為使用戶了解交通環(huán)境，本發(fā)明的實(shí)施例中，該裝置還包括:保存單元，用于保存智能交通監(jiān)控視頻所處的交通環(huán)境語(yǔ)義描述信息及所述交通環(huán)境語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系。檢索單元14，還用于檢索與檢索信息匹配的第一語(yǔ)義描述信息和/或交通環(huán)境語(yǔ)義描述信息。輸出單元15，還用于在存在與檢索信息匹配的第一語(yǔ)義描述信息和/或交通環(huán)境語(yǔ)義描述信息時(shí)，輸出與第一語(yǔ)義描述信息和/或交通環(huán)境語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。為方便用戶可以查詢?cè)撀范沃械慕煌▊鞲衅餍畔ⅰ＿€可以在該裝置中設(shè)置傳感器描述單元，用于對(duì)某一路段上設(shè)置的交通傳感器的類型、位置及任務(wù)進(jìn)行描述。值得注意的是，本發(fā)明的裝置與本發(fā)明的方法相對(duì)應(yīng)，因此對(duì)裝置部分不再詳述，相關(guān)部分參見方法實(shí)施例即可。以上對(duì)本發(fā)明所提供的一種智能交通監(jiān)控視頻的檢索方法及裝置進(jìn)行了介紹，本文中應(yīng)用了具體個(gè)例對(duì)本發(fā)明的原理及實(shí)施方式進(jìn)行了闡述，以上實(shí)施例的說(shuō)明只是用于幫助理解本發(fā)明的方法及其核心思想；同時(shí)，對(duì)于本領(lǐng)域的一般技術(shù)人員，依據(jù)本發(fā)明的思想，在具體實(shí)施方式
及應(yīng)用范圍上均會(huì)有改變之處。綜上所述，本說(shuō)明書內(nèi)容不應(yīng)理解為對(duì)本發(fā)明的限制。
權(quán)利要求
1.一種智能交通監(jiān)控視頻的檢索方法，其特征在于，所述方法包括: 提取所述智能交通監(jiān)控視頻中的交通數(shù)據(jù)； 對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系； 接收用戶輸入的檢索信息； 判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息； 若存在，輸出與所述相匹配的第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括: 對(duì)所述智能交通監(jiān)控視頻進(jìn)行結(jié)構(gòu)化處理，獲得至少一個(gè)視頻段； 所述提取智能交通監(jiān)控視頻中的交通數(shù)據(jù)包括:提取所述視頻段中的交通數(shù)據(jù)；所述對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系包括: 對(duì)所述視頻段中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第二語(yǔ)義描述信息及所述第二語(yǔ)義描述信息與所述智能交通監(jiān)控視頻段的對(duì)應(yīng)關(guān)系； 所述輸出與所述第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視包括:輸出與所述第二語(yǔ)義描述信息對(duì)應(yīng)的視頻段。
3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，當(dāng)所述交通數(shù)據(jù)為交通對(duì)象時(shí)，所述的對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述包括 : 對(duì)所述交通對(duì)象的視覺特征和語(yǔ)義特征進(jìn)行描述。
4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述交通對(duì)象包括車輛，行人，道路和交通標(biāo)識(shí)。
5.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，當(dāng)所述交通數(shù)據(jù)為交通事件時(shí)，所述的對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述包括: 對(duì)所述交通事件涉及的交通對(duì)象和所述交通對(duì)象間的關(guān)系進(jìn)行描述；其中，對(duì)所述交通事件涉及的交通對(duì)象的描述引自之前對(duì)所述交通對(duì)象的描述。
6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述對(duì)所述交通對(duì)象間的關(guān)系進(jìn)行描述包括對(duì)所述交通對(duì)象間的空間關(guān)系和邏輯關(guān)系進(jìn)行描述。
7.根據(jù)權(quán)利要6所述的方法，其特征在于，所述交通事件包括:車輛直行駛過(guò)、車輛左拐、車輛右拐、闖紅燈、變道、違章停車和行人走過(guò)。
8.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括: 提取所述智能交通監(jiān)控視頻的屬性信息； 對(duì)所述屬性信息進(jìn)行語(yǔ)義描述，并保存第三語(yǔ)義描述信息及所述第三語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系； 所述判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息包括: 判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息和/或第三語(yǔ)義描述信息； 所述若存在，輸出與所述第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻包括: 若存在，輸出與所述第一語(yǔ)義描述信息和/或所述第三語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。
9.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括:對(duì)所述智能交通監(jiān)控視頻所處的交通環(huán)境進(jìn)行語(yǔ)義描述，并保存第四語(yǔ)義描述信息及所述第四語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系； 所述判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息包括: 判斷是否存在與所述檢索信息匹配的所述第一語(yǔ)義描述信息和/或第四語(yǔ)義描述信息； 若存在，輸出與所述第一語(yǔ)義描述信息和/或第四語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。
10.一種智能 交通監(jiān)控視頻的檢索裝置，其特征在于，所述裝置包括: 第一提取單元，用于提取所述智能交通監(jiān)控視頻中的交通數(shù)據(jù)； 語(yǔ)義描述單元，用于對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系； 接收單元，用于接收用戶輸入的檢索信息； 檢索單元，用于檢索與所述檢索信息相匹配的第一語(yǔ)義描述信息； 輸出單元，用于在存在與所述檢索信息匹配的第一語(yǔ)義描述信息時(shí)，輸出與所述相匹配的第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。
11.根據(jù)權(quán)利要求10所述的裝置，其特征在于，所述裝置還包括: 結(jié)構(gòu)化處理單元，用于對(duì)所述智能交通監(jiān)控視頻進(jìn)行結(jié)構(gòu)化處理，獲得至少一個(gè)視頻段； 所述第一提取單元還用于提取所述視頻段中的交通數(shù)據(jù)； 所述語(yǔ)義描述單元還用于對(duì)所述視頻段中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第二語(yǔ)義描述信息及所述第二語(yǔ)義描述信息與視頻段的對(duì)應(yīng)關(guān)系； 所述檢索單元，還用于檢索與所述檢索信息相匹配的第二語(yǔ)義描述信息； 所述輸出單元，用于在存在與所述檢索信息匹配的第二語(yǔ)義描述信息時(shí)，輸出與所述相匹配的第二語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻段。
12.根據(jù)權(quán)利要求10所述的裝置，其特征在于，所述裝置還包括: 第二提取單元，用于提取所述智能交通監(jiān)控視頻的屬性信息； 所述語(yǔ)義描述單元，還用于對(duì)所述屬性信息進(jìn)行語(yǔ)義描述，并保存第三語(yǔ)義描述信息及所述第三語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系； 所述檢索單元，還用于判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息和/或第二語(yǔ)義描述信息； 所述輸出單元，還用于在存在與所述檢索信息匹配的第一語(yǔ)義描述信息和/或第三語(yǔ)義描述信息時(shí)，輸出與所述第一語(yǔ)義描述信息和/或所述第三語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。
13.根據(jù)權(quán)利要求10所述的裝置，其特征在于，所述裝置還包括: 保存單元，用于保存所述智能交通監(jiān)控視頻所處的交通環(huán)境語(yǔ)義描述信息及所述交通環(huán)境語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系； 所述檢索單元，還用于檢索與所述檢索信息匹配的所述第一語(yǔ)義描述信息和/或交通環(huán)境語(yǔ)義描述信息； 所述輸出單元，還用于在存在與所述檢索信息匹配的所述第一語(yǔ)義描述信息和/或交通環(huán)境語(yǔ)義描述信息時(shí)，輸出與所述第一語(yǔ)義描述信息和/或所述交通環(huán)境語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。
全文摘要
本發(fā)明公開了一種智能交通監(jiān)控視頻的檢索方法及裝置，其中，所述方法包括提取所述智能交通監(jiān)控視頻中的交通數(shù)據(jù)；對(duì)所述交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，并保存第一語(yǔ)義描述信息及所述第一語(yǔ)義描述信息與所述智能交通監(jiān)控視頻的對(duì)應(yīng)關(guān)系；接收用戶輸入的檢索信息；判斷是否存在與所述檢索信息匹配的第一語(yǔ)義描述信息；若存在，輸出與所述相匹配的第一語(yǔ)義描述信息對(duì)應(yīng)的智能交通監(jiān)控視頻。本發(fā)明通過(guò)只提取智能交通監(jiān)控視頻中的交通數(shù)據(jù)進(jìn)行語(yǔ)義描述，使得最后得到的語(yǔ)義描述信息與用戶的檢索需求相匹配的同時(shí)，減少了不必要的工作量，也避免了產(chǎn)生不必要的語(yǔ)義信息，節(jié)省了存儲(chǔ)空間。
文檔編號(hào)G08G1/01GK103186634SQ20111045961
公開日2013年7月3日 申請(qǐng)日期2011年12月31日 優(yōu)先權(quán)日2011年12月31日
發(fā)明者朱健, 曹紅兵, 徐華安, 鄧遂, 趙顯忠, 向文芳, 國(guó)薇, 沈杰, 劉海濤 申請(qǐng)人:無(wú)錫物聯(lián)網(wǎng)產(chǎn)業(yè)研究院, 感知物聯(lián)網(wǎng)集團(tuán)(無(wú)錫)有限公司