專利名稱:影像網(wǎng)絡(luò)系統(tǒng)以及影像數(shù)據(jù)管理方法
技術(shù)領(lǐng)域:
本發(fā)明涉及具有多個攝像機的影像網(wǎng)絡(luò)系統(tǒng)。
背景技術(shù):
通過普及Web攝像機等可進行IP連接的攝像裝置,能夠構(gòu)筑利用了 IP網(wǎng) 絡(luò)的廣域 大規(guī)模監(jiān)視系統(tǒng)。另一方面,硬盤裝置的低價格化.大規(guī)?;?,使 長時間存儲由監(jiān)視系統(tǒng)所攝像的影像成為可能。當(dāng)前,用于從這些存儲影像中 檢索所期望的數(shù)據(jù)的檢索技術(shù)的必要性日益高漲。
作為用于檢索影像的技術(shù),存在基于圖像特征量的類似檢索技術(shù)。在本技 術(shù)中,由成為檢索對象的影像的幀圖像,提取將色調(diào)'形狀等信息表現(xiàn)成數(shù)值 列的圖像特征量,將其作為檢索用信息存儲在數(shù)據(jù)庫中。檢索時,在從用戶選 擇的圖像提取的圖像特征量和存儲在數(shù)據(jù)庫中的圖像特征量之間,評價矢量空 間中的距離,將該距離小的圖像判定為類似的圖像,作為檢索結(jié)果返回。
發(fā)明內(nèi)容
在利用了 IP網(wǎng)絡(luò)的廣域 大規(guī)模監(jiān)視系統(tǒng)中,要實現(xiàn)類似檢索技術(shù)時, 需要根據(jù)從多個攝像機取得的影像生成前面所述的檢索用信息(圖像特征量), 存儲在數(shù)據(jù)庫中。因此,與圖像特征量的提取、圖像特征量向數(shù)據(jù)庫的存儲相 關(guān)的運算量會增大。因此,需要減少檢索系統(tǒng)的與這些處理相關(guān)聯(lián)的運算量。
此夕卜,由于在廉價的市場上出售的攝#4幾中很少有搭載充分的運算資源的 攝像機,因而攝像機很難進行負荷較大的處理。
而且。在基于移動圖像的影像網(wǎng)絡(luò)系統(tǒng)中,需要同時兼顧信息的實時性、 和履歷信息的保管以及檢索。
若表示本發(fā)明的代表的l例的話,如下所示。本發(fā)明提供一種影像網(wǎng)絡(luò)系 統(tǒng),其具有對影像進行攝影的多個攝像機和顯示通過所述攝像機攝影的影像的 監(jiān)控裝置,其特征在于,具有信息生成裝置,其生成通過所述攝像機攝像的 影像的檢索用信息;以及檢索裝置,其檢索通過所述攝像機攝像的影像,所述信息生成裝置取得通過所述攝像機攝像的影像,并根據(jù)所述取得的影像生成檢 索用信息,將生成的所述檢索用信息發(fā)送給所述檢索裝置,所述檢索裝置,將 從所述信息生成裝置接收的檢索用信息存儲在存儲裝置中,并向所述監(jiān)控裝置 發(fā)送已存儲的所述檢索用信息。
通過本發(fā)明,能夠抑制檢索系統(tǒng)的負荷增大,并提高系統(tǒng)的可伸縮性。此 外,還可以實現(xiàn)無縫地檢索履歷信息和實時信息的技術(shù)。
圖l是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的結(jié)構(gòu)的框圖。
圖2是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的影像分發(fā)處理的說明圖。
圖3是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的檢索用信息登錄處理 的概要的說明圖。
圖4是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的檢索用信息登錄處理 的細節(jié)的流程圖。
圖5是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的動作的說明圖。 圖6是表示本發(fā)明的第2實施方式的影像網(wǎng)絡(luò)系統(tǒng)的結(jié)構(gòu)的框圖。 符號說明
1攝像機
2中心側(cè)系統(tǒng)
21檢索服務(wù)器
22影像存儲服務(wù)器
3監(jiān)控裝置
4網(wǎng)絡(luò)
5登錄用計算機
具體實施例方式
然后,參照
本發(fā)明的實施方式。 〈第1實施方式〉
第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)具有多個攝像機1、中心側(cè)系統(tǒng)2、監(jiān)控裝 置3、網(wǎng)絡(luò)4以及登錄計算機5。
6攝像機1具有包含透鏡的光學(xué)系統(tǒng)、將影像轉(zhuǎn)換成電信號的攝像部以及網(wǎng) 絡(luò)接口 。例如,攝像機1可以使用可以直接連接到IP網(wǎng)絡(luò)的IP攝像機。攝像 機l被設(shè)置在攝影對象區(qū)域,對攝影對象區(qū)域的影像進行攝影,將攝影的影像
數(shù)據(jù)送給登錄用計算機5。
登錄用計算機5是具有處理器、存儲器、存儲裝置以及網(wǎng)絡(luò)接口的計算機。 登錄用計算機5通過執(zhí)行圖像登錄程序100 (參照圖2 ),從通過攝像機1攝影 的影像數(shù)據(jù)提取圖像特征量。被提取的圖像特征量的提取,使用移動檢測、面 部檢測的技術(shù),可以從攝影的影像數(shù)據(jù)提取預(yù)先規(guī)定的移動、或者預(yù)先規(guī)定的 面部。而且,登錄用計算機5通過執(zhí)行圖像登錄程序100,根據(jù)攝影的影像數(shù) 據(jù)生成低清晰度的影像數(shù)據(jù)(縮略圖數(shù)據(jù))。然后,經(jīng)由網(wǎng)絡(luò)4向檢索服務(wù)器 21發(fā)送提取的圖像特征量以及生成的低清晰度影像數(shù)據(jù)。
圖中,圖示了 l臺登錄用計算機,但也可以具有多臺登錄用計算機5。與 1臺登錄用計算機5連接的攝像機數(shù),可以根據(jù)登錄用計算機5所具有的資源 的容量來任意選擇。
中心側(cè)系統(tǒng)2至少具有1臺檢索服務(wù)器21以及影像存儲服務(wù)器22。
檢索服務(wù)器21是具有處理器、存儲器、存儲裝置以及網(wǎng)絡(luò)接口的計算機, 在存儲裝置中存儲通過計算機1攝影的影像數(shù)據(jù)的圖像特征量以及低清晰度 影像數(shù)據(jù)。然后,檢索服務(wù)器21根據(jù)來自檢索監(jiān)控裝置3的檢索請求,檢索 存儲在影像存儲服務(wù)器22中的影像數(shù)據(jù)的特征量,將檢索結(jié)果(影像數(shù)據(jù)的 識別符以及低清晰度影像數(shù)據(jù))回復(fù)給監(jiān)控裝置3。另外,多個檢索服務(wù)器21 可以構(gòu)成檢索服務(wù)器群。此外,檢索服務(wù)器21可以對網(wǎng)絡(luò)4發(fā)送控制影像數(shù) 據(jù)的傳送頻帶的信號。
影像存儲服務(wù)器22是具有處理器、存儲器、存儲裝置以及網(wǎng)絡(luò)接口的計 算機,執(zhí)行影像存儲服務(wù)器程序220 (參照圖2)。即、影像存儲服務(wù)器22向 登錄用計算機5發(fā)送高清晰度圖像請求,取得通過攝像機1攝像的影像(動畫) 數(shù)據(jù),將取得的影像數(shù)據(jù)存儲在存儲裝置中。此外,影像存儲服務(wù)器22根據(jù) 來自監(jiān)控裝置3的請求,向監(jiān)控裝置3發(fā)送已存儲的影像數(shù)據(jù)。圖中圖示了l 臺影像存儲服務(wù)器22,但也可以具有多臺影#^儲服務(wù)器22。監(jiān)控裝置3具 有處理器、存儲器、網(wǎng)絡(luò)接口、操作部以及顯示部,是該影像網(wǎng)絡(luò)系統(tǒng)的運用者操作的計算機。監(jiān)控裝置3在顯示部(畫面)上顯示從通過多個攝像機1 攝像的影像數(shù)據(jù)中選擇的影像數(shù)據(jù)或者全部影像數(shù)據(jù)。
例如,監(jiān)控裝置3向影像存儲服務(wù)器22發(fā)送運用者輸入的檢索請求,并 顯示該檢索請求和檢索結(jié)果。而且,從監(jiān)控裝置3取得與檢索結(jié)果相對應(yīng)的影 像數(shù)據(jù)(高清晰度數(shù)據(jù)),并顯示取得的影像數(shù)據(jù)。
此外,在從攝像機1攝像的影像數(shù)據(jù)提取的圖像特征量與預(yù)先確定的規(guī)定 的條件吻合時,監(jiān)控裝置3實時顯示與該條件吻合的來自攝像了影像數(shù)據(jù)的攝 像機1的影像數(shù)據(jù)(高清晰度數(shù)據(jù))。另外,也可以通過設(shè)置在攝影區(qū)域中的 其他傳感器(例如紅外傳感器)判定高清晰度影像數(shù)據(jù)的顯示條件。圖中圖示 了 1臺監(jiān)控裝置3,但也可以具有多臺監(jiān)控裝置3。
攝像機l、檢索服務(wù)器21、影像存儲服務(wù)器22以及監(jiān)控裝置3經(jīng)由網(wǎng)絡(luò) 4連接。例如,網(wǎng)絡(luò)4可以使用可傳送TCP/IP包的IP網(wǎng)絡(luò)。
圖2是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的影像分發(fā)處理的說明圖。
登錄用計算機5執(zhí)行圖像登錄程序100。在圖像登錄程序100中同時執(zhí)行 影像取得線程110、影像分發(fā)線程120、檢索用信息登錄線程140 (參照圖3 ) 3個線程。另外,可反復(fù)執(zhí)行各線程。
影像存儲服務(wù)器22執(zhí)行影像存儲服務(wù)器程序220??煞磸?fù)執(zhí)行影像存儲 服務(wù)器程序220。
首先,說明影像取得線程110的處理。
在影像取得線程110中,取得攝像機1的攝像元件11取得的影像數(shù)據(jù), 并作為幀圖像在設(shè)置在存儲器中的緩沖存儲器中存儲圖像數(shù)據(jù)(111 )。
然后,使用存儲在緩沖存儲器中的幀圖像,計算將幀圖像序列上的各像素 值的平均值作為像素值的背景圖像。然后,將背景圖像更新成重新計算出的背 景圖像(112)。
然后,計算將幀圖像和背景圖像的差作為像素值的背景差分圖像。然后, 將計算出的背景差分圖像以及幀圖像設(shè)定成通過線程間通信130發(fā)送的數(shù)據(jù) (113)。
之后,影像分發(fā)線程120通過線程間通信(130)取得幀圖像。在檢索用信息登錄線程120中,當(dāng)接收來自影像存儲服務(wù)器22的請求時 (121),從通過線程間通信130發(fā)送的數(shù)據(jù)中取得最新的幀圖像(122),將取 得的幀圖像發(fā)送給影像存儲服務(wù)器(123 )。
然后,說明通過影像存儲服務(wù)器22執(zhí)行的影像存儲服務(wù)器程序220。
影像存儲服務(wù)器22以規(guī)定的定時(例如以規(guī)定的時間間隔、通過其他系 統(tǒng)檢測出事件時),向登錄用計算機5發(fā)送高清晰度圖像請求(221)。然后, 當(dāng)取得通過攝像機1攝像的影像數(shù)據(jù)時(222),調(diào)整取得的影像數(shù)據(jù)的時間間 隔,并在存儲裝置中存儲取得的影像數(shù)據(jù)(223 )。該影像數(shù)據(jù)的時間間隔的調(diào) 整,參照附加在從登錄用計算機5取得的影像數(shù)據(jù)中的信息(例如,該影像數(shù) 據(jù)的幀速率),轉(zhuǎn)換成與記錄在影像存儲服務(wù)器22的形式的幀速率相符合的影 像數(shù)據(jù)的形式,記錄轉(zhuǎn)換后的影像數(shù)據(jù)。另外,在將影傳Jt據(jù)的幀速率從高速 率轉(zhuǎn)換成低速率時,刪除剩余的幀就可以。另一方面,將影像數(shù)據(jù)的幀速率從 低速率轉(zhuǎn)換成高速率時,可以將前后的圖像作成不足的幀,或者補齊不足的幀。
如此,在存儲裝置中存儲調(diào)整了時間間隔的影像數(shù)據(jù),因而可以以統(tǒng)一的 形式存儲不同幀速率的圖像數(shù)據(jù)。
圖3是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的檢索用信息登錄處理 的概要的說明圖。
首先,影像取得線程110的處理,與在圖2中前面所述的處理相同。 在檢索用信息登錄線程140中,在取得通過線程間通信130發(fā)送來的數(shù)據(jù) (幀圖像、背景差分圖像)時(141 ),通過事件檢測處理142 (圖4)檢測事 件。然后,在沒有檢測出事件時(在143中"N"),返回到步驟141,取得下 一個圖像。另一方面,在檢測出事件時(143中"Y"),提取圖像特征量(144)。 之后,向檢索服務(wù)器21發(fā)送包含提取的特征量以及原影像數(shù)據(jù)的識別符 的檢索用信息登錄請求(圖5的2001 ) ( 145 )。另外,檢索用信息登錄請求中 可以不包含原影像數(shù)據(jù)的識別符,而是包含攝像了原影像數(shù)據(jù)的攝像機1的識 別符。然后,當(dāng)從檢索服務(wù)器21接收檢索用信息的登錄確認(rèn)通知時(146), 返回到步驟141,取得下一個圖像。
然后,說明通過檢索服務(wù)器21執(zhí)行的檢索服務(wù)器程序210。 檢索服務(wù)器21在從登錄用計算機5接收到檢索用信息登錄請求時(211 ),將接收到的檢索用信息(圖像特征量以及影像數(shù)據(jù)的識別符)存儲在存儲裝置
中(212)。之后,向登錄用計算機5發(fā)送檢索用信息的登錄確認(rèn)通知(213)。 另外,如在圖5中后述,登錄用計算機5存儲檢索用信息后,向監(jiān)控裝置3 發(fā)送登錄事件通知。
圖4是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的檢索用信息登錄處理 的細節(jié)的流程圖。
檢索用信息登錄線程處理,首先,當(dāng)取得通過線程間通信130發(fā)送來的幀 圖像以及背景差分圖像時(1001 ),從取得的圖1I4企測事件(1002 )。具體地說, 求出背景差分圖像的像素值的平方和,比較求出的平方和與確定的閾值,由此 判定有無移動成分。結(jié)果,求出的像素值的平方和較大(存在移動成分)時, 判定為檢測出事件。
另外,可以不根據(jù)移動成分的有無,而使用面部檢測來檢測事件。面部檢 測的方法用在步驟1003中后述的方法,在圖像中檢測出與預(yù)先登錄的面部一 致的面部時,判定為檢測出事件。
然后,在沒有檢測出事件時,返回到步驟1001,取得下一個圖像。另一 方面,在檢測出事件時,為了從檢測出事件的幀圖^^r測圖像特征量,前進到 步驟1003。如此,在檢測特征量之前,通過根據(jù)移動成分的有無檢測事件, 就不必頻繁執(zhí)行運算量大的圖像特征檢測處理,能夠整體抑制運算量。
在步驟1003中,從檢測出事件的幀圖像檢測面部區(qū)域。面部檢測可以使 用作為打開源的庫的"openCV"。該"openCV,,在英特爾公司的主頁中較詳 纟田。
然后,在檢測出1以上的面部區(qū)域時(在1004中"Y"),提取檢測出的 各面部區(qū)域的圖像特征量(1005 )。面部區(qū)域的圖像特征量的檢測可以使用邊 緣模式圖特征量。為了提取邊緣模式圖特征量,首先,預(yù)先設(shè)定多個特征的邊 緣模式圖。然后,將面部圖像以格子狀進行結(jié)構(gòu)圖分割,數(shù)出包含在各區(qū)域內(nèi) 的邊緣模式圖數(shù)。生成所數(shù)出的邊緣模式圖數(shù)的組織圖,生成將預(yù)先設(shè)定的邊 緣模式圖數(shù)作為維數(shù)的多維矢量,由此生成面部圖像特征量。另外,也可以著 眼于面部固有的眼睛、鼻子以及/或者口等部分,生成面部圖像特征量。
然后,從檢測出事件的頓圖像檢測移動體區(qū)域(1006)。移動體檢測可以
10使用幀間差分法以A/或者背景差分法。幀間差分法,求出1-多個幀前的圖像 和當(dāng)前的幀圖像的差,檢測移動體的區(qū)域。比較差分法,求出當(dāng)前的幀圖像和 預(yù)先做成的背景圖像的差,檢測移動體的區(qū)域。
然后,在檢測出1以上的移動體區(qū)域時(在1007中"Y")時,提取檢測 出的各移動體區(qū)域的圖像特征量(1008)。為了求出移動體區(qū)域的圖像特征量, 可以從檢測區(qū)域提取基于顏色信息的整體圖像特征量。具體地說,對檢測區(qū)域 按格子狀進行結(jié)構(gòu)圖分割,生成被分割的各區(qū)域的顏色組織圖。然后,將根據(jù) 顏色組織圖生成的多維矢量作為整體圖像特征量來使用。另外,可以不使用顏 色信息,而使用輝度值以及光亮度值等信息,或者組合了顏色、輝度值以及光 亮度值的信息。
之后,判定是否檢測出1以上的面部區(qū)域或1以上的移動體區(qū)域(1009)。 結(jié)果,在沒有檢測到面部區(qū)域以及移動體區(qū)域中的任意一個時(在1009中 "N"),判定為檢測的事件無效,不登錄圖像特征量,返回到步驟IOOI,取得 下一個圖像。另 一方面,在檢測到面部區(qū)域以及移動體區(qū)域中的任意一個時(在 1009中"Y"),向檢索服務(wù)器21發(fā)送包含各區(qū)域的圖像特征量的檢索用信息 登錄請求(圖5的2001 ) ( 1010)。
如此,在即使根據(jù)移動成分檢測出事件、由于未能檢測出面部區(qū)域以及/ 或者移動體區(qū)域、而不能提取圖像特征量時,不向檢索服務(wù)器21發(fā)送檢索信 息登錄請求,因而能夠抑制檢索系統(tǒng)的負荷。
在圖4所示的檢索用信息登錄處理中,檢測出了面部區(qū)域以及移動體區(qū) 域,但檢測出面部區(qū)域或者移動體區(qū)域中的一方,也可以提取出被4企測的區(qū)域 的圖像特征量。
圖5是表示本發(fā)明的第1實施方式的影像網(wǎng)絡(luò)系統(tǒng)的動作的說明圖。 登錄用計算機5在攝像機1取得的圖像中檢測出事件時,向建設(shè)服務(wù)器
21發(fā)送檢索用信息登錄請求2001。
檢索服務(wù)器21在從登錄用計算機5接收到檢索用信息登錄請求2001時 (圖4的211),在存儲裝置中存儲接收到的檢索用信息(圖4的212 )。之后,
在登錄用計算機5中,向監(jiān)控裝置3發(fā)送登錄事件通知2002,與登錄數(shù)據(jù)的
識別符一起通知重新登錄了數(shù)據(jù)。監(jiān)控裝置3判定與接收的檢索用信息相關(guān)的影像數(shù)據(jù)的重要度,在判定為 與接收到的檢索用信息相關(guān)的影像數(shù)據(jù)重要時,向影像存儲服務(wù)器22發(fā)送包 含影像數(shù)據(jù)的識別符的影像分發(fā)請求。
影像存儲服務(wù)器22在接收到影像分發(fā)請求時,向請求源的監(jiān)控裝置3發(fā) 送與接收到的影像數(shù)據(jù)的識別符相對應(yīng)的攝像機1的最新影像。
監(jiān)控裝置3將從影像存儲服務(wù)器22接收的影像數(shù)據(jù)作為移動圖像來顯示。
如前面所述,在本發(fā)明的第1實施方式中,登錄用計算機5根據(jù)通過攝像 機1攝像的影像生成檢索用信息,并將所述生成的檢索用信息發(fā)送給檢索服務(wù) 器21。檢索服務(wù)器,將從登錄用計算機5接收到的檢索用信息存儲在存儲裝 置中,并將進行了存儲作為事件來發(fā)送給監(jiān)控裝置3。此外,影像存儲服務(wù)器 22以規(guī)定的定時,向登錄用計算機5請求攝像機1取得的影像數(shù)據(jù)。登錄用 計算機5按照來自影像存儲服務(wù)器22的請求,發(fā)送通過攝像機1攝像的影像。
因此,在包含多個攝像機的影像網(wǎng)絡(luò)系統(tǒng)中,能夠?qū)崿F(xiàn)適當(dāng)?shù)呢摵煞稚ⅰ?通過這樣的負荷分散,即使是攝像機數(shù)增加由于也增加構(gòu)成系統(tǒng)的各裝置(服 務(wù)器、計算機),由此,系統(tǒng)的負荷以及網(wǎng)絡(luò)的負荷并不緊張,,能夠提高系統(tǒng) 的可伸縮性。
此外,由于根據(jù)需要向監(jiān)控裝置3分發(fā)高清晰度的移動圖像數(shù)據(jù),因而能 夠抑制網(wǎng)絡(luò)的負荷的增大。而且,由于影像存儲服務(wù)器22控制向影像存儲服 務(wù)器22發(fā)送高清晰度的移動圖像數(shù)據(jù)的發(fā)送定時,因而能夠抑制網(wǎng)絡(luò)的負荷 的增大。
此外,監(jiān)控裝置3判定是否需要與從檢索服務(wù)器21接收的檢索用信息相 關(guān)的影像(重要度),在判定為需要接收到的檢索用信息相關(guān)的影像時,向影 像存儲服務(wù)器22請求與該檢索用信息相關(guān)的影像。影像存儲服務(wù)器22按照來 自監(jiān)控裝置3的影像分發(fā)請求,向請求源的監(jiān)控裝置3發(fā)送被請求的影像數(shù)據(jù)。 監(jiān)控裝置3顯示從影像存儲服務(wù)器22取得的影像數(shù)據(jù)。
因而,不必增大網(wǎng)絡(luò)的負荷,就可以無縫地檢索以及顯示履歷信息(過去 的影像數(shù)據(jù))和實時信息(當(dāng)前的影像數(shù)據(jù))。
而且,用攝像機側(cè)的登錄用計算機5縮小通過面部檢測、移動體檢測而成 為檢索對象的幀圖像,因而抑制集中在檢索服務(wù)器中的信息,能夠減輕檢索服
12務(wù)器21的負荷。
而且,通過攝像機測的登錄用計算機5提取圖像特征量,因而能夠減輕檢 索服務(wù)器21的負荷。
而且,將處理攝像機1取得的影像數(shù)據(jù)的登錄用計算機5與攝像機1分開 設(shè)置,因而攝像機不必具有高度的功能,能夠使用低功能且低價的市場上出售 的攝像機構(gòu)成系統(tǒng)。 〈第2實施方式〉
圖6是表示本發(fā)明的第2實施方式的影像網(wǎng)絡(luò)系統(tǒng)的結(jié)構(gòu)的框圖。
第2實施方式與前面所述的第1實施方式不同,不具有登錄用計算機5。 在第2實施方式中,才聶像機1所具有的影像處理部發(fā)揮與第1實施方式的登錄 用計算機5相同的功能。
具體地說,第2實施方式的影像網(wǎng)絡(luò)系統(tǒng)具有多個攝像機l、中心側(cè)系 統(tǒng)2,監(jiān)控裝置3以及網(wǎng)絡(luò)4。
攝像機l具有包含透鏡的光學(xué)系統(tǒng)、將影像轉(zhuǎn)換成電信號的攝像部、對 攝像的影像數(shù)據(jù)進行處理的影像處理部以及網(wǎng)絡(luò)接口。例如,攝像機l可以使 用可直接與IP網(wǎng)絡(luò)連接的IP攝像機。攝像機1被設(shè)置在攝影對象區(qū)域,對攝 影對象區(qū)域的影像進行攝像,根據(jù)來自影像存儲服務(wù)器22的高清晰度圖像的 請求,經(jīng)由網(wǎng)絡(luò)4向影像存儲服務(wù)器22發(fā)送攝影的影像數(shù)據(jù)。
此外,攝像機1的影像處理部具有處理器以及存儲器,從攝影的影像數(shù)據(jù) 提取圖像特征量。被提取的圖像特征量的提取,使用移動檢測、面部檢測的技 術(shù),從已攝像預(yù)先規(guī)定的移動或者預(yù)先規(guī)定的面部的影像數(shù)據(jù)來提取。而且, 攝像機1的影像處理部,根據(jù)攝像的影像數(shù)據(jù)生成低清晰度的影像數(shù)據(jù)。然后, 經(jīng)由網(wǎng)絡(luò)4向檢索服務(wù)器21發(fā)送提取的圖像特征量以及生成的低清晰度影像 數(shù)據(jù)。
即、代替前面所述的第1實施方式的登錄用計算機5,攝像機l的影像處 理部執(zhí)行圖像登錄程序100 (參照圖2、圖3 )。
中心側(cè)系統(tǒng)2以及監(jiān)控裝置3與前面所述的第1實施方式(圖6)相同。 另夕卜,第2實施方式的影像存儲服務(wù)器22向攝像機1發(fā)送高清晰度圖像請求。
攝像機l、檢索服務(wù)器21、影像存儲服務(wù)器22以及監(jiān)控裝置3經(jīng)由網(wǎng)絡(luò)
134連接。例如,網(wǎng)絡(luò)4可以使用可傳送TCP/IP包的IP網(wǎng)絡(luò)。
如前面所述,在本發(fā)明的第2實施方式中,由于攝像機l包含登錄用計算 機5的功能(在攝像機1的影像處理部中進行與登錄用計算機5相同的處理), 因而與前面所述的第1實施方式相比能夠?qū)μ幚磉M一步進行分散,能夠提高系 統(tǒng)的伸縮性。
1權(quán)利要求
1. 一種影像網(wǎng)絡(luò)系統(tǒng),其具有對影像進行攝影的多臺攝像機和顯示通過所述攝像機攝影的影像的監(jiān)控裝置,其特征在于,具有信息生成裝置,其生成通過所述攝像機攝像的影像的檢索用信息;以及檢索裝置,其檢索通過所述攝像機攝像的影像,所述信息生成裝置,取得通過所述攝像機攝像的影像,并根據(jù)所述取得的影像生成檢索用信息,將生成的所述檢索用信息發(fā)送給所述檢索裝置,所述檢索裝置,將從所述信息生成裝置接收到的檢索用信息存儲在存儲裝置中,并向所述監(jiān)控裝置發(fā)送所存儲的所述檢索用信息。
2. 根據(jù)權(quán)利要求1所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于,所述影像網(wǎng)絡(luò)系統(tǒng)還具有影像存儲裝置,該影像存儲裝置存儲通過所述攝 像機攝像的影像,所述監(jiān)控裝置,根據(jù)從所述檢索裝置接收到的檢索用信息,判定是否需要 與所述檢索用信息相關(guān)的影像,在判定為需要與所述檢索用信息相關(guān)的影像 時,向所述影像存儲裝置請求與該檢索用信息相關(guān)的影像,所述影像存儲裝置,按照來自所述監(jiān)控裝置的影像的請求,向請求源的所 述監(jiān)控裝置發(fā)送被請求的影像數(shù)據(jù),所述監(jiān)控裝置顯示從所述影像存儲裝置取得的影像數(shù)據(jù)。
3. 根據(jù)權(quán)利要求1所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于,所述影像網(wǎng)絡(luò)系統(tǒng)還具有影像存儲裝置,該影像存儲裝置存儲通過攝像機 攝像的影像,所述影像存儲裝置,以規(guī)定的定時,向所述信息生成裝置請求通過所述才聶 像機攝像的影4象,所述信息生成裝置,按照來自所述影像存儲裝置的請求,發(fā)送通過所述攝 像機攝像的影像。
4. 根據(jù)權(quán)利要求3所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于, 所述影像存儲裝置,在根據(jù)附加在從所述信息生成裝置取得的影像中的信息,調(diào)整了從所述信息生成裝置取得的影像的時間間隔后,將所述取得的影像 存儲在存儲裝置中。
5. 根據(jù)權(quán)利要求1所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于, 所述信息生成裝置,從通過所述攝像機攝像的影像檢測出移動成分,在沒有檢測到所述移動成分時,不向所述檢測裝置發(fā)送所述檢索用信息。
6. 根據(jù)權(quán)利要求1所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于, 所述信息生成裝置從通過所述攝像機攝像的影像檢測面部區(qū)域圖像,在沒有檢測到所述面部區(qū)域圖像時,不向所述檢測裝置發(fā)送所述檢索用信息。
7. 根據(jù)權(quán)利要求5或6所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于, 所述信息生成裝置,從通過所述攝像機攝像的影像檢測面部區(qū)域,提取所述檢測出的面部區(qū)域 的圖像特征量,從通過所述攝像機攝像的影像檢測移動體區(qū)域,提取所述檢測出的移動體 區(qū)域的圖像特征量,將所述提取出的圖像特征量作為所述檢索用信息。
8. 根據(jù)權(quán)利要求7所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于, 所述信息生成裝置,在從通過所述攝像機攝像的影像檢測出移動成分時,檢測所述面部區(qū)域以 及所述移動體區(qū)域,在雖然檢測出所述移動成分、但卻沒有檢測到所述面部區(qū)域以及所述移動 體區(qū)域中的任何一個時,不向所述才全索裝置發(fā)送所述4企索用信息。
9. 根據(jù)權(quán)利要求1所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于, 所述信息生成裝置與所述多臺攝像機中的一部分連接,生成通過所述連接的攝像機攝像的影像的檢索用信息。
10. 根據(jù)權(quán)利要求1所述的影像網(wǎng)絡(luò)系統(tǒng),其特征在于, 所述信息生成裝置,與各個所述攝像機構(gòu)成為一體,生成通過被構(gòu)成為所述一體的攝像機攝像的影像的檢索用信息。
11. 一種影像數(shù)據(jù)管理方法,其用于如下的影像網(wǎng)絡(luò)系統(tǒng),該影像網(wǎng)絡(luò)系 統(tǒng)具有多臺攝像機,其對影像進行攝像;檢索裝置,其檢索通過所述攝像機攝像的影像;信息生成裝置,其生成通過所述攝像機攝像的影像的檢索用信息; 以及監(jiān)控裝置,其顯示通過所述攝像機攝影的影像,其特征在于,所述信息生成裝置,按照來自所述影像存儲裝置的請求,發(fā)送通過所述攝 像機攝像的影像,所述信息生成裝置,進而取得通過所述攝像機攝像的影像,并根據(jù)所述取 得的影像生成檢索用信息,將生成的所述檢索用信息發(fā)送給所述檢索裝置,所述檢索裝置,存儲從所述信息生成裝置接收到的檢索用信息,并向所述 監(jiān)控裝置通知已經(jīng)存儲了所述檢索用信息,所述監(jiān)控裝置根據(jù)從所述檢索裝置接收到的通知,顯示與所述檢索用信息 相關(guān)的影像。
12. —種影像數(shù)據(jù)管理方法,其用于如下的影像網(wǎng)絡(luò)系統(tǒng),該影像網(wǎng)絡(luò)系 統(tǒng)具有多臺攝像機,其對影像進行攝像;檢索裝置,其檢索通過所述攝像機 攝像的影像;信息生成裝置,其生成通過所述攝像機攝像的影像的檢索用信息; 影像存儲裝置,其存儲通過所述攝像機攝像的影像;以及監(jiān)控裝置,其顯示通 過所述攝像機攝影的影像,其特征在于,所述影像存儲裝置,以規(guī)定的定時,向所述信息生成裝置請求通過所述攝 像機攝像的影像,所述信息生成裝置,按照來自所述影像存儲裝置的請求,發(fā)送通過所述攝 像機攝像的影像,所述信息生成裝置,進而取得通過所述攝像機攝像的影像,并根據(jù)所述取得的影像生成檢索用信息,將生成的所述檢索用信息發(fā)送給所述檢索裝置,所述檢索裝置,存儲從所述信息生成裝置接收到的檢索用信息,并向所述監(jiān)控裝置發(fā)送所存儲的所述檢索用信息,所述監(jiān)控裝置,根據(jù)從所述檢索裝置接收到的檢索用信息,判定是否需要與所述檢索用信息相關(guān)的影像,在判定為需要與所述檢索用信息相關(guān)的影像時,向所述影像存儲裝置請求與該檢索用信息相關(guān)的影像,所述影像存儲裝置,按照來自所述監(jiān)控裝置的影像的請求,向請求源的所 述監(jiān)控裝置發(fā)送被請求的影像數(shù)據(jù),所述監(jiān)控裝置,顯示從所述影像存儲裝置取得的影像數(shù)據(jù)。
全文摘要
本發(fā)明提供一種影像網(wǎng)絡(luò)系統(tǒng)及影像數(shù)據(jù)管理方法。目的是抑制兼具有信息的實時性、履歷信息的保管以及檢索的系統(tǒng)以及網(wǎng)絡(luò)的負荷增大,提高系統(tǒng)的可伸縮性。影像網(wǎng)絡(luò)系統(tǒng)具有對影像進行攝影的多臺攝像機和顯示通過所述攝像機攝影的影像的監(jiān)控裝置,其特征在于,具有信息生成裝置,其生成通過所述攝像機攝像的影像的檢索用信息;以及檢索裝置,其檢索通過所述攝像機攝像的影像,所述信息生成裝置取得通過所述攝像機攝像的影像,根據(jù)所述取得的影像生成檢索用信息,將生成的所述檢索用信息發(fā)送給所述檢索裝置,所述檢索裝置在存儲裝置中存儲從所述信息生成裝置接收到的檢索用信息,并向所述監(jiān)控裝置通知進行了所述存儲。
文檔編號H04N7/18GK101489116SQ20091000160
公開日2009年7月22日 申請日期2009年1月5日 優(yōu)先權(quán)日2008年1月17日
發(fā)明者東村邦彥, 廣池敦, 影廣達彥, 浦野雄大, 秋良直人 申請人:株式會社日立制作所