專利名稱：成像裝置、接收裝置、視頻發(fā)送系統(tǒng)和視頻發(fā)送方法
技術(shù)領(lǐng)域：
本公開涉及一種成像裝置、接收裝置、視頻發(fā)送系統(tǒng)和視頻發(fā)送方法。
背景技術(shù)：
近年來，諸如使用電池驅(qū)動的小攝像機(jī)的監(jiān)視系統(tǒng)的視頻發(fā)送系統(tǒng)投入實(shí)際使用。在視頻發(fā)送系統(tǒng)中，攝像機(jī)通過接入點(diǎn)向諸如服務(wù)器接收裝置發(fā)送視頻數(shù)據(jù)，且所述服務(wù)器接收并處理該視頻數(shù)據(jù)。該服務(wù)器對視頻數(shù)據(jù)進(jìn)行要求具有實(shí)時屬性的分析處理、諸如對象檢測和移動對象檢測
發(fā)明內(nèi)容
在這種視頻發(fā)送系統(tǒng)的攝像機(jī)中，由于要求穩(wěn)定地向接收裝置發(fā)送視頻數(shù)據(jù)，以便保證分析處理的實(shí)時屬性，因此為了數(shù)據(jù)發(fā)送恒定地消耗電池。因此，在實(shí)現(xiàn)視頻發(fā)送系統(tǒng)上需要抑制攝像機(jī)的電池消耗。因此，期望提供一種可以在視頻發(fā)送期間抑制電池消耗的成像裝置、接收裝置、視頻發(fā)送系統(tǒng)和視頻發(fā)送方法。本公開的實(shí)施例指的是一種成像裝置，包括編碼數(shù)據(jù)生成部分，被配置以生成包括能夠不用參考其他圖片解碼的第一圖片和能夠參考其他圖片解碼的一個或多個第二圖片的編碼數(shù)據(jù)；發(fā)送數(shù)據(jù)生成部分，被配置以組合編碼數(shù)據(jù)的第一圖片和在該編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片，來生成發(fā)送數(shù)據(jù)；以及無線電通信部分，被配置以按發(fā)送數(shù)據(jù)為單位間歇地發(fā)送在視頻流中包括的多個發(fā)送數(shù)據(jù)。所述無線電部分具有包括活躍模式和省電模式的操作模式。所述成像裝置還可以包括通信控制部分，被配置以在發(fā)送所述發(fā)送數(shù)據(jù)之后將操作模式切換為省電模式，且在發(fā)送下一發(fā)送數(shù)據(jù)之前將操作模式切換為所述活躍模式。所述無線電通信部分可以在省電模式下停止載波的檢測。所述成像裝置還可以包括電力供給部分，被配置以向至少無線電通信部分供應(yīng)操作電力。所述發(fā)送數(shù)據(jù)生成部分可以生成發(fā)送數(shù)據(jù)，其中，按編碼數(shù)據(jù)的第一圖片和在編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片的順序來排列圖片。所述發(fā)送數(shù)據(jù)生成部分可以生成發(fā)送數(shù)據(jù)，其中，按編碼數(shù)據(jù)的一個或多個第二圖片和在編碼數(shù)據(jù)之后緊挨著的編碼數(shù)據(jù)的第一圖片的順序來排列圖片。所述無線電通信部分可以通過將在各個發(fā)送數(shù)據(jù)中包括的一個或多個第二圖片集中地與第一圖片一起發(fā)送來按發(fā)送數(shù)據(jù)為單位間歇地發(fā)送多個發(fā)送數(shù)據(jù)。本公開的另一實(shí)施例指的是一種接收裝置，包括通信部分，被配置以按發(fā)送數(shù)據(jù)為單位，間歇地接收在視頻流中包括的多個發(fā)送數(shù)據(jù)，編碼數(shù)據(jù)包括能夠不用參考其他圖片解碼的第一圖片和能夠參考其他圖片解碼的一個或多個第二圖片，且通過組合編碼數(shù)據(jù)的第一圖片和在該編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片來生成所述發(fā)送數(shù)據(jù)；以及分析處理部分，被配置以使發(fā)送數(shù)據(jù)中包括的至少第一圖片經(jīng)受分析處理。所述接收裝置還可以包括視頻數(shù)據(jù)生成部分，被配置以組合在發(fā)送數(shù)據(jù)中包括的第一圖片的解碼數(shù)據(jù)和在發(fā)送數(shù)據(jù)之前緊挨著的發(fā)送數(shù)據(jù)中包括的一個或多個第二圖片的解碼數(shù)據(jù)，來生成視頻數(shù)據(jù)。本公開的另一實(shí)施例針對視頻發(fā)送系統(tǒng)，包括成像裝置和接收裝置。本公開的另一實(shí)施例針對一種視頻發(fā)送方法，包括生成包括能夠不用參考其他圖片解碼的第一圖片和能夠參考其他圖片解碼的一個或多個第二圖片的編碼數(shù)據(jù)；組合編碼數(shù)據(jù)的第一圖片和在編碼數(shù)據(jù)之前緊挨著 的編碼數(shù)據(jù)的一個或多個第二圖片，來生成發(fā)送數(shù)據(jù)；以及按發(fā)送數(shù)據(jù)為單位間歇地發(fā)送在視頻流中包括的多個發(fā)送數(shù)據(jù)。根據(jù)本公開的另一實(shí)施例針對一種使得計算機(jī)執(zhí)行視頻發(fā)送方法的計算機(jī)程序。可以使用計算機(jī)可讀記錄介質(zhì)來提供、或可以經(jīng)由通信裝置等來提供計算機(jī)程序。根據(jù)本公開的實(shí)施例，能夠提供一種可以在視頻發(fā)送期間抑制電池消耗的成像裝置、接收裝置、視頻發(fā)送系統(tǒng)和視頻發(fā)送方法。


圖I是根據(jù)本公開實(shí)施例的視頻發(fā)送系統(tǒng)的圖；圖2是根據(jù)本公開實(shí)施例的攝像機(jī)的配置的框圖；圖3是根據(jù)本公開實(shí)施例的服務(wù)器的配置的框圖；圖4是編碼數(shù)據(jù)和發(fā)送數(shù)據(jù)的配置例子的圖；圖5是發(fā)送數(shù)據(jù)的配置例子的圖；圖6是說明攝像機(jī)的操作的流程圖；圖7是說明根據(jù)本公開實(shí)施例的視頻發(fā)送系統(tǒng)中視頻發(fā)送方法的圖；圖8是說明服務(wù)器的操作的流程圖；以及圖9是說明在通用視頻發(fā)送系統(tǒng)中的視頻發(fā)送方法的圖。
具體實(shí)施例方式將參考附圖詳細(xì)描述本公開的實(shí)施例。在該說明書和附圖中，用相同附圖標(biāo)記和符號來指示具有基本上相同的功能配置的組件，且不重復(fù)對這些組件的冗余說明。[I.通用視頻發(fā)送系統(tǒng)]首先，將參考圖9說明在通用視頻發(fā)送系統(tǒng)中的視頻發(fā)送方法。圖9是說明在通用視頻發(fā)送系統(tǒng)中的視頻發(fā)送方法的圖。如圖9所示，在視頻發(fā)送系統(tǒng)中，攝像機(jī)I通過圖中未示出的接入點(diǎn)AP和網(wǎng)絡(luò)NW向服務(wù)器3發(fā)送視頻數(shù)據(jù)。月艮務(wù)器3實(shí)時地接收視頻數(shù)據(jù)且使該視頻數(shù)據(jù)經(jīng)受分析處理。攝像機(jī)I使用諸如MPEG (運(yùn)動圖像專家組)2或H. 264 | AVC (ITU-T推薦MPEG-4部分10:先進(jìn)視頻編碼)系統(tǒng)來壓縮編碼視頻數(shù)據(jù)。視頻數(shù)據(jù)被壓縮編碼為能夠獨(dú)立解碼的圖片(第一圖片Pl)和不同于該圖片的圖片(第二圖片P2)。圖片意味著圖像。一個圖片等同于一個圖像。通過使用運(yùn)動補(bǔ)償?shù)膸g編碼(預(yù)測編碼)結(jié)合使用正交變換等的幀內(nèi)編碼來進(jìn)行壓縮編碼。
能夠獨(dú)立解碼的第一圖片Pl是由巾貞內(nèi)編碼編碼的IDR(Instantaneous DecodingRefresh，即時解碼刷新)圖片、1(內(nèi)部解碼)圖片等?？梢圆粎⒖计渌麍D片來解碼第一圖片P1。可能不能被獨(dú)立解碼的第二圖片P2是由幀間編碼編碼的P(預(yù)測編碼)圖片、B(雙向預(yù)測編碼)圖片等?？赡懿荒懿粎⒖计渌麍D片來解碼第二圖片P2。攝像機(jī)I壓縮編碼視頻數(shù)據(jù)并發(fā)送編碼數(shù)據(jù)ED(編碼數(shù)據(jù)的通常術(shù)語)。在圖9中，順序地發(fā)送編碼數(shù)據(jù)ED1、ED2、ED3、ED4等。編碼數(shù)據(jù)ED包括第一圖片Pl和不同于第一圖片Pl的一個或 多個第二圖片P2。在編碼數(shù)據(jù)ED中，在第一圖片Pl之后安排該一個或多個第二圖片P2。服務(wù)器3接收編碼數(shù)據(jù)ED，優(yōu)選地提取第一圖片P1，解碼提取的圖片，并實(shí)時對提取的圖片進(jìn)行分析處理。因此，要求攝像機(jī)I周期性地向服務(wù)器3發(fā)送第一圖片P1，以便保證分析處理的實(shí)時屬性。每次生成第一圖片Pl或第二圖片P2時，連續(xù)發(fā)送生成的圖片。因此，在包括多個編碼數(shù)據(jù)ED的視頻流的發(fā)送時間段中為了數(shù)據(jù)發(fā)送恒定地消耗攝像機(jī)I的電池。[2.根據(jù)本公開的一個實(shí)施例的視頻發(fā)送系統(tǒng)的配置]參考圖I到3說明根據(jù)本公開實(shí)施例的視頻發(fā)送系統(tǒng)的配置。圖I是根據(jù)本公開實(shí)施例的視頻發(fā)送系統(tǒng)的圖。如圖I所示，視頻發(fā)送系統(tǒng)包括攝像機(jī)10、服務(wù)器30、接入點(diǎn)AP和網(wǎng)絡(luò)NW。攝像機(jī)10是電池驅(qū)動的小成像裝置，且連接到接入點(diǎn)AP。服務(wù)器30是執(zhí)行要求具有實(shí)時屬性的分析處理、諸如對象檢測和移動對象檢測的信息處理裝置。服務(wù)器30通過有線或無線電連接到網(wǎng)絡(luò)NW。接入點(diǎn)AP是用于無線電通信的橋、路由器等。接入點(diǎn)AP連接到攝像機(jī)10和網(wǎng)絡(luò)NW。攝像機(jī)10向接入點(diǎn)AP發(fā)送視頻數(shù)據(jù)。接入點(diǎn)AP進(jìn)行與接入點(diǎn)AP和攝像機(jī)10之間的視頻數(shù)據(jù)的緩存和發(fā)送和接收。類似地，接入點(diǎn)AP進(jìn)行通過網(wǎng)絡(luò)NW的在接入點(diǎn)AP和服務(wù)器30之間的視頻數(shù)據(jù)的緩存和發(fā)送和接收。服務(wù)器30接收視頻數(shù)據(jù)且對該視頻數(shù)據(jù)進(jìn)行分析處理。攝像機(jī)10可以通過接入點(diǎn)AP或其他接入點(diǎn)連接到其他服務(wù)器。服務(wù)器30可以向未示出的用戶終端等發(fā)送視頻數(shù)據(jù)、分析處理的結(jié)果等。[2-1.攝像機(jī)的配置]圖2是根據(jù)本公開實(shí)施例的攝像機(jī)10的配置的框圖。如圖2所示，攝像機(jī)10包括光學(xué)系統(tǒng)11、攝像機(jī)控制部分12、視頻獲取部分13、編碼數(shù)據(jù)生成部分14、發(fā)送數(shù)據(jù)生成部分15、無線電通信部分16、通信控制部分17、電力供給部分18、存儲部分19和控制部分20。光學(xué)系統(tǒng)11包括鏡頭系統(tǒng)、光圈和焦距調(diào)整機(jī)構(gòu)和縮放和快門機(jī)構(gòu)。光學(xué)系統(tǒng)11將光從拍攝對象引導(dǎo)到視頻獲取部分13。攝像機(jī)控制部分12基于從控制部分20供應(yīng)的控制信號來控制光學(xué)系統(tǒng)11。通過控制部分20基于從稍后說明的成像設(shè)備輸出的成像信號的信息來生成控制信號。視頻獲取部分13包括成像設(shè)備、成像信號處理部分和視頻信號處理部分。成像設(shè)備包括CCD (電荷耦合器件)。成像設(shè)備將從光學(xué)系統(tǒng)11導(dǎo)入的光轉(zhuǎn)換為電信號，對該電信號進(jìn)行信號處理，且輸出電信號作為成像信號。成像信號處理部分包括CDS (相關(guān)雙采樣)電路、AGC(自動增益控制)電路和ADC(模擬數(shù)字轉(zhuǎn)換器)電路等。成像信號處理部分對從成像設(shè)備供應(yīng)的成像信號進(jìn)行信號處理，且輸出該成像信號作為數(shù)字信號。視頻信號處理部分包括Y校正電路和白平衡校正電路。視頻信號處理部分對從成像信號處理部分供應(yīng)的數(shù)字信號進(jìn)行信號處理，且輸出該數(shù)字信號作為視頻信號。編碼數(shù)據(jù)生成部分14包括視頻編碼器，且壓縮編碼從視頻獲取部分13供應(yīng)的視頻數(shù)據(jù)，且生成編碼數(shù)據(jù)ED。使用諸如MPEG2或H. 264 | AVC的系統(tǒng)來壓縮編碼該視頻數(shù)據(jù)。通過使用運(yùn)動補(bǔ)償?shù)膸g編碼(預(yù)測編碼)結(jié)合使用正交變換等的幀內(nèi)編碼來進(jìn)行壓縮編碼。編碼數(shù)據(jù)ED包括能夠不用參考其他圖片解碼的第一圖片Pl和可能不能不參考其他圖片解碼的第二圖片P2。第一圖片Pl是經(jīng)歷了幀內(nèi)編碼的圖片。第二圖片P2是作為與第一圖片的差經(jīng)歷了幀間編碼的圖片。編碼數(shù)據(jù)ED包括第一圖片Pl和被安排在第一圖片Pl之后的一個或多個第二圖片P2。發(fā)送數(shù)據(jù)生成部分15包括數(shù)據(jù)處理設(shè)備，且劃分在從編碼數(shù)據(jù)生成部分14供應(yīng)的編碼數(shù)據(jù)ED中包括的第一圖片Pl和第二圖片P2，且生成發(fā)送數(shù)據(jù)TD。發(fā)送數(shù)據(jù)TD (發(fā)送數(shù)據(jù)的通常術(shù)語)基本上是通過組合特定編碼數(shù)據(jù)ED的第一圖片Pl和在該特定編碼數(shù)據(jù)ED之前緊挨著的編碼數(shù)據(jù)ED的一個或多個第二圖片P2來獲得的數(shù)據(jù)。 無線電通信部分16包括發(fā)送和接收電路，且向接入點(diǎn)AP和從接入點(diǎn)AP發(fā)送和接收諸如發(fā)送數(shù)據(jù)TD的數(shù)據(jù)。無線電通信部分16按發(fā)送數(shù)據(jù)TD為單位間歇地發(fā)送在視頻流中包括的多個發(fā)送數(shù)據(jù)TD。通過將在發(fā)送數(shù)據(jù)TD中包括的一個或多個第二圖片P2集中地與第一圖片Pl —起發(fā)送來進(jìn)行間歇的發(fā)送。所述無線電部分16以諸如活躍模式或省電模式的操作模式來操作。在活躍模式中，恒定地從電力供給部分18向發(fā)送和接收電路供應(yīng)電力。在省電模式中，根據(jù)電力的必要性來間歇地供應(yīng)電力。通信控制部分17基于從控制部分20供應(yīng)的控制信號來控制無線電通信部分16的操作。通信控制部分17在發(fā)送該發(fā)送數(shù)據(jù)TD之后立即將操作模式切換到省電模式，且就在發(fā)送下一發(fā)送數(shù)據(jù)TD之前將操作模式切換到活躍模式。電力供給部分18包括可充電或不可充電電池，且向包括無線電通信部分16的攝像機(jī)10的各部分供應(yīng)操作電力。電力供給部分18基于從控制部分20供應(yīng)的控制信號，來控制對無線電通信部分16的電力供應(yīng)。電力供給部分18連接到控制部分20和通信控制部分17，其中該控制部分20控制作為操作電力的供應(yīng)目的地和的各部分和電力供給部分18。存儲部分19包括存儲器或硬盤，并存儲視頻數(shù)據(jù)、編碼數(shù)據(jù)ED、發(fā)送數(shù)據(jù)TD等?？刂撇糠?0包括CPU、ROM和RAM等，進(jìn)行攝像機(jī)10的操作必要的算術(shù)運(yùn)算和控制?？刂撇糠?0讀出在ROM等中存儲的計算機(jī)程序，在RAM上擴(kuò)展該計算機(jī)程序，并執(zhí)行計算機(jī)程序來控制攝像機(jī)10的操作?？刂撇糠?0通過總線21連接到攝像機(jī)控制部分12、視頻獲取部分13、編碼數(shù)據(jù)生成部分14、發(fā)送數(shù)據(jù)生成部分15、通信控制部分17和存儲部分19。[2-2.服務(wù)器的配置]圖3是根據(jù)本公開實(shí)施例的服務(wù)器30的配置的框圖。如圖3所示，服務(wù)器30包括通信部分31、分析處理部分32、視頻解碼部分33、視頻數(shù)據(jù)生成部分34、和存儲部分35和控制部分36。通信部分31包括發(fā)送和接收電路，且通過網(wǎng)絡(luò)NW向接入點(diǎn)AP和從接入點(diǎn)AP發(fā)送和接收諸如發(fā)送數(shù)據(jù)TD的數(shù)據(jù)。通信部分31可以通過網(wǎng)絡(luò)NW或其他網(wǎng)絡(luò)向未示出的用戶終端等發(fā)送視頻流、和分析處理的結(jié)果。分析處理部分32包括數(shù)據(jù)處理設(shè)備，且使用發(fā)送數(shù)據(jù)TD來進(jìn)行要求具有實(shí)時屬性的分析處理、諸如對象檢測和移動對象檢測。對于分析處理，優(yōu)選地使用從發(fā)送數(shù)據(jù)TD提取且解碼的第一圖片P1。與作為與其他圖片的差的第二圖片P2不同，第一圖片Pl充分地包括一個圖片的數(shù)據(jù)。因此，優(yōu)選地使用第一圖片Pl用于分析處理。但是，可以使用一個或多個第二圖片P2連同第一圖片Pl —起用于分析處理。視頻解碼部分33包括視頻解碼器，且解壓縮解碼在發(fā)送數(shù)據(jù)TD中包括的圖片，且輸出解碼數(shù)據(jù)。根據(jù)幀內(nèi)編碼和幀間編碼來進(jìn)行解壓縮解碼。視頻數(shù)據(jù)生成部分34包括數(shù)據(jù)處理設(shè)備，且從發(fā)送數(shù)據(jù)TD生成視頻數(shù)據(jù)。如上所述，發(fā)送數(shù)據(jù)TD基本上是通過組合特定編碼數(shù)據(jù)ED的第一圖片Pl和在該特定編碼數(shù)據(jù)ED之前緊挨著的編碼數(shù)據(jù)ED的一個或多個第二圖片P2來獲得的數(shù)據(jù)。因此，通過組合在發(fā)送數(shù)據(jù)TD中包括的第一圖片Pl的解碼數(shù)據(jù)和在該發(fā)送數(shù)據(jù)TD之后的發(fā)數(shù)據(jù)TD中包括的一個或多個第二圖片P2的解碼數(shù)據(jù)來生成視頻數(shù)據(jù)。 存儲部分35包括存儲器或硬盤，并存儲發(fā)送數(shù)據(jù)TD、編碼數(shù)據(jù)ED、解碼數(shù)據(jù)、視頻數(shù)據(jù)等?？刂撇糠?6包括CPU、ROM和RAM等，進(jìn)行服務(wù)器30的操作必要的算術(shù)運(yùn)算和控制?？刂撇糠?6讀出在ROM等中存儲的計算機(jī)程序，在RAM上擴(kuò)展該計算機(jī)程序，并執(zhí)行計算機(jī)程序來控制攝像機(jī)30的操作?？刂撇糠?6通過總線21連接到服務(wù)器30的各部分。[3.編碼數(shù)據(jù)ED和發(fā)送數(shù)據(jù)TD]參考圖4和5來說明編碼數(shù)據(jù)ED和發(fā)送數(shù)據(jù)TD。圖4是編碼數(shù)據(jù)ED和發(fā)送數(shù)據(jù)TD的配置例子的圖。在圖4所示的例子中，在視頻流中包括的編碼數(shù)據(jù)EDI、ED2、ED3等包括多個網(wǎng)絡(luò)NW抽象層(NW abstract layer, NAL)單元。具體地，編碼數(shù)據(jù) ED 包括 NAL(IDR)，NAL(P)，NAL(Bl)，NAL (B2)，and NAL (B3)的單
J Li οNAL單元分別包括IDR圖片(IDR)、P圖片(P)和B圖片(BI到B3)的數(shù)據(jù)。指示NAL單元的邊界的定界符D被布置在編碼數(shù)據(jù)ED的頭部且被布置在NAL單元之間。IDR圖片是能夠獨(dú)立解碼的第一圖片P1。P圖片和B圖片是可能不能獨(dú)立解碼的第二圖片P2。通常通過組合特定編碼數(shù)據(jù)ED的第一圖片Pl和在該編碼數(shù)據(jù)ED之前緊挨著的編碼數(shù)據(jù)ED的一個或多個第二圖片P2來生成發(fā)送數(shù)據(jù)TD。具體地，從編碼數(shù)據(jù)EDl的第一圖片Pl生成發(fā)送數(shù)據(jù)TD1。從編碼數(shù)據(jù)EDl的一個或多個第二圖片P2和編碼數(shù)據(jù)ED2的第一圖片Pl中生成發(fā)送數(shù)據(jù)TD2。從編碼數(shù)據(jù)ED2的一個或多個第二圖片P2和編碼數(shù)據(jù)ED3的第一圖片Pl中生成發(fā)送數(shù)據(jù)TD3。指示發(fā)送數(shù)據(jù)TD的專屬報頭(header)H被布置在發(fā)送數(shù)據(jù)TD的頭部。定界符D被布置在NAL單元之間。圖5是發(fā)送數(shù)據(jù)TD的配置例子的圖。在圖5中，示出通過按編碼數(shù)據(jù)EDi-I的一個或多個第二圖片P2和在編碼數(shù)據(jù)EDi-I之后緊挨著的編碼數(shù)據(jù)EDi的第一圖片Pl的順序排列圖片而生成的發(fā)送數(shù)據(jù)TDi (TDA)，以對應(yīng)于圖4。在此，i是等于或大于2的自然數(shù)。相反，如由發(fā)送數(shù)據(jù)TDi (TDB)指示的，可以通過按編碼數(shù)據(jù)EDi的第一圖片Pl和在編碼數(shù)據(jù)EDi之前緊挨著的編碼數(shù)據(jù)EDi-I的一個或多個第二圖片P2的順序排列圖片來生成發(fā)送數(shù)據(jù)。圖4和5不限制編碼數(shù)據(jù)ED和發(fā)送數(shù)據(jù)TD的配置。例如，在編碼數(shù)據(jù)ED之間且在發(fā)送數(shù)據(jù)TD之間任意指定NAL單元的數(shù)量和圖片的類型。不用說，編碼數(shù)據(jù)ED和發(fā)送數(shù)據(jù)TD可以包括作為第一圖片Pl的I圖片來代替IDR圖片或者與IDR圖片一起的NAL單元
[4.根據(jù)本公開的一個實(shí)施例的視頻發(fā)送系統(tǒng)的操作]參考圖6到8來說明攝像機(jī)10和服務(wù)器30的操作。圖6是說明攝像機(jī)10的操作的流程圖。如圖6所示，視頻獲取部分13生成對應(yīng)于從光學(xué)系統(tǒng)11導(dǎo)入的光的視頻數(shù)據(jù)(步驟Sll)，并向編碼數(shù)據(jù)生成部分14供應(yīng)視頻數(shù)據(jù)。編碼數(shù)據(jù)生成部分14將從視頻獲取部分13供應(yīng)的視頻數(shù)據(jù)壓縮編碼為圖片(步驟S12)，且向控制部分20供應(yīng)該圖片。通過幀內(nèi)編碼和幀間編碼(預(yù)測編碼)來進(jìn)行該壓縮編碼。對于每個編碼數(shù)據(jù)ED，按第一圖片Pl和在第一圖片Pl之后的一個或多個第二圖片P2的順序來壓縮編碼視頻數(shù)據(jù)。當(dāng)供應(yīng)在編碼數(shù)據(jù)ED中包括的圖片時，控制部分20確定該圖片是否是第二圖片P2(步驟S13)。當(dāng)該圖片是可能不能獨(dú)立解碼的第二圖片P2時(步驟S13中的“是”)，控制部分20在存儲部分19中存儲該圖片(第二圖片P2)(步驟S14)。控制部分20存儲一個或多個第二圖片P2來使得能夠指定第二圖片P2的供應(yīng)順序。重復(fù)步驟Sll到S14中的處理，直到確認(rèn)第一圖片Pl的供應(yīng)。另一方面，當(dāng)該圖片是能夠獨(dú)立解碼的第一圖片Pl時(步驟S13中的“否”)，執(zhí)行在步驟S15中的處理和隨后的步驟?？刂撇糠?0從存儲部分19讀出一個或多個第二圖片P2 (步驟S15)，且向發(fā)送數(shù)據(jù)生成部分15供應(yīng)第二圖片P2以及圖片(第一圖片Pl)。管理該讀出第二圖片P2以當(dāng)處理其他編碼數(shù)據(jù)ED時不會被再次讀出。發(fā)送數(shù)據(jù)生成部分15組合編碼數(shù)據(jù)Edi的第一圖片Pl和編碼數(shù)據(jù)EDi-I的一個或多個第二圖片P2，以生成發(fā)送數(shù)據(jù)TDi (步驟S16)，且向控制部分20供應(yīng)發(fā)送數(shù)據(jù)Tdi。在此，i是等于或大于2的自然數(shù)。發(fā)送數(shù)據(jù)TDl不包括第二圖片P2，且包括編碼數(shù)據(jù)EDl的第一圖片Pl。當(dāng)生成圖5所示的發(fā)送數(shù)據(jù)TDA時，按編碼數(shù)據(jù)EDi-I的一個或多個第二圖片P2和編碼數(shù)據(jù)EDi的第一圖片的順序來排列圖片。當(dāng)生成圖5所示的發(fā)送數(shù)據(jù)TDB時，按編碼數(shù)據(jù)EDi的第一圖片Pl和在編碼數(shù)據(jù)Edi-I的一個或多個第二圖片的順序來排列圖片。控制部分20向無線電通信部分16傳輸發(fā)送數(shù)據(jù)TD，且向通信控制部分17輸出用于將無線電通信部分16的操作模式切換到活躍模式的控制信號。通信控制部分17向電力供給部分18輸出用于開始向無線電通信部分16供電的控制信號。無線電通信部分16將操作模式從省電模式切換到活躍模式(步驟S17)，且發(fā)送該發(fā)送數(shù)據(jù)TD (步驟S18)。無線電通信部分16將在發(fā)送數(shù)據(jù)TD中包括的一個或多個第二圖片P2集中地與第一圖片Pl —起發(fā)送?？梢栽诎l(fā)送數(shù)據(jù)TD的發(fā)送期間進(jìn)行步驟Sll到S16的處理。當(dāng)發(fā)送數(shù)據(jù)TD的發(fā)送結(jié)束時，控制部分20向通信控制部分17輸出用于將操作模式切換到省電模式的控制信號。通信控制部分17向電力供給部分18輸出用于結(jié)束向無線電通信部分20供電的控制信號。無線電通信部分16將操作模式從活躍模式切換到省電模式(步驟S19)。圖7是說明根據(jù)本公開的一個實(shí)施例的視頻發(fā)送系統(tǒng)中視頻發(fā)送方法的圖。如圖7所示，攝像機(jī)10以發(fā)送數(shù)據(jù)TD為單位間歇地以如上所述的順序發(fā)送在視頻流中包括的發(fā)送數(shù)據(jù)TD1、TD2、TD3、TD4等。與第一圖片Pl —起集中發(fā)送在發(fā)送數(shù)據(jù)TD的每個中包括的一個或多個第二圖片P2。攝像機(jī)10在發(fā)送了發(fā)送數(shù)據(jù)TD之后立即切換到省電模式，且在發(fā)送下一發(fā)送數(shù)據(jù)TD之前就返回到活躍模式。在參考圖9所示的通用視頻發(fā)送系統(tǒng)中，每次生成第一圖片Pl或第二圖片P2時，連續(xù)發(fā)送生成的圖片。因此，在包括多個編碼數(shù)據(jù)ED的視頻流的發(fā)送時間段中為了數(shù)據(jù)發(fā)送通常消耗攝像機(jī)10的電池。另一方面，根據(jù)本公開實(shí)施例的視頻發(fā)送系統(tǒng)將圖片轉(zhuǎn)換為發(fā)送數(shù)據(jù)TD的塊，且間歇地發(fā)送該發(fā)送數(shù)據(jù)TD，而不是連續(xù)地發(fā)送圖片。因此，在不發(fā)送數(shù)據(jù)的時間段中，能夠?qū)o線電通信部分16切換為省電模式，諸如在IEEE802. 11中指定的PSM(Power-SavingMode，省電模式)。在該省電模式中，由于不進(jìn)行載波的檢測，因此能夠最小化檢測載波和幀接收的電池消耗。另外，由于將圖片轉(zhuǎn)換為發(fā)送數(shù)據(jù)TD的塊并發(fā)送，因此獲得了 IEEE802. Iln中指定的聚合(aggregation)效果。因此，能夠通過減少在每次在通用視頻發(fā)送方法中進(jìn)行數(shù)據(jù)發(fā)送時進(jìn)行的載波感測多路訪問/沖突避免(carrier sense multiple access/ collision avoidance) (CSMA/CA)上的處理次數(shù)來抑制電池消耗。圖8是由于說明服務(wù)器30的操作的流程圖。如圖8所示，通信部分31接收發(fā)送數(shù)據(jù)TD (步驟S31)，并向控制部分36供應(yīng)發(fā)送數(shù)據(jù)TD?？刂撇糠?6確定視頻數(shù)據(jù)是否經(jīng)受分析處理(步驟S32)。當(dāng)視頻數(shù)據(jù)經(jīng)受分析處理時(步驟S32中的“是”)，控制部分36從發(fā)送數(shù)據(jù)TD中提取第一圖片Pl (步驟S33)，并向視頻解碼部分33供應(yīng)第一圖片P1。視頻解碼部分33解碼第一圖片(步驟S34)，且向分析處理部分32供應(yīng)解碼的數(shù)據(jù)。分析處理部分32對解碼的數(shù)據(jù)施加諸如對象檢測或移動對象檢測的分析處理(步驟S35)，并輸出處理結(jié)果。處理結(jié)果可以通過網(wǎng)絡(luò)NW發(fā)送到外部裝置，或可以被存儲在存儲部分35等中。視頻解碼部分33還解碼一個或多個第二圖片P2 (步驟S36)，且向視頻數(shù)據(jù)生成部分34供應(yīng)解碼數(shù)據(jù)。視頻數(shù)據(jù)生成部分34從解碼數(shù)據(jù)生成視頻數(shù)據(jù)，并在存儲部分35中存儲視頻數(shù)據(jù)(步驟S37)。視頻數(shù)據(jù)生成部分34組合在發(fā)送數(shù)據(jù)TDi中包括的第一圖片Pl的解碼數(shù)據(jù)和在發(fā)送數(shù)據(jù)TDi+Ι中包括的一個或多個第二圖片P2的解碼數(shù)據(jù)，來生成對應(yīng)于編碼數(shù)據(jù)EDi的視頻數(shù)據(jù)。在此，i是等于或大于I的自然數(shù)。另一方面，當(dāng)視頻數(shù)據(jù)不經(jīng)受分析處理時(步驟S32中的“否”)，控制部分36向視頻解碼部分33供應(yīng)發(fā)送數(shù)據(jù)TD。視頻解碼部分33解碼第一圖片Pl和一個或多個第二圖片P2 (步驟S38)，且向視頻數(shù)據(jù)生成部分34供應(yīng)解碼數(shù)據(jù)。視頻數(shù)據(jù)生成部分34從解碼數(shù)據(jù)生成視頻數(shù)據(jù)，且在存儲部分35中存儲該視頻數(shù)據(jù)(步驟S39)?？刂撇糠?6可以向用戶終端等發(fā)送視頻數(shù)據(jù)和分析處理的結(jié)果。在該情況下，控制部分36根據(jù)來自用戶終端等的指令從存儲部分35中讀出視頻數(shù)據(jù)和分析處理的結(jié)果，且通過通信部分31向用戶終端等發(fā)送讀出的數(shù)據(jù)。根據(jù)本公開的實(shí)施例的視頻發(fā)送系統(tǒng)將圖片轉(zhuǎn)換為發(fā)送數(shù)據(jù)TD的塊，且間歇地接收該發(fā)送數(shù)據(jù)TD，而不是連續(xù)地接收圖片。但是，如在通用視頻發(fā)送方法中那樣，按接近于實(shí)時的定時，接收優(yōu)選地用于視頻分析處理的第一圖片P1。具體地，如果接收到通過按編碼數(shù)據(jù)ED的第一圖片Pl和在該編碼數(shù)據(jù)ED之前緊挨著的編碼數(shù)據(jù)ED的一個或多個第二圖片P2的順序排列圖片而生成的發(fā)送數(shù)據(jù)TD(圖5所示的發(fā)送數(shù)據(jù)TDB等)，能夠容易地檢測用于視頻分析處理的第一圖片P1。另一方面，如果接收到通過按編碼數(shù)據(jù)ED的一個或多個第二圖片P2和在該編碼數(shù)據(jù)ED之后緊挨著的編碼數(shù)據(jù)ED的第一圖片Pl的順序排列圖片而生成的發(fā)送數(shù)據(jù)TD(圖5所示的發(fā)送數(shù)據(jù)TDA等)，由于對應(yīng)于視頻流中的圖片的順序地存儲視頻數(shù)據(jù)，因此能夠容易地再現(xiàn)該視頻流。
[5.結(jié)論]如上所述，根據(jù)本公開的實(shí)施例的視頻發(fā)送系統(tǒng)將圖片轉(zhuǎn)換為發(fā)送數(shù)據(jù)TD的塊，且間歇地發(fā)送該發(fā)送數(shù)據(jù)TD，而不是連續(xù)地發(fā)送該圖片。因此，能夠在不發(fā)送數(shù)據(jù)的時間段中將無線電通信設(shè)備(無線電通信部分16等)切換到省電模式。因此，相比于在通用視頻發(fā)送系統(tǒng)中的視頻發(fā)送方法，能夠在視頻發(fā)送期間最小化電池消耗。以上將參考附圖詳細(xì)描述本公開的實(shí)施例。但是，本公開不限于此實(shí)施例。很明顯，本公開所屬的本領(lǐng)域技術(shù)人員可以容易地實(shí)現(xiàn)各種修改和變更，而不脫離所附權(quán)利要求中描述的技術(shù)思想。理解，這些修改和變更也自然地屬于本公開的技術(shù)范圍。本公開包含涉及分別在2011年2月3在日本專利局提交的日本優(yōu)先權(quán)專利申請JP 2011-022067中公開的主題，其全部內(nèi)容被引用附于此。
權(quán)利要求
1.一種成像裝置，包括 編碼數(shù)據(jù)生成部分，被配置以生成包括能夠不用參考其他圖片解碼的第一圖片和能夠參考其他圖片解碼的一個或多個第二圖片的編碼數(shù)據(jù)； 發(fā)送數(shù)據(jù)生成部分，被配置以組合該編碼數(shù)據(jù)的第一圖片和在該編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片，來生成發(fā)送數(shù)據(jù)；以及 無線電通信部分，被配置以按該發(fā)送數(shù)據(jù)為單位間歇地發(fā)送在視頻流中包括的多個發(fā)送數(shù)據(jù)。
2.根據(jù)權(quán)利要求I的成像裝置，其中 所述無線電通信部分具有包括活躍模式和省電模式的操作模式，以及 所述成像裝置還包括通信控制部分，被配置以在發(fā)送所述發(fā)送數(shù)據(jù)之后將操作模式切換為省電模式，且在發(fā)送下一發(fā)送數(shù)據(jù)之前將操作模式切換為活躍模式。
3.根據(jù)權(quán)利要求2的成像裝置，其中，所述無線電通信部分在省電模式下停止載波的檢測。
4.根據(jù)權(quán)利要求I的成像裝置，還包括電力供給部分，被配置以向至少所述無線電通信部分供應(yīng)操作電力。
5.根據(jù)權(quán)利要求I的成像裝置，其中所述發(fā)送數(shù)據(jù)生成部分生成其中按編碼數(shù)據(jù)的第一圖片和在該編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片的順序來排列圖片的發(fā)送數(shù)據(jù)。
6.根據(jù)權(quán)利要求I的成像裝置，其中所述發(fā)送數(shù)據(jù)生成部分生成其中按編碼數(shù)據(jù)的一個或多個第二圖片和在該編碼數(shù)據(jù)之后緊挨著的編碼數(shù)據(jù)的第一圖片的順序來排列圖片的發(fā)送數(shù)據(jù)。
7.根據(jù)權(quán)利要求I的成像裝置，其中，所述無線電通信部分通過將在各個發(fā)送數(shù)據(jù)中包括的一個或多個第二圖片集中地與第一圖片一起發(fā)送來按發(fā)送數(shù)據(jù)為單位間歇地發(fā)送多個發(fā)送數(shù)據(jù)。
8.一種接收裝置，包括 通信部分，被配置以按發(fā)送數(shù)據(jù)為單位，間歇地接收在視頻流中包括的多個發(fā)送數(shù)據(jù)，編碼數(shù)據(jù)包括能夠不用參考其他圖片解碼的第一圖片和能夠參考其他圖片解碼的一個或多個第二圖片，以及所述發(fā)送數(shù)據(jù)是通過組合編碼數(shù)據(jù)的第一圖片和在該編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片而生成的；以及 分析處理部分，被配置以使至少所述發(fā)送數(shù)據(jù)中包括的第一圖片經(jīng)受分析處理。
9.根據(jù)權(quán)利要求8的接收裝置，還包括視頻數(shù)據(jù)生成部分，被配置以組合在所述發(fā)送數(shù)據(jù)中包括的第一圖片的解碼數(shù)據(jù)和在所述發(fā)送數(shù)據(jù)之前緊挨著的發(fā)送數(shù)據(jù)中包括的一個或多個第二圖片的解碼數(shù)據(jù)，來生成視頻數(shù)據(jù)。
10.一種視頻發(fā)送系統(tǒng),包括 成像裝置，包括 編碼數(shù)據(jù)生成部分，被配置以生成包括能夠不用參考其他圖片解碼的第一圖片和能夠參考其他圖片解碼的一個或多個第二圖片的編碼數(shù)據(jù)， 發(fā)送數(shù)據(jù)生成部分，被配置以組合該編碼數(shù)據(jù)的第一圖片和在該編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片，來生成發(fā)送數(shù)據(jù)，以及無線電通信部分，被配置以按該發(fā)送數(shù)據(jù)為單位間歇地發(fā)送在視頻流中包括的多個發(fā)送數(shù)據(jù)；以及 接收裝置，包括 通信部分，被配置以間歇地接收該多個發(fā)送數(shù)據(jù)，以及 分析處理部分，被配置以使至少該發(fā)送數(shù)據(jù)中包括的第一圖片經(jīng)受分析處理。
11.一種視頻發(fā)送方法，包括 生成包括能夠不用參考其他圖片解碼的第一圖片和能夠參考其他圖片解碼的一個或多個第二圖片的編碼數(shù)據(jù)； 組合該編碼數(shù)據(jù)的第一圖片和在該編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片，來生成發(fā)送數(shù)據(jù)；以及 按該發(fā)送數(shù)據(jù)為單位間歇地發(fā)送在視頻流中包括的多個發(fā)送數(shù)據(jù)。
全文摘要
一種成像裝置，包括編碼數(shù)據(jù)生成部分，被配置以生成包括能夠不用參考其他圖片解碼的第一圖片和能夠參考其他圖片解碼的一個或多個第二圖片的編碼數(shù)據(jù)；發(fā)送數(shù)據(jù)生成部分，被配置以組合編碼數(shù)據(jù)的第一圖片和在編碼數(shù)據(jù)之前緊挨著的編碼數(shù)據(jù)的一個或多個第二圖片，來生成發(fā)送數(shù)據(jù)；以及無線電通信部分，被配置以按發(fā)送數(shù)據(jù)為單位間歇地發(fā)送在視頻流中包括的多個發(fā)送數(shù)據(jù)。
文檔編號H04N7/26GK102629971SQ20121001882
公開日2012年8月8日 申請日期2012年1月20日 優(yōu)先權(quán)日2011年2月3日
發(fā)明者佐佐木武彥, 渡邊一弘, 礒津政明 申請人:索尼公司