利用視頻存儲器的監(jiān)控的圖像處理裝置的制造方法
【專利摘要】本發(fā)明提供一種利用視頻存儲器的監(jiān)控的圖像處理裝置。圖像處理裝置是包含儲存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲器的圖像處理裝置,其包含:鏡像驅(qū)動器,其對儲存在視頻存儲器的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控;變更數(shù)據(jù)提取部,其當(dāng)儲存在視頻存儲器的圖像數(shù)據(jù)變更時,從視頻存儲器提取顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及編碼部,其連同所提取的圖像數(shù)據(jù)一并對所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼;由此可提高圖像處理速度。
【專利說明】
利用視頻存儲器的監(jiān)控的圖像處理裝置
技術(shù)領(lǐng)域
[0001]本申請涉及一種圖像處理?!颈尘凹夹g(shù)】
[0002]通常,為了有效地傳輸通過顯示畫面顯示的大量的圖像數(shù)據(jù),必須使用如MPEG.4, H.264,JPEG的數(shù)據(jù)壓縮(編碼)算法。
[0003]特別是,在傳輸像動態(tài)圖像一樣畫面實時變更的圖像數(shù)據(jù)的情況下,應(yīng)傳輸?shù)臄?shù)據(jù)量極大,故而需要有效的壓縮及傳輸技術(shù)。
[0004]為此,在使用者模式(user mode)下進(jìn)行動作的如WIN32的圖形裝置接口(Graphic Device Interface,⑶I)提供如下功能:如果顯示畫面變更,則在對之前的顯示畫面與變更的顯示畫面進(jìn)行比較后,僅通知變更的部分。
[0005]具體而言,如果輸入視窗畫面變更命令,則視頻卡以顯示畫面中的將變更的區(qū)域的圖像數(shù)據(jù)更新視頻存儲器,更新的圖像數(shù)據(jù)通過視頻端口傳輸?shù)斤@示裝置而顯示在顯示畫面上。此時,在使用者模式(user mode)下進(jìn)行動作的如WIN32的圖形裝置接口(GDI)在對之前所顯示的畫面與當(dāng)前所顯示的畫面進(jìn)行比較后,提供兩個顯示畫面中的變更的區(qū)域的信息,且僅將這種信息傳輸?shù)酵獠垦b置。
[0006]然而,在利用如上所述的以往的方式的情況下,只有在儲存在視頻存儲器的圖像數(shù)據(jù)顯示到顯示畫面后才能獲得變更的區(qū)域的信息,故而存在用以獲得變更的區(qū)域的信息的時間延遲,因此圖像處理速度下降的問題。
【發(fā)明內(nèi)容】
[0007]發(fā)明欲解決的課題
[0008]本申請?zhí)峁┮环N在顯示到顯示畫面的圖像變更的情況下,在變更的區(qū)域的圖像數(shù)據(jù)儲存到視頻存儲器的時點進(jìn)行擷取并傳輸,由此可提高圖像處理速度的利用視頻存儲器的監(jiān)控的圖像處理裝置。
[0009]解決課題的手段
[0010]根據(jù)本發(fā)明的第1實施方式,提供一種圖像處理裝置,其包含儲存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲器,所述圖像處理裝置的特征在于包含:鏡像驅(qū)動器,其對儲存在所述視頻存儲器的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控;變更數(shù)據(jù)提取部,其當(dāng)儲存在所述視頻存儲器的圖像數(shù)據(jù)變更時,從所述視頻存儲器提取所述顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及編碼部,其連同所述提取的圖像數(shù)據(jù)一并對所述提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。[0〇11]根據(jù)本發(fā)明的實施方式,所述編碼部能夠以聯(lián)合圖像專家組(Joint Photograph coding Experts Group,JPEG)形式對所述提取的圖像數(shù)據(jù)及所述提取的圖像數(shù)據(jù)的屬性 f目息進(jìn)行編碼。
[0012]根據(jù)本發(fā)明的實施方式,在所述變更的區(qū)域為多個的情況下,所述編碼部可分別對所述多個變更的區(qū)域進(jìn)行編碼。
[0013]根據(jù)本發(fā)明的實施方式,所述屬性信息可包含所述顯示畫面中的所述變更的區(qū)域的坐標(biāo)、所述編碼的封包大小、解析度、時間戳、每秒傳輸幀數(shù)(Frame Per Second,F(xiàn)PS)、所述顯示畫面為多個的情況下的顯示畫面的固有標(biāo)識符(Unique ID,UID)中的至少一個以上。[〇〇14]根據(jù)本發(fā)明的實施方式,所述圖像處理裝置可在核心模式(Kernel Mode)下進(jìn)行動作。[〇〇15]根據(jù)本發(fā)明的第2實施方式,提供一種圖像處理裝置,其包含儲存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲器,所述圖像處理裝置的特征在于包含:解碼部,其對經(jīng)編碼的數(shù)據(jù)進(jìn)行解碼;變更數(shù)據(jù)更新部,其基于所述經(jīng)編碼的數(shù)據(jù)中所包含的屬性信息而在所述視頻存儲器更新所述顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及顯示驅(qū)動器,其將儲存在所述視頻存儲器的更新的圖像數(shù)據(jù)顯示到所述顯示畫面中的變更的區(qū)域;且所述編碼的數(shù)據(jù)為連同對儲存在所述視頻存儲器的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控而獲得的所述顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)一并對所述屬性信息進(jìn)行編碼所得的數(shù)據(jù)。
[0016]根據(jù)本發(fā)明的實施方式,所述解碼部可包含視頻卡的圖形處理單元(Graphic Processing Unit,GPU)〇
[0017]根據(jù)本發(fā)明的實施方式,所述經(jīng)編碼的數(shù)據(jù)可為聯(lián)合圖像專家組(Joint Photograph coding Experts Group,JPEG)形式。
[0018]根據(jù)本發(fā)明的實施方式,在所述變更的區(qū)域為多個的情況下,所述經(jīng)編碼的數(shù)據(jù)可為分別對所述多個變更的區(qū)域進(jìn)行編碼所得的數(shù)據(jù)。
[0019]根據(jù)本發(fā)明的實施方式,所述屬性信息可包含所述顯示畫面中的所述變更的區(qū)域的坐標(biāo)、所述編碼的封包大小、解析度、時間戳、每秒傳輸幀數(shù)(Frame Per Second,F(xiàn)PS)、所述顯示畫面為多個的情況下的顯示畫面的固有標(biāo)識符(Unique ID,UID)中的至少一個以上。
[0020]發(fā)明的效果
[0021]根據(jù)本發(fā)明的一實施方式,實時監(jiān)控儲存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲器,在監(jiān)控結(jié)果為顯示畫面上的圖像變更的情況下,僅對變更的區(qū)域的圖像數(shù)據(jù)進(jìn)行編碼人而傳輸,由此可提高圖像處理速度?!靖綀D說明】
[0022]圖1是本發(fā)明的一實施方式的利用視頻存儲器的監(jiān)控的圖像處理裝置的構(gòu)成圖。
[0023]圖2是用以說明通過本發(fā)明的一實施方式進(jìn)行的變更的區(qū)域的數(shù)據(jù)的提取及屬性信息中的坐標(biāo)的圖。
[0024]圖3是本發(fā)明的一實施方式的利用視頻存儲器的監(jiān)控的圖像處理方法,且是說明發(fā)送側(cè)圖像處理裝置的流程的流程圖。
[0025]圖4是本發(fā)明的一實施方式的利用視頻存儲器的監(jiān)控的圖像處理方法,且是說明接收側(cè)圖像處理裝置的流程的流程圖?!揪唧w實施方式】
[0026]以下,參照附圖,對本發(fā)明的實施方式進(jìn)行說明。然而,本發(fā)明的實施方式可變形為多種形態(tài),本發(fā)明的范圍并不僅僅限定于以下所說明的實施方式。為了進(jìn)行更明確的說明,可夸張地表示圖中的要素的形狀及尺寸等,圖中以相同的符號標(biāo)注的要素為相同的要素。
[0027]圖1是本發(fā)明的一實施方式的利用視頻存儲器的監(jiān)控的圖像處理裝置的構(gòu)成圖, 圖2是用以說明通過本發(fā)明的一實施方式進(jìn)行的變更的區(qū)域的數(shù)據(jù)的提取及屬性信息中的坐標(biāo)的圖。[〇〇28]如圖1所示,本發(fā)明的第1實施方式的圖像處理裝置(120)是包含儲存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲器(VM)( 123)的圖像處理裝置(120),所述圖像處理裝置(120)可包含:鏡像驅(qū)動器(MD)(124),其對儲存在視頻存儲器(VM)(123)的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控;變更數(shù)據(jù)提取部(125),其當(dāng)儲存在視頻存儲器(VM)(123)的圖像數(shù)據(jù)變更時, 從視頻存儲器(VM)(123)提取顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及編碼部(126),其連同所提取的圖像數(shù)據(jù)一并對所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。[〇〇29]另外,本發(fā)明的第2實施方式的圖像處理裝置(130)是包含儲存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲器(VM)(134)的圖像處理裝置(130),所述圖像處理裝置(130)包含: 解碼部(132),其對經(jīng)編碼的數(shù)據(jù)進(jìn)行解碼;變更數(shù)據(jù)更新部(133),其基于經(jīng)編碼的數(shù)據(jù)中所包含的屬性信息而在視頻存儲器(134)更新顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及顯示驅(qū)動器(235),其將儲存在視頻存儲器(134)的更新的圖像數(shù)據(jù)顯示到顯示畫面中的變更的區(qū)域;且經(jīng)編碼的數(shù)據(jù)可為連同從視頻存儲器(134)獲得的顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)一并對屬性信息進(jìn)行編碼所得的數(shù)據(jù)。
[0030]以下,參照圖1至圖2,詳細(xì)地對本發(fā)明的一實施方式的利用視頻存儲器的監(jiān)控的圖像處理裝置進(jìn)行說明。發(fā)送側(cè)裝置包含顯示部(110)及發(fā)送側(cè)圖像處理裝置(120),接收側(cè)裝置可包含接收側(cè)圖像處理裝置(130)及顯示部(140),發(fā)送側(cè)圖像處理裝置(120)與接收側(cè)圖像處理裝置(130)可通過網(wǎng)絡(luò)(Net Work,NW)收發(fā)數(shù)據(jù)。以下,區(qū)分發(fā)送側(cè)裝置及接收側(cè)裝置而詳細(xì)地進(jìn)行說明。[〇〇31]1?發(fā)送側(cè)裝置(110、120)[〇〇32]參照圖1,顯示裝置(140)可包含如監(jiān)控器的具備顯示畫面的多個顯示裝置(111至11N)。例如,可利用多個顯示裝置(111至11N)適當(dāng)?shù)胤峙湟粋€圖像而通過如墻控制器的控制器進(jìn)行顯示,或多個顯示裝置(111至11N)各自顯示不同的圖像。[〇〇33]如圖1所示,接收側(cè)圖像處理裝置(130)可包含圖形引擎(Graphic Engine,GE)(121)、顯示驅(qū)動器(Display Device,DD) (122)、視頻存儲器(Video Memory,VM) (123)、鏡像驅(qū)動器(Mirror Diver,MD) (124)、變更數(shù)據(jù)提取部(125)、編碼部(126)、發(fā)送部(127)及視頻端口(129)。
[0034]此處,圖形引擎(GE)(121)對是否輸入畫面變更命令進(jìn)行監(jiān)控,如果監(jiān)控結(jié)果為輸入畫面變更命令,則可將所述畫面變更命令傳輸?shù)斤@示驅(qū)動器(DD) (122)。此處,畫面變更命令是通過在使用者模式(user mode)下實行的應(yīng)用程序而輸入的命令,例如可為對當(dāng)前顯示在顯示裝置(110)的顯示畫面的圖像的全部或一部分區(qū)域的變更命令。[〇〇35]如果從圖形引擎(GE)(121)輸入畫面變更命令,則顯示驅(qū)動器(DD)(122)可根據(jù)所輸入的畫面變更命令而將顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)儲存到視頻存儲器(VM)(123)的對應(yīng)的區(qū)域。此后,可向圖形引擎(GE)(121)傳達(dá)顯示請求命令,以便可將變更的區(qū)域的圖像數(shù)據(jù)顯示顯示到顯示畫面。于是,圖形引擎(GE)(121)根據(jù)顯示請求命令而通過視頻端口(128)向顯示裝置(110)傳達(dá)變更的區(qū)域的圖像數(shù)據(jù),所傳達(dá)的圖像數(shù)據(jù)可通過顯示裝置(110)的顯示畫面而顯示。[〇〇36]另一方面,視頻存儲器(VM)(123)是儲存將顯示在顯示畫面的圖像數(shù)據(jù)的儲存介質(zhì),可在將一個顯示畫面分割成多個區(qū)域后,將圖像數(shù)據(jù)儲存到各個區(qū)域所對應(yīng)的地址。所分割的各個區(qū)域可稱為幀(frame),由此視頻存儲器(VM)(123)也可稱為幀緩沖器(frame buffer)〇[〇〇37]另一方面,鏡像驅(qū)動器(MD)(124)用于對儲存在視頻存儲器(VM)(123)的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控,如果顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)儲存到視頻存儲器(VM) (123),則可在感測到這一情況后,向變更數(shù)據(jù)提取部(125)通知視頻存儲器(VM)(123)的一部分或全部變更。[〇〇38]于是,變更數(shù)據(jù)提取部(125)可從視頻存儲器(VM)(123)提取顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù),將所提取的圖像數(shù)據(jù)傳達(dá)到編碼部(126)。[〇〇39]編碼部(126)可連同從變更數(shù)據(jù)提取部(125)提取的圖像數(shù)據(jù)一并對所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。經(jīng)編碼的數(shù)據(jù)可傳達(dá)到發(fā)送部(127)。此處,編碼部(126)能夠以聯(lián)合圖像專家組(Joint Photograph coding Experts Group,JPEG)形式對所提取的圖像數(shù)據(jù)及所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。另外,在顯示畫面中的2個以上的區(qū)域同時發(fā)生變更的情況下,編碼部(126)可分別對變更的區(qū)域執(zhí)行編碼。
[0040]此處,屬性信息可包含顯示畫面中的變更的區(qū)域的(物理)坐標(biāo)、編碼的封包大小、 解析度、時間戳、每秒傳輸幀數(shù)(Frame Per Second,F(xiàn)PS)、顯示畫面為多個的情況下的顯示畫面的固有標(biāo)識符(Unique ID,UID)中的至少一個以上。根據(jù)本發(fā)明的一實施方式,在屬性信息中包含有時間戳,接收側(cè)圖像處理裝置(130)通過利用這種時間戳,可同時顯示分別進(jìn)行編碼而傳輸?shù)膬蓚€以上的變更的區(qū)域。[〇〇41] 通常,在如H.264的編碼解碼器的情況下,集中多個顯示畫面(如果將一個顯示畫面整體定義為一個幀,則為多個幀)而一次性地進(jìn)行編碼,因此編碼所需的運(yùn)算處理相應(yīng)地增加而負(fù)荷變多,在一個顯示畫面中的極小一部分區(qū)域變更的情況下,也會對整個顯示畫面進(jìn)行編碼,因此圖像處理速度相應(yīng)地進(jìn)一步增加。[0〇42]因此,根據(jù)本發(fā)明的一實施方式,以聯(lián)合圖像專家組(Joint Photograph coding Experts Group,JPEG)形式對所提取的圖像數(shù)據(jù)及所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼而傳輸,由此具有可在整體上提高圖像處理速度的優(yōu)點。[〇〇43]圖2是用以說明通過本發(fā)明的一實施方式進(jìn)行的變更的區(qū)域的數(shù)據(jù)的提取及屬性信息中的坐標(biāo)的圖。
[0044] 如圖1及圖2所示,如果顯示畫面(參照圖2的部分(a))中的一部分區(qū)域(211、212) 變更(參照圖2的部分(b)),則顯示驅(qū)動器(DD)(122)可在提取變更的區(qū)域(21U212)的圖像數(shù)據(jù)后,分別儲存到視頻存儲器(VM) (123)的對應(yīng)的區(qū)域。
[0045]在圖2中,表示在一個顯示畫面上兩個以上的區(qū)域(21U212)在同一時點變更的情況,在此情況下,可分別對各個變更的區(qū)域(21U212)的圖像數(shù)據(jù)進(jìn)行編碼而傳輸。在圖2的部分(c)中,區(qū)域(211)的(乂、¥)、(乂+11、¥)、(乂、¥+11)、(乂+11、¥+11)例示性地說明屬性信息中的變更的區(qū)域的顯示畫面上的實際坐標(biāo)。
[0046]最后,發(fā)送部(127)可通過網(wǎng)絡(luò)(NW)向接收側(cè)圖像處理裝置(130)的接收部(131) 傳輸經(jīng)編碼的數(shù)據(jù)。[〇〇47]如上所述,圖像處理裝置(120)在并非為使用者模式的核心模式(kernel Mode)下進(jìn)行動作,故而與如在【背景技術(shù)】中所說明的在使用者模式下進(jìn)行動作的如WIN32的圖形裝置接口(GDI)相比,具有提高圖像處理速度的技術(shù)效果。[〇〇48]2 ?接收側(cè)裝置(130、140)[〇〇49]首先,參照圖1,顯示裝置(140)與發(fā)送側(cè)顯示裝置(110)相同地,可包含如監(jiān)控器的具備顯示畫面的多個顯示裝置(141至14N)。例如,可利用多個顯示裝置(141至14N)適當(dāng)?shù)胤峙湟粋€圖像而通過如墻控制器的控制器進(jìn)行顯示,或多個顯示裝置(141至14N)各自顯示不同的圖像。
[0050]如圖1所示,接收側(cè)圖像處理裝置(120)可包含接收部(131)、解碼部(132)、變更數(shù)據(jù)更新部(133)、視頻存儲器(VM)(134)、顯示驅(qū)動器(DD)(135)、圖形引擎(GE)(136)及視頻端口(137)〇[〇〇51]接收部(131)可在通過網(wǎng)絡(luò)(NW)從發(fā)送側(cè)圖像處理裝置(120)接收經(jīng)編碼的數(shù)據(jù)后,向解碼部(132)傳達(dá)所述經(jīng)編碼的數(shù)據(jù)。[〇〇52]此處,經(jīng)編碼的數(shù)據(jù)可為連同對儲存在發(fā)送側(cè)圖像處理裝置(120)的視頻存儲器 (VM)(123)的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控而獲得的顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)一并對屬性信息進(jìn)行編碼所得的數(shù)據(jù)。[〇〇53]根據(jù)本發(fā)明的一實施方式,通過將從發(fā)送側(cè)圖像處理裝置(120)傳輸?shù)慕?jīng)編碼的數(shù)據(jù)設(shè)為聯(lián)合圖像專家組(Joint Photograph coding Experts Group,JPEG)形式而可在整體上提高圖像處理速度的方面與上述內(nèi)容相同。
[0054]如果從接收部(131)傳達(dá)經(jīng)編碼的數(shù)據(jù),則解碼部(132)可在對所述經(jīng)編碼的數(shù)據(jù)進(jìn)行解碼后,向變更數(shù)據(jù)更新部(133)傳達(dá)。根據(jù)本發(fā)明的一實施方式,解碼部(132)可包含作為視頻卡的處理器的圖形處理單元(Graphic Processing Unit,GPU)。通常,在個人電腦的中央處理裝置對經(jīng)編碼的圖像數(shù)據(jù)執(zhí)行解碼,在視頻卡接收經(jīng)解碼的圖像數(shù)據(jù)并輸出。 因此,對個人電腦的中央處理裝置賦予較多的負(fù)荷。因此,根據(jù)本發(fā)明的一實施方式,如果接收經(jīng)編碼的數(shù)據(jù),則在視頻卡的處理器執(zhí)行對所述經(jīng)編碼的數(shù)據(jù)的解碼,由此與以往相比,可提高處理速度。
[0055]另一方面,如果從解碼部(132)傳達(dá)經(jīng)解碼的數(shù)據(jù),則變更數(shù)據(jù)更新部(133)可基于屬性信息而在視頻存儲器(VM)(134)更新顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)。[〇〇56] 此處,如上所述,屬性信息可包含顯示畫面中的變更的區(qū)域的坐標(biāo)、編碼的封包大小、解析度、時間戳、每秒傳輸幀數(shù)(Frame Per Second,F(xiàn)PS)、顯示畫面為多個的情況下的顯示畫面的固有標(biāo)識符(Unique ID,UID)中的至少一個以上。
[0057]另外,根據(jù)本發(fā)明的一實施方式,在屬性信息中包含有時間戳,接收側(cè)圖像處理裝置(130)通過利用這種時間戳,可同時顯示分別進(jìn)行編碼而傳輸?shù)膬蓚€以上的變更的區(qū)域。 [〇〇58]視頻存儲器(VM)(134)儲存將顯示在顯示裝置(140)的顯示畫面的圖像數(shù)據(jù),特別是僅可從發(fā)送側(cè)圖像處理裝置(120)更新顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)。[〇〇59]并且,顯示驅(qū)動器(DD) (135)可向圖形引擎(GE) (121)傳達(dá)顯示請求命令,以便可將儲存在視頻存儲器(VM)(134)的更新的圖像數(shù)據(jù)顯示到顯示畫面。
[0060]于是,圖形引擎(GE) (136)根據(jù)顯示請求命令而通過視頻端口(137)向顯示裝置 (140)傳達(dá)變更的區(qū)域的圖像數(shù)據(jù),所傳達(dá)的圖像數(shù)據(jù)可通過顯示畫面而顯示。
[0061]另一方面,圖3是本發(fā)明的一實施方式的利用視頻存儲器的監(jiān)控的圖像處理方法, 且是說明發(fā)送側(cè)圖像處理裝置(120)的流程的流程圖。[〇〇62]以下,參照圖1至圖3,對本發(fā)明的一實施方式的發(fā)送側(cè)的圖像處理方法進(jìn)行說明。 然而,為了使發(fā)明簡單明了,省略對與參照圖1至圖2所說明的事項重復(fù)的部分的說明。 [〇〇63]參照圖1至圖3,首先鏡像驅(qū)動器(MD) (124)可實時監(jiān)控儲存在視頻存儲器(VM)(123)的圖像數(shù)據(jù)是否變更(步驟S301)。[〇〇64]如果監(jiān)控結(jié)果為感測到存儲器(VM)( 123)變更(步驟S302),則變更數(shù)據(jù)提取部(125)可從視頻存儲器(VM)(123)提取顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)(步驟S303)。 [〇〇65]最后,編碼部(126)可連同從變更數(shù)據(jù)提取部(125)提取的圖像數(shù)據(jù)一并對所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼(步驟S304)。經(jīng)編碼的數(shù)據(jù)可通過發(fā)送部(127)及網(wǎng)絡(luò) (NW)而傳輸?shù)浇邮諅?cè)圖像處理裝置(130)。[〇〇66]并且,圖4是本發(fā)明的一實施方式的利用視頻存儲器的監(jiān)控的圖像處理方法,且是說明接收側(cè)圖像處理裝置的流程的流程圖。[〇〇67]以下,參照圖1至圖2及圖4,對本發(fā)明的一實施方式的接收側(cè)的圖像處理方法進(jìn)行說明。然而,為了使發(fā)明簡單明了,省略對與參照圖1至圖2所說明的事項重復(fù)的部分的說明。
[0068]如果從接收部(131)傳達(dá)經(jīng)編碼的數(shù)據(jù),則解碼部(132)可在對所述經(jīng)編碼的數(shù)據(jù)進(jìn)行解碼后(步驟S401),將其傳達(dá)到變更數(shù)據(jù)更新部(133)。根據(jù)本發(fā)明的一實施方式,如上所述,解碼部(132)可包含作為視頻卡的處理器的圖形處理單元(Graphic Processing Unit,GPU)〇[〇〇69]另外,經(jīng)編碼的數(shù)據(jù)可為連同對儲存在發(fā)送側(cè)圖像處理裝置(120)的視頻存儲器 (VM)(123)的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控而獲得的顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)一并對屬性信息進(jìn)行編碼所得的數(shù)據(jù)。
[0070]接著,如果從解碼部(132)傳達(dá)經(jīng)解碼的數(shù)據(jù),則變更數(shù)據(jù)更新部(133)可基于屬性信息而在視頻存儲器(VM)(134)更新顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)(步驟S402)。
[0071]此處,如上所述,屬性信息可包含顯示畫面中的變更的區(qū)域的坐標(biāo)、編碼的封包大小、解析度、時間戳、每秒傳輸幀數(shù)(Frame Per Second,F(xiàn)PS)、顯示畫面為多個的情況下的顯示畫面的固有標(biāo)識符(Unique ID,UID)中的至少一個以上。[〇〇72]另外,根據(jù)本發(fā)明的一實施方式,在屬性信息中包含有時間戳,接收側(cè)圖像處理裝置(130)通過利用這種時間戳,可同時顯示分別進(jìn)行編碼而傳輸?shù)膬蓚€以上的變更的區(qū)域。 [〇〇73]最后,顯示驅(qū)動器(DD)(135)可對圖形引擎(GE) (121)進(jìn)行控制而將儲存在視頻存儲器(VM)(134)的更新的圖像數(shù)據(jù)顯示到顯示畫面中的變更的區(qū)域(步驟S403)。
[0074]本發(fā)明并不限定于上述實施方式及附圖。本技術(shù)領(lǐng)域的普通技術(shù)人員應(yīng)明白應(yīng)以隨附的權(quán)利要求書限定權(quán)利范圍,可在不脫離權(quán)利要求書中所記載的本發(fā)明的技術(shù)思想的范圍內(nèi)實現(xiàn)各種形態(tài)的置換、變形及變更。[〇〇75]符號的說明
[0076] 110:顯示裝置(發(fā)送側(cè))120:圖像處理裝置(發(fā)送側(cè))[〇〇77] 121:圖形引擎(發(fā)送側(cè))122:顯示驅(qū)動器(發(fā)送側(cè))[〇〇78] 123:視頻存儲器(發(fā)送側(cè))124:鏡像驅(qū)動器 [〇〇79]125:變更數(shù)據(jù)提取部126:編碼部[〇〇8〇]127:發(fā)送部128:視頻端口(發(fā)送側(cè))[〇〇811130:圖像處理裝置(接收側(cè))131:接收部[〇〇82]132:解碼部133:變更數(shù)據(jù)更新部[〇〇83] 134:視頻存儲器(接收側(cè))135:顯示驅(qū)動器(接收側(cè)) [〇〇84]136:圖形引擎(接收側(cè))137:視頻端口(接收側(cè))[〇〇85]140:顯示裝置(接收側(cè))211、212:變更的區(qū)域
【主權(quán)項】
1.一種圖像處理裝置,其包含在將顯示畫面分割成多個區(qū)域后,將進(jìn)行顯示的圖像數(shù) 據(jù)儲存到各個分割的區(qū)域所對應(yīng)的地址的視頻存儲器,且在核心模式下進(jìn)行動作,所述圖 像處理裝置的特征在于包含:鏡像驅(qū)動器,其對儲存在所述視頻存儲器的地址的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控;變更數(shù)據(jù)提取部,其當(dāng)儲存在所述視頻存儲器的地址的圖像數(shù)據(jù)變更時,從所述視頻 存儲器提取所述顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及編碼部,其連同所述提取的圖像數(shù)據(jù)一并對所述提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編 碼;且所述屬性信息包含所述顯示畫面中的所述變更的區(qū)域的坐標(biāo)、所述編碼的封包大小、 解析度、時間戳、每秒傳輸幀數(shù)(Frame Per Second,F(xiàn)PS)及所述顯示畫面為多個的情況下 的顯示畫面的固有標(biāo)識符(Unique ID,UID)。2.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于:所述編碼部以聯(lián)合圖像專家組(Joint Photograph coding Experts Group,JPEG)形 式對所述提取的圖像數(shù)據(jù)及所述提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。3.根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于:在所述變更的區(qū)域為多個情況下,所述編碼部分別對所述多個變更的區(qū)域進(jìn)行編碼。4.一種圖像處理裝置,其接收經(jīng)編碼的數(shù)據(jù)而進(jìn)行顯示,所述圖像處理裝置的特征在 于包含:解碼部,其接收所述經(jīng)編碼的數(shù)據(jù)而進(jìn)行解碼;變更數(shù)據(jù)更新部,其基于所述經(jīng)編碼的數(shù)據(jù)中所包含的屬性信息而在視頻存儲器更新 顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及顯示驅(qū)動器,其將儲存在所述視頻存儲器的更新的圖像數(shù)據(jù)顯示到所述顯示畫面中的 變更的區(qū)域;且所述經(jīng)編碼的數(shù)據(jù)為連同對儲存在視頻存儲器的地址的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控 而獲得的圖像數(shù)據(jù)一并對所述屬性信息進(jìn)行編碼所得的數(shù)據(jù),所述視頻存儲器是在將發(fā)送 所述經(jīng)編碼的數(shù)據(jù)的發(fā)送側(cè)圖像處理裝置的顯示畫面分割成多個區(qū)域后,將進(jìn)行顯示的圖 像數(shù)據(jù)儲存到各個分割的區(qū)域所對應(yīng)的地址,且所述發(fā)送側(cè)圖像處理裝置在核心模式下進(jìn) 行動作,所述屬性信息包含所述顯示畫面中的所述變更的區(qū)域的坐標(biāo)、所述編碼的封包大小、 解析度、時間戳、每秒傳輸幀數(shù)(Frame Per Second,F(xiàn)PS)及所述顯示畫面為多個的情況下 的顯示畫面的固有標(biāo)識符(Unique ID,UID)。5.根據(jù)權(quán)利要求4所述的圖像處理裝置,其特征在于:所述解碼部包含視頻卡的圖形處理單元(Graphic Processing Unit ARJ)。6.根據(jù)權(quán)利要求4所述的圖像處理裝置,其特征在于:所述經(jīng)編碼的數(shù)據(jù)為聯(lián)合圖像專家組(Joint Photograph coding Experts Group, JPEG)形式。7.根據(jù)權(quán)利要求4所述的圖像處理裝置,其特征在于:在所述變更的區(qū)域為多個情況下,所述經(jīng)編碼的數(shù)據(jù)為分別對所述多個變更的區(qū)域進(jìn) 行編碼所得的數(shù)據(jù)。
【文檔編號】H04N19/43GK105993176SQ201480061396
【公開日】2016年10月5日
【申請日】2014年9月5日
【發(fā)明人】樸慶植, 李柱尚, 梁景喆
【申請人】伊艾斯伊有限公司