利用視頻存儲(chǔ)器的監(jiān)控的圖像處理裝置的制造方法
【專利摘要】本發(fā)明提供一種利用視頻存儲(chǔ)器的監(jiān)控的圖像處理裝置。圖像處理裝置是包含儲(chǔ)存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲(chǔ)器的圖像處理裝置，其包含：鏡像驅(qū)動(dòng)器，其對(duì)儲(chǔ)存在視頻存儲(chǔ)器的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控；變更數(shù)據(jù)提取部，其當(dāng)儲(chǔ)存在視頻存儲(chǔ)器的圖像數(shù)據(jù)變更時(shí)，從視頻存儲(chǔ)器提取顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)；及編碼部，其連同所提取的圖像數(shù)據(jù)一并對(duì)所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼；由此可提高圖像處理速度。
【專利說明】
利用視頻存儲(chǔ)器的監(jiān)控的圖像處理裝置
技術(shù)領(lǐng)域
[0001]本申請(qǐng)涉及一種圖像處理。【背景技術(shù)】
[0002]通常，為了有效地傳輸通過顯示畫面顯示的大量的圖像數(shù)據(jù)，必須使用如MPEG.4， H.264，JPEG的數(shù)據(jù)壓縮(編碼)算法。
[0003]特別是，在傳輸像動(dòng)態(tài)圖像一樣畫面實(shí)時(shí)變更的圖像數(shù)據(jù)的情況下，應(yīng)傳輸?shù)臄?shù)據(jù)量極大，故而需要有效的壓縮及傳輸技術(shù)。
[0004]為此，在使用者模式(user mode)下進(jìn)行動(dòng)作的如WIN32的圖形裝置接口(Graphic Device Interface，⑶I)提供如下功能:如果顯示畫面變更，則在對(duì)之前的顯示畫面與變更的顯示畫面進(jìn)行比較后，僅通知變更的部分。
[0005]具體而言，如果輸入視窗畫面變更命令，則視頻卡以顯示畫面中的將變更的區(qū)域的圖像數(shù)據(jù)更新視頻存儲(chǔ)器，更新的圖像數(shù)據(jù)通過視頻端口傳輸?shù)斤@示裝置而顯示在顯示畫面上。此時(shí)，在使用者模式(user mode)下進(jìn)行動(dòng)作的如WIN32的圖形裝置接口(GDI)在對(duì)之前所顯示的畫面與當(dāng)前所顯示的畫面進(jìn)行比較后，提供兩個(gè)顯示畫面中的變更的區(qū)域的信息，且僅將這種信息傳輸?shù)酵獠垦b置。
[0006]然而，在利用如上所述的以往的方式的情況下，只有在儲(chǔ)存在視頻存儲(chǔ)器的圖像數(shù)據(jù)顯示到顯示畫面后才能獲得變更的區(qū)域的信息，故而存在用以獲得變更的區(qū)域的信息的時(shí)間延遲，因此圖像處理速度下降的問題。
【發(fā)明內(nèi)容】

[0007]發(fā)明欲解決的課題
[0008]本申請(qǐng)?zhí)峁┮环N在顯示到顯示畫面的圖像變更的情況下，在變更的區(qū)域的圖像數(shù)據(jù)儲(chǔ)存到視頻存儲(chǔ)器的時(shí)點(diǎn)進(jìn)行擷取并傳輸，由此可提高圖像處理速度的利用視頻存儲(chǔ)器的監(jiān)控的圖像處理裝置。
[0009]解決課題的手段
[0010]根據(jù)本發(fā)明的第1實(shí)施方式，提供一種圖像處理裝置，其包含儲(chǔ)存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲(chǔ)器，所述圖像處理裝置的特征在于包含:鏡像驅(qū)動(dòng)器，其對(duì)儲(chǔ)存在所述視頻存儲(chǔ)器的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控;變更數(shù)據(jù)提取部，其當(dāng)儲(chǔ)存在所述視頻存儲(chǔ)器的圖像數(shù)據(jù)變更時(shí)，從所述視頻存儲(chǔ)器提取所述顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及編碼部，其連同所述提取的圖像數(shù)據(jù)一并對(duì)所述提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。[0〇11]根據(jù)本發(fā)明的實(shí)施方式，所述編碼部能夠以聯(lián)合圖像專家組(Joint Photograph coding Experts Group，JPEG)形式對(duì)所述提取的圖像數(shù)據(jù)及所述提取的圖像數(shù)據(jù)的屬性 f目息進(jìn)行編碼。
[0012]根據(jù)本發(fā)明的實(shí)施方式，在所述變更的區(qū)域?yàn)槎鄠€(gè)的情況下，所述編碼部可分別對(duì)所述多個(gè)變更的區(qū)域進(jìn)行編碼。
[0013]根據(jù)本發(fā)明的實(shí)施方式，所述屬性信息可包含所述顯示畫面中的所述變更的區(qū)域的坐標(biāo)、所述編碼的封包大小、解析度、時(shí)間戳、每秒傳輸幀數(shù)(Frame Per Second，F(xiàn)PS)、所述顯示畫面為多個(gè)的情況下的顯示畫面的固有標(biāo)識(shí)符(Unique ID，UID)中的至少一個(gè)以上。[〇〇14]根據(jù)本發(fā)明的實(shí)施方式，所述圖像處理裝置可在核心模式(Kernel Mode)下進(jìn)行動(dòng)作。[〇〇15]根據(jù)本發(fā)明的第2實(shí)施方式，提供一種圖像處理裝置，其包含儲(chǔ)存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲(chǔ)器，所述圖像處理裝置的特征在于包含:解碼部，其對(duì)經(jīng)編碼的數(shù)據(jù)進(jìn)行解碼;變更數(shù)據(jù)更新部，其基于所述經(jīng)編碼的數(shù)據(jù)中所包含的屬性信息而在所述視頻存儲(chǔ)器更新所述顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及顯示驅(qū)動(dòng)器，其將儲(chǔ)存在所述視頻存儲(chǔ)器的更新的圖像數(shù)據(jù)顯示到所述顯示畫面中的變更的區(qū)域;且所述編碼的數(shù)據(jù)為連同對(duì)儲(chǔ)存在所述視頻存儲(chǔ)器的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控而獲得的所述顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)一并對(duì)所述屬性信息進(jìn)行編碼所得的數(shù)據(jù)。
[0016]根據(jù)本發(fā)明的實(shí)施方式，所述解碼部可包含視頻卡的圖形處理單元(Graphic Processing Unit，GPU)〇
[0017]根據(jù)本發(fā)明的實(shí)施方式，所述經(jīng)編碼的數(shù)據(jù)可為聯(lián)合圖像專家組(Joint Photograph coding Experts Group，JPEG)形式。
[0018]根據(jù)本發(fā)明的實(shí)施方式，在所述變更的區(qū)域?yàn)槎鄠€(gè)的情況下，所述經(jīng)編碼的數(shù)據(jù)可為分別對(duì)所述多個(gè)變更的區(qū)域進(jìn)行編碼所得的數(shù)據(jù)。
[0019]根據(jù)本發(fā)明的實(shí)施方式，所述屬性信息可包含所述顯示畫面中的所述變更的區(qū)域的坐標(biāo)、所述編碼的封包大小、解析度、時(shí)間戳、每秒傳輸幀數(shù)(Frame Per Second，F(xiàn)PS)、所述顯示畫面為多個(gè)的情況下的顯示畫面的固有標(biāo)識(shí)符(Unique ID，UID)中的至少一個(gè)以上。
[0020]發(fā)明的效果
[0021]根據(jù)本發(fā)明的一實(shí)施方式，實(shí)時(shí)監(jiān)控儲(chǔ)存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲(chǔ)器，在監(jiān)控結(jié)果為顯示畫面上的圖像變更的情況下，僅對(duì)變更的區(qū)域的圖像數(shù)據(jù)進(jìn)行編碼人而傳輸，由此可提高圖像處理速度?！靖綀D說明】
[0022]圖1是本發(fā)明的一實(shí)施方式的利用視頻存儲(chǔ)器的監(jiān)控的圖像處理裝置的構(gòu)成圖。
[0023]圖2是用以說明通過本發(fā)明的一實(shí)施方式進(jìn)行的變更的區(qū)域的數(shù)據(jù)的提取及屬性信息中的坐標(biāo)的圖。
[0024]圖3是本發(fā)明的一實(shí)施方式的利用視頻存儲(chǔ)器的監(jiān)控的圖像處理方法，且是說明發(fā)送側(cè)圖像處理裝置的流程的流程圖。
[0025]圖4是本發(fā)明的一實(shí)施方式的利用視頻存儲(chǔ)器的監(jiān)控的圖像處理方法，且是說明接收側(cè)圖像處理裝置的流程的流程圖?！揪唧w實(shí)施方式】
[0026]以下，參照附圖，對(duì)本發(fā)明的實(shí)施方式進(jìn)行說明。然而，本發(fā)明的實(shí)施方式可變形為多種形態(tài)，本發(fā)明的范圍并不僅僅限定于以下所說明的實(shí)施方式。為了進(jìn)行更明確的說明，可夸張地表示圖中的要素的形狀及尺寸等，圖中以相同的符號(hào)標(biāo)注的要素為相同的要素。
[0027]圖1是本發(fā)明的一實(shí)施方式的利用視頻存儲(chǔ)器的監(jiān)控的圖像處理裝置的構(gòu)成圖， 圖2是用以說明通過本發(fā)明的一實(shí)施方式進(jìn)行的變更的區(qū)域的數(shù)據(jù)的提取及屬性信息中的坐標(biāo)的圖。[〇〇28]如圖1所示，本發(fā)明的第1實(shí)施方式的圖像處理裝置(120)是包含儲(chǔ)存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲(chǔ)器(VM)( 123)的圖像處理裝置(120)，所述圖像處理裝置(120)可包含:鏡像驅(qū)動(dòng)器(MD)(124)，其對(duì)儲(chǔ)存在視頻存儲(chǔ)器(VM)(123)的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控;變更數(shù)據(jù)提取部(125)，其當(dāng)儲(chǔ)存在視頻存儲(chǔ)器(VM)(123)的圖像數(shù)據(jù)變更時(shí)， 從視頻存儲(chǔ)器(VM)(123)提取顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及編碼部(126)，其連同所提取的圖像數(shù)據(jù)一并對(duì)所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。[〇〇29]另外，本發(fā)明的第2實(shí)施方式的圖像處理裝置(130)是包含儲(chǔ)存將顯示在顯示畫面的圖像數(shù)據(jù)的視頻存儲(chǔ)器(VM)(134)的圖像處理裝置(130)，所述圖像處理裝置(130)包含: 解碼部(132)，其對(duì)經(jīng)編碼的數(shù)據(jù)進(jìn)行解碼;變更數(shù)據(jù)更新部(133)，其基于經(jīng)編碼的數(shù)據(jù)中所包含的屬性信息而在視頻存儲(chǔ)器(134)更新顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及顯示驅(qū)動(dòng)器(235)，其將儲(chǔ)存在視頻存儲(chǔ)器(134)的更新的圖像數(shù)據(jù)顯示到顯示畫面中的變更的區(qū)域;且經(jīng)編碼的數(shù)據(jù)可為連同從視頻存儲(chǔ)器(134)獲得的顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)一并對(duì)屬性信息進(jìn)行編碼所得的數(shù)據(jù)。
[0030]以下，參照?qǐng)D1至圖2,詳細(xì)地對(duì)本發(fā)明的一實(shí)施方式的利用視頻存儲(chǔ)器的監(jiān)控的圖像處理裝置進(jìn)行說明。發(fā)送側(cè)裝置包含顯示部(110)及發(fā)送側(cè)圖像處理裝置(120)，接收側(cè)裝置可包含接收側(cè)圖像處理裝置(130)及顯示部(140)，發(fā)送側(cè)圖像處理裝置(120)與接收側(cè)圖像處理裝置(130)可通過網(wǎng)絡(luò)(Net Work，NW)收發(fā)數(shù)據(jù)。以下，區(qū)分發(fā)送側(cè)裝置及接收側(cè)裝置而詳細(xì)地進(jìn)行說明。[〇〇31]1?發(fā)送側(cè)裝置(110、120)[〇〇32]參照?qǐng)D1，顯示裝置(140)可包含如監(jiān)控器的具備顯示畫面的多個(gè)顯示裝置(111至11N)。例如，可利用多個(gè)顯示裝置(111至11N)適當(dāng)?shù)胤峙湟粋€(gè)圖像而通過如墻控制器的控制器進(jìn)行顯示，或多個(gè)顯示裝置(111至11N)各自顯示不同的圖像。[〇〇33]如圖1所示，接收側(cè)圖像處理裝置(130)可包含圖形引擎(Graphic Engine，GE)(121)、顯示驅(qū)動(dòng)器(Display Device，DD) (122)、視頻存儲(chǔ)器(Video Memory，VM) (123)、鏡像驅(qū)動(dòng)器(Mirror Diver，MD) (124)、變更數(shù)據(jù)提取部(125)、編碼部(126)、發(fā)送部(127)及視頻端口(129)。
[0034]此處，圖形引擎(GE)(121)對(duì)是否輸入畫面變更命令進(jìn)行監(jiān)控，如果監(jiān)控結(jié)果為輸入畫面變更命令，則可將所述畫面變更命令傳輸?shù)斤@示驅(qū)動(dòng)器(DD) (122)。此處，畫面變更命令是通過在使用者模式(user mode)下實(shí)行的應(yīng)用程序而輸入的命令，例如可為對(duì)當(dāng)前顯示在顯示裝置(110)的顯示畫面的圖像的全部或一部分區(qū)域的變更命令。[〇〇35]如果從圖形引擎(GE)(121)輸入畫面變更命令，則顯示驅(qū)動(dòng)器(DD)(122)可根據(jù)所輸入的畫面變更命令而將顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)儲(chǔ)存到視頻存儲(chǔ)器(VM)(123)的對(duì)應(yīng)的區(qū)域。此后，可向圖形引擎(GE)(121)傳達(dá)顯示請(qǐng)求命令，以便可將變更的區(qū)域的圖像數(shù)據(jù)顯示顯示到顯示畫面。于是，圖形引擎(GE)(121)根據(jù)顯示請(qǐng)求命令而通過視頻端口(128)向顯示裝置(110)傳達(dá)變更的區(qū)域的圖像數(shù)據(jù)，所傳達(dá)的圖像數(shù)據(jù)可通過顯示裝置(110)的顯示畫面而顯示。[〇〇36]另一方面，視頻存儲(chǔ)器(VM)(123)是儲(chǔ)存將顯示在顯示畫面的圖像數(shù)據(jù)的儲(chǔ)存介質(zhì)，可在將一個(gè)顯示畫面分割成多個(gè)區(qū)域后，將圖像數(shù)據(jù)儲(chǔ)存到各個(gè)區(qū)域所對(duì)應(yīng)的地址。所分割的各個(gè)區(qū)域可稱為幀(frame)，由此視頻存儲(chǔ)器(VM)(123)也可稱為幀緩沖器(frame buffer)〇[〇〇37]另一方面，鏡像驅(qū)動(dòng)器(MD)(124)用于對(duì)儲(chǔ)存在視頻存儲(chǔ)器(VM)(123)的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控，如果顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)儲(chǔ)存到視頻存儲(chǔ)器(VM) (123)，則可在感測(cè)到這一情況后，向變更數(shù)據(jù)提取部(125)通知視頻存儲(chǔ)器(VM)(123)的一部分或全部變更。[〇〇38]于是，變更數(shù)據(jù)提取部(125)可從視頻存儲(chǔ)器(VM)(123)提取顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)，將所提取的圖像數(shù)據(jù)傳達(dá)到編碼部(126)。[〇〇39]編碼部(126)可連同從變更數(shù)據(jù)提取部(125)提取的圖像數(shù)據(jù)一并對(duì)所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。經(jīng)編碼的數(shù)據(jù)可傳達(dá)到發(fā)送部(127)。此處，編碼部(126)能夠以聯(lián)合圖像專家組(Joint Photograph coding Experts Group，JPEG)形式對(duì)所提取的圖像數(shù)據(jù)及所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。另外，在顯示畫面中的2個(gè)以上的區(qū)域同時(shí)發(fā)生變更的情況下，編碼部(126)可分別對(duì)變更的區(qū)域執(zhí)行編碼。
[0040]此處，屬性信息可包含顯示畫面中的變更的區(qū)域的(物理)坐標(biāo)、編碼的封包大小、 解析度、時(shí)間戳、每秒傳輸幀數(shù)(Frame Per Second，F(xiàn)PS)、顯示畫面為多個(gè)的情況下的顯示畫面的固有標(biāo)識(shí)符(Unique ID，UID)中的至少一個(gè)以上。根據(jù)本發(fā)明的一實(shí)施方式，在屬性信息中包含有時(shí)間戳，接收側(cè)圖像處理裝置(130)通過利用這種時(shí)間戳，可同時(shí)顯示分別進(jìn)行編碼而傳輸?shù)膬蓚€(gè)以上的變更的區(qū)域。[〇〇41] 通常，在如H.264的編碼解碼器的情況下，集中多個(gè)顯示畫面(如果將一個(gè)顯示畫面整體定義為一個(gè)幀，則為多個(gè)幀)而一次性地進(jìn)行編碼，因此編碼所需的運(yùn)算處理相應(yīng)地增加而負(fù)荷變多，在一個(gè)顯示畫面中的極小一部分區(qū)域變更的情況下，也會(huì)對(duì)整個(gè)顯示畫面進(jìn)行編碼，因此圖像處理速度相應(yīng)地進(jìn)一步增加。[0〇42]因此，根據(jù)本發(fā)明的一實(shí)施方式，以聯(lián)合圖像專家組(Joint Photograph coding Experts Group，JPEG)形式對(duì)所提取的圖像數(shù)據(jù)及所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼而傳輸，由此具有可在整體上提高圖像處理速度的優(yōu)點(diǎn)。[〇〇43]圖2是用以說明通過本發(fā)明的一實(shí)施方式進(jìn)行的變更的區(qū)域的數(shù)據(jù)的提取及屬性信息中的坐標(biāo)的圖。
[0044] 如圖1及圖2所示，如果顯示畫面(參照?qǐng)D2的部分(a))中的一部分區(qū)域(211、212) 變更(參照?qǐng)D2的部分(b))，則顯示驅(qū)動(dòng)器(DD)(122)可在提取變更的區(qū)域(21U212)的圖像數(shù)據(jù)后，分別儲(chǔ)存到視頻存儲(chǔ)器(VM) (123)的對(duì)應(yīng)的區(qū)域。
[0045]在圖2中，表示在一個(gè)顯示畫面上兩個(gè)以上的區(qū)域(21U212)在同一時(shí)點(diǎn)變更的情況，在此情況下，可分別對(duì)各個(gè)變更的區(qū)域(21U212)的圖像數(shù)據(jù)進(jìn)行編碼而傳輸。在圖2的部分(c)中，區(qū)域(211)的(乂、￥)、(乂+11、￥)、(乂、￥+11)、(乂+11、￥+11)例示性地說明屬性信息中的變更的區(qū)域的顯示畫面上的實(shí)際坐標(biāo)。
[0046]最后，發(fā)送部(127)可通過網(wǎng)絡(luò)(NW)向接收側(cè)圖像處理裝置(130)的接收部(131) 傳輸經(jīng)編碼的數(shù)據(jù)。[〇〇47]如上所述，圖像處理裝置(120)在并非為使用者模式的核心模式(kernel Mode)下進(jìn)行動(dòng)作，故而與如在【背景技術(shù)】中所說明的在使用者模式下進(jìn)行動(dòng)作的如WIN32的圖形裝置接口(GDI)相比，具有提高圖像處理速度的技術(shù)效果。[〇〇48]2 ?接收側(cè)裝置(130、140)[〇〇49]首先，參照?qǐng)D1，顯示裝置(140)與發(fā)送側(cè)顯示裝置(110)相同地，可包含如監(jiān)控器的具備顯示畫面的多個(gè)顯示裝置(141至14N)。例如，可利用多個(gè)顯示裝置(141至14N)適當(dāng)?shù)胤峙湟粋€(gè)圖像而通過如墻控制器的控制器進(jìn)行顯示，或多個(gè)顯示裝置(141至14N)各自顯示不同的圖像。
[0050]如圖1所示，接收側(cè)圖像處理裝置(120)可包含接收部(131)、解碼部(132)、變更數(shù)據(jù)更新部(133)、視頻存儲(chǔ)器(VM)(134)、顯示驅(qū)動(dòng)器(DD)(135)、圖形引擎(GE)(136)及視頻端口(137)〇[〇〇51]接收部(131)可在通過網(wǎng)絡(luò)(NW)從發(fā)送側(cè)圖像處理裝置(120)接收經(jīng)編碼的數(shù)據(jù)后，向解碼部(132)傳達(dá)所述經(jīng)編碼的數(shù)據(jù)。[〇〇52]此處，經(jīng)編碼的數(shù)據(jù)可為連同對(duì)儲(chǔ)存在發(fā)送側(cè)圖像處理裝置(120)的視頻存儲(chǔ)器 (VM)(123)的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控而獲得的顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)一并對(duì)屬性信息進(jìn)行編碼所得的數(shù)據(jù)。[〇〇53]根據(jù)本發(fā)明的一實(shí)施方式，通過將從發(fā)送側(cè)圖像處理裝置(120)傳輸?shù)慕?jīng)編碼的數(shù)據(jù)設(shè)為聯(lián)合圖像專家組(Joint Photograph coding Experts Group，JPEG)形式而可在整體上提高圖像處理速度的方面與上述內(nèi)容相同。
[0054]如果從接收部(131)傳達(dá)經(jīng)編碼的數(shù)據(jù)，則解碼部(132)可在對(duì)所述經(jīng)編碼的數(shù)據(jù)進(jìn)行解碼后，向變更數(shù)據(jù)更新部(133)傳達(dá)。根據(jù)本發(fā)明的一實(shí)施方式，解碼部(132)可包含作為視頻卡的處理器的圖形處理單元(Graphic Processing Unit，GPU)。通常，在個(gè)人電腦的中央處理裝置對(duì)經(jīng)編碼的圖像數(shù)據(jù)執(zhí)行解碼，在視頻卡接收經(jīng)解碼的圖像數(shù)據(jù)并輸出。 因此，對(duì)個(gè)人電腦的中央處理裝置賦予較多的負(fù)荷。因此，根據(jù)本發(fā)明的一實(shí)施方式，如果接收經(jīng)編碼的數(shù)據(jù)，則在視頻卡的處理器執(zhí)行對(duì)所述經(jīng)編碼的數(shù)據(jù)的解碼，由此與以往相比，可提高處理速度。
[0055]另一方面，如果從解碼部(132)傳達(dá)經(jīng)解碼的數(shù)據(jù)，則變更數(shù)據(jù)更新部(133)可基于屬性信息而在視頻存儲(chǔ)器(VM)(134)更新顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)。[〇〇56] 此處，如上所述，屬性信息可包含顯示畫面中的變更的區(qū)域的坐標(biāo)、編碼的封包大小、解析度、時(shí)間戳、每秒傳輸幀數(shù)(Frame Per Second，F(xiàn)PS)、顯示畫面為多個(gè)的情況下的顯示畫面的固有標(biāo)識(shí)符(Unique ID，UID)中的至少一個(gè)以上。
[0057]另外，根據(jù)本發(fā)明的一實(shí)施方式，在屬性信息中包含有時(shí)間戳，接收側(cè)圖像處理裝置(130)通過利用這種時(shí)間戳，可同時(shí)顯示分別進(jìn)行編碼而傳輸?shù)膬蓚€(gè)以上的變更的區(qū)域。 [〇〇58]視頻存儲(chǔ)器(VM)(134)儲(chǔ)存將顯示在顯示裝置(140)的顯示畫面的圖像數(shù)據(jù)，特別是僅可從發(fā)送側(cè)圖像處理裝置(120)更新顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)。[〇〇59]并且，顯示驅(qū)動(dòng)器(DD) (135)可向圖形引擎(GE) (121)傳達(dá)顯示請(qǐng)求命令，以便可將儲(chǔ)存在視頻存儲(chǔ)器(VM)(134)的更新的圖像數(shù)據(jù)顯示到顯示畫面。
[0060]于是，圖形引擎(GE) (136)根據(jù)顯示請(qǐng)求命令而通過視頻端口(137)向顯示裝置 (140)傳達(dá)變更的區(qū)域的圖像數(shù)據(jù)，所傳達(dá)的圖像數(shù)據(jù)可通過顯示畫面而顯示。
[0061]另一方面，圖3是本發(fā)明的一實(shí)施方式的利用視頻存儲(chǔ)器的監(jiān)控的圖像處理方法， 且是說明發(fā)送側(cè)圖像處理裝置(120)的流程的流程圖。[〇〇62]以下，參照?qǐng)D1至圖3,對(duì)本發(fā)明的一實(shí)施方式的發(fā)送側(cè)的圖像處理方法進(jìn)行說明。 然而，為了使發(fā)明簡(jiǎn)單明了，省略對(duì)與參照?qǐng)D1至圖2所說明的事項(xiàng)重復(fù)的部分的說明。 [〇〇63]參照?qǐng)D1至圖3,首先鏡像驅(qū)動(dòng)器(MD) (124)可實(shí)時(shí)監(jiān)控儲(chǔ)存在視頻存儲(chǔ)器(VM)(123)的圖像數(shù)據(jù)是否變更(步驟S301)。[〇〇64]如果監(jiān)控結(jié)果為感測(cè)到存儲(chǔ)器(VM)( 123)變更(步驟S302)，則變更數(shù)據(jù)提取部(125)可從視頻存儲(chǔ)器(VM)(123)提取顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)(步驟S303)。 [〇〇65]最后，編碼部(126)可連同從變更數(shù)據(jù)提取部(125)提取的圖像數(shù)據(jù)一并對(duì)所提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼(步驟S304)。經(jīng)編碼的數(shù)據(jù)可通過發(fā)送部(127)及網(wǎng)絡(luò) (NW)而傳輸?shù)浇邮諅?cè)圖像處理裝置(130)。[〇〇66]并且，圖4是本發(fā)明的一實(shí)施方式的利用視頻存儲(chǔ)器的監(jiān)控的圖像處理方法，且是說明接收側(cè)圖像處理裝置的流程的流程圖。[〇〇67]以下，參照?qǐng)D1至圖2及圖4,對(duì)本發(fā)明的一實(shí)施方式的接收側(cè)的圖像處理方法進(jìn)行說明。然而，為了使發(fā)明簡(jiǎn)單明了，省略對(duì)與參照?qǐng)D1至圖2所說明的事項(xiàng)重復(fù)的部分的說明。
[0068]如果從接收部(131)傳達(dá)經(jīng)編碼的數(shù)據(jù)，則解碼部(132)可在對(duì)所述經(jīng)編碼的數(shù)據(jù)進(jìn)行解碼后(步驟S401)，將其傳達(dá)到變更數(shù)據(jù)更新部(133)。根據(jù)本發(fā)明的一實(shí)施方式，如上所述，解碼部(132)可包含作為視頻卡的處理器的圖形處理單元(Graphic Processing Unit,GPU)〇[〇〇69]另外，經(jīng)編碼的數(shù)據(jù)可為連同對(duì)儲(chǔ)存在發(fā)送側(cè)圖像處理裝置(120)的視頻存儲(chǔ)器 (VM)(123)的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控而獲得的顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)一并對(duì)屬性信息進(jìn)行編碼所得的數(shù)據(jù)。
[0070]接著，如果從解碼部(132)傳達(dá)經(jīng)解碼的數(shù)據(jù)，則變更數(shù)據(jù)更新部(133)可基于屬性信息而在視頻存儲(chǔ)器(VM)(134)更新顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù)(步驟S402)。
[0071]此處，如上所述，屬性信息可包含顯示畫面中的變更的區(qū)域的坐標(biāo)、編碼的封包大小、解析度、時(shí)間戳、每秒傳輸幀數(shù)(Frame Per Second，F(xiàn)PS)、顯示畫面為多個(gè)的情況下的顯示畫面的固有標(biāo)識(shí)符(Unique ID，UID)中的至少一個(gè)以上。[〇〇72]另外，根據(jù)本發(fā)明的一實(shí)施方式，在屬性信息中包含有時(shí)間戳，接收側(cè)圖像處理裝置(130)通過利用這種時(shí)間戳，可同時(shí)顯示分別進(jìn)行編碼而傳輸?shù)膬蓚€(gè)以上的變更的區(qū)域。 [〇〇73]最后，顯示驅(qū)動(dòng)器(DD)(135)可對(duì)圖形引擎(GE) (121)進(jìn)行控制而將儲(chǔ)存在視頻存儲(chǔ)器(VM)(134)的更新的圖像數(shù)據(jù)顯示到顯示畫面中的變更的區(qū)域(步驟S403)。
[0074]本發(fā)明并不限定于上述實(shí)施方式及附圖。本技術(shù)領(lǐng)域的普通技術(shù)人員應(yīng)明白應(yīng)以隨附的權(quán)利要求書限定權(quán)利范圍，可在不脫離權(quán)利要求書中所記載的本發(fā)明的技術(shù)思想的范圍內(nèi)實(shí)現(xiàn)各種形態(tài)的置換、變形及變更。[〇〇75]符號(hào)的說明
[0076] 110:顯示裝置(發(fā)送側(cè))120:圖像處理裝置(發(fā)送側(cè))[〇〇77] 121:圖形引擎(發(fā)送側(cè))122:顯示驅(qū)動(dòng)器(發(fā)送側(cè))[〇〇78] 123:視頻存儲(chǔ)器(發(fā)送側(cè))124:鏡像驅(qū)動(dòng)器 [〇〇79]125:變更數(shù)據(jù)提取部126:編碼部[〇〇8〇]127:發(fā)送部128:視頻端口(發(fā)送側(cè))[〇〇811130:圖像處理裝置(接收側(cè))131:接收部[〇〇82]132:解碼部133:變更數(shù)據(jù)更新部[〇〇83] 134:視頻存儲(chǔ)器(接收側(cè))135:顯示驅(qū)動(dòng)器(接收側(cè)) [〇〇84]136:圖形引擎(接收側(cè))137:視頻端口(接收側(cè))[〇〇85]140:顯示裝置(接收側(cè))211、212:變更的區(qū)域
【主權(quán)項(xiàng)】
1.一種圖像處理裝置，其包含在將顯示畫面分割成多個(gè)區(qū)域后，將進(jìn)行顯示的圖像數(shù) 據(jù)儲(chǔ)存到各個(gè)分割的區(qū)域所對(duì)應(yīng)的地址的視頻存儲(chǔ)器，且在核心模式下進(jìn)行動(dòng)作，所述圖 像處理裝置的特征在于包含:鏡像驅(qū)動(dòng)器，其對(duì)儲(chǔ)存在所述視頻存儲(chǔ)器的地址的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控；變更數(shù)據(jù)提取部，其當(dāng)儲(chǔ)存在所述視頻存儲(chǔ)器的地址的圖像數(shù)據(jù)變更時(shí)，從所述視頻 存儲(chǔ)器提取所述顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及編碼部，其連同所述提取的圖像數(shù)據(jù)一并對(duì)所述提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編 碼;且所述屬性信息包含所述顯示畫面中的所述變更的區(qū)域的坐標(biāo)、所述編碼的封包大小、 解析度、時(shí)間戳、每秒傳輸幀數(shù)(Frame Per Second，F(xiàn)PS)及所述顯示畫面為多個(gè)的情況下 的顯示畫面的固有標(biāo)識(shí)符(Unique ID，UID)。2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于:所述編碼部以聯(lián)合圖像專家組(Joint Photograph coding Experts Group，JPEG)形 式對(duì)所述提取的圖像數(shù)據(jù)及所述提取的圖像數(shù)據(jù)的屬性信息進(jìn)行編碼。3.根據(jù)權(quán)利要求1所述的圖像處理裝置，其特征在于:在所述變更的區(qū)域?yàn)槎鄠€(gè)情況下，所述編碼部分別對(duì)所述多個(gè)變更的區(qū)域進(jìn)行編碼。4.一種圖像處理裝置，其接收經(jīng)編碼的數(shù)據(jù)而進(jìn)行顯示，所述圖像處理裝置的特征在 于包含:解碼部，其接收所述經(jīng)編碼的數(shù)據(jù)而進(jìn)行解碼；變更數(shù)據(jù)更新部，其基于所述經(jīng)編碼的數(shù)據(jù)中所包含的屬性信息而在視頻存儲(chǔ)器更新 顯示畫面中的變更的區(qū)域的圖像數(shù)據(jù);及顯示驅(qū)動(dòng)器，其將儲(chǔ)存在所述視頻存儲(chǔ)器的更新的圖像數(shù)據(jù)顯示到所述顯示畫面中的 變更的區(qū)域;且所述經(jīng)編碼的數(shù)據(jù)為連同對(duì)儲(chǔ)存在視頻存儲(chǔ)器的地址的圖像數(shù)據(jù)是否變更進(jìn)行監(jiān)控 而獲得的圖像數(shù)據(jù)一并對(duì)所述屬性信息進(jìn)行編碼所得的數(shù)據(jù)，所述視頻存儲(chǔ)器是在將發(fā)送 所述經(jīng)編碼的數(shù)據(jù)的發(fā)送側(cè)圖像處理裝置的顯示畫面分割成多個(gè)區(qū)域后，將進(jìn)行顯示的圖 像數(shù)據(jù)儲(chǔ)存到各個(gè)分割的區(qū)域所對(duì)應(yīng)的地址，且所述發(fā)送側(cè)圖像處理裝置在核心模式下進(jìn) 行動(dòng)作，所述屬性信息包含所述顯示畫面中的所述變更的區(qū)域的坐標(biāo)、所述編碼的封包大小、 解析度、時(shí)間戳、每秒傳輸幀數(shù)(Frame Per Second，F(xiàn)PS)及所述顯示畫面為多個(gè)的情況下 的顯示畫面的固有標(biāo)識(shí)符(Unique ID，UID)。5.根據(jù)權(quán)利要求4所述的圖像處理裝置，其特征在于:所述解碼部包含視頻卡的圖形處理單元(Graphic Processing Unit ARJ)。6.根據(jù)權(quán)利要求4所述的圖像處理裝置，其特征在于:所述經(jīng)編碼的數(shù)據(jù)為聯(lián)合圖像專家組(Joint Photograph coding Experts Group， JPEG)形式。7.根據(jù)權(quán)利要求4所述的圖像處理裝置，其特征在于:在所述變更的區(qū)域?yàn)槎鄠€(gè)情況下，所述經(jīng)編碼的數(shù)據(jù)為分別對(duì)所述多個(gè)變更的區(qū)域進(jìn) 行編碼所得的數(shù)據(jù)。
【文檔編號(hào)】H04N19/43GK105993176SQ201480061396
【公開日】2016年10月5日
【申請(qǐng)日】2014年9月5日
【發(fā)明人】樸慶植, 李柱尚, 梁景喆
【申請(qǐng)人】伊艾斯伊有限公司