本發(fā)明涉及一種多媒體通信系統(tǒng)，特別是一種可實時獲取計算機圖像并對其進(jìn)行操作的會商系統(tǒng)。

背景技術(shù)：

當(dāng)前多媒體通信系統(tǒng)的主流標(biāo)準(zhǔn)為ITU-T(國際電信聯(lián)盟電信標(biāo)準(zhǔn)分局，ITU-T for ITU Telecommunication Standardization Sector)的H.323建議和開源的SIP(Session Initiation Protocol，會話初始協(xié)議)協(xié)議。H.323建議是ITU-T組織定義的基于包交換網(wǎng)絡(luò)的視頻多媒體會議通信的一個標(biāo)準(zhǔn)。因為H.323標(biāo)準(zhǔn)是從早期的電話交換網(wǎng)絡(luò)逐步發(fā)展演進(jìn)而來，該標(biāo)準(zhǔn)還兼具了傳統(tǒng)的PSTN(Public Switched Telephone Network，公共交換電話網(wǎng)絡(luò))呼叫流程和IP(網(wǎng)絡(luò)之間互連的協(xié)議，Internet Protocol)網(wǎng)絡(luò)的特點。H.323涵蓋了一系列的標(biāo)準(zhǔn)，比如網(wǎng)絡(luò)為基于包交換的無QoS(Quality of Service，服務(wù)質(zhì)量)保障的分組交換網(wǎng)，但可以通過網(wǎng)關(guān)和基于ISDN(Integrated Services Digital Network，綜合業(yè)務(wù)數(shù)字網(wǎng))的H.320系統(tǒng)相連，與低比特率的H.324終端相連等等。音頻編解碼標(biāo)準(zhǔn)有G.711、G.723、G.729等，視頻編解碼標(biāo)準(zhǔn)有H.261或H.263，數(shù)據(jù)傳輸標(biāo)準(zhǔn)為T.120，媒體流通信控制協(xié)議H.245，呼叫控制信令H.225等等。H.323標(biāo)準(zhǔn)定義了幾個實時媒體傳輸?shù)慕M件：終端、網(wǎng)關(guān)、網(wǎng)守(Gatekeepers)、多點控制單元。硬件產(chǎn)品往往把幾個功能模塊中的一部分或幾部分進(jìn)行合并集成為一個硬件產(chǎn)品。如MCU(Microcontroller Unit，微控制單元)可以是單獨一個硬件產(chǎn)品，但也往往和網(wǎng)關(guān)、網(wǎng)守按用戶的需求做成一個硬件產(chǎn)品。

SIP協(xié)議是由IETF(國際互聯(lián)網(wǎng)工程任務(wù)組，The Internet Engineering Task Force)定義，基于IP的一個應(yīng)用層控制協(xié)議。由于SIP協(xié)議是基于純文本的信令協(xié)議，可以管理不同接入網(wǎng)絡(luò)上的會晤等。會晤可以是終端設(shè)備之間任何類型的通信，如視頻會晤、即時信息處理或協(xié)作會晤。該協(xié)議不會定義或限制可使用的業(yè)務(wù)，傳輸、服務(wù)質(zhì)量、計費、安全性等問題都由基本核心網(wǎng)絡(luò)和其它協(xié)議處理。

在計算機圖像編碼和傳輸方面，現(xiàn)有技術(shù)具備一定能力，但主要難點在于編碼能力和網(wǎng)絡(luò)條件的限制。

現(xiàn)在商用計算機圖像通常分辨率都不低于XGA(Extended Graphics Array，擴展圖像陣列)(1024×768)，其編碼量高出普通復(fù)合視頻編碼量2～4倍，必須采用專用的硬件模塊和優(yōu)化的編解碼算法才能完整清晰地壓縮編碼實時計算機圖像并將其還原。此外現(xiàn)有公網(wǎng)的能夠達(dá)到點對點間帶寬4Mbps以上的極少，為達(dá)到良好的圖像效果和分辨率，計算機圖像編碼傳輸?shù)乃俾始由暇W(wǎng)絡(luò)上必要的開銷必須在6Mbps以上，使用環(huán)境的緊張使得極少廠商從事該領(lǐng)域的開發(fā)。

文獻(xiàn)1：《ITU-T Recommendation H.323–Systems and terminal equipment for audiovisual services》2006.6公開定義了H.323建議為基于包交換網(wǎng)絡(luò)的通信系統(tǒng)。建議覆蓋了在所有無法提供服務(wù)質(zhì)量保證(QoS)的以包交換為基礎(chǔ)的傳輸條件下的多媒體通信系統(tǒng)的技術(shù)需求。這些包交換網(wǎng)絡(luò)包括局域網(wǎng)、企業(yè)網(wǎng)、城域網(wǎng)、內(nèi)部互聯(lián)網(wǎng)和外部互聯(lián)網(wǎng)(包括Internet)。建議對H.323系統(tǒng)的組件進(jìn)行了描述，包括終端、網(wǎng)管、網(wǎng)守、多點控制器、多點處理器和多點控制單元。建議的控制報文和流程定義了組件間如何通信。

文獻(xiàn)2：《SIP:Session Initiation Protocol》SIP invitations used to create sessions carry session descriptions that allow participants to agree on a set of compatible media types.SIP makes use of elements called proxy servers to help route requests to the user's current location,authenticate and authorize users for services,implement provider call-routing policies,and providefeatures to users.SIP also provides a registration function thatallows users to upload their current locations for use by proxyservers.SIP runs on top of several different transport protocols-IETF Network Working Group 2002.6.

技術(shù)實現(xiàn)要素：

發(fā)明目的：本發(fā)明所要解決的技術(shù)問題是針對現(xiàn)有技術(shù)的不足，提供一種可視化會商系統(tǒng)，該系統(tǒng)將控制和媒體轉(zhuǎn)發(fā)分布到各終端，可根據(jù)使用者將本地計算機的圖像發(fā)送給其它使用者，并將控制權(quán)完全交給對方。在計算機協(xié)同工作的同時使用者之間可進(jìn)行直觀的視音頻通信交流，即會議和研討并行。

技術(shù)方案：本發(fā)明公開了一種可視化會商系統(tǒng)，包括可視化會商管理單元和可視化會商終端；

所述可視化會商管理單元是系統(tǒng)的核心節(jié)點，所有可視化會商業(yè)務(wù)功能都需要由可視化會商管理單元進(jìn)行統(tǒng)一的管理、監(jiān)控和交互，可視化會商管理單元包括視頻交換接入、視頻切換器Vswitch(Video Switch)和中心服務(wù)單元；

所述可視化會商終端負(fù)責(zé)采集現(xiàn)場以及指揮員的視音頻信息，壓縮傳輸?shù)狡渌笓]調(diào)度節(jié)點，同時接收其他指揮調(diào)度節(jié)點視音頻信息并解碼回放；

所述執(zhí)行單元包括系統(tǒng)配置初始化模塊、VGA服務(wù)模塊、可視化會商應(yīng)用平臺軟件模塊、會商服務(wù)主模塊、鍵鼠控制權(quán)限管理模塊、UDP通信模塊以及鍵鼠捕獲模塊。

所述可視化會商管理單元接收各個終端的信令，對信令進(jìn)行解析，然后交給執(zhí)行單元，由執(zhí)行單元實現(xiàn)會商業(yè)務(wù)數(shù)據(jù)的交換。通過會商工作站和會商終端實現(xiàn)了多個會商節(jié)點的實時視音頻信息和業(yè)務(wù)數(shù)據(jù)的共享。

可視化會商終端還包括協(xié)同研判的人機交互界面。

所述會商服務(wù)主模塊執(zhí)行以下步驟：

步驟1，可視化會商終端收到控制指令，主控模塊將信令自動加入信令隊列等待處理。

步驟2，信令隊列加入新的命令后，如果隊列沒有正在處理的信令，新的信令即刻處理，否則等待處理。

步驟3，主控模塊對所有信令的處理均自動創(chuàng)建新的處理線程，并對每一個處理線程進(jìn)行處理計時，當(dāng)發(fā)現(xiàn)信令處理線程超時，則強制終止線程并恢復(fù)處理之前的現(xiàn)場。

系統(tǒng)通過執(zhí)行如下步驟實現(xiàn)信息共享功能：

步驟5-1，可視化會商終端A向可視化會商管理單元選擇要求可視化會商終端B開放共享；

步驟5-2，可視化會商管理單元通過中心服務(wù)單元解析指令，并轉(zhuǎn)發(fā)給可視化會商終端B，可視化會商終端B收到共享請求，通過可視化會商應(yīng)用平臺軟件模塊解析指令，進(jìn)行如下操作：如果接受共享請求，開啟共享功能，進(jìn)行步驟5-3；如果不接受共享請求，返回初始狀態(tài)；

步驟5-3，可視化會商終端B通過UDP通信模塊向可視化會商終端A發(fā)送站位標(biāo)識Ids和消息頭+Vglads，消息頭+Vglads包括點播視頻圖像信息；

步驟5-4，可視化會商終端A通過可視化會商應(yīng)用平臺軟件模塊解析出消息頭+Vglads，開始點播可視化會商終端B的共享信息，記錄可視化會商終端B的站位名稱和站位列表數(shù)組ArrayList，并通過VGA服務(wù)模塊加載到消息顯示列表。

系統(tǒng)通過執(zhí)行如下步驟停止信息共享功能：

步驟6-1，可視化會商終端A通過UDP通信模塊向可視化會商管理單元發(fā)出指令，要求其關(guān)閉共享的可視化會商終端B；

步驟6-2，可視化會商終端B收到可視化會商管理單元發(fā)出的關(guān)閉指令，解析后，關(guān)閉共享功能，并停止發(fā)送相關(guān)信息；

步驟6-3，可視化會商終端B向可視化會商終端A發(fā)送站位標(biāo)識Ids和消息頭+Vglads；

步驟6-4，可視化會商終端A通過可視化會商應(yīng)用平臺軟件模塊解析出消息頭+Vglads，停止點播可視化會商終端B的共享信息，并從站位列表數(shù)組ArrayList中刪除可視化會商終端B的站位名稱，刪除消息顯示列表中的相應(yīng)信息。

系統(tǒng)通過執(zhí)行如下步驟停止顯示功能：

步驟7-1，可視化會商終端A選擇要求其停止顯示的可視化會商終端B；

步驟7-2，可視化會商終端B收到停止顯示請求并解析；

步驟7-3，可視化會商終端A通過VGA服務(wù)模塊停止顯示可視化會商終端B的VGA圖像；

步驟7-4，可視化會商終端A從消息顯示列表中刪除可視化會商終端B的信息。

系統(tǒng)通過執(zhí)行如下步驟實現(xiàn)遠(yuǎn)程操控功能：

步驟8-1，可視化會商終端A通過可視化會商管理單元發(fā)送消息至可視化會商終端B，申請遠(yuǎn)程操控可視化會商終端B；

步驟8-2，可視化會商終端B收到可視化會商管理單元轉(zhuǎn)發(fā)的控制申請，進(jìn)行如下操作：如果允許被控，則發(fā)送確認(rèn)信息給可視化會商終端A，進(jìn)行步驟8-3；如果拒絕被控，則發(fā)送拒絕消息給可視化會商終端A；

步驟8-3，可視化會商管理單元向可視化會商終端A轉(zhuǎn)發(fā)可視化會商終端B返回的消息，進(jìn)行如下操作：如果可視化會商終端B同意被控，進(jìn)行步驟8-4；如果可視化會商終端B拒絕被控，停止對可視化會商終端B的控制請求；

步驟8-4，可視化會商終端A通過UDP通信模塊和鍵鼠捕獲模塊，開啟遠(yuǎn)程操控，發(fā)送消息至可視化會商終端B；

步驟8-5，可視化會商終端B收到遠(yuǎn)程操控消息，將可視化會商終端A加入到操控方列表，并將列表信息發(fā)送到會商終端A。

系統(tǒng)通過執(zhí)行如下步驟停止遠(yuǎn)程操控：

步驟9-1，可視化會商終端B在列表中選擇可視化會商終端A，通過鍵鼠控制權(quán)限管理模塊選擇收回控制權(quán)限，發(fā)送消息給可視化會商終端A；

步驟9-2，可視化會商終端A停止遠(yuǎn)程操作，通過可視化會商管理單元，發(fā)送消息給可視化會商終端B；

步驟9-3，可視化會商終端B收到消息，將可視化會商終端A從操控方站位列表中刪除。

可視化會商應(yīng)用平臺軟件模塊實現(xiàn)了對所有業(yè)務(wù)邏輯的實現(xiàn)和管理，根據(jù)業(yè)務(wù)邏輯調(diào)用視音頻和VGA服務(wù)模塊進(jìn)行視音頻和VGA信息的處理。

VGA服務(wù)模塊實現(xiàn)了所有視音頻和VGA相關(guān)功能的實現(xiàn)，如視音頻編碼、VGA信號編碼、視頻顯示、VGA信號解碼顯示、聲音控制等。

會商服務(wù)主模塊、功能處理模塊、視音頻/VGA服務(wù)模塊相互協(xié)作，完成可視化會商功能的執(zhí)行。

本發(fā)明為每個終端配置2種編解碼模塊，具備了同時編解碼視音頻和計算機圖像的功能。每個終端接收和發(fā)送的任何一路或多路媒體流，其源端完全由終端使用人所決定。而命令和數(shù)據(jù)的轉(zhuǎn)發(fā)和調(diào)度由中心端控制和配置。

本發(fā)明的原理是：在傳輸控制上采用Client/Server結(jié)構(gòu)的消息機制，對呼叫的控制是將控制信息封裝到消息的頭域中，通過消息的傳遞來實現(xiàn)。終端不只提供數(shù)據(jù)，還提供呼叫控制信息，中心端則用來進(jìn)行定位、轉(zhuǎn)發(fā)或接收消息。系統(tǒng)體現(xiàn)的是一種分布式的控制模式。

本發(fā)明將控制和媒體轉(zhuǎn)發(fā)分布到各終端，網(wǎng)絡(luò)連通即可進(jìn)行系統(tǒng)應(yīng)用的快速部署和重構(gòu)。在傳輸控制上采用Client/Server結(jié)構(gòu)的消息機制，在組織結(jié)構(gòu)上為星形結(jié)構(gòu)。

本發(fā)明所述一組子終端采用星形結(jié)構(gòu)，即所述一組子終端為同一級別，所有子終端都與中心端直接連接；

有益效果：本發(fā)明顯著優(yōu)點是：

1、系統(tǒng)可分多級、多群組進(jìn)行多媒體通信，且劃分方式可根據(jù)邏輯結(jié)構(gòu)改變。

2、應(yīng)用方式簡單，不受網(wǎng)絡(luò)接入方式影響，擴展性強。

3、單個終端的編解碼能力提高，系統(tǒng)多媒體交換容量高。

4、與標(biāo)準(zhǔn)H.323系統(tǒng)的有完善的接口，在兼容編解碼標(biāo)準(zhǔn)的情況下可進(jìn)行多媒體通信。

附圖說明

下面結(jié)合附圖和具體實施方式對本發(fā)明做更進(jìn)一步的具體說明，本發(fā)明的上述或其他方面的優(yōu)點將會變得更加清楚。

圖1是本發(fā)明的信息共享功能流程示意圖。

圖2是本發(fā)明的遠(yuǎn)程操控功能流程示意圖。

圖3是系統(tǒng)架構(gòu)圖。

具體實施方式

下面結(jié)合附圖及實施例對本發(fā)明做進(jìn)一步說明。

如圖1所示，本發(fā)明的信息共享各功能的實現(xiàn)。

一、信息共享

步驟一，可視化會商終端A向可視化會商管理單元選擇要求其開放共享的其它終端名稱：會商終端B；

步驟二，可視化會商管理單元通過中心服務(wù)單元解析指令，并轉(zhuǎn)發(fā)給可視化會商終端B，可視化會商終端B收到共享請求，通過可視化會商應(yīng)用平臺軟件模塊解析指令，進(jìn)行如下操作：

(1)接受共享請求，開啟共享功能，進(jìn)行步驟三；

(2)不接受共享請求，返回初始狀態(tài)；

步驟三，可視化會商終端B通過UDP通信模塊向可視化會商終端A發(fā)送站位Ids(站位標(biāo)識)和消息頭+Vglads(點播視頻圖像信息)；

步驟四，可視化會商終端A通過可視化會商應(yīng)用平臺軟件模塊解析出Vglads，開始點播可視化會商終端B的共享信息，并記錄可視化會商終端B的站位名稱和站位列表數(shù)組，并通過VGA服務(wù)模塊加載到消息顯示列表。

二、停止共享功能

步驟一，可視化會商終端A通過UDP通信模塊向可視化會商管理單元發(fā)出指令，要求其關(guān)閉共享的可視化會商終端B；

步驟二，可視化會商終端B收到可視化會商管理單元關(guān)閉指令，解析后，關(guān)閉共享功能，并停止發(fā)送相關(guān)信息；

步驟三，可視化會商終端B向可視化會商終端A發(fā)送站位Ids和消息頭+Vglads；

步驟四，可視化會商終端A通過可視化會商應(yīng)用平臺軟件模塊解析出Vglads，停止點播會商終端B的共享信息，并從ArrayList(站位列表數(shù)組)數(shù)組中刪除會商終端B的站位名稱，消息顯示列表也刪除相應(yīng)信息。

三、停止顯示

步驟一，可視化會商終端A選擇要求其停止顯示的可視化會商終端B；

步驟二，可視化會商終端B收到停止顯示請求：

步驟三，可視化會商終端A通過VGA服務(wù)模塊停止顯示會商終端B的VGA圖像；

步驟四，可視化會商終端A從消息顯示列表中刪除可視化會商終端B的信息。

如圖2所示，本發(fā)明遠(yuǎn)程操控各功能實現(xiàn)方式如下：

一、遠(yuǎn)程操控

步驟一，通過可視化會商管理單元，可視化會商終端A選擇可視化會商終端B，發(fā)送消息至可視化會商終端B，申請遠(yuǎn)程操控可視化會商終端B；

步驟二，可視化會商終端B收到可視化會商管理單元轉(zhuǎn)發(fā)的控制申請，進(jìn)行如下操作：

(1)允許被控，則發(fā)送確認(rèn)信息給可視化會商終端A，進(jìn)行步驟三；

(2)拒絕被控，則發(fā)送拒絕消息給可視化會商終端A；

步驟三，通過可視化會商管理單元，可視化會商終端A收到可視化會商終端B返回的消息，進(jìn)行如下操作：

(1)會商終端B同意被控，進(jìn)行步驟四；

(2)會商終端B拒絕被控，停止對會商終端B的控制請求；

步驟四，可視化會商終端A通過UDP通信模塊和鍵鼠捕獲模塊，開啟遠(yuǎn)程操控，發(fā)送消息至?xí)探K端B；

步驟五，會商終端B收到遠(yuǎn)程操控消息，將會商終端A加入到操控方列表，并將列表信息發(fā)送到會商終端A；

二、停止遠(yuǎn)程操控

步驟一，可視化會商終端B在列表中點擊可視化會商終端A，通過鍵鼠控制權(quán)限管理模塊選擇收回控制權(quán)限，發(fā)送消息給可視化會商終端A；

步驟二，可視化會商終端A停止遠(yuǎn)程操作，通過可視化會商管理單元，發(fā)送消息給會商終端B；

步驟三，可視化會商終端B收到消息，將可視化會商終端A從操控方站位列表中刪除。

本發(fā)明提供了一種可視化會商系統(tǒng)，具體實現(xiàn)該技術(shù)方案的方法和途徑很多，以上所述僅是本發(fā)明的優(yōu)選實施方式，應(yīng)當(dāng)指出，對于本技術(shù)領(lǐng)域的普通技術(shù)人員來說，在不脫離本發(fā)明原理的前提下，還可以做出若干改進(jìn)和潤飾，這些改進(jìn)和潤飾也應(yīng)視為本發(fā)明的保護(hù)范圍。本實施例中未明確的各組成部分均可用現(xiàn)有技術(shù)加以實現(xiàn)。