視頻即時通訊中測試音視頻同步的方法、裝置及系統(tǒng)的制作方法
【專利摘要】本公開是關(guān)于一種視頻即時通訊中測試音視頻同步的方法、裝置及系統(tǒng)。本公開視頻即時通訊中測試音視頻同步的方法，包括：根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將第一音頻波形圖顯示在測試素材的第一視頻信號的視頻畫面上形成第二視頻信號；將第一音頻信號和第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備；播放接收到的音頻信號和視頻信號，同時對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號；根據(jù)第二音頻信號和第一音頻波形圖分析獲取音視頻的同步結(jié)果。本公開實現(xiàn)對視頻即時通訊性能的評估、輔助視頻引擎的開發(fā)與優(yōu)化等，具備高效率的測試效率，高精度的測試評估。
【專利說明】
視頻即時通訊中測試音視頻同步的方法、裝置及系統(tǒng)
技術(shù)領(lǐng)域
[0001]本公開涉及即時通訊技術(shù)，尤其涉及視頻即時通訊中測試音視頻同步的方法、裝置及系統(tǒng)。
【背景技術(shù)】
[0002]移動4G通信技術(shù)逐步發(fā)展和成熟，使視頻會議、視頻通話等各種視頻即時通訊的移動服務(wù)得到大規(guī)模的發(fā)展和應(yīng)用。從技術(shù)角度看，視頻即時通訊需要經(jīng)過采集、處理、壓縮、傳輸、解壓縮、渲染等過程，整個通訊過程中音頻數(shù)據(jù)和視頻數(shù)據(jù)是分別處理和傳輸?shù)?。但由于網(wǎng)絡(luò)的復(fù)雜性、移動終端的多樣性等因素，視頻即時通訊過程中很容易產(chǎn)生音頻和視頻不同步的現(xiàn)象。
[0003]相關(guān)技術(shù)中，思博倫公司的視頻測試系統(tǒng)(Chromatic)可以對視頻即時通訊中音視頻的同步情況進行測試，該測試系統(tǒng)先對測試素材進行處理，將視頻的每一幀圖像進行幀號標記，再用一組循環(huán)的雙音多頻(dual-tone mult1-frequency，簡稱:DTMF)聲音信號做為音頻內(nèi)容，確定每一幀圖像對應(yīng)的音頻DTMF信號;通過視頻即時通訊將處理后的音視頻發(fā)送給接收終端；用高速攝像機和音頻設(shè)備采集接收終端的音視頻數(shù)據(jù)，識別并提取每一幀圖像的幀號標記，同時識別每一幀圖像對應(yīng)的DTMF信號，形成DTMF序列;對比發(fā)送終端和接收終端兩側(cè)的視頻信號和音頻信號的時序，分析音頻和視頻的同步性。

【發(fā)明內(nèi)容】

[0004]為克服相關(guān)技術(shù)中存在的問題，本公開提供一種視頻即時通訊中測試音視頻同步的方法、裝置及系統(tǒng)。
[0005]根據(jù)本公開實施例的第一方面，提供一種視頻即時通訊中測試音視頻同步的方法，包括:
[0006]發(fā)送端的終端設(shè)備根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號；
[0007]所述發(fā)送端的終端設(shè)備將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備；
[0008]所述接收端的終端設(shè)備播放接收到的音頻信號和視頻信號，同時對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面；
[0009]所述接收端的終端設(shè)備根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。
[0010]本公開的實施例提供的技術(shù)方案可以包括以下有益效果:通過在發(fā)送端的視頻畫面上顯示反映發(fā)送端的音頻信號的音頻時序、特性的音頻波形，并將該視頻畫面?zhèn)鬏斀o接收端，由接收端對實際接收的音頻信號和發(fā)送端的音頻信號進行分析比較，從而獲取視頻即時通訊過程中的音視頻同步結(jié)果，實現(xiàn)對視頻即時通訊性能的評估、輔助視頻引擎的開發(fā)與優(yōu)化等，具備高效率的測試效率，高精度的測試評估。
[0011]優(yōu)選的，所述發(fā)送端的終端設(shè)備將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號，包括:
[0012]所述發(fā)送端的終端設(shè)備根據(jù)所述第一音頻信號與所述第一視頻信號的時序?qū)?yīng)關(guān)系，將所述第一音頻波形圖顯示在所述第一視頻信號的視頻畫面上形成所述第二視頻信號。
[0013]本公開的實施例提供的技術(shù)方案可以包括以下有益效果:由于音視頻播放過程中，視頻信號是由一幀一幀有時序的圖像組成，相應(yīng)的每幀圖像也有對應(yīng)的音頻信號，因此發(fā)送端的終端設(shè)備可以第一音頻信號與第一視頻信號的時序?qū)?yīng)關(guān)系，在視頻畫面上顯示由第一音頻信號形成的第一音頻波形圖，這樣在視頻畫面上直觀的反映出了對應(yīng)時間范圍內(nèi)的音頻波形變化情況。
[0014]進一步的，所述接收端的終端設(shè)備根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果，包括:
[0015]所述接收端的終端設(shè)備根據(jù)所述第二音頻信號采用所述預(yù)設(shè)規(guī)則形成第二音頻波形圖；
[0016]所述接收端的終端設(shè)備分析比較所述第二音頻波形圖和所述第一音頻波形圖獲取所述同步結(jié)果。
[0017]所述接收端的終端設(shè)備分析比較所述第二音頻波形圖和所述第一音頻波形圖獲取所述同步結(jié)果，包括:
[0018]所述接收端的終端設(shè)備根據(jù)所述第二音頻信號與所述第三視頻信號的時序?qū)?yīng)關(guān)系，將所述第二音頻波形圖顯示在所述第三視頻信號的視頻畫面上；
[0019]所述接收端的終端設(shè)備分析比較所述第二音頻波形圖和所述第一音頻波形圖的重合度獲取所述同步結(jié)果。
[0020]本公開的實施例提供的技術(shù)方案可以包括以下有益效果:通過在采集的第三視頻信號的視頻畫面上根據(jù)第二音頻信號形成并顯示第二音頻波形圖，并對視頻畫面上的兩個音頻波形圖進行重合度的比較，可以直觀的獲取到音視頻的同步結(jié)果，提高測試效率。
[0021 ]進一步的，所述接收端的終端設(shè)備根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果，包括:
[0022]所述接收端的終端設(shè)備根據(jù)所述第一音頻波形圖采樣獲取第一音頻特征信息；
[0023]所述接收端的終端設(shè)備根據(jù)所述第二音頻信號采集獲取第二音頻特征信息；
[0024]所述接收端的終端設(shè)備通過信號處理分析比較所述第一音頻特征信息和所述第二音頻特征信息獲取所述同步結(jié)果。
[0025]本公開的實施例提供的技術(shù)方案可以包括以下有益效果:通過分別根據(jù)第二音頻信號和第一音頻波形圖得到二者分別對應(yīng)的音頻特征信息，再通過信號處理分析比較二者獲取音視頻的同步結(jié)果，可以直觀的獲取到音視頻的同步結(jié)果，提高測試效率。
[0026]根據(jù)本公開實施例的第二方面，提供一種終端設(shè)備，包括:
[0027]波形形成模塊，被配置為根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖；
[0028]圖像處理模塊，被配置為將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號；
[0029]發(fā)送模塊，被配置為將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備。
[0030]進一步的，所述圖像處理模塊，被配置為根據(jù)所述第一音頻信號與所述第一視頻信號的時序?qū)?yīng)關(guān)系，將所述第一音頻波形圖顯示在所述第一視頻信號的視頻畫面上形成所述第二視頻信號。
[0031]根據(jù)本公開實施例的第三方面，提供一種終端設(shè)備，包括:
[0032]播放模塊，被配置為播放接收到的音頻信號和視頻信號；
[0033]采集模塊，被配置為對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面；
[0034]分析模塊，被配置為根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。
[0035]進一步的，所述分析模塊包括:波形形成單元和第一同步分析單元；
[0036]所述波形形成單元，被配置為根據(jù)所述第二音頻信號采用所述預(yù)設(shè)規(guī)則形成第二首頻波形圖；
[0037]所述第一同步分析單元，被配置為分析比較所述第二音頻波形圖和所述第一音頻波形圖獲取所述同步結(jié)果。
[0038]進一步的，所述第一同步分析單元，被配置為根據(jù)所述第二音頻信號與所述第三視頻信號的時序?qū)?yīng)關(guān)系，將所述第二音頻波形圖顯示在所述第三視頻信號的視頻畫面上;分析比較所述第二音頻波形圖和所述第一音頻波形圖的重合度獲取所述同步結(jié)果。
[0039]進一步的，所述分析模塊包括:采樣單元、采集單元以及第二同步分析單元；
[0040]所述采樣單元，被配置為根據(jù)所述第一音頻波形圖采樣獲取第一音頻特征信息；
[0041]所述采集單元，被配置為根據(jù)所述第二音頻信號采集獲取第二音頻特征信息；
[0042]所述第二同步分析單元，被配置為通過信號處理分析比較所述第一音頻特征信息和所述第二音頻特征信息獲取所述同步結(jié)果。
[0043]根據(jù)本公開實施例的第四方面，提供一種終端設(shè)備，包括:處理器和用于存儲處理器可執(zhí)行指令的存儲器；
[0044]其中，所述處理器被配置為執(zhí)行所述可執(zhí)行指令，以執(zhí)行根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號;將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備。
[0045]根據(jù)本公開實施例的第五方面，提供一種終端設(shè)備，包括:處理器和用于存儲處理器可執(zhí)行指令的存儲器；
[0046]其中，所述處理器被配置為執(zhí)行所述可執(zhí)行指令，以執(zhí)行播放接收到的音頻信號和視頻信號，同時對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面;根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。
[0047]根據(jù)本公開實施例的第六方面，提供一種視頻即時通訊中測試音視頻同步的系統(tǒng)，包括:素材播放設(shè)備、發(fā)送設(shè)備、接收設(shè)備、素材采集設(shè)備以及分析設(shè)備;其中，
[0048]所述素材播放設(shè)備，被配置為根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號；
[0049]所述發(fā)送設(shè)備，被配置為將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給所述接收設(shè)備；
[0050]所述接收設(shè)備，被配置為播放接收到的音頻信號和視頻信號；
[0051]所述素材采集設(shè)備，被配置為對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面；
[0052]所述分析設(shè)備，被配置為根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。
[0053]應(yīng)當(dāng)理解的是，以上的一般描述和后文的細節(jié)描述僅是示例性和解釋性的，并不能限制本公開。
【附圖說明】
[0054]此處的附圖被并入說明書中并構(gòu)成本說明書的一部分，示出了符合本發(fā)明的實施例，并與說明書一起用于解釋本發(fā)明的原理。
[0055]圖1是根據(jù)一示例性實施例示出的一種視頻即時通訊中測試音視頻同步的系統(tǒng)框圖；
[0056]圖2是根據(jù)一示例性實施例示出的一種視頻即時通訊中測試音視頻同步的系統(tǒng)框圖；
[0057]圖3是根據(jù)一示例性實施例示出的一種視頻即時通訊中測試音視頻同步的方法的流程圖；
[0058]圖4是待音頻波形的第二視頻信號的視頻畫面示意圖；
[0059]圖5是根據(jù)一示例性實施例示出的一種終端設(shè)備框圖；
[0060]圖6是根據(jù)一示例性實施例示出的一種終端設(shè)備框圖；
[0061 ]圖7是根據(jù)一示例性實施例示出的一種終端設(shè)備框圖；
[0062]圖8是根據(jù)一示例性實施例示出的一種終端設(shè)備框圖；
[0063]圖9是根據(jù)一示例性實施例示出的一種終端設(shè)備的框圖。
【具體實施方式】
[0064]這里將詳細地對示例性實施例進行說明，其示例表示在附圖中。下面的描述涉及附圖時，除非另有表示，不同附圖中的相同數(shù)字表示相同或相似的要素。以下示例性實施例中所描述的實施方式并不代表與本發(fā)明相一致的所有實施方式。相反，它們僅是與如所附權(quán)利要求書中所詳述的、本發(fā)明的一些方面相一致的裝置和方法的例子。
[0065]圖1是根據(jù)一示例性實施例示出的一種視頻即時通訊中測試音視頻同步的系統(tǒng)框圖。參照圖1，該系統(tǒng)包括發(fā)送端設(shè)備和接收端設(shè)備。該發(fā)送端設(shè)備可以是移動電話，消息收發(fā)設(shè)備，平板設(shè)備，個人數(shù)字助理等，其可以播放測試素材，對該測試素材的音頻信號進行處理形成音頻波形圖，將該音頻波形圖顯示在視頻信號的視頻畫面上進行播放，然后發(fā)送端設(shè)備通過錄屏功能錄制播放中的測試素材，并通過視頻即時通訊功能將錄制的音頻信號和視頻信號發(fā)送給接收端設(shè)備;接收端設(shè)備可以通過視頻即時通訊功能接收音頻信號和視頻信號，對其進行播放并錄屏，然后對拍攝的音頻信號和視頻信號進行分析處理，并參照視頻信號的視頻畫面中的音頻波形圖分析接收到的音頻信號和視頻信號是否同步，最終實現(xiàn)對視頻即時通訊過程中的音視頻同步測試。
[0066]本實施例中，發(fā)送端設(shè)備和接收端設(shè)備均集成了多個功能，即可以播放音視頻，又可以自身錄制音視頻并對其進行處理和分析，可以提高音視頻錄制的清晰度，獲取更優(yōu)質(zhì)的音頻信號和視頻信號。
[0067]圖2是根據(jù)一示例性實施例示出的一種視頻即時通訊中測試音視頻同步的系統(tǒng)框圖。參照圖2，該系統(tǒng)包括素材播放設(shè)備、發(fā)送設(shè)備、接收設(shè)備、素材采集設(shè)備以及分析設(shè)備。素材播放設(shè)備可以是電視、個人電腦、平板設(shè)備等，其可以對該測試素材的音頻信號進行處理形成音頻波形圖，將該音頻波形圖顯示在視頻信號的視頻畫面上播放出來;發(fā)送設(shè)備可以是移動電話、平板設(shè)備等，其可以拍攝素材播放設(shè)備播放的音視頻，并將拍攝的內(nèi)容以音頻信號和視頻信號形式通過視頻即時通訊功能發(fā)送出去;接收設(shè)備可以是移動電話、平板設(shè)備等，其可以通過視頻即時通訊功能接收音頻信號和視頻信號，同時播放該音頻信號和視頻信號;素材采集設(shè)備可以是攝像機，其可以將接收設(shè)備播放的音視頻拍攝下來;分析設(shè)備可以是個人電腦、平板電腦、服務(wù)器等，其可以對拍攝的音頻信號和視頻信號進行分析處理，并參照視頻信號的視頻畫面中的音頻波形圖分析接收到的音頻信號和視頻信號是否同步，最終實現(xiàn)對視頻即時通訊過程中的音視頻同步測試。
[0068]本實施例中，發(fā)送端和接收端的終端設(shè)備分別可以由多個設(shè)備組成，完成各自獨立的功能，可以降低各設(shè)備之間的干擾，提高視頻即時通訊中音視頻同步的測試效率。
[0069]圖3是根據(jù)一示例性實施例示出的一種視頻即時通訊中測試音視頻同步的方法的流程圖，如圖3所示，視頻即時通訊中測試音視頻同步的方法用于圖1或圖2所示的視頻即時通訊中測試音視頻同步的系統(tǒng)中，包括以下步驟。
[0070]在步驟101中，發(fā)送端的終端設(shè)備根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將第一音頻波形圖顯示在測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號；
[0071]該步驟中的發(fā)送端的設(shè)備可以是圖1所示系統(tǒng)中的發(fā)送端設(shè)備，也可以是圖2所示系統(tǒng)中的素材播放設(shè)備。測試素材可以是任意包含音頻和視頻的音視頻文件，用戶可以在測試之前預(yù)先準備好該音視頻文件。發(fā)送端的終端設(shè)備采用預(yù)設(shè)規(guī)則將測試素材的第一音頻信號形成第一音頻波形圖，預(yù)設(shè)規(guī)則例如可以是根據(jù)第一音頻信號的振幅、頻率等因素將其生成波形圖的方式。由于音視頻播放過程中，視頻信號是由一幀一幀有時序的圖像組成，相應(yīng)的每幀圖像也有對應(yīng)的音頻信號，因此發(fā)送端的終端設(shè)備可以選擇以多幀圖像為周期，在連續(xù)多幀圖像對應(yīng)的畫面上顯示該多幀圖像對應(yīng)的音頻信號的波形圖，多幀圖像例如可以選擇100幀圖像為周期，發(fā)送端的終端設(shè)備將每100幀圖像對應(yīng)的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，然后在每100幀圖像播放的過程中在其視頻畫面上顯示這100幀圖像對應(yīng)的第一音頻波形圖，這便形成了帶音頻波形的第二視頻信號。作為示例，圖4是待音頻波形的第二視頻信號的視頻畫面示意圖，其中第一音頻波形圖可以包括單色背景、坐標系以及音頻波形，為了區(qū)別背景和音頻波形，盡量選擇色差較大的兩種顏色顯示這兩個部分，例如背景選擇黑色，音頻波形選擇紅色?？蛇x的，由于音視頻在傳輸過程中可能會降低圖像質(zhì)量，而太低的圖像質(zhì)量會影響接收端的終端設(shè)備的分析結(jié)果，因此可以將音頻波形繪制成條形圖、柱狀圖或分階方波圖的形式，只要其可以體現(xiàn)出第一音頻信號的音頻特性皆可。
[0072]在步驟102中，發(fā)送端的終端設(shè)備將第一音頻信號和第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備；
[0073]該步驟中的發(fā)送端的設(shè)備可以是圖1所示系統(tǒng)中的發(fā)送端設(shè)備，也可以是圖2所示系統(tǒng)中的發(fā)送設(shè)備，該發(fā)送端的終端設(shè)備具備通信功能，可以通過即時通訊軟件、即時通訊功能等與其他終端設(shè)備進行視頻即時通訊。發(fā)送端的終端設(shè)備將測試素材的第一音頻信號和帶音頻波形圖的第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備，該過程即為視頻即時通訊的過程，發(fā)送和接收雙方的終端設(shè)備對傳輸中的第一音頻信號和第二視頻信號經(jīng)過采集、處理、壓縮、傳輸、解壓縮、渲染等過程，并且對第一音頻信號和第二視頻信號是分別處理和傳輸?shù)摹?br>[0074]在步驟103中，接收端的終端設(shè)備播放接收到的音頻信號和視頻信號，同時對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，第三視頻信號包括顯示了第一音頻波形圖的視頻畫面；
[0075]該步驟中的接收端的設(shè)備可以是圖1所示系統(tǒng)中的接收端設(shè)備，也可以是圖2所示系統(tǒng)中的接收設(shè)備和素材采集設(shè)備的組合，該接收端的終端設(shè)備具備通信功能，可以通過即時通訊軟件、即時通訊功能等與其他終端設(shè)備進行視頻即時通訊，還具備音視頻播放和采集功能。接收端的終端設(shè)備接收到音頻信號和視頻信號后對其進行播放，同時可以借助自身的錄屏功能或高清的拍攝器材對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，該第三視頻信號的視頻畫面中顯示的正是發(fā)送端的終端設(shè)備形成的第一音頻波形圖。
[0076]在步驟104中，接收端的終端設(shè)備根據(jù)第二音頻信號和第三視頻信號中的第一音頻波形圖分析獲取在視頻即時通訊過程中音視頻的同步結(jié)果。
[0077]該步驟中的接收端的設(shè)備可以是圖1所示系統(tǒng)中的接收端設(shè)備，也可以是圖2所示系統(tǒng)中的分析設(shè)備，該接收端的終端設(shè)備具備圖像處理、信號處理等功能。接收端的終端設(shè)備將實際接收到的第二音頻信號與第三視頻信號中的第一音頻波形圖進行分析比較，可以知道第一音頻波形圖反應(yīng)出來的是在發(fā)送端測試素材的音頻信號的時序、音頻特征，而第二音頻信號反映的是在接收端實際獲取到的音頻信號的時序、音頻特征，通過對這二者進行分析比較，即可反應(yīng)出在視頻即時通訊的過程中音頻的變化情況，進而獲取到音視頻的同步結(jié)果。本公開中對測試素材無限制，可以是任何包含音頻和視頻的音視頻文件，且不改變原有音頻，無需對音頻進行預(yù)處理，在不影響視頻即時通訊的前提下獲取到高精度的同步測試結(jié)果，并且提高測試效率。
[0078]本實施例，通過在發(fā)送端的視頻畫面上顯示反映發(fā)送端的音頻信號的音頻時序、特性的音頻波形，并將該視頻畫面?zhèn)鬏斀o接收端，由接收端對實際接收的音頻信號和發(fā)送端的音頻信號進行分析比較，從而獲取視頻即時通訊過程中的音視頻同步結(jié)果，實現(xiàn)對視頻即時通訊性能的評估、輔助視頻引擎的開發(fā)與優(yōu)化等，具備高效率的測試效率，高精度的測試評估。
[0079]優(yōu)選的，上述步驟101中發(fā)送端的終端設(shè)備將第一音頻波形圖顯示在測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號，可以是發(fā)送端的終端設(shè)備根據(jù)第一音頻信號與第一視頻信號的時序?qū)?yīng)關(guān)系，將第一音頻波形圖顯示在第一視頻信號的視頻畫面上形成第二視頻信號。
[0080]由于音視頻播放過程中，視頻信號是由一幀一幀有時序的圖像組成，相應(yīng)的每幀圖像也有對應(yīng)的音頻信號，因此發(fā)送端的終端設(shè)備可以第一音頻信號與第一視頻信號的時序?qū)?yīng)關(guān)系，在視頻畫面上顯示由第一音頻信號形成的第一音頻波形圖，這樣在視頻畫面上直觀的反映出了對應(yīng)時間范圍內(nèi)的音頻波形變化情況。例如圖4所示，在該截屏的視頻畫面上顯示的這一段波形圖，可以認為是當(dāng)前視頻畫面所屬的一端時間范圍內(nèi)的音頻波形圖，通過在視頻畫面上顯示第一音頻波形圖顯示出了在發(fā)送端音頻信號和視頻信號的同步情況。
[0081]本實施例，通過根據(jù)第一音頻信號與第一視頻信號的時序?qū)?yīng)關(guān)系，將第一音頻波形圖顯示在第一視頻信號的視頻畫面上形成第二視頻信號，將音頻信號和視頻信號之間的同步情況直觀的反映在視頻畫面上，提高同步測試的準確度，簡化測試過程。
[0082]進一步的，上述步驟104中接收端的終端設(shè)備的分析過程可以是接收端的終端設(shè)備根據(jù)第二音頻信號采用預(yù)設(shè)規(guī)則形成第二音頻波形圖；分析比較第二音頻波形圖和第一音頻波形圖獲取同步結(jié)果。
[0083]接收端的終端設(shè)備在采集到第二音頻信號和第三視頻信號后，可以以同樣的預(yù)設(shè)規(guī)則將第二音頻信號形成第二音頻波形圖，再根據(jù)第二音頻信號與第三視頻信號的時序?qū)?yīng)關(guān)系，將第二音頻波形圖顯示在第三視頻信號的視頻畫面上，此時第三視頻信號的視頻畫面上便出現(xiàn)了兩個音頻波形圖，一個是發(fā)送端就已經(jīng)顯示的第一音頻波形圖，另一個就是在接收端根據(jù)第二音頻信號形成的第二音頻波形圖。由于接收端的終端設(shè)備形成第二音頻波形圖也是根據(jù)第二音頻信號與第三視頻信號的時序?qū)?yīng)關(guān)系的，因此在視頻畫面上的同一幀圖像對象的音頻波形圖應(yīng)該是同一時間范圍內(nèi)的音頻信號形成的，此時分析比較第二音頻波形圖和第一音頻波形圖的重合度即可獲取同步結(jié)果。
[0084]本實施例，通過在采集的第三視頻信號的視頻畫面上根據(jù)第二音頻信號形成并顯示第二音頻波形圖，并對視頻畫面上的兩個音頻波形圖進行重合度的比較，可以直觀的獲取到音視頻的同步結(jié)果，提高測試效率。
[0085]進一步的，上述步驟104中接收端的終端設(shè)備的分析過程可以是接收端的終端設(shè)備根據(jù)第一音頻波形圖采樣獲取第一音頻特征信息，再根據(jù)第二音頻信號采集獲取第二音頻特征信息，最后通過信號處理分析比較第一音頻特征信息和第二音頻特征信息獲取同步結(jié)果。
[0086]接收端的終端設(shè)備可以根據(jù)對第三視頻信號的視頻畫面中的第一音頻波形圖進行采樣，獲取到與該第一音頻波形圖對應(yīng)的第一音頻特征信息，例如音頻時序、音頻特性等，再根據(jù)接收端實際接收到的第二音頻信號采集該第二音頻信號對應(yīng)的第二音頻特征信息，同樣例如音頻時序、音頻特性等，接收端的終端設(shè)備可以利用預(yù)先編寫的信號處理軟件或信號處理工具(MathLib)等方式比較第一音頻特征信息和第二音頻特征信息，得出二者的相似度、時間軸的位移等，從而獲取到音視頻同步結(jié)果。
[0087]本實施例，通過分別根據(jù)第二音頻信號和第一音頻波形圖得到二者分別對應(yīng)的音頻特征信息，再通過信號處理分析比較二者獲取音視頻的同步結(jié)果，可以直觀的獲取到音視頻的同步結(jié)果，提高測試效率。
[0088]圖5是根據(jù)一示例性實施例示出的一種終端設(shè)備框圖。參照圖5，該終端設(shè)備包括波形形成模塊11、圖像處理模塊12以及發(fā)送模塊13。
[0089]該波形形成模塊11，被配置為根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第 ^頻波形圖；
[0090]該圖像處理模塊12，被配置為將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號；
[0091]該發(fā)送模塊13，被配置為將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備。
[0092]關(guān)于上述實施例中的裝置，其中各個模塊執(zhí)行操作的具體方式已經(jīng)在有關(guān)該方法的實施例中進行了詳細描述，此處將不做詳細闡述說明。
[0093]進一步的，所述圖像處理模塊12，被配置為根據(jù)所述第一音頻信號與所述第一視頻信號的時序?qū)?yīng)關(guān)系，將所述第一音頻波形圖顯示在所述第一視頻信號的視頻畫面上形成所述第二視頻信號。
[0094]圖6是根據(jù)一示例性實施例示出的一種終端設(shè)備框圖。參照圖6，該終端設(shè)備包括播放模塊21、采集模塊22以及分析模塊23。
[0095]該播放模塊21，被配置為播放接收到的音頻信號和視頻信號；
[0096]該采集模塊22，被配置為對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面；
[0097]該分析模塊23，被配置為根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。
[0098]關(guān)于上述實施例中的裝置，其中各個模塊執(zhí)行操作的具體方式已經(jīng)在有關(guān)該方法的實施例中進行了詳細描述，此處將不做詳細闡述說明。
[0099]圖7是根據(jù)一示例性實施例示出的一種終端設(shè)備框圖。參照圖7，該終端設(shè)備在圖6所示框圖的基礎(chǔ)上，所述分析模塊23包括波形形成單元231和第一同步分析單元232;
[0100]所述波形形成單元231，被配置為根據(jù)所述第二音頻信號采用所述預(yù)設(shè)規(guī)則形成第二音頻波形圖；
[0101]所述第一同步分析單元232，被配置為分析比較所述第二音頻波形圖和所述第一音頻波形圖獲取所述同步結(jié)果。
[0102]關(guān)于上述實施例中的裝置，其中各個模塊執(zhí)行操作的具體方式已經(jīng)在有關(guān)該方法的實施例中進行了詳細描述，此處將不做詳細闡述說明。
[0103]進一步的，所述第一同步分析單元232，被配置為根據(jù)所述第二音頻信號與所述第三視頻信號的時序?qū)?yīng)關(guān)系，將所述第二音頻波形圖顯示在所述第三視頻信號的視頻畫面上;分析比較所述第二音頻波形圖和所述第一音頻波形圖的重合度獲取所述同步結(jié)果。
[0104]圖8是根據(jù)一示例性實施例示出的一種終端設(shè)備框圖。參照圖8，該終端設(shè)備在圖6所示框圖的基礎(chǔ)上，所述分析模塊23包括采樣單元233、采集單元234以及第二同步分析單元235;
[0105]所述采樣單元233，被配置為根據(jù)所述第一音頻波形圖采樣獲取第一音頻特征信息;
[0106]所述采集單元234，被配置為根據(jù)所述第二音頻信號采集獲取第二音頻特征信息；
[0107]所述第二同步分析單元235，被配置為通過信號處理分析比較所述第一音頻特征信息和所述第二音頻特征信息獲取所述同步結(jié)果。
[0108]關(guān)于上述實施例中的裝置，其中各個模塊執(zhí)行操作的具體方式已經(jīng)在有關(guān)該方法的實施例中進行了詳細描述，此處將不做詳細闡述說明。
[0109]圖9是根據(jù)一示例性實施例示出的一種終端設(shè)備的框圖。例如，終端設(shè)備可以是移動電話，消息收發(fā)設(shè)備，平板設(shè)備，個人數(shù)字助理等。
[0110]參照圖9，終端設(shè)備可以包括以下一個或多個組件:處理組件802，存儲器804，電力組件806，多媒體組件808，音頻組件810，輸入/輸出(input/output，簡稱:I/O)的接口 812，傳感器組件814，以及通信組件816。
[0111]處理組件802通?？刂平K端設(shè)備的整體操作，諸如與顯示，電話呼叫，數(shù)據(jù)通信，相機操作和記錄操作相關(guān)聯(lián)的操作。處理組件802可以包括一個或多個處理器820來執(zhí)行指令，以完成上述的方法的全部或部分步驟。此外，處理組件802可以包括一個或多個模塊，便于處理組件802和其他組件之間的交互。例如，處理組件802可以包括多媒體模塊，以方便多媒體組件808和處理組件802之間的交互。
[0112]存儲器804被配置為存儲各種類型的數(shù)據(jù)以支持在終端設(shè)備的操作。這些數(shù)據(jù)的示例包括用于在終端設(shè)備上操作的任何應(yīng)用程序或方法的指令，聯(lián)系人數(shù)據(jù)，電話簿數(shù)據(jù)，消息，圖片，視頻等。存儲器804可以由任何類型的易失性或非易失性存儲設(shè)備或者它們的組合實現(xiàn)，如靜態(tài)隨機存取存儲器(Static Random Access Memory，簡稱:SRAM)，電可擦除可編程只讀存儲器(Electrically Erasable Programmable Read-Only Memory，簡稱:EEPR0M)，可擦除可編程只讀存儲器(Erasable Programmable Read Only Memory，簡稱:EPR0M)，可編程只讀存儲器(Programmable Red-Only Memory，簡稱:PROM)，只讀存儲器(Read-Only Memory，簡稱:ROM)，磁存儲器，快閃存儲器，磁盤或光盤。
[0113]電力組件806為終端設(shè)備的各種組件提供電力。電力組件806可以包括電源管理系統(tǒng)，一個或多個電源，及其他與為終端設(shè)備生成、管理和分配電力相關(guān)聯(lián)的組件。
[0114]多媒體組件808包括在所述終端設(shè)備和用戶之間的提供一個輸出接口的屏幕。在一些實施例中，屏幕可以包括液晶顯示器(Liquid Crystal Display，簡稱:1XD)和觸摸面板(TouchPaneI，簡稱:TP)。如果屏幕包括觸摸面板，屏幕可以被實現(xiàn)為觸摸屏，以接收來自用戶的輸入信號。觸摸面板包括一個或多個觸摸傳感器以感測觸摸、滑動和觸摸面板上的手勢。所述觸摸傳感器可以不僅感測觸摸或滑動動作的邊界，而且還檢測與所述觸摸或滑動操作相關(guān)的持續(xù)時間和壓力。在一些實施例中，多媒體組件808包括一個前置攝像頭和/或后置攝像頭。當(dāng)終端設(shè)備處于操作模式，如拍攝模式或視頻模式時，前置攝像頭和/或后置攝像頭可以接收外部的多媒體數(shù)據(jù)。每個前置攝像頭和后置攝像頭可以是一個固定的光學(xué)透鏡系統(tǒng)或具有焦距和光學(xué)變焦能力。
[0115]音頻組件810被配置為輸出和/或輸入音頻信號。例如，音頻組件810包括一個麥克風(fēng)(Microphone，簡稱:MIC)，當(dāng)終端設(shè)備處于操作模式，如呼叫模式、記錄模式和語音識別模式時，麥克風(fēng)被配置為接收外部音頻信號。所接收的音頻信號可以被進一步存儲在存儲器804或經(jīng)由通信組件816發(fā)送。在一些實施例中，音頻組件810還包括一個揚聲器，用于輸出音頻信號。
[0116]I/o接口812為處理組件802和外圍接口模塊之間提供接口，上述外圍接口模塊可以是鍵盤，點擊輪，按鈕等。這些按鈕可包括但不限于:主頁按鈕、音量按鈕、啟動按鈕和鎖定按鈕。
[0117]傳感器組件814包括一個或多個傳感器，用于為終端設(shè)備提供各個方面的狀態(tài)評估。例如，傳感器組件814可以檢測到終端設(shè)備的打開/關(guān)閉狀態(tài)，組件的相對定位，例如所述組件為終端設(shè)備的顯示器和小鍵盤，傳感器組件814還可以檢測終端設(shè)備或終端設(shè)備一個組件的位置改變，用戶與終端設(shè)備接觸的存在或不存在，終端設(shè)備方位或加速/減速和終端設(shè)備的溫度變化。傳感器組件814可以包括接近傳感器，被配置用來在沒有任何的物理接觸時檢測附近物體的存在。傳感器組件814還可以包括光傳感器，如互補金屬氧化物半導(dǎo)體(Complementary Metal Oxide Semiconductor，簡稱:CMOS)或電荷親合元件(Charge-coupled Device，簡稱:CCD)圖像傳感器，用于在成像應(yīng)用中使用。在一些實施例中，該傳感器組件814還可以包括加速度傳感器，陀螺儀傳感器，磁傳感器，壓力傳感器或溫度傳感器。
[0118]通信組件816被配置為便于終端設(shè)備和其他設(shè)備之間有線或無線方式的通信。終端設(shè)備可以接入基于通信標準的無線網(wǎng)絡(luò)，如無線保真(WIreless-Fidelity，簡稱:WiFi)，2G或3G，或它們的組合。在一個示例性實施例中，通信組件816經(jīng)由廣播信道接收來自外部廣播管理系統(tǒng)的廣播信號或廣播相關(guān)信息。在一個示例性實施例中，所述通信組件816還包括近場通信(Near Field Communicat1n，簡稱:NFC)模塊，以促進短程通信。例如，在NFC模塊可基于射頻識別(Rad1 Frequency Identificat1n，簡稱:RFID)技術(shù)，紅外數(shù)據(jù)協(xié)會(Infrared Data Associat1n，簡稱:IrDA)技術(shù)，超寬帶(Ultra Wideband，簡稱:UWB)技術(shù)，藍牙(Bluetooth，簡稱:BT)技術(shù)和其他技術(shù)來實現(xiàn)。
[0119]在示例性實施例中，終端設(shè)備可以被一個或多個應(yīng)用專用集成電路(Applicat1nSpecific Integrated Circuit，簡稱:ASIC)、數(shù)字信號處理器(Ddigital SignalProcessor，簡稱:DSP)、數(shù)字信號處理設(shè)備(Digital Signal Processing Device，簡稱:DSPD)、可編程邏輯器件(Programmable Logic Device，簡稱:PLD)、現(xiàn)場可編程門陣列(Field Programmable Gate Array，簡稱:FPGA)、控制器、微控制器、微處理器或其他電子元件實現(xiàn)，用于執(zhí)行上述方法。
[0120]在示例性實施例中，還提供了一種包括指令的非臨時性計算機可讀存儲介質(zhì)，例如包括指令的存儲器804，上述指令可由終端設(shè)備的處理器820執(zhí)行以完成上述方法。例如，所述非臨時性計算機可讀存儲介質(zhì)可以是ROM、隨機存取存儲器(Random Access Memory,簡稱:RAM)、只讀光盤(Compact Disc Read-Only Memory，簡稱:CD-ROM)、磁帶、軟盤和光數(shù)據(jù)存儲設(shè)備等。
[0121]一種非臨時性計算機可讀存儲介質(zhì)，當(dāng)所述存儲介質(zhì)中的指令由圖9所示終端設(shè)備的處理器執(zhí)行時，使得終端設(shè)備能夠執(zhí)行一種視頻即時通訊中測試音視頻同步的方法，所述方法包括:終端設(shè)備根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號;所述終端設(shè)備將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備。
[0122]圖9所示的終端設(shè)備的框圖即可以用作發(fā)送端的終端設(shè)備，也可以用作接收端的終端設(shè)備，在作為接收端的終端設(shè)備時，與上述區(qū)別在于:一種非臨時性計算機可讀存儲介質(zhì)，當(dāng)所述存儲介質(zhì)中的指令由終端設(shè)備的處理器執(zhí)行時，使得終端設(shè)備能夠執(zhí)行一種視頻即時通訊中測試音視頻同步的方法，所述方法包括:終端設(shè)備播放接收到的音頻信號和視頻信號，同時對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面;所述終端設(shè)備根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。
[0123]本領(lǐng)域技術(shù)人員在考慮說明書及實踐這里公開的發(fā)明后，將容易想到本發(fā)明的其它實施方案。本申請旨在涵蓋本發(fā)明的任何變型、用途或者適應(yīng)性變化，這些變型、用途或者適應(yīng)性變化遵循本發(fā)明的一般性原理并包括本公開未公開的本技術(shù)領(lǐng)域中的公知常識或慣用技術(shù)手段。說明書和實施例僅被視為示例性的，本發(fā)明的真正范圍和精神由下面的權(quán)利要求指出。
[0124]應(yīng)當(dāng)理解的是，本發(fā)明并不局限于上面已經(jīng)描述并在附圖中示出的精確結(jié)構(gòu)，并且可以在不脫離其范圍進行各種修改和改變。本發(fā)明的范圍僅由所附的權(quán)利要求來限制。
【主權(quán)項】
1.一種視頻即時通訊中測試音視頻同步的方法，其特征在于，包括: 發(fā)送端的終端設(shè)備根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號； 所述發(fā)送端的終端設(shè)備將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備； 所述接收端的終端設(shè)備播放接收到的音頻信號和視頻信號，同時對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面； 所述接收端的終端設(shè)備根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述發(fā)送端的終端設(shè)備將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號，包括: 所述發(fā)送端的終端設(shè)備根據(jù)所述第一音頻信號與所述第一視頻信號的時序?qū)?yīng)關(guān)系，將所述第一音頻波形圖顯示在所述第一視頻信號的視頻畫面上形成所述第二視頻信號。3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述接收端的終端設(shè)備根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果，包括: 所述接收端的終端設(shè)備根據(jù)所述第二音頻信號采用所述預(yù)設(shè)規(guī)則形成第二音頻波形圖； 所述接收端的終端設(shè)備分析比較所述第二音頻波形圖和所述第一音頻波形圖獲取所述同步結(jié)果。4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述接收端的終端設(shè)備分析比較所述第二音頻波形圖和所述第一音頻波形圖獲取所述同步結(jié)果，包括: 所述接收端的終端設(shè)備根據(jù)所述第二音頻信號與所述第三視頻信號的時序?qū)?yīng)關(guān)系，將所述第二音頻波形圖顯示在所述第三視頻信號的視頻畫面上； 所述接收端的終端設(shè)備分析比較所述第二音頻波形圖和所述第一音頻波形圖的重合度獲取所述同步結(jié)果。5.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述接收端的終端設(shè)備根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果，包括: 所述接收端的終端設(shè)備根據(jù)所述第一音頻波形圖采樣獲取第一音頻特征信息； 所述接收端的終端設(shè)備根據(jù)所述第二音頻信號采集獲取第二音頻特征信息； 所述接收端的終端設(shè)備通過信號處理分析比較所述第一音頻特征信息和所述第二音頻特征信息獲取所述同步結(jié)果。6.一種終端設(shè)備，其特征在于，包括: 波形形成模塊，被配置為根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖； 圖像處理模塊，被配置為將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號； 發(fā)送模塊，被配置為將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備。7.根據(jù)權(quán)利要求6所述的終端設(shè)備，其特征在于，所述圖像處理模塊，被配置為根據(jù)所述第一音頻信號與所述第一視頻信號的時序?qū)?yīng)關(guān)系，將所述第一音頻波形圖顯示在所述第一視頻信號的視頻畫面上形成所述第二視頻信號。8.一種終端設(shè)備，其特征在于，包括: 播放模塊，被配置為播放接收到的音頻信號和視頻信號； 采集模塊，被配置為對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面； 分析模塊，被配置為根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。9.根據(jù)權(quán)利要求8所述的終端設(shè)備，其特征在于，所述分析模塊包括:波形形成單元和第一同步分析單元； 所述波形形成單元，被配置為根據(jù)所述第二音頻信號采用所述預(yù)設(shè)規(guī)則形成第二音頻波形圖； 所述第一同步分析單元，被配置為分析比較所述第二音頻波形圖和所述第一音頻波形圖獲取所述同步結(jié)果。10.根據(jù)權(quán)利要求9所述的終端設(shè)備，其特征在于，所述第一同步分析單元，被配置為根據(jù)所述第二音頻信號與所述第三視頻信號的時序?qū)?yīng)關(guān)系，將所述第二音頻波形圖顯示在所述第三視頻信號的視頻畫面上;分析比較所述第二音頻波形圖和所述第一音頻波形圖的重合度獲取所述同步結(jié)果。11.根據(jù)權(quán)利要求8所述的終端設(shè)備，其特征在于，所述分析模塊包括:采樣單元、采集單元以及第二同步分析單元； 所述采樣單元，被配置為根據(jù)所述第一音頻波形圖采樣獲取第一音頻特征信息； 所述采集單元，被配置為根據(jù)所述第二音頻信號采集獲取第二音頻特征信息； 所述第二同步分析單元，被配置為通過信號處理分析比較所述第一音頻特征信息和所述第二音頻特征信息獲取所述同步結(jié)果。12.一種終端設(shè)備，其特征在于，包括:處理器和用于存儲處理器可執(zhí)行指令的存儲器； 其中，所述處理器被配置為執(zhí)行所述可執(zhí)行指令，以執(zhí)行根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號;將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給接收端的終端設(shè)備。13.一種終端設(shè)備，其特征在于，包括:處理器和用于存儲處理器可執(zhí)行指令的存儲器； 其中，所述處理器被配置為執(zhí)行所述可執(zhí)行指令，以執(zhí)行播放接收到的音頻信號和視頻信號，同時對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面;根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。14.一種視頻即時通訊中測試音視頻同步的系統(tǒng)，其特征在于，包括:素材播放設(shè)備、發(fā)送設(shè)備、接收設(shè)備、素材采集設(shè)備以及分析設(shè)備;其中， 所述素材播放設(shè)備，被配置為根據(jù)測試素材的第一音頻信號采用預(yù)設(shè)規(guī)則形成第一音頻波形圖，并將所述第一音頻波形圖顯示在所述測試素材的第一視頻信號的視頻畫面上形成帶音頻波形的第二視頻信號； 所述發(fā)送設(shè)備，被配置為將所述第一音頻信號和所述第二視頻信號通過視頻即時通訊方式發(fā)送給所述接收設(shè)備； 所述接收設(shè)備，被配置為播放接收到的音頻信號和視頻信號； 所述素材采集設(shè)備，被配置為對播放中的音頻信號和視頻信號進行采集形成第二音頻信號和第三視頻信號，所述第三視頻信號包括顯示了所述第一音頻波形圖的視頻畫面；所述分析設(shè)備，被配置為根據(jù)所述第二音頻信號和所述第三視頻信號中的所述第一音頻波形圖分析獲取在所述視頻即時通訊過程中音視頻的同步結(jié)果。
【文檔編號】H04N21/4788GK105898505SQ201610269461
【公開日】2016年8月24日
【申請日】2016年4月27日
【發(fā)明人】李濱, 張亞勇, 董欣
【申請人】北京小米移動軟件有限公司