本公開涉及直播技術(shù)領(lǐng)域,尤其涉及一種基于直播連麥的直播方法及直播裝置。
背景技術(shù):
目前,直播技術(shù)正處于蓬勃發(fā)展的時期。在直播業(yè)務(wù)中,最初的業(yè)務(wù)形態(tài)為單相視頻展示,即觀眾只能單向觀看主播的直播,后來逐漸發(fā)展為觀眾可以通過文字、彈幕的形式與主播互動。如今,為進一步提高互動體驗,產(chǎn)生了一種直播連麥業(yè)務(wù),即主播可以通過主播終端與直播連麥者的終端(也稱為接入終端)建立連麥會話連接,在建立連麥會話連接之后,主播可以與直播連麥者進行雙向的音視頻互動,而觀眾可以觀看該主播與該直播連麥者的音視頻互動過程。其中,該直播連麥者可以為該主播所在直播間內(nèi)的特定觀眾,也可以為其他直播間內(nèi)的主播。
相關(guān)技術(shù)中,在基于直播連麥業(yè)務(wù)進行直播的過程中,主播終端可以獲取自身采集的主播的直播畫面,也即是第一直播畫面,并從直播服務(wù)器獲取接入終端采集的直播連麥者的直播畫面,也即是第二直播畫面,而且所獲取的第二直播畫面的顯示方向通常維持不變。之后主播終端即可在第二直播畫面的顯示方向維持不變的情況下,將該第一直播畫面和該第二直播畫面進行合成,得到合成直播畫面,并基于該合成直播畫面進行直播。當觀眾終端接收到該合成直播畫面時,觀眾即可基于顯示的合成直播畫面觀看到該主播和該直播連麥者的互動過程。比如,觀眾終端顯示的合成直播畫面可以是一個分屏畫面,該分屏畫面的左半部分為該主播的直播畫面,右半部分為該直播連麥者的直播畫面。
但是當接入終端為移動終端時,該接入終端將可能會在豎屏模式和橫屏模式之間來回切換,導致第二直播畫面的畫面方向發(fā)生變化。當?shù)诙辈ギ嬅娴漠嬅娣较虬l(fā)生變化后,若仍按照第二直播畫面的原有顯示方向進行畫面合成,則可能會導致合成直播畫面中第二直播畫面的畫面方向不是端正的,比如畫面方向可能是朝左或朝右的,甚至可能是倒置的,從而影響直播效果。
技術(shù)實現(xiàn)要素:
為克服相關(guān)技術(shù)中存在的在基于直播連麥業(yè)務(wù)進行直播的過程中,主播終端所直播的合成直播畫面無法維持端正,從而影響直播效果問題,本公開提供了一種基于直播連麥的直播方法及裝置。所述技術(shù)方案如下:
根據(jù)本公開實施例的第一方面,提供了一種基于直播連麥的直播方法,所述方法包括:
獲取主播終端采集的第一直播畫面,并獲取接入終端采集的第二直播畫面和所述接入終端的重力感應信息,所述接入終端為與所述主播終端進行直播連麥的直播終端,所述接入終端的重力感應信息用于指示所述接入終端在采集所述第二直播畫面時相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
基于所述接入終端的重力感應信息對所述第二直播畫面的畫面方向進行調(diào)整,以將所述第二直播畫面的畫面方向調(diào)整端正;
根據(jù)所述第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,所述合成直播畫面用于進行直播。
可選地,所述方法還包括:
獲取所述主播終端的重力感應信息;
按照基于所述接入終端的重力感應信息對所述第二直播畫面的畫面方向進行調(diào)整的方式,基于所述主播終端的重力感應信息對所述第一直播畫面的畫面方向進行調(diào)整,以將所述第一直播畫面的畫面方向調(diào)整端正;
所述根據(jù)所述第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,包括:
將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到所述合成直播畫面。
可選地,所述基于所述接入終端的重力感應信息對所述第二直播畫面的畫面方向進行調(diào)整,包括:
基于所述接入終端的重力感應信息確定所述接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
將所述第二直播畫面按照所述傾斜方向翻轉(zhuǎn)所述傾斜角度。
可選地,所述基于所述接入終端的重力感應信息對所述第二直播畫面的畫面方向進行調(diào)整,包括:
基于所述接入終端的重力感應信息確定所述接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
基于所述傾斜方向和傾斜角度確定所述接入終端的直播姿勢,所述直播姿勢包括左橫屏、右橫屏、第一豎屏和第二豎屏中的至少一種,所述第一豎屏是指所述接入終端的頂端朝上時的豎屏狀態(tài),所述第二豎屏是指所述接入終端的頂端朝下時的豎屏狀態(tài);
基于所述直播姿勢對所述第二直播畫面的畫面方向進行調(diào)整。
可選地,所述基于所述直播姿勢對所述第二直播畫面的畫面方向進行調(diào)整,包括以下方式中的至少一種:
當基于所述接入終端的重力感應信息確定所述接入終端的直播姿勢為左橫屏時,將所述第二直播畫面向左翻轉(zhuǎn)90度;
當基于所述接入終端的重力感應信息確定所述接入終端的直播姿勢為右橫屏時,將所述第二直播畫面向右翻轉(zhuǎn)90度;
當基于所述接入終端的重力方向信息確定所述接入終端的直播姿勢為第二豎屏時,將所述第二直播畫面翻轉(zhuǎn)180度。
根據(jù)本公開實施例的第二方面,提供了一種基于直播連麥的直播裝置,所述直播裝置包括:
第一獲取模塊,用于獲取主播終端采集的第一直播畫面,并獲取接入終端采集的第二直播畫面和所述接入終端的重力感應信息,所述接入終端為與所述主播終端進行直播連麥的直播終端,所述接入終端的重力感應信息用于指示所述接入終端在采集所述第二直播畫面時相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
第一調(diào)整模塊,用于基于所述接入終端的重力感應信息對所述第二直播畫面的畫面方向進行調(diào)整,以將所述第二直播畫面的畫面方向調(diào)整端正;
第二獲取模塊,用于根據(jù)所述第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,所述合成直播畫面用于進行直播。
可選地,所述裝置還包括:
第三獲取模塊,用于獲取所述主播終端的重力感應信息;
第二調(diào)整模塊,用于按照基于所述接入終端的重力感應信息對所述第二直播畫面的畫面方向進行調(diào)整的方式,基于所述主播終端的重力感應信息對所述第一直播畫面的畫面方向進行調(diào)整,以將所述第一直播畫面的畫面方向調(diào)整端正;
所述第二獲取模塊,用于將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到所述合成直播畫面。
可選地,所述第一調(diào)整模塊包括:
第一確定子模塊,用于基于所述接入終端的重力感應信息確定所述接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
第一調(diào)整子模塊,用于將所述第二直播畫面按照所述傾斜方向翻轉(zhuǎn)所述傾斜角度。
可選地,所述第一調(diào)整模塊包括:
第二確定子模塊,用于基于所述接入終端的重力感應信息確定所述接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
第三確定子模塊,用于基于所述傾斜方向和傾斜角度確定所述接入終端的直播姿勢,所述直播姿勢包括左橫屏、右橫屏、第一豎屏和第二豎屏中的至少一種,所述第一豎屏是指所述接入終端的頂端朝上時的豎屏狀態(tài),所述第二豎屏是指所述接入終端的頂端朝下時的豎屏狀態(tài);
第二調(diào)整子模塊,用于基于所述直播姿勢對所述第二直播畫面的畫面方向進行調(diào)整。
可選地,所述第二調(diào)整子模塊用于執(zhí)行以下方式中的至少一種:
當基于所述接入終端的重力感應信息確定所述接入終端的直播姿勢為左橫屏時,將所述第二直播畫面向左翻轉(zhuǎn)90度;
當基于所述接入終端的重力感應信息確定所述接入終端的直播姿勢為右橫屏時,將所述第二直播畫面向右翻轉(zhuǎn)90度;
當基于所述接入終端的重力方向信息確定所述接入終端的直播姿勢為第二豎屏時,將所述第二直播畫面翻轉(zhuǎn)180度。
根據(jù)本公開實施例的第三方面,提供了一種基于直播連麥的直播裝置,所述直播裝置包括:
處理器;
用于存儲所述處理器可執(zhí)行指令的存儲器;
其中,所述處理器用于:
獲取主播終端采集的第一直播畫面,并獲取接入終端采集的第二直播畫面和所述接入終端的重力感應信息,所述接入終端為與所述主播終端進行直播連麥的直播終端,所述接入終端的重力感應信息用于指示所述接入終端在采集所述第二直播畫面時相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
基于所述接入終端的重力感應信息對所述第二直播畫面的畫面方向進行調(diào)整,以將所述第二直播畫面的畫面方向調(diào)整端正;
根據(jù)所述第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,所述合成直播畫面用于進行直播。
本公開的實施例提供的技術(shù)方案可以包括以下有益效果:本公開實施例中,在主播終端與接入終端進行直播連麥的過程中,除獲取接入終端的第二直播畫面之外,還可以獲取接入終端的重力感應信息,并可以根據(jù)接入終端的重力感應信息對第二直播畫面的畫面方向進行調(diào)整,使得第二直播畫面的畫面方向保持端正。由于第二直播畫面的畫面方向在調(diào)整后可以保持端正,因此根據(jù)主播終端的第一直播畫面和調(diào)整后的第二直播畫面獲取的合成直播畫面也可以保持端正,從而解決了基于直播連麥進行直播的過程中主播終端所直播的合成直播畫面無法維持端正的問題,優(yōu)化了直播效果。
應當理解的是,以上的一般描述和后文的細節(jié)描述僅是示例性和解釋性的,并不能限制本公開。
附圖說明
此處的附圖被并入說明書中并構(gòu)成本說明書的一部分,示出了符合本公開的實施例,并與說明書一起用于解釋本公開的原理。
圖1a是根據(jù)一示例性實施例示出的一種直播連麥的直播系統(tǒng)示意圖;
圖1b是根據(jù)一示例性實施例示出的一種第二直播畫面的示意圖;
圖1c是根據(jù)一示例性實施例示出的一種合成直播畫面的示意圖;
圖1d是根據(jù)一示例性實施例示出的一種基于直播連麥的直播方法的流程圖;
圖2是根據(jù)另一示例性實施例示出的一種基于直播連麥的直播方法的流程圖;
圖3a是根據(jù)又一示例性實施例示出的一種基于直播連麥的直播方法的流程圖;
圖3b是根據(jù)一示例性實施例示出的一種重力傳感器檢測原理示意圖;
圖3c是根據(jù)一示例性實施例示出的一種第二直播畫面的調(diào)整示意圖;
圖3d是根據(jù)另一示例性實施例示出的一種第二直播畫面的調(diào)整示意圖;
圖3e是根據(jù)又一示例性實施例示出的一種第二直播畫面的調(diào)整示意圖;
圖3f是根據(jù)一示例性實施例示出的一種合成直播畫面的合成示意圖;
圖4是根據(jù)又一示例性實施例示出的一種基于直播連麥的直播方法的流程圖;
圖5a是根據(jù)一示例性實施例示出的一種基于直播連麥的直播裝置的框圖;
圖5b是根據(jù)另一示例性實施例示出的一種基于直播連麥的直播裝置的框圖;
圖5c是根據(jù)一示例性實施例示出的一種第一調(diào)整模塊520的結(jié)構(gòu)示意圖;
圖5d是根據(jù)另一示例性實施例示出的一種第一調(diào)整模塊520的結(jié)構(gòu)示意圖;
圖6是根據(jù)一示例性實施例示出的一種基于直播連麥的直播裝置600的硬件結(jié)構(gòu)示意圖;
圖7是根據(jù)另一示例性實施例示出的一種基于直播連麥的直播裝置700的硬件結(jié)構(gòu)示意圖。
具體實施方式
為使本公開的目的、技術(shù)方案和優(yōu)點更加清楚,下面將結(jié)合附圖對本公開實施方式作進一步地詳細描述。
在對本公開實施例進行詳細的解釋說明之前,先對本公開實施例的應用場景予以介紹。本公開實施例提供的方法應用于直播連麥的直播場景中,具體可以應用于主播與某一觀眾進行直播連麥的場景中,或者應用于主播與其他直播間內(nèi)的主播進行直播連麥的場景中等。比如,主播可以與某一觀眾進行直播連麥,從而與該觀眾進行互動;或者主播可以在玩游戲的過程中,通過與另一主播進行直播連麥向另一主播分享游戲畫面,以便另一主播對該游戲畫面進行解說等等。
圖1a是根據(jù)一示例性實施例示出的一種直播連麥的直播系統(tǒng)示意圖,參見圖1a,該直播系統(tǒng)包括主播終端1、接入終端2和直播服務(wù)器3,接入終端2為與主播終端1進行直播連麥的直播終端。在基于直播連麥進行直播的過程中,接入終端2可以獲取采集的第二直播畫面,并將該第二直播畫面發(fā)送給直播服務(wù)器3。而主播終端1則可以獲取自身采集的第一直播畫面,并從直播服務(wù)器3中獲取接入終端2采集的第二直播畫面;將該第一直播畫面與該第二直播畫面進行合成,得到合成直播畫面;將該合成直播畫面發(fā)送給直播服務(wù)器3,由該直播服務(wù)器3轉(zhuǎn)發(fā)給觀眾終端,從而基于該合成直播畫面進行直播。
其中,主播終端1獲取的接入終端2的第二直播畫面的顯示方向通常維持不變,且通常為豎直顯示方向。但是當接入終端2為移動終端時,該接入終端2將可能會在豎屏模式和橫屏模式之間來回切換,導致產(chǎn)生的第二直播畫面的畫面方向發(fā)生變化。比如,如圖1b的左圖所示,當接入終端2為豎屏模式時,第二直播畫面的畫面方向?qū)⒇Q直朝上;如圖1b的右圖所示,當接入終端2由豎屏模式切換為左橫屏模式時,若顯示方向不變,則該第二直播畫面的畫面方向?qū)⑺匠?。相關(guān)技術(shù)中,當?shù)诙辈ギ嬅娴漠嬅娣较虬l(fā)生變化時,主播終端1將仍按照豎直顯示方向?qū)⒌诙辈ギ嬅媾c第一直播畫面進行合成,此時得到的合成直播畫面中的第二直播畫面的畫面方向?qū)⒖赡軣o法維持端正,即畫面方向可能會朝左或朝右,甚至可能會倒置,從而影響直播效果。比如,參見圖1c,直播的合成直播畫面中的左圖為第一直播畫面,右圖為第二直播畫面,但是第一直播畫面的畫面方向是豎直朝上的,而第二直播畫面的畫面方向卻是水平朝右的。
為了解決相關(guān)技術(shù)中存在的在基于直播連麥進行直播的過程中,主播終端所直播的合成直播畫面無法維持端正的問題,本公開實施例提供了一種基于直播連麥的直播方法,通過該方法可以優(yōu)化主播終端的合成算法,使得所直播的合成直播畫面一直保持端正,從而優(yōu)化直播效果。
圖1d是根據(jù)一示例性實施例示出的一種基于直播連麥的直播方法的流程圖,該方法應用于主播終端或直播服務(wù)器中,該主播終端可以為手機、平板電腦、計算機等終端。如圖1所示,該方法包括以下步驟:
在步驟101中,獲取主播終端采集的第一直播畫面,并獲取接入終端采集的第二直播畫面和該接入終端的重力感應信息,該接入終端為與該主播終端進行直播連麥的直播終端,該接入終端的重力感應信息用于指示該接入終端在采集該第二直播畫面時相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度。
在步驟102中,基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,以將該第二直播畫面的畫面方向調(diào)整端正。
在步驟103中,根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,該合成直播畫面用于進行直播。
本公開實施例中,在主播終端與接入終端進行直播連麥的過程中,除獲取接入終端的第二直播畫面之外,還可以獲取該接入終端的重力感應信息,并可以根據(jù)接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,以將該第二直播畫面的畫面方向調(diào)整端正。由于該第二直播畫面的畫面方向在調(diào)整后可以保持端正,因此根據(jù)主播終端的第一直播畫面和調(diào)整后的第二直播畫面獲取的合成直播畫面也可以保持端正,從而解決了基于直播連麥進行直播的過程中主播終端所直播的合成直播畫面無法維持端正的問題,優(yōu)化了直播效果。
可選地,該方法還包括:
獲取該主播終端的重力感應信息;
按照基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整的方式,基于該主播終端的重力感應信息對該第一直播畫面的畫面方向進行調(diào)整,以將該第一直播畫面的畫面方向調(diào)整端正;
該根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,包括:
將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到該合成直播畫面。
可選地,該基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,包括:
基于該接入終端的重力感應信息確定該接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
將該第二直播畫面按照該傾斜方向翻轉(zhuǎn)該傾斜角度。
可選地,該基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,包括:
基于該接入終端的重力感應信息確定該接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
基于該傾斜方向和傾斜角度確定該接入終端的直播姿勢,該直播姿勢包括左橫屏、右橫屏、第一豎屏和第二豎屏中的至少一種,該第一豎屏是指該接入終端的頂端朝上時的豎屏狀態(tài),該第二豎屏是指該接入終端的頂端朝下時的豎屏狀態(tài);
基于該直播姿勢對該第二直播畫面的畫面方向進行調(diào)整。
可選地,該基于該直播姿勢對該第二直播畫面的畫面方向進行調(diào)整,包括以下方式中的至少一種:
當基于該重力感應信息確定該接入終端的直播姿勢為左橫屏時,將該第二直播畫面向左翻轉(zhuǎn)90度;
當基于該重力感應信息確定該接入終端的直播姿勢為右橫屏時,將該第二直播畫面向右翻轉(zhuǎn)90度;
當基于該重力方向信息確定該接入終端的直播姿勢為第二豎屏時,將該第二直播畫面翻轉(zhuǎn)180度。
上述所有可選技術(shù)方案,均可按照任意結(jié)合形成本公開的可選實施例,本公開實施例對此不再一一贅述。
圖2是根據(jù)一示例性實施例示出的一種基于直播連麥的直播方法的流程圖,該方法應用于接入終端中,該接入終端可以為手機、平板電腦等移動終端。如圖2所示,該方法包括以下步驟:
在步驟201中,獲取采集的第二直播畫面和重力感應信息,該重力感應信息用于指示該接入終端在采集該第二直播畫面時相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度。
在步驟202中,將該第二直播畫面和該重力感應信息發(fā)送給直播服務(wù)器,由該直播服務(wù)器或者接收到該直播服務(wù)器所轉(zhuǎn)發(fā)的該第二直播畫面和該重力感應信息的主播終端,基于該重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,以將該第二直播畫面的畫面方向調(diào)整端正,并根據(jù)該主播終端的第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,該主播終端為與該接入終端進行直播連麥的直播終端。
本公開實施例中,接入終端在將采集的第二直播畫面發(fā)送給直播服務(wù)器之外,還可以獲取當前的重力感應信息,并將該重力感應信息發(fā)送給該直播服務(wù)器,以便該直播服務(wù)器或者主播終端基于該重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,使得該第二直播畫面的畫面方向保持端正,之后再根據(jù)主播終端的第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,如此可以保證主播終端所直播的合成直播畫面一直維持端正,從而優(yōu)化了直播效果。
可選地,該獲取重力感應信息,包括:
通過安裝的重力傳感器獲取該重力感應信息。
圖3a是根據(jù)一示例性實施例示出的一種基于直播連麥的直播方法的流程圖,該方法的交互主體為主播終端、接入終端和直播服務(wù)器。參見圖3a,該方法包括以下步驟:
在步驟301中,主播終端接收接入終端發(fā)送的直播連麥請求,并基于該直播連麥請求建立與該接入終端的連麥會話連接,以與該接入終端進行直播連麥。
其中,該主播終端可以在基于該直播連麥請求接收到確認連麥指令時,建立與該接入終端的連麥會話連接,該連麥會話連接用于支持該主播終端與該接入終端之間的直播連麥。也即是,當主播終端建立了與該接入終端的連麥會話連接時,即可與該接入終端進行直播連麥。
其中,該接入終端可以為該主播終端的觀眾終端,也可以為其他主播終端,本公開實施例對此不做限定。為了便于說明,接下來將該主播終端的用戶稱為主播,并將該接入終端的用戶稱為直播連麥者。
其中,該直播連麥請求可以由該接入終端的直播連麥者通過指定操作觸發(fā),比如該直播連麥者可以通過點擊主播所在直播間內(nèi)的連線按鈕觸發(fā)。該確認連麥指令可以由該主播通過指定操作觸發(fā),比如該主播可以通過點擊確認連接按鈕觸發(fā),該確認連接按鈕為該主播終端在接收到該接入終端發(fā)送的直播連麥請求時顯示。
以該接入終端為觀眾終端為例,觀眾通過觀眾終端進入主播所在的直播間后,該觀眾終端可以在直播頁面中顯示連線按鈕,當檢測對該連線按鈕的觸發(fā)操作時,即可向該主播終端發(fā)送直播連麥請求。而主播終端可以接收多個觀眾終端的直播連麥請求,并在直播間的特定窗口中顯示該多個觀眾終端登錄的觀眾賬號,主播可以基于該多個觀眾賬號選擇要連線的觀眾終端,并觸發(fā)主播終端建立與選擇的觀眾終端之間的連麥會話連接。
需要說明的是,本公開實施例僅是以主播終端通過接入終端發(fā)送的直播連麥請求與該接入終端進行直播連麥為例進行說明,而實際應用中,該主播終端也可以通過向接入終端發(fā)送直播連麥請求,從而與該接入終端進行直播連麥。比如,主播終端可以向選擇的任一觀眾終端發(fā)送直播連麥請求,當觀眾終端接收到該直播連麥請求,并基于該直播連麥請求接收到確認連麥指令時,即可成功建立與該主播終端的連麥會話連接,從而與該主播終端進行直播連麥。
在步驟302中,在與主播終端進行直播連麥的過程中,該接入終端獲取采集的第二直播畫面和重力感應信息,并將該第二直播畫面和該重力感應信息發(fā)送給直播服務(wù)器,該重力感應信息用于指示該接入終端在采集該第二直播畫面時相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度。
其中,該第二直播畫面是指該直播連麥者的直播畫面,該接入終端可以通過安裝的攝像頭采集該第二直播畫面。同時,該接入終端可以通過安裝的重力傳感器獲取本端的重力感應信息,當然也可以通過安裝的加速度傳感器、陀螺儀等其他傳感器獲取本端的重力感應信息,本公開實施例對此不做限定。
其中,該接入終端的重力感應信息可以指示該接入終端的重力加速度方向,根據(jù)該重力加速度方向可以確定該接入終端相對于水平狀態(tài)的傾斜方向和傾斜角度。該水平狀態(tài)是指該接入終端未發(fā)生傾斜時的狀態(tài),比如該水平狀態(tài)可以為該接入終端的頂端豎直朝上時的狀態(tài)。
比如,實際應用中,該接入終端的重力感應信息通常為該接入終端的重力加速度在預設(shè)坐標軸上的分量,按照預設(shè)算法將該重力加速度在預設(shè)坐標軸上的分量進行轉(zhuǎn)換,即可得到該接入終端相對于水平狀態(tài)的傾斜方向和傾斜角度。其中,重力加速度在預設(shè)坐標軸上的分量用于指示重力加速度方向。
以兩軸重力感應的重力傳感器為例,假設(shè)以該接入終端的頂端豎直朝上時的狀態(tài)作為該接入終端未發(fā)生傾斜的水平狀態(tài),則在獲取該接入終端的重力感應信息時,即可以該接入終端的指定點為中心建立如圖3b所示的平面直角坐標系,該平面直角坐標系以該接入終端頂端朝上的方向為y軸正方向,以水平向右的方向為x軸正方向。該重力傳感器的重力感應信息為重力加速度矢量,且靜止狀態(tài)下矢量方向永遠指向地心,矢量單位為1。該平面直角坐標系的x軸和y軸即為預設(shè)坐標軸。
當該接入終端保持如圖3b所示的豎直方向時,該接入終端的重力加速度方向為y軸負方向,重力感應信息為(0,-1),表示該接入終端的重力加速度在x軸的分量為0,在y軸上的分量為-1;當該接入終端從圖3b的位置倒置時,該接入終端的重力加速度方向?qū)閥軸正方向,重力感應信息為(0,1),表示該接入終端的重力加速度在x軸的分量為0,在y軸上的分量為1;當該接入終端從圖3b的位置向左翻轉(zhuǎn)90度時,該接入終端的重力加速度方向?qū)閤軸負方向,重力感應信息為(-1,0),表示該接入終端的重力加速度在x軸的分量為-1,在y軸上的分量為0;當該接入終端從圖3b的位置向右翻轉(zhuǎn)90度時,該接入終端的重力加速度方向?qū)閤軸正方向,重力感應信息為(1,0),表示該接入終端的重力加速度在x軸的分量為1,在y軸上的分量為0;當該接入終端從圖3b的位置傾斜45度時,該矢量單位1將會均勻分解到兩個軸上,也即是,該接入終端的重力加速度將會被均勻分解到x軸和y軸上。
由此可知,該矢量的重力感應信息即為該接入終端的重力加速度在預設(shè)坐標軸上的分量。按照直角三角函數(shù)定量,對該重力加速度在預設(shè)坐標軸上的分量進行角度換算,即可得出重力加速度方向相對于y軸負方向的傾斜方向和傾斜角度。之后,即可將該重力加速度方向相對于y軸負方向的傾斜方向的反方向確定為該接入終端相對于本端在水平狀態(tài)時的傾斜方向,并可以將該重力加速度方向相對于y軸負方向的傾斜角度確定為該接入終端相對于本端在水平狀態(tài)時的傾斜角度。
實際應用中,將該第二直播畫面和該重力感應信息發(fā)送給直播服務(wù)器可以包括以下兩種實現(xiàn)方式:
第一種實現(xiàn)方式:對該第二直播畫面進行編碼,得到壓縮碼流;對該壓縮碼流和該重力感應信息進行封裝,得到第一視頻流;將該第一視頻流發(fā)送給該直播服務(wù)器。
其中,除了對該壓縮碼流和該重力感應信息進行封裝之外,該接入終端還可以將該接入終端的音頻、結(jié)構(gòu)化描述符(如字幕)等不同屬性的信息與該壓縮碼流和該重力感應信息封裝到一起,得到該第一視頻流,本公開實施例對此不做限定。
通過將該第二直播畫面的壓縮碼流和該重力感應信息封裝到一起進行傳輸,能夠避免重力感應信息在傳輸過程中的丟失和傳輸?shù)牟煌?,提高傳輸?shù)臏蚀_性。
第二種實現(xiàn)方式:對該第二直播畫面進行編碼,得到壓縮碼流;對該壓縮碼流進行封裝,得到第二視頻流;將該第二視頻流和該重力感應信息一起發(fā)送給該直播服務(wù)器。
其中,除了對該壓縮碼流進行封裝之外,該接入終端還可以將該接入終端的音頻、結(jié)構(gòu)化描述符(如字幕)等不同屬性的信息與該壓縮碼流封裝到一起,得到該第二視頻流,本公開實施例對此不做限定。
其中,該接入終端可以按照直播系統(tǒng)的預設(shè)編碼協(xié)議進行編碼,并按照預設(shè)封裝協(xié)議進行封裝。也即是,該接入終端無需更改現(xiàn)有的封裝協(xié)議,僅需將得到的視頻流和該重力感應信息一起發(fā)送給該直播服務(wù)器即可,操作簡便,適應性較高。
在步驟303中,該主播終端獲取采集的第一直播畫面,并從該直播服務(wù)器獲取該接入終端采集的第二直播畫面和該接入終端的重力感應信息。
其中,該第一直播畫面為主播的直播畫面,可以為直接通過攝像頭采集得到的直播畫面。另外由于當該主播終端為移動終端時,該主播終端也具有橫豎屏模式自動切換功能,因此該第一直播畫面也可以為通過獲取的重力感應信息對攝像頭采集的畫面進行調(diào)整后得到的直播畫面,本公開實施例對此不做限定。
實際應用中,從該直播服務(wù)器獲取該接入終端的第二直播畫面和該接入終端的重力感應信息的方式可以包括以下兩種:
第一種實現(xiàn)方式,當接入終端向直播服務(wù)器發(fā)送的為上述第一視頻流時,該主播終端可以從該直播服務(wù)器中獲取該第一視頻流;對該第一視頻流進行解封裝,得到該壓縮碼流和該接入終端的重力感應信息;對該壓縮碼流進行解碼,得到該第二直播畫面。
第二種實現(xiàn)方式,當接入終端向直播服務(wù)器發(fā)送的為上述第二視頻流和重力感應信息時,該主播終端可以從該直播服務(wù)器中獲取該第二視頻流和該接入終端的重力感應信息;對該第二直播視頻流進行解封裝,得到該壓縮碼流;對該壓縮碼流進行解碼,得到該第二直播畫面。
在步驟304中,該主播終端基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整。
該主播終端可以基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,以將該第二直播畫面的畫面方向調(diào)整端正。該第二直播畫面的畫面方向是指該第二直播畫面的畫面內(nèi)容的整體朝向,將該第二直播畫面的畫面方向調(diào)整端正,也即是保證該第二直播畫面的畫面內(nèi)容的整體朝向符合觀看者的正視角度,而不會發(fā)生翻轉(zhuǎn)或倒置,比如保證人或物體的朝向均豎直向上。
其中,基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整可以包括以下兩種實現(xiàn)方式:
第一種實現(xiàn)方式:基于該接入終端的重力感應信息確定該接入終端相對于水平狀態(tài)的傾斜方向和傾斜角度;將該第二直播畫面按照該傾斜方向翻轉(zhuǎn)該傾斜角度。
其中,基于該接入終端的重力感應信息確定該接入終端相對于水平狀態(tài)的傾斜方向和傾斜角度的實現(xiàn)過程可以參考步驟302的相關(guān)描述,本公開實施例在此不再贅述。
比如,以該接入終端的頂端豎直朝上為水平狀態(tài)為例,當基于該重力感應信息確定該接入終端相對于水平狀態(tài)向左傾斜了30度時,由于視頻流中每一幀圖像的顯示方向都是固定的,因此該主播終端獲取的第二直播畫面將仍為豎直顯示方向,如圖3c中的左圖所示時。由圖3c中的左圖可知,該第二直播畫面的畫面方向向右傾斜了30度,為了使得該第二直播畫面的畫面方向能夠保持端正,則可以將該第二直播畫面向左傾斜30度,得到圖3c中的右圖。
在上述第一種實現(xiàn)方式中,由于可以按照接入終端的傾斜方向和傾斜角度對該第二直播畫面的畫面方向進行調(diào)整,因此相對于下述第二種實現(xiàn)方式來說調(diào)整精度較高。
第二種實現(xiàn)方式:基于該接入終端的重力感應信息確定該接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;基于該傾斜方向和傾斜角度確定該接入終端的直播姿勢,該直播姿勢包括左橫屏、右橫屏、第一豎屏和第二豎屏中的至少一種,該第一豎屏是指該接入終端的頂端朝上時的豎屏狀態(tài),該第二豎屏是指該接入終端的頂端朝下時的豎屏狀態(tài);基于該直播姿勢對該第二直播畫面的畫面方向進行調(diào)整。
實際應用中,可以預先設(shè)置傾斜方向和傾斜角度與直播姿勢之間的對應關(guān)系,則在基于該重力感應信息確定該接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度之后,即可基于該對應關(guān)系,確定該傾斜方向和傾斜角度對應的直播姿勢。
以該接入終端的頂端豎直朝上為水平狀態(tài)為例,在一種可能的實現(xiàn)方式中,可以預先將該接入終端相對于本端在水平狀態(tài)時向左或向右傾斜且傾斜角度在[0°,45°]區(qū)間范圍內(nèi)時對應的直播姿勢設(shè)置為第一豎屏;將該接入終端相對于本端在水平狀態(tài)時向右傾斜且傾斜角度在(45°,135°)區(qū)間范圍內(nèi)時對應的直播姿勢設(shè)置為右橫屏;將該接入終端相對于本端在水平狀態(tài)時向左傾斜且傾斜角度在(45°,135°)區(qū)間范圍內(nèi)時對應的直播姿勢設(shè)置為左橫屏;將該接入終端相對于本端在水平狀態(tài)時向左或向右傾斜且傾斜角度在[135°,180°]區(qū)間范圍內(nèi)時對應的直播姿勢設(shè)置為第二豎屏。
則根據(jù)上述所設(shè)置的對應關(guān)系,若該接入終端相對于本端在水平狀態(tài)時向左傾斜了15度,即可確定該接入終端的直播姿勢為第一豎屏;若該接入終端相對于本端在水平狀態(tài)時向左傾斜了55度,即可確定該接入終端的直播姿勢為左橫屏。
其中,基于該直播姿勢對該第二直播畫面的畫面方向進行調(diào)整可以包括以下方式中的至少一種:
1)當基于該接入終端的重力感應信息確定該接入終端的直播姿勢為左橫屏時,將該第二直播畫面向左翻轉(zhuǎn)90度。
其中,左橫屏是指該接入終端的頂端朝左時的橫屏狀態(tài)。若該接入終端的直播姿勢為左橫屏,表示該接入終端此時為橫屏模式,但是由于視頻流中每一幀圖像的顯示方向都是固定的,因此該主播終端獲取的第二直播畫面將仍為豎直顯示方向,如圖3d中的左圖所示。由圖3d中的左圖可知,該第二直播畫面的畫面方向向右翻轉(zhuǎn)了90度,為了使得該第二直播畫面的畫面方向能夠保持端正,則可以將該第二直播畫面向左翻轉(zhuǎn)90度,得到圖3d中的右圖。
2)當基于該接入終端的重力感應信息確定該接入終端的直播姿勢為右橫屏時,將該第二直播畫面向右翻轉(zhuǎn)90度。
其中,右橫屏是指該接入終端的頂端朝左時的橫屏狀態(tài)。而且方式2)與方式1)同理,此處不再舉例說明。
3)當基于該接入終端的重力方向信息確定該接入終端的直播姿勢為第二豎屏時,將該第二直播畫面翻轉(zhuǎn)180度。
其中,可以將該第二直播畫面向左翻轉(zhuǎn)180度,也可以將該第二直播畫面向右翻轉(zhuǎn)180度,本公開實施例對此不做限定。
若該接入終端的直播姿勢為第二豎屏,表示該接入終端雖然為豎屏模式,但頂端卻是朝下的,該主播終端獲取的第二直播畫面將如圖3e中的左圖所示。由圖3e中的左圖可知,該第二直播畫面的畫面方向出現(xiàn)了倒置,為了使得該第二直播畫面的畫面方向能夠保持端正,則可以將該第二直播畫面向左或向右翻轉(zhuǎn)180度,得到圖3e中的右圖。
另外,當基于該接入終端的重力方向信息確定該接入終端的直播姿勢為第一豎屏時,表示該第二直播畫面的畫面方向是端正的,未發(fā)生翻轉(zhuǎn)和倒置,則此時無需對將該第二直播畫面的畫面方向進行調(diào)整。
由上述第二種實現(xiàn)方式可知,相對于上述第一種實現(xiàn)方式需要進行角度調(diào)整,第二種實現(xiàn)方式僅需進行方向調(diào)整,因此相對于上述第一種實現(xiàn)方式來說調(diào)整效率較高。
在步驟305中,該主播終端根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面。
其中,該合成直播畫面用于進行直播。該主播終端根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面包括:將該第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到該合成直播畫面。
通過將第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到合成直播畫面,可以保證該主播終端所直播的畫面一直是端正的,不會出現(xiàn)畫面翻轉(zhuǎn)或倒置,優(yōu)化了直播效果,提高了用戶體驗。
其中,將該第一直播畫面和調(diào)整后的第二直播畫面進行合成的實現(xiàn)方式有多種,包括但不限于以下兩種:
第一種實現(xiàn)方式,將該第一直播畫面和調(diào)整后的第二直播畫面進行拼接,得到該合成直播畫面。例如,若圖3f中的a圖為第一直播畫面,圖3f中的b圖為調(diào)整后的第二直播畫面,則將a圖和b圖進行拼接后,可以得到圖3f中的c圖。
第二種實現(xiàn)方式,將調(diào)整后的第二直播畫面按照預設(shè)比例縮小,得到縮小的直播畫面,將該縮小的直播畫面嵌入該第一直播畫面,得到該合成直播畫面。例如,將圖3e中的b圖縮小并嵌入圖3e中的a圖后,可以得到圖3e中的d圖,其中該d圖中的e圖即為縮小后的b圖。
當然,對于接入終端來說,該接入終端也可以獲取本端的第二直播畫面和主播終端的第一直播畫面,并對該第一直播畫面和該第二直播畫面進行合成,得到合成直播畫面。在進行畫面合成時,該接入終端可以將該第一直播畫面和該第二直播畫面進行拼接,得到該合成直播畫面,也可以將該第一直播畫面縮小后嵌入該第二直播畫面,得到該合成直播畫面,本公開實施例對此不做限定。
在另一種實現(xiàn)方式中,該主播終端還可以獲取本端的重力感應信息,并按照基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整的方式,基于本端的重力感應信息對該第一直播畫面的畫面方向進行調(diào)整,以將該第一直播畫面的畫面方向調(diào)整端正。相應地,根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面還包括:將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到該合成直播畫面。
其中,基于本端的重力感應信息對該第一直播畫面的畫面方向進行調(diào)整的方式,與步驟304中主播終端基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整的方式同理,具體實現(xiàn)方式可以參考步驟304的相關(guān)描述,此處不再贅述。而將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成的具體實現(xiàn)方式,與上述將第一直播畫面和調(diào)整后的第二直播畫面進行合成的方式同理,具體實現(xiàn)方式可以參考相關(guān)描述,此處也不再贅述。
在步驟306中,該主播終端基于該合成直播畫面進行直播。
其中,基于該合成直播畫面進行直播的過程可以包括:將該合成直播畫面進行編碼,得到壓縮碼流;對該壓縮碼流進行封裝,得到第三視頻流;將該第三視頻流發(fā)送給該直播服務(wù)器,由該直播服務(wù)器將該第三視頻流轉(zhuǎn)發(fā)給該主播終端的觀眾終端。
另外,除了對該壓縮碼流進行封裝之外,該主播終端還可以將該主播終端的音頻、接入終端的音頻、結(jié)構(gòu)化描述符(如字幕)等不同屬性的信息與該壓縮碼流封裝到一起,得到該第三視頻流,本公開實施例對此不做限定。
本公開實施例中,主播終端在獲取接入終端的第二直播畫面之外,還可以獲取該接入終端的重力感應信息,并可以根據(jù)該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,以將該第二直播畫面的畫面方向調(diào)整端正,之后再根據(jù)本端的第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,基于該合成直播畫面進行直播。由于該第二直播畫面的畫面方向在調(diào)整后可以保持端正,因此根據(jù)調(diào)整后的第二直播畫面和第一直播畫面獲取得到的合成直播畫面也可以保持端正,從而解決了基于直播連麥進行直播的過程中主播終端所直播的合成直播畫面無法維持端正的問題,優(yōu)化了直播效果。
需要說明的是,圖3a實施例僅是以由主播終端獲取接入終端的第二直播畫面和重力感應信息,并基于該接入終端的重力感應信息對第二直播畫面進行調(diào)整,再根據(jù)調(diào)整后的第二直播畫面和本端的第一直播畫面獲取合成直播畫面為例進行說明,而在另一實施例中,也可以由直播服務(wù)器分別獲取主播終端的第一直播畫面以及接入終端的第二直播畫面和重力感應信息,并由該直播服務(wù)器直接基于該接入終端的重力感應信息對該第二直播畫面進行調(diào)整,再根據(jù)調(diào)整后的第二直播畫面和該主播終端的第一直播畫面獲取合成直播畫面。圖4是根據(jù)一示例性實施例示出的另一種基于直播連麥的直播方法的流程圖,該方法的交互主體為主播終端、接入終端和直播服務(wù)器。參見圖4,該方法包括以下步驟:
在步驟401中,主播終端在與接入終端進行直播連麥的過程中,獲取采集的第一直播畫面,并將該第一直播畫面發(fā)送給直播服務(wù)器。
其中,主播終端獲取采集的第一直播畫面的具體實現(xiàn)過程可以參考上述步驟303的相關(guān)描述,本公開實施例在此不再贅述。
在步驟402中,該接入終端獲取采集的第二直播畫面和重力感應信息,并將該第二直播畫面和重力感應信息發(fā)送給該直播服務(wù)器,該重力感應信息用于指示該接入終端在采集該第二直播畫面時相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度。
其中,接入終端獲取采集的第二直播畫面和重力感應信息的具體實現(xiàn)過程可以參考上述步驟302的相關(guān)描述,本公開實施例在此不再贅述。
在步驟403中,該直播服務(wù)器接收該主播終端發(fā)送的第一直播畫面,并接收該接入終端發(fā)送的第二直播畫面和該接入終端的重力感應信息。
在步驟404中,該直播服務(wù)器基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,以將該第二直播畫面的畫面方向調(diào)整端正。
其中,該直播服務(wù)器基于接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整的方式,與上述步驟304中主播終端基于接入終端的重力感應信息對第二直播畫面的畫面方向進行調(diào)整的方式相同,具體實現(xiàn)過程可以參考步驟304的相關(guān)描述,本公開實施例在此不再贅述。
在步驟405中,該直播服務(wù)器根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,該合成直播畫面用于進行直播。
其中,該直播服務(wù)器根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面包括:將該第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到該合成直播畫面。
實際應用中,將該第一直播畫面和調(diào)整后的第二直播畫面進行合成的實現(xiàn)方式有多種,包括但不限于以下三種:
第一種實現(xiàn)方式,將該第一直播畫面和調(diào)整后的第二直播畫面進行拼接,得到該合成直播畫面。
第二種實現(xiàn)方式,將調(diào)整后的第二直播畫面按照預設(shè)比例縮小,得到縮小的直播畫面,將該縮小的直播畫面嵌入該第一直播畫面,得到該合成直播畫面。
第三種實現(xiàn)方式,將該第一直播畫面按照預設(shè)比例縮小,得到縮小的直播畫面,將該縮小的直播畫面嵌入該調(diào)整后的第二直播畫面,得到該合成直播畫面。
在另一實施例中,該直播服務(wù)器還可以獲取主播終端的重力感應信息;按照基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整的方式,基于該主播終端的重力感應信息對該第一直播畫面的畫面方向進行調(diào)整,以將該第一直播畫面的畫面方向調(diào)整端正。相應地,所述根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面包括:將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到該合成直播畫面。
比如,當該主播終端也為移動終端時,為了保證該主播終端的第一直播畫面的畫面方向也是端正的,則可以令該主播終端在獲取第一直播畫面的同時,還可以獲取本端的重力感應信息,并將本端的重力感應信息與該第一直播畫面一起發(fā)送給主播服務(wù)器。而該直播服務(wù)器即能夠分別獲取到主播終端的第一直播畫面和重力感應信息,以及接入終端的第二直播畫面和重力感應信息,之后分別基于主播終端的重力感應信息對該第一直播畫面的畫面方向進行調(diào)整,并基于接入終端的重力感應信息對該接入終端的畫面方向進行調(diào)整,將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到該合成直播畫面。
其中,基于主播終端的重力感應信息對該第一直播畫面的畫面方向進行調(diào)整的方式,與基于接入終端的重力感應信息對該接入終端的畫面方向進行調(diào)整的方式同理,具體實現(xiàn)過程可以參數(shù)步驟304的相關(guān)描述,此處不再贅述。而將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成的具體實現(xiàn)方式,也與上述將第一直播畫面和調(diào)整后的第二直播畫面進行合成的方式同理,具體實現(xiàn)方式可以參考相關(guān)描述,此處也不再贅述。
在步驟406中,該直播服務(wù)器將該合成直播畫面發(fā)送給該主播終端,以便該主播終端基于該合成直播畫面進行直播。
除將該合成直播畫面發(fā)送給該主播終端之外,該直播服務(wù)器還可以將該合成直播畫面發(fā)送給觀眾終端和接入終端,以便該主播的觀眾和該直播連麥者也可以基于播放的合成直播畫面觀看到該主播與該直播連麥者的互動。
進一步地,為了提高主播和直播連麥者的觀看效果,對于發(fā)送給主播終端的合成直播畫面,可以采用步驟405中的第一種實現(xiàn)方式或第二種實現(xiàn)方式進行合成;對于發(fā)送給接入終端的合成直播畫面,可以采用步驟405中的第一種實現(xiàn)方式或第三種實現(xiàn)方式進行合成;而對于發(fā)送給觀眾終端的合成直播畫面,則可以采用步驟405中的任一種實現(xiàn)方式進行合成。
本公開實施例中,直播服務(wù)器除獲取接入終端的第二直播畫面之外,還可以獲取該接入終端的重力感應信息,并可以根據(jù)該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,以將該第二直播畫面的畫面方向調(diào)整端正,之后再根據(jù)主播終端的第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,將該合成直播畫面發(fā)送給該主播終端,以便該主播終端基于該合成直播畫面進行直播。由于該第二直播畫面的畫面方向在調(diào)整后可以保持端正,因此根據(jù)調(diào)整后的第二直播畫面和主播終端的第一直播畫面獲取得到的合成直播畫面也可以保持端正,從而解決了基于直播連麥進行直播的過程中主播終端所直播的合成直播畫面無法維持端正的問題,優(yōu)化了直播效果。
圖5a是根據(jù)一示例性實施例示出的一種基于直播連麥的直播裝置的框圖,該直播裝置可以為主播終端或直播服務(wù)器,該主播終端可以為手機、平板電腦、計算機等終端。參見圖5a,該直播裝置包括:
第一獲取模塊510,用于獲取主播終端采集的第一直播畫面,并獲取接入終端采集的第二直播畫面和該接入終端的重力感應信息,該接入終端為與該主播終端進行直播連麥的直播終端,該接入終端的重力感應信息用于指示該接入終端在采集該第二直播畫面時相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
第一調(diào)整模塊520,用于基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,以將所述第二直播畫面的畫面方向調(diào)整端正;
第二獲取模塊530,用于根據(jù)該第一直播畫面和調(diào)整后的第二直播畫面獲取合成直播畫面,該合成直播畫面用于進行直播。
可選地,參見圖5b,所述裝置還包括:
第三獲取模塊540,用于獲取該主播終端的重力感應信息;
第二調(diào)整模塊550,用于按照基于該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整的方式,基于該主播終端的重力感應信息對該第一直播畫面的畫面方向進行調(diào)整,以將該第一直播畫面的畫面方向調(diào)整端正;
該第二獲取模塊530,用于將調(diào)整后的第一直播畫面和調(diào)整后的第二直播畫面進行合成,得到該合成直播畫面。
可選地,參見圖5c,該第一調(diào)整模塊520包括:
第一確定子模塊521,用于基于該接入終端的重力感應信息確定該接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
第一調(diào)整子模塊522,用于將該第二直播畫面按照該傾斜方向翻轉(zhuǎn)該傾斜角度。
可選地,參見圖5d,該第一調(diào)整模塊520包括:
第二確定子模塊523,用于基于該接入終端的重力感應信息確定該接入終端相對于本端在水平狀態(tài)時的傾斜方向和傾斜角度;
第三確定子模塊524,用于基于該傾斜方向和傾斜角度確定該接入終端的直播姿勢,該直播姿勢包括左橫屏、右橫屏、第一豎屏和第二豎屏中的至少一種,該第一豎屏是指該接入終端的頂端朝上時的豎屏狀態(tài),該第二豎屏是指該接入終端的頂端朝下時的豎屏狀態(tài);
第二調(diào)整子模塊524,用于基于該直播姿勢對該第二直播畫面的畫面方向進行調(diào)整。
可選地,該第二調(diào)整子模塊524用于執(zhí)行以下方式中的至少一種:
當基于該接入終端的重力感應信息確定該接入終端的直播姿勢為左橫屏時,將該第二直播畫面向左翻轉(zhuǎn)90度;
當基于該接入終端的重力感應信息確定該接入終端的直播姿勢為右橫屏時,將該第二直播畫面向右翻轉(zhuǎn)90度;
當基于該接入終端的重力方向信息確定該接入終端的直播姿勢為第二豎屏時,將該第二直播畫面翻轉(zhuǎn)180度。
本公開實施例中,除獲取接入終端的第二直播畫面之外,還可以獲取該接入終端的重力感應信息,并可以根據(jù)該接入終端的重力感應信息對該第二直播畫面的畫面方向進行調(diào)整,使得該第二直播畫面的畫面方向保持端正。由于該第二直播畫面的畫面方向在調(diào)整后可以保持端正,因此根據(jù)調(diào)整后的第二直播畫面和主播終端的第一直播畫面獲取得到的合成直播畫面也可以保持端正,從而解決了基于直播連麥進行直播的過程中主播終端所直播的合成直播畫面無法維持端正的問題,優(yōu)化了直播效果。
圖6是根據(jù)一示例性實施例示出的一種基于直播連麥的直播裝置600的硬件結(jié)構(gòu)示意圖。其中,裝置600可以被提供為一主播終端或者接入終端。例如,裝置600可以是移動電話,計算機,數(shù)字廣播終端,消息收發(fā)設(shè)備,游戲控制臺,平板設(shè)備,醫(yī)療設(shè)備,健身設(shè)備,個人數(shù)字助理等。
參照圖6,裝置600可以包括以下一個或多個組件:處理組件602,存儲器604,電源組件606,多媒體組件608,音頻組件610,輸入/輸出(i/o)的接口612,傳感器組件614,以及通信組件616。
處理組件602通??刂蒲b置600的整體操作,諸如與顯示,電話呼叫,數(shù)據(jù)通信,相機操作和記錄操作相關(guān)聯(lián)的操作。處理組件602可以包括一個或多個處理器620來執(zhí)行指令,以完成上述的方法的全部或部分步驟。此外,處理組件602可以包括一個或多個模塊,便于處理組件602和其他組件之間的交互。例如,處理組件602可以包括多媒體模塊,以方便多媒體組件608和處理組件602之間的交互。
存儲器604被配置為存儲各種類型的數(shù)據(jù)以支持在裝置600的操作。這些數(shù)據(jù)的示例包括用于在裝置600上操作的任何應用程序或方法的指令,聯(lián)系人數(shù)據(jù),電話簿數(shù)據(jù),消息,圖片,視頻等。存儲器604可以由任何類型的易失性或非易失性存儲設(shè)備或者它們的組合實現(xiàn),如靜態(tài)隨機存取存儲器(sram),電可擦除可編程只讀存儲器(eeprom),可擦除可編程只讀存儲器(eprom),可編程只讀存儲器(prom),只讀存儲器(rom),磁存儲器,快閃存儲器,磁盤或光盤。
電源組件606為裝置600的各種組件提供電源。電源組件606可以包括電源管理系統(tǒng),一個或多個電源,及其他與為裝置600生成、管理和分配電源相關(guān)聯(lián)的組件。
多媒體組件608包括在所述裝置600和用戶之間的提供一個輸出接口的屏幕。在一些實施例中,屏幕可以包括液晶顯示器(lcd)和觸摸面板(tp)。如果屏幕包括觸摸面板,屏幕可以被實現(xiàn)為觸摸屏,以接收來自用戶的輸入信號。觸摸面板包括一個或多個觸摸傳感器以感測觸摸、滑動和觸摸面板上的手勢。所述觸摸傳感器可以不僅感測觸摸或滑動動作的邊界,而且還檢測與所述觸摸或滑動操作相關(guān)的持續(xù)時間和壓力。在一些實施例中,多媒體組件608包括一個前置攝像頭和/或后置攝像頭。當裝置600處于操作模式,如拍攝模式或視頻模式時,前置攝像頭和/或后置攝像頭可以接收外部的多媒體數(shù)據(jù)。每個前置攝像頭和后置攝像頭可以是一個固定的光學透鏡系統(tǒng)或具有焦距和光學變焦能力。
音頻組件610被配置為輸出和/或輸入音頻信號。例如,音頻組件610包括一個麥克風(mic),當裝置600處于操作模式,如呼叫模式、記錄模式和語音識別模式時,麥克風被配置為接收外部音頻信號。所接收的音頻信號可以被進一步存儲在存儲器604或經(jīng)由通信組件616發(fā)送。在一些實施例中,音頻組件610還包括一個揚聲器,用于輸出音頻信號。
i/o接口612為處理組件602和外圍接口模塊之間提供接口,上述外圍接口模塊可以是鍵盤,點擊輪,按鈕等。這些按鈕可包括但不限于:主頁按鈕、音量按鈕、啟動按鈕和鎖定按鈕。
傳感器組件614包括一個或多個傳感器,用于為裝置600提供各個方面的狀態(tài)評估。例如,傳感器組件614可以檢測到裝置600的打開/關(guān)閉狀態(tài),組件的相對定位,例如所述組件為裝置600的顯示器和小鍵盤,傳感器組件614還可以檢測裝置600或裝置600一個組件的位置改變,用戶與裝置600接觸的存在或不存在,裝置600方位或加速/減速和裝置600的溫度變化。傳感器組件614可以包括接近傳感器,被配置用來在沒有任何的物理接觸時檢測附近物體的存在。傳感器組件614還可以包括光傳感器,如cmos或ccd圖像傳感器,用于在成像應用中使用。在一些實施例中,該傳感器組件614還可以包括加速度傳感器,陀螺儀傳感器,磁傳感器,壓力傳感器或溫度傳感器。
通信組件616被配置為便于裝置600和其他設(shè)備之間有線或無線方式的通信。裝置600可以接入基于通信標準的無線網(wǎng)絡(luò),如wifi,2g或3g,或它們的組合。在一個示例性實施例中,通信組件616經(jīng)由廣播信道接收來自外部廣播管理系統(tǒng)的廣播信號或廣播相關(guān)信息。在一個示例性實施例中,所述通信組件616還包括近場通信(nfc)模塊,以促進短程通信。例如,在nfc模塊可基于射頻識別(rfid)技術(shù),紅外數(shù)據(jù)協(xié)會(irda)技術(shù),超寬帶(uwb)技術(shù),藍牙(bt)技術(shù)和其他技術(shù)來實現(xiàn)。
在示例性實施例中,裝置600可以被一個或多個應用專用集成電路(asic)、數(shù)字信號處理器(dsp)、數(shù)字信號處理設(shè)備(dspd)、可編程邏輯器件(pld)、現(xiàn)場可編程門陣列(fpga)、控制器、微控制器、微處理器或其他電子元件實現(xiàn),用于執(zhí)行上述方法。
一種非臨時性計算機可讀存儲介質(zhì),當所述存儲介質(zhì)中的指令由裝置600的處理器執(zhí)行時,使得該裝置600能夠執(zhí)行上述圖1d、圖2、圖3a或圖4實施例所述的方法。
圖7是根據(jù)一示例性實施例示出的一種基于直播連麥的直播裝置700的硬件結(jié)構(gòu)示意圖。例如,裝置700可以被提供為一直播服務(wù)器。參照圖7,裝置700包括處理組件722,其進一步包括一個或多個處理器,以及由存儲器732所代表的存儲器資源,用于存儲可由處理組件722的執(zhí)行的指令,例如應用程序。存儲器732中存儲的應用程序可以包括一個或一個以上的每一個對應于一組指令的模塊。此外,處理組件722被配置為執(zhí)行指令,以執(zhí)行上述方法基于直播連麥的直播方法。
裝置700還可以包括一個電源組件726被配置為執(zhí)行裝置700的電源管理,一個有線或無線網(wǎng)絡(luò)接口750被配置為將裝置700連接到網(wǎng)絡(luò),和一個輸入輸出(i/o)接口758。裝置700可以操作基于存儲在存儲器732的操作系統(tǒng),例如windowsservertm,macosxtm,unixtm,linuxtm,freebsdtm或類似。
在示例性實施例中,還提供了一種包括指令的非臨時性計算機可讀存儲介質(zhì),當所述存儲介質(zhì)中的指令由裝置700的處理器執(zhí)行時,使得裝置700能夠執(zhí)行使得該裝置700能夠執(zhí)行上述圖1d、圖3a或圖4實施例所述的方法。
本領(lǐng)域技術(shù)人員在考慮說明書及實踐這里公開的方案后,將容易想到本公開的其它實施方案。本申請旨在涵蓋本公開的任何變型、用途或者適應性變化,這些變型、用途或者適應性變化遵循本公開的一般性原理并包括本公開未公開的本技術(shù)領(lǐng)域中的公知常識或慣用技術(shù)手段。說明書和實施例僅被視為示例性的,本公開的真正范圍和精神由上面的權(quán)利要求指出。
應當理解的是,本公開并不局限于上面已經(jīng)描述并在附圖中示出的精確結(jié)構(gòu),并且可以在不脫離其范圍進行各種修改和改變。本公開的范圍僅由所附的權(quán)利要求來限制。