的每個虛擬源位置。
[0029] 軟件可以包括用于接收包括再現(xiàn)揚(yáng)聲器位置數(shù)據(jù)的再現(xiàn)環(huán)境數(shù)據(jù)的指令。軟件可 以包括用于下述操作的指令:根據(jù)再現(xiàn)環(huán)境數(shù)據(jù)限定多個虛擬源位置,并且針對每個虛擬 源位置計算多個輸出聲道中的每個輸出聲道的虛擬源增益值。每個虛擬源位置可以與再現(xiàn) 環(huán)境內(nèi)的位置相對應(yīng)。在一些實(shí)現(xiàn)中,至少一些虛擬源位置可以與再現(xiàn)環(huán)境外部的位置相 對應(yīng)。
[0030] 根據(jù)一些實(shí)現(xiàn),虛擬源位置可以被均勻地間隔開。在一些實(shí)現(xiàn)中,虛擬源位置可以 具有沿X軸和y軸的第一均勻間距和沿Z軸的第二均勻間距。計算多個輸出聲道中的每個 輸出聲道的一組音頻對象增益值的步驟可以包括:獨(dú)立計算來自沿X軸、y軸和Z軸的虛擬 源的貢獻(xiàn)。
[0031] 本文中描述了各種裝置和設(shè)備。一些這樣的設(shè)備可以包括接口系統(tǒng)和邏輯系統(tǒng)。 接口系統(tǒng)可以包括網(wǎng)絡(luò)接口。在一些實(shí)現(xiàn)中,設(shè)備可以包括存儲器裝置。接口系統(tǒng)可以包 括邏輯系統(tǒng)和存儲器裝置之間的接口。
[0032] 邏輯系統(tǒng)可以適用于:從接口系統(tǒng)接收包括一個或更多個音頻對象的音頻再現(xiàn)數(shù) 據(jù)。音頻對象可以包括音頻信號和相關(guān)聯(lián)的元數(shù)據(jù)。元數(shù)據(jù)可以包括至少音頻對象位置數(shù) 據(jù)和音頻對象大小數(shù)據(jù)。邏輯系統(tǒng)可以適用于:針對一個或更多個音頻對象中的音頻對象 來計算來自由音頻對象位置數(shù)據(jù)和音頻對象大小數(shù)據(jù)限定的音頻對象區(qū)域或空間內(nèi)的虛 擬源的貢獻(xiàn)。邏輯系統(tǒng)可以適用于:至少部分地基于所計算出的貢獻(xiàn)來計算多個輸出聲道 中的每個輸出聲道的一組音頻對象增益值。每個輸出聲道可以與再現(xiàn)環(huán)境中的至少一個再 現(xiàn)揚(yáng)聲器相對應(yīng)。
[0033] 計算來自虛擬源的貢獻(xiàn)的步驟可以包括:計算音頻對象區(qū)域或空間內(nèi)的虛擬源的 虛擬源增益值的加權(quán)平均值。用于加權(quán)平均值的權(quán)重可以取決于音頻對象的位置、音頻對 象的大小和音頻對象區(qū)域或空間內(nèi)的每個虛擬源位置。邏輯系統(tǒng)可以適用于:從接口系統(tǒng) 接收包括再現(xiàn)揚(yáng)聲器位置數(shù)據(jù)的再現(xiàn)環(huán)境數(shù)據(jù)。
[0034] 邏輯系統(tǒng)可以適用于:根據(jù)再現(xiàn)環(huán)境數(shù)據(jù)限定多個虛擬源位置,并且針對每個虛 擬源位置計算多個輸出聲道中的每個輸出聲道的虛擬源增益值。每個虛擬源位置可以與再 現(xiàn)環(huán)境內(nèi)的位置相對應(yīng)。然而,在一些實(shí)現(xiàn)中,至少一些虛擬源位置可以與再現(xiàn)環(huán)境外部的 位置相對應(yīng)。虛擬源位置可以被均勻地間隔開或可以被非均勻地間隔開,這取決于實(shí)現(xiàn)。在 一些實(shí)現(xiàn)中,虛擬源位置可以具有沿X軸和y軸的第一均勻間距和沿Z軸的第二均勻間距。 計算多個輸出聲道中的每個輸出聲道的一組音頻對象增益值的步驟可以包括:獨(dú)立計算來 自沿X軸、y軸和z軸的虛擬源的貢獻(xiàn)。
[0035] 設(shè)備還可以包括用戶接口。邏輯系統(tǒng)可以適用于:經(jīng)由用戶接口接收用戶輸入 (如音頻對象大小數(shù)據(jù))。在一些實(shí)現(xiàn)中,邏輯系統(tǒng)可以適用于對輸入的音頻對象大小數(shù)據(jù) 進(jìn)行縮放。
[0036] 在附圖和下面的描述中闡述了在本說明書中描述的主題的一個或更多個實(shí)現(xiàn)的 細(xì)節(jié)。根據(jù)描述、附圖和權(quán)利要求,其他特征、方面和優(yōu)點(diǎn)將變得明顯。注意,下面的圖的相 對尺寸可能并未按比例繪出。
【附圖說明】
[0037] 圖1示出了具有杜比環(huán)繞聲5. 1配置的再現(xiàn)環(huán)境的示例;
[0038] 圖2示出了具有杜比環(huán)繞聲7. 1配置的再現(xiàn)環(huán)境的示例;
[0039] 圖3示出了具有Hamasaki 22. 2環(huán)繞聲配置的再現(xiàn)環(huán)境的示例;
[0040] 圖4A示出了描繪在虛擬再現(xiàn)環(huán)境中的不同高度處的揚(yáng)聲器區(qū)的圖形用戶接口 (GUI)的示例;
[0041] 圖4B示出了另一再現(xiàn)環(huán)境的示例;
[0042] 圖5A是提供音頻處理方法的概述的流程圖;
[0043] 圖5B是提供建立處理的不例的流程圖;
[0044] 圖5C是提供根據(jù)預(yù)先計算的虛擬源位置的增益值計算接收的音頻對象的增益值 的運(yùn)行時處理的示例的流程圖;
[0045] 圖6A示出了與再現(xiàn)環(huán)境有關(guān)的虛擬源位置的示例;
[0046] 圖6B示出了與再現(xiàn)環(huán)境有關(guān)的虛擬源位置的替代示例;
[0047] 圖6C至圖6F示出了將近場聲像調(diào)節(jié)(panning)技術(shù)和遠(yuǎn)場聲像調(diào)節(jié)技術(shù)應(yīng)用于 不同位置處的音頻對象的示例;
[0048] 圖6G示出了在邊長等于1的正方形的每個角落處具有一個揚(yáng)聲器的再現(xiàn)環(huán)境的 示例;
[0049] 圖7示出了來自由音頻對象位置數(shù)據(jù)和音頻對象大小數(shù)據(jù)限定的區(qū)域內(nèi)的虛擬 源的貢獻(xiàn)的示例;
[0050] 圖8A和圖8B示出了再現(xiàn)環(huán)境內(nèi)的兩個位置處的音頻對象;
[0051] 圖9是概述了至少部分地基于音頻對象的多大區(qū)域或空間延伸到再現(xiàn)環(huán)境的邊 界外部來確定衰落因子的方法的流程圖;
[0052] 圖10是提供創(chuàng)作裝置和/或渲染裝置的部件的示例的框圖;
[0053] 圖IlA是表示可以用于音頻內(nèi)容創(chuàng)建的一些部件的框圖;以及
[0054] 圖IlB是表示可以用于再現(xiàn)環(huán)境中的音頻回放的一些部件的框圖。
[0055] 各個附圖中的相同附圖標(biāo)記和名稱表示相同的要素。
【具體實(shí)施方式】
[0056] 下面的描述涉及出于描述本公開內(nèi)容的一些新穎方面的目的的一些實(shí)現(xiàn)以及可 以實(shí)現(xiàn)這些新穎方面的背景的示例。然而,可以按照各種不同的方式來應(yīng)用本文中的教示。 例如,當(dāng)根據(jù)具體的再現(xiàn)環(huán)境描述了各種實(shí)現(xiàn)時,本文中的教示能夠廣泛地適用于其他已 知的再現(xiàn)環(huán)境以及在以后可能引入的再現(xiàn)環(huán)境。此外,可以在各種創(chuàng)作工具和/或渲染工 具中實(shí)現(xiàn)所描述的實(shí)現(xiàn),各種創(chuàng)作和/或渲染工具可以以多種硬件、軟件、固件等來實(shí)現(xiàn)。 因此,本公開內(nèi)容的教示并不意在限于附圖中示出的實(shí)現(xiàn)和/或本文中描述的實(shí)現(xiàn),而是 具有廣泛的適用性。
[0057] 圖1示出了具有杜比環(huán)繞聲5. 1配置的再現(xiàn)環(huán)境的示例。在二十世紀(jì)九十年代開 發(fā)了杜比環(huán)繞聲5. 1,但該配置仍然廣泛部署在影院音響系統(tǒng)環(huán)境中。投影儀105可以被配 置成:將(例如,用于電影的)視頻圖像投影在屏幕150上。音頻再現(xiàn)數(shù)據(jù)可以與視頻圖像 同步并且由聲音處理器110進(jìn)行處理。功率放大器115可以將揚(yáng)聲器饋送信號提供給再現(xiàn) 環(huán)境100的揚(yáng)聲器。
[0058] 杜比環(huán)繞聲5. 1配置包括左環(huán)繞陣列120和右環(huán)繞陣列125,這兩個陣列中的每 個陣列包括由單個聲道成組驅(qū)動(gang-driven)的一組揚(yáng)聲器。杜比環(huán)繞聲5. 1配置還包 括左屏幕聲道130、中心屏幕聲道135和右屏幕聲道140的獨(dú)立聲道。為了低頻效應(yīng)(LFE) 設(shè)置了用于超低音揚(yáng)聲器145的獨(dú)立聲道。
[0059] 在2010年,杜比通過引入杜比環(huán)繞聲7. 1提供了對數(shù)碼影院音響(digital cinema sound)的增強(qiáng)。圖2示出了具有杜比環(huán)繞聲7.1配置的再現(xiàn)環(huán)境的示例。數(shù)字投 影儀205可以被配置成接收數(shù)字視頻數(shù)據(jù)并且將視頻圖像投影到屏幕150上。視頻再現(xiàn)數(shù) 據(jù)可以由聲音處理器210進(jìn)行處理。功率放大器215可以向再現(xiàn)環(huán)境200的揚(yáng)聲器提供揚(yáng) 聲器饋送信號。
[0060] 杜比環(huán)繞聲7. 1配置包括左側(cè)環(huán)繞陣列220和右側(cè)環(huán)繞陣列225,這兩個環(huán)繞陣列 中的每個陣列可以由單個聲道來驅(qū)動。與杜比環(huán)繞聲5. 1 -樣,杜比環(huán)繞聲7. 1配置包括 左屏幕聲道230、中心屏幕聲道235、右屏幕聲道240和超低音揚(yáng)聲器245的獨(dú)立聲道。然 而,杜比環(huán)繞聲7. 1通過將杜比環(huán)繞聲5. 1的左環(huán)繞聲道和右環(huán)繞聲道分成下述四個區(qū)來 增加環(huán)繞聲道的數(shù)量:除了左側(cè)環(huán)繞陣列220和右側(cè)環(huán)繞陣列225以外,還包括用于左后環(huán) 繞揚(yáng)聲器224的獨(dú)立聲道和用于右后環(huán)繞揚(yáng)聲器226的獨(dú)立聲道。增加再現(xiàn)環(huán)境200內(nèi)環(huán) 繞區(qū)的數(shù)量可以顯著提高聲音的定位。
[0061] 為了創(chuàng)建更身臨其境的環(huán)境,一些再現(xiàn)環(huán)境可以被配置有由數(shù)量增加的聲道驅(qū)動 的數(shù)量增加的揚(yáng)聲器。此外,一些再現(xiàn)環(huán)境可以包括在各個高度處部署的揚(yáng)聲器,一些高度 可以位于再現(xiàn)環(huán)境的座位區(qū)上方。
[0062] 圖3示出了具有Hamasaki 22. 2環(huán)繞聲配置的再現(xiàn)環(huán)境的示例。日本的NHK科技 研究實(shí)驗(yàn)室開發(fā)了 Hamasaki 22. 2作為超高清電視的環(huán)繞聲部件。Hamasaki 22. 2提供24 個揚(yáng)聲器聲道,這24個揚(yáng)聲器聲道可以用于驅(qū)動在三個層中布置的揚(yáng)聲器。再現(xiàn)環(huán)境300 的上揚(yáng)聲器層310可以由9個聲道來驅(qū)動。中間揚(yáng)聲器層320可以由10個聲道來驅(qū)動。低 揚(yáng)聲器層330可以由5個聲道來驅(qū)動,這5個聲道中的2個聲道用于超低音揚(yáng)聲器345a和 超低音揚(yáng)聲器345b。
[0063] 因此,現(xiàn)代的趨勢是不僅包括更多揚(yáng)聲器和更多聲道,而且還包括不同高度處的 揚(yáng)聲器。隨著聲道數(shù)量增加和揚(yáng)聲器布局從2D陣列轉(zhuǎn)變成3D陣列,定位和植染聲音的任 務(wù)變得越來越困難。因此,本受讓人(assignee)已經(jīng)開發(fā)了各種工具和相關(guān)的用戶接口, 所述各種工具和相關(guān)的用戶接口增加了功能性和/或降低了 3D音頻聲音系統(tǒng)的創(chuàng)作復(fù)雜 度。參照于 2012 年 4 月 20 日提交的題為"System and Tools for Enhanced 3D Audio Authoring and Rendering"("創(chuàng)作和植染應(yīng)用")的美國臨時專利申請No. 61/636, 102(在 此通過引用將其全部內(nèi)容合并到本文中)的圖5A至圖19D詳細(xì)描述了一些這樣的工具。
[0064] 圖4A示出了描繪虛擬再現(xiàn)環(huán)境中的不同高度處的揚(yáng)聲器區(qū)的圖形用戶接口 (GUI)的示例。可以根據(jù)來自邏輯系統(tǒng)的指令、根據(jù)從用戶輸入裝置接收的信號等將GUI 400例如顯示在顯示裝置上。下面參照圖10描述一些這樣的裝置。
[0065] 如本文中參考虛擬再現(xiàn)環(huán)境(如虛擬再現(xiàn)環(huán)境404)所使用的,術(shù)語"揚(yáng)聲器區(qū)" 一般指代可以具有或不具有與實(shí)際再現(xiàn)環(huán)境的再現(xiàn)揚(yáng)聲器一對一對應(yīng)關(guān)系的邏輯結(jié)構(gòu)。例 如,"揚(yáng)聲器區(qū)位置"可以與或不與電影再現(xiàn)環(huán)境的特定再現(xiàn)揚(yáng)聲器位置相對應(yīng)。替代地,術(shù) 語"揚(yáng)聲器區(qū)位置"一般可以指代虛擬再現(xiàn)環(huán)境的區(qū)域。在一些實(shí)現(xiàn)中,虛擬再現(xiàn)環(huán)境的揚(yáng) 聲器區(qū)可以例如通過使用虛擬技術(shù)(如Dolby Headphone?(有時稱為Mobile Surround?)) 與虛擬揚(yáng)聲器相對應(yīng),該虛擬技術(shù)使用一組雙聲道立體聲耳機(jī)來實(shí)時創(chuàng)建虛擬環(huán)繞聲環(huán) 境。在⑶I 400中,在第一高度處存在七個揚(yáng)聲器區(qū)402a并且在第二高度處存在兩個揚(yáng)聲 器區(qū)402b,從而在虛擬再現(xiàn)環(huán)境404中形成總共九個揚(yáng)聲器區(qū)。在該示例中,揚(yáng)聲器區(qū)1至 3位于虛擬再現(xiàn)環(huán)境404的前方區(qū)域405中。前方區(qū)域405可以與例如屏幕150所處的電 影再現(xiàn)環(huán)境的區(qū)域相對應(yīng),與電視機(jī)屏幕所處的家庭的區(qū)域相對應(yīng)等。
[0066] 在此,揚(yáng)聲器區(qū)4 一般與左區(qū)域410中的揚(yáng)聲器相對應(yīng),并且揚(yáng)聲器區(qū)5與虛擬再 現(xiàn)環(huán)境404的右區(qū)域415中的揚(yáng)聲器相對應(yīng)。揚(yáng)聲器區(qū)6與左后區(qū)域412相對應(yīng),并且揚(yáng) 聲器區(qū)7與虛擬再現(xiàn)環(huán)境404的右后區(qū)域414相對應(yīng)。揚(yáng)聲器區(qū)8與上區(qū)域402a中的揚(yáng) 聲器相對應(yīng),揚(yáng)聲器區(qū)9與上區(qū)域420b中的揚(yáng)聲器相對應(yīng),上區(qū)域420b可以是虛擬天花板 區(qū)域(如圖f5D和圖5E中所示的虛擬天花板520的區(qū)域)。因此,如創(chuàng)作和渲染應(yīng)用中更詳 細(xì)描述的,圖4A中所示的揚(yáng)聲器區(qū)1至9的位置可以與或不與實(shí)際再現(xiàn)環(huán)境的再現(xiàn)揚(yáng)聲器 的位置相對應(yīng)。此外,其他實(shí)現(xiàn)可以包括較多或較少揚(yáng)聲器區(qū)和/或高度。
[0067] 在創(chuàng)作和渲染應(yīng)用中描述的各種實(shí)現(xiàn)中,用戶接口(如GUI 400)可以用作創(chuàng)作工 具和/或渲染工具的一