律動圖像化方法及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種律動圖像化方法、系統(tǒng)以及電腦可讀取記錄介質(zhì)，特別是指根據(jù)個人或群體產(chǎn)生的聲音或體感信息產(chǎn)生可視化律動圖像的方法以及相關(guān)系統(tǒng)。
【背景技術(shù)】
[0002]個人在聽音樂的時候會隨著音樂的節(jié)奏搖擺，甚至是隨著樂音吟唱，現(xiàn)有的技術(shù)中，有些音樂播放器播放音樂時，其中會顯示隨著音樂起伏變化的幾何圖形，但并無法依據(jù)個人的律動或特色來產(chǎn)生個人化的顯示圖像。
[0003]若處于一個演唱會或是群眾聚集的場合，每個人之間可能會隨著現(xiàn)場的音樂或是氣氛互動，為了凝聚群體氣氛，眾人可以將手機(jī)當(dāng)成熒光棒，隨著現(xiàn)場音樂節(jié)奏擺動，藉此拉近表演者與觀眾的距離。這些可視為多人的律動，目前也未能夠?qū)⒍嗳说穆蓜觼懋a(chǎn)生群體化的顯示圖像。
[0004]現(xiàn)有技術(shù)并未提出有效的機(jī)制，讓個人或群眾可以將其依據(jù)音樂而產(chǎn)生的律動轉(zhuǎn)換成視覺效果，以將律動圖像化，進(jìn)而可將律動圖像進(jìn)行分享或是共享。目前的音樂分享機(jī)制多半只是將音樂文件分享、或是提供音樂鏈接等，缺少個人律動分享的機(jī)制，多數(shù)情況下僅能播放音樂或顯示多媒體畫面，也缺乏互動感。

【發(fā)明內(nèi)容】

[0005]有別于現(xiàn)階段的音樂分享方式僅限于傳遞音樂文件或鏈接的方式，本說明書披露一種律動圖像化方法、系統(tǒng)以及電腦可讀取記錄介質(zhì)，可根據(jù)音頻和個人的圖像特征產(chǎn)生可視化的律動圖像的技術(shù)，律動圖像反映出個人或群體共同的律動，可藉此來顯示個人或群體根據(jù)音頻而產(chǎn)生的情緒、反應(yīng)或是氣氛等。
[0006]根據(jù)說明書所載實施例之一，律動圖像化方法步驟可取得一個人圖像，比如由便攜式電子裝置拍攝取得，并由個人圖像取得其中的個人圖像特征，之后將根據(jù)圖像特征建構(gòu)一個人化圖像。接著可由音頻中所取得的音頻特征，以從預(yù)設(shè)的多個律動設(shè)定數(shù)據(jù)中取得對應(yīng)此音頻特征的一個人化律動設(shè)定數(shù)據(jù)。之后，依據(jù)音頻、個人化圖像以及個人化律動設(shè)定數(shù)據(jù)產(chǎn)生一個人化律動圖像。
[0007]另一實施例中還可通過便攜式電子裝置的體感單元取得一體感信號，以能依據(jù)前述音頻、個人化圖像、個人化律動設(shè)定數(shù)據(jù)以及此體感信號產(chǎn)生可以反映出體感動作的個人化律動圖像。
[0008]其中，上述的音頻和個人化律動設(shè)定數(shù)據(jù)將確定個人化圖像的律動方式和律動頻率；而體感信號確定個人化圖像的顯示強(qiáng)度；以及將根據(jù)律動方式、律動頻率以及顯示強(qiáng)度產(chǎn)生個人化律動圖像。
[0009]再一實施例中則通過一伺服主機(jī)整合了多數(shù)個人化律動圖像而產(chǎn)生一群體化律動圖像。
[0010]相關(guān)的律動圖像化系統(tǒng)可經(jīng)由一便攜式電子裝置來操作，或者由便攜式電子裝置并配合一遠(yuǎn)程伺服主機(jī)來進(jìn)行操作。系統(tǒng)的主要元件包括取得圖像的圖像獲取單元、接收音頻的音頻獲取單元、取得個人圖像特征或/與音頻特征的特征獲取單元、運算得出個人化律動圖像的運算單元，以及顯示個人化律動圖像的顯示單元。還進(jìn)一步時可包括取得加速度信號的體感單元。
[0011]為了能更進(jìn)一步了解本發(fā)明為實現(xiàn)既定目的所采取的技術(shù)、方法及效果，請參閱以下有關(guān)本發(fā)明的詳細(xì)說明、附圖，相信本發(fā)明的目的、特征以及特點，當(dāng)可由此得以深入且具體的了解，然而附圖與附件僅提供參考與說明，并非用來對本發(fā)明加以限制。
【附圖說明】
[0012]圖1所示為顯示于一電子裝置的律動圖像的實施例示意圖；
[0013]圖2顯示產(chǎn)生群體化律動圖像的實施例示意圖；
[0014]圖3顯示本發(fā)明另一實施例中產(chǎn)生群體化律動圖像化的系統(tǒng)架構(gòu)示意圖；
[0015]圖4顯示本發(fā)明律動圖像化系統(tǒng)的第一實施例的示意圖；
[0016]圖5顯示本發(fā)明律動圖像化系統(tǒng)的第二實施例的示意圖；
[0017]圖6顯示本發(fā)明律動圖像化系統(tǒng)的第三實施例的示意圖；
[0018]圖7顯示為實現(xiàn)本發(fā)明律動圖像化方法的架構(gòu)實施例示意圖；
[0019]圖8顯示本發(fā)明律動圖像化方法的實施例流程之一；
[0020]圖9顯示本發(fā)明律動圖像化方法中建構(gòu)立體臉部圖像的實施例流程之一；
[0021]圖10顯示本發(fā)明律動圖像化方法的實施例流程之二 ；
[0022]圖11顯示本發(fā)明律動圖像化方法中確定個人化圖像對應(yīng)音頻特征的呈現(xiàn)方法的實施例流程之一；
[0023]圖12顯示本發(fā)明律動圖像化方法的實施例流程之三。
[0024]【符號說明】
[0025]便攜式電子裝置10顯示屏幕101
[0026]便攜式電子裝置201、202、203
[0027]顯示屏幕20律動圖像205
[0028]網(wǎng)絡(luò)30便攜式電子裝置301、302、303
[0029]伺服主機(jī)32顯示屏幕305
[0030]運算單元401顯示單元402
[0031]特征獲取單元403圖像獲取單元404
[0032]音頻獲取單元405
[0033]運算單元501顯示單元502
[0034]特征獲取單元503存儲單元504
[0035]數(shù)據(jù)庫509體感單元505
[0036]音頻獲取單元506外部音源561
[0037]內(nèi)部文件562圖像獲取單元507
[0038]通信單元508
[0039]便攜式電子裝置61圖像獲取單元611
[0040]音頻獲取單元612 顯示單元613
[0041]通信單元614伺服主機(jī)62
[0042]特征獲取單元621 運算單元622
[0043]網(wǎng)絡(luò)單元623
[0044]攝影機(jī)701音樂數(shù)據(jù)庫702
[0045]麥克風(fēng)703體感檢測704
[0046]圖像獲取705音頻特征分析706
[0047]情緒判斷707圖像特征分析708
[0048]特征模型比對709 人臉圖像建構(gòu)710
[0049]個人化律動圖像711 輸出712
[0050]臉部圖像81音源82
[0051]數(shù)據(jù)庫83
[0052]步驟S801?S809律動圖像化方法流程
[0053]步驟S901?S907建構(gòu)立體臉部圖像流程
[0054]步驟SlOl?S108律動圖像化方法流程
[0055]步驟Slll?S115確定個人化圖像呈現(xiàn)方法流程
[0056]步驟S121?S125律動圖像化方法流程
【具體實施方式】
[0057]本說明書提出一種律動圖像化方法、系統(tǒng)以及電腦可讀取記錄介質(zhì)，其可根據(jù)音頻和個人的圖像特征產(chǎn)生可視化的律動圖像的技術(shù)，以便反映出個人或群體共同的律動。
[0058]更進(jìn)一步，律動圖像是根據(jù)音頻和個人或群體產(chǎn)生體感信號所產(chǎn)生可視化的律動圖像。舉例來說，一個人在聆聽音樂時，可經(jīng)由手持、配戴且具有體感單元可感測律動的電子裝置(如智能手機(jī)、平板電腦、智能眼鏡、智能手表或其他可安裝體感單元的電子裝置)，與音樂一起搖動，所產(chǎn)生的體感信號可經(jīng)由本系統(tǒng)來產(chǎn)生個人化的律動圖像。又例如，在一個群眾聚集的場合，比如演奏會、演唱會、群眾活動等，在一音頻播放的時間內(nèi)，群眾可能會有一致的情緒或律動，通過此律動圖像化方法與系統(tǒng)，可以整合多人的個人化律動圖像，產(chǎn)生一個群體化的律動圖像，以反映出當(dāng)時情緒、情境或氣氛。
[0059]通過執(zhí)行本說明書所提出的律動圖像化方法后，最終產(chǎn)生的個人化律動圖像可呈現(xiàn)于一個具有顯示器的便攜式電子裝置上，如圖1所示為顯示于一電子裝置的律動圖像的實施例示意圖。以下實施例中所述的連接，可以是經(jīng)由有線或無線通信網(wǎng)絡(luò)進(jìn)行連接，也可以是經(jīng)由總線、序列數(shù)據(jù)通信接口(如RS232)或其他方式進(jìn)行電性連接。
[0060]圖1中顯示有一便攜式電子裝置10，比如具有顯示屏幕101的手機(jī)或平板電腦，優(yōu)選為其中具有照相機(jī)、顯示器、體感單元(如加速度傳感器、陀螺儀)的移動裝置。當(dāng)使用者手持此便攜式電子裝置10揮舞、搖動，其中的體感單元將感測到便攜式電子裝置10產(chǎn)生的體感信號，此體感信號可用來判斷出使用者的律動。
[0061]在一些實施例中，本發(fā)明的系統(tǒng)可設(shè)置于便攜式電子裝置10中，通過便攜式電子裝置10中的照相機(jī)取得使用者或是特定人的臉部圖像，經(jīng)由此臉部圖像取得個人圖像特征以及建構(gòu)一個人化圖像，之后當(dāng)使用者揮舞著便攜式電子裝置10，通過其中的體感單元體感信號，如一種加速度信號，這個信號可以通過解析取得律動的強(qiáng)度、節(jié)奏等信息；便攜式電子裝置10另外可由本身產(chǎn)生的音樂信號，或是通過麥克風(fēng)收音的外部音頻，解析其中頻域信號得出音頻特征，例如頻率、節(jié)奏、音量變化、強(qiáng)度變化、曲風(fēng)等，找出對應(yīng)的個人化律動設(shè)定數(shù)據(jù)。依據(jù)上述的音樂信號、個人化圖像以及個人化律動設(shè)定數(shù)據(jù)，便攜式電子裝置10可產(chǎn)生個人化律動圖像，呈現(xiàn)在顯示屏幕101上，例如人臉圖像依據(jù)一特定頻律進(jìn)行左右晃動。律動圖像，還可以通過不同顏色、幾何圖形改變、圖像變化、速度變化、不同律動方式(如旋轉(zhuǎn)、點頭、跳動…)等，來反映出個人對于此