在音(yin)(yin)樂(le)噴(pen)(pen)泉(quan)展示系(xi)統(tong)中,系(xi)統(tong)調用(yong)音(yin)(yin)頻(pin)特(te)征(zheng)解(jie)(jie)析(xi)模塊得到(dao)噴(pen)(pen)泉(quan)動(dong)畫(hua)的(de)(de)(de)各種參(can)數(shu)(shu)(基礎(chu)數(shu)(shu)據、高度數(shu)(shu)據等),系(xi)統(tong)利用(yong)噴(pen)(pen)泉(quan)動(dong)畫(hua)參(can)數(shu)(shu)進(jin)行實現噴(pen)(pen)泉(quan)動(dong)畫(hua)單元,進(jin)而實現噴(pen)(pen)泉(quan)動(dong)畫(hua)的(de)(de)(de)其(qi)他設計(ji)。音(yin)(yin)頻(pin)特(te)征(zheng)解(jie)(jie)析(xi)模塊主要(yao)包括以(yi)下(xia)幾個(ge)方面:音(yin)(yin)頻(pin)文件預處理、特(te)征(zheng)提取、音(yin)(yin)頻(pin)特(te)征(zheng)分(fen)類、噴(pen)(pen)泉(quan)動(dong)畫(hua)參(can)數(shu)(shu)分(fen)析(xi)、特(te)征(zheng)解(jie)(jie)析(xi)(音(yin)(yin)樂(le)特(te)征(zheng)控制噴(pen)(pen)泉(quan)參(can)數(shu)(shu)),水景(jing)噴(pen)(pen)泉(quan)公司(si)介紹音(yin)(yin)樂(le)噴(pen)(pen)泉(quan)展示系(xi)統(tong)的(de)(de)(de)主要(yao)工作。

1、預處理

為后面(mian)的(de)音頻信(xin)號(hao)處(chu)理(li)做準備,人耳聽到的(de)原始聲(sheng)音是連續的(de)聲(sheng)音模(mo)擬(ni)信(xin)號(hao)。在計(ji)算(suan)機(ji)內(nei),所(suo)有的(de)信(xin)息均以數(shu)字(zi)(zi)表示,即計(ji)算(suan)機(ji)只能處(chu)理(li)數(shu)字(zi)(zi)化的(de)信(xin)息,因(yin)此必須把模(mo)擬(ni)音頻信(xin)號(hao)轉換成有限個數(shu)字(zi)(zi)表示的(de)離散序列,即實現音頻數(shu)字(zi)(zi)化。因(yin)此,需(xu)要(yao)通過(guo)預處(chu)理(li)過(guo)程將(jiang)不(bu)同(tong)存(cun)儲(chu)格(ge)(ge)式(WAV、MP3)和(he)不(bu)同(tong)規(gui)格(ge)(ge)(采樣率、聲(sheng)道數(shu))的(de)音頻數(shu)據(ju)提(ti)取出來,得到物理(li)樣本(ben)級(ji)的(de)數(shu)據(ju),包括采樣率,編碼方式等信(xin)息,對音頻數(shu)據(ju)進行加窗分(fen)幀后進行相應的(de)存(cun)儲(chu)。

2、特征提取和分類

特征(zheng)(zheng)提取(qu)主要(yao)是研(yan)究音(yin)(yin)(yin)(yin)頻(pin)信(xin)號(hao)的(de)(de)(de)特征(zheng)(zheng)參數,根據時(shi)域分(fen)析和頻(pin)域分(fen)析等(deng)方法進行提取(qu)音(yin)(yin)(yin)(yin)頻(pin)信(xin)號(hao)的(de)(de)(de)聲學特征(zheng)(zheng)以(yi)及(ji)語義內容。系統包含的(de)(de)(de)音(yin)(yin)(yin)(yin)頻(pin)特征(zheng)(zheng)主要(yao)有(you):音(yin)(yin)(yin)(yin)量(liang)、音(yin)(yin)(yin)(yin)調(音(yin)(yin)(yin)(yin)高)等(deng)基本(ben)屬(shu)性以(yi)及(ji)頻(pin)率分(fen)布(bu)范圍等(deng)時(shi)域頻(pin)域特征(zheng)(zheng)。音(yin)(yin)(yin)(yin)頻(pin)特征(zheng)(zheng)分(fen)類是描(miao)述音(yin)(yin)(yin)(yin)樂(le)表現形式分(fen)類的(de)(de)(de)計算(suan)方法,將提取(qu)出來(lai)的(de)(de)(de)特征(zheng)(zheng)分(fen)成不(bu)(bu)同(tong)(tong)的(de)(de)(de)音(yin)(yin)(yin)(yin)樂(le)表現形式,用來(lai)對應不(bu)(bu)同(tong)(tong)的(de)(de)(de)噴(pen)泉動畫布(bu)局。

3、噴泉動(dong)畫參數(shu)分析和(he)解析

主(zhu)要(yao)分析(xi)(xi)(xi)噴(pen)(pen)(pen)泉的(de)(de)(de)動(dong)畫(hua)表現形式,比如噴(pen)(pen)(pen)泉高度、噴(pen)(pen)(pen)泉噴(pen)(pen)(pen)射粗度、噴(pen)(pen)(pen)泉周期運動(dong)速率等參數(shu)(shu)。特(te)(te)征(zheng)解(jie)析(xi)(xi)(xi)主(zhu)要(yao)研究(jiu)音(yin)(yin)樂(le)(le)(le)的(de)(de)(de)審(shen)美(mei)體驗層次,并根據音(yin)(yin)樂(le)(le)(le)審(shen)美(mei)層次設計(ji)如何利用音(yin)(yin)樂(le)(le)(le)特(te)(te)征(zheng)控制噴(pen)(pen)(pen)泉動(dong)畫(hua)參數(shu)(shu),實現從音(yin)(yin)樂(le)(le)(le)聽覺(jue)上到噴(pen)(pen)(pen)泉視覺(jue)上的(de)(de)(de)反映,水景噴(pen)(pen)(pen)泉公司要(yao)實現音(yin)(yin)樂(le)(le)(le)特(te)(te)征(zheng)和噴(pen)(pen)(pen)泉動(dong)畫(hua)的(de)(de)(de)統一結合。音(yin)(yin)樂(le)(le)(le)特(te)(te)征(zheng)解(jie)析(xi)(xi)(xi)的(de)(de)(de)音(yin)(yin)樂(le)(le)(le)噴(pen)(pen)(pen)泉展(zhan)示系(xi)統,就是根據音(yin)(yin)頻信號的(de)(de)(de)音(yin)(yin)頻特(te)(te)征(zheng)控制噴(pen)(pen)(pen)泉動(dong)畫(hua)參數(shu)(shu)進而實現噴(pen)(pen)(pen)泉動(dong)畫(hua)單元。

音(yin)(yin)(yin)頻特(te)征(zheng)解(jie)析主要(yao)工作(zuo)是(shi)從音(yin)(yin)(yin)頻文件中(zhong)提取(qu)音(yin)(yin)(yin)頻特(te)征(zheng),并進一步將音(yin)(yin)(yin)頻特(te)征(zheng)轉化為噴(pen)泉(quan)(quan)動畫參(can)數(shu)的(de)控(kong)制信息。水景噴(pen)泉(quan)(quan)公(gong)司認為從本質(zhi)上來說,音(yin)(yin)(yin)頻特(te)征(zheng)解(jie)析是(shi)將音(yin)(yin)(yin)頻數(shu)據(ju)從音(yin)(yin)(yin)頻的(de)底層(ceng)(ceng)層(ceng)(ceng)次(ci)結(jie)構向音(yin)(yin)(yin)頻高層(ceng)(ceng)層(ceng)(ceng)次(ci)結(jie)構探究的(de)過程,以及(ji)設計(ji)實現(xian)音(yin)(yin)(yin)頻特(te)征(zheng)控(kong)制噴(pen)泉(quan)(quan)動畫參(can)數(shu)的(de)過程。