【易科】當電子音樂與AI相撞,看沉浸聲如何編織出交響的火花
來源:易科 編輯:VI菲 2023-06-05 11:39:03 加入收藏
人工智能時代來了
藝術會消亡嗎?
當電子音樂進入人工智能的時代
你準備好了嗎?
5月29日,中央音樂學院的《面向未來:電子音樂與AI的交響》音樂會在歌劇音樂廳順利開演,音樂會由俞峰校長擔任藝術總監,管曉宏院士擔任AI技術總監,音樂人工智能與音樂信息科技系主任李小兵教授擔任執行總監并主持音樂會,是國內首場深度融合AIGC、3D音頻、腦科學等前沿科技的音樂會。
易科為本次音樂會提供了全套的沉浸式擴聲系統、多媒體服務器及總控系統服務。這是一場青春無悔的實驗,也是一個驚心動魄的奇點,人類未來的藝術將站在AI巨人肩上前行!
《面向未來:電子音樂與AI的交響》音樂會的作品以基于“央音華為”實驗室制定的3D音樂標準制式進行制作,但現場的揚聲器布局不能滿足標準的回放要求,聽感會大打折扣。另外9.1.4及立體聲等其他回放制式也會穿插在演出中,這就需要新的音頻技術,在非標準回放場地實現基于聲道的標準制式回放效果,借助獨有的自適應波場合成算法,來自荷蘭的Astro Spatial Audio沉浸式系統可以完全解決上述問題。
在視頻的需求中,除了常規的4K視頻播放外,還需要對現場的人機交互和其他視頻源進行采集,以畫中畫的方式播放,這就需要多媒體服務器對采集和回放的視頻進行相應的結合,并且對音視頻同步播放也有相對較高的要求。
來自法國的Modulo Pi具有視頻播放、采集、拼接融合、演藝總控及追蹤互動等多種功能于一身。通過視頻采集卡,對實時播放的互動系統畫面進行采集,同時利用NDI網絡采集的形式,對導賞PPT和自動AI作曲軟件等畫面進行采集。利用雙圖層加分辨率坐標移動的原理,將兩個視頻源進行疊加,實現雙視頻輸入畫中畫的播放。
在網絡規劃方面,借助Modulo Pi多媒體服務器雙網卡的特性,讓視頻網絡與音頻網絡及總控網絡徹底隔絕。避免了由于視頻流占用了多數帶寬導致其他網絡帶寬不夠而產生卡頓的情況。
總控方面,視頻多服務器的控制網絡與Dante和音頻控制網絡相結合,通過OSC控制協議,對Qlab播放器發送指令,保證了音視頻同步播放。
主擴系統方面,此次采用了LCR的系統配置,使用了3組EAW ANNA自適應揚聲器。其中左右聲道為各6只ANNA落地堆疊擺放,中置聲道使用一組4只ANNA吊掛在臺口上方的中央。3組ANNA自適應揚聲器采用先進的電子控向技術,可根據使用需求靈活調整覆蓋范圍,最終在音樂廳內實現一層觀眾區均勻的聲場覆蓋,完美滿足沉浸聲系統的覆蓋需求。超低系統則使用EAW SBX218 雙18寸超低音揚聲器,擴展系統的低頻下限,適當補充音樂的低頻能量。
除此之外,易科專為沉浸式系統研發的ezacoustics IMC8同軸點聲源揚聲器作為沉浸聲的左、右、后環繞各4只揚聲器,分別采用支架安裝。頂部4只的前方兩只與中置主擴揚聲器一同吊掛在臺口上方,后方頂部兩只揚聲器則以一定角度固定在劇場二樓觀眾席前側。
沉浸式系統的左、右、后、頂部揚聲器均使用Powersoft X8+Dante進行驅動,每一只揚聲器都對應X8功放的單獨通道,真正做到在演出現場讓更多的觀眾享受7.1.4聲道重現監聽室內沉浸式的體驗。
調音臺則采用Allen&Heath旗艦dLive系列S7000+DM64的組合,現場使用Qlab軟件播放節目音源,并通過S7000后面板的Dante擴展卡將多軌音頻傳輸到調音臺系統,此外我們還在S7000臺面上加裝了一張Super MADI擴展卡,該擴展卡和Dante擴展卡都支持128X128路的音頻信號傳輸,通過Super MADI擴展卡可以將調音臺內部的Direct out以及Group信號直接送到沉浸式引擎進行處理。
演出中的鋼琴使用了Audix話筒SCX25A進行拾音,古箏則使用了SCX1。其中SCX25A可用于各類立體聲現場錄音,話筒外觀優雅,能顯著減少聲學反射和衍射,呈現充滿細節感和真實感的純凈聲音。SCX1靈敏度高、精確性強,軸向聲能和偏軸向聲能表現一致,并具有出色的相位一致性和極弱的近講效應。是鼓、樂器、管弦樂、弦樂器、鋼琴、手風琴等擴聲和錄制的理想選擇。
本場音樂會現場座無虛席,掌聲、喝彩聲不絕于耳。音樂會以時代賦予藝術工作者的責任感和使命感,探索了電子音樂在AI時代的發展路徑,體現出中央音樂學院“5•23”藝術節高度的政治性、深刻的思想性、鮮明的時代性和精湛的藝術性。
系統評價
李小兵
著名作曲家、中央音樂學院教授、博士生導師
音樂人工智能與音樂科技系系主任
“本場沉浸式交互音樂會的視聽,實現了多層次相融合的完美效果。不論是清澈且潤的獨奏,自然平順的點聲源軌跡移動效果,還是全沉浸時聲場均勻的表現力與動態效果,都使人身臨其境。易科團隊專業、認真,現場的音響充分展示了3D音樂的藝術魅力,震撼!”
評論comment