沉浸式专业视频体验,从AMD开始

微博

QQ

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

2023-06-02 依马狮视听工场


人工智能时代来了

艺术会消亡吗?

当电子音乐进入人工智能的时代

你准备好了吗?

 

5月29日,中央音乐学院的《面向未来:电子音乐与AI的交响》音乐会在歌剧音乐厅顺利开演,音乐会由俞峰校长担任艺术总监,管晓宏院士担任AI技术总监,音乐人工智能与音乐信息科技系主任李小兵教授担任执行总监并主持音乐会,是国内首场深度融合AIGC、3D音频、脑科学等前沿科技的音乐会。

易科为本次音乐会提供了全套的沉浸式扩声系统、多媒体服务器及总控系统服务。这是一场青春无悔的实验,也是一个惊心动魄的奇点,人类未来的艺术将站在AI巨人肩上前行!

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

《面向未来:电子音乐与AI的交响》音乐会的作品以基于“央音华为”实验室制定的3D音乐标准制式进行制作,但现场的扬声器布局不能满足标准的回放要求,听感会大打折扣。另外9.1.4及立体声等其他回放制式也会穿插在演出中,这就需要新的音频技术,在非标准回放场地实现基于声道的标准制式回放效果,借助独有的自适应波场合成算法,来自荷兰的Astro Spatial Audio沉浸式系统可以完全解决上述问题。

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

在视频的需求中,除了常规的4K视频播放外,还需要对现场的人机交互和其他视频源进行采集,以画中画的方式播放,这就需要多媒体服务器对采集和回放的视频进行相应的结合,并且对音视频同步播放也有相对较高的要求。

来自法国的Modulo Pi具有视频播放、采集、拼接融合、演艺总控及追踪互动等多种功能于一身。通过视频采集卡,对实时播放的互动系统画面进行采集,同时利用NDI网络采集的形式,对导赏PPT和自动AI作曲软件等画面进行采集。利用双图层加分辨率坐标移动的原理,将两个视频源进行叠加,实现双视频输入画中画的播放。

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

在网络规划方面,借助Modulo Pi多媒体服务器双网卡的特性,让视频网络与音频网络及总控网络彻底隔绝。避免了由于视频流占用了多数带宽导致其他网络带宽不够而产生卡顿的情况。

总控方面,视频多服务器的控制网络与Dante和音频控制网络相结合,通过OSC控制协议,对Qlab播放器发送指令,保证了音视频同步播放。

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

主扩系统方面,此次采用了LCR的系统配置,使用了3组EAW ANNA自适应扬声器。其中左右声道为各6只ANNA落地堆叠摆放,中置声道使用一组4只ANNA吊挂在台口上方的中央。3组ANNA自适应扬声器采用先进的电子控向技术,可根据使用需求灵活调整覆盖范围,最终在音乐厅内实现一层观众区均匀的声场覆盖,完美满足沉浸声系统的覆盖需求。超低系统则使用EAW SBX218 双18寸超低音扬声器,扩展系统的低频下限,适当补充音乐的低频能量。

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

除此之外,易科专为沉浸式系统研发的ezacoustics IMC8同轴点声源扬声器作为沉浸声的左、右、后环绕各4只扬声器,分别采用支架安装。顶部4只的前方两只与中置主扩扬声器一同吊挂在台口上方,后方顶部两只扬声器则以一定角度固定在剧场二楼观众席前侧。

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

沉浸式系统的左、右、后、顶部扬声器均使用Powersoft X8+Dante进行驱动,每一只扬声器都对应X8功放的单独通道,真正做到在演出现场让更多的观众享受7.1.4声道重现监听室内沉浸式的体验。

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

调音台则采用Allen&Heath旗舰dLive系列S7000+DM64的组合,现场使用Qlab软件播放节目音源,并通过S7000后面板的Dante扩展卡将多轨音频传输到调音台系统,此外我们还在S7000台面上加装了一张Super MADI扩展卡,该扩展卡和Dante扩展卡都支持128X128路的音频信号传输,通过Super MADI扩展卡可以将调音台内部的Direct out以及Group信号直接送到沉浸式引擎进行处理。

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

演出中的钢琴使用了Audix话筒SCX25A进行拾音,古筝则使用了SCX1。其中SCX25A可用于各类立体声现场录音,话筒外观优雅,能显著减少声学反射和衍射,呈现充满细节感和真实感的纯净声音。SCX1灵敏度高、精确性强,轴向声能和偏轴向声能表现一致,并具有出色的相位一致性和极弱的近讲效应。是鼓、乐器、管弦乐、弦乐器、钢琴、手风琴等扩声和录制的理想选择。

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

 

本场音乐会现场座无虚席,掌声、喝彩声不绝于耳。音乐会以时代赋予艺术工作者的责任感和使命感,探索了电子音乐在AI时代的发展路径,体现出中央音乐学院“5•23”艺术节高度的政治性、深刻的思想性、鲜明的时代性和精湛的艺术性。

 

 

系统评价

 

当电子音乐与AI相撞,看沉浸声如何编织出交响的火花

李小兵

著名作曲家、中央音乐学院教授、博士生导师

音乐人工智能与音乐科技系系主任

 

“本场沉浸式交互音乐会的视听,实现了多层次相融合的完美效果。不论是清澈且润的独奏,自然平顺的点声源轨迹移动效果,还是全沉浸时声场均匀的表现力与动态效果,都使人身临其境。易科团队专业、认真,现场的音响充分展示了3D音乐的艺术魅力,震撼!”

 

易科 沉浸式扩声 AI

视听科技视频号 广告
发表评论