*本文来源：新媒体艺术站（公众号ID: mediaart）；作者： 新媒体艺术站；原标题：《当95后音乐女神和科技艺术相遇》
将艺术家演绎的情感数据可视化，为听众带来声、光、影等多维感官体验。
“95后”钢琴家万捷旎，3岁学琴，20 岁就与世界级指挥大师合作。先后在慕尼黑音乐与戏剧大学和耶鲁大学学习，她不仅是一位有深厚古典钢琴功底的钢琴音乐家，也是一位富有表现力和创新精神的艺术家。凭借出色的实力和颜值，万捷旎被粉丝称为“音乐女神”，“耶鲁才女”。△ 万捷旎与谭盾合作
去年9月起青年钢琴家万捷旎联手新媒体演出制作团队限像工作室（Limage Studio）展开了为期近三个月的音乐会巡演《15°——万捷旎的钢琴与数字印象》，这是一场充满未来感的音乐会，古典音乐与动作捕捉、3D扫描、算法动画、舞台全息成像等最新的数字技术手段相结合，将艺术家演绎的情感数据可视化，为听众带来声、光、影等多维感官体验。以钢琴音乐会之名演绎中国传统文化中的“二十四节气”，唤醒埋藏在都市生活中对自然与生命的感知，催化每个观众心中的“四季”。
本次多媒体钢琴演出项目由同济大学设计创意学院教授范圣玺项目担任策划与艺术总监，限像工作室（Limage Studio）承担了包括新媒体设计、演出制作和巡演舞台执行等工作。
音乐与自然，科技与艺术，过去与现在，在徜徉声、光、影的世界里，一场奇妙的跨界旅程即将开启。
01
科技与艺术联动
新媒体部分运用了算法动画、动作捕捉、3D扫描、舞台全息成像等技术手段，为每一首乐曲以及对应的季节进行视觉化的解构与表达，延展音乐的情感在当下的情景之中，营造出声景相融的意境。 △ 动作捕捉测试
新媒体导演张屹南在十几年来与不同器乐演奏者不断合作以打磨高品质舞台新媒体音画体验，在设计中希望探寻乐曲自身的结构、和声、旋律蕴含的诗意的通感体验，说到舞台中的音乐可视化，他认为：“这远不止是叠加光影视效的单纯技术活，其中的设计思考有着诸多门道。好的视听演出作品中音、画之间的对位关系是若即若离的，其中的度的把控很是关键，两者过于疏离则会生硬牵强，对位过于精确则又会显得刻意而缺少想象空间。设计的乐趣就在于如何把控进退之间的平衡感。” 钢琴家与设计团队紧密合作，共同策划探讨，设计团队前期对钢琴演奏进行了大量数据采集与提炼，并有机整合于内容制作。作品产出与其说是音乐会，不如说是先锋艺术家们共同携手的跨界之旅。
在“冬”单元的《雪之舞》演奏中，漫天飞舞的雪花随音乐频率律动，群集的运行轨迹组成了各种有形的图案，寓意自然法则是将无数个拥有自由意志的单体集合起来，由简至繁并形成互相关联的有机整体。△ 3D扫描古典园林中的树木与假山石
△ 古镇 3D点云合成图
△ “点云古镇”效果演出现场
△ 古镇 3D扫描资料
△ 植物园3D扫描花絮
为了呈现这些自然与科幻交织的形态，工作人员特意前往江南古镇，在古典园林中用3D扫描技术采集了树木与假山石形态数据，“有形但为无形造”，虚实相生，通过新的技术手段和创作思维，团队力求营造新视角下中国园林文化在现代文明中衍生重塑。《⾬滴》是肖邦著名的前奏曲，曲风显现出忧郁、深沉与一丝躁动，是夏天雨夜中独自的沉思与冥想。
新媒体的创作并没有根据音乐标题来再现雨天场景，而是通过全息呈像技术与对民间关于夏日的传说研究，力图描绘出一个水下的虚幻世界，以中国青铜器图案纹样、鸟兽图腾为灵感，制造出萦绕于舞台钢琴上方的巨大的动态立体图腾。
在德彪⻄的《⽉光》中一轮秋月高悬于舞台上方，随着音符流淌，计算机算法驱动了月球内部的几何图案变幻，为观众展现云中月、水中月、林中月、镜中月等各种纯净灵动的意境。在《春舞》中采用动作捕捉和深度影像捕捉技术，充分呈现钢琴家在演奏中手的表现力，同时还捕捉了木偶表演艺术家的手部演绎，将中西方文化在自然元素的映衬下再次进行有趣的“碰撞”。
△ 《雀⻦》演出现场
《雀⻦》是热情、阳光、奔放的夏日狂欢。动画设计团队通过对提线木偶表演方式的摸索，由操偶师来牵动产生与众不同的角色动画的表达。
《春之旅组曲》从微观视角出发，让观众体验到自然界无所不在的数理结构。设计师团队研究了数十种属于春天节气的花朵，并提炼出花朵的抽象图案，将不同植物的花期结合音乐旋律，一朵朵虚拟之花跃然眼前。
△ 《新⾬后》原画设定与3D效果
《新⾬后》中五声音阶组成的旋律以及曲目所表达的时节属性，苏辙的“飘渺营丘水墨仙，浮云出没有无间” 豁然映入脑海。 数字生成的水墨画伴随音乐起伏与流淌。
△ 《秋月》演出现场
△ 秋月 原画设定与生成效果
谭盾《八副水彩画的回忆“秋月》中，秋的色彩、风染秋色、秋色渐浓到层林尽染、夜色渐起到秋月高悬。音乐中呈现出大写意的自由速度与泼墨的流淌感，计算机生成的画面提取了范圣玺教授创作的水彩画里分布的像素色彩数据，并跟随音乐波形律动，尽情的渲染着绚烂秋色。
△ 《追雪》演出现场
《追雪》展现了一种宇宙自然视角，积聚、宏大、广漠、雄壮。万物的律动由神经网络一般相互联通。深邃的海面下蕴藏的无限力量，宇宙星河中的轮回与交替，对规律、秩序与平衡的结构重组。
音乐与空间光影变幻产生特殊的韵律，创造了节气的时间流淌，就如本次项目策划、艺术总监范圣玺教授形容，“好比风吹树摇，风通过树发出声音，树因为风而摇动，声音的强弱，树摇晃的姿态，是浑然一体的。
△ 范圣玺教授策划概念图
节气的概念和元素贯彻在演出中，伴随音乐舒展，弥漫于剧场空间。影像与空间强化了那些片刻的真实，“西方刹那间，目前便见”，也许每个人独特的感悟便是那些“微小”被放大的瞬间。
音乐会呈现了15首由钢琴家精心挑选的曲目，以自然季节为题，按岁月编排组织，包括肖邦、格里格、德彪西、李斯特、门德尔松、谭盾、丁善德、孙以强、汪立三等中外作曲家的经典乐曲。
04
更多演出现场剧照
自然创造了音乐，音乐也遵循着自然中的数学规律；音律中的纯十五度，包含了二十四个半音；若以每十五度划分太阳周年的运动轨迹，则构成了二十四个节气；自然中的春华秋实、风声雨声，将由琴键与数字媒体共同演绎。
△ 十五度—— 万捷旎的钢琴与数字印象
演出团队：
策划、艺术总监：范圣玺
新媒体导演：张屹南
执行导演：李悦娟
舞台监督：刘晶
舞台执行顾问：杨惠君
灯光设计：沈韵
灯光执行：侯胤朱、周伟
表演顾问：郑聿倩
新媒体现场执行：邓晴
设备技术：张若愚
技术助理：高浩衍、刘曌
新媒体设计：
张屹南 李悦娟 周星
许晓栋 洪啸 吴昱
谭丞超 顾天润 吴迪
赵星芮 冯泗衡 邓晴
王依琳 陈曦云天 安启源
余秋瞳 陈苏皖
徐艺晨 岳盈盈 黄秋韵
徐婷玉 李佳奕 袁芃凡
王乐凯 武洲 黄舒凡
张千雪 夏淼
主办：
