蜿蜒的河流
随着时间的推移,自然力量逐渐塑造了景观。肉眼无法分辨,我们一次只能感知一个时刻。河流的波动和有节奏的运动是对过去的一瞥,因为痕迹提供了我们周围不断变化的证据。
»蜿蜒的河流«是一个视听装置,由算法生成的实时视觉效果和人工智能创作的音乐组成。这种数字艺术作品通过创造独特的时间意识来感知变化。这件作品跨越多个屏幕,通过可视化和声音化河流对地球表面的影响,重新诠释了河流的变化行为。
视听装置创造了景观的鸟瞰图。这种方向概念化了人类对空间和时间的新视角,试图破译不可预测的模式。通过从有影响力的角度体验它,实时视觉效果在更大范围内展示了正在发生的事情。
基于定制算法,生成的图像中固有的涟漪和振荡运动提供了一个有利位置,可以转变对进步的理解,检查自然力量的节奏。随着“蜿蜒的河流”不断演变的模式出现,观众对变化的不可预测性和自然之美产生了一种谦卑的感觉。
研究——让改变可见
几十年来,随着水侵蚀地面,形成河床并将土壤沉积物带到其他地方,流动的河流结构发生了变化。沉积和侵蚀景观的效果会根据地面的阴影和质量改变颜色的形成。
通过调查研究这种自然现象的学术和科学研究,开发了不同的算法来真实地模拟河流不可预测的运动,并重新解释它们的有机结构、节奏波动和视觉物质性。
在视觉研发过程中,创建了一个定制的渲染管道,允许迭代视觉探索和组合。各种着色器和算法作为图形层实时应用,以模拟自然外观,如水力和热力侵蚀、牛轭湖和曲折疤痕。额外的后处理过程,如表面材质、植被和照明,使最终的景观构图能够达到作品预期的视觉粒度和质量。
抽象风景的真实卫星图像的多样化和绘画美感为最终作品的外观发展提供了视觉灵感。
由AI组成的伴奏音景
乐谱是与 kling klang klong 合作开发的,旨在增强视觉美学的情感、复杂和不可预测的本质。通过对各种计算策略的研究,音乐作品是使用 Google Magenta Performance RNN 学习模型和定制的程序系统创建的。
为了收集训练数据集,钢琴演奏者被邀请根据动画的不同视觉场景即兴创作乐句。他们制作的一系列听觉解释是可供人工智能学习的大规模复调清单。为了反映作品的表演性,实时分析和解释从河流模拟直接输出的数值,例如蜿蜒河流的长度、曲率和连接事件,以影响节奏、音符强度、强度、音高范围。
由于以 kling klang klong 的估值为指导进行迭代过程,该机器完成了原创乐谱的创作,其和声质量达到了人类作曲家的预期标准,并在视觉和音乐之间建立了丰富的电影联系。
作为最终结果,艺术品由六种不同的视觉模式组成,每种模式都伴随着独特的音乐作品。下面的完整视频展示了视觉和声音的最平衡的相互作用。
学分
创意指导:塞德里克·基弗制作:奥雷利安·克里格代码与设计:Henryk Wollik研究:João da Fonseca、Luca Lolli音频概念和作曲:kling klang klong硬件供应商:ICT AG | 柏林
展览
当代伊斯坦布尔,伊斯坦布尔 2017Funkhaus,柏林 2018国家设计与工艺画廊,基尔肯尼 2018STATE 工作室,柏林,2019谷歌 I/O,山景城,2019AI for Good 全球峰会,人权室,联合国日内瓦,2019Ars Electronica STARTS 展览,林茨,2019UN Art Center, Shanghai 2019Scopitone 音乐节,南特,2019TASIES 2019 第五届国际艺术与科学展览暨研讨会,北京,2019NTAA 19新技术艺术奖展,根特,2019深圳设计学会,2019Mianki 画廊,柏林,2020