声音可视化：让音乐在你的眼前跳舞

音乐只有声音，没有形状和色彩；绘画有形状和色彩，却没有声音。然而，当我们沉浸在音乐中时，脑海中常常会浮现出丰富的画面；当我们凝视一幅绘画作品时，心中有时也会响起与之相契合的旋律。正如蒙克的《呐喊》，其强烈的视觉冲击力仿佛让画中人物的呐喊声冲破画面，在观者的耳畔久久回荡。康定斯基的抽象画色彩和线条和谐优美，仿佛为观者奏响了一曲热烈动人的交响乐。至于那些由音乐引发的画面和情感，更是不胜枚举，它们如同一个个故事，随着旋律在我们的心中缓缓展开。

这种现象其实是人类大脑的一种神奇的能力，它能够将不同感官的体验相互联系，创造出超越单一感官的丰富体验。

我们的感官如同精密的接收器，各自捕捉着外界的独特信号，然后传送到大脑：耳朵聆听声音、眼睛感受光影……然而，这些感官的体验却不是截然分开的，一种感官刺激可能会引起另一种感知，这就是“通感”。一般来说，视觉和听觉之间较易形成通感，就像听到音乐时脑海中会形成相应的画面、看到画面时会产生听到某种声音或旋律的感觉一样。通感在文学作品中运用得较多，最著名的当数朱自清在《荷塘月色》中的描述：“塘中的月色并不均匀；但光与影有着和谐的旋律，如梵婀铃上奏着的名曲。”文字描写得越动人，越能够打通人的感官。在影视作品中，音乐更是必不可少。音乐的加入会让剧情更具有感染力，使观众产生身临其境之感，这也是通感的体现。

过去，艺术家在用绘画表现音乐时，通常描绘的是个人的体验和感受。这种感觉往往是感性的、模糊的。如今，人们开始利用数字技术把音乐转化成画面，并将其称为音乐可视化，这种技术更加理性和清晰。在此过程中，首先要提取音乐的频率、振幅、节奏、旋律、和声等信息，然后依据一定的规则和算法，将这些听觉元素映射到不同的视觉元素上，如颜色、形状、大小、位置、轨迹等，生成动态的视觉图像，并随着音乐的演奏而不断变化。

1977年，首款商用的音乐可视化工具——雅达利视频音乐系统问世了。它本质上是一种视频游戏，通过连接高保真音响系统，让用户在电视屏幕上欣赏到音乐的视觉呈现。20世纪70年代，舞厅中广受欢迎的灯光管风琴是早期的音乐可视化装置。这种装置通过电子技术将音乐信号转化为节奏鲜明的灯光效果，其内部电路将输入的音频信号分解为不同的频段，并根据各频段的音量，通过调光电路控制与之连接的灯泡的亮度。当时的派对用灯光管风琴配备了三个反光灯泡，以红色、黄色和蓝色分别代表低音、中音和高音。复杂的灯光控制器的问世，以及数字多路传输技术的引入，使数字化灯光控制成为可能。

随着数字技术的飞速发展，音乐可视化在虚拟空间中可以被轻松实现。但艺术家们并不满足于此，有的艺术家将音乐转化成动画片，有的艺术家则尝试打破虚拟与现实的界限，运用各种媒介材料，将声音转化为摄影作品或装置艺术作品，创造出更加丰富多彩的声音可视化作品。

2022年，国家大剧院与中央美术学院联合推出实验性综合艺术展览“音乐的形状——通感之旅系列展”。此次展览通过九部动画作品和一组“馨·声——声香二感共振体验装置”，让观众深度体验不同感官被同时触发的独特感受。展览选用中外经典音乐的片段，艺术家和调香师根据音乐的调性和内涵，巧妙地设计了与之相呼应的画面和气味。动画片的播放和香气的变化，都与乐曲的旋律保持同步。

看到这幅画面，你会联想到哪首乐曲呢？

德国艺术家马丁·克里马斯用颜料创作了一系列声音可视化作品。他将弹性薄膜覆盖在扬声器上，并在薄膜的表面倒上特定颜色的液体颜料或粉末状颜料。当扬声器播放音乐时，随着音乐的强弱震动，颜料便开始跳舞，有时甚至会呈现出“爆炸”的效果。不同色彩的颜料，波动的状态也有所不同，由此产生出丰富的层次变化。克里马斯采用高速摄影技术，捕捉这些颜料在音乐的影响下“跳舞”或“爆炸”的瞬间，并将其制作成摄影作品。

在《声音雕塑》作品中，克里马斯深入地探索了“音乐是什么样子”这一主题，将声音转化为我们真正能看到的画面。

《声音爆炸》是《声音雕塑》的延续之作，克里马斯依旧关心“音乐是什么样子”，并试图让音乐的制作过程变得可见。他邀请了几位音乐家，使用1930年至1990年间制造的模拟合成器制作短声音序列。然后，他在专门的设备上播放这些声音。这一次，他使用粉末状颜料来捕捉声音的微妙变化。反射、干涉、折射和衍射等基本的波现象会产生声音的差异，进而转化为视觉上的节奏，粉末颜料为这些声音片段的振动赋予了生命力。随着克里马斯将音量调高，粉末颜料在振动时发生了“爆炸”。

《声音爆炸》是一系列双联摄影作品，照片中一半是电缆、一半是颜料爆炸的画面，向观者展示了创造出这种“色彩缤纷”的交响曲的电线、电缆和表盘，让人们了解了处理声音的复杂性。通过这种独特的科学视角和充满趣味的艺术表达，《声音爆炸》成功地以视觉的形式唤起了人们对声音的感知。

克里马斯在“纯音”系列作品中去除了有组织的声音或节拍，并使用频率发生器，输出音乐最基本的组成部分。他运用正弦音调刺激水面，从而拍摄由此产生的“驻波”现象。这些作品将以透镜印刷的形式显示，让观者得以从多个角度欣赏每一个音调所引发的独特波纹。

英国女艺术家莉兹·K . 米勒以独特的艺术视角，选择了一个朴素的、常常被人们忽略的声音——“森林之声”作为创作对象。她深入各地的森林，捕捉那些来自大自然的声音：树叶沙沙的摩擦声、阳光下水雾蒸腾的声音、雨滴敲打植物和地面的声音……她使用立体声全向麦克风将这些声音全部录制了下来。

2018年夏天，米勒在苏格兰马尔岛的森林中录制了高温天气下雨水撞击干燥地面的声音。她将水听器埋入地表之下，记录了雨水撞击大地的声音。随后，米勒运用频谱图的数字渲染技术对暴雨现场的录音进行了深入分析。在频谱图中，时间沿着横轴展开，而频率则随着纵轴上下起伏。米勒重新设计了声景的视觉格式，将频谱图与手绘的雨滴滴落在窗玻璃上的图案结合起来，最后得到了四张图像，分别代表四个不同的分贝范围，最暗的图像表示最响的雨滴声，而最亮的图像表示最微弱的雨滴声。

米勒将这四张图像制作成与人身高相近的户外帆布条幅，并用其将观者环绕起来，制造出从地下进行现场录音的视角。这一装置艺术名为《聆听森林》，它引导观者从一个全新的视角去关注和聆听森林中那些容易被忽视的声音元素，从而与森林建立更深的联系。

不论技术如何进步，触动心灵的感知始终是艺术家的灵感来源，借助新的技术，能将这些主题表现得更加丰富多样。