科技新媒体与音乐图像学的创新融合发展

许柯 （山西大学）

前 言

音乐图像学作为一门产生于20世纪的新兴交叉学科，对音乐学科的发展产生了积极的影响推动作用。音乐与图像这样两个听觉与视觉的艺术在这一学科间充分融合，相互交叉，有着广泛的研究领域。但音乐图像学在发展中还存在一些问题，需要我们广泛探索积极求证。而新时代下高科技技术发展为我们搭建了一个广阔平台，新媒体又在被喻为“万物皆媒”的时代快速发展，与我们生活紧密相连。将音乐图像学与新媒体结合在一起研究，既是学术界更加重视学科之间的发展与整体性的宏观研究趋势，又是音乐图像学结合时代科技加快学科发展的必然要求。在完善学科基础体系工作下，我们如何利用好它，并处理好他与复杂交叉学科的关系，将是我们积极探索的目标。

一、新媒体下的音乐图像学

音乐图像学起源于20世纪上半叶，最早是瓦尔堡在1912年提出了图像学的概念，并成为20世纪西方重要艺术研究方法，瓦尔堡后来也成为20世纪艺术音乐与图像学研究新领域的重要开拓者之一。之后又相继涌现了一大批音乐图像学研究的论著，并在此基础上一些德语国家的学者率先开始开拓工作，逐步将音乐图像学从“配角”变为“主角”成为一门独立的研究学科。中国的音乐图像学研究略晚于西方十余年，新中国成立后对音乐图像学科开始成体系地开发研究。中国的音乐图像，相比西方有着更久远的历史和更高质量的存量，在借鉴国外学术研究成果的基础上经过近百年的发展，中国音乐图像学学科研究存在着巨大的发展空间。

音乐图像学这门学科的研究对象是一切与音乐有关的平面视觉艺术作品，也可以理解为针对以音乐为题材的美术作品进行研究。一种图像往往可呈现出多种音乐现象，而具体音乐内容的展示又需要多项图像材料的互证。音乐图像学的出现极大的弥补乐器学、音乐表演、音乐家生平、乐谱记录和文化史等音乐资料考证工作，弥补了音乐史学方面的一些空白。为音乐史论研究提供可靠的音乐图像史料，对于我们从整体上、深层次把握音乐事物、音乐现象具有重要作用，了解发展音乐图像学也就成了音乐发展的必然要求。

纵观音乐的发展史，音乐图像属于一门新兴学科，而研究与新媒体相结合的音乐图像学发展，则是借助新媒体的相关技术以带动促进学科发展为目的。利用技术手段是新媒体艺术的主要特征，新媒体技术的使用虽然有别于传统媒体，但他们表达的情感是一样的，每一个作品传递的意义不会因为技术而改变。因此他只是技术上的革新，在新时代下以新姿态展现音乐作品而已。

新媒体技术自20世纪以来，随着电脑的发明、计算机技术的进步和普及，现代科学技术发展的速度越来越快，传播媒体技术得以快速发展。特别是科技新媒体技术的飞速发展，使信息正在以超乎寻常的速度走近我们身边，也同时为艺术创作提供了更多新的可能性。新媒体的快速发展使我们生活进入到全信息时代，每天有大量各式各样的信息传递到我们身边，新的科技知识和信息量使人类的信息量迅速增大。新理论、新技术、新工艺、新方法的不断出现，使计算机视觉技术、网络技术和互动技术逐渐进入了艺术实践领域，为新媒体艺术的发展注入了一股新的力量。而对待信息爆炸，视觉的表现却可以做到信息准确高效的传达，也就是对相关信息以图片形式作为基础加以呈现。音乐图像学即是对数据信息的一种可视化处理，且利用图像化的方式交流传承具有比较稳定的特点，它作为载体媒介受历史、文化、宗教的影响差异较小，人们利用音乐图像学研究相关音乐文化比较将直观可靠。因此新媒体作为媒体发展阶段中最新阶段，对社会生活、经济发展的改变正在逐渐增强，音乐图像学也可以借助信息全媒体时代大潮，融入新媒体发展，所以在现阶段将新媒体的研究作为学科发展中的重要一环十分必要。

音乐图像学是人类视觉体验下产生的学科，视觉图像传递一直是传递信息的重要手段，例如没有甲骨文的探索发现，人类文明创造历史将被改写。没有音乐图像很多音乐方面的发展将大幅滞后，音乐图像学不仅可以弥补这方面的空缺，同时也一直致力于通过独立发展与学科交融，在自己学科发展上保持自身发展，与新媒体融合发展，可以形成一种新的创新机制。创新是音乐作品创作成功的动力，也是学科发展的必备因素。在继承优秀的文化发展经验，把握好时代的文化特征的情况下，将两者有机结合，以促进学科发展。其中新媒体可以促进音乐新的发展，利用新媒体在影像编辑合成、人机互动、图像修复、三维虚拟、动画、灯光模拟等技术，这些都会对音乐图像学发展产生革命性突破。最早期媒体与音乐图像学的结合源于电视机的普及推广，电视中播放音乐片段，这种艺术形式通常被称为“录像艺术”。而在进入二十世纪八九十年代以后，计算机技术及摄影技术的提高为新媒体艺术带来了又一次发展机遇，从此开始才真正走进新媒体时代。

目前与音乐图像与新媒体技术主要应用于音乐考古资料留存、音乐情景剧、手机音乐视频、博物馆音乐文化展示、音乐创作和音乐教学等方面。两者结合获得新的创新，将能更加突出艺术自身的相对独立性和优越性，最终实现作品带给受众全新的审美体验。

二、新媒体与音乐图像学的运用

许多影响历史进程发展的重大科技革命，都直接促进成为艺术发展的新动力，甚至成为艺术的一部分。最初音乐图像的呈现，是由古董收藏者对其藏品的拓本及临摹本的编纂，早期的音乐图像著作以鉴赏性为主。新媒体时代背景下，科技水平飞速提升，出现了众多的新媒介：像数字影像、互联网、手机等，基于这些现代科技为基础前提下，信息可视化的图像艺术研究，以多种形式给我们生活构建了一种新的视觉空间，新媒体技术可以帮助我们在原有视觉表现和设计的艺术基础上提供更多可能性，给我们带来了以视觉探寻信息本体的审美体验和艺术感知。音乐图像借助这些新媒介来宣传展示自己，这使音乐图像应用更加多元化，表现形式更为的直观，也更加立体化，为新媒体下的音乐图像学科蓬勃发展创造提供了新动力。下面我就几种新媒体与音乐图像学的交叉融合应用逐一举例说明。

（一）数字新媒体下的音乐图像学运用

数字新媒体艺术利用科技新媒体与影像技术融合发展，体现了艺术与科学相结合的时代特征和人们对当代艺术发展新的诉求。数字技术的不断进步，极大地丰富了数字新媒体艺术的表现手段，促使数字新媒体艺术不断发展。最新数字技术充分有效的运用，不但会增强数字新媒体艺术在使用过程中的开放性和自由性，更能增强体验作品时艺术效果的丰富性与体验感。如今，先进的数字技术已经使文字、音乐、图像和影像等过去相互之间界限分明的各种信息，都可以以计算机语言进行数字化整合处理，从而促使传统艺术创作出新型艺术。

从文化资源开发来看，湖北曾侯乙墓出土的编钟，很难固定在一个平台上进行三维扫描。我们可以拍摄下正面图、侧面图和俯视图三个平面，用这三张图作为参考。然后以这些图像为参照物，对模型的各点进行定位，从而就可以得到编钟复原后的模型。同时音乐研究人员利用音色采样技术收集编钟音乐的音色构建一个数字虚拟音乐编辑和播放系统。以将尘封多年集聚古人智慧的器乐，再次得以重见天日，此次模拟修复即没有破坏文物本身，又将其模仿的淋漓尽致。将交融的图像用数字化手段展示，既可以将音乐图像更好的保存流传，也可以加大宣传覆盖面，也更加丰富了音乐图像的表达与应用。也给对音乐文化无从了解的人们提供了一个新的平台，为当地文化发展打造了一项高端品牌项目。

同时从音乐考古角度看，将新挖掘待考证的音乐遗物，利用数字新媒体保存，既可以给考证专家提供更丰富的资料，同时也可以将一些不易移动无法展示的音乐遗物，用它的影像资料代为展示也可以起到很好的宣传教育作用。音乐遗物主要包括出土乐器、出土乐谱、相关音乐文献记载和音乐图像等，它们是音乐考古学的主要研究对象。音乐遗存的时间跨度较长，文物保护相对较脆弱，长期在封闭无氧环境中，在出土后极易发生变质、损毁，第一时间将文物进行数字保护留存也就十分必要。最新数字新媒体技术的充分有效运用，不但会增强数字传媒在展示过程中的丰富性和自由性，更能增强体验感和作品生动性。

（二）互联网新媒体下的音乐图像学运用

互联网是联通世界的一张大网络，好比将网络与网络之间互相连结成一组庞大网络，这些网络以一组通用的协议相连，形成逻辑上的单一巨大国际网络。关于互联网的发展以及对于人类的影响，实在是无需多言，在此我们只研究互联网新媒体技术对于音乐图像学的应用影响。互联网加速了全球化的进程并且可以保持实时互动，在传播渠道上，网络上的音乐图像可以跨越地理和空间障碍进行交流和沟通，同时它相比传统媒体传播，在表现形式上，超越了单一媒介的局限性，具有更强的开放性与包容性，与当下个性化定制服务相契合。伴随着计算机的出现，网络的应用，音乐图像展示的途径更加多元，在传统艺术中，我们没有太多选项，往往是被动接受艺术家的创作，艺术家创作什么，发现什么样的美，我们就需要承认并研究它。即使我们有喜好，但这都无法改变作品的任何内容与形式。互联网的开放、连接、交互为资源共享提供基础，关系网络的生命力来自于网络的开放性与交互性，基于自愿和合作目的，网络在大量“弱连接”的关系中发挥桥梁作用，实现信息与资源在不同阶层的共享与交换，因此互联网新媒体下不再需要等待自己喜欢的音乐图像，可以自主选择搜索自己喜爱的音乐图像，它的出现使音乐图像的传播不仅局限在电视电影等影像画面上，互联网新媒体充分满足了大众个性化的“私人订制”适应于不同个体的需求喜好，这将对音乐图像发展将大有益处。

从资源综合利用角度来看，互联网技术与以往其他技术相比区别在于，它本身就是一种全新的社会结构与组织形式，它不仅决定了宏观场景的模式，还渗透至特定的场域，对于社交情境、社会角色与交往规则产生影响。互联网传播渠道速度的加快，以及普及不知不觉地削弱了人们对时间、距离、场所等固有的概念的感觉。只要网络能到达的地方大家都可以获取同样的信息，大家可以实时在线欣赏自己喜欢的图片美妙的音乐；可以在线学习音乐课程，山区可以和一线城市享受一样的音乐教育，一样的音乐欣赏；东部地区的历史专家可以足不出户，就能研究判断西部出土的音乐历史遗迹，这样互联网的交流既节省时间又方便快捷，资源得到了充分发挥，欣赏美成为一件触手可及的事情。

从技术革新角度来看，互联网技术打破了原有的传统的规则，在流动变换的社会场景中，需要人们在新的关系情境和社会期待中发挥能动性，重新寻找归属感与认同感，以适应新的场景。被喻为我国绘画史上伟大现实主义的风俗画，清明上河图描绘了北宋末年开封汴河沿岸的繁华景象以及社会生活的各个场面。其展览原本是以设计加装修为主体的清明上河图，且原画搬运较难，人们想在家门口一睹它的容颜则是难上加难。但随着上海世博会的召开，而是越来越多地运用到多媒体手段互联网环幕技术，让画册动起来，不仅图像更加清晰欣赏也更加方便，相比原画更加直观，体验感更加强烈。同时将资料上传上网，利用互联网的技术革新让画面走上网络，就真正做到足不出户就欣赏名家名作了。

（三）手机新媒体交互下的音乐图像学

随着我国社会经济科技发展手机使用已经很普遍，每人人手至少拥有一部手机，已经不足为奇，同时随着我国基础通讯设备的不断完善，手机信号基本满足了全国覆盖，也意味着在全国任意地方人人有手机人人使用手机已经完全可以实现。现如今手机的使用不仅体现在高普及率上，还体现在随着科技信息、大数据、5G等前端技术的介入，智能手机的功能也越来越强大，设计更加人性化，手机已经成为生活中重要的一部份。

手机发展其中最大限度实现了人机交互性，也就是可以人机互动沟通，相比互联网时代的应用搜索，手机新媒体技术的普及应用，在技术上又有了新的进步。特别是微博、微信、知乎、小视频播放软件等手机社交新媒体逐渐崛起并免费向用户开放，使学习欣赏应用音乐图像准入门槛降低，同时手机拍照功能的普及，用手机拍摄开始走进人们的日常生活，往往珍贵的历史资料会在不经意的拍摄中留存下来，再加上照片图像再现原貌和表意功能，音乐图像在手机新媒体语境下有了自己独特的话语方式，这种话语方式将会帮助丰富学科内涵，也能更好体现音乐图像的传播价值。除了这些，手机新媒体也将音乐图像学在传播内容、形式、风格、范围等方面均发生了变革，并形成一个相对独立的话语空间，使手机新媒体后来居上，占据了新媒体传播发展的半壁江山。

从吸引用户角度来看，手机使用方便且易携带，功能丰富且有很强交互性，人们对它依赖性逐渐增强。手机新媒体应利用手机庞大用户群，主动迎合受众喜好，利用大数据精准投放，例如对于喜爱古风音乐的人重点推荐相关音乐类型小视频，对于喜爱音乐历史的用户重点推荐相关微博博文，对于喜爱音乐表演的用户推荐想关演出微信等，通过手机应用技术的革新以达到满足用户需求，同时利用手机后台建立的新媒体数据分析平台，对音乐图像感兴趣的用户进行大数据分析，让音乐图像研究人员了解其受众群体喜好、年龄分布，研究方向和其他爱好等，让音乐图像学发展主动迎合时代需求，在市场需求基础上进行音乐探究发展。

从艺术创作角度看，手机新媒体技术还有一个主要的特征就是创作过程的开放性。当一件音乐图像在手机社交软件上发布之后，它将被广泛浏览，浏览用户都可能成为创作者，对他进行评论或者改编，这将是一个完整的创作过程。不再局限于空间的限制进行传播，可以在不同的地方而在同一时间范围内对作品进行改造。随着观众的参与，利用手机新媒体展示有原图像，它的内容会不断的增加，内涵不断丰富，逐渐影响艺术发展趋势，或者缩小与其他艺术所产生的差距。随着手机及手机软件的不断更新，不仅兼顾了传承与创新，而且方便又快捷，这种互动方式有利于音乐图像在新媒介语境下的广泛传播。

（四）虚拟新媒体技术下的音乐图像学

虚拟新媒体经历了从二维到三维，从现实到虚拟现实，从线性到非线性的发展，这极大地丰富了数字新媒体艺术的表现手段，也成为音乐图像的一个新特征。虚拟现实技术利用计算机生成一种模拟环境，并通过多种传感设备，打造出一种崭新的人机交互手段，用户可以沉浸到环境中去体验。可以达到了真实与虚拟完美结合的场景，让观众进入交互联动的信息场域，“跨越时空”感受身临其境般的艺术体验。虚拟交互背景下的新媒介逐渐改变了过去艺术直接的表达方式，使艺术与科技的融合更加充分。

从艺术体验角度来看，随着虚拟技术的介入舞台空间的设计，已突破传统舞台模式的框架，虚拟技术影响着舞台上的一切，舞台空间虚实穿插呈现多维叙事空间，加上辅以投影技术和灯光效果，将视觉形象比较单纯的图像立体化，对空间的整体性利用可以更好的帮助对表现故事意象的确立。观众从现实生活的一切束缚中解脱出来，飞跃了心灵真实的地平线，彻底改变了观众的观看体验。表演者在虚拟新媒体技术舞台上，表演者在表演过程中不仅是图像信息的触发者同时也是图像信息的接收者，虚拟新媒体所营造的虚拟空间给观众带来一种新视觉给演员的表演孕育了一个新空间。它从根本上改变了传统媒体与观众保持的互动距离、身体距离和观赏距离，使观众在与艺术的互动中也成为艺术表现的一部分，虚拟环境下的新媒体使音乐图像的表现更加多元化，可以将艺术的价值发挥到极致。

从科技应用角度来看，随着计算机技术的不断发展，图像将利用数字图像处理技术进行应用升级。数字图像处理利用数字硬件与计算机，将图像信息转换为电子信号，进行相应的数学运算，用以提高图像的实用性。数字图像处理技术精确度高，操作方便，能够将图像进行精确而简便的处理。图像本身可以帮助我们最直接接收、表达、传递信息，通过计算机程序处理，音乐图像可以用数字的形式表现，这样可以更安全快捷的保存图像数据，这将是对音乐图像数据应用的一次革命。图像处理技术可以更加智能化，提供更高的分辨率，由之前的二维成像到三维成像以及多维成像更加立体。这些新媒体语境下的音乐图像，已不再仅仅停留于记录对象，俨然已成为探索世界、讨论问题的媒介，它不仅为音乐图像注入了新的活力，而且还极大地提升了影像作品的视觉互动体验。

三、科技新媒体与音乐图像学创新探究

艺术创新的动力来自于观念的转变和更新。因此，艺术家在创作欣赏时时，需将新技术与作品创意进行有机地结合，这样可能将更好的表达和展现艺术作品。而科技新媒体环境下，可以使更多、更广泛的人群参与到视觉艺术的沟通和交流中来，让更多人理解和了解艺术家在创造时的想法，可以帮助作品进行二度创新。

音乐图像学在科技新媒体环境下逐渐与多种媒介形式相融合利用，从而使视觉艺术呈现多维化的发展。为艺术表现展示了更多的渠道，为艺术灵感的碰撞提供了更多机会。同时，艺术创新永远不能始终保持最新的状态，任何时候它都需要一个由旧到新的转变过程。而旧的音乐图像正是因为科技带来的新内容和新形式的注入，进而为音乐图像的创新提供了更广阔的空间。

未来音乐图像学在艺术的创造过程发展中，将更加注重人文内涵不断挖掘。人文关怀将帮助高科技与艺术的融合更加有温度，更适应观众需求，这不能简单的理解为东风压倒西风，也不应看作是一种对艺术精神的丢弃，而是可以让原本冰冷的科技新媒体机器被赋予了更多的人文关怀。

未来音乐图像学在艺术的创造过程发展中，将更加生活化。可以说，前期视觉艺术就是以影像为主宰。而随着新媒体观念逐渐取代传统影像技术，传统视觉艺术所包含的逻辑化、标准化、理性化等价值取向，逐渐被新媒体的观察和表现所替代，通过对个体化需求、生活环境的表现，从而反映社会整体更加趋近不同生活表现。这种抽象的“无形式”视觉艺术取代有形视觉艺术的趋势将不可避免成为未来艺术创新的潮流。

未来音乐图像学在艺术的创造过程发展中，将借助更加多元的科技新媒体手段融合发展。在21世纪，大数据已经成为一种重要的战略基础资源，正在引领和促进新一轮科技革命的产生和发展。现今实施文化强国战略需要大数据技术的支撑，大数据作为新科技平台可以帮助音乐图像发展创新提供技术支持，增强音乐图像影响力。其与大数据新媒体融合利用，将对数据汇聚和分类，对数据质量进行管理提升起到一定促进作用。大数据可以将系列数据采集、存储、管理、处理、分析、共享和可视化技术集合，通过数据采集数据处理数据存储数据分析可以掌握庞大的数据信息管理，还可以对这些含有意义的数据进行分类处理。大数据技术将推动音乐图像学要素之间集约化整合、网络化共享、高效化利用和协作化开发，大幅提升音乐图像学发展的水平，在现阶段大数据应用已经在社交媒体、工程设计中全面应用，而音乐图像应用也将在未来深化与大数据应用的结合。

随着时代发展，科学技术、音乐艺术和新媒体等领域都不断前进，逐步的走向开放多元化。本文研究的新媒体艺术可以有机的将科技、音乐与媒体结合起来，用科技前沿促进艺术发展。但无论是音乐图像学还是新媒体都是新兴的艺术形态，还处在不断发展的过程中，需要全方位地探索、研究与实践，也需要更深入的学习与思考。而音乐图像学如果想继续发展，唯有与时俱进不断突破探索，带来成体系全方位的感知审美艺术。希望音乐图像学在新媒体语境下能够焕发出更加璀燦的光芒，给人们带来更丰富的视觉体验和享受。