汉语言文字的交互方式与技术实践研究

杨洁　杨志麟　王可　王文聪

摘 要：汉语言文字（下文简称：汉字）交互设计的形式多样，不胜枚举，甚至出现了定义模糊、界限难以划定的现象。然而，交互设计的本质是行为设计。因此，设计核心在于交互方式的设计与通过相关技术将其实现。笔者从汉字交互原则展开，阐述了关于交互方式和交互技术实现的研究观点，为未来的汉字交互设计提供了若干研究思路和多角度思考参考。

关键词：汉语言文字；交互方式；交互技术实践；汉字交互原则

1 汉字交互原则

汉字交互原则从文化传播、人机交互、设计心理三方面可以归结为三条原则，分别是汉字文化解码、对话自然含蓄和生活态度外显。

1.1 汉字文化解码

解码，指译出代码符号的消息。是话语信息传递过程中，受话人分析理解话语意义内容的一种方式。[1]汉字文化解码，在笔者理解就是用交互设计的方法把汉语言文字还原成它所代表的内容或者将汉语读音、汉字符号、读写的行为转换成它所代表的信息、数据等的过程。解码的过程是完成文化发布格式的更新，发布为本时代传播效率更高、效果更好的文化格式。因此，解码的重点是交互发布格式的选择：移动端、可穿戴设备、交互装置艺术等。选择的标准在于汉字文化与交互技术的匹配程度和具体的实践条件限制。

1.2 对话自然含蓄

对话，在人机交互（英文HCI）领域一般区分为人与机器对话、人与系统的对话、机器与系统的对话三种。现代交互技术的研究趋向于更为自然的对话与交互设计，将对话的语言从程序、字符、图形、声音等拓展到肢体语言、脑电意识语言等更广阔的语言范围。因此，语言表达的技艺成为一个新的研究重点和难点。汉语言文字表达技艺的核心总结为“含蓄”，即指委婉而非直言，谦虚灵活应对。这种表达更容易被别人接受，也更能表现出对别人的尊重，达到有效交流，沟通思想的目的。

1.3 生活态度外显

生活态度，是人们一种稳定的心理倾向和基本意愿，通过生活实践而形成的。汉字交互中通过将用户内在稳定的心理和意愿等情感表现为交互行为方式、交互视听语言和交互技术实践等，提高了汉语言文字传播的广度和深度。外显的目的就是为了更好的传播和沟通，其优势在于满足用户超越语言表达范畴的精神品位追求。生活态度的外显的重点应着眼于交互方式的研究，难点在于对于生活态度的解析和行为重构设计。生活态度外显的需求，来自于不同用户群体多方面水平的差异，例如，经济条件的限制、情感化需求、社交认同的需要等。

2 交互方式的继承与创新

2.1 交互方式的选择

交互方式的选择，是完成从问题研究范畴到设计研究范畴的转型。因此它是汉字交互设计的关键步骤。交互方式有两种基本类型：第一，以活动为基础的交互，如指令、交谈、导航与操控、探索与浏览；第二，以对象为基础的交互，通常基于对物理世界物体的模拟，如一本书、一个工作台等场景。在完成交互设计时，经常是两种类型的交互方式的综合运用。通常，交互方式依据用户需求、设计预算、支持用户行为的适当的交互技术和其他限制等因素进行选择，进而发布成不同风格的交互格式。

2.2 交互方式的继承与创新的内容

交互方式的继承是对于用户行为习惯的尊重和满足本民族或当地文化继承需求，这也正是汉字交互设计存在的意义。例如，中国人对于打开卷轴或扇子的动作并不陌生，这来源于人们有相关的生活经历或具备基本的汉文化知识。那么在汉字交互设计中采用“平移展开”或“扇形滑动”相关动作行为设计，这对于中国用户来说，会得到良好的用户体验：文化认同感、减少行为学习的负担。

交互方式创新的对象是客户旅程，[2]它涵盖了某个产品或服务的各个阶段中的体验感受：客户的情感、目的、交互、障碍等。创新的难点在于避免设计与客户体验格格不入的孤立的接触点（touch point）或产品的特征。客户在使用一个较复杂的产品或服务时，往往需要在一定时间内分多个步骤或多个渠道对不同的接触点进行操作。因此，高水平的交互方式的创新是阶段体验层次分明、不同接触点自然过渡、产品功能从整体到阶段，执行力好的设计。

2.3 汉字交互方式的继承与创新融合之术

日常生活的处处可见可闻的汉语言文字，不仅是社会化交流的必须，也影响着我们的思维方式和行为方式。它不但体现为口头语言，还可以包括肢体语言和表情语言等。例如，中国人见面时作揖，双手抱拳高拱、身子略弯以示敬礼；西方人见面时握手、拥抱或亲吻脸颊表示友好。 交互行为会受到文化习俗的影响呈现多样化的交互方式。当下开放的中国社会中西文化交汇、传统文化行为与流行文化行为交织的状态下，交互方式既要也要创新，这融合之术在于“信息的编码与解码”。

习俗会变迁、中外有差异，但我们要传递的信息是明确的。无论见面时作揖、握手、拥抱或亲吻脸颊……不同动作都是表达“您好！”之意。交互设计随着科技更迭和文化差异，在信息传递中的编码和解码方式不断变化。“编码和解码”理论，最早出现在80年代的美国电视传媒领域研究中。在汉字交互设计中的理解，编码，是按照一定设计思维方式的将承载信息的汉语言文字转换成计算机程序语言，方便传播和交互方式的创新。解码，则是目标用户通过一定的交互行为从计算机程序语言获取信息的过程。例如，2016年南京艺术学院工业设计学院交互设计专业万文杰和葛一汉同学的毕业设计作品《交互有声脸谱》，几十个京剧脸谱面具背后暗藏玄机。用户轻轻叩击京剧脸谱，不同角色的京剧脸谱就会发出对应角色的京剧唱腔唱词。京剧角色的信息如性格、语言特征和情感等以“唱”的语言形式和京剧脸谱视觉形式被重组编码，用户以“叩击”的交互方式解码并获取信息，得到全新视、听、触等多元体验。这样，使得京剧的艺术魅力不再局限于舞台或广电等传统传播平台，交互设计让它有了新的展示平台和观众的交互方式也日渐多元化。

3 汉字交互技术实践与趋势研究

3.1 汉字交互技术实践

汉语言文字交互设计项目的实践开始于2014年，在广博的汉语言文字中，交互设计团队不断从新角度选择题材、尝试不同交互技术应用、借鉴相关交叉学科的设计思维方法、理论和设计形态，完成多种类交互技术实践，发布不同交互格式的设计作品。笔者将按交互格式分类、选择典型案例介绍汉字交互技术实践案例如下：

第一，增强模式网页体验。网页发布，受到交互智能产品多元化冲击，需要转型为能更好适应不断更新的智能交互设备的新发布形式——增强模式网页体验。2014年南京艺术学院工业设计学院交互设计专业林荒同学的毕业设计作品《书法艺术体验》选择HTML5交互技术应用，历代著名书法家的书法作品欣赏网页交互体验更具美感和快感。HTML5语言的应用，也让跨平台展示更具便捷，文本、图片和视频，可以自适应不同平台的尺度变化，极大地保持了设计的一致性和高效率。

第二，移动端交互（平板电脑和移动设备）。从智能手机诞生以来，移动端的交互设计一直是交互设计的重要领域，技术革新快、商业应用效果好，因此是交互专业技术研究的重要领域之一。南京艺术学院工业设计学院交互专业2014年毕业设计作品《方言地图》以平板电脑作为交互体验和展示载体，用户通过手指触摸屏幕及语言指令互动方式感受了以八大官话为代表的汉语方言的特色。平板电脑和移动设备，例如智能手机、智能手表手环等可穿戴设备，带来了无处不在的交互体验。在这类的设计实践中，需要注意的重点在于谁是用户、用户用设备做什么、怎样拿着设备等。

第三，交互游戏。南京艺术学院工业设计学院交互专业陆娟娟、庄慧敏二位同学作品《汉字生肖》（见图1）是一款基于图像识别技术，为儿童早期语言学习服务的交互设计。游戏方式是利用立方体通过图像识别技术把汉字通过动物动态的方式展示。剪纸画风交互视觉设计展现了中国味道的十二生肖动态形象与汉字造型及读音。

图1 交互游戏《汉字生肖》作者：陆娟娟、庄慧敏，指导教师：杨志麟、杨洁、王可

图2 交互作品《颜文绪字》作者：王宇，指导教师：杨洁

第四，多屏互动。南京艺术学院工业设计学院交互专业王宇同学作品《颜文绪字》（见图2）是基于智能电视和平板电脑或智能手机的多屏互动，运用表情识别技术认识偏僻文字的实际应用。平板电脑通过摄像头识别表情、并表情解码，再通过无线网络将内容传输到智能电视完成展示互动。多屏互动基于DLNA协议，通过WIFI网络，在不同多媒体终端进行传播内容传输、展示、控制等一系列操作。通过跨平台（智能家电、智能手机、可穿戴设备、车载多媒体等）和内容的整合发布，可以创新的交互方式和体验，打破了单一交互终端交互体验上的局限性。它代表了一个新的交互方向“智能生态系统”的交互设计，是值得我们继续深入研究的交互技术方向。

第五，展呈交互。博物馆、展览馆、博览会及各类展览活动中能越来越多看到新潮的交互技术应用。汉字博物馆、汉字语言知识竞赛等活动也会伴随着交互技术的应用。因此，我们团队也尝试着运用软硬件结合和VVVV语言的编写，完成了南京艺术学院工业设计学院交互专业2016年毕业设计作品《时节味道》。本设计以机械拉线开关和拨动开关两种方式控制屏幕上多媒体播放，从操作方式复古性角度完成对展览呈现方式的创新。

第六，无边界交互（活动和体验）。随着技术发展，交互不再局限在屏幕里和指尖的滑动。人们身体发出的多种信息都可以被智能交互设备识别产出互动。例如，南京艺术学院工业设计学院交互专业郑萍萍和冯婷同学的交互作品《甲骨文》运用体感交互技术，通过单人或双人的肢体语言实现甲骨文欣赏体验互动。再如，南京艺术学院工业设计学院交互专业王宇同学作品《颜文绪字》通过用户表情变化完成与智能设备互动，表情识别技术，不但解放了双手，也让用户体验了新的交互方式带来的乐趣。最后，2016年南京艺术学院工业设计学院交互设计专业万文杰和葛一汉同学的毕业设计作品《交互有声脸谱》用声控技术完成的京剧唱腔体验交互设计。身体语言、表情语言、语音控制等多方面的交互技术尝试也为汉语言文字的交互设计应用拓宽了设计的边界。

汉字交互设计不断实践应用多种交互技术，追求体现多种风貌的汉字交互设计作品。汉字交互作品或者学院风，或者有商业应用前景，都是对汉字交互设计形态的不断尝试。通过不同技术的应用，不得不说，交互技术对汉字交互设计形态、交互方式和体验的影响是巨大的。同时交互技术的新浪潮也不断涌现，推进汉字交互设计的研究深入，对交互技术趋势的研究势在必行。

3.2 交互技术趋势研究

2016年被称为VR元年。VR是Virtual Reality的缩写，即虚拟现实，指借助计算机及最新传感器技术创造的一种仿真的、沉浸式的人机交互手段。但支持这项技术的硬件如VR眼镜尚存在一些体验欠佳的问题。但对交互设计师而言，值得关注的并不是技术浪潮本身，VR概念早在80年代初就被提出，今年这一技术却被炒地火热的背后，是技术应用能力的提高。好的交互设计师会考虑交互技术如何应用可以提高生活质量和提高工作效率。所以在关注技术趋势中，不可忽视行业应用的研究。行业不同、用户不同、交互内容与交互技术研究的结合，需要借鉴相关学科的研究方法，如系统设计、服务设计等相关思维方法。

4 结语

从点头之交到点赞之交、远程互动替代面对面交流……交互技术革新改变着我们的交互方式。交互技术的应用也受到行业、文化和用户差异等限制。因此汉语言文字的交互方式与技术实践研究是一个互为补充的研究，从人的行为与计算机技术两个角度寻求交集，为创造更好的汉字交互设计探索最佳解决方案。首先，明确三点汉字交互原则：汉字文化解码、对话自然含蓄、生活态度外显。其次，掌握汉字交互方式的继承与创新融合之术：信息的编码和解码。再次，通过多项汉字交互技术实践与趋势研究总结教训摸索规律。最后，笔者将汉字交互设计任务总结为：创新交流方式、丰富语言形态，创新地传承弘扬汉语言文字的优秀文化。希望以此为目标，继续完成汉语言文字交互设计项目的研究工作。

参考文献：

[1] 董绍克，阎俊杰，刘中富，孙永选，张树铮，等.汉语知识词典[M].警官教育出版社，1996.

[2] 代尔夫特理工大学工业设计工程学院（荷）.设计方法与策略：代尔夫特设计指南[M].倪裕伟，译.华中科技大学出版社，2014：57.

[3] 杰米·司迪恩（英）.交互设计[M].孔祥富，译.电子工业出版社，2015：144-166.