视频加速对二语字幕影视使用效果的影响*

王怿旦

(江苏第二师范学院 外国语学院，江苏 南京 211200)

一、引言

继20世纪中后期人文领域的“语言转向”与“文化转向”后，[1][2]视觉符号、影像呈现开始发展，并大行其道，成了一种越来越重要的媒介与手段。20世纪90年代初开始了“图像转向”，Mitchell于1995年在《图像理论》一书中明确提出，“图像转向”是在影像和信息技术时代所兴起的以图像为研究对象、探索视觉经验独有的解释模式的后语言学的、后符号学的人文科学研究范式。[3]“图像转向”强调图像和语言都参与意识本质建构，图像像语言一样，也是人类进行思考与表达的一种思维方式与符号性言说方式，也可以突破时空局限而传播信息，不存在纯粹的视觉或语言，它们彼此交互融通，图像观看与文本阅读均为深度式的接受活动，图像转向并不意味着图像的狂欢和霸权以及与此相对应的语言式微,而是对图像表达比重日益增加的趋势和过程的描述；图像转向既表明图像增长的速度之快,也表明图像增长的技术支撑性；“图像转向”的实质在于语言与图像之间互为他者、和谐共生，是一种视觉和话语之间的复杂互动，一种抽象与具象交融。它是对结构主义一种突破，是对语言本身张力的进步，也是对媒介局限性的一种符号性超越。它还指出，图像与文本一样有意义，其能指对应所指，是一个符号系统，是不能脱离意义而存在的，图像与文本的意义之间，往往存在一种互文性关系。[4]

字幕视频集动态效果、口语对话和书面文字为一体，它往往提供了意义的图像、语言和文本之间的三重联系，[5]展示了语境、话语、副语言线索等之间同步动态互动，促使多感官、双编码系统交互，是一种可以扩充词汇、促进语言记忆、提升理解能力、促进知识内化度和增强学习动机、提升视听元素意义建构能力的有效方法。[6]字幕视频往往兼具娱乐和学习的双重功能，近年来，随着手机、平板等技术设备的日益普及以及网络资源共享化的趋势，当前字幕视频在传统课堂和网络课堂被广泛应用，丰富了学习模式，学习者可以接触丰富的互联网字幕视频，[7]且其中大多为免费，它已被公认为一种获取语言技能的时代性教学工具与宝贵资源，现代外语教学基于“互联网+”、泛在学习、移动学习等多元化教学理念，也更倾向于采用与这种多模态相结合的教学方法。[8]当然，在数字资源盛行的时代，这些免费的字幕视频并非都是高质量的，它也很容易成为填鸭式学习等低效学习的帮凶，教学人员需要对其进行筛选，找出优质材料并加以必要加工，以支持优化学习体验和提高学习效果，设计合理的字幕视频，可以有效引导高层次学习。[9]字幕视频有一个不足之处：相较于带或不带图片的文本阅读，它需要花费更长的时间来聆听叙述、观看视频。事实上，英语为母语者话语速平均每分钟约为130-180个单词，而平均阅读速度则为200-350个单词,而接受高等教育的学习者一般阅读速度为350-450个单词。[10]考虑到时间的价值，任何可以减少时间提高效率的方式都是学习者和教学设计者所期望的。字幕视频虽广为用作教学工具，但在发展学习者语言能力这方面，它的潜能尚未得到完全开发。随着字幕视频的流行以及媒体压缩技术广泛使用，学习者有能力将视频压缩到其想要的速度，因而有必要对字幕视频加速播放展开探讨，目前针对字幕视频学习中视频加速的相关研究十分有限，故本研究将基于学习者学习成绩和满意度分析，探讨字幕视频加速对字幕视频学习的影响。

二、多媒体学习认知理论——字幕影视学习的理论支撑

Mayer在其《多媒体学习》一书中较为系统地阐述了其多媒体学习认知理论。该理论的核心目标是促进学习者从视听形式呈现的材料中主动建立起一个一致的心理表征，促进学习者在对材料信息的认知加工和处理过程中积极实现对新知识的建构，充分运用所呈现的材料进行有意义的学习。该理论主张，人们对视觉表征和听觉表征的学习材料拥有视觉和听觉两个各自独立的信息加工通道，听觉信息和视觉信息材料由不同通道处理和加工，人脑会为每个通道所加工处理的信息创造各自不同的表现形式。视觉通道处理诸如图像、动画和屏幕文本信息等视觉信息，而听觉通道则处理诸如旁白等听觉信息。该理论试图赋予听觉加工和视觉加工以同等重要地位，它强调这两个通道是处理信息的基础，所有的认知都会涉及到听觉和非听觉机制的结合，因而听觉信息和非听觉信息的结合并不矛盾，学习者通过视听结合的学习方式要比光听的学习方式更能深入学习。它还强调视听编码信息在大脑中的整合，并认为同时融合运用这两个心理通道比单一通道在信息处理方面更有效率，这能够减少视觉通道或听觉通道的认知负荷，相关信息由视觉和听觉同时呈现时学习者的学习效果要好于只通过听觉或视觉方式呈现的信息，动态视听呈现形式是多媒体的优势之一。[11]

该理论主张，学习者会选择性注意经由眼睛、耳朵进入认知处理系统的视听觉信息中的有关内容，从呈现的听觉信息中，学习者主要选择重要的词语语音信息等进行言语表征，从而侧重构建命题表征或言语库；从呈现的视觉信息中，学习者主要选择重要的景象信息等进行图像表征，从而侧重构建表象表征或图像库。工作记忆或短时记忆将选择后的信息表征片段进行组织并构建相应的言语和图像模型，当学习者选择了一定的图像和语音材料后，就会在其工作记忆中将相关信息进行重新组织，形成一个连贯的关于言语所描述情境的言语心理模型或图像中所描述情境的图像心理模型，这两个模型均是具有内在联系的整体结构。学习者在所组织的两种平行的心理模型之间建立对应的映射联结，同时利用言语心理模型和图像心理模型将新摄入信息与长时记忆中的先验知识或己有知识整合联结起来，这种整合发生在工作记忆中，学习者往往在接收到少量的言语和图像共现信息后就开始整合加工了，经过这样的整合后，真正的意义上的学习才会发生。对学习者而言，言语(如口语解说或书面文本)和画面结合多媒体呈现形式的学习效果要优于纯言语呈现的材料，在学习情境中对于一个概念的陈述，言语和影像共现的效果更好，它比单一语言形式更能吸引学习者的关注，激发学习者的兴趣，也更加有利于学习者的认识加工，利于在工作记忆中同时激活言语和图片两个处理模型以及两个过程之间的互动，避免一个处理器闲置而另一个负荷过重，更能促进学习者的有意义学习。[12]

在字幕影视中，当对应的语言与画面同步呈现时，有助于学习者在工作记忆中同时保持两种材料的心理表征，也有助于学习者在二者之间建立起心理联系，有助于学习者构建对应的语词与画面之间的认知关系。整合到一个视屏，就会减少学习者寻找、匹配的过程，降低认知负荷，提高学习效率。可见，多媒体学习认知理论为字幕影视学习提供了重要理论支撑。

三、视频加速——字幕影视学习的有效方式

变速播放或变速处理是时下一种十分流行、广为使用的的音视频处理技术，它是把即将输入的各种音视频信号，按照使用者的意愿提速或者减速播放，是通过改变单位时间内输出的音视频信息量达到变速要求。[13]视频变速播放常见于影视观看者想要定位视频的某一个时间点时，除了直接拖放进度外，还常用倍速播放来实现以节省时间，当然这种快进对视频内容跳跃较大、失真明显，还有一些视频观看者或制作者为了达到特定的效果而将视频降速，此外，一些外语学习者特别是初学者希望能减慢语速以提高自己的理解度和学习效果。当前，许多课程，特别是一些考研辅导课程、资格证书辅导课程等通过在线或离线视频形式展开，这些网络课程往往耗时长、内容多、讲解速度偏慢，而学习者又迫切希望提高学习效率，此外还有一些人在听小说、评书或者是观看娱乐视频时觉得情节拖拉、速度太慢,于是就借助了各种媒体播放器(如Potplayer、KMPlayer、VLC、AVPlayer、Windows、DicePlayer、GomPlayer、RushPlayer、Astroplayer、QQ影音、完美解码等)的加速功能，这些媒体播放器能支持多种格式的音视频，播放速度控制功能使用简便、易于操作且变速不变调(即在加速时音质一般也不会发生夸张变化)，往往同时支持电脑、手机和平板操作系统，支持网络流媒体，还支持硬件加速，软/硬解码齐全，支持倍速播放范围一般为0.1倍到16倍速之间。其中，正常速度播放为1倍速，即按照常规速度播放视频文件；加速播放，即在常规速度的基础上使播放速度加快，其倍速值大于1；降速播放，即在常规速度的基础上使播放速度减慢，其倍速值小于1；变速视频播放主要通过调用ActiveX控件实现。[14]

视频加速，亦称时域压缩，是指视频媒体在保留质量的前提下加快视频的速度，它目前已成为媒体播放器的一种重要功能，不仅能对本地视频文件实现加速，而且也能对实时流媒体加速。图像视频加速主要通过改变数据的实际播放期限或间隔来实现，其中因为图像帧播放速率提升或帧间间隔缩小对人眼视觉影响较小，所以主要加快速率或缩减每帧播放期限就可以；而音轨信息如果仅仅依靠改变每帧间间隔，会导致播放频率变化引起的音调高低变化，从而失去原有音质或自然音效，因而音轨信息加速只能在数据的播放频率或时间间隔不变的前提下，通过删减一定长度的数据同时保证音视频同步来实现，从而保留较好音质音调，确保观看者的听觉效果。视频加速后仍然具有较高保真度，实际上基于人们认知系统的视觉暂留、听觉暂留现象，视频加速时语音语调都正常，只不过语言间停顿被压缩，它允许视频提高速度时不产生发声不正常，因此，压缩字幕视频和正常节奏的视频非常相似。但是，不是任何倍速的视频加速播放都能避免因速度的突然变化造成的对播放质量的损害，研究表明，基于目前巳经成熟的视频信号处理技术(如自适应差分脉冲编码调制等)，[15]1.2倍速以内的加速仿真度高，对观看者造成画面、音轨质量损失不明显，其失真度不易为人眼和人耳感知，观看者往往难以区分正常节奏视频和这些低级别加速视频，即不知道视频是否压缩了时间，而倍速超过1.2的加速视频观看者会有明显的不平滑或跳跃感、语音不清晰感。视频加速在视频合成、视频识别和分析等方面有着广泛应用前景，引起了很多研究者的关注。

四、研究方法

(一)研究问题和实验对象

本研究在字幕视频教学中引进视频加速手段，通过学习者学习成绩和满意度情况调查实证分析了字幕视频加速对字幕视频学习的效用，以期提高学习者字幕视频学习的效率。本研究受试对象为南京三所公办高校英语专业二年级9个自然班的270名本科生，其中216名受试对象为女性(80%)，64名为男性(20%)，受试对象年龄为18至23岁之间，平均年龄20.4岁(SD=3.68)。所有受试对象具有共同的母语背景，均通过了大学英语四级考试，有9至13年的英语学习经历，受试对象的英语水平处于中高级，视力或矫正视力正常。所有受试班级随机分配各个实验条件。本实验中的受试对象不存在任何导致视频理解困难的听障问题，也未曾接受过任何视频加速型视听材料的体验或训练。实验开始前对受试对象的统一英语水平测试表明，各班的成绩平均值非常接近，分数段的分布、离散度类似，独立样本T检验P=0.712>0.05，这表明各组受试对象的英语能力无显著差异，总体处于同一水平，研究的有效性可以得到保证。

(二)实验材料、工具与过程

本实验选择BBC纪录片《生物钟：身体运转的奥秘》，视频格式为AVI，该视频为通俗性科普叙述语篇，主要探讨关于生物钟是生物体生命活动的内在节律性，是由生物体内的时间构序所决定等方面的问题。该视频质量较高，为1280×720分辨率高清画质，文件大小为498MB。视频转录约有4233词，受试对该话题熟悉度一般，弗莱士易读度指数63.4，弗莱士-金凯德难度级数10，总体难度适中。三种不同播放速度下视频材料各自的总时长、平均语速(词/分钟)如表1所示。

表1 三种不同播放速度下字幕视频概况

本研究的实验工具主要包括背景问卷调查、成绩测试与满意度问卷调查。背景问卷调查共20个问题，主要收集受试性别、年龄、专业、学习英语年限等个人信息及受试对字幕视频学习和字幕视频加速熟悉度等信息。视频成绩测试包括40个多项选择题，总分为40分，直接针对视频中的信息展开测试，其中20个主要涉及词汇理解，20个主要涉及内容理解。每题包括四个选项，受试被要求从中选择最佳答案，正确答案记“1”分，错误答案记“0”分。受试须在40分钟内完成测试。对试卷的先导测试的克隆巴赫系数是0.79，超过了0．7可接受水平，这表明其题目设计合理、可信度高。为了收集受试对象对加速手段的反馈，更好地了解其对视频加速的态度，本研究还展开了满意度调查。学习者满意度调查包括15个问题，涉及学生对视频加速的舒适度感受、兴趣态度、作用评价等，这些问题被设计来测量学习者对这种变速干预的满意程度，本部分调查问题采用五级李克特量表，每个问题有五个选项，包含从非常不满意到非常满意五个等级(1=非常不满意，2=不满意，3=不确定，4=满意，5=非常满意)，最终获得的总分数反映了参与者的感知享受度或满意度。该满意度调查的克隆巴赫系数为0.81，表明量表具有较高的可靠性。本实验设计为3(视频播放速度：1倍速即正常速度、1.2倍速、1.3倍速)×3(字幕类型：全字幕、关键词字幕、无字幕)的受试间设计。开始播放视频之前，每位受试对象都完成了背景调查和英语水平测试，对各组之间差异进行了有效控制，加速视频测试的准确性得以保证。所有受试组被随机分配观看视频加速的不同字幕类型视频。鉴于视频加速情况不同，各组持续可能不同(参见表1)。观看结束后，受试对象需要先完成相关成绩测试，然后各组学生在观看完所有其余类型视频后展开满意度调查。研究所收集的原始数据，将用SPSS18.0进行分析处理。

五、结果与讨论

在成绩测试方面，数据偏度值为0.13，峰度为2.32，列文方差齐性检验表明,样本的总体方差不存在显著差异(F=0.19，P=0.82)，因变量符合正态分布，且彼此独立，即不存在自相关，数据适合标准推断统计分析。所有测试数据被输入到一个有3(播放速度)×3(字幕模式)的组间因素方差分析，结果表明，测试成绩之间有存在统计学意义。表2给出了平均得分和标准差。单独分析视频速度的影响时，同一字幕模式的各组结果表明视频速度不存在显著的主效应(6.1>F>2.2,P>0.56,0.12>偏η2>0.04)，不同组之间的平均值和标准差表现出轻微变化。结果还表明,字幕模式×视频速度之间不存在显著的交互作用(F=1.12，P=0.34，偏η2=0.01)。成绩段的分布方面，同一字幕模式的各组结果非常接近。这表明，在九个实验组中，视频速度与字幕模式之间不存在互动效应，也就是说，基于不同视频速度的学习之间在最终学习成绩上不存在差异。皮尔逊相关系数检验也表明，视频速度和学习成绩不存在显著关联(P=0.12>0.05)。虽然实验中未发现视频速度存在显著主效应，但视频观看测试中发现字幕模式存在显著的主效应，F=5.12,P=0.016，偏η2=0.01。从表2实验成绩中可以看出，受试对象在处理字幕视频时显著优于无字幕，而关键词字幕又优于全字幕，无字幕组的平均分比全字幕组低3-4分，而全字幕组又比关键词字幕组低4-5分，配对样本T检验表明，字幕模式的主效应差异也极其显著(T值=4.38，P值=0.02<0.05；T=5.66，P=0.01<0.05)，效应量较大(Φ值=0.62﹥0.50；Φ值=0.66﹥0.50)，三者在统计学上存在显著差异。

表2 不同播放速度与字幕类型下受试对象的成绩

在学习者满意度方面，对加速组学习者满意度量表调查的15个问题，针对学习者满意度提供了一个整体的综合分析。所有组的满意度平均评级均比较高，分别为是4.21、4.36和4.15，其中数据的偏度系数为-1.02，峰度系数为2.88，列文方差齐性检验表明样本的总体方差不存在差异(F=4.23，P=0.88)，实验数据可用于相关分析。这些数据被输入视频速度×字幕模式的双因子实验分析，视频速度与字幕模式分别为组间因素，学习者满意度则为因变量。表3呈现了每个条件下平均值和标准差。结果表明，视频速度与字幕模式均不存在主效应，这些数据不存在显著差异，即在不同视频速度或字幕模式下，未发现满意度显著差异,P>0.68，0.08>偏η2>0.01，也未发现视频的速度和字幕模式之间存在显著的交互作用F=2.56,P=0.42,偏η2>0.02。这意味着，随着视频速度逐渐增加或字幕模式的变化，满意度总体不变。但同时，标准差较大(SD>3)意味着受试对象的个体成绩间存在相当大变化，个体间满意度的差别较大。实验数据表明，总体而言，绝大多数受试对象对视频加速这种方式较为满意、有兴趣，意识到了字幕加速对减少视频观看时间、提高信息处理速度的重要意义。

表3 受试对象对不同播放速度与字幕类型的满意度

本研究有两个重要发现。首先，在学习成绩方面，可以合理地推断出三种视频播放速度对测试结果不存在统计学意义上的显著差异，对字幕视频材料提速20%的学习与常规速度下并没有显著不同，即1小时的指令可以在45分钟内交付，仍然可以满足相同的学习目标和学习者期望的成就水平而不增加工作记忆的负担。这是一个特别重要的发现，因为它表明，学习者可以操纵字幕视频播放速度高达1.2倍速，而认知资源不超载，对学习效果不存在任何负面影响，节省的时间随着不断的积累将变得非常重要，因而教学设计人员可将这种变速视频手段用于外语教学，加快教学视频的速度，提高学习效率，而不必担心对学习者的学习效果产生消极影响。这些发现与先前一些有关多媒体教学中视频加速研究的结果相一致。[16]

其次，在满意度方面，总体而言，绝大多数的受试对象对视频加速满意，各组受试对象对各种视频速度的总体满意度不存在显著差异，对于在字幕视频学习中采用视频加速，总体持肯定支持态度，认为它有效、易用，有助于改善其自身学习，让他们受益，但同时无论字幕视频的播放速度为多少，学习者个体由于学习动机等因素，对视频的满意度都存在一些差异。这可能说明，不同学习者对视频播放速度会有不同的偏好，也从侧面反映了字幕视频学习过程中学习者对视频播放速度自我控制的意义。未来的研究可以纳入更多选项，让受试可以在一定程度上选择和调控其字幕视频速度，让学习者按照自己的节奏学习，实现教学多样性和个性化，充分挖掘学习者潜能。本部分研究通过一系列的成绩测量方法，为加速播放效用提供了一个全面详实的描述，实验表明,合理使用符合认知原则的字幕技术，将使学习者更好地学习。

总而言之，学习者可以利用视频加速技术来控制字幕视频演示的速度，减少学习任务所花费的时间，有助于提升学习质量与效果，使教学设计最优化以及学生学习效果最佳化，同时也利于学习者效率意识的培养与加强。我们必须充分理解这一技术对基于字幕影视的二语学习的影响及其在大数据时代背景下的显著实用价值。

六、结语

当前如何使计算机多媒体技术成为有效辅助教学工具，这是研究者和教师共同关心的问题。在计算机软件中的加速播放功能较为流行的背景下，如何最大限度地促进学习者提高学习效率，也是衡量学习者外语水平的一项重要指标，据此，本研究探讨了在二语习得语境中视频加速这种创新模式对字幕视频教学的影响。研究结果清楚地指出，加速字幕视频可以作为增强二语教学和学习的有效工具，使用加速字幕视频时的增益效果是显著的，并且受试对象对使用视频加速的看法与实验结果是一致的，他们认为它提高了语言学习效率，同时也不影响他们的学习效果。本研究以实践和过程为导向，以学习者为中心，旨在鼓励学习者提高效率、促进其语言习得，试图打破字幕视频常规速度模式，研究分析视频加速型字幕视频，积极推动引入这种体验式、互动式、重实效的教学模式，从而对现有字幕教学方法进行有益补充，优化教学过程和效果，并更新字幕视频教学理念。随着多媒体技术创新工具不断纳入语言教学，字幕教学视频将有更大的发展前景，同时，这也有助于消除关于以将字幕作为教学工具的担忧。本研究结果具有较强的现实指导价值：学习者应充分利用视频加速，进而提高二语学习效率，实现高效学习；同时，二语教师也应向学习者介绍推广相应的字幕视频加速策略，培养学习者在二语学习中的效率意识，逐步培养学习者发现和有效利用学习进程加速工具的能力，从而优化外语教学效果，扩大此类练习带来的益处。

需要注意的是，虽然本项研究通过定量和定性的方法进行了验证，但在受试对象和样本数量方面也存在一定局限性，研究所采用的字幕视频内容认知负荷中等，结果仅证明对高校学生或相似群体适用，未必适用于其他学习者群体，也未将个体对语速偏好纳入考虑，所以不能一概而论。希望未来研究者能进一步展开探讨，并进一步扩大适用范围，使实验结果更为客观、可信度更高。另外，因为1.2倍速最高值的相关实证研究较少，未来研究可以进一步验证二语学习时视频加速即时域压缩的最大值，为今后展开全面、深入的字幕视频研究提供一定理论框架基础与借鉴。