“新理念英语”在线课程学习与评价调查研究

靳智博

（深圳信息职业技术学院应用外语学院，广东 深圳 518172）

引言

近些年，随着全球信息技术的不断发展，以慕课（MOOC）和私播课（SPOC）为代表的网络课程在国内外迅速兴起，并在教学实践中得以广泛应用。高校对慕课的研究和实践方兴未艾。2019年1月，国务院发布《国家职业教育改革实施方案》，明确要遴选认定一大批职业教育在线精品课程，以大力推动信息技术与教育双向融合创新。经过多年发展，我国的慕课数量虽处于全球领先地位，但慕课的课程质量和学习成效仍需进行大量的反馈调查和研究。“尽管多数慕课包装精良，但由于教学设计质量较低”（焦建利等2018）[1]，大部分慕课资源仍按老师讲解课件进行“知识灌输”，导致慕课的教学形式较为单一，千篇一律，缺乏创新性；而“学生对在线学习认识不足，常常敷衍了事，学习投入和课程完成率较低，引起了教学工作者的反思”（穆肃、温慧群，2018）[2]。为更好地运用网络信息化教学手段提升学生英语学习效果，弥补国内大多数慕课课程互动不足、教学效果欠佳等缺陷，我校应用外语学院教学团队开发建设了面向高职高专在校生和有同等英语基础的在职人士的慕课课程—“新理念英语”。目前，第一期课程已在学堂在线平台顺利完成。本研究对第一期结课后所采集的平台数据进行分析，并对学习后的在校生进行问卷调查和受试访谈，了解他们在线学习行为、学习习惯、学习体验和学习效果评价等，以期为第二期课程的修改和完善提供指导和借鉴。

1 课程概况

通过前期对上百位企业管理者、骨干员工、已工作半年以上的本校毕业生（涉及42个专业）以及数千名在校生进行访谈和问卷调查，我们确定了本课程的五大核心主题：1）如何有效学习英语？2）如何处理好人际关系？3）如何出境旅游？4）如何购买及推销产品？5）如何求职面试？依托简短有趣、贴合生活的视频（电影片段、自拍情景录像、有声短文等）和音频（歌曲、新闻），寓语言学习于实际任务中，引导学生在完成任务的过程中通过使用语言来学习语言，旨在培养学生职场所需的重要软技能，如人际沟通与交往、协作、自主学习、解决问题等能力。

本课程的五大核心主题形成了五个主题单元（Unit）。每单元的学习内容包括：单元介绍、四项学习任务、文化聚焦、单元测试、单元总结和互动讨论六个模块。其中，每项学习任务由任务导入、若干子步骤和任务总结组成。各个步骤均配有2-5道聚焦影音资料内容的测试题，帮助学生提炼吸收知识和技能点，旨在提升英语语言应用能力和综合职业素养。

图1 “新理念英语”各单元内容结构

2 研究设计

2.1 调查对象

第一期课程于2018年9月1日在“学堂在线”平台开放。至2018年12月29日课程结束，选课总人数达到3216人，选课地区涵盖31个省、直辖市和自治区，有效学习人数（即答题人数）为2339人，过平均分人数1609人。课程结束后，笔者分析了平台的统计数据，并对本校已选课的商管、软件、外语、中德等学院2018级50个班级的学生进行了有关本课程使用情况的问卷调查，共回收有效问卷778份，并访谈了20名学生，了解其在学习课程期间的学习行为和对本课程的看法。

2.2 研究问题

本研究旨在了解学生对“新理念英语”第一期课程的使用情况及学习反馈等信息，主要解决以下几方面的问题：

1）学生对于“新理念英语”在线课程的使用或学习情况如何？

2）学生对“新理念英语”在线课程的教学内容和设计评价如何？

3）本课程对于提高学生英语学习兴趣和交际技能有无帮助？

4）学生在学习过程中遇到哪些障碍并希望获得哪些学习支持？

2.3 研究方法

本研究首先根据“学堂在线”数据反馈，定量分析学习者在互联网平台留下的数据痕迹。“学堂在线”自动生成的学生分析包含成绩总览、各单元习题作答情况、视频观看情况、讨论发言数量以及学习活跃时段等。通过对各单元、各任务学生视频学习和答题情况的汇总分析，定量研究学生在线学习的行为特征、对于视频内容的关注度和对知识的掌握情况,并结合调查问卷和受试访谈，定性分析学生的学习特征、行为倾向、学习习惯等信息，从而全方位、多角度的了解学生在第一期课程的学习行为特征，为接下来课程的修改和调整提供指导。

3 研究过程与讨论

3.1 在线平台学习行为分析

Siemens & Long最早提出“学习分析”（Learning analytics）的概念，他们认为“学习分析”是收集、测量学生学习过程中产生的数据，然后反馈分析结果给学习者、研究机构以及教育工作者，帮助他们更好地理解学习发生的过程和改进学习发生的环境”（Simens & Long，2011）[3]。美国高等教育信息化协会将 “学习分析”定义为“使用数据和模型预测学生收获和行为的信息处理能力”（吴永和等，2013）[4]。Veletsianos &Schneider 尝试从学习者在MOOC 平台中的交互情况、学习笔记、知识内化等方面分析学习者的学习体验（Veletsianos&Schneider,2015）[5]。笔者在第一期课程结束后，首先对平台反馈的学习分析数据进行汇总、归纳、分类，着重分析与了解学生观看视频（学习）情况、习题完成情况以及学习集中时段。

图2显示了各单元（Unit）各任务（Task）的视频学习人数。各单元视频学习人数占比=学习本单元视频的人数占选课总人数的比例。从汇总的数据来看，从Unit 1到Unit 5，视频学习人数比例最高值出现在Unit 1介绍部分（Introduction），为68.63%，最低值出现在Unit 5总结部分（Summary），为33.02%。视频学习人数的比例呈逐渐下降的趋势，且每个单元最后的总结部分（Summary）均为各单元学习人数比例的最低值，说明随着各单元课程的推进，学生观看视频的热情和学习投入逐渐降低。

图2 各单元视频学习人数占比

接着，笔者进一步对各单元的视频学习情况进行对比分析。图3-7展示了每单元学生的视频学习情况。其中，无学习行为占比指从未观看视频的人数占总选课人数的比例，有学习行为占比指观看过视频的人数占总选课人数的比例，有重复学习行为占比指重复观看过视频的人数占总选课人数的比例。

图3 Unit 1（视频）学习人数占比

从图3中我们可以看到，Unit 1四个活动任务中共有13个视频，有重复学习行为和无学习行为的比例均高于有学习行为的人数比例，且从Task 1到Task 4，有重复学习行为的人数呈现波浪式下降趋势，无学习行为的人数呈波浪式上升趋势。无学习行为人数占比最低值出现在Task1，Step1，为39.55%，说明学生在课程发布之初，超过半数的同学有学习准备，但是随着课程视频的推进，学生对视频的关注度逐渐降低。

图4 Unit 2（视频）学习人数占比

Unit 2的统计数据显示，有学习行为的比例较Unit 1无较大变化，而无学习行为的学生比例呈阶梯式增长，有重复学习行为人数占比总体呈阶梯型下降，且高点位置均为各任务lead-in（导入）部分，至活动结束人数逐渐下降。这可能是由于Unit 2四个活动任务共设计了27个视频教学内容，较Unit 1视频数量增加了一倍多，学生易出现学习倦怠和兴趣降低等问题。

图5 Unit 3（视频）学习人数占比

Unit 3四个活动任务包含14个视频教学内容。有学习行为的人数占比在各任务起始点处（即Lead-in部分）有显著提升，一方面说明学生对本单元的子任务主题较感兴趣，另一方面也可能是老师的督促和指导对学生的学习行为有一定促进作用。

图6 Unit 4（视频）学习人数占比

图7 Unit 5（视频）学习人数占比

从图6、7可以看出，在最后两个单元的学习中，无学习行为的人数比例逐渐攀升，到Unit 5 Task 2 Step 6 Round-up（小节）这个步骤，无学习人数比例达到最高值72.05%；有学习行为的人数占比与前几单元相比也有所下滑，说明随着课程临近尾声，学生的视频学习热情逐渐削弱，也可能是因为Unit 5 四个任务涉及了18个子视频任务，学生学习负担较重；有重复学习行为的低点均出现在子任务的（Round-up）环节中，表明学生对于该环节的学习兴趣和投入较低。

从各单元的视频学习情况统计来看，有学习行为的人数占比呈现总体下滑的趋势；无学习行为的人数占比呈总体上升趋势；有重复学习行为的人数占比随着任务各环节的推进，往往在各任务最后小节Round-up处出现低值折点。这说明，在课程初期，学生受内在学习驱动和外在教师督促的影响，学习热情和对视频学习的投入度较高，但随着课程的逐渐推进，学生的学习热情逐渐减弱，对视频内容的关注度也逐渐降低，加之有些单元课程设置的视频数量差异较明显，学生学习压力较大，也会导致对课程关注度下降，影响学习效果。

此外，笔者统计了学生各单元习题作答情况。从图8可以看出，从Unit 1至Unit 5，答题人数占比逐渐降低，与各单元视频学习人数占比的变化趋势一致，说明随着课程推进，学习热度逐渐降温。Unit 3和Unit 4正确率超过60%、80%、及100%的人数占比最多，说明学生对这两个单元视频内容理解和掌握程度较好，也侧面反映出这两个单元题目设计难度适中。Unit 2和Unit 5正确率为60%和80%以上的比例较低，Unit 1 正确率100%的人数最低，说明这两章的题目设置难度较大或视频内容较难理解，导致学生做题准确率降低。

图8 学生各单元习题完成情况

3.2 调查问卷反馈

除了对平台反馈的学习数据进行统计分析，笔者还就学生对本门课程总体评价、在线学习方式和习惯、学习障碍及应对策略、测试题目、学习诉求等方面对在校选课生进行了问卷调查，共回收有效问卷778份。

问卷前5题采用李克特五级量表供学生对本课程进行总体评价。55.53%的学生认为该门在线课程对其英语学习有帮助；48.33%的学生认为该课对提高英语学习兴趣有帮助；51.29%的学生认为该课对提高英语交际能力有帮助，表明五成左右学生肯定了本课程对于英语技能的提升和兴趣培养的积极作用。55.01%的学生认为课程内容生动有趣，53.98%认为内容实用性强，表明过半数学生对课程内容较为认可。

问卷6-8题主要调查学生的学习方式和习惯，包括学习频率、学习场所和媒介等。56.68%的同学喜欢在电脑上学习，43.22%喜欢用手机完成学习，这主要是因为电脑网页版的视频和题目融合在一个界面中，学生的答题体验更佳；而手机APP中视频学习和答题界面是独立分开的，一定程度上干扰了学生的学习效果。72.11%的学生通常在宿舍学习在线课，18.64%在图书馆。据“学堂在线”平台生成的学习活跃时段热力图显示，学生在周二晚上、周日下午和晚上登录最频繁，说明多数学生喜欢周末在寝室学习。仅37.92%的学生表示会制定学习计划，并按计划学习，而41.26%的学生没什么计划，想起来才会学；12.98%会在老师提醒和督促下学习，说明学生对于在线课程的学习自主性、自觉性有待进一步提升。

问卷第9-11题是关于题目数量和难易度的调查。56.94%的同学认为试题数量适中，41.26%认为太多，仅1.8%同学认为太少。71.47%的学生认为试题难度适中，13.75%认为题目难。在单选、多选、判断、填空这四种题型中，50.51%的学生认为多选题最难，43.19%认为填空题最难。

第12-14题旨在调查学生的学习障碍及应对策略。60.8%的学生认为视频中生词太多，听不懂视频内容；50.64%觉得部分视频没有字幕，不太理解视频内容；36.89%的学生认为自己缺乏背景知识，看不懂；17.35%学生反映视频播放不够流畅。观看视频遇到听不懂的地方，74.29%的学生表示会反复多听几遍。45.37%的学生遇到不会做的题目，会选择再次观看视频，直到弄懂为止；40.75%的学生会利用上下文语境猜测答案，说明部分学生在遇到学习障碍时具备一定学习策略。

第15-16题旨在了解学生希望获得哪些方面的学习支持和帮助。76.99%的学生希望提供试题答案解析；69.02%的学生希望能够增加对视频中生词的讲解；32.26%希望老师能够定期发送信息或邮件，提醒学习。同时，高达60.41%的学生认为视频中的字幕对于理解内容有帮助，27.38%认为非常有帮助，可见学生观看视频时仍以依赖字幕为主。

3.3 学生访谈反馈

笔者随机访谈了本校不同专业的20名学生，了解学生关于第一期课程的学习体验和对本课程的意见建议。受访者就平台操作、课程内容、测试题目、教师指导等方面提出了各自的想法。

“合理的页面布局和栏目设置也是平台使用情况的评价标准之一”（徐筱秋，魏蓓，2018）[6]。关于平台操作方面，李同学等5人建议“优化学堂在线手机APP的用户体验，最好是边看视频边做题，而不是看完视频再切换到答题界面”。此外，王同学等3人反映“视频播放有时候不流畅，退出后再次进入课程时应接续上次学习位置，而不需要从头再看一遍，而且有时候已经观看过的视频还会提示未观看”。张同学建议“每单元增加计时功能，在开始时开启，结束后关闭”。黄同学希望“视频可以小窗口播放，这样可以方便基础好的同学训练听力”。

关于课程内容方面，黄同学建议“在各单元原有主题基础上再多增加一些生动的情景对话或活泼有趣的影视片段，最好标出电影片段的出处，这样方便我们课后拓展学习”。蔡同学还希望“视频不要太长，内容要更偏生活化，如果能普及一些英美国家文化常识和地理等知识就更完美了”。黄同学等7人认为“对于视频中生词较多、不易理解的地方，应增加一些解析和讲解，帮助基础差的同学完成课程学习”。此外，关于视频是否需要加字幕的问题，学生们表达了各自的想法。李同学觉得“英文字幕有助于更好地理解课程内容，而且方便我们模仿发音，建议保留”；蔡同学提议“可以设置字幕隐藏和显示的功能，这样在听、看无字幕的视频时遇到不懂的地方，可以立刻切换查看字幕，加深记忆”。

关于测试题目方面，大多数受访者都提到了试题数量过多，题型较为单一、乏味。张同学建议“题目分配再合理一些。题目难度要适中，有的太简单，考察性不强”。王同学提出“有些题目的答案有点模棱两可，不是很有说服力，希望能够给出答案解析，这样我们会知道具体错在什么地方”。黄同学希望“规定填空题填词用英词或美词，以减少因拼写导致的错误”。

在教师对于课程的指导方面，李同学等3人觉得“老师较少督促我们学习在线课”。张同学建议“老师要合理安排上课时间，然后再布置在线课程的作业”。王同学表示“老师要在每单元学习开始时提醒学生按时完成课程学习任务，这样会帮助学生及时开始课程学习”。

4 改进建议

本研究通过“新理念英语”学堂在线课程平台、问卷调查和学生访谈调查与分析学生对本课程的学习使用情况、学习行为和学习障碍等。研究发现，学生对在线课程的学习整体较为满意，超过一半的学生认为课程内容生动有趣、实用性强，课程设计有助于提升英语学习兴趣并促进英语学习能力的养成。但在课程平台优化、教学内容与题目设置、教师指导等方面仍有很大提升空间。

4.1 优化平台操作体验

目前，学堂在线手机APP学习和答题界面，且无法实现边播视频边做题的功能，一定程度干扰了学生理解视频内容和答题效果，应进一步优化手机APP学习和测试界面，方便学生学习；另外，应增强视频播放流畅度，优化视频观看记忆功能，并设置每个单元的学习进度条，提升学生学习紧迫感。增加答题总览界面，便于学生审查哪些题目已经完成，哪些题目尚未完成，方便学生自检自查。以上问题将会反馈给学堂在线开发团队，以期从平台操作方面进一步提升学习体验满意度。

4.2 完善课程内容和题目

从学生各单元学习行为曲线和问卷调查的结果来看，首先，各单元视频数量差异明显，Unit 2和Unit 5教学内容较多，学生学习压力较大，导致学生在学习过程中对课程关注度逐渐下降、学习热度逐渐降低，影响最终学习效果。其次，各单元的题目数量过多，且多数学生认为多选题、填空题难度较大，建议以单项选择题为主，统一题目难度。另外，每个试题要增加答案解析，以方便学生加深对学习内容的理解。针对每单元的视频内容，建议增加生词解释和英文字幕，对重点知识和句型进行总结。在第二期课程开课前，于每单元的教学任务前增添生词讲解视频，并加入英文字幕，帮助基础较差的学生减轻学习障碍，促进知识的内化吸收。

4.3 完善课程运行管理，加强教师指导

一是加强教师对学生学习过程督导。为避免学生在结课前进行集中“突击”，同时帮助学生克服学习倦怠，教师应经常督促、鼓励、指导学生进行在线课程的学习。同时，可对每节课设定学习期限，超出期限则取消学习权限。二是设立课程的平台管理员，及时把握学生的学习进度，在后台适时发出提醒信息，督促学生及时完成课程学习要求。三是安排课程助教，协助教师一同对学生讨论区提出的问题及时答疑解惑，并组织学生积极在讨论区发言交流，激发学生学习的主动性、培养“提出问题-解决问题的能力”。

5 结语

在线课程的兴起与发展有力地推动了高校教学理念的转变和教学模式的创新改革。本研究通过对“新理念英语”在线课程第一期的学习数据进行分析，了解学生的学习情况和学习行为，并通过问卷调查和访谈，调查学生对课程的满意度、学习障碍和需求等。从平台数据分析结果来看，随着课程的开展，学生对课程的关注度逐渐降低，且学生各单元的测试得分有较明显差异。一方面说明各单元视频内容和题目设置需进一步优化，也说明老师对学习过程的督促与指导较为欠缺。从问卷调查和访谈结果来看，学生对在线课程的学习整体较为满意，但课程平台优化、教学内容与题目设置、教师指导等方面仍有很大提升空间。据此，本文提出了相应的解决办法和意见，希望为完善下一期课程提供指导和借鉴。由于样本大小和时间等因素的限制，本研究结论存在一定的局限性。今后的研究还需从学习分析理论视角进一步挖掘平台数据的深层意义，以便更好地提升在线学习效果。