唐 伟,邬乐骏,龚 璇,曾云昆,陈晓雨,刘艳格,朱燕楠
(云南开放大学,云南 昆明 650500)
随着互联网的普及与发展,开放教育无纸化考试改革势在必行。通过无纸化考试推广与应用,让开放教育所有统测课程的无纸化考试实现全覆盖,通过考试计划包设置,实现随到随考、随学随考等多种考试模式,把广大学习者从过去纸考的固定时间,固定地点的传统考试模式中解放出来,无纸化考试的目标是为学习者提供随时随地能考的人性化、个性化考试服务,充分应用和发挥计算机自动判分的功能,把广大教师从批阅试卷的繁重劳动当中解脱出来。
本课题的意义在于通过无纸化考试改革,不断改进考试组织形式,通过考试平台,根据不同的课程要求和不同考点的需求,实现Internet在线考试、线下机房局域网统一考试、远期实现手机或平板电脑的在线模拟考试等多种考试模式,为远程学习者提供智慧便捷的考试服务。
无纸化考试的试题是由试题库中随机抽取,客观题由计算机自动评分,成绩数据自动导入教务系统,减少考试环节,节约纸张和印刷设备的损耗,节省考务费用,减轻教师和考务人员监考和阅卷的工作量,极大地降低人力、物力、财力的损耗,提高经济效益,是绿色、可持续、适应现代社会和未来考试发展的必然趋势。
无纸化考试把广大学习者从过去传统考试模式的固定时间、固定地点中解放出来,使学习者能够享受随时随地能考的便捷智慧服务,学生的个性得到尊重和体现,同时也提高了学习者应试的积极性,使学习者能够体会寓学于乐、寓考于乐的乐趣。
无纸化考试把教师从批阅试卷的繁重劳动当中解脱出来,让教师能够把更多的时间用在资源建设和钻研教学上,促进教师教学理念的更新、教学水平的提高,对于打造新时代充满活力、素质优良的教师队伍奠定基础。
无纸化考试形式的多样化,将增强学校在同类高校中的竞争性,同时使得学校的办学定位、开放教育理念得到了充分的明确和展现,满足全省各类学习者“人人能学、时时可学”的学习需求,使得远程教育质量得到保障,也推动了学校的教学改革。
无纸化考试可以有效防止作弊、漏题事件的发生,进一步提高了考试的透明公平性,也是积极构建节约型学校的有力举措,是贯彻落实习近平新时代中国特色社会主义思想的行为体现。
现代远程开放教育的初心是要通过信息技术为广大的学习者提供随时随地可学的优质教育资源,为学习者提供无处不在的学习支持服务。其中考试服务也是学习支持服务的一种类型,然而由于历史和技术的原因,广播电视大学的考试很多是采取了纸质考试的形式进行,形成了一整套完整的考试管理流程和制度,使得远程教育质量得以保障。也正是由于这样的考试形式导致远程学习者无法真正按照自己的学习进度和时间自由安排考试测评时间,这是特殊的历史时期和技术条件限制所导致的,这与开放大学的开放办学理念是相悖的,是与我们为学习者提供无处不在的学习支持服务的初衷有差距的。现在随着信息技术的不断进步,特别是5G通信技术和人工智能技术的逐渐成熟,通过网络实现随到随考的愿景将得以实现。
计算机和互联网技术的发展,促进和推动开放教育的发展,也促进了开放教育考核方式的变革。目前,我国“5+1”所开放大学及省级广播电视大学的考核方式虽然有所改革,比如加大了考核中的形成性考核比例、增加了形成性考核的方式、增加了无纸化考试的科目,但是仍旧以“三统一”的纸质考试模式为主,即“统一考试时间、统一试卷命题、统一评分标准”的模式。该模式的基本特点是命题封闭、组织工作严密、有一套严格的规章制度,强化了考试的严谨性,在各省级广播电视大学中一直沿用。但是随着开放教育和信息现代化的迅速发展,这种传统的纸质考试模式已经无法满足开放教育的发展和学员的需求。如何将现代信息技术手段应用到考核方式的变革中,通过考试方式的变革,为学习者提供更加智慧便捷的考试服务成为当务之急。
所谓无纸化考试是以计算机网络为基础,利用先进的计算机技术、网络技术、数据库技术和数据加密技术等,通过计算机网络和互联网来完成考试报名、抽题组卷、下传考题、上传考试过程和结果,考生的考试过程全部在计算机上进行,并由计算机自动或在人工干预下完成试卷的评阅工作。与传统考试相比,无纸化考试能够更加有效地确保考试的公正性和客观性。考试题目由试题库随机生成,保密性高,既可保证试题的广度和完善,也可杜绝考生的作弊现象,形成良好的考风考纪和考生的自主学习。还可以促使学校加强考试管理、教学管理,改革教学方法,在客观上起到以考促学、以考促教的效果。同时又能有效地避免纸质试卷出现泄密的情况,具有提高工作效率、方便考生、规范管理等不可替代的优势。
本课题在于通过跟踪最新信息技术和教育技术前沿发展成果,结合云南经济社会发展实际以及云南开放大学系统办学特点,对开放教育考试模式进行创新研究,大力推进无纸化考试在云南开放大学以及二级学院开放教育考试中的广泛应用,最终将实现全面的云开统测课程和国防高职所有课程的无纸化考试全覆盖。
为确实掌握云南开放大学基层教学考试现状,课题组选取云南开放大学部分二级学院、学习中心,对其教师、学生和考务人员采取实地走访+问卷调查(根据实际情况采用纸质问卷或网络问卷)的方式开展调研,了解基层考试组织情况、无纸化考场建设现状、网络通信情况、学生上网能力情况等,形成综合调研报告,并以此需求设计适用云南开放大学系统实际情况的考试系统。采取规模化考试进行无纸化考试试点,收集系统使用过程中出现的问题和解决方案等材料,不断迭代无纸化考试系统和考试组织模式。
云南开放大学二级学院和学习中心分布在全省各个地州,由于历史原因和技术条件,他们的机房条件、考务人员配备、对考试平台的认可度、组织管理方面都差强人意,这在一定程度上给考试系统的部署和推开工作带来一定的阻力,需要在考试系统设计中充分考虑到这些因素,争取把系统做得简便易行,并在部署和使用的过程中给予他们足够的技术支持,以保证无纸化考试全面推开。
通过对目前云南开放大学考试现状进行调研,从云南开放教育的情况看,办学类别层次较多,有云南开放教育本、专科,有专本衔接项目、有中高衔接项目、有“一村一”项目 (国开和省开)、有校地合作村干部素质和能力双提升项目,各办学类别层次对学习者的入学门坎要求不同,对学习者知识背景的要求有差异,对学习者的教学要求不一致,学习者对过程性考核和终结性考核的适应性要求也参差不齐。大量课程仍然是纸质考试方式,无纸化考试前期进行了英语和数学两个科目的试点,考试系统采取了自主开发的一款机考系统,该系统不能联网,没有与教务系统实现对接,仅能实现简单的选择题、判断题等客观题型考试。
学校教师实行一岗双责,既要承担高职日常教学又要承担开放教育课程管理和日常教学工作,工作压力大。每次考试阅卷阶段都是一个矛盾突出的阶段,存在教师工作量不均衡,阅卷工作由于绩效分配问题没有体现多劳多得原则,教师意见较大。如果能在开放教育形成性考核和终结性考核两个环节实现自动评分,将大大减少教师的工作量,把教师的精力集中在搞好资源建设和教学研究方面。
对体系机房建设、无纸化考试需求情况调研,主要调研无纸化考试组织观念、技术人才储备还有硬件机房准备情况。
无纸化考试工作的改革和创新是一项系统工程,涉及到系统内各个层面,要做好这一项工作必须了解教学点在实际考试工作中存在的问题,增进与教学点的沟通和了解,并细化服务工作。考试中心为此于2019年10月21日至24日,对昭通开放学院、昭阳进修学校、会泽党校、沾益县职教中心、曲靖工商学校(珠江源开放学院)进行了为期四天的实地调研。主要调研今年计划开展无纸化考试试点的村(社区)干部双提升、中高衔接的教学点。
对于推行基于网络考试的改革,在实地了解工作中,省校技术人员实际演示了云开考试系统1.0的使用,考试系统的安装、操作,对于教学点管理人员、学员考生来说,操作起来不算太难,受到所到二级学院的一致认可,都认为无纸化考试在考试时间上比较灵活,可以在一段时间内完成,由于是系统随机组卷,监考教师压力相对较小,大大节省了人力物力,便于考点安排,而且不存在纸质试卷的保管和回寄等。该五个教学点都有专门负责计算机管理和网考工作的相关技术人员,推行机考的硬件设备(计算机机房)五个教学点都能满足考试的需要。
存在的问题:
1.担心学员不会操作(主要是会泽党校双提升的学院),考试过关率较低,如果一次考试不合格是否可以重复考一次。
2.在考试时间的安排上如国开的期末考试省开课的考试时间能否提前至统开课前面。
3.国开、云开两个系统的数据能否统一格式,以便减少教学点的一些工作量。
总体上看,针对无纸化考试改革工作,办学体系内各二级学院、学习中心和教学点的干部职工在思想观念认识方面有待于转变和提升,他们仍习惯于过去传统纸质考试方式的组织和安排,作为推进无纸化考试改革工作必需的硬件设施条件,二级学院基本可以满足,但部分学习中心、教学点由于设备条件和技术人员的不足,较难满足学校推进无纸化考试改革工作的需要。从调研情况看无论是无纸化考试组织观念、技术人才储备还是硬件机房准备情况都不尽人意,距离标准化机考考场的要求还有很长的路要走,在一些中高衔接的二级学院、学习中心开展试点还是可行的。
云南开放大学由于发展的需要存在多达16种的教育类型,国开课程、云开中高衔接项目、村干部双提升项目、云奥合作项目等。考试有涉密的也有不涉密的,形式多样。学生有在校学生,如中高衔接项目学生,有分散在全省的社会招生,如国家开放大学学生和云奥合作项目学生,也有由国家机构牵头组织的成建制学生,如村干部双提升项目。需求多样化,考试涉及密级的原则上只能组织到现场考试,一些不涉及密级又有现实需求的学生类型则可以组织网络考试,采取技术的方式确保考试的公平、公正和公开。由于项目类型多样,考试需求也多样,难以用一种考试组织模式完全覆盖所有考试类型。
分布于云南全省各地的二级学院、学习中心、个人网络情况不尽相同,网络带宽、上网速率、无纸化考场情况千差万别,为增强适应性,考试平台一定要浏览器兼容性强并轻量化设计。同时由于需求多样化,考试平台必须满足远程网上考试和现场机考、个人在家考试几种形式,对于考试平台的兼容性要求高了。
根据学校实际需求,构建一套基于移动技术的、平台适应性兼容性较强的考试系统,充分满足全面、大并发量的云开考试系统。由课程责任教师自主建设题库,涉及教师出题、题库上传、维护等工作。云南开放大学考试系统2.0版本将完全根据学校系统实际需求情况开发,更有针对性、数据安全能够得到更充分保障。
云南开放大学二级学院和学习中心的组织架构不够稳固,行政隶属关系不强,统一建立标准的无纸化考场长期稳定运行,从组织和管理上并不可行,计划采取总部制定标准,二级学院学习中心自建的形式或者由有意愿的公司统一建设,收取一定服务费的形式开展建设工作。
各基层办学点教师、技术人员流动性较大也是难以解决的问题,标准化考场建立后,经过培训二级学院学习中心的老师能够很快掌握,但教师岗位变动大,培训的压力也随之增大,解决的对策是利用每年开展的千人教师培训进行考试工作专项培训,制作培训微视频放置在全网教学平台供教师进行学习。
2020年以来由于疫情的原因,采用无纸化考试系统试点了全日制学生和部分远程教育学生。对于补考的学生采取了集中到学校机考的形式,考试过程非常顺利,无论教师还是学生都认可和支持这样的模式,教师远程对主观题进行批阅,客观题计算机自动阅卷,自动合成成绩,大量节省了人力资源,提高了工作效率。存在问题主要是试题库的建立还有很长的路要走,由于疫情的因素,为了保证无纸化考试能够顺利进行,老师们加班加点出题,确保了本次试点的成功,但很多科目都只有一两套题,很难保证学生考试时面对的考题完全不重样。另外由于项目实施匆忙,很多计算机不具有摄像头,没有做人脸识别,其职能由现场监考老师完成。
对于远程学生和不能返校的学生也试点了网络无纸化考试,这部分情况相对复杂,通过摸底调查发现部分学生不具备电脑设备,但都拥有智能手机,由于疫情因素平时上网课很多学生也是通过手机上的。这些情况表明无纸化考试系统不但要构建基于计算机的考试系统,也要构建基于智能移动通信设备的考试系统,这是无纸化考试系统的未来发展方向,也是提供随地随考服务的必要手段。
为了解实际运作过程中教师和学生对于无纸化考试存在的困难和需求,课题组对参与国家开放大学开放教育考试、云南开放大学开放教育考试以及全日制考试的656名学生和192名教师就无纸化考试过程中碰到的问题进行了问卷调研。
针对学生就其在无纸化考试中可能碰到的三个问题进行了问卷调研,情况如下。
图1 学生认为无纸化考试对电脑操作水平的要求情况统计
图3 学生更倾向于哪种考试方式情况统计
图4 教师参与无纸化考试的工作年限情况统计
图6 教师对目前的考试系统功能是否能满足业务需求的情况统计
图2 学生认为无纸化考试中最大的困难情况统计(多选)
从调研统计可以看到,学生认为无纸化考试还是需要较高的计算机操作水平的,这说明我们的无纸化考试系统在智能化、简易化方面还有很多改进的地方。学生无纸化考试时主要面临的问题还是没有电脑和摄像头,这与我们省情是相符合的。可以看到要实现完全的无纸化考试,在系统内建立标准化考场势在必行。从学生对于纸质考试和物质化考试的态度上,基本都是认可的,只要无纸化考试环境进一步完善,研究组相信无纸化考试系统将为学生提供智慧便捷的考试服务,到时学生对于无纸化考试系统将会全面认可。
针对教师在无纸化考试过程中容易碰到的问题进行了问卷调研,情况如下。
图5 整体来讲,教师认为目前的考试系统是否容易操作的情况统计
图7 教师的业务知识熟练度
从教师的问卷调研统计情况看,长期从事无纸化考试的教师比例较低,这与云南开放大学开展无纸化考试时间不长,覆盖面不广有关,随着无纸化改革的不断推进,这一情况将得到改善。57%的教师认为无纸化考试系统操作还是有点难,这个与研究组当初的认识有一定偏差,虽然运用的考试系统已经很简化,但是离智能便捷的目标还有距离。从教师对考试系统功能满意度看,总体是认可的,当然也还有根据需求不断迭代升级改进的空间。
成立云南开放大学无纸化考试工作领导小组,二级学院、学习中心成立相关工作组,统一协调推进这项工作。改变以往纸质考试固定时间、固定地点的单一模式,形成灵活多样,适应不同项目、不同生源需求的无纸化考试模式,主要有以下几种:
支持学校组织的终结性考试模式,即设定一个考试时间,考生在该时间准时参加终结性考试,只能考一次。
支持学校组织的随到随考模式,即设定一个考试的开始和结束时间,考生在此时间范围内到校随到随考,但只能考一次。
支持学校组织的随学随考模式,即设定一个时间范围,学生居家或在校,在规定的一段时间范围内可多次参加考试,最后取最高成绩为期末成绩。
针对云开考试组织面临的问题,亟需一套完善的以云服务为基础的一体化考试解决方案,能有针对性的解决现在考试中心题库、网考及阅卷问题。具体需实现的目标如下:
能利用线上网考、远程监管、人脸生物识别等高新技术,自动捕捉考试中的违纪情况,解决考生分散全省各地而带来的巡考及监考的麻烦;网考中传统的身份识别方式外,还可以支持最新的人脸生物识别及活体检测技术,并提供一定的相片冗余,考生近8年的相片及身份证相片都可以做到识别校验;网考中能对考生的考试过程进行监控,做到随机抓拍相片,抓拍的相片结果需对不符合人脸、入镜陌生人脸系统自动做出判断,并整理违规名单,供学校进行审核;能识别照片登录、视频、外接显示屏等违规行为进行自动判断,检测、并提示违规行为;针对网考过程中可能出现的意外状况,如断电、断网,异常提交,系统要有解决办法,避免试卷丢失,在规定时间内考生可以继续上次的考试,如确实需要增加考试机会的情况,系统能设置重考;在网考的管理端,需要支持对整体网考的进度、科目进度、学习中心进度进行监管、并支持对学习中心账号的权限分配。
能利用题库按多种组卷模式,可进行试题、试卷的导入,进行题库及卷库的管理,并可以按学校要求进行试题多属性、比率、试卷结构等多种组卷方式,按需生成多套试卷,考试时随机抽卷,最大程度的做到试卷不重样;针对一些课程还无法进行无纸化考试的实际,要求系统可导出试卷及答案提供给线下数码印刷和阅卷系统,同时提供试卷给线上考试,完成无逢对接;网考中试题可以按要求进行小题乱序及选项乱序,以杜绝考生作弊行为。
能实现考生试卷客观题自动判分,考试时间完成后,就直接生成阅卷任务,无需核分登分,无需等待试卷回收。网考中涉及的题型会有主观题部分,所以需要支持针对网考的主观题阅卷,阅卷端要求支持全键盘、鼠标、阅卷轨迹等多种模式;在阅卷的过程中,管理人员可以随时进行阅卷质量的监管,包括但不仅限于:阅卷进度、人员阅卷数量、平均分、最高分、最低分、标准方差等,并能针对问题卷进行打回,让评卷老师进行重新给分。
能支持学生在任何可以上网的地方进行考试答题,有效解决考点、考场的硬件需求。
1.题库建立更新与维护
无纸化考试题库建设是成功的关键,原则上由各专业学院的课程责任教师负责建设,把题库建设工作纳入教师工作职责进行考核。为保证试题的随机抽取有一定的量,试题库原则不能少于10套,并按时进行更新维护,以便系统对题目进行乱序抽取,确保考试试卷不重复。这不但需要我们教师的努力付出,也需要绩效激励机制的支持,使之形成长效机制。云南开放大学试行的学院制应该在绩效分配中考虑该项工作的绩效因素。
2.考务管理规范
能处理学校的下属机构、课程、专业、考生、考试时间等管理设置;建立一支分布于各二级学院学习中心的考务工作队伍,为保证该队伍的稳定运行,建议在一些关键二级学院和学习中心建立核心考务人员,特别是一些考生众多的二级学院、学习中心。
3.考试数据管理
支持题库、网考、阅卷一体化平台,考生数据、课程、试卷等数据流自动流转;考试数据与学校教务管理系统的对接对于减轻专职教师工作压力非常重要,做好数据共享工作。做好数据安全工作,确保有专人对考试数据进行管理与维护。
本课题是一个应用型研究,在试点的过程中不断出现新的问题很正常,我们需要根据因为教学体系、办学类型而改变的教师和学生的需求,不断迭代考试系统和考试组织模式,通过不断研究,努力打造更加适应开放大学多种形式开放教育的考试平台和考试组织模式,为开放教育教学质量控制提供坚强保障。