高校成人教育学士学位英语机考策略研究
2022-12-28
摘要 高校成人教育学士学位英语机考是运用信息技术优化命题、组考、成绩分析与反馈的过程,是提高考试实施效率、充分利用考试数据优化评价质量的基础。在分析现状及存在问题的基础上,提出高校成人教育学士学位英语机考策略,通过强化教学质量监控和评价结果反馈,促进教学工作水平和考试管理水平不断提升。
关键词 高校成人教育;学士学位;学位英语考试;机考;试题库系统
0 前言
2020年10月,中共中央、国务院印发《深化新时代教育评价改革总体方案》,明确提出“充分利用信息技术,提高教育评价的科学性、专业性、客观性。坚持统筹兼顾,针对不同主体和不同学段、不同类型教育特点,分类设计、稳步推进,增强改革的系统性、整体性、协同性”[1]。高校成人教育学士学位英语统一考试(以下简称学位英语考试)是由省级高等教育主管部门主管,省级考试机构组织的统一考试,其目的是客观地评价本地区非英语专业成人本科毕业生申请学士学位者的英语语言知识和运用能力,考查其是否达到普通本科教育(非英语专业)英语教学的一般要求,是各省市成人高等教育本科毕业生获得成人学士学位的必备条件之一[2]。充分利用信息技术,为学位英语考试提质增效,是加快高校成人教育信息化建设的抓手,也是推进新时代高等学历继续教育发展的重要课题。
1 学位英语考试的特点
学位英语考试是典型的结果评价,从考试所处地位来看,是对高校成人教育英语学科教学质量的评价,是教学过程中不可或缺的环节;从考试考核内容上看,主要考核学生运用语言的能力,重点考核阅读能力以及对语法结构和词语用法的熟练程度,范围参照全日制文理科本科英语教学大纲所规定的一至三级除说的技能以外的内容;从考试试卷题型设置上看,除英汉互译题是主观性试题外,其余试题均为客观选择题。
2 学位英语考试现状和存在的问题
2.1 考试现状
自1991年以来,在30多年的学位英语考试组织管理实践中,命题工作一直采用命题组集中入闱的方式;考试采用考生纸笔作答形式;评卷采用机器加人工的方式,主观题由人工评阅,客观题由机器评阅;评卷结果以成绩总分的形式向考生和考生所在院校进行反馈。随着信息技术与教育深度融合,在高校成人高等教育教学实践中,线上线下混合式教学模式已成为主流[3]。学位英语考试采用的传统模式已经明显落后于新的教学方式,而且在一定程度上制约了高校成人高等教育英语教学的发展。
2.2 存在的问题
2.2.1 考试成本持续增大 学位英语考试是高利害关系评估测试,具有考生规模大、考点分散在各高校内、工作环节多、涉及人员多等特点。随着外部考试环境的变化,考试安全保密工作面临的风险和挑战越来越严峻。此外,出于新冠疫情防控需要,为了保障考生身体健康和生命安全,组考工作内容、工作强度也相应增大,特别是在试卷准备、考场准备、考试实施等环节,致使人力、物力成本持续增加。
2.2.2 评价反馈信息单一 评卷结束后向考生反馈的只有总分信息,缺少对于考生掌握知识点情况的分析反馈,不利于考生了解考试反映出的学习薄弱之处。而且,仅从总分上也不能全面反映考生阶段性的学习成果,特别是对于多次参加但未通过考试的学生而言,学习过程中取得的进步得不到有效体现,对于激发学生学习主动性,培养学习习惯、语言兴趣等可能会产生负面影响。
2.2.3 对教学的反拨作用发挥不足 学位英语考试属于区域性统一考试,考试成绩可以反映各高校学生整体学习水平,也可以反映高校课程实施效果与课程目标存在的偏差,还可以作为衡量教师教学水平和治学态度的参考。目前,高校对于考试的认识还主要停留在学位授予条件方面,对于利用考试数据信息重视不够,对于挖掘隐含的教学内容、教学水平、学风建设等问题探索不足,尚未形成有效的信息分析与反馈机制,使高校层面、系部层面、任课教师还不能及时通过考试了解教学目标达成情况和存在问题,考试对于教学的反拨作用发挥不足。
3 学位英语机考策略
针对目前学位英语考试中存在的不足,要对学位英语机考建设进行整体设计,共同推进考试命题、考试实施、成绩分析反馈的信息化建设。一方面,在命题工作环节的题库系统建设中要充分考虑评价反馈的多样化需求;另一方面,在考试实施环节的测试系统构建中要综合考虑省级考试机构、院校和考生不同的使用需求。通过学位英语机考建设,推进成人高等教育英语学科评价改革。
3.1 构建支持多目标评价的试题库系统
通过对高校成人教育英语教学评价的调研与分析,依据评价目标、命题主体、测试时间特点可分为过程性评价和结果性评价。过程性评价命题主体是高校,旨在反映学生学习中的情况,具有题型和题量多样化、考试时长不同、评价次数多的特点,如单元测试、模块测试等。结果性评价命题主体是省级考试机构或高校,旨在检验学生学习达标情况,具有题型、题量、考试时长相对固定,评价次数少的特点,如学位英语考试、课程结束考试等。兼顾两种类型评价的题库建设需求,构建支持多目标评价的试题库系统,是改进结果评价,强化过程评价,加强命题教师队伍建设,整体提高评价水平,推进学位英语机考的首要工作。
3.1.1 总体设计多目标评价的试题库系统兼
顾过程性评价和结果性评价需求,设置基础库和扩展库:基础库供学位英语考试使用,扩展库供高校组织考试使用;基础库由省级考试机构建设、管理,扩展库由高校建设、由省级考试机构和高校共同管理。多目标评价的试题库系统采用题库管理、征题、组卷、审校等功能一体化设计,是一个动态管理系统,包括管理模块、征题模块、审校模块、组卷模块等。
1)管理模块。管理模块用于配置用户账号、角色、权限及功能,维护试题库结构,设定命题和审题任务,管理试题和试卷使用等。管理模块由系统管理人员使用。
2)征题模块。征集试题是题库建设的基础和中心环节。征题模块主要用于收集和维护基础库和扩展库的试题。征题模块功能包括试题导入、试题参数标定完整性核查、查重及完成情况统计等。基础试题库征题模块由省级考试机构选聘的命题组教师使用,扩展试题库征题模块由各校负责教学工作的教师使用。
3)审校模块。审校模块主要用于多人、多轮、多角度审查、研磨试题试卷[4]。审校模块功能包括试题校核、试卷审查、考核内容分布统计、重复考核统计等,实现自审、互审工作环节的协同和管理。基础试题库审校模块由命题管理人员和命题组使用,扩展试题库审校模块由各高校负责教学工作的命题教师使用。
4)组卷模块。组卷模块主要用于抽取试题并生成试卷。组卷模块功能包括抽题管理、组卷管理、试卷查询统计、库存试题管理等。基础试题库组卷模块由省级考试机构命题管理人员使用,扩展试题库组卷模块由高校教学管理人员使用。
3.1.2 系统建设策略
1)加强顶层设计,统一并优化试题参数。试题库建设需要按照考试目标,分类加强顶层设计,并统一优化参数设置。一方面要根据考试的性质和特点、考试内容和考核要求,制定命题细目表,通过预先设计试卷蓝图,确定搭建题库框架,并明确内容结构、难度结构、能力结构、题型结构和分值权重等;另一方面要对试题基本参数和使用参数设定进行统一,并细化试题参数标定规则,提高试题参数标定质量。试题基本参数设置旨在体现题目特征,包括知识维度参数(知识单元、章节、关键词、试题类型、分值、难度、区分度等)、能力维度参数(识记、理解、应用等)、其他参数(命题人、审校人、命题时间、审校时间等)等。使用参数设置旨在通过积累试题反复使用中的实测值,为修正提高试题参数标定准确性提供参考,具体包括使用次数、最后使用时间、实测难度、实测区分度等。
2)做好征题工作,促进命题资源整合。试题库建设除了要保证质量外,还要保证一定建库规模。一方面要依据考试不同的目标要求和题库使用情况,明确征题需求,合理安排征题任务,为试题库快速、高质量地扩充容量奠定基础;另一方面要充分发挥扩展库对于基础库扩充的支撑作用,制订扩展库补充基础库的征题计划,整合命题资源,为系统推进学科评价改革的整体性和协同性提供有利条件。同时,要加强补充试题质量控制,定期组织命题组教师对补充试题的内容及参数标定进行审核,确保优中选优、标准一致。
3)增强信息安全防护能力。题库建设虽然可以降低大规模考试的安全风险,增强应对突发事件的能力,但是也存在涉密人员多、保密环节复杂等安全问题。因此,在题库建设的征题、审校、组卷等环节都应该认真做好安全保密工作。题库建设工作中要制定相应的保密制度并严格遵守。题库相关工作人员的操作权限设置应本着最小化原则进行,并配备独立的局域网和服务器,内部数据的传输、存储要采取加密技术。
3.2 构建通用型测试系统
构建通用型英语测试系统能够改善多数基于计算机的英语测试系统[5]在测试形式和试题类型支持方面的局限性,既可以满足结果性评价需求,也能够满足过程性评价需求,是高校成人教育教学与考试管理信息化的重要组成部分。
3.2.1 总体设计 测试系统采用与试题库分离的设计,利用试题库生成试卷,通过下载方式导入测试系统。测试系统按照用户、角色不同,为用户提供不同的权限和功能,承担多个角色的同一用户可以具有多个权限。测试系统包括系统管理端、考务管理端、监考端、测试端、评卷端等。
1)系统管理端。系统管理人员通过管理端进行系统管理与维护,系统管理端功能主要包括系统的基本信息(如高校、考场及考位等信息)管理与维护、系统用户功能和权限管理、系统数据备份与维护等。
2)考务管理端。考务管理人员通过考务管理端进行考试管理和成绩管理,考务管理端功能主要包括考试计划管理、报考管理、考场编排管理、监考管理、考场状态查询(如在考人数、提交人数、缺考人数等)、答题数据回收、评卷组织管理、成绩统计与分析、考试数据归档等。
3)监考端。监考人员通过监考端进行考试实施管理,监考端功能主要包括测试机管理、入场和测试管理、查询考生状态(设备调试、登录、提交)及异常情况处理等。
4)测试端。考生通过测试端参加测试,测试端功能主要包括身份核验、试题目录、阅览布局调整、记录标记及时间提醒等。
5)评卷端。评卷教师通过评卷端开展阅卷工作,评卷端功能主要包括身份核验、任务查询、主观题评分管理等。考务管理人员在系统中制定阅卷工作安排之后,评卷教师会收到阅卷任务通知,在指定评卷时间内可登录系统评卷端参与阅卷工作,对分配的考生答卷主观题进行评阅。答卷客观题评分由系统完成,在导入正确答案后,系统自动进行评阅。
3.2.2 系统建设策略
1)采用B/S模式。首先,测试系统采用B/S模式,客户端只需借助浏览器即可访问系统,简化了安装与配置,节约了管理成本;其次,B/S模式能够更方便地进行升级与维护,能更好地适应系统管理功能升级;最后,由于对客户端计算机设备要求不高,增加机考考位比较简便。
2)充分利用现有设备加快系统建设。学位英语考试是常规工作,因此,测试系统建设应尽量摆脱建设周期和经费的限制,尽量利用现有资源进行建设。由于各高校都有信息化建设的基础,因此,系统建设可以充分利用现有计算机教室和设备,提高现有设备使用率,有效减少建设成本。
3)建立系统使用和管理制度。一方面要依据考试方式、模式变化重新构建组考工作流程,规范系统的使用和管理;另一方面,考虑到考试工作人员的流动性,要建立基于角色和任务的访问控制机制,合理规划用户、角色的访问、修改权限,并可根据工作人员流动动态分配使用权限。此外,还要建立网络安全管理制度,强化和运用安全措施和手段,保障考试数据安全。
4)持续完善人员培训机制。系统建设的最终目的是为考试工作人员提供便利和助力,因此,系统使用人员培训是系统建设的重要环节。系统操作使用培训要以人为本,依据人员信息化水平现状、工作职责进行操作使用培训和必要的基础知识培训并形成机制。同时要根据实际培训效果,动态调整培训内容和对象,促使受训人员能尽快熟悉并适应新的考试工作环境。此外,还要注重在不断梳理总结系统使用经验的基础上,持续对培训内容和方式进行完善,特别是要针对考试中可能出现的突发情况组织演练,避免因操作使用不当对考试工作带来负面影响。
3.3 运用考试数据为教学质量管理、试题质量控制提供支撑
考试数据是试题试卷设计和评价结果最直观、最具体的反映,通过比对、分析考生群体/考生作答信息、试题试卷设计参数信息等考试数据,能为院校评估教学质量、调整教学侧重点提供依据,也能为考生查漏补缺提供指导,还可以为科学评价命题工作质量提供数据参考。
3.3.1 以数据促考试指挥棒作用发挥 在构建支持多目标的试题库系统和通用型考试系统基础上,通过考试数据在命题工作、教学工作之间流动和共享,以考试数据为纽带,形成“考试机构—高校教管部门”和“教师—学生”的双环路。一方面通过省级考试机构与高校之间的考试数据共享,宏观上可使高校动态了解本校学生整体以及各年级学生群体在地区高校中的相对英语水平和水平变化情况;另一方面通过“教”与“学”之间的数据流动,微观上使高校教师动态了解本班级、本年级在本校的英语水平以及学生个体的学业水平及变化情况。通过数据流动和共享,形成推进教学工作质量提升的合力,充分发挥教育评价的指挥棒作用。
3.3.2 改进结果评价,开展增值评价 一方面要利用考试数据丰富结果评价内容。评价内容除了提供考试总分外,更应充分展现评价构成的细节,利用当次多维度、多层次的命题设计参数数据与考生个人作答数据进行比对分析,运用多维度得分率为考生目前知识掌握情况进行精准画像,为考生了解自身知识掌握情况提供便利,提高后续学习针对性,强化评价的诊断和导向作用。另一方面要利用考试数据开展增值评价。从高校或考生群体角度,通过对高校或考生群体(年级、班)进行增值评价,运用分项得分率、排名变化、动态及格率、动态优秀率等指标,更加准确地评价高校或考生群体(年级、班)教学的实际成效,为高校教学管理部门监控教学质量提供依据,促进高校持续优化教学工作;从考生个体角度,通过多维度比较、分析当前成绩数据与历史成绩数据差异,运用得分率及排名变化等指标,全面、科学反映学生进步情况,强化考试对持续学习的激励和促进作用。
3.3.3 建立评价信息反馈机制通过建立反馈机制,形成“教—学—评”闭环,持续改进教学质量。建立健全安全的评价信息反馈途径,通过数据可视化方法反馈评价数据,结果评价和增值评价信息一是要及时推送给高校,使其全面、系统了解“教”实施的实效,为进一步改进教学管理提供数据支撑;二是要及时推送给考生,使其及时了解“学”中发现的问题及可能原因;三是要及时推送给命题组,为提升“评”的质量提供参考和依据。通过不断积累,分析试题、试卷使用实测数据,考生数字画像将更加贴合高校成人教育学生群体,使得命题工作更加切合教育特点,更加客观、科学。
4 结束语
高校成人教育学士学位英语机考通过在考试命题、组织考试、成绩分析反馈中引入现代信息技术,为促进考试改革提供助力,为提升考试工作整体水平提供支撑,是顺应新时代深化教育评价改革需要、加快教育现代化建设的具体体现,对于促进学位英语考试提质增效,办好高等学历继续教育,严把高校成人教育出口关,具有重要意义。
参考文献
[1]中共中央国务院印发《深化新时代教育评价改革总体方案》[A/OL].(2020-10-13)[2020-10-20].http://www.gov.cn/zhengce/2020-10/13/content_5551032.htm.
[2]北京教育考试院.北京地区成人本科学士学位英语统一考试说明[M].北京:高等教育出版社,2013:1-6.
[3]张莉玲,马忠玲.混合式教学在成人高等教育中的实践与探索[J].当代继续教育,2019,37(2):58-63.
[4]詹晓庄,沈洁,苏婧,等.自学考试命题审校工作信息化策略研究[J].高等继续教育学报,2020,33(6):72-76.
[5]邓斯芮,周杰.我国英语无纸化考试研究综述[J].教育文化论坛,2019,11(3):106-111.
作者:詹晓庄 秦骁