蔡武越1
黄美薇2
胡佳琪2骆
高考分数预测大学方2
(1.教育部考试中心,北京100084;2.北京师范大学,北京100875)
国际考试安全准则介绍及对我国考试组织管理的启示
我国是考试大国,每年都有上千万的考生参加各种类型的考试,考试作弊如泄题、、抄袭等层出不穷。从国外来看,作弊问题也普遍存在,如31%的爱尔兰学生承认在考试中有过作弊,55.8%的美国学生承认传递过试卷[1]。为了防止考试作弊,考试组织机构每年都要花费大量的人力、物力和财力用于考试的现场监控,包括培训监考人员、对考场实施无线屏蔽、调用无线信号监测车等,考后还会对考生作答进行雷同卷甄别来识别作弊嫌疑考生[2]。虽然这些技术能够检测出一部分作弊考生,但是仍然存在不少漏网之鱼。如果能构建主动、前瞻的考试管理计划和执行准则,对考试的全过程实行标准化、规范化管
理,将有助于减少违规行为的发生。因此,如何制定考试安全计划、堵住考试的安全漏洞、预先防范降低考试作弊带来的风险对考试组织者而言意义重大。
考试安全保障也引起教育和测评领域研究者的广泛关注,国际考试委员会(International Test Commission,ITC )作为非营利学术组织,构建了覆盖考试全过程的安全准则,供各国的考试组织和服务部门参考,并呼吁考试组织者按照安全准则防范考试违规行为,提高考试的安全性。本文介绍国际考试安全准则的主要内容,并结合我国考试实际情况,分析考试安全准则对我国考试组织管理的启示,为完善考试安全保障提供参考。
收稿日期:2020-09-16
修回日期:2020-11-18
基金项目:
作者简介:
国家教育考试科研规划2017年度课题“基于主、客观题及有害信息分析的雷同卷判定研究”(GJK2017038)
蔡武越(1974—),男,教育部考试中心工程师;黄美薇(1990—),女,北京师范大学中国基础教育质量监测协同创新中心;胡佳琪(1996—),女,北京师范大学心理学部;骆
方(1979—),女,北京师范大学心理学部教授。
Journal of China Examinations 2021年第3期No.3,2021
1国际考试安全准则介绍
ITC于1976年成立,目的是交流考试开发、使用的信息,改进考试实践[3]。为帮助考试组织者提高安全意识,建立考试组织人员能力和资格认证标准,ITC针对考试各环节中影响考试有效性和安全性的
关键问题构建了国际考试安全准则(The International Test Commission Guidelines on the Security of Tests,Examinations,and Other Assessments)。该考试安全准则既适用于传统的纸笔考试,也适用于计算机自适应测验或其他基于在线互联网技术的考试,以及多种测验形式组合使用的混合形式。
国际考试安全准则分为4个部分:1)考试违规行为的界定与区分;2)制定和实施考试安全计划;3)考试实施过程中的安全保障;4)应对考试中出现的安全漏洞。即首先界定考试中的哪些行为属于违规行为,然后整体评估考试安全程度,预估各环节可能出现的风险,最后针对这些潜在的风险提出处理意见或解决办法。以下分别介绍4个部分的主要内容。
1.1考试违规行为的界定与区分
ITC将考试违规行为分为作弊行为和泄题行为2种类型。作弊行为是指以欺骗手段企图提高考试分数的行为,主要有:1)提前知晓考试内容,即考生在参加考试前,从可靠的来源获得试题;2)考生在考试期间从监考人员、巡考员、手、场内其他考生处获得帮助;3)考生在考试期间使用禁止使用的辅助工具,如电子手表、手机、耳机等进行作弊;4)考试结束后,他人(如教师)篡改考生作答以提高考生分数,包括在答题纸上把错误的答案改为正确的答案,或修改通过电子方式存储的考生作答;5)考生在考试期间抄袭另一名考生的作答。泄题行为是指在考试开始前、进行期间或结束后,试图或实际上窃取试题内容的行为,主要有:1)窃取考试文件或试题,如果考试文件、考试题册存
储在安全系统有漏洞的服务器上,全部试题和答案均可能失窃;2)在考试期间,作弊者使用隐蔽性高或难以检测的数码相机或其他复制设备窃取试题;3)通过计算机化考试的后台记录窃取考试内容,如在计算机化考试中,通过连接到考试的后台系统,获取整个考试过程的记录,包括所有的题目和考生作答;4)考生记住题目或考试内容,在考试结束后回忆,有目的地泄露出去;5)在考试期间,利用手机、录音笔等工具窃取试题内容;6)编写试题或设计考试程序的相关人员在考试的开发过程中窃取试题内容。
近年来,个体作弊或有组织的集体作弊在考试中并不少见,但是影响范围相对较小[4]。泄题行为的影响范围比个人作弊和集体作弊要大,这是因为虽然泄题事件的发生概率较小,但由于互联网的传播效应,一个网站在短时间内就会获得较大访问量,最终造成的负面影响相对较大[5]。1.2制定和实施考试安全计划
制定和实施考试安全计划涉及考试设计、开发、部署,考试结果的收集、存储、分析,以及试卷分发、回收和管理的所有关键阶段,包括的人员有考试安全总负责人、安全委员会、考试开发和管理人员、监考员、考生等。在制定安全计划时,应明确各阶段的作用和每个人的责任。
要制定有效的安全计划,需要对考试风险进行分析和评估,如违规行为发生的可能性、程序性漏洞的可利用程度、漏洞可能造成的损失、应对程序和修复漏洞的准备程度。风险分析是指评估考试违规行
为成功实施的可能性及可能造成的负面影响程度。例如,在美国各州的高利害考试中,教师或学校行政人员可能会通过替换答卷、在考试前给予学生便利或特殊辅导等方式来操纵考试成绩。针对上述情况,在制定考试安全计划时,需要预先分析和评估相关风险,提前考
蔡武越等:国际考试安全准则介绍及对我国考试组织管理的启示·
·51省考报名入口河南
2021年第3期
虑如何快速检测出违规行为、查出违规未遂的考生和教师,尽量减少违规行为的发生,同时也要对发生作弊的考试进行一定程度的补救。根据考试目的进行风险分析,可以预先分配有限的管理资源,事先确定各项工作的优先级。例如,个体作弊比较常见,可能发生在任何考试中,但是影响范围较小;泄题发生的概率较小,但是影响范围比较大,负面影响大。考试组织者需要确定其有限的资源有多少能够分配在发现、处理个体作弊上,有多少能够分配在防范试题泄露上。
制定有效的安全计划还需要具体分析考试环境中可能影响考试安全的因素,包括安全威胁的性质和风险的大小。安全威胁是作弊或泄题的潜在来源,即一些环节存在漏洞,给考生实施作弊行为创造了可
安徽省考真题及答案能。例如,当手机可以在考试期间接收短信时,就会存在作弊威胁;当某个外部人员可以访问考试内容的存储设备或位置,并接触到考试内容时,就存在泄题威胁。了解考试流程中的特定威胁和风险,制定和实施考试安全计划,可以减少作弊威胁,降低考试违规行为造成的不良影响。
1.3考试实施过程中的安全保障
制定和实施考试安全计划后,考试组织者便可以在考试前、考试中和考试后采取具体的保障措施来应对考试安全问题。国际考试安全准则中考试安全保障环节包括:考生注册、认证、识别,考试设计和开发,考试管理、试卷和考试信息保存。
在考生的注册、认证、识别上,保障措施主要有:1)注册前考试管理人员需要验证考生是否符合要求,如是否完成了课程、通过了必要的考试、已付费或距上次参加同一考试有足够的时间间隔,为每个考生设定唯一的身份ID;2)在认证程序上,应要求考生参加生物鉴别程序或提供可核实的信息,如带照片的准考证,也可以在考后要求考生提供身份验证;3)考生在考试前应阅读并签署同意遵守考试的安全规则;4)应密切监控考生参加考试的频率,对于高风险考生,为降低题目曝光度,可以创建黑名单,限制或禁止频繁参加考试的考生参加考试。
在考试设计和开发上,保障措施主要有:1)可以采用一些新的考试形式,如计算机化自适应测验(computerized adaptive testing,CAT)、即时线性测验(linear-on-the-fly testing,LOFT)、计算机化
自适应多阶段测验(multistage testing,MST)、多个平行测验(multiple equivalent forms),这些形式的考试能较好地控制题目曝光度,同时保证题目的质量;2)限制考生拍照或回忆试题,如计算机自适应测验中不允许考生标记和检查题目;3)在计算机化测验中通过多种形式呈现题目,如使用仿真和多媒体、拖放式交互等,其中使用视频、音频等多媒体和仿真技术有助于遏制作弊行为;4)在选择题中可以考虑选项的呈现形式,如是否完整呈现、是否加入随机选项等。
在考试管理、试卷和考试信息保存上,保障措施主要有:1)在开发阶段采用严格的审核,对参与开发的人员进行背景调查和培训,签订保密协议,要求其题目阅后即删;2)在试卷分发期间,与相关人员签署保密协议,保证存储安全;3)使用能阻止考生进行与考试无关操作的考试管理系统;4)对监考人员进行充分调查,确保他们与考生没有关系,不是考试的利益相关者,同时对监考人员进行培训,了解如何监考和应对作弊;5)在条件允许的情况下,应安装摄像头,考前了
解考生可能用于作弊的设备,考后回收所提供的纸张并进行适当处理等;6)纸质测验的阅卷过程较长,答卷容易被篡改,应保护好纸质答卷;7)考试的题目、结果和其他信息(如考生信息)通常都会长期存储,应通过专门的程序保证数据仅能在授权时访问、修改和删除。
龙岩好工作人才网最新招聘··52
1.4应对考试中出现的安全漏洞
安全漏洞会破坏考试安全系统的防御体系,使作弊者顺利作弊或窃取考试内容。当查出作弊行为或者考试内容被窃取时,考试管理部门有责任进行彻查,修复漏洞并处理相关问题。考试管理部门可以从各种渠道了解潜在的或实际存在的漏洞,例如新闻记者或其他媒体的报道、监考人员提交的违规报告、数据取证报告、网络监测报告、自动安全系统的提示和预警等。
无论违规行为是如何出现的,考试管理部门都需要迅速采取行动来确认证据是否确凿、违规程度如何。当考试期间出现违规行为时,监考人员应该立即采取行动,如暂停或停止考生考试,没收其试卷、填写违规报告等。在考后,考试管理部门要审查考生违规行为的细节,并作出相应的处理:1)确定受影响范围和危害程度;2)受影响的试卷或题目应尽快更换,在能保证用于决策的分数准确的情况下(如在发现并删除受影响的题目后),可以重新启用受影响的试卷;3)取消考生作弊取得的成绩;4)根据考试政策和作弊的危害程度,采取民事或刑事法律行动;5)要求未经授权发布相关内容的网站删除内容;6)尽快准备面向利益相关者、第三方(如媒体)和公众的回应或发言;7)在违规行为发生后,审查现有的安全计划和相
关程序,决定是否需要修改现有政策和程序。ITC制定考试安全准则的目的在于最大限度地保障考试安全。准则中的内容并不是一成不变的,也没有必要全部执行,各国考试组织和服务机构可以根据实际情况进行风险分析,采用准则中的部分内容并采取相应的安全措施来处理,以减少潜在的风险。
2国际考试安全准则对我国考试组织管理的启示
ITC在考试安全准则中指出,考试安全准则为考试提供安全保障,但是在实施过程中,会受到一些条件的影响。在不同的国家或地区实施该准则时,需要考虑以下因素:1)考试环境在社会、政治、体制、语言和文化等方面的差异;2)涉及考试的法律、法规、政策、国际标准和其他法律文件;3)允许考试数据通过审核、存储、使用的各国法律规定;4)专业团体和协会制定的现有考试标准。国际考试安全准则中的一些内容可以适用于不同国家或地区,但有些内容需要根据国情进行调整和完善。
就我国来说,考试机构对考试违规行为制定了一系列防范、打击的措施和办法,对维护考试公平公正发挥了重要作用。根据国际考试安全准则审视我国现有的考试作弊防控措施,可以发现,我国目前的考试作弊防控主要从宏观入手,着眼于法律、标准的制定,兼顾信息安全和技术手段,对作弊行为严抓严打,但是对考试流程和操作层面的作弊行为预防措施、作弊行为发生后的补救措施尚不健全,需要从以下5个方面加以完善。
第一,制定有针对性的考试安全计划。针对考试作弊和泄密涉及的领域和环节,目前由教育部门牵头,成立公安、工商、工信等多部门的联席会议制度,各部门根据职能范畴治理涉考事项,如工商部门清理违法违规广告、公安部门治理考点周边环境和安全保卫等,这些措施发挥了较好的作用。考试机构也制定了考试组织和管理办法,但是尚缺少详细、可行、与时俱进的考试安全计划。借鉴国际考试安全准则,我国应针对不同的考试,在考试前评估各环节可能发生的违规风险,根据实际情况制定考试安全计划,将责任细化到每个部门和每个人;此外,还应定期更新和优化考试安全计划,每年至
少审查1次。
刚刚教育局发布停课最新消息第二,加强考试作弊防范和甄别的专业化人才队伍建设,研究不同考试作弊形式的特点,提出应对措施,并检验措施的有效性。国际考
蔡武越等:国际考试安全准则介绍及对我国考试组织管理的启示·
·53
2021年第3期
试安全准则提出,应定期由内部或外部安全专家监测和审核所有服务提供商的安全程序,以评估政策和程序的有效性。我国在作弊防控和甄别领域的专业人才还比较少,高水平人才稀缺,应加大人才队伍建设的投入和支持力度,为考试安全持续提供专业支撑。
第三,加强考试违规行为违法证据采信,加大防作弊技术手段提供的作弊嫌疑的可信度研究,为考试违规行为的认定提供依据。我国已从法律层面明确考试作弊行为的处罚和处理,如教育法明确了考试违规行为的种类、认定和处罚结果,刑法修正案(九)将考试作弊行为入刑,考试管理部门也制定了
具体的考试违规处理办法;但是,如何认定考生及相关人员是否有考试违规行为,是否应承担相应的法律责任,以及考试违规的证据在法律上的采信度还有待进一步的细化。例如:使用生物识别设备——指纹阅读器、手掌阅读器或虹膜扫描仪、按键动力学设备或面部识别设备等审查考生身份,加大数据分析和应用力度,提高基于考试作答数据及考试监控甄别考试作弊的精度等,这些防作弊技术手段的使用有助于降低作弊的发生率,但同时也应加强对这些技术手段提供的作弊嫌疑证据的可信度研究,争取在法律层面可采信,相关的法律措施也应进一步细化和完善。
第四,加强对考试相关人员的培训。我国虽然从法律层面明确了考试违规行为的处理,但相关法律的普及还不够广泛、深入,一些监考人员法律意识不强,应该参照国际考试安全准则,编制考试安全计划培训材料并提供给所有参与考试组织工作的人员。在考前对监考人员加强新型考试作弊形式和特点及应对措施的培训,对出现作弊行为的相关监考人员给予严厉惩罚,并加强突发情况的应急管理。此外,还要在社会上进一步加大诚信考试教育,让考生在考试前充分了解考试作弊的违法后果。
第五,利用多种渠道,制定和完善安全漏洞出现和考试作弊发生时的标准化处理流程。我国目前在提升数据和系统安全性上已出台相关措施,但这些措施无法为考试提供精准的保障。根据国际考试安全准则,在制定考试安全计划时,需要结合不同考试的实际情况进行具体分析;因此,应将不同考试、不同来源渠道的信息整合,总结和归纳考试安全漏洞的多发环节,并对这些环节予以重点关注,制定具体的处理流程。
3结束语
只要有考试存在,就会存在不同程度的作弊、泄题行为,构建考试安全准则是为了确保考试的安全性、有效性,保障考生的合法权益。我国在现有考试组织管理模式下,需要构建更为完善的考试安全管理标准,以提高考试组织管理的现代化水平。
参考文献:
[1]BERNARDI R A,BACA A V,LANDERS K S,et al. Methods of cheating and deterrents to classroom cheat⁃ing:an international study[J].Ethics&Behavior,2008, 18(4):373-391.
[2]潘逸沁.基于我国考试形式的两阶段作弊甄别方法
[D].北京:北京师范大学,2017.
[3]OAKLAND T,POORTINGA Y H,SCHLEGEL J,et al. International Test Commission:its history,current sta⁃tus,and future directions[J].International Journal of Testing,2001,1(1):3-32.
[4]International Test Commission.The International Test Commission Guidelines on the Security of Tests,Exami⁃nations,and Other Assessments[J].International Journal of Testing,2016,16(3):181-204.
阿根廷夺冠世界杯
[5]WOLLACK J A,SCHOENIG R W.Cheating[M]//FREY
B B.The SAGE Encyclopedia of Educational Research, Measurement,and Evaluation.Thousand Oaks,CA: SAGE Publications,Inc.,2018:259-265.
··54