- 创新
培生专业测评首席技术官 Greg Birzes
随着线上考试日益普及,部分认证的获取渠道得以拓展,但同时也对维护考试完整性提出了新的挑战。传统作弊方法已升级为更复杂的技术手段,AI 虽常被视为问题所在,但如果在设计和部署过程中秉持负责任的原则,AI 同样可以成为解决问题的重要组成部分。当然,也需要客观认识到,在线监考并不适用于所有应用场景。
培生专业测评首席技术官
Greg Birzes
以下是 AI 提升线上考试安全性、可靠性和公平性的五大机制:
- 服务线上考试的 AI 并非单一工具,而是由多层级智能核查机制构成的系统。
在线监考通过多个 AI 传感器协同运作,在考生的物理和数字考试环境中开展安全监测,功能并非仅限于人脸识别。
- AI 的作用并非取代人工判断,而是为人工判断提供更有力的支持。
AI 负责标记异常情况,但最终决策权仍由人工(监考员)作出,以保障考试的公平性和可问责性。
- 真正的重要进步并不在于 AI 传感器本身,而在于如何解读这些传感器生成的数据。
AI 会持续分析可疑行为模式,而不是将每一个提醒孤立地看待。
- 更严格的安全机制并不意味着增加考生压力,反而有助于提升其证书价值,并改善考试体验。
自动化流程可加快考生检录速度,并使整体考试体验更加顺畅。
- 在线监考需要持续投入,才能在不断演变的安全威胁面前保持有效应对。
维护考试安全是一项持续性的工作,需要在 AI 技术支持下,不断进行系统调优、效果评估,并辅以人工监督。
1. 服务线上监考的 AI 并非单一工具,而是由多层级智能核查机制构成的系统。
一个普遍存在的误区是:AI 在线监考只是使用人脸识别去验证考生身份。实际上,人脸识别只是由多项技术协同、为提升安全性而构建的更复杂系统中的一个环节。
事实是,单一的数据点远远不足以支撑安全判断。基于此,有效的在线监考依赖多层级 AI 增强型传感器系统,从考生身份和资格,到其物理和数字考试环境的安全性,分别对不同要素进行分析。
实际情况并非一直如此。早期的 AI 辅助在线监考系统能力有限,在某些情况下容易出现误报。解决方案在于从“孤立运行”的系统转向“协同整合”的体系。如今的新一代传感器正是在这一方向上不断演进的成果。这些传感器在准确性和针对性方面都有所提升,并且能够协同运作。
这种多层级模型旨在从整体视角出发,通过整合多个信号来确认潜在的安全威胁,从而减少干扰性信息,确保安全决策基于更全面、更可靠的数据基础,而非单一指标。
2.AI 的作用并非取代人工判断,而是为人工判断提供更有力的支持。
一直以来都存在一个误解,认为考生是否作弊是由 AI 判定的。
考生常常会说到“被 AI 标记”,这种表述被解读成被 AI 自动判定作弊,但实际并非如此。在培生专业测评中,与考试安全性有关的所有关键决策仍由人工主导。AI 是辅助工具,而非取代经过培训、负责在线监考的专业人员(监考员)。AI 的作用在于同时监测多项信号,并提示潜在的异常情况或行为,例如异常的眼部活动或背景噪音。
可以将 AI 视为第二双眼睛,辅助监考员在多个考试场次中更稳定、一致地监测更多信号。当 AI 在远程考试中提示安全风险时,后续干预仍由人工主导,这对于保障高风险考试的公平性、可问责性和可信度至关重要。
我们的监测并不会在考试结束时停止。在考生提交了最后一个答题结果后,我们仍会持续查找违规行为的证据。这是因为,在更为广泛的调查过程中,相关细节往往会在数天甚至数周之后逐渐显现。
3.真正的进步并非 AI 传感器的数量,而在于如何解读传感器生成的数据。
单纯增加 AI 传感器数量,并不能自动提升安全性,关键在于如何解读和运用传感器提供的信息。例如,考生在考试环境中偶尔看向别处、舒展身体或发出短暂声响,通常只会触发低严重性标记(如有)。只有当相关行为反复出现或多种行为叠加,显示出可能存在违规迹象时,才会引发问题。
单个孤立的事件有时可能会产生误导,持续出现的行为模式才更有参考价值。AI 通过综合分析各种信号,帮助区分无恶意的伸展动作和真正可疑的行为,在减少不必要的干扰信息的同时,加强监督力度。
秉持这一原则,我们设计并构建了用于检测异常和作弊行为的智能传感器架构系统。这是一套先进的智能引擎,能够在整个线上考试过程中整合和分析海量信息。这套系统不仅关注单个提醒,而是将各类信号加以关联,分析跨信号的行为模式,从而区分真实威胁和错误警报。它并非向监考员简单罗列所有潜在标记,而是对数据进行分级筛选,引导监考员关注最关键的风险区域,从而更高效的发挥人工监督的作用。
4.更严格的安全机制并不意味着增加考生的压力,而是有助于提升证书的价值,改善考试体验。
在高风险考试中,安全性和便捷性往往被误认为是相互对立的,但实际并非如此。
线上考试检录流程的大部分环节因 AI 得以简化。考生在完成一系列初始自动核验流程后,可以更快进入考试环节,接受监考员监督。
这样可以缓解考生压力,让考生能够全身心投入到最重要的事:考试发挥。与此同时,如果需要额外核查,人工监考员可随时介入。
设计合理的安全措施既有助于维护考试完整性,也能提升考生体验,这也是 AI 在该领域带来变革性发展的原因。而更安全的考试有利于更有效地防范违规行为。证书会因此变得更有价值。
5.在线监考需要持续投入,才能提前应对不断演变的威胁。
关于 AI 和在线监考,或许更重要的一点在于:它的实施运用并非能一劳永逸。作为一种考试交付模式,在线监考需要持续投入,并不断对其能力进行精细化调整,才能保持准确性和公平性。 一个关键的最佳实践,是在专门的人工团队监督下,对安全系统进行持续、实时的评估,由人工团队在与 AI 协同的过程中分析系统运行表现。
AI 可以成为构建公平、可靠线上考试的宝贵工具,但前提是其设计和应用过程必须秉持负责任的原则,并配合人工监督。这种做法是构建可信、受控考试环境的关键,有助于维护证书价值,并为每一位考生提供公平发挥的机会。
始终保持人工参与
服务线上考试的 AI 旨在让每一位考生都能享受更高程度的公平性和完整性。
仅仅依靠单一通用算法无法实现这一目标,而是要借助多层级的智能 AI 传感器系统,在辅助而非取代人工判断的前提下共同发挥作用。这种以人工为核心的设计思路,既有助于强化考试安全性,也能为考生提供流程更顺畅、压力更可控的考试体验。
利用 ISAAC 提升考试安全性
用于计算机化考试中异常和作弊行为检测的智能传感器架构
ISAAC
异常和作弊行为检测的智能传感器架构
分析
利用传感器识别违规情况或可疑行为模式。
提醒
检测到违规情况或可疑行为模式时,向人工监考员发出提醒。
分级
向违规情况或行为分配权重,以便划分考试的风险等级。