我的位置: 科教 > 教育在线 > 文章详情
【新时代新作为新篇章】全面机考,人工智能准备好了吗?
分享至:
 (33)
 (19)
 收藏
来源:上观新闻 作者:吴孟熹 彭德倩 2019-11-30 12:12
摘要:对于机考,大部分人最担忧的是,使用计算机考试会影响学生的发挥?若使用同一张卷子,传统的考试模式,与在计算机上考试,是否会考出不一样的成绩?

近日消息传来,上海市教育考试院正在为高中学业水平考试转入机考模式,进行技术准备。

一直以来,机考与传统考试的区别性被国内外学者广泛研究,存有不少争议,其中,包含人工智能在内技术问题,引人关注。29日举行的考试评价国际研讨会 上,国内外专家热议。

美国考试中心如何备战机考?

对于当代学生家长来说,机考并不陌生。在托福考试中,纸笔已全面被机考取代,雅思也逐渐增设机考考点。

“机考是及时、动态性、可交互性的,在考试内容安全性上有保障、考后的数据分析获取上较为容易。”来自美国教育考试服务中心(ETS)的专家皮特·詹(Peter Chan)和曼尼基·李(Manikit Lee)介绍有关当前大型线上考试在规模性,安全性以及可靠性上的问题和科研成果。

ETS是世界上最大的私立非营利性教育考试和评估机构,管理诸如托福、托业、GRE等多项大型考试。于1994年开始采用以电脑为基础的考试,2004年开始探索线上考试,2014开始云测试。迄今为止已经有二十五年使用电脑进行考试的经验。

然而,在测试交互平台上,始终有这些挑战:如何支持大规模性的考试?如何保证线上考试的安全?如何确保平台的运行?对此专家们进行了一一分析和解答,并分享了最新研究成果以应对考试上的诸多问题。

首先是在规模性上的挑战。大规模的测试卷通常是并行的,交互能力需要时时在线;考试管理部门的信息资源需要不断更新;对于国际性的考试,系统表现很容易受地点和服务器的网络延迟影响。

对此专家解答道:“我们的解决方式是利用云端系统在靠近考试位置的地方去部署计算资源。同时,ETS 已经有三种发展技术来应对大规模性质的考试,分别对软件、数据和基础设施进行解耦。”

那么,如何保证考试的安全性和一些不确定因素呢? 专家认为,使用现代网络应用。比如SPA(单页面应用)的使用;使用成熟的行业框架,比如AngularJS,ReactJS等一些结构完善的应用。

同时,就如何在考试途中保护考试题目和在测试站保护考试内容的安全性方面,他说,“管理方在安全传输协议(https)和其他自定义加密的基础上,通过网络或测试中心组件保护测试问题。测试站方面,我们开发了安全的浏览器或在计算机锁定状态下以专项模式运行,以防止其他应用程序的使用,以此监视或消除测试上的某些不安全因素。”

另一方面,在考试程序的进行下面临的诸多问题,如网速慢、电脑数量不足上,专家称,在考试的地方会设置安全的本地服务器,它可以支持全面的考试功能,当网络无法运行时。同时,考试会使用多种形式的或适应性的测试以保证考试公平进行。

如何防止作弊的问题也值得关注。面对如替考,诈骗,提前透题等以往纸笔考试常有的情况,专家认为,机考也能有效避免这样的情况,通过多种专业线上考试的应用以及考试中心的把控。

人工智能,如何助力英语听说评测?

如果说,传统纸笔考试模式,可以通过客观性较强的答案匹配进行,那么需要“听觉”辨别一致性的英语听说能力测试,无疑是机考的一道坎,在这一领域,人工智能研发正在步步迈进。来自科大讯飞的专家竺博介绍了最新的科研成果。

在语音学习上,人工智能的语音合成达到了真人说话水平,竺博说,当前英语语音合成已经达到了美国大学生的平均水平。除此之外,在机器翻译、多通道语音分离、听见系统转写准确率、图文识别技术、机器阅读水平、辅助评卷技术均以达到全球前列水平。

面对学生的口语学习现状,竺博介绍,业界已经研发了多项针对不同考评方向的评分测试。如朗读类型的评分,会运用海量发音数据加上人工评分以建造语音识别和音准测度的空间模型。同时,在发音错误、智能背诵、英语母语相似度、口语文本内容的组织能力上都运用高端技术对学生的学习进行细化的评测。

对未来,竺博很有信心:“人工智能会覆盖未来多项考试,对学生的自我提升学习帮助很大。”

“一致性”研究,不可或缺

对于机考,大部分人最担忧的是,使用计算机考试会影响学生的发挥?若使用同一张卷子,传统的考试模式,与在计算机上考试,是否会考出不一样的成绩?

为此上海考试院联合专业科研团队进行了科学的调查研究。以实践验证机考是否具有“一致性”。

王湘波博士对计算机与纸笔考试可比性研究进行了首期结果总结。这份调研由上海考试院负责命题、组卷,学生抽样和各项考务安排,企业科研团队负责科研设计,系统创建并对考试结果进行分析。

研究中,专家们制定了这样一份方案:每科学科设置两份难度相近的平行卷。两份平行卷分别有纸笔、机考两个模式。同时,两组水平相近的学生——由A组完成平行卷1的纸笔考试和平行卷2的机考;相对地,由B 组完成平行卷2的纸笔和平行卷1的机考。

王博士介绍,设置的两份平行卷在认知、内容、技能、程序、权重、得分法上尽可能一致;A、B 两卷有25%的锚题以便做等值实验。两式的考题完全相同。

结果显示,六门学科A、B卷纸笔和计算机考试成绩大致无区别。而在民意调查结果上也显示出学生对机考整体反应正常。超过60%的学生认为机考和笔试没有太大区别。

栏目主编:徐瑞哲 文字编辑:徐瑞哲 题图来源:视觉中国 图片编辑:徐佳敏
上一篇: 没有了
下一篇: 没有了
  相关文章
评论(19)
我也说两句
×
发表
最新评论
快来抢沙发吧~ 加载更多… 已显示全部内容
上海辟谣平台
上海2021年第46届世界技能大赛
上海市政府服务企业官方平台
上海对口援疆20年
举报中心
网上有害信息举报专区
关注我们
客户端下载