|
根据美国研究人员的测试，人工智能工具ChatGPT能够通过——或至少接近通过——美国的医疗执照考试。 这是这项公开的、目前免费的技术的最新成就。这项技术于去年年底发布，此后一直被不停见诸报道。 ChatGPT是一类“生成性人工智能”程序之一，它可以生成图像、视频和音频，进行论证，总结书籍，讲笑话，写代码，一般来说对人有用。  但对教育工作者来说，这项技术为家庭作业和课后作业的广泛作弊打开了大门，许多人正在抓紧重新思考评估的性质或以其他方式阻止学生使用该工具。 本周，纽约的学校系统禁止使用ChatGPT，而澳洲的大学表示他们将恢复纸上考试并加强作弊检测措施。 现在，在一项尚未经过同行评审的研究中，研究人员探索了ChatGPT的能力上限。 他们说，该人工智能工具在最难的标准化考试之一：美国医学执照考试（USMLE）中取得了超过50%的成绩。 为了测试ChatGPT进行临床推理的能力，他们让其参加了模拟的、简略的USMLE考试，这是任何医生在美国获得行医执照所必须的。 USMLE由三次考试组成，第一次考试一般由二年级的医学生参加，第二次考试由四年级的学生参加，最后一次考试由接受过一年研究生教育的医生参加。 对于大多数申请人来说，这些考试需要一年多的时间专门准备。前两次考试各需要一天时间，最后一次需要两天时间。 研究人员将以往考试的问题输入ChatGPT，并由两名医生评审员对答案进行独立打分，答案包括开放式书面回答和多项选择。 他们还检查了这些问题的答案是否可能出现在人工智能工具训练时的数据集中，而ChatGPT还没有看到这些答案。 论文中写道：“ChatGPT在没有任何专门训练或强化的情况下，在所有三个考试中的表现都达到或接近及格线。” ChatGPT在所有考试中都获得了超过50%的成绩，并接近USMLE约60%的通过门槛。 迪肯大学的学术诚信研究员Phillip Dawson说，他无法评估这项研究本身，但“如果作者真的像他们所说的那样做了，那么这就是可怕的事情”。 “我有一种感觉，这种工具对学生评估的改变，将比大流行还要大。” 麦考瑞大学学术不端行为负责人Kane Murdoch说，他对ChatGPT能够通过USMLE考试“一点都不惊讶”。 “而且那是相当严肃和复杂的考试——更简单的评估简直小菜一碟。” 他和其他人正在推动大学接受ChatGPT，而不是直接禁止它。 他说：“ChatGPT就像计算器的出现——改变游戏规则。” “我预计它将被大量使用，直到大学制定新的评估策略。” 监管澳洲高等教育的高等教育质量和标准局（TEQSA）似乎同意ChatGPT不应该被禁止。 负责TEQSA高等教育诚信部门的Helen Gniel说：“这不是一个实用或可持续的策略。” “机器学习在不断改进，它将相当标准化。" https://www.abc.net.au/news/scie ... ing-exams/101840938 |
