那时花开

卡迪夫大学新研究：AI 尚无法像人类教师一样可靠地批改作业_我的网站

一 |      8 月 24 日消息，据外媒 Phys.org 今天（24 日）报道，卡迪夫大学和墨尔本大学的一项新研究发现，生成式人工智能（GenAI）目前还无法像人类教师一样可靠地评判学生的书面作业。研究人员使用 ChatGPT 的两个版本，对 50 篇生物科学专业本科生论文进行评分，以测试大模型评估学生作业的能力。ChatGPT 需要按照 7 项标准批改这些论文，研究人员还采用了 4 种不同的提示方式，随后将大模型与人工评分的平均分和分数波动情况进行比较。    于是现在卡斯帕罗夫推出了一个其称已经酝酿了几年的平台：Kasparovchess。Kasparovchess将是一个传奇棋手可以自由地跟不同级别的棋手分享技巧和技巧的平台。图源：Pexels卡迪夫大学生物科学学院威廉 · 凯博士指出：“研究结果显示，模型给出的分数波动很大，无法准确预测人工评分。生成式 AI 与人类批改同一批论文时存在明显差异。该公司由私人投资者和媒体集团Vivendi提供融资，至于融资总额并未对外透露。这个平台由Vivendi制作，上面提供有纪录片、播客、文章及国际象棋界专家和知名棋手之间的访谈。

二 | 卡斯帕罗夫表示，平台迄今已经收录了超1000个视频。除了内容，Kasparovchess还将拥有一个独家的Discord服务器以附加到其平台和下棋区域。从许多方面来看，这是卡斯帕罗夫多年前在MasterClass上的一个垂直版本，其主要关注社区和多样性。据报道，MasterClass已经成为“寓教于乐”领域的领导者，该领域通过纪录片式娱乐创收。只看论文总分，两者给出的结果相对接近；一旦具体到每项评分标准和每一篇论文，大模型与人工评分之间的差距就相当明显。

三 | ”除一种情况外，AI 模型给出的平均分普遍高于人工评分。

四 | 正如卡斯帕罗夫之前提到的，独角兽最大的特点之一是它必须吸引广泛的观众，这样订阅者才能从一种级别跳到另一种级别。平均分方面，AI 模型与人工评分的最大差距达到 16.1 分；具体到单篇论文，最大差距达到 40 分。MasterClass可能认为它的广泛视野是一个不同点，但很明显，卡斯帕罗夫将其视为一个机会。获悉，威廉 · 凯还发现，AI 往往会压低高分论文的成绩，又把低分作业的成绩抬高，最终使分数系统性地向中间集中。Kasparovchess的月费和年费分别为13.99美元和119.99美元。从专家和用户所玩过游戏的回顾分析中获得的大部分经验教训都是基于付费墙提供。这款付费产品还允许用户访问一个包含5万个手工制作的谜题的数据库从而让玩家能够训练某些技能。据悉，该产品将于本月底上市。研究结果说明，至少现阶段，即使经过大量训练，AI 仍无法可靠地对主观性较强的书面作业给出与人类相当的分数。

五 | “我们测试的大模型目前并不适合取代教师，为学生预测作业成绩。”研究人员指出，高等教育领域确实很关注大模型能否利用模式识别能力，让学生作业评分更加客观，同时提高批改效率、减轻教职人员压力。

六 | 实际上，Kasparovchess还有一个强劲的竞争对手--Chess.com。但这项研究表明，目前并不适合这么做。这是一个国际象棋服务器、论坛和社交网站，早在2005年已经推出，订阅费用从每月5美元到每年29美元不等。很显然，Kasparovchess要贵得多。此外，未经学生明确同意便把作业提交给 AI 工具，本身还涉及伦理问题；大模型也不能、也不应该被依赖来给学生的长篇书面作业评分。

七 | 对此，卡斯帕罗夫指出，他们最大的不同之处将是对社区的关注。

八 | “随着大模型继续发展，未来模仿人类判断的能力可能会提高。

九 | 但从这项研究来看，要让 AI 给出的分数与人工评分真正保持一致，恐怕并不容易。Kasparovchess的长期目标是将国际象棋社区彼此联系起来、发掘出其他方式可能无法接触到的天才并让其他人接触到他的经验。他认为，大流行期间的远程教育已经表明，需要有更多的互动解决方案而不仅仅是空洞的承诺。卡斯帕罗夫在1985年成为最年轻的国际象棋世界冠军。2005年，他从公共国际象棋退休并成立了一个基金会以此来帮助世界各地的儿童接触国际象棋。最近，他还参与了《后翼弃兵》的顾问工作，这是一部关于一位国际象棋天才的电视剧，其成为Netflix平台上迄今为止收视率最高的限定剧。这部电视剧非常受欢迎，以至于国际象棋的销量迅速飙升。“我很高兴，因为这是我们第一次看到国际象棋是一个积极的因素，”他说道，“这么多年来，国际象棋一直被视为一种可能会将孩子们推向心理不稳定的黑暗区域的潜在破坏。”这一信息的新鲜感加上远程教育的增长让卡斯帕罗夫相信，他多年的项目终于准备好启动了。

十 | “这不仅仅是教授游戏，或是玩游戏，或辩论游戏，”他说道。

十一 | 相反，他希望来到这个平台的人们能够关注象棋文化、象棋的生存及其看似永恒的力量。

Current article:http://www.tibiantasangnenti.buzz/list_dwkc9/7nd.ppt

Published on:04:46:20