ChatGPT开发商OpenAI推出新工具 可检测文本是否由人所写
2月1日消息,美国当地时间周二,AI研究初创公司OpenAI宣布推出一款新工具,可用于检测文本是出自人类之手还是由AI生成。这款名为分类器的工具将标记OpenAI产品(如ChatGPT)以及其他AI创作软件编写的内容。然而,它仍有许多局限性。因此,OpenAI建议将其用作确定文本来源的其他方法的补充,而不是作为主要的决策工具。
OpenAI员工简·亨德里克·基什内尔(Jan Hendrik Kirchner)、拉马·艾哈迈德(Lama Ahmad)、斯科特·亚伦森(Scott Aaronson)以及简·莱克(Jan Leike)在一篇博客文章中写道:“在我们对英语文本的‘挑战集’进行评估时,我们的分类器正确地将26%的AI生成文本(真阳性)识别为‘可能是AI所写’,而将9%人类书写的文本错误地标记为AI所写(假阳性)。”
文章中继续称:“OpenAI在一篇博客文章中表示:“虽然不可能完全准确地检测出所有AI生成的文本,但我们相信,好的分类器仍可以提供帮助。例如帮助识别使用AI工具进行学术欺诈,或将AI聊天机器人定位为人类。”OpenAI员工承认,其新工具可能会出错,目前正在改进中,他们希望家长和老师对该分类器的表现提供反馈。
OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)表示,在计算器等技术出现后,教育领域发生了巨大变化,但他也表示,该公司可能有方法帮助教师识别AI生成的文本。
自从去年11月份OpenAI推出ChatGPT后,这款AI聊天机器人就引发了公众关注。学生们很快意识到,该工具可以帮助生成论文和总结材料,尽管偶尔会插入明显的错误。很快就有学校限制了ChatGPT的使用,因为他们担心学生可能利用其作弊。
这款新工具在分析少于1000个字符的输入方面不是很强,OpenAI不建议在英语以外的语言上使用它。早在2019年,OpenAI就明确表示,识别AI生成文本并不容易,但其打算继续攻克这一挑战。基什内尔、艾哈迈德、亚伦森和莱克写道:“我们在检测AI生成文本方面的工作将继续下去,我们希望在未来分享改进的方法。”
这并不是AI研究人员首次试图识别出AI生成的文本。本月早些时候,普林斯顿大学的学生爱德华·田(Edward Tian)宣布推出了名为GPTZero的工具,并在该工具的网站上指出,它是专为教育工作者设计的。OpenAI也在2019年发布了一个检测器,除了一个大型语言模型LLM之外,它没有ChatGPT的核心那么复杂。员工们写道,新版本在处理AI生成文本方面表现更好。
上周,微软宣布向OpenAI投资数十亿美元,并表示将把这家初创公司的AI模型整合到其面向消费者和企业的产品中。(小小)
页:
[1]