OpenAI开发反作弊工具,用AI写论文可被检测
创始人
2024-08-05 19:41:59
0

·OpenAI内部既想守住透明度承诺,又想留住用户。调查显示,近1/3的ChatGPT用户会因为反作弊技术而减少使用。

·OpenAI员工担心水印可通过简单技术被删除,比如把文本翻译成另一种语言再转换回来,或者让ChatGPT在文本中添加表情符号,然后手动删除表情。决定谁可以使用水印检测器又是一个挑战。

OpenAI开发反作弊工具,用AI写论文可被检测。

OpenAI开发了一种检测某人何时使用ChatGPT撰写论文的工具,不过由于在透明度承诺和留住用户之间摇摆不定,OpenAI尚未发布该工具。

据《华尔街日报》当地时间8月4日报道,反作弊项目在OpenAI内部争论了大约两年,准备发布的时间就有大约为一年。 OpenAI首席执行官山姆·奥特曼(Sam Altman)和首席技术官米拉·穆拉蒂(Mira Murati)都参与了反作弊工具的讨论。知情人士说,奥特曼鼓励这个项目,但没有推动发布。

OpenAI内部在透明度承诺和留住用户之间摇摆不定,它对ChatGPT用户开展的一项调查发现,近1/3的用户会因为反作弊技术而关闭服务,这些受访者表示,如果ChatGPT使用反作弊技术而竞争对手没有,他们会减少使用ChatGPT。

OpenAI发言人表示,公司担心该工具可能会对非英语母语者等群体产生不成比例的影响。“我们正在开发的文本水印方法在技术上很有前景,但在研究替代方案时我们正在权衡重要的风险。”而支持该工具发布的员工则在公司内部表示,与这种技术可能带来的好处相比,这些争论显得苍白无力。

ChatGPT可以预测句子中接下来会出现的token,OpenAI的反作弊工具将略微改变token的选择方式,这些变化会留下水印。这些水印对人眼来说是不明显的,但可以被OpenAI的检测技术发现。根据内部文件,当ChatGPT创建足够多的新文本时,水印的有效性为99.9%。OpenAI今年早些时候进行的一项测试发现,水印技术不会影响ChatGPT的性能。

但一位熟悉此事的OpenAI员工表示,员工们担心水印可通过简单的技术被删除,比如把文本翻译成另一种语言然后再转换回来,或者让ChatGPT在文本中添加表情符号,然后手动删除表情。

OpenAI内部普遍认为,决定谁可以使用这种检测器又是一个挑战。如果拥有权限的人太少,这个工具就没有用处。如果太多人拥有权限,水印技术就可能被破译。OpenAI的员工已经讨论过直接向教育工作者或外部公司提供检测器,帮助学校识别人工智能撰写的论文和抄袭作品。

关于水印工具的讨论始于OpenAI在2022年11月推出ChatGPT之前。2023年1月,OpenAI发布了一种算法,旨在检测人工智能模型编写的文本。但当时的成功率只有26%,7个月后OpenAI取消了它。据《华尔街日报》报道,实际上,外部公司和研究人员也在开发其他工具来检测由人工智能创建的文本,有教师已经使用了这些工具,但有时无法检测到高级大模型编写的文本,有时也会产生误报。

相关内容

热门资讯

首届AI国际人才峰会在香港举办 上证报中国证券网讯(记者 何漪)8月26日,香港投资管理有限公司与北京智源人工智能研究院在香港联合举...
国产操作系统,新突破! 国产操作系统又有新突破。26日在京举行的2025中国操作系统产业大会上, 我国首个6.6内核商用桌面...
数字天津 引领未来——从算力筑... 来源:西部网 数字浪潮奔涌,重塑经济发展格局。 今年恰逢推进数字中国建设10周年,我国数字经济规模稳...
马斯克预言人形机器人数量将远超... 埃隆·马斯克在社交媒体平台X上回应了大卫·斯科特·帕特森的帖子。帕特森估计,到2030年,所有工作岗...
新华全媒+|提出六大行动!“人... 国务院日前印发《关于深入实施“人工智能+”行动的意见》。为何印发意见?意见部署哪些重要工作?一起来了...
问止中医已递交招股书 ,或成为... 深圳商报·读创客户端首席记者 谢惠茜 在国家“人工智能+”行动战略深入实施、中医药现代化进程加速推进...
格力电器获得发明专利授权:“电... 证券之星消息,根据天眼查APP数据显示格力电器(000651)新获得一项发明专利授权,专利名为“电加...
小米新零售出海,落子东南亚 小米新零售出海首站落子东南亚。 8月27日,上海证券报记者从小米集团获悉,2025年是小米新零售的出...
ST逸飞获得实用新型专利授权:... 证券之星消息,根据天眼查APP数据显示ST逸飞(688646)新获得一项实用新型专利授权,专利名为“...
新一代国产操作系统又有新突破 来源:北京晚报 国产操作系统又有新突破。昨天在北京举行的2025中国操作系统产业大会上,我国首个6....
国务院部署深入实施“人工智能+... 央广网北京8月27日消息(记者李硕)据中央广播电视总台经济之声《交易实况》报道,国务院日前印发《关于...
回应空调之争,小米大家电部总经... “这个世界上有很多事情的发展节奏都是从看不上、到看不懂、再到学不会、最后跟不上的。”8月27日晚间,...
紫金矿业等公布“一种复配捕收剂... 天眼查APP显示,近日,紫金矿业集团股份有限公司,中南大学申请的“一种复配捕收剂以及高效浮选锂云母的...
艾为电子获得发明专利授权:“数... 证券之星消息,根据天眼查APP数据显示艾为电子(688798)新获得一项发明专利授权,专利名为“数模...
国务院发文!加强人工智能在安全... 国务院日前印发《关于深入实施“人工智能+”行动的意见》(以下简称《意见》),明确提出要加强人工智能在...
苹果为iOS 26引入HDR截... 【CNMO科技消息】近日,苹果公司正在测试的iOS 26系统中,新增了一项实用功能:支持高动态范围(...
苹果云机:哪个云手机流畅便宜好... 在当今科技飞速发展的时代,云手机已经成为游戏玩家和科技爱好者的新宠。它们不仅提供了流畅的游戏体验,还...
苹果AI秘密武器曝光!代号“A... 编辑:倾倾 定慧 苹果已悄然成立代号「AKI」(Answers, Knowledge & Infor...
原创 哪... 站哥分享了一份2024年底新旗舰的畅销榜,时间是截止到W33(7.11-7.17),这次不再是品牌销...
带领观众走进影像背后的故事 博... “请大家往这边走,现在看到的这张照片中,建筑工人正在修筑深圳经济特区管理线……”8月27日下午,深圳...