OpenAI 取消为 ChatGPT 加水印计划,用户反应成关键因素|TodayAI

OpenAI 近日宣布,尽管公司内部已经准备了一种为 ChatGPT 生成的文本添加水印的系统,但由于担心用户反应,公司决定暂不推出这一功能。

据《华尔街日报》报道,OpenAI 早在一年前就开发了一个可以为 ChatGPT 生成的文本添加水印的系统,并且还有一个工具可以检测这些水印。然而,内部对于是否发布这一系统存在激烈的讨论。一方面,添加水印似乎是负责任的做法,可以帮助教师和其他利益相关者检测 AI 生成的内容;另一方面,这可能会影响公司的商业利益。

水印技术与用户担忧

OpenAI 的水印技术通过调整模型预测最可能跟随前面词汇的单词和短语的方式,创建一个可检测的模式。尽管这种解释相对简单,但谷歌对其 Gemini 文本水印的更深入解释表明,这种技术可以有效地标记和检测 AI 生成的内容。

检测 AI 生成内容的工具对那些试图防止学生用 AI 完成写作作业的教师来说,无疑是一个福音。《华尔街日报》报道称,公司发现水印并不会影响 ChatGPT 的文本输出质量。在一项公司委托进行的全球调查中,受访者以四比一的比例支持 AI 检测工具的想法。

OpenAI 的内部讨论与用户反馈

在《华尔街日报》发布报道后,OpenAI 在其博客中确认,公司一直在研究文本水印技术。根据《华尔街日报》看到的文件,这种方法非常准确,准确率高达99.9%,并且能够抵抗篡改,如改写。然而,公司指出,用另一种模型改写文本等技术使得恶意行为者可以轻松绕过水印。此外,公司还担心这种工具会对非母语使用者的 AI 工具使用造成污名化。

更重要的是,OpenAI 担心用户反应会影响其市场表现。公司调查显示,近30%的 ChatGPT 用户表示,如果实施水印,他们将减少使用该软件。尽管如此,据报道,仍有一些员工认为水印技术是有效的,并建议尝试其他"在用户中可能较少争议但尚未验证"的方法。

在今天的博客更新中,OpenAI 表示正在"早期阶段"探索嵌入元数据作为替代方案。公司表示,现在判断其效果如何还"为时过早",但由于其具有加密签名,不会出现误报。

最终,OpenAI 在用户反馈和内部讨论之间做出了选择,决定暂不推出水印功能。OpenAI 公司在技术进步和用户满意度之间寻求着平衡的努力,也许未来 OpenAI 会有更多争议的技术出现。

相关推荐
QBoson1 小时前
量子计算+AI:特征选择与神经网络优化创新应用
人工智能·神经网络·量子计算·图像分类·特征选择·“五岳杯”量子计算挑战赛·相干光量子计算机
Juicedata2 小时前
JuiceFS v1.3-Beta2:集成 Apache Ranger,实现更精细化的权限控制
运维·人工智能·ai
Work(沉淀版)4 小时前
DAY 40
人工智能·深度学习·机器学习
蓦然回首却已人去楼空5 小时前
Build a Large Language Model (From Scratch) 序章
人工智能·语言模型·自然语言处理
CM莫问5 小时前
<论文>(微软)WINA:用于加速大语言模型推理的权重感知神经元激活
人工智能·算法·语言模型·自然语言处理·大模型·推理加速
拾忆-eleven5 小时前
NLP学习路线图(二十六):自注意力机制
人工智能·深度学习
MYH5166 小时前
在NLP文本处理中,将字符映射到阿拉伯数字(构建词汇表vocab)的核心目的和意义
人工智能·深度学习·自然语言处理
要努力啊啊啊6 小时前
KV Cache:大语言模型推理加速的核心机制详解
人工智能·语言模型·自然语言处理
mzlogin8 小时前
DIY|Mac 搭建 ESP-IDF 开发环境及编译小智 AI
人工智能
归去_来兮8 小时前
知识图谱技术概述
大数据·人工智能·知识图谱