实习生刚对字节大模型“投毒”,两人就联手获奖了

大家好啊,我是董董灿。

前段时间闹得沸沸扬扬的字节大模型"投毒案"的主角------实习生田同学,在被字节起诉背上了官司之后,竟然拿下了 NeurIPS 2024 最佳论文奖。

而这篇获奖的论文,就是他在字节实习期间与团队合作发表的。

据说这篇论文在同行评审中获得了极高的评价,是国内第二篇获得 NeurIPS 最佳论文的研究,含金量非常高。

可以说是:田同学和字节,一边互相掐架,一边联手获奖,有点狗血。

我们回顾下"投毒案"是怎么回事。

我查了一些资料,大概是两个月前,这位北大实习生田同学在字节实习期间,因为对团队感到不满,选择了"投毒"。

他利用了 Huggingface 的一个函数漏洞,伪装了一个看似正常的文件,远程执行代码,篡改模型训练参数。

据说这种攻击方式可以让大模型在加载权重时篡改权重的值、改变训练参数等。

当时有人还分析了他的"投毒"机制:大概是通过修改模型的优化器,篡改了参数的梯度方向,甚至随机让模型在训练过程中sleep(休眠),从而大大降低模型的训练速度。

模型在训练过程中梯度被修改了,这意味着什么我想很多同学都非常清楚------

反向传播传递过来的梯度被修改,模型想训练都训练不出来,白白浪费时间和 GPU 资源。

在这件事被发现后,田同学就被辞退了,随后字节一纸诉状将田同学告到了法院,除了赔偿还要公开赔礼道歉。

这就是这件投毒案的来由。

只是没想到的是,时隔不久,田同学和字节发的论文获得了 NeurIPS 2024 最佳论文奖,也算是活久见了。

论学术能力,田同学肯定没问题,在学术方面非常的牛,但是那种"投毒"的行为,放眼全球都是炸裂的存在。

不得不感慨,"天才"与"恶魔",有时往往真的只在一念之间。

如果你想学习 AI ,欢迎来添加我的微信 (vx: ddcsggcs ),会有很多好玩的AI技术分享,可以咨询、也可以围观朋友圈呀!欢迎查看我的专栏 >>1. 专栏:计算机视觉入门与调优 , 2. 专栏:Transformer 通关与大模型实战

相关推荐
南宫生3 分钟前
力扣-图论-17【算法学习day.67】
java·学习·算法·leetcode·图论
不想当程序猿_15 分钟前
【蓝桥杯每日一题】求和——前缀和
算法·前缀和·蓝桥杯
落魄君子26 分钟前
GA-BP分类-遗传算法(Genetic Algorithm)和反向传播算法(Backpropagation)
算法·分类·数据挖掘
菜鸡中的奋斗鸡→挣扎鸡34 分钟前
滑动窗口 + 算法复习
数据结构·算法
Lenyiin43 分钟前
第146场双周赛:统计符合条件长度为3的子数组数目、统计异或值为给定值的路径数目、判断网格图能否被切割成块、唯一中间众数子序列 Ⅰ
c++·算法·leetcode·周赛·lenyiin
郭wes代码1 小时前
Cmd命令大全(万字详细版)
python·算法·小程序
scan7241 小时前
LILAC采样算法
人工智能·算法·机器学习
菌菌的快乐生活1 小时前
理解支持向量机
算法·机器学习·支持向量机
大山同学2 小时前
第三章线性判别函数(二)
线性代数·算法·机器学习
axxy20002 小时前
leetcode之hot100---240搜索二维矩阵II(C++)
数据结构·算法