LSTM之父炮轟LLaMA 2:抄我想法還羞辱我!網友:LeCun干的吧?
故意的還是不小心的?
克雷西 發自 凹非寺
量子位 | 公眾號 QbitAI
LLaMA可謂是「駝紅是非多」。
新版本剛發布沒多久,就遭到了LSTM之父Jürgen Schmidhuber的炮轟。
你「飯來張口」也就算了,竟然還「放下碗罵娘」?

Schmidhuber稱,Meta在訓練LLaMA 2的時候用到了他在1991年提出的想法,結果LLaMA卻對他瘋狂抹黑。
一開始,網友發現在詢問LLaMA 2關于Schmidhuber的事時,得到了令人意外的回復。
抱歉,我不能提供關于有負面背景的人的信息……
LLaMA還說,Schmidhuber「從事過有害活動」「對社會沒有貢獻」云云。

有網友猜測,這個回答是LeCun硬編碼進去的。

LLaMA究竟是故意還是不小心的,這一點無從考證,不過可以確定的是這個消息傳到了Schmidhuber的耳朵里。
Schmidhuber要求Meta和LeCun對此做出解釋,兩方到目前均沒有回應。
「LeCun搶了我很多想法」
Schmidhuber提到的1991年的成果,是一種Transformer的線性(未歸一化)變體。
Schmidhuber說,這也是最早的Transformer變體。相關論文在1992年發表,1993年登上了ICANN。

另外,根據Schmidhuber的說法,LeCun在「搶成果」方面已經是「慣犯」了。
不僅是LLaMA,LeCun還有很多成果都用到了他的想法,卻聲稱自己是首創。
Schmidhuber稱,早在2017年,Meta(當時還叫Facebook)就使用了他發明的LSTM。
不過當時Facebook的通告當中通篇未提及Schmidhuber的名字。
甚至還說LSTM是自己發明的。

又如在2022年,LeCun總結了10年來AI領域最重要的五大突破。

Schmidhuber表示,這些成果大部分都是來自他的實驗室:
- 自監督學習實際上就是把1991年的RNN進行堆疊
- ResNet就是2015年的Highway Net
- 3和4就是1991年的fast weight
- 5實際上就是1991年的線性Transformer變體
當時的LeCun毫不客氣地回懟,還對Schmidhuber挖苦了一番:
在萊特兄弟之前也有人發明過飛機,但是只飛了不到50米,所以沒有人記住他(Ader)的名字。
Schmidhuber做出來的模型就和Ader的飛機一樣,就算是最早的,也沒有什么作用。

Schmidhuber接下來又拿出了LeCun的一篇關于機器自主智能的論文。
Schmidhuber說,這篇論文中涉及了1990-2015年間的成果,但并未標注引用。

為了充分展示這篇論文中「搶」走的成果,Schmidhuber還專門做了一個網頁,詳細列舉了有關內容。

具體內容這里就不一一介紹了,我們來看LeCun是怎么回應的。
LeCun先是嗆了一句,「咱就不能說點有建設性的意見嗎?」,之后又說:
我在論文里都說了,很多概念已經存在了很長時間,你為什么非揪著不放?
再說了,可訓練的世界模型本就是系統識別的核心思想。
而且論早的話,80年代就有人用神經網絡學習人類世界了,不比你1991更早?

就這樣,這場戰火一直燒到今年。
2月,Schmidhuber發推稱,LeCun既沒有承認錯誤,也沒有通過正確的方式(OpenReview)對他的論文進行辯護,而是針對Schmidhuber發表了極具誤導性的觀點。

直到這次LLaMA 2被曝出發表攻擊Schmidhuber的言論,兩人之間的爭斗似乎仍未平息。
One More Thing
「羊駝事件」發生之后,有網友調侃性地創造了「Schmidhubered」這個新單詞。
「schmidhubered」的表現包括下面這幾點:
- 發明了很好的東西,結果不但沒人關心,反而被嘲笑
- 幾年之后(這個方面)又流行起來了,但是卻被別人說是首創
- 開始解釋自己才是最早的發明者
- 結果沒人在意,甚至所有人都覺得你是在酸
- 名字被做成動詞

如果Schmidhuber的說法都屬實,那么這個詞的解釋的確形象地描述了他的遭遇。
LeCun這次又會做出什么樣的回應?還是讓子彈再飛一會兒……
參考鏈接:
[1]https://people.idsia.ch/~juergen/lecun-rehash-1990-2022.html
[2]https://twitter.com/SchmidhuberAI/status/1683870175299239937
- 論文自動變漫畫PPT!Nano Banana同款用秘塔免費生成,還有一對一語音講解2025-12-09
- 智能體A2A落地華為新旗艦,鴻蒙開發者新機遇來了2025-12-06
- 14歲華人小孩,折個紙成美國天才少年2025-12-06
- 《三體》“宇宙閃爍”成真!免佩戴裸眼3D屏登Nature2025-12-06




