ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

2023-02-07 09:11:21来源：互联网

文章导读: 新智元报道编辑：编辑部【新智元导读】最近，LeCun连续发推，舌战各位推友，疯狂diss大语言模型是邪路，也为自家匆忙下线的Galactica酸了一把ChatGPT。而LeCun态度的大反转，也让曾经的对头 ...

新智元报道

编辑：编辑部【新智元导读】最近，LeCun连续发推，舌战各位推友，疯狂diss大语言模型是邪路，也为自家匆忙下线的Galactica酸了一把ChatGPT。而LeCun态度的大反转，也让曾经的对头马库斯喜出望外。不仅频频转发LeCun推文，还高调宣布两人的「世纪大和解」。
这两天，图灵奖得主Yann LeCun心态有些崩了。自从ChatGPT大火之后，微软凭着OpenAI腰板挺得很直。被啪啪打脸的谷歌，也不说什么「声誉风险」了。所有旗下的语言模型，无论是LaMDA，还是，以及，是能加快的加快，能上架的上架。然后再，想赶快扶出自己的OpenAI。（微软有的我也要）
然而，有一个人看着微软谷歌各领风骚，却只能急得原地跳脚。

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

这个人就是Meta的首席AI科学家——Yann LeCun。他在推特中十分意难平：「ChatGPT满嘴胡诌，你们却对它如此宽容，但我家的Galactica，才出来三天，就被你们骂到下线了。」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

是谁酸到了，我不说

作为深度学习三巨头之一、图灵奖得主，LeCun的一举一动，都十分引人注意。1月27日，在Zoom的媒体和高管小型聚会上，LeCun对ChatGPT给出了一段令人惊讶的评价：「就底层技术而言，ChatGPT并不是多么了不得的创新。虽然在公众眼中，它是革命性的，但是我们知道，它就是一个组合得很好的产品，仅此而已。」

「除了谷歌和Meta之外，还有六家初创公司，基本上都拥有非常相似的技术。」另外他还说，ChatGPT用的Transformer架构是谷歌提出的，而它用的自监督方式，正是他自己提倡的，那时OpenAI还没诞生呢。此番言论一出，公众哗然。Open AI的CEO Sam Altman疑似因为这句话直接取关了LeCun。

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

随后，LeCun继续舌战众位推友。1月28日，LeCun发推称，「大型语言模型并没有物理直觉，它们是基于文本训练的。如果它们能从庞大的联想记忆中检索到类似问题的答案，他们可能会答对物理直觉问题。但它们的回答，也可能是完全错误的。」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

2月4日，LeCun再次发推，更加直白地表示「在通往人类级别AI的道路上，大型语言模型就是一条歪路」。

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

他这话一说，网友们可high了，纷纷冲到评论区留言。LeCun随后补充说：「依靠自动回归和响应预测下一个单词的LLM是条歪路，因为它们既不能计划也不能推理。」「但是SSL预训练的Transformer是解决方案，因为它所处的现实系统有推理、计划和学习的能力。」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

LeCun举了个有趣的例子：自己在参加播客节目时，展示过ChatGPT的回答，它看上去很有道理，却错得离谱。然而主持人在读完ChatGPT的回答后，却没有第一时间发现它错了。LeCun对此解释道：「我们的思维方式和对世界的感知让我们能预想即将发生的事物。这是我们获得常识的基础，而LLM并没有这种能力。」他再次发推称：「在我们做出人类级别的AI之前，我们需要先做出猫猫/狗狗级别的AI。而现在我们甚至连这都做不到。我们缺失了十分重要的东西。要知道，连一只宠物猫都比任何大型语言模型有更多的常识，以及对世界的理解。」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

在留言区，有网友毫不客气地怼起LeCun：「你说得不对吧，本人亲测，Galactica的错误率接近100%，而ChatGPT的错误率差不多在15%左右。」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

对于网友的痛击，LeCun再次发推表明态度：「我从来没说大型语言模型没用，其实我们Meta也推出过Galactica模型，只是它不像ChatGPT那么好命罢了。ChatGPT满嘴胡诌，你们却对它如此宽容，但我家的Glacatica，才出来三天，就被你们骂到下线了。」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

对此，评论区有网友讽刺道：「你可真棒棒啊。不如回实验室去，把你说的东西给做出来。」LeCun回复：「今天可是周日，推特大辩论是我周末最爱的消遣了。」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

自家的模型只活了3天 LeCun如此意难平，可以理解。去年11月中旬，Meta的FAIR实验室曾提出一个Galactica模型，它可以生成论文、生成百科词条、回答问题、完成化学公式和蛋白质序列的多模态任务等等。

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

Galactica生成的论文LeCun也很开心地发推盛赞，称这是一个基于学术文献训练出的模型，给它一段话，它就能生成结构完整的论文。

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

然而，由于Galactica满嘴跑火车，它才上线短短三天，就被网友喷到下线。LeCun转发了Papers with Code的通知，像个「大怨种」一样说道：「现在我们再也不能和Galactica一起愉快地玩耍了，你们开心了？」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

虽然Galactica的demo才上线几天，但当时的用户都感觉如临大敌。有网友警示道：想想这个「写论文」神器会被学生们拿来做什么吧。

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

有网友表示，「Galactica这个模型的回答错漏百出，充满偏见，可是它的语气却十分自信权威。这太恐怖了。」

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

马库斯也表示，这种大型语言模型可能会被学生用来愚弄老师，非常令人担心。这熟悉的配方，熟悉的味道，真是令人感慨万千：曾经Galactica引起的恐慌和质疑，不正是ChatGPT后来所经历吗？看着这段历史的重演，却有着截然不同的结局，LeCun这么酸，确实不能说是毫无来由。

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

那为什么ChatGPT就能在质疑的声浪中人气愈发高涨，Galactica却只能惨兮兮地被骂到下线呢？首先，Galactica由Meta提出，大公司确实比OpenAI这样的小初创公司，面临更多的「声誉风险」。另外，OpenAI的产品定位策略十分聪明，从ChatGTP的名字就可以看出，它主打的概念是聊天。你可以和它聊知识、聊论文，但既然是「chat」，自然可以放飞一些，谁规定聊天一定要聊「准确」「严谨」的东西呢？

ChatGPT爆火，LeCun心态崩了！称大语言模型是邪路，Meta模型3天惨遭下线

但Glactica则不同，它的官方定义是：「这是一个用于科研的模型。」「这是一个受过人类科学知识训练的人工智能。您可以将它用作一个新界面，来访问和操作我们对宇宙的知识。」这当然就给自己埋了大雷了。虽然从技术层面来看，ChatGPT的确没有太多创新，但是从产品运营的角度，OpenAI这一招，打得十分出色。

LLM为什么会满嘴胡话？

上一篇：「幼态脸」横扫翻拍的经典神剧，我们正经历一场全社会审美滑坡 返回首页 返回栏目

下一篇：18.3 万美元offer到手！ChatGPT 通过谷歌 L3 面试：留给谷歌的时间不多了