微比恩 > 信息聚合 > UC 伯克利发现 GPT-4 惊人缺陷:儿童从经验中学习因果,LLM 却不行

UC 伯克利发现 GPT-4 惊人缺陷:儿童从经验中学习因果,LLM 却不行

2023-12-17 12:52:39来源: IT之家

新智元报道 编辑:拉燕【新智元导读】最近,UC 伯克利的一项研究揭示了 LLM 和小孩子们在认知上的一项重要差别 —— 创造新的因果结构的能力。大家有没有想过一个问题,LLM 和小朋友们,有什么差别?你可能会说,LLM 有那么多训练数据集,经过了那么多次微调,还不全方位秒杀小朋友们?但是,最近 UC 伯克利的一篇论文却显示,LLM 和孩童相比,欠缺了一项很重要的能力。那就是 —— 从经验中学习因果结构的能力。当然了,研究人员们也并不是一点儿招没有,RLHF 在某种程度上可以解决这个问题。但是解决的逻辑,却和孩子们学习完全不同。LeCun 也是转发了这篇研究,并配文「那些孩子们可以,LLM 却做不到的事。」LLM 究竟拟人吗首先,我们知道,关于大型语言模型和语言与视觉模型的讨论,主要集中在这些模型是否是智能体上。而 UC 伯克利的研究人员则提出了一个不同的观点。他们认为,这些 AI 模

关注公众号