Columbia CS 教授 Vishal Misra 解释为什么 LLMs 无法产生新的科学思想。 因为 LLMs 学习的是结构化地图,即已知数据的贝叶斯流形,在其中表现良好,但在其之外则失效。 真正的发现需要创建新地图,而这是 LLMs 无法做到的 https://t.co/PzI0YrTTeT
Columbia CS Prof Vishal Misra explains why LLMs can't generate new science ideas. Bcz LLMs learn a structured map, Bayesian manifold of known data &; work well within it, but fail outside it. True discovery requires creating new maps, which LLMs can't do