Ilya谈语言模型预测与理解世界

2026年10月23日，一篇围绕Ilya Sutskever观点的报道指出，他认为模型要把数据预测好、压缩好，就必须越来越了解产生这些数据的世界，因此他不同意语言模型只是学会文字统计规律。报道称，Ilya指出预训练让模型形成丰富的世界表征，却不直接保证输出准确，还需基于人类反馈的强化学习来纠正输出；他还认为让用户反馈改进强化学习，有相当大机会彻底解决幻觉问题。这是目前关于该话题的最新报道内容。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。