跳到正文
千机 API
原文
The Decoder· Matthias Bastian·· 5 小时前精选AI 评分78

斯坦福研究发现,快速发展的LLM正使既有研究结论迅速过时

Rapid LLM development is outrunning the research meant to explain it, study finds

AI 导读

斯坦福研究人员对照20个模型检验了50项广泛引用的LLM结论,发现44%已过时,另有34%明显减弱。在有估算过时日期的22项发现中,平均有效期仅15.7个月;推理相关结论消退最快。研究建议将实证发现限定于特定模型和时间,并记录模型版本、日期,公开提示词与分析代码,以便未来复测。

推荐理由

研究将50项广泛引用的LLM结论与20个模型进行对照,呈现模型迭代如何改变既有发现的适用范围,并强调结论应绑定具体模型与时间。

来源:The Decoder · the-decoder.com