长思考不一定更准:推理长度超过一定阈值后准确率开始下降
Orbis News阅读约 1 分钟
演示内容 · 文章、模型及数据均为虚构示例,不作为事实或价格依据。
{"version":1,"hot":{"heat":17,"sources":[{"n":"arXiv","u":"#"},{"n":"作者博客","u":"#","say":"附带了可复现的评测脚本和每道题的推理长度分布。"}]}}
论文在 6 个模型上复现了这一现象,阈值随题目难度变化。作者建议用动态预算替代固定的最大值。
来源与说法(演示)
- arXiv
- 作者博客:附带了可复现的评测脚本和每道题的推理长度分布。