简讯 · 1 分钟阅读
Aleph Alpha 训练模型用德语推理
Aleph Alpha 表示,约 80 万条德语训练样本帮助一款小型 AI 模型生成德语推理过程。这项工作也揭示了一种取舍:模型的德语基准测试成绩起初下滑,部分原因是它会反复重复自己的想法。
Oossa · 关于 Oossa
Aleph Alpha 研究人员 Niklas Finken 和 Simon Thel 介绍了一种训练 AI 模型用德语推理、而不只是用德语作答的方法。他们通过提示其他模型用德语开始推理,生成约 80 万条训练样本,再用这些样本对一款拥有 30 亿活跃参数的模型进行微调。
该公司表示,模型的英语表现保持不变,但德语数学成绩起初有所下滑:在 German AIME 2026 中,成绩从 70.2 降至 48.3,随后在数学数据最充分的一轮训练中回升至 67.3。研究人员称,加入同一学科领域的德语数据,比笼统地增加德语数据更有帮助;目前,这种方法还无法可靠地阻止模型陷入循环。
为什么重要
对德语用户而言,这项工作让他们看到了用自己的语言阅读 AI 推理过程的可能性,但也表明,提升语言一致性可能要付出准确性和可靠性方面的代价。
这篇文章有帮助吗?
来源与参考
| # | 来源 | 发布方 | 日期 | 要点 |
|---|---|---|---|---|
| 1 | Through the Valley of Tears: Cold Starting German Reasoning in LLMs ↗ | Aleph Alpha | 2026年9月29日 |
1 个来源
最后更新:
Oossa · 新闻简报
一周 AI,讲明白
每周一,用通俗的语言讲清值得知道的新闻。免费,无垃圾邮件。