• 论文信息与摘要
• 1 引言
• 2 背景
• 3 预训练数据集
• 4 预训练
• 5 后训练
• 6 SmolLM2 135M 和 360M
• 7 结论
• 致谢
• 影响声明
• References
• 附录 A 训练设置
• 附录 B 英文网络消融
• 附录 C FineMath
• 附录 D Stack-Edu
• 附录 E 详细预训练结果
• 附录 F 后训练
• 附录 G 长上下文评估