附录 G 长上下文评估

本文为论文《SmolLM2:紧凑高效的小语言模型家族》「中文全文翻译」板块的对应章节,与「论文原文」板块同一章节一一对应,层级保持一致。

图 7 显示了在 haystack 中的大针基准上的评估结果。

图

图 7:8192 上下文长度的 SmolLM2 haystack 中的大针评估。

表 11 显示了 HELMET 基准上的评估结果。

表 11:使用 8k 最大输入长度的基础模型在 HELMET 基准上的评估结果。