Mistral: Mistral Nemo

Mistral Nemo 是 Mistral AI 与 NVIDIA 共同打造的 12B 参数语言模型。其指令版本 Mistral-Nemo-Instruct-2407 具有 128k token 上下文窗口，采用 Apache 2.0 许可证。在 Mistral API 上其 id 为 open-mistral-nemo-2407，Mistral 模型文档列出它于 2026 年 5 月 22 日弃用、2026 年 7 月 31 日退役，替代模型为 Ministral 3 8B。

状态

托管 API 端点已退役。Hugging Face 上的开放权重仍以 Apache 2.0 发布，可自行部署。

核心功能

• 规模与上下文：12B 参数，128k token 上下文窗口。
• 分词器：Tekken。
• 模型卡中的架构细节：40 层、5,120 维、32 个注意力头（8 个 KV 头），词表约 128k。
• 多语言与代码数据：模型卡称训练数据中多语言和代码占很大比例。
• 函数调用：通过 transformers 4.42.0 或更高版本支持，工具调用 ID 必须恰好为 9 位字母数字。
• 厂商基准：据模型卡，MMLU（5-shot）68.0%、HellaSwag（0-shot）83.5%、TriviaQA（5-shot）73.8%，多语言 MMLU 大约在 59% 到 65% 之间。
• 推荐温度：模型卡建议 0.3。

适用场景

• 需要宽松许可证的自托管对话和函数调用任务。
• 基于 12B 基座的微调实验。

局限：模型卡称该模型没有审核机制，请自行增加安全层。

迁移步骤

1. 在代码中搜索 open-mistral-nemo-2407。
2. 把托管调用迁移到 Ministral 3 8B 或 Mistral 模型页面上的其他模型，并重新跑评测。
3. 如果确实需要 Nemo，可从 Hugging Face 获取开放权重自行部署。

常见问题

Mistral Nemo 在 Mistral API 上还能用吗？

不能。Mistral 列出其于 2026 年 7 月 31 日退役。

Mistral Nemo 被什么取代了？

Mistral 文档指明替代模型为 Ministral 3 8B。也可参考本站的 Mistral Small。

Mistral Nemo 的上下文窗口和许可证是什么？

128k token，Apache 2.0 许可证。

谁开发的？

Mistral AI 和 NVIDIA。

替代方案

• Mistral Small：本站收录的 Mistral 当前模型系列。
• Mistral Large 4：Mistral 较大的旗舰条目。
• Llama 3.1 8B Instruct：Meta 的小型开放权重替代品。

总结

Mistral Nemo 在托管 API 上已退役，但开放权重仍可使用。请见模型卡和模型分类。