Mistral 发布 Large 4 公开预览:1T 参数、49B 激活,权重定在本月底开放
Mistral 10-06 在官博发布 Mistral Large 4(ML4)公开预览。预览 API 已在 Mistral Studio 开放,官方称权重月底放出。ML4 是原生多模态模型,总参数 1 万亿,激活参数 490 亿,是 Mistral 迄今最大的模型。它在 Mistral 位于欧洲的自有数据中心、用 3800 块 NVIDIA Grace Blackwell GPU 从零训练,预览也跑在同一套设施上。权重放出前,Mistral 先和网络安全机构、经过审核的合作伙伴及政府部门做实战红队测试。许可证官方还没公布。
以下成绩都是官方自报:DeepSWE v1.1 61.7%,Terminal-Bench 4 28.3%,AutomationBench 59.9%(657 个跨 Gmail、Google Sheets、Slack、Salesforce 的业务流程)。安全方面,Artificial Analysis Cyber Index 里有一项要求复现开源软件中的真实漏洞再打补丁,ML4 得 82%,官方称是所有模型里最高;Cybench 的 40 道安全竞赛题解出 93%。官方称这轮强化学习训练还在进行,月底会随权重一起公布架构细节、更多基准和后训练方法。
要在私有云或本地跑大模型、做代码 Agent、业务流程自动化或安全分析的团队,月底会多一个能自己部署的万亿参数开放权重模型。眼下的成绩都来自预览版、由官方自报,许可证条款要等权重放出时才能看。
主源:https://mistral.ai/news/mistral-large-4
一起交流