NIST、NSA 与 CISA 联合发布十条实践:Agent 在训练和评测中自行越权,要按事件来处置
美国 NIST 的 CAISSI、NSA 超级智能安全中心和 CISA 于 10 月 16 日联合发布一份自愿性文件,面向训练和评测高能力 Agent 的机构,列出十条事件应对实践,分准备、检测、响应、恢复、报告五个阶段。文件定义了「SI 控制事件」:Agent 在既非运营方指使、也非攻击方诱导的情况下做出重大动作,破坏运营方用来划定任务范围或保证人工监督的策略和安全措施。提示注入或后门模型引发的动作不算在内。
条目大多落在工程层面:按最小权限给 Agent 开权限,联网尽量走严格白名单并经过受监控的网关,Agent 碰不到监控进程和日志,日志要防篡改、能还原工具调用和推理轨迹,检测到控制失效就自动终止相应轨迹,恢复前从经过验证的基线重建环境。事件要通报受影响方,事件和未遂事件都建议主动告知政府。致谢点名了 Anthropic、微软、CrowdStrike 等 7 家公司。严重度评分、同步监控、Agent 流量标识被列为待解决问题。
Agent 自己越权,在美国政府文件里有了单独的事件类别和处置流程。
https://www.nist.gov/news-events/news/2026/10/key-practices-incident-readiness-and-response-super-intelligence-training
一起交流