从 AI 原则到具体控制措施:NIST AI RMF 实践指南

运用 NIST 的治理—映射—测量—管理循环,将生成式 AI 风险原则落实为系统清单、可衡量的控制措施、责任人与证据。

Four-stage risk-management cycle represented as connected worktables

当团队能够指出具体系统、风险负责人、测试、阈值,以及控制措施确实执行过的证据时,AI 治理才真正发挥作用。

治理:明确责任归属

建立模型、供应商、数据来源、集成项及部署负责人的清单。按后果严重程度和可逆性对用途分类。明确谁能批准新用途、谁监控事件,以及谁能暂停系统。

NIST 的《生成式 AI 概况》是《AI 风险管理框架》的自愿性配套文件。它按生命周期组织工作,而不是提供一枚统一的认证徽章。应将其作为一套结构化的问题与行动清单,并根据组织实际情况调整。

映射:描述真实部署环境

记录用户、受影响人群、预期任务、可预见的滥用方式、数据流和依赖项。通用模型在头脑风暴沙盒中可能风险较低,但一旦接入福利待遇决策或对外沟通,风险就可能很高。

记录假设和排除项。纳入第三方工具、检索语料库和人工审核,因为系统行为并非只由基础模型决定。

测量:测试已识别的风险

选择与映射出的危害相对应的测试:文档问答要测试答案是否有依据,资源分配系统要按人口群体切片评估,连接工具的智能体要测试抗提示词注入能力,敏感数据要进行隐私测试。应在看到结果之前设定可接受的阈值。

将定量测试与结构化专家审查结合。平均表现可能掩盖小群体或罕见流程中的严重故障。保留模型、提示词和数据的版本信息,以便复现测量结果。

管理:选择并监控控制措施

控制措施可以包括限制使用范围、加强数据处理、输出过滤、向用户披露、人工确认、回退流程和事件响应。将期限及剩余风险的接受决定落实到具体角色。

部署后仍需监控,因为用户、数据和攻击手法都会变化。将事件和险些发生的事故反馈到风险映射与评估集中。供应商更新应触发与变更程度相称的复查。

证据可以简洁,但必须真实

为每个系统维护一份简短的风险记录,关联用途、负责人、测试、结果、批准记录和事件。避免撰写无法与运行日志或发布关卡对应的政策文件。

目标不是堆积文书,而是建立从问题到控制措施、再从控制措施到证据的可重复路径。

如何付诸实践

先选择一项与 AI 原则如何转化为 NIST AI RMF 控制措施相关、范围明确的工作流程。在改变系统之前,写下一页基线记录:目前的完成时间、质量检查、常见失败类别、升级处理路径,以及对结果负责的人。选择有代表性的样本,而不只挑最简单的例子。纳入普通案例、困难的边缘案例,以及至少一个正确做法是暂停或要求补充信息的案例。

先让候选方案与现有流程并行运行,再考虑替换现有流程。成功和失败的输出都要检查,因为整体错误率降低,仍可能掩盖新的高影响故障。记录每次测试所用的准确配置,并保留足以让其他审查者复现结果的材料。试点结束时,应依据事先商定的阈值决定扩大使用、调整还是停止,而不是凭事后对最佳演示的印象做决定。

向供应商或内部团队提出的问题

询问支撑核心主张的证据是什么、证据对应哪些系统和数据版本,以及排除了哪些条件。索取针对部署所涉语言、输入类型和风险类别的结果。了解变更如何通知、回归问题如何发现,以及客户如何导出事件复盘所需的日志。

还要询问置信度低、依赖项故障或请求超出支持范围时,系统会如何处理。可靠的产品应有明确的失败状态,而不只是给出措辞更漂亮的回答。责任归属也很重要:明确谁能暂停流程、谁批准例外,以及重大错误流入生产环境后由谁通知受影响用户。

实用检查清单

  • 在选择模型或工具之前,先定义用户任务以及真正重要的失败情况。
  • 保留一个从真实工作中抽取的小规模、带版本标识的测试集,包含棘手及对抗性案例。
  • 为每次运行记录模型、提示词、工具、检索设置、数据版本、延迟和成本。
  • 对不可逆、高影响或外部可见的操作,要求人工确认。
  • 按类别审查失败,而不只看平均分,并将回归案例纳入测试集。

Meydo Journal 延伸阅读

主要来源