评估与发布治理
本文介绍了《FDE指南》（前线部署工程师指南）中关于AI智能体系统评估与发布治理的框架。指南强制要求以证据为支撑的发布模型，适用于同时包含确定性代码和非确定性智能的智能体系统。核心机制包括一条不可篡改的完整性链（Integrity Chain），通过绑定特定版本的环境、行为和证据，确保生产系统与通过评估的系统一致。评估不再是一次性事件，而是由确定性模式验证到语义专家审核的分层检查。关键实体包括评估案例（Evaluation Case）、评估报告（Evaluation Report）、解决方案发布（Solution Release）以及发布门禁（Release Gates）。评估报告通过记录系统被测对象（SUT）的SHA-256摘要（如agent_system、behavior_bundle、tool_contract和runtime）来提供主要证据。解决方案发布清单必须绑定workflow_charter、data_context、threat_model和security_policy等完整交付上下文。发布流程遵循严格的门禁递进：Gate 0（设计）验证章程、价值案例和架构；Gate 1（沙箱）聚焦合约测试、授权和预算控制；Gate 2（影子模式）在无业务影响下测量真实数据表现；Gate 3（金丝雀）在有限分段中执行并配备主动终止开关。运营控制延伸到生产环境，通过持续监控和“验证者规则”（Verifier's Rule）进行治理，该规则宣称智能体的自主性上限取决于验证而非生成能力。每次生产故障都必须被分类为可复现示例和回归测试，使评估语料库随系统复杂性同步增长。整个体系为FDE（前线部署工程师）在管理智能体系统风险、确保安全有效交付方面提供了可操作的治理模板。
Read More →