Governance Decay: How Context Compaction Silently Erases Safety Constraints in Long-Horizon LLM Agents
编译摘要
1. 浓缩
- 核心结论 1:context compaction 是治理状态的独立失效面。
- 关键证据:1,323 episodes 中,完整上下文约束条件违规为 0%,compaction 后总体升到 30%,部分模型达 59%。
- 核心结论 2:是否保留约束与违规之间存在强关联。
- 关键证据:约束保留时报告 0% 违规,约束被 summary 丢弃时为 38%。
- 核心结论 3:把约束从有损压缩中隔离可以修复该失效面。
- 关键证据:Constraint Pinning 在该 benchmark 中把违规恢复为 0%。
2. 质疑
- Pinning 保证“留住文本”,不自动保证 issuer/authenticity;恶意伪装成 operator 的控制状态是另一问题。
- benchmark 的 0% 不等于所有模型、所有压缩器、所有长程任务中的普遍保证。
- compaction-induced violation 仍需与真实 external effect / recovery 连接。
3. 对标
关联概念