Policy on the AI Exponential

编译摘要

1. 浓缩

  • 核心结论1: AI 指数级进步与政策蜗牛速度的矛盾需要从"保持选择权"升级为绑定性监管
    • 关键证据: 四年内 AI 从"写不好一行代码"到"写出大公司大部分代码";Mythos Preview 证明 AI 已是"全球和国家战略级别工具"
  • 核心结论2: 前沿 AI 模型应像飞机一样接受 FAA 式技术测试和审计,政府有权阻断不安全部署
    • 关键证据: 触发门槛为模型 >10²⁵ FLOP + 公司 >$500M AI 收入或 >$1B AI R&D 支出;民事处罚与全球年收入挂钩并随违规递增
  • 核心结论3: 四类灾难性风险需要优先监管:生物武器、网络攻击、AI 失控、自动化研发
    • 关键证据: 每类风险都有具体的韧性措施建议(基因合成筛查、网络基础设施硬化、自主武器禁令、AI 供应链管控)

2. 质疑

  • 关于 FLOP 阈值的质疑: 10²⁵ FLOP 是否能准确区分危险模型?随着训练效率提升,这个阈值可能过时。文章承认需要随时间调整为基于能力的阈值
  • 关于执行机制的质疑: 政府阻断部署的权力如何防止政治化或过度干预?文章提出的"法院执行 + 限定裁量权 + 司法审查"是否足够?
  • 关于民主联盟的质疑: 将 AI 地缘政治类比核武器是否准确?AI 技术扩散速度远快于核武器,联盟管控是否可行?
  • 关于就业影响的质疑: 文章承认 AI 可能导致"持久性就业替代",但提出的对策(UBI、工资保险)是否能在政治上实现?

3. 对标

  • 跨域关联1: 类似核不扩散条约(NPT)的多边框架——但 AI 技术更易扩散,管控难度更大
  • 跨域关联2: 类似 pharmaceutical regulation 的 FDA 模式——先测试后上市,但 AI 迭代速度远超药物研发
  • 跨域关联3: 类似 Collingridge 困境的经典案例——技术影响难以预见直到难以管理

关联概念