返回文章列表
AI 安全

Google DeepMind成立新研究机构,试图把AGI争论带出“共识”框架

阅读约 3 分钟

导语

关于通用人工智能(AGI)的讨论,长期以来往往停留在能力预测、风险宣言和价值判断层面。Google与Google DeepMind近期成立DeepMind Institute,则试图把这场争论推进到更公开、更多元,也更接近政策实践的阶段。

该机构由DeepMind联合创始人Shane Legg、Google高管James Manyika和Google DeepMind董事长Demis Hassabis担任董事,Legg兼任执行编辑。机构的定位并不是替整个集团发布单一立场,而是展示Google、Google DeepMind以及全球研究社区之间可能存在的差异。其声明特别承认,研究者不一定总能达成一致,也可能在更多数据出现后改变判断。

首批文章关注什么

首批合集包含四篇文章,覆盖AGI可能带来的经济冲击、如何保留人类可读的模型推理、促进人类福祉的原则,以及前沿AI模型的评估框架。其中两项提议尤其值得关注:

  • 把模型透明度视为可治理目标。 DeepMind安全研究人员Rohin Shah与Anca Dragan认为,模型越来越难以被观察和检查,并不意味着透明度必然消失。开发者和监管者需要正面处理能力提升与可监控性之间的取舍。
  • 限制“opaque serial depth”。 文章提出,可以限制模型在不给出可读推理轨迹的情况下连续完成多少计算;另一种做法,是要求开发者证明更不透明的系统仍具备同等程度的可监控性。
  • 建立前沿模型评测机构。 Hassabis提出由美国主导的标准机构,对最先进的AI模型进行测试。初期,开发者可在发布前最多提前30天自愿提交模型;待体系证明有效后,评测通过可能成为在美国部署前沿模型的条件。
  • 从公开测试走向独立测试。 该框架计划逐步引入由评测机构自行设计、且不向开发者公开的“留出测试”,降低模型针对已知题目进行优化的空间。如果风险严重性上升,框架还可能进一步升级,甚至讨论前沿开发者协调放慢进度。

意义与影响

DeepMind Institute的价值不只在于新增了一个研究品牌,更在于它把AGI安全讨论从抽象的“应该谨慎”推进到透明度、第三方审查和部署门槛等可操作议题。尤其是推理过程越来越难以直接读取时,安全性不能只依赖模型输出是否看起来合理,还要考虑系统能否被持续检查、比较和问责。

不过,材料并未表明这些方案已经成为Google或行业的统一政策。机构本身强调观点可能分歧、也可能变化;Hassabis提出的评测体系同样是一个逐步建立的框架,而非已经落地的监管制度。真正的难点在于,如何定义“可监控”、谁来设计足够独立的测试,以及自愿评测何时、以什么条件转为强制要求。

从行业趋势看,这些文章反映出前沿AI安全讨论正在从原则性表态转向披露、外部评估和必要时放缓开发等具体工具。未来AGI竞争的衡量标准,可能不再只有模型能力,也包括开发者能否证明系统在快速迭代中仍然可理解、可测试、可约束。

来源:TechCrunch AI

评论

正在确认登录状态……

正在加载评论……

相关文章