达里奥·阿莫迪 · 待分类

他不把对齐看作等待一次攻克的二元数学难题,而看作通过更好的训练、诊断和控制逐步降低失败概率的过程。

来自《Dwarkesh 2023:The hidden pattern behind every AI breakthrough》

嘉宾观点 · 忠实转述

强大模型的结果可能高度依赖训练细节,既不能假定默认对齐,也不能假定默认毁灭;现有控制办法不够好,需要扩充可用方法。

他的未来判断

在2023年,他希望未来两三年能改进诊断和可扩展训练方法,并逐步减少出错的可能性,而不是承诺届时彻底解决对齐。

延伸分析 由 AI 生成

如果安全进步是逐步降低风险,就需要持续记录残余失败模式和控制效果,不能只用是否解决对齐的标签衡量。

后续观察

  • 诊断准确性
  • 失败模式数量与严重程度

讨论

还没有公开评论。

Web 当前为匿名只读,可在受邀小程序中参与讨论。

阅读说明

正文观点、理由及未来判断是对嘉宾表达的整理与转述,原话节选保留原语言。“延伸分析”及其汇总由 AI 生成,不代表嘉宾表态,受文中条件及证据范围限制,不构成投资建议。