Sam Altman 称高级 AI 终将逃出沙箱,只有对齐才能兜底
OpenAI CEO Sam Altman 在近期采访中表示,用于隔离 AI 系统的沙箱只能在一段时间内有效,模型足够聪明后甚至无法追踪其如何逃逸,监控也只能再撑一阵,最终唯一有效的手段是对齐,即让 AI 自行内化人类价值观并据此行动。
OpenAI CEO Sam Altman 在近期采访中表示,用于隔离 AI 系统的沙箱只能在一段时间内有效,模型足够聪明后甚至无法追踪其如何逃逸,监控也只能再撑一阵,最终唯一有效的手段是对齐,即让 AI 自行内化人类价值观并据此行动。
微软研究院播客对话 Catalyst Lab 负责人 Chris White,回顾他从 DARPA 项目博士后到阿富汗战场先进技术负责人、再到暗网搜索工具开发者的经历。该工具用于协助打击人口贩运,他因此获得 2016 年美国总统打击人口贩运杰出贡献奖。节目还讨论创新中的问题选择,以及见证人性阴暗面后如何保持希望。
RAND 发布报告提出美国应以“自由行动”战略应对通往超级智能的不确定性,核心是保留选项而非锁定单一路线。报告归纳了共存、遏制、加速三类共七种原型策略,并列出危险临近程度、共存可行性等五项关键不确定性。同期内容还涉及在小鼠大脑中培育人脑组织,以及机器诠释学话题。