哈佛心理学家Steven Pinker呼吁以冷静AI安全工程取代末日论调
哈佛心理学家Steven Pinker在公开信中称AI灭绝人类的恐惧被夸大,并呼吁以冷静的安全工程取代末日论调。他认为纸夹最大化等场景混淆了智能与统治欲,同时承认低估了大语言模型的能力,批评AI公司发布产品的鲁莽。他真正担忧的是生物恐怖主义、网络攻击和不受控的AI智能体,主张独立监督、责任和人类控制。
哈佛心理学家Steven Pinker在公开信中称AI灭绝人类的恐惧被夸大,并呼吁以冷静的安全工程取代末日论调。他认为纸夹最大化等场景混淆了智能与统治欲,同时承认低估了大语言模型的能力,批评AI公司发布产品的鲁莽。他真正担忧的是生物恐怖主义、网络攻击和不受控的AI智能体,主张独立监督、责任和人类控制。
Atlassian CEO Mike Cannon-Brookes 在 Decoder 访谈中反驳 SaaSpocalypse 论调,认为前沿模型不会直接运行整个企业,AI 反而会提升 Jira 等工具使用量,客户增长约快 5%。他提出竞争将从信息不对称转向想象力不对称,并预测多数公司规模更大、层级更扁平,工程师、设计师与产品经理角色会融合但不会消失。
Redwood Research 首席科学家 Ryan Greenblatt 在 Sam Harris 播客上估算,若研发维持现状,未对齐 AI 系统夺取控制权的概率约为 50% 至 60%,且存在许多或所有人类死亡的风险。
John Gruber 评论 Meta 的智能体系统 Muse,称其技术上具有开创性——每位用户拥有一个运行在 Meta 云端的持久 Linux VM——且易安装易用。它是首个面向消费者的智能体 AI 系统,但消费者可能并不理解其强大与危险,尤其当它运行在 Mac 上时。
Latent Space 采访 Runway CTO、研究科学家及联创,解读 GWM Worlds 2 的 WorldPrompt 功能与实时世界模型的工程挑战。
Simon Willison 认为编码智能体让软件工程变得更难。它们能做惊人任务,但释放全部潜力需要非凡的纪律与知识。
Radical Numerics CEO Eric Nguyen称生物安全正成为一场AI军备竞赛,防御方目前处于劣势。他在Arc Institute参与开发了Evo和Evo 2基因组语言模型,这些模型曾被用来生成完整噬菌体基因组并合成功能性病毒。新创立的Radical Numerics正构建并扩展GLM,实验中模型能沿RNA适配体分数阶梯自行推断更高分序列,展示了“DNA语言中的链式推理”。
OpenAI CEO Sam Altman在联合国安理会发表讲话,谈及AI安全、人类控制与国际合作。他强调了在人工智能发展过程中确保人类掌控和全球协作的重要性。发言未提及具体模型版本或技术参数。
本期 Latent Space 访谈邀请拥有奥斯卡奖、两颗以自己命名的小行星的 Google 科学家 John Platt,重点讨论其团队开发的 Empirical Research Assistance(ERA)。
Anthropic和OpenAI今夏接连声称其模型在漏洞挖掘、数学突破上超越人类专家,但专家核查发现不少说法夸大,OpenAI的数学成果还被质疑研究不端和抄袭。文章认为“超级智能”“失控模型”等叙事实为营销策略,意在转移责任并推动政策,呼吁决策者和公众保持怀疑,勿被公司宣传误导。
作者反驳“MCP一直是个坏主意”的说法,认为对需要精细控制外部服务访问、安全处理API密钥、提供用户连接界面和清晰审计日志的场景,MCP仍不可或缺,其价值远不止于全功能终端代理。
Chris Lehane提出,更强的AI能力需要更强的安全证据、共同标准和持久的政策行动,而政策窗口仍然开放。
OpenAI首席科学家Jakub Pachocki反思日益强大的AI及其对齐挑战,称模型正变得越来越像“异类心智”。他呼吁建立更强有力的安全保障,并推动国际协调合作以应对潜在风险。