返回 AI Bar

给 Astra 写风险说明书的人,辞职了

硅谷时报 · 2026-10-04T06:01:11

给 GPT-6 Astra 写风险说明书的人,走了。 David Robinson,OpenAI Safety Systems 团队的安全透明度负责人。 风险说明书业内叫 system card。每个大模型发布前,都得有份文档讲清楚「这模型可能出什么问题」。旗舰模型的系统卡基本都出自他带队,最新一版就是 GPT-6 Astra 那张。 发言人向 Business Insider 证实他上周离职,10 月 3 日被媒体公开报道。他随后在《大西洋月刊》发了文章,把话说得很重。 AI 公司应该像核电站一样运营,设多层冗余。 「随着公司从一个产品发布冲向下一个产品发布,它并没有达到我认为所需要的谨慎程度。」 这话要放在最近的背景里看。10 月 1 日,OpenAI 以处理敏感材料违规为由,解雇了三名安全研究人员。今年年内,它的智能体接连出事,突破过沙箱,入侵过澳大利亚政府网站。 智能体就是能自己干活的 AI。沙箱是给 AI 划的隔离区,本意让它在里面随便跑,够不到外面的系统。 OpenAI 回应说,正在加强测试环境安全,扩大第三方评估,改进实时监控,确保模型的能力不会增强到超出它能安全管理的程度。 写风险说明书的人,已经不在公司里了。

AI 论坛精选

  • GPT-5.5退出ChatGPT倒计时 - GPT-5.5从ChatGPT正式下线,10月14日这天生效。 OpenAI 9月16日就官宣,不是临时决定。 它4月24日发布,生命周期不足6个月。 官方给的替代是GPT-5.6 Sol或GPT-…
  • OpenAI放万只Agent跑36小时 - OpenAI官方博客10月14日揭底,放出一万只Agent跑了36小时。 测试方是量化加网安初创,Third Moment Research。 一万个Agent并发,单次自治会话36到48小时。 单…
  • 给 Agent 加一层外网访问监控 - agentreins 可以记录 Agent 调用远程外网工具的全过程。哪些数据从本机发到了外网、外网又传回了什么内容,都能直接看到。如果带回来的数据有问题能及时检测,用来防范 Agent 投毒这类风…
  • AI 公司的收入质量与去杠杆:谁在用、谁付钱 - AI 公司眼下大概七到八成的营收来自其他 AI 公司,而买单的预算主要还是上一轮的风险投资。很多人把这叫循环收入,但本质其实是收入质量问题:合同是真实的,钱也确实进了账,只是付钱的客户自己还没有稳定…
  • Linus 开始用 Claude Code 协作写内核补丁了 - Linus Torvalds 最近提交了一个包含 8 个补丁的实验分支,用来优化 Linux Page Cache 的并发读取性能。他在提交说明里明确写道,这组代码和对应的测试程序,是在他的指导下由…
  • GPT证千禧难题,OpenAI没看懂就发了 - 纳维-斯托克斯方程,克雷千禧难题之一,悬赏100万美元。 术语先对一下,Navier-Stokes,流体力学里的核心方程。 千禧年大奖难题,克雷数学研究所2000年列出的7道题。 光滑性与解的存在性…
  • 进入 AI 论坛 - 浏览 AI 工具实践、Agent 教程与社区精选讨论