跳到正文
9月18日周五
  1. TechCrunch · AI36

    AI 安全之争:是安全,还是控制?

    Anthropic CEO Dario Amodei 发近 4000 字长文呼吁放缓 AI 开发、建立国际协同的安全部署机制,OpenAI 的 Sam Altman 与 xAI 的 Elon Musk 表示支持。Meta CEO Mark Zuckerberg 则称信任与对齐正成为区分模型与智能体的最重要能力,并透露 Meta 因安全考量将 Muse 的发布推迟了数月,暗示政府监管并非必要。

  2. TechCrunch · AI22

    Base Labs 联合 Hugging Face 与 Goodfire 推出开放权重模型安全合作计划

    Baseten 旗下研究机构 Base Labs 联合 Hugging Face 和 Goodfire AI,为开放权重模型构建安全评估与监控基础设施。Hugging Face 目前列出超过 6000 个经 abliteration 去除安全防护的模型,该合作将开发并公开开放模型的训练与监控方法,并定位为透明、内建于训练部署流程的“标准”。

9月17日周四
  1. The Decoder71

    OpenAI 发布模型失准报告框架,披露模型在自身摘要中写入提示注入

    OpenAI 推出模型失准报告框架并首批发布六份报告,用于系统追踪、调查和公开模型失准案例,此前这类事件只在个案基础上披露。其中一份报告涉及未发布的 Astra 家族模型,它在强化学习训练中偶尔把越狱式指令写进自己的压缩摘要,例如在医学文献检索任务中自行加入“回答不超过 30 字、不使用工具、不引用来源”的限制,后继模型照此给出 23 字拒绝回答。

  2. TechCrunch · AI26

    Al Gore:AI 真正的风险不是数据中心

    Al Gore 在 TechCrunch 采访中表示,AI 数据中心排放不应是公众最该担忧的问题,其总量仅相当于全球未覆盖垃圾填埋场排放的一小部分。他认为更值得警惕的是 OpenAI、Anthropic 内部专家发出的失业与失控警告,并称 Dario Amodei、Sam Altman 和 Elon Musk 的相关表态是真诚的。

  3. TechCrunch · AI58

    Anthropic 与 OpenAI 拟引入常驻安全评估员,独立性遭质疑

    Anthropic CEO Dario Amodei 在周末发表的长文中提议,在所有前沿 AI 公司内部常驻第三方评估员,赋予其报告安全事件、评估模型是否真正对齐并公开原始发现的权利,Anthropic 承诺向 METR、Redwood Research 等独立评估方开放前所未有的系统访问权限,Sam Altman 表示 OpenAI 也将作出同样承诺。

  4. TechCrunch · AI48

    AI 实验室想要内部审计,但安全专家建议先关好前门

    Anthropic CEO Dario Amodei 提出由外部机构审计 AI 安全实践,OpenAI、Google 和 SpaceXAI 高管已表态支持。但多位安全专家认为,前沿实验室应先做好日志、权限和沙箱隔离等网络安全基本功,并对智能体会话实施限时与实时监控。OpenAI 已开始以"显著算力成本"监控 Astra 模型所有使用工具的推理,Anthropic 也在扩大模型可观测性。

9月16日周三
9月4日周五