返回上一页  首页 | cnbeta报时: 19:40:57
OpenClaw自己决定执行核弹选项 把用户重要邮箱清空
发布日期:2026-02-24 13:15:09  稿源:蓝点网

在人工智能领域,对齐指的是让人工智能系统的目标、行为、决策真正符合人类或设计者 / 使用者的真实意图、价值观和长期利益,而不只是在表面上听话或者完成字面任务。

HBz-x6haYAA26Cc.jpgHBz-x6nbAAAOqt7.jpgHBz-x6iakAAegxq.jpg

本文的主角是 Meta 超级人工智能实验室对齐负责人 Summer Yue,她在使用 OpenClaw AI 机器人的过程中就因为失误导致整个 Gmail 邮箱历史邮件被清空。

Summer Yue 也坦言,人工智能对齐研究者也不能免疫于不对齐问题,所以各位日常在使用各种 AI 尤其是 OpenClaw 时务必做好各类指令的确认防止翻车。

事件背景:

Summer Yue 使用 OpenClaw AI 机器人搭建工作流,这个工作流已经在测试环境中平稳运行数周并且没有发生任何故障,这个工作流的指令是检查邮箱并建议哪些邮件可以归档或删除,但在人类确认前不要执行任何操作。

因为数周平稳运行没有出现故障,Summer Yue 很自信地认为这个工作流已经完全可用,所以她将工作流部署到自己的 Gmail 主邮箱中执行操作。

记忆丢失导致命令出错:

测试邮箱中的邮件比较少,而主邮箱中有海量邮件,OpenClaw AI 机器人在处理邮件时触发框架内置的上下文压缩机制,该机制为了不让超长对话撑爆模型的上下文窗口,会自动总结并丢弃早期消息。

机器人在处理 Summer Yue 的主邮箱时就因为海量邮件撑爆上下文导致自动压缩并丢失部分记忆,在这个过程中机器人继续按之前的流程将 2026 年 2 月 15 日之前的邮件识别和处理。

然而机器人 (应该说模型) 认为最高效的清理方案是核弹选项 — 直接清空所有邮件,甚至还规划了持续循环清理直到所有邮件都被清空为止,由于丢失人类确认的指令,机器人完全自主完成邮件清空任务。

发现错误如何中断指令?

对于新产品或者大家还不熟悉的产品最大问题就是可能会出现各种误操作,例如 Summer Yue 发现机器人在清空邮件时已经发送大量指令要求机器人停止操作。

但问题在于,OpenClaw AI 机器人的 run 默认情况下是不会停止的,用户发送的消息也需要排队处理,也就是只有上个任务结束后才能继续处理用户发送的新消息。

在清空邮件过程中 Summer Yue 发送多个指令希望机器人停止操作但无济于事,最终只能跑到 Mac Mini 面前手动杀掉所有进程才让机器人停下来。

针对这种情况用户需要执行的指令其实是 /stop 这个指令可以强制中断机器人正在执行的指令,单纯发送文字消息是没有的用,也就是前面提到的消息排队问题。

事后总结:

Summer Yue 事后发帖自嘲称:说实话这是个新手错误,对齐研究者也不能免疫于不对齐问题,因为在测试有向上跑了几周没出事,就过度自信了。

其他网友看到这个自嘲也是感概,连专业的对齐研究者都会翻车,普通用户如果把真实钱包、邮箱、日历以及其他涉及高度隐私的内容交给 AI 后,风险有多少大?

查看网友评论   返回完整版观看

返回上一页  首页 | cnbeta报时: 19:40:57

文字版  标准版  电脑端

© 2003-2026