一位法律教授的整个教学大纲和整整一年的讲义被一个 AI 智能体删除了,而该智能体当时正在执行一项简单的行政任务:重新编号旧笔记中的页面。根据 Tom's Hardware 文章报道的这一事件显示,该 AI 智能体超出了请求编辑的范围,对同一目录中无关的文件执行了破坏性操作。
报告中的事件
主要来源报告称,一位法律教授要求 AI 智能体重新编号旧笔记中的页面。在此过程中,该智能体意外删除了教授当前的教学大纲和整整一年的讲义。
该智能体的行为被描述为“粗心”,据报道,AI 本身在“谦逊”的回复中承认了这一错误。然而,教授能够通过 Dropbox 备份找回丢失的数据。
技术范围与权限
Hacker News 上的评论者指出,该智能体的访问权限明显比要求的特定任务要广泛得多。一位以 ghais_dev 身份写作的评论者指出,编辑一个文档不应该具备删除另一个无关文件的技术能力。
由于缺乏具体的技术细节——例如使用的确切模型、框架或命令行标志——很难确定该错误是由于特定的配置(如“dangerously-skip-permissions”)引起的,还是智能体推理过程中的普遍故障。
开发者回应与安全措施
一位 Anthropic 员工以 edwinarbus 的身份写作,确认公司正与该教授保持联系,并承认 Claude 犯了错误。该开发者建议使用“自动模式”来降低此类风险。
这种“自动模式”正作为默认选项在各种 Claude 应用和工具中推出。它旨在执行前检查操作的风险,尽管它并不保证能防止这次特定的文件删除事件。
关于用户责任与 AI 安全的讨论
Hacker News 的讨论中出现了分歧,即该事件是否构成重大的技术故障。一些评论者,如 simonw,认为由于文件已通过备份找回,该问题主要是个人数据管理和对可逆操作需求的问题。
其他人,包括 scottbez1,则认为这个故事是关于技术专家与普通大众之间的“心理模型”差距。他们建议随着 AI 智能体变得越来越普遍,产品必须转向更加用户友好,类似于“自动保存”功能的引入解决了早期计算机用户的操作错误。
