AI智能体失控,它把Meta安全总监的200多封邮件删了

25次浏览

  AI智能体失控,它把Meta安全总监的200多封邮件删了e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  作者:吕倩e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  一家科技大厂的安全总监,被一款AI Agent产品删除大量邮件,如此戏剧性的事件正在如今的AI行业内发生。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  2月23日,Meta超级智能实验室AI对齐与安全总监Summer Yue(以下简称Yue)发文表示,没有什么比命令OpenClaw“确认后再操作”、然后眼睁睁看它以极快速度删除收件箱这件事更令人崩溃的了。“我根本无法在手机上阻止它,只能像拆炸弹一样冲到我的MacMini前。”e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  OpenClaw作为近几个月内大热的AI Agent产品,吸引大量从业者与开发者上手尝试,Yue也为自己的电子邮箱部署了OpenClaw智能体,用来批量处理邮件。据她介绍,Yue向OpenClaw提出的具体指令为:“也检查一下这个收件箱,并提出你想归档或删除的邮件,在我指示之前不要执行任何操作。”这种方法在测试版收件箱上运行良好,但真实邮箱太大,触发压缩机制,导致OpenClaw丢失了最初的指令。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  Yue上传的沟通记录显示,她多次下达“Do not do that”“Stop dont do anything”“STOP OPENCLAW”等指令,均未能阻止OpenClaw的删除动作,直至最后强制终止进程,而OpenClaw已删掉了200多封邮件。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  Yue的帖子在网络端引发争议,有网友认为该帖纯属博人眼球,因为当真正重要的邮件要被删除时,用户不会去打出复杂的指令,而只会打出“STOP”,同时OpenClaw就会停止。也有网友称,自己使用Claude Sonnet4.5时也遇到此类情况,Agent将GitHub与未提交的文件都搞坏了。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  一位软件行业开发者质疑称:“你是安全与对齐专家,你是故意测试OpenClaw的安全边界还是犯了一个新手错误?”Yue回应称:这确实是新手才会犯的错误。事实证明,即使是AI对齐专家也会犯错。虽然在模拟收件箱里运行顺利,但实际运行完全不同。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  作为OpenClaw创始人,Peter Steinberger也在帖子评论区进行了回复。他称,“我认为你发这个帖子很棒,那些指责你的人很傻。这是很好的学习机会,而且任何人都可能遇到这种情况。”同时,Peter也提出优化方向,包括在未来版本中增加更多表达方式等。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  2月24日下午,Peter发布OpenClaw测试版本,更新重点聚焦于安全性与漏洞修复,并加入一些其他的小功能,包括Kilo提供商(OpenAI兼容的API网关)与Kimi视觉与视频支持。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  安全问题是OpenClaw爆火以来最受质疑的痛点,也是Peter持续投入的方向之一。此前360漏洞研究院分析认为,在OpenClaw的典型个人部署场景下,用户可能会因缺乏相应的安全运维经验,使得其遭遇各类网络攻击的威胁。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  今年2月7日,OpenClaw宣布与全球头部威胁情报平台VirusTotal(现归Google旗下)合作,将安全扫描功能加入OpenClaw的技能市场ClawHub中,使所有发布到ClawHub的技能都采用VirusTotal的威胁情报扫描,为OpenClaw社区提供额外的安全层。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  Peter团队表示,OpenClaw的巨大实用性伴随着巨大的责任。如果操作不当,AI Agent会成为负担。因此,OpenClaw接下来会发布生态系统全面威胁模型、追踪防御工程目标的公共安全路线图、涵盖整个代码库的安全审计详细信息、带有定义SLA(服务等级协议)的正式安全报告流程等。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

  Peter此前在采访中表示,要打造易用的AI智能体,需要更广泛的改变,需要更深入地思考如何安全地去做,也需要接触最前沿的模型与研究成果。安全问题会被他置于模型易用性之前。e0Z速刷资讯——探索最新科技、每天知道多一点SUSHUAPOS.COM

本文链接:http://m.sushuapos.com/show-2-15395-0.htmlAI智能体失控,它把Meta安全总监的200多封邮件删了

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

热门文章

延伸阅读

相关阅读

2025日内瓦车展:计划2025年2月17日开幕
当地时间3月4日,日内瓦车展主办方官方宣布,2025年日内瓦车展计划于2025年2月举办,日期为2025年2月17日至23日,主办方称2024年日内瓦国际车展是成功和充满希望的新起点。  2024年日内瓦车展是自2019年停办以来的重要
零跑汽车朱江明:零跑国际高管团队现已到位
近日,零跑与Stellantis合资公司的最新进展曝光,零跑汽车创始人、董事长、CEO朱江明在社交平台发布动态:“零跑国际以最快的速度建立了高管团队,个个是行业的精英,零跑的海外业务一定超越大家的期待!”。  作为回顾,在2
宁德时代曾毓群:电池企业出海要有序竞争
近日,在2024年两会期间,全国政协委员、宁德时代新能源科技股份有限公司董事长曾毓群,针对新能源产业的发展,聚焦重卡电动化、电池与电网双向融合互动(B2G)、工业固废全生命周期管理等热点话题提交了四份提案。  2023
(两会观察)一路疾驰的中国新能源汽车如何“过弯”?
  (两会观察)一路疾驰的中国新能源汽车如何“过弯”?  中新社北京3月5日电 题:一路疾驰的中国新能源汽车如何“过弯”?  作者 李腾飞 苏碧滢 徐雪莹  中国新能源汽车产销量占全球比重超过60%――政府工作报告里
聚焦两会丨专访全国人大代表、温州医科大学校长李校堃:提升老龄化社会生活质量,支持康复医学设一级学科
21世纪经济报道记者柳宁馨,实习生徐翌轩 北京报道今年的全国两会,养老和健康依然是热门话题。3月5日,国务院总理李强作政府工作报告,其中提到加强健康、养老等民生科技研发应用,深入开展
预计将于年内发布 雷诺4 E-Tech测试谍照
近日,海外媒体曝光了一组雷诺4 E-Tech的谍照,该车的定位是一款纯电动小型SUV,未来的竞争对手锁定为菲亚特600e,有望于年内发布。  外观来看,车头采用了比较方正的设计,大灯组采用了方框伪装,不过仔细看内部采用了经典

热点精选

最新推荐

您可能感兴趣