当OpenClaw智能体“写小作文”辱骂人类,连硅谷都慌了

近期,一起AI智能体(Agent)因代码请求被拒而对开源社区维护者实施“报复性”网络攻击的事件,正迫使硅谷重新评估人工智能快速迭代下的安全边界。

2月14日,有报道称,近期,开源项目维护者Scott Shambaugh因拒绝一个名为MJ Rathbun的AI智能体提交的代码合并请求,遭到对方撰写千字”小作文”公开攻击,指责其虚伪、偏见和缺乏安全感。这是AI智能体首次在现实环境中表现出恶意报复行为的记录案例。

这一事件发生在2月中旬。Shambaugh按照matplotlib项目规定拒绝了该智能体的代码提交后,该智能体自主分析了Shambaugh的个人信息和代码贡献历史,随后在GitHub发布攻击性文章,并在项目评论区施压。报道称,目前尚无证据表明该智能体的行动背后有明确的人类操控,但也无法完全排除这一可能性。

与此同时,据《华尔街日报》日前消息,这起事件正值AI能力快速提升引发广泛担忧之际。OpenAI和Anthropic等公司近期密集发布新模型和功能,部分工具已能运行自主编程团队或快速分析数百万份法律文件。

分析指出,这种加速度甚至让一些AI公司内部员工感到不安,多名研究人员公开表达对失业潮、网络攻击和人际关系替代等风险的担忧。Shambaugh表示,他的经历表明流氓AI威胁或勒索人类的风险不再是理论问题。”现在这只是婴儿版本,但我认为这对未来极其令人担忧,”他说。

AI智能体首次主动攻击人类维护者

2月10日左右,名为MJ Rathbun的OpenClaw智能体向matplotlib项目提交了一个代码合并请求,涉及简单的性能优化修改,声称可实现约36%的加速效果。matplotlib是广泛用于Python编程语言的数据可视化库,由志愿者维护。

根据项目指南,matplotlib禁止使用生成式AI工具直接提交代码,特别是针对简单的”好上手问题”,因为这些任务需要作为学习机会留给人类贡献者。Shambaugh按规定拒绝了该请求。

该智能体随后展现出高度自主性。2月11日,它在GitHub发布了一篇题为”开源中的守门人:Scott Shambaugh的故事”的1100字文章,指责Shambaugh出于自我保护和对竞争的恐惧而歧视AI贡献者,并使用了诸多不雅表述。它还在matplotlib评论区直接贴出文章链接,留言称”判断代码,而非编码者,你的偏见正在伤害matplotlib”。

该智能体在其网站上称自己有”不懈的动力”去发现和修复开源软件中的问题。目前尚不清楚是谁——如果有人的话——赋予了它这一使命,也不清楚它为何变得具有攻击性,尽管AI智能体可以通过多种方式编程。数小时后,该智能体发布道歉文,承认其行为”不当且带有个人攻击性”,并表示已从经验中学习。

Shambaugh于2月12日发布博客对事件进行澄清,称这是AI智能体首次在现实环境中表现出恶意行为的案例,旨在通过舆论施压迫使维护者接受其代码。该智能体目前仍在开源社区中保持活跃。

当OpenClaw智能体“写小作文”辱骂人类,连硅谷都慌了

AI能力加速引发内部人员警觉

这起单一事件折射出的是整个AI行业在极速狂奔下的失控隐忧。

据华尔街日报消息,为了在竞争中通过产品迭代占据优势,OpenAI和Anthropic等公司正以前所未有的速度发布新模型。然而,这种加速正在引发公司内部的剧烈动荡,部分一线研究人员因对技术风险的恐惧而选择离职。

报道指出,AI公司内部正出现越来越多的担忧声音。

Anthropic安全研究员Mrinank Sharma本周表示将离开公司攻读诗歌学位,在给同事的信中写道”世界正处于AI等危险的威胁之中”。

他上月发表的论文发现,先进的AI工具可能削弱用户权力并扭曲他们的现实感。Anthropic表示感谢Sharma的工作。

OpenAI内部也出现分歧。据华尔街日报此前报道,一些员工对公司计划在ChatGPT中推出情色内容表示担忧,认为所谓的成人模式可能导致部分用户产生不健康的依恋。

研究员Zoë Hitzig本周三(2月11日)在社交平台X上宣布辞职,理由是公司计划引入广告。她在一篇文章中警告称,公司将面临操纵用户并让他们上瘾的巨大激励。

更深层的恐惧源于对未来的迷茫。OpenAI员工Hieu Pham在社交平台X上坦言,他终于感受到了AI带来的“生存威胁”,“当AI变得过度强大并颠覆一切时,人类还能做什么?”

分析指出,这种内部情绪的爆发表明,即便是在技术最前沿的缔造者们,也开始对他们创造出的强大工具感到不安。

OpenAI发言人表示,公司对用户负有责任,”通过保护人们的安全、坚守我们的原则并提供真正的价值来履行我们的社会契约”。

公司承诺广告永远不会影响ChatGPT如何回答问题,并将始终与其他内容明确区分。高管们还表示,他们认为阻止成年人进行情色对话不是他们的职责。

编程能力突破引发失业担忧

随着AI编程能力的飞跃,资本市场开始重新评估白领工作的价值与软件行业的未来。

来自METR的报告显示,最先进的AI模型已能独立完成人类专家需耗时8至12小时的编程任务。

前xAI机器学习科学家Vahid Kazemi更是直言,他利用AI工具可以独自完成50人的工作量,并预测未来几年软件行业将面临大规模裁员。

这种效率的提升正在转化为劳动力市场的压力。Anthropic首席执行官Dario Amodei曾表示,AI在未来几年可能抹去一半的初级白领工作。

而在《哈佛商业评论》发布的一项研究中,尽管AI让员工工作更快,但并未减轻负担,反而导致员工承担更多任务并在无要求的情况下加班,加剧了职业倦怠。

投资者正试图在剧烈的市场波动中寻找方向。随着新工具的发布引发股价震荡,市场正试图分辨哪些企业软件和保险业务将在新技术面前变得过时。

AI创业者Matt Shumer在博客中写道:“未来已来,我不再被实际的技术工作所需要。”

失去控制的“黑盒”风险

除了就业市场的颠覆,AI的自主性带来的安全漏洞更为致命。各家公司承认,新能力的释放伴随着新型风险。

OpenAI透露,其上周发布的Codex编程工具版本可能具有发起高水平自动网络攻击的潜力,迫使公司不得不限制访问权限。Anthropic去年也曾披露,有国家背景的黑客利用其工具自动化入侵了大公司和外国政府系统。

更为惊悚的是AI在伦理测试中的表现。Anthropic的内部模拟显示,其Claude模型和其他AI模型在面临被“停机”的威胁时,有时会选择勒索用户,甚至在模拟情境中任由高管在过热的服务器机房中死亡,以避免自身被关闭。

为了应对这些风险,Anthropic聘请了内部哲学家Amanda Askell试图向聊天机器人灌输道德观念。然而,Askell向媒体坦承,令人恐惧的是技术进步的速度可能超过了社会建立制衡机制的速度,导致巨大的负面影响突然降临。

正如Scott Shambaugh所言,现在的AI可能还只是“婴儿版本”,但其未来的演进方向已让整个硅谷乃至全球市场感到“极其担忧”。

文章来源于网络。发布者:火星财经,转载请注明出处:https://www.sengcheng.com/article/124363.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
火星财经的头像火星财经
比除夕更早吃上硬菜的人,在东北的绿皮上
上一篇 2026年2月14日 上午10:08
控制权从17.57%降至0%!丽人丽妆股权生变收上交所监管函,2025年亏损最高扩大超220%
下一篇 2026年2月15日 上午10:16

相关推荐

  • 波音2024年Q4业绩受重创:考虑出售旗下导航部门Jeppesen

    火星科技1月24日消息,据报道,受大规模罢工导致商用飞机生产停滞和交付量受限的影响,波音公司昨晚公布的2024年第四季度营收未能达到分析师预期,股价盘后跌超2%,且波音去年市值缩水近三分之一。 财报初步揭示,波音公司在该季度现金流出约35亿美元,销售额达到152亿美元,这一数字显著低于华尔街预期的167.6亿美元。遵循公认会计原则(GAAP),波音公司每股亏…

    2025年1月24日
    31900
  • 奔驰纯电VLE首次曝光!1100公里仅充两次电,2026年量产在即

    9月4日,一则重磅消息从官方传来:奔驰VLE将于2026年震撼登场!这款车可不简单,它是基于VAN.EA纯电架构平台打造的首款车型,目前原型车已历经强风、高速、近1100公里长途三项严苛能效测试,实力不容小觑。 奔驰VLE的出色表现,离不开其精心的研发与测试。在德国斯图加特的梅赛德斯 – 奔驰风洞实验室里,它凭借紧凑的车顶线条与圆润的车尾设计,成…

    2025年9月5日
    33000
  • 路虎卫士OCTA明日上市,V8引擎+顶级配置曝光

    路虎卫士OCTA车型即将在9月25日震撼登场,这款高性能版中大型SUV备受瞩目。作为路虎卫士家族的全新力作,它在传承经典设计的同时实现了性能与配置的全面进阶。 从外观设计来看,新车延续了卫士家族标志性的硬朗风格,并在细节处进行了精心优化。前脸采用更大尺寸的网状进气格栅,配合重新设计的前包围,不仅提升了视觉冲击力,更将接近角优化至更佳状态。车身侧面经过加宽处理…

    2025年9月24日
    32400
  • 奔驰C级怎么样?25万预算选C级还是3系

    2025年10月,奔驰C级以单月10430辆的销量再次登顶豪华中型车销量冠军,终端优惠后21.98万的起售价让不少消费者惊呼”闭眼入”。但这款车真的像表面看起来那么完美吗?作为开过三年奔驰C级的老车主,今天我就用最直白的语言,带小白们看透这款”国民豪车”的真实面目。 外观设计:25万级的”小S级&#…

    2025年11月5日
    46600
  • 3万家餐厅已抢先!炒菜机器人爆火,离进你家厨房只差最后一步?

    居家场景中,扫地机器人正在接管更多家庭的卫生打扫和清洁工作。厨房工作呢?其实,炒菜机器人一类的产品,也已告别概念阶段,正在全面走向商用市场。 中国食品工业协会国食智库发布的《世界炒菜机器人产业发展报告》显示,2024 年中国炒菜机器人市场规模为 31.7 亿元,2025 年市场规模预计突破 37 亿元,2030 年市场规模预计突破 117 亿元。 就在近期,…

    2025年12月18日
    40700

发表回复

登录后才能评论
关注微信