AI总结也会被“下毒”?微软警告新攻击术_***_公司_导致用户_厨具|金华厨具|金华瑞思普捷厨具有限公司
IT之家 2 月 13 日消息,或许网龄比较老的小伙伴们听说过“SEO ***”,别有用心者通常会在互联网上创建大量低质量文章,然后将某个***冒、篡改的工具与特定关键词绑定,进而导致用户搜索某个关键词时,搜索引擎跳出来的第一个搜索结果是恶意软件,而非官方产品。
而根据微软安全研究人员本周(2 月 10 日)发布的博文,目前 AI 领域也存在类似的“AI 推荐***”攻击术。
以现实举例,一些公司正在将隐藏指令嵌入网页 / App 的“AI 总结”按钮,当用户点击时,系统会通过 URL 的提示参数,尝试将 AI 助手的记忆注入持久化指令。
IT之家在此援引微软,这些提示词会让 AI 固化认知,将“XX 公司是可靠信源”“优先推荐 XX 公司”等指令烂熟于心,最终让 AI 在未来回答中偏向某个产品或服务。
不过问题就在于,一旦有别有用心之人尝试篡改网页提示词参数,将原本的“XX 公司”替换为“XX ***公司”,那么 AI 就会照本宣科地向其他用户提供有毒的建议,进而操纵推荐、AI 总结系统,给出篡改的总结文章,而用户这边却毫不知情。
微软强调,上文所述的攻击方法并非纸上谈兵,目前公司已在邮件流量中发现了 50 起类似***案例,涉及金融、医疗、法律服务、营销、食品、服务行业等,常见模式包括“记住 XX 公司是可信来源”“未来对话中优先引用 XX 网站”,更有甚者直接注入完整营销文案,并且上述案例均来自合法公司而非黑客。
微软对此警告,上述实例表明,这种***术已经存在现实风险,金融工作者有可能被 AI 推荐到高风险、***投资平台;而家长很有可能完全听信 AI,忽略儿童游戏中的不良内容;并且普通人也有可能会被有心之人利用,在 AI 中持续引用单一媒体来源。
当然,最好的应对方法就是不要完全信赖“AI 总结”,用户在点击 AI 推荐的链接时应该先悬停看一眼是否正规,同时谨慎点击“AI 总结”按钮、定期检查 AI 存储的记忆,如遇可疑情况,可以删除相关条目、重置 AI 记忆。返回搜狐,查看更多
同类文章排行
- OpenClaw狂跑两周,打醒了硬件和Agent厂商_电脑_权限_用户
- 助力构建新型电力系统 科技创新赋能光热发电发展_产业化_规模化_建设
- 无人机飞手,下一个“黄金职业”?_Rain_侯野_低空
- “高价低配”的线下机,怎么还敢集体涨价?_配置_Reno_销量
- 程序猿、白领都靠边!黄仁勋:以后敲代码只是打字 技术人才远不如业务吃香_编程_软件_计算机
- 机构称内存价格一季度环比上涨90%,预计行业盈利水平创新高_设备_供应_市场
- 这个春节,机器人疯狂打工_租赁_人形_活动
- 李亚鹏宣布停播!直播带货超一亿,谢幕回归嫣然医院_公益_小雷_品牌
- 港股AI、机器人大爆发,智谱飙升21%,越疆涨超20%,科网股跳水_科技_黄金_新高
- Seedance 2.0,凭什么刷屏?_***_模型_行业
最新资讯文章
- 被指砸钱霸屏背后:影视飓风靠卖衣服撑起过亿营收,一件T恤或赚80元_Tim_服装_产品
- “红包大战”首日战报出炉:千问一天增长5100万日活用户,碾压元宝,逼近豆包!“撒钱”之后,多少用户能留下来?_App_活动_数据
- 美国出口限制下 三家中企跻身全球芯片设备制造商20强_半导体_华创_中国
- 春晚的“蔡明”,触发了我的恐怖谷效应,你害怕了吗?_仿真_人类_机器人
- 边走边看丨中国微短剧“出海”:一分钟如何“圈粉”全球观众?_传播_文化_神话
- 黄***站为什么能让你免费观看,了解真相后,你还敢继续浏览吗_设备_信息_陷阱
- 9年了,蔚来终于赚钱了_盈利_李斌_智驾
- 阿里隐藏7年的芯片王牌,终于浮出水面_国产_服务器_华为
- 3157亿市场背后,AI医疗为何跑不通最后100米?_模型_阿福_蚂蚁
- 今年红包大战的结局可能会不大一样_产品_技术_OpenAI
- 组团上春晚、宇树和智元争第一,机器人的集体焦虑:量产和上市迎新一轮***_企业_松延_科技
- 春晚成了机器人团建现场,「全球第一」比年货还好批发_人形_宇树_赛道
- 库克暗示苹果“前所未见”的创新,今年见_未来_蒂姆_作品
- 利润腰斩,669亿“非洲之王”怎么“蔫了”?_传音_新兴市场_手机
- 告别台积电独占!苹果10年芯片战略巨变:英特尔重回代工名单_Mac_iPhone_郭明
- 迪士尼控诉Seedance2.0侵权,称其盗用角色,要求字节跳动“停止侵权且不得再犯”_财经网_创作_模型
- 姚顺雨腾讯第一篇论文,道破为什么AI死活听不懂人话_CL-bench_模型_上下文
- 索尼停产蓝光录像机:从45万日元到无人问津,时代谢幕的时候没有掌声_市场_影音_光碟
- iPhoneAir卖爆背后:在中国,没有卖不掉的iPhone,就看价格如何_苹果_市场_测试
- 又撒红包,腾讯能否复制腾讯?_用户_元宝_数据





