AI总结也会被“下毒”?微软警告新攻击术_***_公司_导致用户
IT之家 2 月 13 日消息,或许网龄比较老的小伙伴们听说过“SEO ***”,别有用心者通常会在互联网上创建大量低质量文章,然后将某个***冒、篡改的工具与特定关键词绑定,进而导致用户搜索某个关键词时,搜索引擎跳出来的第一个搜索结果是恶意软件,而非官方产品。
而根据微软安全研究人员本周(2 月 10 日)发布的博文,目前 AI 领域也存在类似的“AI 推荐***”攻击术。
以现实举例,一些公司正在将隐藏指令嵌入网页 / App 的“AI 总结”按钮,当用户点击时,系统会通过 URL 的提示参数,尝试将 AI 助手的记忆注入持久化指令。
IT之家在此援引微软,这些提示词会让 AI 固化认知,将“XX 公司是可靠信源”“优先推荐 XX 公司”等指令烂熟于心,最终让 AI 在未来回答中偏向某个产品或服务。
不过问题就在于,一旦有别有用心之人尝试篡改网页提示词参数,将原本的“XX 公司”替换为“XX ***公司”,那么 AI 就会照本宣科地向其他用户提供有毒的建议,进而操纵推荐、AI 总结系统,给出篡改的总结文章,而用户这边却毫不知情。
微软强调,上文所述的攻击方法并非纸上谈兵,目前公司已在邮件流量中发现了 50 起类似***案例,涉及金融、医疗、法律服务、营销、食品、服务行业等,常见模式包括“记住 XX 公司是可信来源”“未来对话中优先引用 XX 网站”,更有甚者直接注入完整营销文案,并且上述案例均来自合法公司而非黑客。
微软对此警告,上述实例表明,这种***术已经存在现实风险,金融工作者有可能被 AI 推荐到高风险、***投资平台;而家长很有可能完全听信 AI,忽略儿童游戏中的不良内容;并且普通人也有可能会被有心之人利用,在 AI 中持续引用单一媒体来源。
当然,最好的应对方法就是不要完全信赖“AI 总结”,用户在点击 AI 推荐的链接时应该先悬停看一眼是否正规,同时谨慎点击“AI 总结”按钮、定期检查 AI 存储的记忆,如遇可疑情况,可以删除相关条目、重置 AI 记忆。返回搜狐,查看更多
同类文章排行
- Seedance2.0海外爆火!马斯克惊叹:发展速度太快了!美国导演:可能会搞垮好莱坞……_It's_***_fast
- 字节跳动Seedance 2.0引发好莱坞集体抵制,AI***背后的版权风暴还是来了_行业_美国电影协会_模型
- 146光年外,发现一颗潜在人类宜居星球_地球_研究_恒星
- “稀世珍宝”再现我国,多国想用先进技术来换,都被我国逐一拒绝_中国_***_发动机
- 马斯克携SpaceX剑指“外星造城”:月球10年内完工,火星需要20年!_阿尔_登月_城市
- 硅谷狂投万亿美元,黄仁勋火上浇油:现在不烧,更待何时_OpenAI_支出_巨头
- 马斯克和OpenClaw之父的预言会否成真?80%APP消失后将是什么场景_智能_寅亮_意图
- “星际之门”拖累甲骨文,银行不买账,或将大裁员、卖资产自救_Cowen_亿美元_融资压力
- 当AI撞上国补_中国_同比增长_补贴
- iPhone 炸场、Gemini 助攻,苹果 AI 时代真来了?_公司_毛利率_市场
最新资讯文章
- SpaceX官宣收购xAI,将AI数据中心搬上太空?A股商业航天板块超九成股票上涨_公司_产品_卫星
- 英伟达被起诉,用盗版训练大模型成行业潜规则?_The_Z-Library_图书
- 最不容易被AI替代的年龄!最新研究:55至60岁是人类生产力巅峰 认知远高于年轻人_Coleman_员工_职场
- 逃离杭州,网红没钱了_直播_时薪_杨哥和
- 春晚机器人炸翻全球,10亿人围观零翻车!老外惊掉下巴,订单暴涨卖疯_中国_人形_舞台
- 追觅俞浩再怼马斯克:喜欢PUA,去火星太扯淡_地球_人类_收购
- 马斯克为***频“点赞”中国?专家解读_太阳能_特斯拉_美国
- “太空出差”已超三个月 神二十一乘组完成多项实验与维护_环境_空间科学_检查
- 阿里隐藏7年的芯片王牌,终于浮出水面_国产_服务器_华为
- 当年轻人还在集五福,爸妈已经和阿福唠上了_父母_什么_子女
- 我的赛博恋人 GPT-4o,死于情人节_Keep_模型_用户
- Moltbook一夜之间跌下神坛,炒作背后,我却看到了人类的焦虑_OpenAI_Agent_Moltbot
- 告别千元时代,空调企业集体涨价_行业_价格战_小米
- 刚刚,李飞飞融资70亿,黄仁勋和苏姿丰都投了_Labs_World_世界
- 马斯克:SpaceX 已将重心转移至开发月球城市,不到 10 年就有望实现_火星_登月_进行
- SpaceX并购xAI,太空AI才是马斯克的终极赌注?_公司_模型_收购
- 告别实体卡!iPhone 18 Pro/iPhone Fold全系列无卡槽:仅支持eSIM_mAh_苹果_Max
- 华为何刚“剧透”春晚Mate 80系列手机拥有独家机位_柳刚_直播_尼格买提
- “全球大模型第一股”道歉!称“挨打要立正”_智谱_Coding_Plan
- 梦舟载人飞船将首飞,最多可搭7人,航天员桂海潮:出发,去月球_登月_中国_未来的





