AI总结也会被“下毒”?微软警告新攻击术_***_公司_导致用户
IT之家 2 月 13 日消息,或许网龄比较老的小伙伴们听说过“SEO ***”,别有用心者通常会在互联网上创建大量低质量文章,然后将某个***冒、篡改的工具与特定关键词绑定,进而导致用户搜索某个关键词时,搜索引擎跳出来的第一个搜索结果是恶意软件,而非官方产品。
而根据微软安全研究人员本周(2 月 10 日)发布的博文,目前 AI 领域也存在类似的“AI 推荐***”攻击术。
以现实举例,一些公司正在将隐藏指令嵌入网页 / App 的“AI 总结”按钮,当用户点击时,系统会通过 URL 的提示参数,尝试将 AI 助手的记忆注入持久化指令。
IT之家在此援引微软,这些提示词会让 AI 固化认知,将“XX 公司是可靠信源”“优先推荐 XX 公司”等指令烂熟于心,最终让 AI 在未来回答中偏向某个产品或服务。
不过问题就在于,一旦有别有用心之人尝试篡改网页提示词参数,将原本的“XX 公司”替换为“XX ***公司”,那么 AI 就会照本宣科地向其他用户提供有毒的建议,进而操纵推荐、AI 总结系统,给出篡改的总结文章,而用户这边却毫不知情。
微软强调,上文所述的攻击方法并非纸上谈兵,目前公司已在邮件流量中发现了 50 起类似***案例,涉及金融、医疗、法律服务、营销、食品、服务行业等,常见模式包括“记住 XX 公司是可信来源”“未来对话中优先引用 XX 网站”,更有甚者直接注入完整营销文案,并且上述案例均来自合法公司而非黑客。
微软对此警告,上述实例表明,这种***术已经存在现实风险,金融工作者有可能被 AI 推荐到高风险、***投资平台;而家长很有可能完全听信 AI,忽略儿童游戏中的不良内容;并且普通人也有可能会被有心之人利用,在 AI 中持续引用单一媒体来源。
当然,最好的应对方法就是不要完全信赖“AI 总结”,用户在点击 AI 推荐的链接时应该先悬停看一眼是否正规,同时谨慎点击“AI 总结”按钮、定期检查 AI 存储的记忆,如遇可疑情况,可以删除相关条目、重置 AI 记忆。返回搜狐,查看更多
同类文章排行
- 贾樟柯跨界联手Seedance 2.0 发布AI贺岁短片《贾科长Dance》_技术_创作_电影
- 日活破亿!张一鸣又赌对了:字节迎来第五个爆款APP_红果_***_***
- 巴菲特“收山之作”:Q4再抛苹果美银,猛砍亚马逊,首次新进纽约时报_伯克希尔_四季_持股
- 离谱!10元就能代点“千问奶茶”?网友吵翻:到底谁薅谁_活动_连小雷_平台
- “红包大战”首日战报出炉:千问一天增长5100万日活用户,碾压元宝,逼近豆包!“撒钱”之后,多少用户能留下来?_App_活动_数据
- 马年第一涨,AI股杀疯了_智谱_MiniMax_上市
- 春晚的“蔡明”,触发了我的恐怖谷效应,你害怕了吗?_仿真_人类_机器人
- 贾跃亭转战机器人蹭热度,希望不要再有中国人被骗_美国_产品_公司
- OpenAI 再不上市,财务窟窿就要把巨头们拖垮了_用户_预测_ChatGPT
- iPhone降价,破纪录了_Air_苹果_手机
最新资讯文章
- 我把Agent拉进群聊,它竟然开始带队干活?全球首个AI社交通用平台来了!_亲朋好友_***_需求
- 组团上春晚、宇树和智元争第一,机器人的集体焦虑:量产和上市迎新一轮***_企业_松延_科技
- 苹果iPhone 18 Pro/Max最新曝光,不太妙_古尔曼_机型_芯片
- 我国科学家世界首次发现帕金森病底层功能网络机制:临床两周有效率 55.5%,国产设备已获批_昌平_治疗
- 涉未成年人举报专区 - *
- 白银跌倒,光伏能否吃饱?_凯文·沃什_黄金者_市场恐慌
- 阿里隐藏7年的芯片王牌,终于浮出水面_国产_服务器_华为
- 马斯克大动作!SpaceX申请部署100万颗卫星!重磅数据,首次曝光_公司_人士_特斯拉
- 春节祈福的年轻人,把AI财神送上热搜_数字_员工_智能
- 无人机“最严”新规发布,市场影响几何?_监管_审批_财经
- 国产功率半导体厂商,上桌_士兰微_华润微_器件
- 2025年AI期末考试,谷歌又考了全年级第一_搜索_Gemini_业务
- 台积电年终分红人均58万元!还晋升了8位副总!_公司_产能_酬劳
- 曾经连一克粉末都求不来,如今全球巨头都要看中国石嘴山市_电子工业_戈壁滩_西方
- 办公三巨头“硬碰硬”,卷死的是打工人?_硬件_软件_飞书
- 春晚机器人,谁赢麻了?_松延_MagicBot_操作
- 为什么雷军的直播总是争议不断?_小米_汽车_保值
- 雷军晒自驾小米SU7漂移*** 网友评论亮了_全系_新内饰_满配
- 京东春节要发超13亿元给一线员工!通过加班费、过大年红包、子女团聚补贴等形式_***_物流_保障
- 印度AI峰会尴尬一幕:两大AI巨头拒绝握手_OpenAI_山姆·奥尔特曼_达里奥·阿莫迪





