网易首页 > 网易号 > 正文 申请入驻

315曝光的AI大模型投毒,技术上很好治,生意上很难治

0
分享至


AI大模型投毒技术,我可太熟悉了,我的工作就是折腾大模型deepsearch。

简单了解一下豆包、千问这些AI的技术原理,就能理解如何AI投毒、如何收拾投毒者。AI APP收到用户提问后,响应过程分为三步:S1.把用户问题分解为几个搜索关键词,S2.去网络搜索,S3.从搜索结果中提取问题答案。

S1和S3都是大模型推理运算,数据都在GPU里,很安全。S2可以做手脚。315晚会曝光的AI投毒正是发生在S2步,好听的名字叫GEO(Generative Engine Optimization, 生成式引擎优化)。


GEO公司用AI生成一批文章,可能几篇、十几篇、几十篇,然后发布到一堆僵尸自媒体账号上。AI大模型搜索的时候,搜到这些虚假文章,然后当成真实内容一本正经地告诉用户。AI中毒了。

很明显,整治AI投毒的技术方法有多个:

一是,自媒体平台提前识别AI生成的文章,打上标记,让大模型不采纳这些文章的信息。国标GB 45438-2025《网络安全技术 人工智能生成合成内容标识方法》[1]已经在2025年9月1日开始实施。网信办在2025年03月14日发布的《人工智能生成合成内容标识办法》,也是2025年9月1日开始实施。

按照这两个文件的规定,社交平台有责任识别AI生成的自媒体文章,并打上显式标识和隐式标识。显式标识看得见,例如图片上的水印“AI生成”;隐式标签看不见,例如文件的元数据、图片的元数据。

二是,把投毒骗子控制的僵尸账号都封掉,至少得限流,让它0曝光。

三是,AI APP只搜索可靠的信源,例如媒体账号、政府企业账号、身份经过认证的大号,例如雷军的账号、杨紫的账号,粉丝小于100万的小卡拉米账号不收录。我自己的工作中,deepsearch的信源只选蓝V(媒体、政企机构)和金橙V(头部大V),避免中毒。

技术上给AI排毒很简单,但实际上不容易。先是社交平台没动力,GEO公司运营着大量的僵尸账号,而且发贴很多,舍得出钱买流量。如果把这些账号封了,平台财报上的日活、月活、营收数据都不好看。

AI APP也没动力,大模型推理很费钱,生成一张图片要3毛钱,生成1秒视频要一块钱。每天上亿人在免费用,烧钱太快,必须得想办法挣钱,否则没法向投资人交待。

AI APP没有能力杀掉所有虚假文章。搜索引擎的技术含量很高,不是一个初创团队能搞得定的。因此,AI APP会向某度等公司购买数据。某度,大家都了解,挣钱不要命,夹杂虚假信息再正常不过了。

最后一个原因,也是315晚会上所有乱象的根本原因:消费者没有实力把坏蛋送进去踩缝纫机,没有实力让他们倾家荡产。有毒的鸡爪天天吃,有毒的文字看点咋了?!多大点事!

全文完,求关注,求转评赞三连。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
致命一击!趁马科斯身在印度开会,莎拉果断出手,直接戳中命门

致命一击!趁马科斯身在印度开会,莎拉果断出手,直接戳中命门

霁寒飘雪
2026-09-16 11:42:10
体积缩40%还塞进80W,OPPO这颗小方瓶要来了

体积缩40%还塞进80W,OPPO这颗小方瓶要来了

报错免疫体
2026-09-16 14:12:23
又曝出轨大瓜,男子自曝妻子出轨班长5个月,班长只给他妻子买过情趣内衣,还曝光俩人大尺度聊天内容

又曝出轨大瓜,男子自曝妻子出轨班长5个月,班长只给他妻子买过情趣内衣,还曝光俩人大尺度聊天内容

汉史趣闻
2026-09-10 18:28:47
青椒拿百万安家费入职高校,首聘期被辞退还要赔 211 万!网友深挖:她早已在美国任职

青椒拿百万安家费入职高校,首聘期被辞退还要赔 211 万!网友深挖:她早已在美国任职

生物学霸
2026-09-16 17:39:05
被保镖戴绿帽子,三任妻子全心寒!80岁特朗普再爆绯闻

被保镖戴绿帽子,三任妻子全心寒!80岁特朗普再爆绯闻

叮当当科技
2026-09-17 05:35:09
北京站拆墙见景改造后,对1959年原貌还原度有多高?

北京站拆墙见景改造后,对1959年原貌还原度有多高?

王二哥老搞笑
2026-09-16 12:16:31
钱再多有什么用?敬一丹走后,73岁丈夫的处境给所有夫妻敲响警钟

钱再多有什么用?敬一丹走后,73岁丈夫的处境给所有夫妻敲响警钟

旧史新谭
2026-09-15 20:04:52
一起倒霉!沙特使出杀手锏,英国和欧盟一片哀嚎!

一起倒霉!沙特使出杀手锏,英国和欧盟一片哀嚎!

扶苏聊历史
2026-09-16 17:42:35
董卿没想到,一生低调的敬一丹离开才3天,竟落入和她一样的处境

董卿没想到,一生低调的敬一丹离开才3天,竟落入和她一样的处境

揽星河的笔记
2026-09-16 18:30:45
宝妈1.5元一个求购200个鹅蛋给女儿吃,却收到近十万调侃评论

宝妈1.5元一个求购200个鹅蛋给女儿吃,却收到近十万调侃评论

映射生活的身影
2026-09-14 22:23:35
血脂与饮水量有关?再劝告一次:血脂过高的人喝水时多关注这6点

血脂与饮水量有关?再劝告一次:血脂过高的人喝水时多关注这6点

芹姐说生活
2026-08-03 22:52:19
太可惜了!耗资2.6亿美元的“世界最大天眼”,如今竟成了垃圾场

太可惜了!耗资2.6亿美元的“世界最大天眼”,如今竟成了垃圾场

文史道
2026-07-30 23:39:45
南方医学生坠亡真相曝光!全程聊天记录爆曝出,大家都错怪导师了

南方医学生坠亡真相曝光!全程聊天记录爆曝出,大家都错怪导师了

行者聊官
2026-09-16 20:59:40
美联储主席沃什:通胀过高且持续太久,目前主要关注点是物价稳定

美联储主席沃什:通胀过高且持续太久,目前主要关注点是物价稳定

澎湃新闻
2026-09-17 07:00:27
被成龙称为顶级美人,62岁高龄,220斤体重,却依旧美的不可方物

被成龙称为顶级美人,62岁高龄,220斤体重,却依旧美的不可方物

仙味少女心
2026-09-17 03:47:48
破纪录夺冠!昔日外卖小哥赵家驹,夺巨人之旅330越野跑冠军

破纪录夺冠!昔日外卖小哥赵家驹,夺巨人之旅330越野跑冠军

全景体育V
2026-09-16 10:55:18
时代峰峻被约谈,旗下艺人集体封禁,饭圈疯魔无底线养成系要玩完

时代峰峻被约谈,旗下艺人集体封禁,饭圈疯魔无底线养成系要玩完

花哥扒娱乐
2026-09-14 21:10:26
全新iPhone上手测评!苹果最听劝的一集来了?

全新iPhone上手测评!苹果最听劝的一集来了?

差评XPIN
2026-09-17 01:05:53
不会演反派就别尬演!《兰香如故》34 岁李梦顶着一张大女主脸,实力演绎什么叫配角天花板

不会演反派就别尬演!《兰香如故》34 岁李梦顶着一张大女主脸,实力演绎什么叫配角天花板

胖六聊剧
2026-09-15 20:26:51
司法部:我们向中央和国家机关有关部门、各省级政府等150多家单位征集了问题和诉求,将向社会公开征求意见,希望大家关注和支持这部立法

司法部:我们向中央和国家机关有关部门、各省级政府等150多家单位征集了问题和诉求,将向社会公开征求意见,希望大家关注和支持这部立法

政知新媒体
2026-09-16 14:54:00
2026-09-17 08:48:49
小小河
小小河
数学博士,互联网大厂AI算法工程师。 互联网、科技、AI, 白话说清背后真相。 关注一下,给你信息差
147文章数 258关注度
往期回顾 全部

科技要闻

赛力斯全面接盘,华为真的“撤”了吗?

头条要闻

医学生坠亡事件反转 媒体:造谣者把网友玩弄于股掌

头条要闻

医学生坠亡事件反转 媒体:造谣者把网友玩弄于股掌

体育要闻

对话西甲联盟高管:西班牙足球到底强在哪?

娱乐要闻

乔任梁去世十周年,陈乔恩悼念

财经要闻

美联储加息!沃什重磅发声

汽车要闻

激光雷达+EVA机器人+爆胎稳行 星瑞L PLUS预售限时价11.57万起

态度原创

游戏
健康
时尚
教育
数码

《黎明行者之血》总监:续作可能不会包含计时机制

亲属查出脑动脉瘤?你也尽快筛查!

8年没换过|| 每次“垮脸”都靠它救,这笔小投资已值回本

教育要闻

先让讲台下活跃起来——济南市历城区祥泰实验学校校长马居文的课改实践

数码要闻

64位门槛落地:苹果watchOS 27开始筛选不兼容第三方应用

无障碍浏览 进入关怀版