AI造假直播带货的乱象频发,终于迎来官方重拳整治。
从央视主持人、影视演员,到奥运健儿、政界人士,一众公众人物无端被盗用肖像声音,沦为骗子的赚钱工具。
在此前大陆之行收获大量民众好感、全网热度攀升之际,山西大同网民邢某动了歪心思。
5月7日,公安部网安局正式通报该案,明确邢某行为属于冒用他人身份招摇撞骗,依法处以行政拘留。
官方利落的处置结果,收获网友一致好评,可这起事件暴露的隐患,却让人细思极恐。
当下低廉便捷的AI制作工具,降低了造假门槛,普通人只需简单操作,就能复刻高清人像、模拟人声。
不法分子专门瞄准自带流量、口碑正向的公众人物,不用本人出镜,无需沟通授权,就能批量制作虚假直播内容。
娱乐圈、体育圈、主持界、政界,没有任何圈层能够避开这场AI盗用风波。
央视主持人李梓萌曾遭遇恶劣造假,骗子合成她的直播画面,谎称深海鱼油可以医治多种身体不适。
造假直播间刻意打造央视演播厅背景,借用官方公信力背书,短短时间内销量暴涨,数十万网友盲目下单。
有老年消费者连续服用半个月产品,才发现这款吹嘘成神药的物品,本质只是普通糖果。
市场监管部门核查时发现,合成画面存在口型错位、光影僵硬、面部乱码等漏洞,由此判定为AI克隆造假。
彼时李梓萌正忙于节目筹备,从未涉足直播带货,无端背负虚假营销的负面争议。
演员温峥嵘的遭遇更是无奈,平台内同时出现四个冒用她形象的账号。
这些高仿账号分时段直播,有的闲聊互动,有的护肤带货,甚至凌晨时段也会不间断开播。
她本人亲自进入造假直播间质问,反倒被账号运营者拉黑,团队单日最高举报五十个假冒账号,却难以遏制造假泛滥。
奥运冠军全红婵、孙颖莎,艺人迪丽热巴、杨紫等人,也都先后沦为AI造假的受害者。
有人伪造全红婵推荐土鸡蛋的视频,印制虚假肖像包装售卖产品,售出四万余件;有人将迪丽热巴、杨紫人像合成低俗短剧,无端损耗艺人口碑。
梳理多起AI造假案件不难发现,不法分子的目标,始终锁定辨别能力较弱的中老年群体。
2022年曝光的假靳东诈骗案,是早期AI换脸行骗的典型案例。
诈骗团伙合成靳东视频,温柔话术亲近年长女性,以恋爱、投资为由诱导转账。
江西一名阿姨险些贷款两百万进行投资,好在银行工作人员及时拦截,才避免巨额损失。
上海另一名老年女性没能躲过骗局,被诈骗分子骗取近二十万养老积蓄。
即便涉事八人在2023年被依法判刑,也没能彻底遏制同类诈骗模式扩散。
2023至2025年期间,假冒靳东的AI视频批量产出,用于带货、荐股、售卖保健品。
公开统计的受害者就有23人,累计损失金额突破四百万,中老年群体成为重灾区。
骗子的造假流程有着固定套路,操作简单却极具迷惑性。
首先收集公众人物公开影像资料,依靠算法完成人像、声音、表情的复刻。
随后更换直播背景、搭配营销话术,打造贴合人设的虚假直播场景。
最后借助平台算法,定向推送给年龄偏大、网络认知薄弱的用户,完成精准收割。
年轻人能够轻易察觉的破绽,在中老年眼中几乎可以忽略不计。
AI合成人像虽高度仿真,却存在眼神空洞、表情僵硬的通病,侧脸还会出现边缘重影。
合成人声缺乏情绪起伏,大多生硬呆板,时常出现人声与口型无法匹配的情况。
除此之外,头发衔接违和、衣物纹路扭曲、直播动作单一,都是AI视频的常见漏洞。
可多数老年人只关注人物面孔,不会细致甄别画面细节,很容易轻信虚假背书。
加上骗子刻意绑定央视、官方机构等权威标签,进一步降低大众的防备心理。
频繁爆发的AI侵权诈骗案件,推动监管部门、网络平台加快整改步伐。
去年10月起,短视频平台开展专项整治行动,累计处罚一万一千余个虚假达人账号。
同时下架六千七百多件AI仿冒产品,从源头管控虚假带货乱象。
相关法律法规也在不断完善,明确深度合成内容必须标注AI生成标识。
未主动标注、隐瞒合成属性的直播内容,一律判定为违规行为。
曾有企业利用AI复刻教授声音推广书籍,因未标注合成信息,被处以十二万元罚款并公开致歉。
这一处罚案例,也为同类造假商家敲响法律警钟。
平台相关负责人公开表态,会配合监管部门持续开展治理工作,优化AI识别技术。
目前各大直播平台强制要求主播实名登记,升级系统算法,自动筛查合成虚假内容。
即便整治力度不断加大,行业现存短板依旧无法忽视。
低廉的AI制作工具随处可得,造假成本极低,普通人几十元就能完成人像合成。
不法分子单次造假牟利金额,远超违法处罚成本,高额利润驱动之下,违规行为屡禁不止。
被侵权的公众人物维权流程繁琐,即便胜诉,获得的赔偿金额也远不及骗子非法收益。
温峥嵘团队长期批量发送律师函,持续举报假冒账号,却始终无法根除造假源头。
靳东连续两年在全国两会发声,呼吁完善法律条款,压实平台监管责任。
他亲眼见证大量老年粉丝受骗,深知AI造假带来的伤害,远比普通肖像侵权更为严重。
普通民众想要规避骗局,只能依靠自我甄别,守住消费和转账底线。
非蓝V认证的名人小号、话术夸张的带货直播、私下私聊的转账邀约,都要果断规避。
AI技术本身没有善恶属性,只是使用人群的选择,赋予了它不同的价值。
从公众人物无辜躺枪,到普通百姓财产受损,AI造假乱象暴露的是人性的贪婪。
官方的接连出手,能短期压制违规行为,却无法彻底根除灰色产业链。
在技术尚未完全规范化的当下,保持理性防备,守住不轻信、不转账的底线,便是最简单的自保方式。
热门跟贴