
短片平台出现全红婵的声音,搭配推销土鸡蛋的画面,引诱粉丝点击购物链接。(短片截图)

【明报专讯】中国顶流体育明星近日被发现纷纷直播带货卖土鸡蛋,吸引粉丝抢购。不过央视前日报道,无论是跳水巨星全红婵、乒乓「莎头组合」(孙颖莎和王楚钦)这些直播推销农产品的奥运冠军,还是知名演员在直播间与粉丝24小时互动,都是经人工智能(AI)处理的复制声音扮演。专家指普通消费者难以辨别,平台应强制检测。
「大家好,我是你们的婵宝,今天有事请大家帮忙。婵妹就想著帮助妈妈,让家里的生活过得更好一点,同时把老家的土鸡蛋分享给粉丝们尝尝……」「奥运冠军全红婵」近日在直播中如是说。
抖音帐号「我是小助理魽v发布17条片段,均利用AI仿冒全红婵声音卖土鸡蛋,其中一条短片内置商品连结显示已售4.7万件。网名为「小兔真可爱」的帐号中,仿冒奥运乒乓冠军孙颖莎和王楚钦的AI复制声音,亦是卖土鸡蛋。评论区显示,大量粉丝误以为带货的是奥运冠军本人,纷下单购买链接中的鸡蛋。目前两个帐号已无法搜索。
10秒复制声音 国乒「莎头组合」中招
央视指出,以成熟的语音大模型技术,仅需10几秒就能复制任何人声音。AI仿冒名人乱象不止带货,部分自媒体博主复制名人声音做24小时语音直播,其中演员靳东被仿冒最多,背后隐藏灰色产业链。
网络安全专家潘季明表示,基于开源语音大模型,只要一段清晰语音样本即可复制声音,操纵其说出任何内容。仿冒名人直播可诱骗粉丝打赏获利,还能令新帐号快速获得上万粉丝,为日后牟利铺路。
专家倡平台强检 要求标识AI内容
有内地AI专家对本报表示,目前阶段靠用户自己识别AI仿真人和声音已十分困难,随著技术发展,未来仿真技术将更难通过肉眼甄别,未见终极解决方案。
专家表示,已有专人在做AI鉴伪研究,取得较大进展。
他同时呼吁平台强制检测,强制标识AI生成内容。
国家网信办等4部门联手发布的《人工智能生成合成内容标识办法》自下月1日实施。当中规定AI生成合成内容应对文本、音频、图片、视频、虚拟场景等生成合成内容添加显式标识,在提供生成合成内容下载、复制、导出等功能时,应确保文件含有满足要求的显式标识;应在生成合成内容的文件元数据中添加隐式标识。