大陆短影音平台近期出现大量名为「小海」的AI生成网红,透过哭诉单亲、家境贫困等悲惨身世,让不少长辈心疼落泪,纷纷下单购物帮忙,甚至有79岁老妇信以为真,独自搭火车前往外地探望,上车才知道对方是AI。
环球时报报导,今年5月,新疆乌鲁木齐铁路公安乘警巡视车厢时,发现一名79岁老人独自搭车远行,神情焦急。经询问后才得知,老人不识字,也说不清楚具体目的地,只知道要前往山西运城「走亲戚」,探望一名天天在手机里喊她「姨妈」的苦命孩子。
在乘警耐心劝说及协助联系下,老人最终下车,搭乘家人事先购买的返程车票回家。
央视新闻用户端报导,这些让老人们牵肠挂肚的「贴心晚辈」,实际上根本不存在,全是由AI合成的「数字人」。
这些由AI生成的十几岁男孩形象,无一例外都在上演着「懂事、窘迫、心疼长辈」的苦情剧本。在一些视频里,「小海」眼含热泪,对着镜头展示手里的馒头:「姨姨妈妈,我是小海,同学们都去吃饭了,我躲在教室里面吃馒头。姨姨妈妈,我有好好吃馒头,我还买了个肉包是给姨姨、妈妈的,小海想把好吃的给姨姨妈妈们……」
而在另一段带货片里,「小海」摇身一变,又成了最懂老人心的「贴心晚辈」,开始推荐阿胶。
北京航空航天大学法学院副教授赵精武指出,透过数字人卖惨带货,与真人卖惨带货在法律定性上并无本质差异。如果业者恶意编造故事、利用虚假情节博取同情并推销商品,就可能涉嫌构成欺诈。
赵精武也强调,即使视频标注「AI生成」,也不能因此认定受骗的老年人应自行承担责任。这类标示仅代表视频使用AI工具制作,并不代表内容没有误导性。如果操作者刻意针对老年人情感需求,利用虚构身世博取同情,仍可能涉及恶意误导。至于整条产业链,帐号或直播间的营运者是第一责任人。
