问题—— 随着智能生成、深度合成等技术门槛降低,部分账号通过批量生成“暧昧互动”“魅惑舞蹈”“暴露度假照”等画面与文案,打着“剧情”“写真”“生活分享”等旗号发布擦边内容,甚至以虚构人设诱导用户跳转至站外平台,形成“内容引流—群聊导流—外链下载”的灰黑产业路径;抖音方面表示,上述行为违反平台社区规范与涉及的治理要求,已被纳入重点打击范围。 原因—— 一是流量利益驱动明显。擦边内容具备刺激性强、传播速度快等特征,容易短时间内获取关注并变现,吸引部分用户铤而走险。二是技术被滥用带来新变量。深度合成可以低成本、规模化“生产”虚拟人物与场景,使违规内容呈现“批量化、模板化、隐蔽化”特点,增加识别与溯源难度。三是黑产链条借平台规则缝隙实施“软引流”。一些账号通过签名、头像提示语、收藏页暗示等方式规避直接外链审查,实际为站外色情网站或应用导流,危害更具组织性、隐蔽性。 影响—— 此类内容不仅扰乱平台内容秩序,污染网络环境,也容易对未成年人价值观与网络安全造成冲击。同时,虚构身份与诱导跳转往往伴随诈骗、隐私泄露、恶意软件传播等风险,可能引发更广泛的网络安全隐患。对平台而言,若任由低俗内容滋生,将损害内容生态与用户信任,进而影响行业健康发展。 对策—— 抖音公告称,今年以来,平台围绕“深度合成”色情低俗违规已累计处置相关内容4.2万条,对1.4万个账号依据情节轻重采取限制推荐、禁言、封禁等梯度措施,并对部分账号回收直播权限,持续强化对“封面诱导”“收藏页引流”等变体手法的治理。 公告还披露多起典型案例:其一,平台巡查发现有账号利用深度合成图片塑造“单亲妈妈陪读”等虚假人设,配以性暗示文案发布擦边内容,诱导用户关注后再通过账号签名、群聊等方式引导跳转至第三方平台下载色情低俗应用。平台在清理内容、封禁账号的同时,将线索上报公安机关,最终涉案黑产团伙4人被依法刑事拘留。其二,部分用户将直播间封面设置为深度合成“美女”图片,并在头像或画面中标注“看我收藏”等提示,引导观众进入主页收藏页面,进而为色情网站导流。平台对相关内容进行清理,并对涉事账号采取回收直播权限等处置。其三,部分账号持续发布聚焦敏感部位、动作挑逗的“度假照”“舞蹈动作”等低俗擦边信息,平台已对相关账号采取限制推荐、禁言、封禁等措施。 从治理思路看,平台正在将内容审核从“识别单条违规”深入延伸至“识别链条风险”:一上通过技术识别与人工复核相结合,提高对深度合成内容的识别准确率;另一方面强化对“引流组件”和“行为路径”的监测,针对头像提示、签名暗示、群聊导流等环节实施联动打击,并加强与执法机关协作,提升黑产溯源打击效能。 前景—— 业内观察认为,智能生成技术的普及是不可逆趋势,治理重点将从“是否生成”转向“是否合规、是否标注、是否侵害、是否导流”。下一阶段,平台治理需要三上持续加力:其一,完善对深度合成内容的风险分级与标识机制,提高用户辨识能力;其二,强化对导流链条的闭环治理,推动“内容—账号—群聊—站外跳转”全路径联动处置;其三,加强与主管部门、执法机关及行业机构的协同,形成对黑产的常态化打击与威慑。对普通用户而言,也应提高警惕,不轻信“收藏”“群聊”提示,不随意下载来历不明应用,发现可疑内容及时举报,共同维护清朗网络空间。
网络治理是场持久战。此次整治既体现平台责任,也反映新技术带来的挑战。构建健康网络生态需要政府、企业和用户共同努力,通过技术创新和法治保障,维护清朗的网络环境。