AI驱动风险前置防控,Soul App升级社交生态保护能力

2026-10-10 18:46:54

AI驱动风险前置防控,Soul App升级社交生态保护能力
AI为你总结

全文概述

Soul App发布《2026年第二季度生态安全报告》,披露平台依托AI技术将风险治理模式从事后处置转向前置识别、提前拦截,覆盖账号治理、反诈、全场景管控、未成年人保护等多个维度,同时搭配用户教育举措,有效提升社交生态安全性,降低用户遭遇诈骗、骚扰、虚假人设、诱导消费等风险的概率。

账号类风险前置治理成效

针对黑灰产账号批量作弊行为,平台在原有审核体系上新增批量识别节点,实现从“先发布后治理”到“先拦截后发布”的模式转变,风险内容处置率从上线初期的30%提升至60%,日均上报疑似垃圾账号超3000个、封禁超1700个,大幅缩短黑灰产账号存活周期。假人设、盗图类账号治理方面,二季度累计处置违规账号3万余个,处理相关违规帖子8万余条,压缩虚假内容传播空间。

反诈治理能力升级

针对“杀猪盘”风险隐蔽性强、迭代快的特点,平台升级相关Agent审核能力,不再仅依赖固定关键词筛查,而是结合账号特征、互动行为、内容语义综合研判风险,目前该能力准确率达93%以上,可提前识别高风险账号,提升自动化处置效率,为私聊场景风险治理提供支撑。

全社交场景管控措施

覆盖广场、群聊、私聊全场景落地前置拦截与过程管控结合的治理模式:二季度机审直接拦截违规内容400万条,处置相关跟帖评论726万条,拉黑违规设备3723个,日均提醒2533名用户遵守社区规范;针对低俗擦边、有偿交友等低质内容,上线智能辅助审核能力,日均处理低质内容超13万条;“消费托”诱导消费专项治理累计处置风险账号约3.2万个,降低用户被诱导消费风险;群聊场景日均处置语音违规超2.35万次、拦截违规文字消息超3.8万条、处罚违规用户超400个、拦截违规群聊6800余个;私聊场景前置识别骚扰特征,日均帮助用户隔绝网暴和骚扰3099次,处置私聊不文明用户1737个,日均引导用户文明发言19.9万次;AI生成内容领域后台实现图片分层识别,可提前甄别AI人像、虚假场景、盗图内容,以中性提示告知用户属性,不干预正常发帖。

未成年人保护机制升级

新增未成年人发帖内容AI审核能力,在发布环节即可识别账号风险,目前平台主动识别未成年人的比例超99%,实现未成年人保护从事后处置向主动识别、提前防范的模式转变。

配套治理与后续规划

除技术防控外,平台通过官方账号“风纪球长”发布违规典型案例、开展安全科普、社交礼仪倡议与网络辟谣,二季度累计触达用户47万人,结合技术识别、产品干预共同培育友善社区氛围。后续平台将持续融合AI、人工审核、产品机制、用户教育,跟进新技术新场景的风险变化,搭建覆盖内容、账号、设备、社交链路的全流程治理体系,维护安全真实的社交生态。

展开 收起
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章
1
扫一下,分享更方便,购买更轻松