随着互联网的发展,网络平台内容大爆发的同时 ,也产生了大量不良有害信息,内容安全已经成为互联网生态治理的重要内容。本文主要介绍了内容安全审核的意义以及如何高效内容审核。
一、为什么进行内容安全审核?
内容平台快速发展时,就会被灰黑产盯上,视作流量蜜罐,利用其流量曝光机会,植入涉黄赌毒、垃圾广告等不良信息。据不完全统计,2019年,有上千款应用和服务因为内容安全问题而遭遇下架关停等整改,业务发展遭受巨大损失。
内容安全已成互联网企业标配风控项,主要有以下原因:
1.法律法规的完善和营造风清气正的互联网环境的共同需求,使得企业的业务需要合规;
2.互联网企业自身社区调性的建设,使得他们为了产品更好的氛围,开始主动清除不良内容;
3.未成年保护,使得互联网企业在当下履行起社会责任。
二、内容安全审核有哪些难点?
网络违规内容具有覆盖场景多、数据变种多、对抗性强的特点。
首先,违规内容覆盖场景已经到了无孔不入的地步。新闻内容、用户评论、用户头像、昵称、看网剧弹幕,任何一个有内容发布的场景都很难躲过违规内容的骚扰。
其次,随着场景的变化和对抗方法的演变,出现了大量的违规数据种类和变种。从最初的文本敏感词,到现在的字体拆分、特殊符号混淆以及图片内嵌入违规内容等多种形式,最近一两年在语音方面又多了一个asmr的内容类型,夹杂着很多色情内容。
最后,违规内容的对抗性越来越强,体现在违规内容的发布上有一定的组织性和对抗性,以内容形式的变换和账号的变化来对抗检测或运营策略。
内容生产量的骤增、用户体验及负面事件风险提高以及审核标准严苛细化,各种各样非标准化审核管理系统犹如一块巨石压得审核工作者喘不过气。
三、如何高效进行内容审核?
未来一段时间,人机协同仍是未来很长一段时间的审核模式, ai辅助人工审核,机器判定疑似违规的内容,再人工审核确认,可以提升内容审核的效率。但易盾在调研时,发现由于审核管理长久一直缺乏相应通用规范,操作后台长期得不到研发支持,大多数审核管理系统存在操作繁琐、设计陈旧、功能落后,甚至有些操作需要在多个后台跳转处理的问题。
针对目前内容审核的问题,网易易盾推出了内容智能审核管理系统,助力企业实现内容审核工作的统一管控、全程溯源、实时审查。智能审核管理系统包括三个部分,分别是:规则策略匹配、智能审核中台和数据中心。 流程上,内容数据或通过机器检测的数据,首先进入智能审核管理系统的规则策略匹配环节,匹配关键词库、智能规则库、高频规则库、文本特征库、九游会网址最新的联系方式库、用户名单、ip名单等规则。匹配完后,便进入智能审核中台,进行任务分配、人工审核和聚类分析。接着,数据中心就能显示相关指标,比如用户画像、审核人排名、人审质量统计、人审效率统计、人审量统计、内容风险统计、异常指标监控等。
相关阅读: