内容安全审核

您所在的位置:网站首页 美团外卖账户存在安全隐患发布违规信息 内容安全审核

内容安全审核

2023-03-12 20:49| 来源: 网络整理| 查看: 265

游客花600元在重庆某景区雇人抬轿子上山遭网暴,被斥责花钱践踏他人尊严;“糖水爷爷”一杯2元卖17年,走红后遭质疑,被网友骂到放弃摆摊回老家;上海女子因打赏外卖小哥 200 元,被指责尖酸刻薄,不堪网暴跳楼身亡;15岁寻亲男孩刘学州出生被遗弃,幼时被欺凌,长大遭网暴,最终选择轻生离世......

近年来,随着互联网的高速发展,网络暴力事件层出不穷。网络暴力突破了道德底线,侵害他人的尊严、名誉和隐私,不仅会给当事人带来身心伤害,有些更是会造成十分恶劣的社会影响,甚至酿成无法挽回的悲剧。

在网暴专项整治行动中,处置违法违规账号7.8万个

在互联网平台,评论区通常是发生网络暴力的重灾区。例如,2022年某短视频平台官方统计显示,该平台每天产生8亿条评论,其中,被投诉、举报并最终处理的不当评论中,“谩骂、人身攻击”占比32.79%。此外,引战营销、煽动对立、私信轰炸、恶意剪辑、人肉搜索、P图抹黑、造谣诋毁等等都属于网络暴力

今年1月,中央网信办开展为期1个月的“清朗2022年春节网络环境整治”专项行动,重点包括集中整治网络暴力、散播谣言等问题。4月,中央网信办部署开展“清朗·网络暴力专项治理行动”,主要聚焦网络暴力易发多发、社会影响力大的18家网站平台。

8月23日,中央网信办、国家网信办副主任盛荣华在国新办发布会上表示,中央网信办结合每年开展的“清朗”系列专项行动,将网络暴力、网络水军、网络黑公关作为“清朗”系列专项行动当中的一项重要任务,将评论、弹幕、私信等环节作为治理网络暴力问题的重点,在实践当中取得了良好效果。在网暴专项整治行动当中,重点网站平台累计拦截涉攻击谩骂、造谣诋毁等信息6541万余条,处置违法违规的账号7.8万个

治理网暴, 平台有责,“AI+人工”助力筑牢“平台堤坝”

网络空间不是“法外之地”,要坚持依法治网、依法办网、依法上网,让互联网在法治轨道上健康运行。

为充分发挥网站平台信息内容管理第一责任人作用,2021年9月,国家互联网信息办公室发布《关于进一步压实网站平台信息内容管理主体责任的意见》,引导推动网站平台准确把握主体责任,明确工作规范,健全管理制度,完善运行规则,切实防范化解各种风险隐患,积极营造清朗网络空间。

然而需要看到的是,一些网站平台在防范网络暴力行为方面,还存在各种问题,一定程度导致违法和不良信息禁而不绝。

网站平台是信息内容管理的第一责任人,要对信息内容呈现结果负责,严防违法信息生产传播,自觉防范和抵制传播不良信息,确保信息内容安全。网晴科技内容审核专家建议,应对网络暴力,网站平台除制定平台社区公约,完善平台社区规则外,更应重点加强账号规范管理,健全内容审核机制,积极守好网暴治理的第一道防线。

比如,很多用户将网晴科技作为内容安全服务商,借助“AI+人工”一站式、系统化的内容安全全套解决方案,来提升自身安全保障能力。

以“网晴内容安全智能审核平台”为例,其审核系统基础功能包含账号管理体系、权限系统、内容安全审核流程配置,可以对注册作者的头像、昵称、简介和实名认证三要素信息等内容进行综合审核,可以实现对文章、图片、音视频、评论和弹幕等各类型内容的全面审核,精准识别和过滤不良信息。

下图所示为“网晴内容安全智能审核平台”与用户现有业务系统对接流程图:

以“网晴内容安全智能审核平台”谩骂专项分析模型为例,该模型采用语义模型+敏感词匹配+知识图谱等方式,不仅可以识别明显的侮辱谩骂词汇,而且可以识别变体、谐音、新词汇等其他形式的谩骂内容。使用谩骂专项分析模型,结合情感识别模型及内容分区的方式,判断单句及段落是否存在人身攻击或者其他偏激的语言描述;同时通过敏感词+抽取实体词汇的方式,进行内容分区,不同敏感等级的内容将会执行不同的审核策略。

综上,对网络暴力的预防和制止,离不开平台、网民、行业协会、司法系统、内容安全服务商等多方主体协调,只有形成合力,才能杜绝网暴。作为专业的内容安全服务商,网晴科技将始终全面保障用户的内容安全,帮助用户立起“防火墙”、架起“高压线”,把信息内容管理主体责任落到实处,营造清朗网络空间,共建网上美好精神家园!



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3