跳到主要内容

内容审核

内容审核基于 AI 识别技术,帮助您自动检测文件中的违规内容,保障业务安全。

支持的审核类型

审核类型说明识别内容
图片审核检测图片中的违规内容涉黄、涉政、涉暴、违法、广告等
视频审核检测视频中的违规内容涉黄、涉政、涉暴、违法、广告等
音频审核检测音频中的违规内容涉黄、涉政、辱骂、违法、广告等
文本审核检测文本中的敏感词汇涉黄、涉政、辱骂、违法、广告等
文档审核检测文档中的违规内容支持 PDF、Word、Excel、PPT 等格式

主要功能

  • 自动识别:基于深度学习技术,自动识别违规内容
  • 自定义策略:根据业务需求配置审核策略和敏感词库
  • 实时审核:支持上传时自动审核,第一时间拦截违规内容
  • 回调通知:审核结果实时回调,快速响应
  • 自动处理:支持对违规内容自动冻结或删除

应用场景

  • UGC 内容审核:用户上传的图片、视频、文本内容审核
  • 社交平台:评论、动态、聊天内容的安全审核
  • 电商平台:商品图片、描述信息的合规审核
  • 直播平台:直播画面、弹幕内容的实时审核

配置步骤

控制台访问路径

云开发平台 - 云存储 → 点击「前往 COS 存储桶」 → 左侧菜单「内容审核」 → 「自动审核配置」 → 选择审核类型(图片/视频/音频/文本/文档)

图片审核配置

1. 进入图片审核

  • 在左侧菜单选择「内容审核」→「自动审核配置」→「图片审核

2. 创建审核任务

  • 点击「创建任务」按钮
  • 选择审核类型:增量审核(自动审核新上传图片)或存量审核(审核已有图片)
  • 配置审核策略:选择需要审核的场景(涉黄、涉政、涉暴、违法、广告等)

3. 设置审核结果处理

  • 配置回调地址:接收审核结果通知
  • 设置自动冻结规则:对违规内容自动冻结
  • 选择审核结果存储位置

4. 启用任务

  • 确认配置信息无误后,点击「确定
  • 任务创建后自动生效

API 调用方式:

视频审核配置

1. 进入视频审核

  • 在左侧菜单选择「内容审核」→「自动审核配置」→「视频审核

2. 创建审核任务

  • 点击「创建任务
  • 设置审核范围:指定文件路径或选择整个存储桶
  • 配置审核策略:涉黄、涉政、涉暴、违法、广告等

3. 配置审核参数

  • 截帧方式:设置视频截帧间隔(如每 5 秒截取一帧)
  • 审核维度:选择画面审核、音频审核或两者都审核
  • 回调设置:配置审核结果回调 URL

4. 启用并监控

  • 保存配置后任务自动执行
  • 在任务列表查看审核进度和结果

API 调用方式:

音频审核配置

1. 进入音频审核

  • 在左侧菜单选择「内容审核」→「自动审核配置」→「音频审核

2. 创建审核任务

  • 点击「创建任务
  • 选择待审核的音频文件或文件夹

3. 配置审核策略

  • 选择审核场景:涉黄、涉政、辱骂、违法、广告等
  • 设置语音识别语言(中文、英文等)
  • 配置敏感词库

4. 设置回调和处理规则

  • 配置审核结果回调地址
  • 设置违规内容自动处理规则
  • 保存并启用任务

API 调用方式:

文本审核配置

1. 进入文本审核

  • 在左侧菜单选择「内容审核」→「自动审核配置」→「文本审核

2. 配置审核策略

  • 点击「审核配置
  • 选择审核类型:涉黄、涉政、辱骂、违法、广告等

3. 自定义敏感词库

  • 添加业务相关的敏感词
  • 设置词库优先级
  • 配置命中规则

4. API 调用方式

  • 文本审核主要通过 API 调用
  • 在应用中集成文本审核 API

API 调用方式:

文档审核配置

1. 进入文档审核

  • 在左侧菜单选择「内容审核」→「自动审核配置」→「文档审核

2. 创建审核任务

  • 点击「创建任务
  • 选择待审核的文档文件

3. 配置审核参数

  • 支持格式:PDF、Word、Excel、PPT 等
  • 选择审核场景和策略
  • 设置审核结果通知方式

4. 查看审核结果

  • 任务完成后查看详细审核报告
  • 支持按页查看违规内容
  • 导出审核结果报告

API 调用方式:


最佳实践

1. 增量审核 + 存量审核结合

  • 增量审核:配置自动审核,新上传文件实时检测
  • 存量审核:定期对已有文件进行全量扫描

2. 自定义敏感词库

根据业务特点添加行业相关敏感词:

  • 电商平台:假货、仿品等相关词汇
  • 社交平台:人身攻击、歧视性词汇
  • 金融平台:非法集资、诈骗相关词汇

3. 人工复审机制

对于「疑似违规」的内容:

  1. 通过回调接收审核结果
  2. 将疑似违规内容放入人工复审队列
  3. 人工审核后做最终决策

4. 分级处理策略

根据违规程度采取不同措施:

  • 轻度违规:警告用户,要求修改
  • 中度违规:直接删除内容,记录违规次数
  • 重度违规:冻结账号,上报相关部门

常见问题

Q: 审核需要多长时间?

A:

  • 图片审核:通常在 1-3 秒内完成
  • 视频审核:根据视频时长,通常为视频时长的 10%-20%
  • 音频审核:根据音频时长,通常为音频时长的 10%-20%
  • 文档审核:根据文档页数,通常 1 页 1-2 秒

Q: 审核准确率如何?

A: 数据万象基于腾讯多年积累的海量数据和深度学习技术:

  • 图片审核准确率:≥ 99%
  • 视频审核准确率:≥ 98%
  • 文本审核准确率:≥ 99%

Q: 如何降低审核成本?

A: 建议采取以下策略:

  1. 只对用户上传内容进行审核,系统内容无需审核
  2. 根据用户信用等级调整审核策略(高信用用户可降低审核频率)
  3. 使用自定义策略,只审核必要的场景

Q: 是否支持私有化部署?

A: 数据万象内容审核是云服务,暂不支持私有化部署。


相关资源