关键词审核

大约 6 分钟

关键词审核

关键词审核是一种基础的文本审核方式,通过对文本消息内容中的关键词进行识别与过滤,可快速发现和过滤不合规的文本。关键词精准匹配可解决简单的内容过滤需求,例如不允许出现国家领导人姓名。如果应用中的违规内容较复杂,存在较多变体等情况,建议结合 AI 模型审核实现更全面、更准确的内容审核。

下表为关键词审核与 AI 审核的区别。

审核类型应用场景审核机制审核范围收费机制
关键词审核简单的文本内容过滤需求。1. 你需创建黑白名单,填写关键词,设置对含有关键词的消息的审核建议。
2. 在文本审核规则中选择使用关键词审核。
支持从客户端 SDK 发送的文本消息。按月收费。
AI 模型审核各种场景的全消息类型的全方位内容审核。基于业界先进的语义模型和海量的多语种样本库,有效识别各类场景中的风险文本内容。你需在文件审核规则中选择 AI 模型和关键词名单配合使用。支持从客户端 SDK 发送的文本、图片、音频和视频消息。详见内容审核产品介绍按量计费,详见内容计费说明

使用关键词审核

要使用关键词审核,需按以下步骤操作:

  1. 开通文本审核
  2. 开通关键词审核。
  3. 配置关键词名单。
  4. 在文本审核规则中应用关键词名单。

第一步 开通文本审核

  1. 在环信控制台首页,选择目标应用,然后选择即时通讯 > 功能配置 > 功能配置总览

  2. 功能配置总览页面上,点击内容审核页签。点击文本审核对应的操作栏中的开通

第二步 开通关键词审核

提示

关键词审核功能为增值服务,需单独购买。服务开通后立即扣费,自动续费。

  1. 在环信控制台首页,选择目标应用,然后选择即时通讯 > 功能配置 > 功能配置总览

  2. 功能配置总览页面,点击内容审核页签。点击关键词审核对应的操作栏中的开通

3.开通后,点击关键词审核对应的操作栏中的配置,进入关键词名单页面。

img

img

第三步 配置关键词名单

  1. 选择即时通讯 > 内容审核 > 关键词审核配置关键词名单。

提示

  1. 关键词名单包含白名单和黑名单,即审核建议参数为忽略时为白名单,设置为疑似拒绝时为黑名单。
  2. 每个应用最多可配置 10 个名单, 每个名单最多可添加 10,000 个关键词,即每个应用最多可配置 100,000 个词条。添加的关键词在 15 分钟后生效。
  1. 单击创建黑/白名单,填写名单信息。

img

创建黑/白名单,需配置以下参数:

字段描述
名单名称关键词名单的名称,不能超过 32 个字符。
审核建议对关键词的审核结果,包括:
忽略:表示关键词合法。
疑似:表示关键词可能非法。
拒绝:表示关键词非法。
生效范围关键词审核规则的应用范围,包括:
全部:所有会话,包含单聊、群聊和聊天室。
单聊
群聊
聊天室
关键词该规则中的关键词。每个关键词的长度不能超过 128 个字符;一次最多可添加 200 个词条,每行一个词条。
  1. 点击确定保存配置。

名单创建成功后会显示在名单列表中,默认为开启状态。若不需要使用该名单,可以在状态栏中将其关闭。

img

  1. 添加关键词。

创建关键词名单后,你可以在名单列表上选择更多 > 进入名单

img

选择通过手动添加或文件导入方式添加关键词。

img

  • 手动添加

单击添加关键词,手动输入关键词。每次最多添加 200 个词条。

img

  • 文件导入

单击文件导入,然后选择文件上传。

提示

支持 .txt 格式的纯文本文件,每个文件不能超过 2 MB。
文件上传后应确保单个名单的词条总数不超过 10,000,否则超出部分将添加失败。

img

  1. 可根据业务实际需要,搜索名单或关键词。
  • 名单搜索:在名单列表页面搜索名单名称,精确匹配,需输入完整的名单名称。
  • 关键词搜索:进入指定的关键词名单列表,输入关键字即可搜索出包含该关键字的所有关键词,支持模糊匹配。
  1. 删除关键词。

在关键词名单列表上,点击指定的名单名称,进入该名单的关键词列表。在指定关键词的操作栏中点击删除将其删除,或选择多个关键词名称前的复选框,然后点击批量删除

img

第四步 在文本审核规则中应用关键词名单

文本审核开通后,默认会生成 3 条规则。本节以默认的单聊文本规则为例,介绍如何文本审核规则中应用关键词名单。

img

  1. 点击默认的单聊文本规则的操作栏中更多 > 编辑,进入编辑规则对话框。

img

  1. 配置使用关键词名单。
  • 模型选择:如果仅使用关键词审核,则选择仅关键词名单,无需模型;如果需同时使用关键词审核和 AI 模型审核,则选择AI模型+关键词名单

  • 启用规则:文本审核规则默认为关闭状态,点击开关即可启用。开启后,规则列表中的服务状态一栏显示为启用

  • 消息处理消息处理所列的审核结果与关键词名单中的审核建议的配置相对应。

    • 审核建议拒绝消息处理默认为拦截,即不下发给接收方。如需将消息中的命中词条替换为 * 后再下发,则配置为替换为***。
    • 审核建议疑似消息处理默认为拦截,即不下发给接收方。若配置为通过,则直接下发消息。
  • 其他参数配置详见规则配置说明

使用示例

发送文本消息时,若消息内容中包含关键词名单中的关键词而且文本审核规则中的消息处理配置为拦截,则消息发送失败,SDK 返回错误码 508;如规则配置为替换为***,则关键词会被替换为***,再将替换后的内容发送至接收方。