敏感词过滤工具:sensitive-word 使用教程
sensitive-word 👮♂️The sensitive word tool for java.(敏感词/违禁词/违法词/脏词。基于 DFA 算法实现的高性能 java 敏感词过滤工具框架。请勿发布涉及政治、广告、营销、翻墙、违反国家法律法规等内容。高性能敏感词检测过滤组件,附带繁体简体互换,支持全角半角互换,汉字转拼音,模糊搜索等功能。)项目地址:https://gitcode.com/gh_mirrors/se/sensitive-word
项目介绍
sensitive-word 是一个基于 DFA 算法实现的高性能 Java 敏感词过滤工具。它支持敏感词的判断、返回、脱敏等常见操作,并且具有以下特点:
6W+ 词库,且不断优化更新。基于 DFA 算法,性能较好。基于 fluent-api 实现,使用优雅简洁。支持全角半角互换、英文大小写互换。
项目快速启动
1. 引入依赖
在 Maven 项目中,添加以下依赖:
2. 基本使用
以下是一个简单的使用示例:
import com.github.houbb.sensitive.word.api.IWordResultHandler;
import com.github.houbb.sensitive.word.bs.SensitiveWordBs;
public class SensitiveWordExample {
public static void main(String[] args) {
String text = "这是一个包含敏感词的测试文本,比如包含色情、赌博等词汇。";
// 判断是否包含敏感词
boolean contains = SensitiveWordBs.newInstance().contains(text);
System.out.println("是否包含敏感词: " + contains);
// 返回所有敏感词
List
System.out.println("所有敏感词: " + allWords);
// 返回第一个敏感词
String firstWord = SensitiveWordBs.newInstance().findFirst(text);
System.out.println("第一个敏感词: " + firstWord);
// 脱敏处理
String desensitizedText = SensitiveWordBs.newInstance().replace(text, '*');
System.out.println("脱敏后的文本: " + desensitizedText);
}
}
应用案例和最佳实践
1. 社交平台敏感词过滤
在社交平台中,用户可以自由发言,因此需要对用户发布的内容进行敏感词过滤。以下是一个简单的实现示例:
public class SocialMediaFilter {
private static final SensitiveWordBs sensitiveWordBs = SensitiveWordBs.newInstance();
public static String filter(String content) {
return sensitiveWordBs.replace(content, '*');
}
public static void main(String[] args) {
String userPost = "这是一个包含敏感词的帖子,比如包含色情、赌博等词汇。";
String filteredPost = filter(userPost);
System.out.println("过滤后的帖子内容: " + filteredPost);
}
}
2. 论坛评论过滤
在论坛中,用户可以发表评论,因此需要对评论内容进行敏感词过滤。以下是一个简单的实现示例:
public class ForumCommentFilter {
private static final SensitiveWordBs sensitiveWordBs = SensitiveWordBs.newInstance();
public static String filter(String comment) {
return sensitiveWordBs.replace(comment, '*');
}
public static void main(String[] args) {
String userComment = "这是一个包含敏感词的评论,比如包含色情、赌博等词汇。";
String filteredComment = filter(userComment);
System.out.println("过滤后的评论内容: " + filteredComment);
}
}
典型生态项目
1. 腾讯离线敏感词库
腾讯离线敏感词库是一个由开发者社区精心维护的开源项目,提供了大量的敏感词汇,可以与 sensitive-word 结合使用,增强敏感词过滤的效果。
项目地址: 腾讯离线敏感词库
2. 敏感词过滤方案汇总
GitHub 上有多个敏感词过滤相关的项目,可以参考这些项目来优化和扩展 sensitive-word 的功能。
项目地址: 敏感词过滤方案汇总
通过结合这些生态项目,
sensitive-word 👮♂️The sensitive word tool for java.(敏感词/违禁词/违法词/脏词。基于 DFA 算法实现的高性能 java 敏感词过滤工具框架。请勿发布涉及政治、广告、营销、翻墙、违反国家法律法规等内容。高性能敏感词检测过滤组件,附带繁体简体互换,支持全角半角互换,汉字转拼音,模糊搜索等功能。)项目地址:https://gitcode.com/gh_mirrors/se/sensitive-word