dablelv / dirty-cnwordsLinks
收录常见业务安全场景中文脏词,如广告引流、辱骂、暴恐、黄赌毒政类。
☆66Updated 3 years ago
Alternatives and similar repositories for dirty-cnwords
Users that are interested in dirty-cnwords are comparing it to the libraries listed below
Sorting:
- text security audit 安全审核-语义模型过滤 敏感内容检测系统☆31Updated 10 months ago
- 本项目旨在识别长短文本中的敏感词,并对整段/句文本进行语义分类,从而达到文本审核的目的☆68Updated 5 years ago
- 一个基于预训练的句向量生成工具☆138Updated 2 years ago
- Code & Data for our Paper "NaSGEC: Multi-Domain Chinese Grammatical Error Correction for Native Speaker Texts" (ACL 2023 Findings)☆95Updated 9 months ago
- 文本智能校对大赛(Chinese Text Correction)的baseline☆68Updated 3 years ago
- 中文、分词、词表、核心词典、事件词表、停用词、敏感词、问答、问答数据、知识图谱、文本语料。☆170Updated 4 years ago
- MiniRBT (中文小型预训练模型系列)☆296Updated 5 months ago
- 利用LLM+敏感词库,来自动判别是否涉及敏感词。☆135Updated 2 years ago
- 🌈 NERpy: Implementation of Named Entity Recognition using Python. 命名实体识别工具,支持BertSoftmax、BertSpan等模型,开箱即用。☆116Updated last year
- 使用 Qwen2ForSequenceClassification 简单实现文本分类任务。☆87Updated last year
- pke_zh, python keyphrase extraction for chinese(zh). 中文关键词或关键句提取工具,实现了KeyBert、PositionRank、TopicRank、TextRank等算法,开箱即用。☆212Updated last year
- DFA 实现中文敏感词检测☆102Updated 3 years ago
- 一个短视频app文本审核模块的实现思路及demo☆122Updated 7 years ago
- 基于sentence-transformers实现文本转向量的机器人☆46Updated 3 years ago
- ChatGLM2-6B微调, SFT/LoRA, instruction finetune☆110Updated 2 years ago
- 暴恐违禁 文本色情 政治敏感 恶意推广 低俗辱骂☆103Updated 3 years ago
- 收集的一些敏感词汇,挺全的,还细分了暴恐词库、反动词库、民生词库、色情词库、贪腐词库、其他词库等☆442Updated 8 years ago
- 一套代码指令微调大模型☆38Updated 2 years ago
- 百度百科 500 万数据集☆44Updated 2 years ago
- 中文纠错☆93Updated 3 years ago
- 大模型预训练中文语料清洗及质量评估 Large model pre-training corpus cleaning☆72Updated last year
- llama inference for tencentpretrain☆99Updated 2 years ago
- 时间抽取、解析、标准化工具☆55Updated 3 years ago
- 专注于中文领域大语言模型,落地到某个行业某个领域,成为一个行业大模型、公司级别或行业级别领域大模型。☆126Updated 9 months ago
- 文本相似度,语义向量,文本向量,text-similarity,similarity, sentence-similarity,BERT,SimCSE,BERT-Whitening,Sentence-BERT, PromCSE, SBERT☆75Updated last year
- Chinese MobileBERT(中文MobileBERT模型)☆97Updated 3 years ago
- chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu☆164Updated 2 years ago
- ChatGLM-6B fine-tuning.☆137Updated 2 years ago
- python | 高效使用统计语言模型kenlm:新词发现、分词、智能纠错等☆169Updated 6 years ago
- 有一个通用实体关系事件抽取的任务,需要使用到UIE模框架,而且需要将起部署到昇腾310服务器上,因为UIE模型底层使用的是ernie3.0,但是目前paddle官方还不支持ernie3.0模型在昇腾310上部署,所以才有了以下的操作,主要过程是,先试用paddle训练处模型…☆20Updated 3 years ago