dablelv / dirty-cnwordsLinks
收录常见业务安全场景中文脏词,如广告引流、辱骂、暴恐、黄赌毒政类。
☆60Updated 2 years ago
Alternatives and similar repositories for dirty-cnwords
Users that are interested in dirty-cnwords are comparing it to the libraries listed below
Sorting:
- DFA 实现中文敏感词检测☆101Updated 3 years ago
- pke_zh, python keyphrase extraction for chinese(zh). 中文关键词或关键句提取工具,实现了KeyBert、PositionRank、TopicRank、TextRank等算法,开箱即用。☆207Updated last year
- A convenient Chinese word segmentation tool 简便中文分词器☆46Updated 2 months ago
- text security audit 安全审核-语义模型过滤 敏感内容检测系统☆27Updated 5 months ago
- 一套代码指令微调大模型☆39Updated last year
- 暴恐违禁 文本色情 政治敏感 恶意推广 低俗辱骂☆99Updated 3 years ago
- 本项目旨在识别长短文本中的敏感词,并对整段/句文本进行语义分类,从而达到文本审核的目的☆64Updated 5 years ago
- MiniRBT (中文小型预训练模型系列)☆285Updated 2 years ago
- 一个短视频app文本审核模块的实现思路及demo☆120Updated 6 years ago
- 中文谐音词/字库(同音词/字)Chinese Homophones☆108Updated 5 years ago
- llama inference for tencentpretrain☆98Updated 2 years ago
- 好未来开源教育领域首个在线教学中文预训练模型TAL-EduBERT☆193Updated 4 years ago
- 专注于中文领 域大语言模型,落地到某个行业某个领域,成为一个行业大模型、公司级别或行业级别领域大模型。☆119Updated 4 months ago
- 一个基于预训练的句向量生成工具☆137Updated 2 years ago
- Code & Data for our Paper "NaSGEC: Multi-Domain Chinese Grammatical Error Correction for Native Speaker Texts" (ACL 2023 Findings)☆90Updated 5 months ago
- 中文大模型微调(LLM-SFT), 数学指令数据集MWP-Instruct, 支持模型(ChatGLM-6B, LLaMA, Bloom-7B, baichuan-7B), 支持(LoRA, QLoRA, DeepSpeed, UI, TensorboardX), 支持(微…☆206Updated last year
- 利用LLM+敏感词库,来自动判别是否涉及敏感词。☆126Updated 2 years ago
- 中文语料库-每日自动更新版 ── 语料文件☆151Updated 4 years ago
- 🌈 NERpy: Implementation of Named Entity Recognition using Python. 命名实体识别工具,支持BertSoftmax、BertSpan等模型,开箱即用。☆115Updated last year
- 时间抽取、解析、标准化工具☆53Updated 2 years ago
- python | 高效使用统计语言模型kenlm:新词发现、分词、智能纠错等☆165Updated 5 years ago
- ChatGLM-6B fine-tuning.☆135Updated 2 years ago
- 基于sentence-transformers实现文本转向量的机器人☆46Updated 2 years ago
- baichuan LLM surpervised finetune by lora☆63Updated 2 years ago
- 高性能文本 Tokenizer 库☆29Updated last year
- dialogbot, provide search-based dialogue, task-based dialogue and generative dialogue model. 对话机器人,基于问答型对话、任务型对话、聊天型对话等模型实现,支持网络检索问答,领域知识…☆334Updated last year
- ☆82Updated last year
- 评估自然语言的流畅度☆116Updated 3 years ago
- 百度百科 500 万数据集☆37Updated last year
- clueai工具包: 3行代码3分钟,自定义需要的API!☆233Updated 2 years ago