dablelv / dirty-cnwordsLinks
收录常见业务安全场景中文脏词,如广告引流、辱骂、暴恐、黄赌毒政类。
☆59Updated 2 years ago
Alternatives and similar repositories for dirty-cnwords
Users that are interested in dirty-cnwords are comparing it to the libraries listed below
Sorting:
- 百度百科 500 万数据集☆35Updated last year
- 暴恐违禁 文本色情 政治敏感 恶意推广 低俗辱骂☆98Updated 3 years ago
- 本项目旨在识别长短文本中的敏感词,并对整段/句文本进行语义分类,从而达到文本审核的目的☆64Updated 5 years ago
- text security audit 安全审核-语义模型过滤 敏感内容检测系统☆23Updated 3 months ago
- 时间抽取、 解析、标准化工具☆52Updated 2 years ago
- 一个短视频app文本审核模块的实现思路及demo☆120Updated 6 years ago
- 一个非常高效的字符串匹配工具,支持正向/反向最大匹配分词和多模式字符串精确匹配☆17Updated last year
- DFA 实现中文敏感词检测☆101Updated 3 years ago
- llama inference for tencentpretrain☆98Updated 2 years ago
- 专注于中文领域大语言模型,落地到某个行业某个领域 ,成为一个行业大模型、公司级别或行业级别领域大模型。☆118Updated 3 months ago
- 利用LLM+敏感词库,来自动判别是否涉及敏感词。☆124Updated last year
- 百度QA100万数据集☆47Updated last year
- ChatGLM-6B fine-tuning.☆135Updated 2 years ago
- 基于bert进行中文文本纠错☆235Updated last year
- 中文、分词、词表、核心词典、事件词 表、停用词、敏感词、问答、问答数据、知识图谱、文本语料。☆164Updated 3 years ago
- baichuan LLM surpervised finetune by lora☆63Updated last year
- 🌈 NERpy: Implementation of Named Entity Recognition using Python. 命名实体识别工具,支持BertSoftmax、BertSpan等模型,开箱即用。☆113Updated last year
- 通过机器学习进行敏感词的识别☆28Updated 7 years ago
- NER实体识别模型,快速高效简单一键部署docker部署调用模型。能识别:地址、人名、机构名实体。☆36Updated last year
- chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu☆164Updated last year
- 一个基于预训练的句向量生成工具☆137Updated 2 years ago
- 中文谐音词/字库(同音词/字)Chinese Homophones☆105Updated 5 years ago
- RelExt: A Tool for Relation Extraction from Text. 文本实体关系抽取工具。☆50Updated 2 years ago
- 机器学习训练简单模型判定一个句子是不是疑问句☆19Updated 3 years ago
- 中文通用大模型开放域多轮测评基准 | An Open Domain Benchmark for Foundation Models in Chinese☆79Updated last year
- A Multi-Modal Dataset of Chinese Governmental Docunments☆34Updated 4 years ago
- 专业领域词库构建/中文新词发现/专业词库发现☆29Updated 5 years ago
- 基于ChatGPT构建的中文self-instruct数据集☆117Updated 2 years ago
- 使用sentence-transformers(SBert)训练自己的文本相似度数据集并进行评估。☆47Updated 3 years ago
- 本项目旨在对大量文本文件进行快速编码检测和转换以辅助mnbvc语料集项目的数据清洗工作☆61Updated 7 months ago