spirit-yzk / sensitive_words_blockingLinks
使用python实现,基于DFA算法的敏感词屏蔽
☆35Updated 5 years ago
Alternatives and similar repositories for sensitive_words_blocking
Users that are interested in sensitive_words_blocking are comparing it to the libraries listed below
Sorting:
- 基于dfa的python敏感词过滤算法☆32Updated 5 years ago
- 利用LLM+敏感词库,来自动判别是否涉及敏感词。☆124Updated last year
- 从langchain-ChatGLM基础上修改的一个可以加载TigerBot模型的基于本地知识库的问答应用,目标期望建立一套对中文场景与开源模型支持友好、可离线运行的知识库问答解决方案。☆107Updated last year
- 本项目旨在识别长短文本中的敏感词,并对整段/句文本进行语义分类,从而达到文本审核的目的☆64Updated 5 years ago
- 学习ChatGLM3模型和LangChain框架的架构与核心功能,并基于LangChain+ChatGLM3实现本地知识库问答。☆38Updated last year
- 使用fastapi做后端,vue-element-admin作为前端的后台管理系统☆46Updated 4 years ago
- 一个持续更新的中文敏感词库,帮助开发者和内容审核者快速识别并过滤不当文本。☆449Updated 2 weeks ago
- 基于多模态特征融合的即时社交软件违规图片检测系统。通过结合图像和文本信息,系统支持对OCR后的文本进行高效的敏感词检测,并允许用户自定义敏感词词库。此外,系统能够自动识别图片中的二维码并提取域名进行安全检测,实现对图片的三分类,包括正常、涉黄和敏感信息,并支持建立图片黑白名…☆61Updated last year
- 基于分词原理修改写的一个过滤敏感词库,可以改成动态,支持返回敏感词,高亮敏感词,替换敏感词等操作,本敏感词收集了5W多个违法词、敏感词、违禁词,已去重,最新追加了将近1W个最新词, 几十个矫正词、变异词。☆193Updated 4 years ago
- ☆79Updated last year
- 一个短视频app文本审核模块的实现思路及demo☆120Updated 6 years ago
- The official repository of the paper: COLD: A Benchmark for Chinese Offensive Language Detection☆269Updated 2 years ago
- DFA 实现中文敏感词检测☆101Updated 3 years ago
- 一个基于大模型微调的中文医疗问答机器人应用☆20Updated last year
- chatglm-6B for tools application using langchain☆75Updated 2 years ago
- 打造人人都会的NLP,开源不易,记得star哦☆101Updated 2 years ago
- 基于ChatGLM-6b+langchain实现本地化知识库检索与智能答案生成☆24Updated last year
- ChatGPT WebUI using gradio. 给 LLM 对话和检索知识问答RAG提供一个简单好用的Web UI界面☆130Updated 9 months ago
- Q&A based on elasticsearch+langchain+chatglm2 | 基于elasticsearch,langchain,chatglm2的自有知识库问答☆241Updated last year
- 通过机器学习进行敏感词的识别☆28Updated 7 years ago
- 中文图书数据集/数据挖掘/自然语言处理/中国图书分类法/图书情报学/数据挖掘/文本分类/☆89Updated 3 months ago
- ☆34Updated 2 years ago
- ChatGLM 6B 的模型与UI,通过 LangChain 与向量匹配实现本地知识库问答,支持流式输出☆113Updated 2 years ago
- Ziya-LLaMA-13B是IDEA基于LLaMa的130亿参数的大规模预训练模型,具备翻译,编程,文本分类,信息抽取,摘要,文案生成,常识问答和数学计算等能力。目前姜子牙通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。本文主要用于Ziya-…☆45Updated last year
- dialogbot, provide search-based dialogue, task-based dialogue and generative dialogue model. 对话机器人,基于问答型对话、任务型对话、聊天型对话等模型实现,支持网络检索问答,领域知识…☆333Updated last year
- 流水线系统(pipeline)构建基于本地知识库的ChatGLM问答☆87Updated last year
- Mimix: A Text Generation Tool and Pretrained Chinese Models☆155Updated 7 months ago
- 敏感词库整理☆176Updated 9 years ago
- 本项目用于文档问答,使用向量嵌入 + ES 做召回,使用Rerank模型作为精排,再使用LLM做文档问答,Web框架使用Flask。☆28Updated 2 months ago
- 基于pytorch+bert的中文文本分类☆84Updated 2 years ago