spirit-yzk / sensitive_words_blocking
使用python实现,基于DFA算法的敏感词屏蔽
☆30Updated 5 years ago
Alternatives and similar repositories for sensitive_words_blocking:
Users that are interested in sensitive_words_blocking are comparing it to the libraries listed below
- 利用LLM+敏感词库,来自动判别是否涉及敏感词。☆109Updated last year
- 学习ChatGLM3模型和LangChain框架的架构与核心功能,并基于LangChain+ChatGLM3实现本地知识库问答。☆41Updated 11 months ago
- 中文心理问答数据集☆72Updated 4 years ago
- DFA 实现中文敏感词检测☆96Updated 2 years ago
- 本项目旨在识别长短文本中的敏感词,并对整段/句文本进行语义分类,从而达到文本审核的目的☆63Updated 4 years ago
- 基于多模态特征融合的即时社交软件违规图片检测系统。通过结合图像和文本信息,系统支持对OCR后的文本进行高效的敏感词检测,并允许用户自定义敏感词词库。此外,系统能够自动识别图片中的二维码并提取域名进行安全检测,实现对图片的三分类,包括正常、涉黄和敏感信息,并支持建立图片黑白名…☆48Updated last year
- 基于ChatGLM-6b+langchain实现 本地化知识库检索与智能答案生成☆24Updated last year
- 基于dfa的python敏感词过滤算法☆29Updated 5 years ago
- The official repository of the paper: COLD: A Benchmark for Chinese Offensive Language Detection☆234Updated last year
- Ziya-LLaMA-13B是IDEA基于LLaMa的130亿参数的大规模预训练模型,具备翻译,编程,文本分类,信息抽取,摘要,文案生成,常识问答和数学计算等能力。目前姜子牙通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。本文主要用于Ziya-…☆45Updated last year
- 敏感词库整理☆170Updated 8 years ago
- chatglm-6B for tools application using langchain☆76Updated last year
- 用于汇总目前的开源中文对话数据集☆133Updated last year
- 文本敏感词过滤(附1w+的词敏感词库)☆22Updated 4 years ago
- 中文大模型微调(LLM-SFT), 数学指令数据集MWP-Instruct, 支持模型(ChatGLM-6B, LLaMA, Bloom-7B, baichuan-7B), 支持(LoRA, QLoRA, DeepSpeed, UI, TensorboardX), 支持(微…☆183Updated 8 months ago
- ChatGLM 6B 的模型与UI,通过 LangChain 与向量匹配实现本地知识库问答,支持流式输出☆110Updated last year
- 大语言模型微调的项目,包含了使用QLora微调ChatGLM和LLama☆27Updated last year
- 一个中文心理健康支持问答数据集,提供了丰富的援助策略标注。可用于生成富有援助策略的长咨询文本。☆182Updated 6 months ago
- 一个基于大模型微调的中文医疗问答机器人应用☆15Updated last year
- 打造人人都会的NLP,开源不易,记得star哦☆101Updated last year
- 中文领域心理健康对话大模型SoulChat☆529Updated 7 months ago
- Q&A based on elasticsearch+langchain+chatglm2 | 基于elasticsearch,langchain,chatglm2的自有知识库问答☆233Updated last year
- 中文对话数据清洗☆24Updated 2 years ago
- ☆71Updated last year
- ❤️Emotional First Aid Dataset, 心理咨询问答、聊天机器人语料库☆656Updated 6 months ago
- 通过机器学习进行敏感词的识别☆29Updated 6 years ago
- ChatGPT WebUI using gradio. 给 LLM 对话和检索知识问答RAG提供一个简单好用的Web UI界面☆105Updated 4 months ago
- ✏️0成本LLM微调上手项目,⚡️一步一步使用colab训练法律LLM,基于microsoft/phi-1_5、chatglm3,包含lora微调,全参微调☆58Updated last year
- ☆37Updated 9 months ago
- ☆49Updated 5 months ago