Alternatives and similar repositories for aigc_serving

Users that are interested in aigc_serving are comparing it to the libraries listed below

• imClumsyPanda / ChatGLM-6B-API
  self-host ChatGLM-6B API made with fastapi
  ☆79Updated 2 years ago
• zhangnn520 / znn_chatglm
  打造人人都会的NLP，开源不易，记得star哦
  ☆101Updated 2 years ago
• iMagist486 / ElasticSearch-Langchain-Chatglm2
  Q&A based on elasticsearch+langchain+chatglm2 ｜ 基于elasticsearch，langchain，chatglm2的自有知识库问答
  ☆241Updated last year
• wordweb / langchain-ChatGLM-and-TigerBot
  从langchain-ChatGLM基础上修改的一个可以加载TigerBot模型的基于本地知识库的问答应用，目标期望建立一套对中文场景与开源模型支持友好、可离线运行的知识库问答解决方案。
  ☆109Updated 2 years ago
• billvsme / my_openai_api
  部署你自己的OpenAI api🤩, 基于flask, transformers (使用 Baichuan2-13B-Chat-4bits 模型, 可以运行在单张Tesla T4显卡) ，实现了OpenAI中Chat, Models和Completions接口，包含流式响…
  ☆95Updated last year
• kaixindelele / ChatSensitiveWords
  利用LLM+敏感词库，来自动判别是否涉及敏感词。
  ☆127Updated 2 years ago
• RapidAI / RapidRAG
  QA based on local knowledge and LLM.
  ☆234Updated 7 months ago
• shell-nlp / gpt_server
  gpt_server是一个用于生产级部署LLMs、Embedding、Reranker、ASR和TTS的开源框架。
  ☆206Updated last week
• CrazyBoyM / llama2-Chinese-chat
  首个llama2 13b 中文版模型 （Base + 中文对话SFT，实现流畅多轮人机自然语言交互)
  ☆91Updated 2 years ago
• gameofdimension / vllm-cn
  演示 vllm 对中文大语言模型的神奇效果
  ☆31Updated last year
• ProjectD-AI / llama_inference
  llama inference for tencentpretrain
  ☆99Updated 2 years ago
• yuanzhoulvpi2017 / DocumentSearch
  基于sentence transformers和chatglm实现的文档搜索工具
  ☆157Updated 2 years ago
• billvsme / train_law_llm
  ✏️0成本LLM微调上手项目，⚡️一步一步使用colab训练法律LLM，基于microsoft/phi-1_5、chatglm3，包含lora微调，全参微调
  ☆77Updated last year
• FrostMiKu / ChatGLM-LangChain
  ChatGLM 6B 的模型与UI，通过 LangChain 与向量匹配实现本地知识库问答，支持流式输出
  ☆115Updated 2 years ago
• MoranCoder95 / pipeline-ChatGLM
  流水线系统(pipeline)构建基于本地知识库的ChatGLM问答
  ☆86Updated 2 years ago
• dataelement / bisheng-unstructured
  bisheng-unstructured library
  ☆55Updated 3 months ago
• hscspring / hcgf
  Humanable Chat Generative-model Fine-tuning | LLM微调
  ☆207Updated last year
• yongzhuo / ChatGLM2-SFT
  ChatGLM2-6B微调, SFT/LoRA, instruction finetune
  ☆109Updated 2 years ago
• ChaosWang666 / Ziya-LLaMA-13B-deployment
  Ziya-LLaMA-13B是IDEA基于LLaMa的130亿参数的大规模预训练模型，具备翻译，编程，文本分类，信息抽取，摘要，文案生成，常识问答和数学计算等能力。目前姜子牙通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。本文主要用于Ziya-…
  ☆45Updated 2 years ago
• taishan1994 / qlora-chinese-LLM
  使用qlora对中文大语言模型进行微调，包含ChatGLM、Chinese-LLaMA-Alpaca、BELLE
  ☆90Updated 2 years ago
• yongzhuo / chatglm-maths
  chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu
  ☆164Updated 2 years ago
• XuekaiChen / ChatWithDoc
  大语言模型ChatGLM-6B为基座，接入文档阅读功能进行实时问答，可上传txt/docx/pdf多种文件类型。
  ☆41Updated last year
• QwenLM / vllm-gptq
  A high-throughput and memory-efficient inference and serving engine for LLMs
  ☆137Updated 8 months ago
• StarRing2022 / ChatGPTX-Uni
  实现一种多Lora权值集成切换+Zero-Finetune零微调增强的跨模型技术方案，LLM-Base+LLM-X+Alpaca，初期，LLM-Base为Chatglm6B底座模型，LLM-X是LLAMA增强模型。该方案简易高效，目标是使此类语言模型能够低能耗广泛部署，并最…
  ☆117Updated 2 years ago
• blcuicall / taoli
  "桃李“: 国际中文教育大模型
  ☆183Updated last year
• siat-nlp / HanFei
  国内首个全参数训练的法律大模型 HanFei-1.0 (韩非)
  ☆123Updated last year
• shibing624 / chatgpt-webui
  ChatGPT WebUI using gradio. 给 LLM 对话和检索知识问答RAG提供一个简单好用的Web UI界面
  ☆133Updated last year
• uniai-lab / GLM-API
  Customize APIs from GLM, ChatGLM
  ☆69Updated 7 months ago
• chatchat-space / chatchat-knowledgebase
  属于每个人的公众号”查特查特“上线啦！新问题、新方法、新发现，欢迎提PR！
  ☆47Updated last year
• duanyu / LabelFast
  中文世界的NLP自动标注开源工具，简单样本，交给LabelFast。
  ☆75Updated 7 months ago