Alternatives and similar repositories for aigc_serving:

Users that are interested in aigc_serving are comparing it to the libraries listed below

• imClumsyPanda / ChatGLM-6B-API
  self-host ChatGLM-6B API made with fastapi
  ☆78Updated 2 years ago
• zhangnn520 / znn_chatglm
  打造人人都会的NLP，开源不易，记得star哦
  ☆101Updated last year
• yongzhuo / chatglm-maths
  chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu
  ☆164Updated last year
• blcuicall / taoli
  "桃李“: 国际中文教育大模型
  ☆177Updated last year
• ProjectD-AI / llama_inference
  llama inference for tencentpretrain
  ☆98Updated last year
• iMagist486 / ElasticSearch-Langchain-Chatglm2
  Q&A based on elasticsearch+langchain+chatglm2 ｜ 基于elasticsearch，langchain，chatglm2的自有知识库问答
  ☆239Updated last year
• QwenLM / vllm-gptq
  A high-throughput and memory-efficient inference and serving engine for LLMs
  ☆134Updated 4 months ago
• gameofdimension / vllm-cn
  演示 vllm 对中文大语言模型的神奇效果
  ☆31Updated last year
• shibing624 / chatgpt-webui
  ChatGPT WebUI using gradio. 给 LLM 对话和检索知识问答RAG提供一个简单好用的Web UI界面
  ☆123Updated 8 months ago
• yongzhuo / ChatGLM2-SFT
  ChatGLM2-6B微调, SFT/LoRA, instruction finetune
  ☆107Updated last year
• shuyhere / all-about-llm
  大语言模型训练和服务调研
  ☆37Updated last year
• wordweb / langchain-ChatGLM-and-TigerBot
  从langchain-ChatGLM基础上修改的一个可以加载TigerBot模型的基于本地知识库的问答应用，目标期望建立一套对中文场景与开源模型支持友好、可离线运行的知识库问答解决方案。
  ☆106Updated last year
• billvsme / my_openai_api
  部署你自己的OpenAI api🤩, 基于flask, transformers (使用 Baichuan2-13B-Chat-4bits 模型, 可以运行在单张Tesla T4显卡) ，实现了OpenAI中Chat, Models和Completions接口，包含流式响…
  ☆92Updated last year
• yuanzhoulvpi2017 / DocumentSearch
  基于sentence transformers和chatglm实现的文档搜索工具
  ☆154Updated 2 years ago
• billvsme / train_law_llm
  ✏️0成本LLM微调上手项目，⚡️一步一步使用colab训练法律LLM，基于microsoft/phi-1_5、chatglm3，包含lora微调，全参微调
  ☆72Updated last year
• hscspring / hcgf
  Humanable Chat Generative-model Fine-tuning | LLM微调
  ☆206Updated last year
• LC1332 / Luotuo-QA
  骆驼QA，中文大语言阅读理解模型。
  ☆74Updated last year
• shibing624 / lmft
  ChatGLM-6B fine-tuning.
  ☆135Updated last year
• ChaosWang666 / Ziya-LLaMA-13B-deployment
  Ziya-LLaMA-13B是IDEA基于LLaMa的130亿参数的大规模预训练模型，具备翻译，编程，文本分类，信息抽取，摘要，文案生成，常识问答和数学计算等能力。目前姜子牙通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。本文主要用于Ziya-…
  ☆45Updated last year
• Executedone / ChatGLM4Tools
  chatglm-6B for tools application using langchain
  ☆75Updated last year
• kaixindelele / ChatSensitiveWords
  利用LLM+敏感词库，来自动判别是否涉及敏感词。
  ☆118Updated last year
• siat-nlp / HanFei
  国内首个全参数训练的法律大模型 HanFei-1.0 (韩非)
  ☆116Updated last year
• Crossme0809 / langchain-tutorials
  ☆74Updated last year
• CrazyBoyM / llama2-Chinese-chat
  首个llama2 13b 中文版模型 （Base + 中文对话SFT，实现流畅多轮人机自然语言交互)
  ☆90Updated last year
• mMrBun / AIPC
  ☆58Updated 5 months ago
• sdaaron / QueryGPT
  基于Langchain 的自然语言表格数据查询工具 A Natural Language Tabular Data Query Tool based on Langchain
  ☆145Updated last year
• llm-factory / imitater
  Imitate OpenAI with Local Models
  ☆88Updated 7 months ago
• Rookie1019 / Llama-3-8B-Instruct-Chinese
  LLama3中文个人版本
  ☆39Updated 11 months ago
• RonaldJEN / FinanceChatGLM
  SMP 2023 ChatGLM金融大模型挑战赛 60 分baseline思路介绍
  ☆184Updated last year
• lilongxian / BaiYang-chatGLM2-6B
  （1）弹性区间标准化的旋转位置词嵌入编码器+peft LORA量化训练，提高万级tokens性能支持。（2）证据理论解释学习，提升模型的复杂逻辑推理能力（3）兼容alpaca数据格式。
  ☆44Updated last year