shell-nlp / gpt_serverLinks
gpt_server是一个用于生产级部署LLMs、Embedding、Reranker、ASR和TTS的开源框架。
☆208Updated this week
Alternatives and similar repositories for gpt_server
Users that are interested in gpt_server are comparing it to the libraries listed below
Sorting:
- Alpaca Chinese Dataset -- 中文指令微调数据集☆213Updated 11 months ago
- An easy-to-use framework for modular RAG☆389Updated this week
- 如需体验textin文档解析,请点击https://cc.co/16YSIy☆119Updated 2 months ago
- 360LayoutAnaylsis, a series Document Analysis Models and Datasets deleveped by 360 AI Research Institute☆297Updated last year
- ☆353Updated last year
- Agentica: Effortlessly Build Intelligent, Reflective, and Collaborative Multimodal AI Agents! 构建智能的多模态AI Agent。☆203Updated 3 weeks ago
- 中文原生检索增强生成测评基准☆122Updated last year
- 添加🚀流式 Web 服务到 GraphRAG,兼容 OpenAI SDK,支持可访问的实体链接🔗,支持建议问题,兼容本地嵌入模型,修复诸多问题。Add streaming web server to GraphRAG, compatible with OpenAI SD…☆257Updated 5 months ago
- 部署你自己的OpenAI api🤩, 基于flask, transformers (使用 Baichuan2-13B-Chat-4bits 模型, 可以运行在单张Tesla T4显卡) ,实现了OpenAI中Chat, Models和Completions接口,包含流式响…☆95Updated last year
- A high-throughput and memory-efficient inference and serving engine for LLMs☆137Updated 9 months ago
- 中文大模型微调(LLM-SFT), 数学指令数据集MWP-Instruct, 支持模型(ChatGLM-6B, LLaMA, Bloom-7B, baichuan-7B), 支持(LoRA, QLoRA, DeepSpeed, UI, TensorboardX), 支持(微…☆210Updated last year
- ☆265Updated 8 months ago
- 利用免费的大模型api来结合你的私域数据来生成sft训练数据(妥妥白嫖)支持llamafactory等工具的训练数据格式synthetic data☆182Updated 9 months ago
- ChatGPT WebUI using gradio. 给 LLM 对话和检索知识问答RAG提供一个简单好用的Web UI界面☆134Updated last year
- 探索 LLM 在法律行业的应用潜力☆91Updated 9 months ago
- NLP 项目记录档案☆58Updated 4 months ago
- dify's rag patch module☆272Updated last month
- A unified tool to generate fine-tuning datasets for LLMs, including questions, answers, and dialogues. ✨🤖📚💬☆61Updated 5 months ago
- GraphRAG的应用实例,项目特点在于提供了替换OpenAI模型的方法,并通过修改原有提示和切分文档的方法,提高了GraphRAG处理中文内容的能力。☆165Updated 10 months ago
- Analysis of Chinese and English layouts 中英文版面分析☆245Updated last month
- 本项目是针对RAG中的Retrieve阶段的召回技术及算法效果所做评估实验 。使用主体框架为LlamaIndex.☆276Updated last month
- 基于大语言模型的检索增强生成RAG示例☆157Updated 4 months ago
- [ACL2025 demo track] ROGRAG: A Robustly Optimized GraphRAG Framework☆172Updated this week
- Imitate OpenAI with Local Models☆89Updated last year
- 雅意信息抽取大模型:在百万级人工构造的高质量信息抽取数据上进行指令微调,由中科闻歌算法团队研发。 (Repo for YAYI Unified Information Extraction Model)☆308Updated last year
- 一个适合学习、使 用、自主扩展的RAG【检索增强生成】系统!可联网做AI搜索☆509Updated last year
- 使用langchain进行任务规划,构建子任务的会话场景资源,通过MCTS任务执行器,来让每个子任务通过在上下文中资源,通过自身反思探索来获取自身对问题的最优答案;这种方式依赖模型的对齐偏好,我们在每种偏好上设计了一个工程框架,来完成自我对不同答案的奖励进行采样策略☆29Updated last month
- 基于ReAct手搓一个Agent Demo☆148Updated 2 months ago
- 大模型预训练中文语料清洗及质量评估 Large model pre-training corpus cleaning☆69Updated last year
- 大模型检索增强生成技术最佳实践。☆83Updated last year