ChaimEvans / ChatGLM_MultiGPUCPU_eval
✅4g GPU可用 | 简易实现ChatGLM单机调用多个计算设备（GPU、CPU）进行推理
☆34Updated 2 years ago
Alternatives and similar repositories for ChatGLM_MultiGPUCPU_eval:
Users that are interested in ChatGLM_MultiGPUCPU_eval are comparing it to the libraries listed below
- 实现Blip2RWKV+QFormer的多模态图文对话大模型，使用Two-Step Cognitive Psychology Prompt方法，仅3B参数的模型便能够出现类人因果思维链。对标MiniGPT-4，ImageBind等图文对话大语言模型，力求以更小的算力和资源实…☆38Updated last year
- 实现一种多Lora权值集成切换+Zero-Finetune零微调增强的跨模型技术方案，LLM-Base+LLM-X+Alpaca，初期，LLM-Base为Chatglm6B底座模型，LLM-X是LLAMA增强模型。该方案简易高效，目标是使此类语言模型能够低能耗广泛部署，并最…☆115Updated last year
- rwkv finetuning☆36Updated last year
- self-host ChatGLM-6B API made with fastapi☆78Updated 2 years ago
- 👋 欢迎来到 ChatGLM 创意世界！你可以使用修订和续写的功能来生成创意内容！☆247Updated 10 months ago
- Customize APIs from GLM, ChatGLM☆68Updated 3 months ago
- Kanchil（鼷鹿）是世界上最小的偶蹄目动物，这个开源项目意在探索小模型（6B以下）是否也能具备和人类偏好对齐的能力。☆113Updated 2 years ago
- 多显卡部署版 | ChatGLM-6B：开源双语对话语言模型 | An Open Bilingual Dialogue Language Model☆62Updated 2 years ago
- 骆驼QA，中文大语言阅读理解模型。☆74Updated last year
- chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu☆164Updated last year
- Humanable Chat Generative-model Fine-tuning | LLM微调☆206Updated last year
- deep learning☆149Updated this week
- 基于中文法律知识的ChatGLM指令微调☆44Updated 2 years ago
- ChatGLM-6B-Slim：裁减掉20K图片Token的ChatGLM-6B，完全一样的性能，占用更小的显存。☆126Updated 2 years ago
- 使用langchain进行任务规划，构建子任务的会话场景资源，通过MCTS任务执行器，来让每个子任务通过在上下文中资源，通过自身反思探索来获取自身对问题的最优答案；这种方式依赖模型的对齐偏好，我们在每种偏好上设计了一个工程框架，来完成自我对不同答案的奖励进行采样策略☆29Updated 3 weeks ago
- 打造人人都会的NLP，开源不易，记得star哦☆101Updated 2 years ago
- 基于 LoRA 和 P-Tuning v2 的 ChatGLM-6B 高效参数微调☆55Updated last year
- 使用qlora对中文大语言模型进行微调，包含ChatGLM、Chinese-LLaMA-Alpaca、BELLE☆86Updated last year
- ChatGLM-6B fine-tuning.☆135Updated 2 years ago
- 利用LLM+敏感词库，来自动判别是否涉及敏感词。☆119Updated last year
- 基于sentence transformers和chatglm实现的文档搜索工具☆154Updated 2 years ago
- Just for debug☆56Updated last year
- CamelBell（驼铃) is be a Chinese Language Tuning project based on LoRA. CamelBell is belongs to Project Luotuo(骆驼), an open sourced Chinese-…☆173Updated last year
- 使用甄嬛语料微调的chatglm☆85Updated 2 years ago
- SearchGPT: Building a quick conversation-based search engine with LLMs.☆46Updated 4 months ago
- 国内首个全参数训练的法律大模型 HanFei-1.0 (韩非)☆116Updated last year
- 首个llama2 13b 中文版模型 （Base + 中文对话SFT，实现流畅多轮人机自然语言交互)☆90Updated last year
- moss chat finetuning☆50Updated last year
- 部署你自己的OpenAI api🤩, 基于flask, transformers (使用 Baichuan2-13B-Chat-4bits 模型, 可以运行在单张Tesla T4显卡) ，实现了OpenAI中Chat, Models和Completions接口，包含流式响…☆93Updated last year
- llama inference for tencentpretrain☆98Updated last year