ChaimEvans / ChatGLM_MultiGPUCPU_eval
✅4g GPU可用 | 简易实现ChatGLM单机调用多个计算设备(GPU、CPU)进行推理
☆34Updated last year
Alternatives and similar repositories for ChatGLM_MultiGPUCPU_eval:
Users that are interested in ChatGLM_MultiGPUCPU_eval are comparing it to the libraries listed below
- 实现Blip2RWKV+QFormer的多模态图文对话大模型,使用Two-Step Cognitive Psychology Prompt方法,仅3B参数的模型便能够出现类人因果思维链。对标MiniGPT-4,ImageBind等图文对话大语言模型,力求以更小的算力和资源实…☆38Updated last year
- 实现一种多Lora权值集成切换+Zero-Finetune零微调增强的跨模型技术方案,LLM-Base+LLM-X+Alpaca,初期,LLM-Base为Chatglm6B底座模型,LLM-X是LLAMA增强模型。该方案简易高效,目标是使此类语言模型能够低能耗广泛部署,并最…☆116Updated last year
- self-host ChatGLM-6B API made with fastapi☆78Updated 2 years ago
- Customize APIs from GLM, ChatGLM☆68Updated last month
- 打造人人都会的NLP,开源不易,记得star哦☆101Updated last year
- 多显卡部署版 | ChatGLM-6B:开源双语对话语言模型 | An Open Bilingual Dialogue Language Model☆62Updated 2 years ago
- 👋 欢迎来到 ChatGLM 创意世界!你可以使用修订和续写的功能来生成创意内容!☆247Updated 8 months ago
- rwkv finetuning☆36Updated 11 months ago
- deep learning☆150Updated 2 weeks ago
- chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu☆164Updated last year
- 使用langchain进行任务规划,构建子任务的会话场景资源,通过MCTS任务执行器,来让每个子任务通过在上下文中资源,通过自身反思探索来获取自身对问题的最优答案;这种方式依赖模型的对齐偏好,我们在每种偏好上设计了一个工程框架,来完成自我对不同答案的奖励进行采样策略☆29Updated this week
- moss chat finetuning☆50Updated 11 months ago
- 使用甄嬛语料微调的chatglm☆84Updated last year
- 骆驼QA,中文大语言阅读理解模型。☆75Updated last year
- Humanable Chat Generative-model Fine-tuning | LLM微调☆206Updated last year
- 基于sentence transformers和chatglm实现的文档搜索工具☆154Updated last year
- 基于中文法律知识的ChatGLM指令微调☆44Updated last year
- backend for fastnlp MOSS project☆60Updated 8 months ago
- Kanchil(鼷鹿)是世界上最小的偶蹄目动物,这个开源项目意在探索小模型(6B以下)是否也能具备和人类偏好对齐的能力。☆113Updated last year
- 基于 LoRA 和 P-Tuning v2 的 ChatGLM-6B 高效参数微调☆54Updated last year
- ChatGLM-6B-Slim:裁减掉20K图片Token的ChatGLM-6B,完全一样的性能,占用更小的显存。☆126Updated last year
- 用于微调LLM的中文指令数据集☆27Updated last year
- ChatGLM-6B fine-tuning.☆135Updated last year
- 利用LLM+敏感词库,来自动判别是否涉及敏感词。☆112Updated last year
- 首个llama2 13b 中文版模型 (Base + 中文对话SFT,实现流畅多轮人机自然语言交互)☆90Updated last year
- share data, prompt data , pretraining data☆36Updated last year
- ChatGLM2-6B微调, SFT/LoRA, instruction finetune☆106Updated last year
- Just for debug☆56Updated last year
- 使用qlora对中文大语言模型进行微调,包含ChatGLM、Chinese-LLaMA-Alpaca、BELLE☆85Updated last year
- (1)弹性区间标准化的旋转位置词嵌入编码器+peft LORA量化训练,提高万级tokens性能支持。(2)证据理论解释学习,提升模型的复杂逻辑推理能力(3)兼容alpaca数据格式。☆45Updated last year