ArtificialZeng / Qwen-Explained
千问14B和7B的逐行解释
☆55Updated last year
Alternatives and similar repositories for Qwen-Explained:
Users that are interested in Qwen-Explained are comparing it to the libraries listed below
- ChatGLM2-6B微调, SFT/LoRA, instruction finetune☆105Updated last year
- 纯c++的全平台llm加速库，支持python调用，支持baichuan, glm, llama, moss基座，手机端流畅运行chatglm-6B级模型单卡可达10000+token / s，☆45Updated last year
- 实现了Baichuan-Chat微调，Lora、QLora等各种微调方式，一键运行。☆71Updated last year
- 中文原生检索增强生成测评基准☆109Updated 10 months ago
- 使用qlora对中文大语言模型进行微调，包含ChatGLM、Chinese-LLaMA-Alpaca、BELLE☆85Updated last year
- （1）弹性区间标准化的旋转位置词嵌入编码器+peft LORA量化训练，提高万级tokens性能支持。（2）证据理论解释学习，提升模型的复杂逻辑推理能力（3）兼容alpaca数据格式。☆45Updated last year
- SMP 2023 ChatGLM金融大模型挑战赛 60 分baseline思路介绍☆184Updated last year
- 骆驼QA，中文大语言阅读理解模型。☆74Updated last year
- Ziya-LLaMA-13B是IDEA基于LLaMa的130亿参数的大规模预训练模型，具备翻译，编程，文本分类，信息抽取，摘要，文案生成，常识问答和数学计算等能力。目前姜子牙通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。本文主要用于Ziya-…☆45Updated last year
- moss chat finetuning☆50Updated 9 months ago
- 大型语言模型实战指南：应用实践与场景落地☆57Updated 5 months ago
- 基于chatglm快速搭建文档问答机器人☆88Updated last year
- large language model training-3-stages+deployment☆47Updated last year
- 基于 LoRA 和 P-Tuning v2 的 ChatGLM-6B 高效参数微调☆54Updated last year
- 大语言模型指令调优工具（支持 FlashAttention）☆169Updated last year
- ChatGLM2-6B-Explained☆35Updated last year
- qwen-7b and qwen-14b finetuning☆90Updated 10 months ago
- 微调ChatGLM☆124Updated last year
- chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu☆164Updated last year
- share data， prompt data , pretraining data☆35Updated last year
- basic framework for rag(retrieval augment generation)☆82Updated last year
- ☆105Updated last year
- 部署你自己的OpenAI api🤩, 基于flask, transformers (使用 Baichuan2-13B-Chat-4bits 模型, 可以运行在单张Tesla T4显卡) ，实现了OpenAI中Chat, Models和Completions接口，包含流式响…☆89Updated last year
- A dataset template for guiding chat-models to self-cognition, including information about the model’s identity, capabilities, usage, limi…☆26Updated last year
- 想要从零开始训练一个中文的mini大语言模型，可以进行基本的对话，模型大小根据手头的机器决定☆56Updated 6 months ago
- Baichuan2代码的逐行解析版本，适合小白☆212Updated last year
- ☆23Updated last year
- Qwen1.5-SFT(阿里, Ali), Qwen_Qwen1.5-2B-Chat/Qwen_Qwen1.5-7B-Chat微调(transformers)/LORA(peft)/推理☆53Updated 9 months ago
- 在中文开源大模型的基础上进行定制化的微调，拥有自己专属的语言模型。☆46Updated last year
- 大语言模型训练和服务调研☆36Updated last year