datawhalechina / llms-from-scratch-cn
仅需Python基础,从0构建大语言模型;从0逐步构建GLM4\Llama3\RWKV6, 深入理解大模型原理
☆1,458Updated 2 months ago
Related projects ⓘ
Alternatives and complementary repositories for llms-from-scratch-cn
- 《大模型白盒子构建指南》:一个全手搓的Tiny-Universe☆1,325Updated last week
- 大模型基础: 一文了解大模型基础知识☆2,915Updated last week
- 从零实现一个 llama3 中文版☆529Updated 4 months ago
- 🧑🚀 全世界最好的LLM资料总结 | Summary of the world's best LLM resources.☆2,139Updated this week
- 《大语言模型》作者:赵鑫,李军毅,周昆,唐天一,文继荣☆2,286Updated 6 months ago
- Practice to LLM.☆448Updated last week
- 本项目是一个面向小白开发者的大模型应用开发教程,在线阅读地址:https://datawhalechina.github.io/llm-universe/☆4,706Updated last month
- ☆479Updated last week
- 「大模型」3小时完全从0训练26M的小参数GPT,个人显卡即可推理训练!☆2,603Updated this week
- LLM&VLM Tutorial☆1,503Updated this week
- Transformers 库快速入门教程☆1,103Updated last month
- 《动手学大模型Dive into LLMs》系列编程实践教程☆3,687Updated last month
- 李白 作为唐代杰出诗人,其诗歌作品在中国文学史上具有重要地位。近年来,随着数字技术和人工智能的快速发展,传统文化普及推广的形式也面临着创新与变革。国内外对于李白诗歌的研究虽已相当深入,但在数字化、智能化普及方面仍存在不足。因此,本项目旨在通过构建李白知识图谱,结合大模…☆1,242Updated 2 months ago
- Examples and guides for using the GLM APIs☆795Updated 3 weeks ago
- 中文对话0.2B小模型(ChatLM-Chinese-0.2B),开源所有数据集来源、数据清洗、tokenizer训练、模型预训练、SFT指令微调、RLHF优化等流程的全部代码。支持下游任务sft微调,给出三元组信息抽取微调示例。☆1,228Updated 6 months ago
- A comprehensive library for implementing LLMs, including a unified training pipeline and comprehensive model evaluation.☆626Updated this week
- 制作懂人情世故的大语言模型 | 提示词工程、RAG、Agent、微调全流程教程☆852Updated this week
- Llama3-Tutorial(XTuner、LMDeploy、OpenCompass)☆490Updated 6 months ago
- ☆873Updated 2 weeks ago
- 中文羊驼大模型三期项目 (Chinese Llama-3 LLMs) developed from Meta Llama 3☆1,675Updated last month
- ☆152Updated 6 months ago
- 【LLMs九层妖塔】分享 LLMs在自然语言处理(ChatGLM、Chinese-LLaMA-Alpaca、小羊驼 Vicuna、LLaMA、GPT4ALL等)、信息检索(langchain)、语言合成、语言识别、多模态等领域(Stable Diffusion、MiniGP…☆1,785Updated 7 months ago
- Learning Large Language Model (LLM)(大语言模型学习)☆321Updated 7 months ago
- 《开源大模型食用指南》基于Linux环境快速部署开源大模型,更适合中国宝宝的部署教程☆9,195Updated 2 weeks ago
- 《Pytorch实用教程》(第二版)无论是零基础入门,还是CV、NLP、LLM项目应用,或是进阶工程化部署落地,在这里都有。相信在本书的帮助下,读者将能够轻松掌握 PyTorch 的使用,成为一名优秀的深度学习工程师。☆2,564Updated this week
- LLM全栈优质资源汇总☆357Updated last month
- 利用LLM构建应用实践笔记☆623Updated 6 months ago
- Chat-甄嬛是利用《甄嬛传》剧本中所有关于甄嬛的台词和语句,基于ChatGLM2进行LoRA微调得到的模仿甄嬛语气的聊天语言模型。☆504Updated 2 months ago
- 「大模型」3小时从0训练27M参数的视觉多模态VLM,个人显卡即可推理训练!☆338Updated last week
- 用于从头预训练+SFT一个小参数量的中文LLaMa2的仓库;24G单卡即可运行得到一个具备简单中文问答能力的chat-llama2.☆2,526Updated 5 months ago