taishan1994 / sentencepiece_chinese_bpe
使用sentencepiece中BPE训练中文词表,并在transformers中进行使用。
☆107Updated last year
Related projects: ⓘ
- 大语言模型指令调优工具(支持 FlashAttention)☆162Updated 8 months ago
- 中文 Instruction tuning datasets☆112Updated 5 months ago
- baichuan LLM surpervised finetune by lora☆57Updated last year
- text embedding☆133Updated last year
- 欢迎来到 "LLM-travel" 仓库!探索大语言模型(LLM)的奥秘 🚀。致力于深入理解、探讨以及实现与大模型相关的各种技术、原理和应用。☆246Updated last month
- Baichuan-13B 指令微调