liukangjia666 / qwen_data_processLinks
针对qwen微调模型进行数据预处理
☆14Updated last year
Alternatives and similar repositories for qwen_data_process
Users that are interested in qwen_data_process are comparing it to the libraries listed below
Sorting:
- 纯c++的全平台llm加速库，支持python调用，支持baichuan, glm, llama, moss基座，手机端流畅运行chatglm-6B级模型单卡可达10000+token / s，☆45Updated last year
- 基于chatglm快速搭建文档问答机器人☆88Updated 2 years ago
- chatglm-6B for tools application using langchain☆75Updated 2 years ago
- 首个llama2 13b 中文版模型 （Base + 中文对话SFT，实现流畅多轮人机自然语言交互)☆90Updated last year
- 五分钟NLP 知识☆43Updated 4 years ago
- 基于sentence transformers和chatglm实现的文档搜索工具☆154Updated 2 years ago
- 属于每个人的公众号”查特查特“上线啦！新问题、新方法、新发现，欢迎提PR！☆45Updated last year
- llama inference for tencentpretrain☆98Updated last year
- ChatGLM2-6B微调, SFT/LoRA, instruction finetune☆108Updated last year
- 使用qlora对中文大语言模型进行微调，包含ChatGLM、Chinese-LLaMA-Alpaca、BELLE☆86Updated last year
- 演示 vllm 对中文大语言模型的神奇效果☆31Updated last year
- kbqa,langchain,large langauge model, chatgpt☆80Updated 7 months ago
- chatglm3base模型的有监督微调SFT☆76Updated last year
- 国内首个全参数训练的法律大模型 HanFei-1.0 (韩非)☆116Updated last year
- Alpaca Chinese Dataset -- 中文指令微调数据集☆205Updated 7 months ago
- 中文大模型微调(LLM-SFT), 数学指令数据集MWP-Instruct, 支持模型(ChatGLM-6B, LLaMA, Bloom-7B, baichuan-7B), 支持(LoRA, QLoRA, DeepSpeed, UI, TensorboardX), 支持(微…☆201Updated last year
- Integrating ONgDB database into langchain ecosystem☆77Updated 2 years ago
- （1）弹性区间标准化的旋转位置词嵌入编码器+peft LORA量化训练 ，提高万级tokens性能支持。（2）证据理论解释学习，提升模型的复杂逻辑推理能力（3）兼容alpaca数据格式。☆44Updated last year
- unify-easy-llm（ULM）旨在打造一个简易的一键式大模型训练工具，支持Nvidia GPU、Ascend NPU等不同硬件以及常用的大模型。☆55Updated 10 months ago
- A dataset template for guiding chat-models to self-cognition, including information about the model’s identity, capabilities, usage, limi…☆28Updated last year
- 中文聊天小模型，用t5 base在大量数据上有监督。☆100Updated last year
- 对深度学习中的NLP进行解释和代码使用☆52Updated last year
- chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu☆164Updated last year
- "桃李“: 国际中文教育大模型☆179Updated last year
- ChatGLM-6B fine-tuning.☆135Updated 2 years ago
- 供AI训练的中文数据集（持续更新。。。）与AI公司图谱，目前的数据集餐饮行业8000问，百度知道，Alpaca中文数据集，计算机领域数据集，Vicuna数据集，RedPajama数据集，Wikipedia中文词条数据集，网站论坛问答数据集☆57Updated last year
- qwen models finetuning☆98Updated 2 months ago
- 大语言模型微调的项目，包含了使用QLora微调ChatGLM和LLama☆27Updated last year
- Q&A based on elasticsearch+langchain+chatglm2 ｜ 基于elasticsearch，langchain，chatglm2的自有知识库问答☆241Updated last year
- Pytorch implementation of JointBERT: "BERT for Joint Intent Classification and Slot Filling"☆38Updated last year