FunnySaltyFish / bilibili_comments_crawlLinks
基于 B 站评论区数据构建大语言模型训练用对话数据集
☆57Updated 11 months ago
Alternatives and similar repositories for bilibili_comments_crawl
Users that are interested in bilibili_comments_crawl are comparing it to the libraries listed below
Sorting:
- 从小说中提取对话数据集☆282Updated 2 months ago
- 【逐条处理完成】人为审核+修改每一条的弱智吧精选问题QA数据集☆237Updated 7 months ago
- 基于ChatGLM3基座模型和LLAMA-Factory框架进行微调的一个中医问答机器人☆101Updated last year
- Chat-甄嬛是利用《甄嬛传》剧本中所有关于甄嬛的台词和语句,基于ChatGLM2进行LoRA微调得到的模仿甄嬛语气的聊天语言模型。☆765Updated 6 months ago
- 大语言模型微调,Qwen2VL、Qwen2、GLM4指令微调☆564Updated 5 months ago
- 从0开始,将chatgpt的技术路线跑一遍。☆267Updated last year
- FinQwen: 致力于构建一个开放、稳定、高质量的金融大模型项目,基于大模型搭建金融场景智能问答系统,利用开源开放来促进「AI+金融」。☆419Updated last year
- 尝试自己从头写一个LLM,参考llama和nanogpt☆69Updated last year
- Retriever-0.1B☆95Updated last year
- 从0到1构建一个MiniLLM (pretrain+sft+dpo实践中)☆500Updated 8 months ago
- 中文对话0.2B小模型(ChatLM-Chinese-0.2B),开源所有数据集来源、数据清洗、tokenizer训练、模型预训练、SFT指令微调、RLHF优化等流程的全部代码。支持下游任务sft微调,给出三元组信息抽取微调示例。☆1,637Updated last year
- ☆30Updated last year
- Phi2-Chinese-0.2B 从0开始训练自己的Phi2中文小模型,支持接入langchain加载本地知识库做检索增强生成RAG。Training your own Phi2 small chat model from scratch.☆577Updated last year
- RAG-QA-Generator 是一个用于检索增强生成(RAG)系统的自动化知识库构建与管理工具。该工具通过读取文档数据,利用大规模语言模型生成高质量的问答对(QA对),并将这些数据插入数据库中,实现RAG系统知识库的自动化构建和管理。☆248Updated 10 months ago
- 手把手带你从0到1实现大模型agent☆121Updated last year
- LLaMA-Factory使用经验记录☆40Updated last year
- 这是一个一键让小参数大模型进行角色扮演的项目,从数据构成和训练都包含在这项目中