percent4 / llm_4_doc_qa
本项目用于文档问答,使用向量嵌入 + ES 做召回,使用Rerank模型作为精排,再使用LLM做文档问答,Web框架使用Flask。
☆22Updated 11 months ago
Related projects ⓘ
Alternatives and complementary repositories for llm_4_doc_qa
- basic framework for rag(retrieval augment generation)☆75Updated 11 months ago
- 基于BM25、BGE的检索增强生成RAG示例☆100Updated 3 weeks ago
- 阿里天池: 2023全球智能汽车AI挑战赛——赛道一:AI大模型检索问答 baseline 80+☆78Updated 10 months ago
- kbqa,langchain,large langauge model, chatgpt☆78Updated last month
- 本项目用于Embedding模型的相关实验,包括Embedding模型评估、Embedding模型微调、Embedding模型量化等。☆29Updated 4 months ago
- 基于pytorch的中文意图识别和槽位填充☆143Updated 4 months ago
- 2023全球智能汽车AI挑战赛——赛道一:AI大模型检索问答, 75+ baseline☆56Updated 11 months ago
- 本项目是针对RAG中的Retrieve阶段的召回技术及算法效果所做评估实验。使用主体框架为LlamaIndex.☆179Updated 3 months ago
- 大 语言模型微调,Qwen2VL、Qwen2、GLM4指令微调☆212Updated this week
- ChatGLM2-6B微调, SFT/LoRA, instruction finetune☆106Updated last year
- Integrating ONgDB database into langchain ecosystem☆77Updated last year
- 基于知识图谱的智能问答系统,包含意图识别与类知识库送入LLM方法☆46Updated 9 months ago
- Baichuan-13B 指令微调☆89Updated last year
- 文本相似度,语义向量,文本向量,text-similarity,similarity, sentence-similarity,BERT,SimCSE,BERT-Whitening,Sentence-BERT, PromCSE, SBERT☆69Updated 7 months ago
- chatglm-6B for tools application using langchain☆76Updated last year
- experiments of some semantic matching models and comparison of experimental results.☆159Updated last year
- LLM for NER☆55Updated 3 months ago
- llama信息抽取实战☆97Updated last year
- TechGPT: Technology-Oriented Generative Pretrained Transformer☆214Updated last year
- ChatGPT WebUI using gradio. 给 LLM 对话和检索知识问答RAG提供一个简单好用的Web UI界面☆93Updated 3 months ago
- 通用版面分析 | 中文文档解析 |Document Layout Analysis | layout paser☆45Updated 5 months ago
- 该项目是为了使用layoutlmv3针对中文图片训练和推理。 其中主要解决三个问题: 1.数据标准化成可以的训练数据集格式 2.layoutlmv3-base-chinese 分词修改 2.超过512长度的文本切分和滑窗操作☆33Updated 2 months ago
- 学习开源chatGPT类模型的指南,汇总各种训练数据获取、模型微调、模型服务的方法,以及记录自己操作总遇到的各种常见坑,欢迎收藏、转发,希望能帮你省一些时间☆70Updated last year
- change pdf to txt☆65Updated last year
- (1)弹性区间标准化的旋转位置词嵌入编码器+peft LORA量化训练,提高万级tokens性能支持。(2)证据理论解释学习,提升模型的复杂逻辑推理能力(3)兼容alpaca数据格式。☆45Updated last year
- 基于sentence transformers和chatglm实现的文档搜索工具☆154Updated last year
- baichuan LLM surpervised finetune by lora☆60Updated last year
- 雅意信息抽取大模型:在百万级人工构造的高质量信息抽取数据上进行指令微调,由中科闻歌算法团队研发。 (Repo for YAYI Unified Information Extraction Model)☆269Updated 3 months ago
- 基于pytorch的百度UIE命名实体识别。☆54Updated last year