Alternatives and similar repositories for Qwen2.openvino

Users that are interested in Qwen2.openvino are comparing it to the libraries listed below

• sophgo / ChatGLM3-TPU
  run chatglm3-6b in BM1684X
  ☆39Updated last year
• 1694439208 / GOT-OCR-Inference
  研究GOT-OCR-项目落地加速，不限语言
  ☆63Updated last year
• ouwei2013 / baichuan13b.cpp
  ggml implementation of the baichuan13b model (adapted from llama.cpp)
  ☆55Updated 2 years ago
• AI-Study-Han / Mini-Llama2-Chinese
  想要从零开始训练一个中文的mini大语言模型，可以进行基本的对话，模型大小根据手头的机器决定
  ☆65Updated last year
• DataXujing / Qwen1.5-0.5b-chat-android
  基于MNN-llm的安卓手机部署大语言模型：Qwen1.5-0.5B-Chat
  ☆89Updated last year
• liguodongiot / unify-easy-llm
  unify-easy-llm（ULM）旨在打造一个简易的一键式大模型训练工具，支持Nvidia GPU、Ascend NPU等不同硬件以及常用的大模型。
  ☆59Updated last year
• mobvoi / seq-monkey-data
  ☆174Updated last year
• sophgo / ChatGLM2-TPU
  run ChatGLM2-6B in BM1684X
  ☆49Updated last year
• ssbuild / qwen_finetuning
  qwen models finetuning
  ☆105Updated 10 months ago
• charent / Phi2-mini-Chinese
  Phi2-Chinese-0.2B 从0开始训练自己的Phi2中文小模型，支持接入langchain加载本地知识库做检索增强生成RAG。Training your own Phi2 small chat model from scratch.
  ☆581Updated last year
• SmartFlowAI / LLM101n-CN
  LLM101n: Let's build a Storyteller 中文版
  ☆138Updated last year
• luckycucu / duguang-ocr-onnx
  读光中英文OCR onnx 版本模型使用 | Code for using the ONNX version of DuGuang OCR in both Chinese and English
  ☆52Updated last month
• billvsme / my_openai_api
  部署你自己的OpenAI api🤩, 基于flask, transformers (使用 Baichuan2-13B-Chat-4bits 模型, 可以运行在单张Tesla T4显卡) ，实现了OpenAI中Chat, Models和Completions接口，包含流式响…
  ☆96Updated 2 years ago
• kinfey / Microsoft-Phi-3-NvidiaNIMWorkshop
  This is Microsoft-Phi-3-NvidiaNIMWorkshop
  ☆22Updated last year
• QwenLM / qwen.cpp
  C++ implementation of Qwen-LM
  ☆614Updated last year
• hyperai / vllm-cn
  vLLM Documentation in Chinese Simplified / vLLM 中文文档
  ☆143Updated 3 weeks ago
• PaddlePaddle / EasyData
  ☆101Updated 3 years ago
• chenyangMl / llama2.c-zh
  支持中文场景的的小语言模型 llama2.c-zh
  ☆150Updated last year
• yvonwin / qwen2.cpp
  qwen2 and llama3 cpp implementation
  ☆49Updated last year
• tc-mb / llama.cpp
  Port of Facebook's LLaMA model in C/C++
  ☆105Updated last month
• wangzhaode / llm-export
  llm-export can export llm model to onnx.
  ☆337Updated 2 months ago
• open-chinese / alpaca-chinese-dataset
  Alpaca Chinese Dataset -- 中文指令微调数据集
  ☆217Updated last year
• AXERA-TECH / ax-llm
  Explore LLM model deployment based on AXera's AI chips
  ☆132Updated last week
• GuoYiFantastic / IMelodist
  Music large model based on InternLM2-chat.
  ☆22Updated last year
• JimmyMa99 / Roleplay-with-XiYou
  基于《西游记》原文、白话文、ChatGPT生成数据制作的，以InternLM2微调的角色扮演多LLM聊天室。 本项目将介绍关于角色扮演类 LLM 的一切，从数据获取、数据处理，到使用 XTuner 微调并部署至 OpenXLab，再到使用 LMDeploy 部署，以 op…
  ☆106Updated last year
• CrazyBoyM / phi3-Chinese
  Phi3 中文后训练模型仓库
  ☆324Updated last year
• pandada8 / llm-inference-benchmark
  LLM 推理服务性能测试
  ☆44Updated 2 years ago
• shell-nlp / gpt_server
  gpt_server是一个用于生产级部署LLMs、Embedding、Reranker、ASR、TTS、文生图、图片编辑和文生视频的开源框架。
  ☆243Updated 2 weeks ago
• ArtificialZeng / baichuan-speedup
  纯c++的全平台llm加速库，支持python调用，支持baichuan, glm, llama, moss基座，手机端流畅运行chatglm-6B级模型单卡可达10000+token / s，
  ☆45Updated 2 years ago
• zhenlohuang / awesome-chinese-llm
  Awesome Chinese LLM: A curated list of Chinese Large Language Model 中文大语言模型数据集和模型资料汇总
  ☆163Updated last year