wjc852456 / ONNX-TensorRT-LibTorchLinks
deploy onnx models with TensorRT and LibTorch
☆19Updated 4 years ago
Alternatives and similar repositories for ONNX-TensorRT-LibTorch
Users that are interested in ONNX-TensorRT-LibTorch are comparing it to the libraries listed below
Sorting:
- NVIDIA TensorRT Hackathon 2023复赛选题：通义千问Qwen-7B用TensorRT-LLM模型搭建及优化☆43Updated 2 years ago
- 使用ONNXRuntime部署PicoDet目标检测，包含C++和Python两个版本的程序☆30Updated 3 years ago
- 天池 NVIDIA TensorRT Hackathon 2023 —— 生成式AI模型优化赛 初赛第三名方案☆50Updated 2 years ago
- 使用ONNXRuntime部署PP-YOLOE目标检测，支持PP-YOLOE-s、PP-YOLOE-m、PP-YOLOE-l、PP-YOLOE-x四种结构，包含C++和Python两个版本的程序☆21Updated 3 years ago
- ☢️ TensorRT 2023复赛——基于TensorRT-LLM的Llama模型推断加速优化☆51Updated 2 years ago
- 使用OpenCV部署L2CS-Net人脸朝向估计，包含C++和Python两个版本的程序，只依赖opencv库就可以运行☆20Updated 2 years ago
- YOLOX with NCNN/MNN/TNN/ONNXRuntime C++.☆13Updated 3 years ago
- 大模型API性能指标比较 - 深入分析TTFT、TPS等关键指标☆19Updated last year
- 手摸手 美团 YOLOv6模型训练和TensorRT端到端部署方案教程☆34Updated 3 years ago
- Deploy deep learning model on difference hardware and framework. (TensorRT/ONNX/MNN/RKNN)☆13Updated 3 years ago
- 使用ONNXRuntime部署Detic检测2万1千种类别的物体，包含C++和Python两个版本的程序☆17Updated 2 years ago
- c++ version of yolov7-mask with ncnn☆59Updated 3 years ago
- 使用ONNXRuntime部署anchor-free系列的YOLOR，包含C++和Python两种版本的程序☆41Updated 4 years ago
- 国内外数据竞赛资讯整理☆18Updated 4 years ago
- 基于rknn的yolov5的cpp实现，包含各种依赖库，是一个完整工程，可直接编译运行☆21Updated 3 years ago
- qwen2 and llama3 cpp implementation☆49Updated last year
- tensorrt yolov7 without onnxparser☆24Updated 2 years ago
- TensorRT简明教程☆26Updated 4 years ago
- yolov5_ncnn in ununtu16.04☆10Updated 5 years ago
- 陆续开源医疗行业的深度学习模型及数据集☆13Updated 3 years ago
- Whisper in TensorRT-LLM☆16Updated 2 years ago
- autoTVM神经网络推理代码优化搜索演示，基于tvm编译开源模型centerface，并使用autoTVM搜索最优推理代码， 最终部署编译为c++代码，演示平台是cuda，可以是其他平台，例如树莓派，安卓手机，苹果手机．Thi is a demonstration of …☆28Updated 4 years ago
- 高性能 高精度 大陆车牌、港澳车牌、台湾车牌 韩国车牌(South Korea LPR)识别 代码开源(ncnn移植）☆38Updated last month
- 彻底弄懂BP反向传播，15行代码，C++实现也简单，MNIST分类98.29%精度☆37Updated 3 years ago
- c++实现的clip推理，模型有一点点改动，但是不大，改动和导出模型的代码可以在readme里找到，模型文件都在Releases里，包括AX650的模型。新增支持ChineseCLIP☆30Updated 5 months ago
- This project provides simple code and demonstrates how to use the TensorRT C++ API and ONNX to deploy PaddleOCR text recognition model.☆49Updated 3 years ago
- run ChatGLM2-6B in BM1684X☆50Updated last year
- Using TensorRT for Inference Model Deployment.☆49Updated last year
- cpp rotation album，基于cpp eigen实现的3d旋转相册，GAMES101复现内容☆12Updated 3 years ago
- yolov5s_ncnn_inference pipeline☆21Updated 4 years ago