GitHub License GitHub Release GitHub commit activity GitHub Repo stars GitHub forks

TensorRT-YOLO 是一个支持 YOLOv3、YOLOv5、YOLOv6、YOLOv7、YOLOv8、YOLOv9、YOLOv10、YOLO11、PP-YOLOE 和 PP-YOLOE+ 的推理加速项目,使用 NVIDIA TensorRT 进行优化。项目不仅集成了 TensorRT 插件以增强后处理效果,还使用了 CUDA 核函数以及 CUDA 图来加速推理。TensorRT-YOLO 提供了 C++ 和 Python 推理的支持,旨在提供快速而优化的目标检测解决方案。

• 支持 YOLOv3、YOLOv5、YOLOv6、YOLOv7、YOLOv8、YOLOv9、YOLOv10、YOLO11、PP-YOLOE 和 PP-YOLOE+
• 支持 Detection 与 OBB Detection 模型
• 支持 ONNX 静态、动态导出以及 TensorRT 推理
• 集成 TensorRT 插件加速后处理
• 利用 CUDA 核函数加速前处理
• 利用 CUDA 图加速推理流程
• 支持 C++ 和 Python 推理
• CLI 快速导出与推理
• Docker 一键部署

• 推荐 CUDA 版本 >= 11.6
• 推荐 TensorRT 版本 >= 8.6

• 快速编译安装

• 使用 CLI 模型导出

• 模型推理示例

• 视频分析示例

• 【TensorRT-YOLO】你的YOLO快速部署工具

• 【TensorRT-YOLO】TensorRT 自定义插件加速 YOLO OBB 部署演示

• 【TensorRT-YOLO】接入 VideoPipe 演示

• 【TensorRT-YOLO】CUDA Graphs 加速推理

• 【TensorRT-YOLO】3.0 Docker 部署演示

开源不易,如果本项目有帮助到你的话,可以考虑请作者喝杯咖啡,你的支持是开发者持续维护的最大动力~

推荐使用支付宝,微信获取不到头像。转账请备注【TensorRT-YOLO】。

TensorRT-YOLO采用 GPL-3.0许可证,这个OSI 批准的开源许可证非常适合学生和爱好者,可以推动开放的协作和知识分享。请查看LICENSE 文件以了解更多细节。

感谢您选择使用 TensorRT-YOLO,我们鼓励开放的协作和知识分享,同时也希望您遵守开源许可的相关规定。

对于 TensorRT-YOLO 的错误报告和功能请求,请访问 GitHub Issues!