基于SSD算法的电动车头盔检测【附代码】

news2024/11/26 17:49:56

本项目是基于SSD算法实现的电动车头盔检测。完整的项目是基于SSD的改进-->知识蒸馏-->自蒸馏-->剪枝-->trt推理。本想用来发论文的,但可能没那时间和精力了,这里仅选择项目中的一部分内容进行开源。

目录

开源说明

项目功能说明

项目代码的参数说明

预测

两次结果在同窗口显示

分窗口显示

单目标检测显示

剪枝

训练

训练自己的数据集

剪枝后进行模型的微调训练

FPS测试

mAP测试

torch2onnx

onnx2engine[tensorRT推理]

代码链接:

权重链接:

报错


开源说明

本项目是开源项目,近期发现有些人拿我的其他项目去发布收费资源,这种情况是不允许的,我希望我发布的开源项目是帮助大家学习交流的。后期再发现有拿我开源项目进行收费的我将举报,同时未来本人将考虑关闭所有开源项目。

另:如想用本项目发表论文或者毕设等,均需经过本人同意并且有偿或挂名,否则将会举报!

项目功能说明

1.支持训练自己的数据集

2.支持剪枝

3.支持剪枝后的微调训练

4.支持mAP测试

5.支持FPS测试

6.支持tensorRT推理

7.支持检测结果在同一窗口显示

8.支持检测结果分窗口显示

9.支持单目标检测

注:我这里实现的电动车头盔检测,是分两步进行的(所以有多窗口或者单窗口显示):第一步先对骑乘人员和电动车整体进行检测;第二步是在前一次检测结果的基础上检测是否佩戴头盔。如果想一步检测,可以用单目标检测。

这种检测方法的好处有:

        1.可以与普通行人进行区分,不会将普通行人也检测进去;

        2.如果存在一辆车上有多个人员也可以实现头盔检测;

这种检测方法的缺点:

        由于分两次检测,因此占据内存比较高,在实际应用中实时检测有影响,因为会过两次GPU。


项目代码的参数说明

(helmet_dectection.py)

--model:目标检测模型选择,现只支持SSD

--cuda:是否使用GPU,默认为True

--output:一些功能需要指定的输出路径

--conf_thres:置信度阈值,默认0.6

--iou_thres:iou阈值,默认0.5

--target_weights:第一次j检测(人与电动车整体)权重路径

--helmet_weights:第二次(只对头部)权重路径,默认为EC/model_data/pruning_2th_model.pth

--fps:测试FPS,默认False

# 支持300*300,512*512分辨率的输入

--input_shape:第一次检测输入分辨率,默认512

--input_shape2:第二次检测输入分辨率,默认512

# 剪枝,在剪枝之前需要确定是否完整保存了模型而不是仅保存权重,如果没有保存完整的网络结果需要去tools/savemodel.py保存完整的网络和权重才能进行剪枝

--pruning_model:开启剪枝(默认对vgg主干剪枝)

--pruning_weights:需要剪枝的权重

# 训练配置

--train:是否开启训练

--is_fine:是否开启剪枝后的微调训练

--pruned_model_path:剪枝后的权重路径【在微调训练的时候传入】

--batch_size:batch大小

--Init_Epoch:初始化Epoch

--Freeze_Epoch:冻结训练Epoch,默认前50Epoch冻结训练

--UnFreeze_epoch:解冻训练,默认50-100解冻训练

--UnFreeze_lr:解冻后学习率

# 预测配置

--predict:是否开启预测模式,开启后默认两次检测在一个窗口显示

--predict_2windows:检测结果在两个窗口显示(分窗显示)

--predict_single:只检测一个目标

--video:是否检测视频

--video_path:视频路径

--image:是否检测图像

--mAP:是否测试mAP

--trt:是否采用trt进行推理


预测

两次结果在同窗口显示

python helmet_dectection.py --predict --video --video_path 【your video path】  --target_weights [一次检测权重路径] --helmet_weights [二次检测权重路径]

效果如下(对头部的检测会在同意一画面的右下角显示):

电动车头盔检测

图像预测可结合上面的命令输入:

python helmet_dectection.py --predict --image

分窗口显示

--predict_2windows --video --video_path 【视频路径】 --target_weights 【第一次检测权重】 --helmet_weights 【第二次检测权重】 --input_shape 512 --input_shape2 512

此时会显示两个窗口显示两次检测的结果(该功能暂时不支持trt)

我这里附上我论文中的效果图

第一次检测
第二次头部的检测

 

单目标检测显示

如果只想对第一次或者第二次单独检测显示,可以使用该功能【注意修改config.py和classes.txt中的内容】。例如:

python helmet_dectection.py --predict_single --video --video_path [视频路径] --trt

剪枝

输入以下命令:

python helmet_dectection.py --pruning_model --pruning_weights=你需要剪枝的权重  --output=剪枝以后的权重保存在哪里

比如:

python helmet_dectection.py --pruning_model --pruning_weights=model_data/whole_model.pth  --output=model_data/

出现以下信息说明剪枝成功,剪枝后的模型将保存在model_data文件下,名字为pruning_model.pth,如果需要修改保存后权重名字和剪枝细节,去tools/Model_Pruning.py中修改

[ <DEP: prune_conv => prune_conv on vgg.24 (Conv2d(512, 512, kernel_size=(3, 3), stride=(1, 1), padding=(1, 1)))>, Index=[1, 2, 3, 5, 8, 10, 11, 13, 17, 18, 20, 25, 28, 29, 34, 36, 38, 40
, 44, 46, 50, 53, 58, 59, 60, 63, 65, 66, 68, 69, 74, 76, 81, 82, 83, 85, 87, 91, 95, 96, 97, 99, 101, 103, 109, 113, 115, 117, 119, 123, 124, 131, 132, 133, 134, 138, 139, 141, 143, 145,
 146, 147, 148, 150, 155, 158, 162, 163, 166, 173, 175, 176, 177, 179, 182, 187, 194, 195, 198, 199, 200, 201, 203, 205, 208, 212, 217, 221, 225, 228, 229, 235, 237, 240, 245, 248, 250, 2
52, 253, 255, 256, 260, 265, 267, 269, 270, 271, 273, 275, 277, 278, 280, 282, 284, 286, 287, 288, 289, 293, 294, 296, 302, 307, 308, 309, 312, 313, 317, 320, 323, 325, 330, 337, 339, 341
, 347, 349, 350, 353, 356, 359, 361, 362, 364, 365, 370, 371, 372, 379, 381, 382, 383, 384, 385, 387, 388, 396, 400, 406, 415, 418, 423, 426, 427, 431, 432, 436, 437, 438, 439, 440, 441,
442, 444, 447, 450, 452, 453, 457, 458, 459, 460, 462, 464, 465, 466, 468, 472, 475, 482, 484, 485, 486, 487, 490, 491, 494, 495, 496, 499, 502, 503, 507, 511], NumPruned=940236]

训练

训练自己的数据集

1.如果想训练自己的数据集。将数据集图片放在VOCdevkit/VOC2007/JPEGImages/下,xml标签放在VOCdevkit/VOC2007/Annotations/下。然后运行voc2ssd.py。

2.然后修改voc_annotation.py中的classes并运行。

3.运行下面代码:

python helmet_dectection.py --train --target_weights 权重路径

剪枝后进行模型的微调训练

python helmet_dectection.py --train --is_fine --pruned_model_path=你剪枝后的权重路径

比如:

python helmet_dectection.py --train --is_fine --pruned_model_path=model_data/pruning_model.pth 

【注意:上述命令batchsize,学习率,冻结网络训练的epoch都采用默认值,需要更改直接传参就可以】

训练的时候,需要根据自己的类,去utils/config.py中修改参数,主要修改类别数,类别数量为自己的类的数+1(含有背景类),比如自己的数据集是20个类,那么num_classes=21,也可以修改min_dim【SSD支持分辨率为300和512,如果修改了分辨率,feature_map也需要修改】

如果只是正常的训练,就不需要传入is_fine即可开启正常的训练。

FPS测试

python helmet_dectection.py --fps

因为FPS测试代码是继承了tools/ssd.py中的SSD类,如果需要预测自己的类,需要注意以下ssd.py中classes_path路径中要写自己的类,同时注意传入的权重,比如输入以下命令【前提已经将classes_path写为自己的类】

mAP测试

mAP测试也是继承了tools/ssd.py,classes_path修改为自己的类,然后输入:

python helmet_dectection.py --mAP --target_weights=权重路径 --conf_thres 0.5 --iou_thres 0.5

会在当前目录中生成results文件,里面有mAP结果和F1值,P值和Recall

torch2onnx

修改torch2onnx.py中的ckpt_path,样例x的输入大小即可生成onnx权重

注意:由于本部分代码是使用蒸馏后的网络,因此有个del操作删除不需要的层,如果想使用最原始的网络,用net_student/ssd_student.py即可。

onnx2engine[tensorRT推理]

修改onnx2trt.py的权重路径再运行即可生成对应的engine。有关详细的tensorrt推理教程看我另一篇文章:

SSD目标检测网络tensorRT推理【附代码】_ssd tensorrt_爱吃肉的鹏的博客-CSDN博客

代码链接:

https://github.com/YINYIPENG-EN/E-bike_helmet_dectection.git

权重链接:

链接:https://pan.baidu.com/s/1mBEi5PJl7ibfwzJ8PBrAqQ 
提取码:yypn

报错

报错1:

conf_preds = conf_data.view(num, num_priors, self.num_classes).transpose(2, 1)
RuntimeError: shape '[1, 24656, 2]' is invalid for input of size 17464

在SSD中,共有6个预测特征层。每个特征层分配的先验框数量分别为:4,6,6,6,4,4

以输入大小为:300×300为例,共有先验框38×38×4+19×19×6+10×10×6+5×5×6+3×3×4+1×1×4=8732个先验框

如果是输入大小为512×512,共有先验框64×64×4+32×32×6+16×16×6+8×8×6+4×4×4+2×2×4=24656个先验框

因此上面的错误是输入大小和真正的模型输入大小不匹配,需要检查输入大小

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/662580.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

尚硅谷微信小程序开发 仿网易云音乐App 小程序 后端接口服务器搭建

小程序学习 尚硅谷微信小程序开发 项目网易云小程序学习地址&#xff1a; 01-尚硅谷-小程序-课程介绍_哔哩哔哩_bilibili 视频相关的教程文档与笔记分享 链接&#xff1a;https://pan.baidu.com/s/1aq7ks8B3fJ1Wahge17YYUw?pwd7oqm 提取码&#xff1a;7oqm 配套服务器 老师…

还敢说你会接口测试吗?全覆盖接口测试扫描总结(详细)

目录&#xff1a;导读 前言一、Python编程入门到精通二、接口自动化项目实战三、Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结&#xff08;尾部小惊喜&#xff09; 前言 接口的本质及其工…

搭建SpringBoot项目 详细教程

一、搭建SpringBoot项目 这个项目&#xff0c;可以作为种子项目&#xff0c;我打算把它放置Gitee上。包含大部分web开发的相关功能&#xff0c;后期所有的Spring Boot项目都可以用这个项目&#xff0c;简单修改一下配置&#xff0c;就可以快速开发了。 选择Spring initializr…

C51/C52--led流水灯、静态数码管

目录 一、led流水灯&#xff08;flowing water lamp&#xff09; 二、静态数码管 一、led流水灯&#xff08;flowing water lamp&#xff09; 我们在点亮一个led灯的基础上&#xff0c;对8个led灯按照某种特定的点亮规律进行操作&#xff0c;从而形成像水按顺序流动的效果。 …

缓存在高并发场景下的常见问题

缓存一致性问题 当数据时效性要求很高时&#xff0c;需要保证缓存中的数据与数据库中的保持一致&#xff0c;而且需要保证缓存节点和副本中的数据也保持一致&#xff0c;不能出现差异现象。这就比较依赖缓存的过期和更新策略。一般会在数据发生更改的时&#xff0c;主动更新缓…

JMeter性能测试---完整入门到白了少年头

目录 一、性能测试 二、负载/压力/可靠性 三、JMeter工具 四、负载脚本 五、Jmeter参数化 六、远程操作运行脚本 一、性能测试 测试目的&#xff1a; 1.客户有明确要求&#xff0c;如&#xff1a;系统要求同时满足5000个用户登录&#xff0c;平均每个用户登录时间不能超…

体积小纯净无打扰,新版微软电脑管家在教国内做杀软

早在去年初&#xff0c;微软电脑管家就开启了 V1.0 版本内测&#xff0c;咱们也在第一时间替大伙儿体验了一番。 微软电脑管家最初就是专为国内用户推出的&#xff0c;算是真正做到了精简省心&#xff0c;无任何流氓广告弹窗行为。 这与咱们国内各种流氓杀软环境形成了极为鲜明…

IIS 7中添加匿名访问FTP站点

1. 开启FTP和IIS服务&#xff1a; 2.打开IIS 管理器&#xff1a; 我电脑上是IIS 7.5 &#xff0c;所以选择第一个并点击打开哦。 如果你想知道自己IIS的版本&#xff0c;打开帮助菜单&#xff1a; 3. 新建FTP站点&#xff1a; 4. 填写站点基本信息&#xff1a; 5. 设置绑定和S…

Stable diffusion WebUI img2img使用教学

图生图 (img2img) 相较于文生图 (txt2img)&#xff0c;因存在参考图片的基础上创作&#xff0c;其可控性自然更强。下面从图生图的几个应用方向出发&#xff0c;详述其功能特性。 文章目录 推提示词img 重新绘制参考图Resize mode 缩放模式Denoising 重绘幅度 Sketch 绘图Inpai…

集成光子芯片量子器件研究重要进展

前言&#xff1a; 中国科学技术大学郭光灿院士团队在集成光子芯片量子器件的研究中取得重要进展。该团队邹长铃、李明研究组提出人工合成光学非线性过程的通用方法&#xff0c;在集成芯片微腔中实验观测到高效率的合成高阶非线性过程&#xff0c;并展示了其在跨波段量子纠缠光源…

亚马逊云科技中国峰会“创业者之日”,赋能不同领域创业者前行

IDC预测&#xff0c;到2025年全球数据规模将达到175 ZB&#xff0c;这为人工智能模型训练提供了海量数据资源&#xff0c;全球AI产业迅速发展为创业者们带来了巨大的机遇&#xff0c;但也提出了全新的挑战。新的市场、高效的工具和智能的资源&#xff0c;开辟了创新的领域和商业…

23年互联网Java后端面试最全攻略,只花一周时间逼自己快速通关面试

大家从 Boss 直聘上或者其他招聘网站上都可以看到 Java 岗位众多&#xff0c;Java 岗位的招聘薪酬天差地别&#xff0c;人才要求也是五花八门。而很多 Java 工程师求职过程中&#xff0c;也是冷暖自知。很多时候技术有&#xff0c;但是面试的时候就是过不了&#xff01; 为了帮…

JVM存储模型、值传递和引用传递

JVM存储模型、值传递和引用传递 一、首先根据下图理解一下JVM是什么&#xff1f; — Java程序和操作系统之间的桥梁 二、Java数据存储模型 因为栈区、本地方法栈、程序计数器是线程私有的&#xff0c;每一个线程在运行时会单独去创建这样一个内存&#xff0c;所以说有多少个线…

前端18K面试题总览,往这方面准备就对了

Vue面试题 生命周期函数面试题 1.什么是 vue 生命周期2.vue生命周期的作用是什么3.第一次页面加载会触发哪几个钩子4.简述每个周期具体适合哪些场景5.created和mounted的区别6.vue获取数据在哪个周期函数7.请详细说下你对vue生命周期的理解&#xff1f; vue路由面试题 1.mv…

Unity核心2——Sprite

顾名思义&#xff0c;Sprite Editor 就是精灵图片编辑器&#xff0c;它主要用于编辑 2D 游戏开发中使用的 Sprite 精灵图片 ​ 它可以用于编辑&#xff0c;图集中提取元素&#xff0c;设置精灵边框&#xff0c;设置九宫格&#xff0c;设置轴心&#xff08;中心&#xff09;点等…

以色列QM和荷兰QuantWare合作提供预集成控制系统和QPU解决方案

​ &#xff08;图片来源&#xff1a;网络&#xff09; 6月13日&#xff0c;以色列量子计算机操作系统初创公司Quantum Machines&#xff08;QM&#xff09;和荷兰超导量子处理器&#xff08;QPU&#xff09;的领先供应商QuantWare宣布合作&#xff0c;旨在大幅加速研究进展&a…

火爆全网,python自动化测试logging日志模块使用方法(详细)

目录&#xff1a;导读 前言一、Python编程入门到精通二、接口自动化项目实战三、Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结&#xff08;尾部小惊喜&#xff09; 前言 1、日志级别 imp…

3D WEB轻量化引擎工具HOOPS Communicator与Three.js和自主DIY的对比分析

​基于Web的2D和3D可视化已经变得越来越流行&#xff0c;而且市场根据这些变化&#xff0c;为其提供了更丰富的实用性。如果处理得好&#xff0c;开发人员可以使用户以简单、用户友好的方式与其他客户、开发人员或其他任何人共享来自市场的设计。 当开发人员考虑第三方提供这项…

保险业服务模式“智能化”升级

近年来&#xff0c;随着数字时代的多元化发展&#xff0c;人工智能技术凭借其高度便利性&#xff0c;已被广泛拓展应用到各行各业。在AI的加持下&#xff0c;保险行业的发展正处于从“数字化”阶段迈向“智能化”阶段的过渡时期&#xff0c;销售渠道多样、业务量激增以及客户对…

Django之路由层

一、路由的作用 路由即请求地址与视图函数的映射关系&#xff0c;如果把网站比喻为一本书&#xff0c;那路由就好比是这本书的目录&#xff0c;在Django中路由默认配置在urls.py中&#xff0c;如下图&#xff1a; 二、简单的路由配置 # urls.py from django.urls import re_…