基于卷积神经网络的交通标志检测-PPT文档

1.论文目录及整体框架数值仿真传播模型论文框架论文结论致谢目录134625稳定性分析图像预处理研究背景及意义论文框架网络训练及测试结果分析及致谢目录1461/135交通标志及卷积网络介绍232.1研究的背景及存在的问题随着科学技术的快速发展，智能交通及无人驾驶的出现已经成为了不可避免的趋势。挡在智能交通进入人类生活上的一道难题便是交通标志的检测与识别。对于交通标志识别，前人已做了很多的研究并取得了一定的研究成果。而标志的检测仍存在很大的提升空间，需要我们在现有算法的基础不断改进，也迫切需要新算法的提出。如何提高在复杂的真实场景中交通标志的准确检测，如何提高检测分割、特征提取、分类算法的处理速度，如何使得所采用的技术以及开发的系统具有广泛的适用性与实际使用价值等，成为许多交通标志检测研究领域急需解决的问题2.2系统研究的意义（1）它是驾驶辅助系统及无人驾驶智能车的不可缺少的一部分。实时交通标志检测系统通过对行驶过程中前方道路出现的交通标志图像进行及时采集和准确检测，然后把检测结果通过视频或者语音方式传递给司机以辅助驾驶，以达到自动驾驶的目的（2）有利于交通管理部门对交通标志的管理和维护。通过对比检测出的交通标志和标准交通标志库，交通部门可以有效地对发生损坏的标志进行修复，节省了大量的人力和时间。2.3本论文的解决方案针对检测过程中的路标模糊及背景复杂等不同的干扰因素，本论文采用深度学习方法中的卷积神经网络结构，大量的训练数据样本充分包含了各种环境下的路标，同时网络训练时采用较多的循环次数，让网络学会各种路标结构的特征信息。针对多目标及干扰物过多的图像，我们采用选择搜索算法，从而能很好的分割出包含路标的区域。在路标训练图像的预处理阶段，我们对各类图像采用彩色图像直方图均衡化，很大程度上减弱了光照及阴影对路标识别过程中的干扰。3.1基本交通标志的介绍本文检测的交通标志主要分为三大类：警告标志：警告司机、车辆及行人要小心危险目标的标志。它们的形状为等边三角形，颜色大多为黄底、黑边、黑图案；禁令标志：为环境中的某种限制因素而对车辆司机加以禁止的标志。禁令标志的颜色一般为白底，红圈，红杠，黑图案；指示标志：用以规定车辆和行人的行驶方向集地点。形状可分为长方形、圆形和正方形，颜色大多为蓝底、白图案。3.2卷积神经网络的介绍（1）卷积神经网络（CNN）是由一个结构化的BP网络复杂化而来的，通过共享权值和结构重组，卷积计算等将特征提取功能融合进多层感知机，CNN具有三个显著特征：（1）局域感受野是指每一网络层的神经元只与上一层的一个小邻域内的神经元连接，通过局域感受野，神经元可以提取初级的视觉特征；（2）权值共享是指同一个特征图中的神经元共用相同的权值，使得卷积神经网络具有更少的参数；（3）次采样可以减少了特征图的分辨率，从而减少对位移，缩放和扭曲的敏感度；3.2卷积神经网络的介绍（2）卷积神经网络主要分为输入层，卷积层，采样层及全连接层inputlayer；convolutionlayer；subsamplinglayer；fullconnectionlayer；4交通标志的预处理输入图像图像分割，采用选择搜索算法将图像分割成许多小块图像归一化，得到48*48的固定大小的图像彩色图像直方图均衡化得到适合网络输入标准的图像网络训练及检测时的图像数据都需要一定的大小及格式，这样才能充分利用卷积神经网络来实现准确率更高的路标检测。预处理部分主要包括图像分割，图像大小归一化及彩色图像直方图均衡化，基本流程如图所示：4交通标志的预处理稳态分析论文结论致谢论文框架传播模型数值仿真稳态分析论文结论致谢论文框架原始图像9/13数值仿真S(t)βS(t)I(t)γI(t)4交通标志的预处理稳态分析论文结论致谢论文框架传播模型数值仿真图像分割论文结论致谢论文框架原始图像10/13数值仿真S(t)βS(t)I(t)γI(t)输入图片获得初始区域集R，并设定相似度集S为空对于R中每两相邻区域（r1,r2),计算相似度s(r1,r2),并加入S集当S集不为空时获得最大相似度s(ri,rj)=max(S)Yes合并区域rt=(riUrj)从S集中删除与区域ri及rj有关的相似值s（ri,r*),s(rj,r*)计算合并新区域rt与周围区域的相似度s(rt,r*)，更新S集结束，得到完整区域集RNo得到初始化的小区域计算相邻区域的相似度把相似度最高的区域合并，然后再重新计算合并区域和相邻区域的相似度反复循环这些步骤，直到整个图片被当成一个单独的区域4交通标志的预处理稳态分析论文结论致谢论文框架传播模型数值仿真图像分割论文结论致谢论文框架原始图像11/13数值仿真S(t)βS(t)I(t)γI(t)分割得到的图像，特征性的选了5张4交通标志的预处理稳态分析论文结论致谢论文框架传播模型数值仿真稳态分析致谢论文框架原始图像12/13大小归一化S(t)βS(t)I(t)γI(t)这里将分割后的图像归一化为48*48大小的图像4交通标志的预处理稳态分析论文结论致谢论文框架传播模型数值仿真稳态分析直方图均衡化致谢论文框架原始图像13/13S(t)βS(t)I(t)γI(t)由于原始图像为彩色图像，这里直方图均衡化时是将原始图像RGB三通道分别均衡化，然后再合并Src=imread(‘picture’);R=histeq(;,;,1);G=histeq(;,;,2);B=histeq(;,;,3);Newpicture=cat(3,R,G,B);5.1网络的结构采用的网络结构如上所示，共有9层。5.1网络的结构每层的作用，核函数及map大小和数量如上表所示5.2网络训练的参数网络训练的具体参数如下：train_net:traffic_detection_train.prototxttest_net:traffic_detection_test.prototxttest_iter:100test_interval:5000base_lr:0.01weight_decay:0.0005display:100max_iter:30000snapshot:5000snapshot_prefix:trafficsolver_mode:15.3网络训练及测试的流程图网络训练的结构图网络训练参数配置文件网络训练网络训练结构配置文件图像分割，采用选择搜索算法将图像分割成许多小块图像归一化，得到48*48的固定大小的图像彩色图像直方图均衡化图像训练库得到适合网络输入标准的图像得到训练好的网络5.3网络训练及测试的流程图网络测试的结构图网络测试参数配置文件网络测试网络测试结构配置文件图像分割，采用选择搜索算法将图像分割成许多小块图像归一化，得到48*48的固定大小的图像彩色图像直方图均衡化图像测试库得到适合网络输入标准的图像测试结果得到训练好的网络结构参数网络训练一正样本：39209标签：1GTSCB(all)负样本：23296标签：0GTSDB(从1-10张图片中截取的负样本)batch:100epoch:30000每5000epoch保存一下训练过程中得到的参数时间：27小时检测结果一检测图片1：分割为1184个小块，其中背景1180个，路标图像3个由以上结果表明，网络的检测结果虚警率为17.37%，明显太高。对照着那些本为负样本而检测为正样本的图片发现，大多偏向黑色路标的负样本都误检测为正样本网路训练二鉴于上次的讨论分析，这次最主要的改变是对所有样本进行彩色图像直方图均衡化。正样本：39210标签：1GTSCB（all）负样本：37115标签：0GTSDB(从1-100中提取的负样本，且过滤掉selective提取的图片中尺寸大于200的图片)batch:100epoch:40000时间：28小时检测结果二共获得了1184个小图像，其中背景图像有1180个，路标图像有4个结果表明：网络的检测结果虚警率为1.52%，已经提高了很多。但同时有一个正样本被误检测为背景图像，对照着检测图像库中的这张图像发现。原来是选择搜索算法分割时，这张图像由于轮廓受周围环境干扰太大，分割后路标的轮廓没有被包含进去，失真比较大，所以检测错误。6.1结果分析对比训练一和训练二，彩色图像直方图均衡化以后，虚警率会明显降低，说明图像中彩色及亮度特征会包含很大信息量。测试二中4个路标图像中始终有一个路标漏检了。发现选择搜索算法分割时，路标的圆形轮廓没有完全的被分割出来。这说明两个问题，一是我们训练的网络确实学到了一些特征信息，至少样本轮廓是学到了；二是训练之前的图像分割特别重要，分割的好坏会直接影响后来的训练及测试结果。通过结果发现，该方法的虚警率仍比较高，这成为将此结果应用到智能驾驶上一个很大的阻碍。本检测的输出结果只是显示图片中是否存在路标，没有给出路标存在的ROI，是本论文的一大不足。之后我也会在此基础上继续改进，把路标具体的ROI可视化出来。6.2本论文的不足与后续工作大学本科的学习生活即将结束。在此，我要感谢所有曾经教导过我的老师和关心过我的同学，他们在我成长过程中给予了我很大的帮助。本文能够顺利完成，要特别感谢我的导师齐老师，同时感谢各位答辩老师的批评和宝贵意见。最后向所有关心和帮助过我的人表示真心的感谢。6.3致谢