特征融合CNN的夜间行车视频检测系统研究

来源 :南京大学 | 被引量 : 0次 | 上传用户:zhuywei0
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,智能交通视频对交通安全及应急事件响应起着重要作用,但是受制于光线条件,计算机视觉处理方法多依赖于白天视频。而实际环境复杂,夜间路侧灯光的照射范围有限,导致只好依靠人工监视方式。论文围绕这一难题,依托“基于深度学习的收费车道车辆特征识别系统”省级项目,专题对夜间行车智能视频检测展开研究,其具有重要的理论意义和实际应用价值。论文分析了夜间行车智能检测所存在难点,诸如,车灯轮廓描述困难、地面反射光干扰、光线遮挡阴影、路面标识不易辨识等;解析了光流金字塔、Blob算法等常见视频处理算法,在夜间跟踪效果较差的原因;增强了夜间图像,突出车灯轮廓;讨论了特征融合卷积神经网络在目标检测、跟踪方向上的突出优势;受到特征融合CNN的算法的启发,研究了目标检测、目标跟踪、车灯检测的系列算法,设计了夜间车灯检测、夜间车辆检测、夜间行车参数检测模块,用于夜间行车视频检测系统。针对夜间场景变化敏感、车灯轮廓不清晰的问题,文中提出仿生甚高速区域卷积神经网络的夜间车灯检测方法。通过对视网膜水平细胞的自适应反馈和双极细胞的中心拮抗感受野进行建模,增强图像的对比度、亮度,突出前景车灯的轮廓信息;将增强后的图片输入给甚高速区域卷积网络(Faster RCNN)进行学习训练,得到特征融合后的检测模型用于夜间车灯检测。实验结果表明,文中提出的车灯检测方法具有较高的鲁棒性。针对传统车辆目标检测方法对夜间视频图片检测准确度不高的问题,论文利用了特征融合方法的框架EB实现了夜间车辆的检测,使用深度卷积网络层提取图片中丰富的特征,建议网络产生候选框并过滤掉其他目标,微调网络微调候选框以生成精确的位置和识别结果。优化了定位和分类,提高了夜间车辆检测的准确度率。针对夜间行车参数分析车辆跟踪误检高、易受遮挡等问题,文中分别对南京市白下区和连云港ETC 口的夜间视频进行了具体的实际应用分析。白下区夜间行车视频采用光流金字塔、Blob算法计算车速、车流量;ETC夜间行车视频采用了Siamese FC全连接孪生网络分析车速,结合卡方系数进行直方图匹配分析车流量,实现实时准确的夜间行车参数检测。综上,论文的创新点和特点在于:●提出了仿生甚高速区域卷积神经网络的夜间车灯检测方法,提高了夜间车灯检测的精度,达到82.75%。●优化了基于Evolving Box(EB)框架的夜间车辆检测方法,提高了夜间车辆检测的准确率,达到83.78%。●涉及了摄像机标定、目标跟踪、ROI区域检测等具体算法,实现了精确计数、准确测速的夜间行车参数功能。
其他文献
智能问答(Question Answering)是自然语言处理任务中一个综合性的应用。相比较传统的搜索引擎,智能问答旨在让用户以自然语言的方式进行提问并返回给用户一个简洁的答案或候
当前,受新型冠状病毒疫情影响,我国经济遭受了巨大的冲击,全球经济也面临着短期波动和进一步的不确定性,在这样的背景下,如何帮助企业脱困,是我们现在及未来一段时间必须持续
随着多媒体技术在外语教学中的应用,作为一种多媒体学习方式,字幕视频在外语教学领域受到了广泛的关注。已经有大量的研究证明不同的字幕在听力、阅读理解等方面有其积极的影
随着我国经济实力和科技实力的持续提高,我国经济发展由只重视“引进来”,到兼重“引进来”和“走出去”。2013年习近平主席提出“一带一路”倡议,是我国企业“走出去”的一
在生物体中不可缺失某些化学分子又称信号分子,其结构和功能的研究直接关系到人类在疾病早期诊断、临床治疗和药物筛选等领域的发展。近年来,生物传感器因其简单方便的优越性
辞书数字化是词典未来的发展模式。在手机和平板电脑等移动终端高度普及的当前,基于移动终端的对外汉语词典已经逐渐取代纸质版的对外汉语词典,成为汉语学习者词汇学习的重要
拥堵情形下的污染路径规划问题(Pollution-Routing Problem with Congestion,PRPC)是在考虑车辆的排放控制与道路交通拥堵约束情景下的车辆路径规划问题。在这个问题中,考虑
植物类受体蛋白激酶(Receptor-like protein kinases,RLKs)是植物最大的一类蛋白家族,结合其配体,参与了植物生长发育的所有过程。目前只有少数的RLKs配体被发现,大部分RLKs
铁路是交通基础设施建设的重要组成部分,随着“一带一路”概念的提出,国家加大对铁路的建设,尤其是西北地区铁路的建设。铁路施工阶段的高耗能直接给当地能源供应带来压力,而
航道运价便宜,大宗物资大都利用航道运输。内河航道的船舶智能视频监控系统,对运输安全、提高运输效率有着重要的意义。而在实际场景中,存在水面倒影、船行波纹等干扰,而基于