基于密度估计的人群计数方法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:yy080408
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面对日益增长的人口数量,为加强社会治安防控,利用人工智能保障公共安全、构建智能视频与图像分析系统成为了社会关注的焦点。人群计数是构成智能视频及图像分析系统的重要基础之一,其可以自动估计图像中的人群总数和空间分布位置。尽管已有大量优秀的人群计数算法被提出以应对实际应用场景中的多重挑战,但仍存在一些固有的难点亟待解决,如人群尺度变化、背景干扰和尺度变化双重挑战并存、标记数据有限、人群密度分布不均匀和跨域问题等。本文从网络结构设计、多任务学习框架、半监督算法、密度矫正及域自适应方法等角度,针对上述问题分别给出了有效的解决方案。全文的主要研究工作和贡献总结如下:1.针对尺度变化问题,提出了一种自适应加权的人群感受野网络。相机透视效应导致的多尺度人群变化问题是影响人群计数性能的重要因素。已有的多列网络结构通过不同尺寸的滤波器模拟人眼感受野分布以应对尺度变化问题,但经分析发现其模拟的感受野分布与真实人眼感受野分布存在较大差异。为减少此差距,本文提出一种自适应加权的人群感受野网络模拟人类视觉系统以处理人群计数的多尺度变化问题,其包含三个核心部件:人群感受野模块、循环模块、通道注意力模块。人群感受野模块通过组合多个普通卷积和膨胀卷积模拟人眼视网膜上感受野分布以提取有效的多尺度特征。为进一步细化提取的特征,循环模块输出全局信息和语义信息作为通道注意力模块的指引信号,而通道注意力模块的输出自适应加权提取的多尺度特征。此外,引入平滑L1损失函数缓解欧氏损失函数造成的密度图模糊化问题。在多个公共人群计数数据集上的实验结果表明,提出的自适应加权的人群感受野网络取得了有竞争性的计数性能。2.针对双重挑战并存,提出了一种基于深度和边缘辅助学习的多任务学习框架。由于尺度变化和背景干扰问题的复杂性和独立性,已有的计数方法大多从单一角度分别解决上述问题,获得的模型难以适应复杂多变的实际应用场景。为解决尺度变化和背景干扰双重挑战并存的问题,本文提出了一种基于深度和边缘辅助学习的多任务框架。针对尺度变化问题,总结了人头尺度变化规律,提出了一种相对深度图和相应的真值生成算法,然后构建了相对深度图回归网络感知人头尺度变化,以提取有效的多尺度特征。针对背景干扰问题,分析了背景干扰对生成密度图的影响,提出了一种人头边缘图及对应的真值生成算法,之后设计了人头边缘图回归任务辅助网络提取具有判别力的人头边缘特征,缓解背景干扰造成的影响。为同时处理上述双重挑战,提出了一种有效的信息融合策略,融合多任务框架中生成的深度信息、边缘信息和密度信息,促使网络输出准确的密度估计结果。在多个公共人群计数数据集上的实验结果验证了提出的多任务框架的有效性,且取得了有竞争性的计数性能。3.针对标记数据有限问题,提出了一种基于分块人数统计的半监督人群计数算法。由于标记数据有限,基于全监督学习的人群计数算法易出现过拟合问题。人工标记数据不仅成本大且会引入标记误差,因此研究者们开始关注半监督人群计数领域。尽管已有的半监督算法能较好地利用未标记数据优化模型,但是模型性能仍需进一步改善。本文提出了一种基于分块人数统计的半监督人群计数算法,旨在利用未标记数据提升模型性能。首先,受启发于图像中人群的分布规律:人群图像的全局人数恒等于所有无重叠子区域的局部人数之和,本文提出一种自监督代理任务并构造了相应的损失函数,利用无标签数据优化网络模型。其次,提出一种迭代学习策略,给予自监督任务更强有力的指导信号,结合有标记数据和无标记数据共同训练网络。在多个公共人群计数数据集上的实验结果表明提出的半监督算法取得了有竞争性的计数性能。另外,在不同网络结构、不同比例标记数据上的消融实验验证了提出的半监督算法的有效性。4.针对人群密度非均匀和跨域问题,设计了一种密度矫正网络,并提出了一种随机切割混合双域图像的域自适应方法。图像深度越大区域的人群占据的像素越少导致高密集的人群分布,反之亦然,而人群密度非均匀分布导致网络在不同密集度区域输出较高的估计误差。为缓解此影响,本文提出了一种密度矫正网络。首先,提出了一种密度矫正图和相应的真值生成算法,设计了密度矫正辅助任务矫正初始密度图上错误的密度估计。其次,提出一种双层金字塔特征融合模块融合不同尺度的特征,以增强网络的特征表达能力。由于不同场景之间存在域差距,模型泛化性能在目标域上严重衰减。为解决此问题,本文提出一种随机切割混合双域图像的域自适应算法。该算法通过生成伪标签、混合数据、随机切割图像等手段,从全局与局部角度学习域不变特征以减少域差距。在多个公共人群计数数据集上的实验结果表明提出的密度矫正网络取得了有竞争性的计数性能,并且通过多重跨域实验验证了提出的域自适应方法的有效性。
其他文献
恶性肿瘤是导致人类死亡的主要原因之一,近年来,人们已经开发了各种各样的方法用于肿瘤治疗。其中肿瘤微环境是肿瘤存在的细胞环境,在肿瘤进展、转移和免疫逃逸中发挥着关键的作用。它除恶性细胞外,还包括细胞外基质、血管和不同类型的基质细胞。由于癌细胞的代谢不同于正常细胞的代谢,肿瘤微环境出现了缺氧、血管生成、酸中毒、过度代谢、升高的氧化还原态等一系列典型特征。探索肿瘤微环境的特性及其在肿瘤发育中的作用,对于
学位
量子点发光二极管(QLED)表现出颜色可调、光谱窄等优势,在新一代超高清和广色域显示方面具有应用前景。目前,高性能的QLED器件主要采用掺杂ZnO纳米晶作为无机电子传输层,但存在电子迁移率过高导致电荷传输不平衡,以及缺陷态较多导致非辐射Auger复合等制约瓶颈。有别于无机电子传输层,本论文围绕基于有机电子传输层的红光量子点发光二极管作为研究主题,筛选出具有较深最低未占据分子轨道(LUMO)能级的三
学位
在反应堆冷却剂系统中,自然循环是一种重要的热工水力现象,因此常基于它进行比例模化研究。动态系统比例模化(DSS)方法是一种最新的比例模化方法,它基于两参数仿射法导出相似准则,且有潜力获得整个动态过程中的失真。然而目前基于DSS方法的自然循环相似准则尚未建立和应用能力发掘有限,因此本文围绕自然循环DSS方法开展研究。首先进行单相和两相自然循环DSS分析研究。针对单相自然循环,建立一个典型的单相热工水
学位
为了从根本上解决常规商业化锂离子电池在使用过程中可能出现的可燃有机电解液泄漏、燃烧、爆炸等一系列安全问题,研究者们提出利用不可燃无机固态电解质替代有机电解液来设计新型全固态锂电池。此外,全固态锂电池还有望突破商业化锂离子电池面临的能量密度瓶颈。然而,全固态锂电池的实际工业化应用在电解质和电极材料方面还存在诸多挑战。例如,电解质材料方面:目前还没有任何一种固态电解质可以同时满足工业化的所有需求,即高
学位
人体当中存在着许多对物理信号敏感的组织和器官,比如骨骼,皮肤,血管和神经等。受其启发,物理信号,如机械信号、磁信号、电信号、热信号、光信号和声信号,由于其比生物和化学信号具有更高的安全性、更低的成本和可调的局部特性,已经逐步开始应用于组织工程领域。但如何通过生物材料构建适宜的物理信号调控组织修复仍是亟待解决的问题。本论文主要围绕电,力,磁等不同物理信号设计制备了不同结构和性质的纳米生物材料,并对所
学位
上世纪末,Maurice Brookhart教授开创性地报道了一类阳离子α-二亚胺Ni(Ⅱ)/Pd(Ⅱ)催化剂,这也是后过渡金属配合物催化烯烃聚合领域的里程碑事件。近三十年来,为了提升α-二亚胺体系的催化性能,研究者们发展了诸多类型的配体修饰手段并取得了空前的效果,但仍然有一些关键问题没有得到很好的解决。例如:1)极性官能团与聚合物分子量之间的矛盾关系没有得到良好解决,高附加值的极性功能化超高分子
学位
近年来,随着等离子体参数的提高,环形聚变装置上的三维现象受到越来越多的关注。在反场箍缩(Reversed field pinch,RFP)装置上,三维准单螺旋(Quasi-single helicity,QSH)态下的等离子体约束能力得到了很大的改善,但其形成机制和控制技术仍需要进一步的研究。本论文基于RFP磁约束聚变实验装置科大一环(Keda Torus eXperiment,KTX)的参数进行
学位
随着无人机技术的发展,由旋翼无人机和机械臂组成的复合机器人系统逐渐成为目前机器人领域的一个热点研究对象。通过对机械臂的控制可以赋予无人机更多的功能从而执行更多元的任务。然而,由于旋翼无人机系统本身的欠驱动性及非线性,在引入机械臂之后,还需要解决两个机器人系统之间因耦合效应而带来的复杂协同控制问题,这在原本控制器设计的基础上又大大增加了难度。本文主要是研究旋翼飞行机械臂复合机器人系统的控制问题。考虑
学位
深度卷积神经网络(Deep Convolutional Neural Network,DCNN)是一类令人瞩目的深度学习算法模型,在诸多实时计算机视觉任务和图像处理任务中取得了巨大成功。然而,包括ResNet和VGG网络在内的许多先进的DCNN模型往往含有数十亿个学习权重,且其推理需经历数十亿次浮点运算(FloatingPoint Operations,FLOPs),这对有限的内存资源来说是一个严
学位
本文使用稀土催化剂在有机硼盐[Ph3C][B(C6F5)4]与烷基铝AliBu3的活化下,催化生物质来源共轭双烯烃、极性烯烃(共)聚合,制备出一系列新型高分子材料。系统研究了催化剂结构及其聚合工艺对聚合活性、立体选择性、区域选择性、分子量、极性单体插入率、序列分布等的影响规律,并利用DFT计算揭示相应的聚合机制。此外,对含反应基团的聚合物进行后功能化反应,制备一系列功能化立构规整聚合物,并对聚合物
学位