基于视频结构化的矿工危险性行为识别方法研究

被引量 : 0次 | 上传用户:mengqingwang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
煤矿行业的重大事故中,超过90%的事故是由矿工自身危险性行为所导致,这对矿工生命安全和企业经济效益造成了严重威胁。因此,研究矿工危险性行为的识别方法对煤矿安全生产至关重要。随着深度学习和计算机视觉技术的发展,视频结构化技术在矿山危险性行为识别任务中的应用已经取得了显著成效,有效解决了煤矿工人危险性行为中人工监管困难的问题,进一步推进了智慧矿山的建设。但由于煤矿作业环境的特殊性和复杂性,当前矿工危险性行为识别在技术上存在如下几个主要问题。一是需要结合煤矿特定工作场景和规范确定矿工危险性行为标准,并制作样本数据集。二是要克服光照、噪声等复杂煤矿作业环境下矿工等目标关键性特征信息难以获取问题。三是如何兼顾、提高矿工危险性行为识别的实时性和准确性。针对以上问题,本文以某合作煤矿为例展开研究,主要研究内容包括:(1)研究制定了矿工危险性行为数据集。针对矿工危险性行为缺乏公开大型数据集问题,基于煤矿安全风险库标准,将危险性行为分为两大类:一类是常规危险性行为,分为6个类别包括正确佩戴安全帽(hat)、未正确佩戴安全帽(err-hat)、未佩戴安全帽(no-hat)、正确佩戴口罩(mask)、未正确佩戴口罩(err-mask)和未佩戴口罩(no-mask);第二类是姿态动作类危险性行为,包括非法坐卧姿态、非法踢打和非法跨越等3个类别。并辅助数据增强技术扩充数据集,以增强深度学习模型的稳健性、泛化能力和对不同数据分布的适应能力。(2)提出一种目标检测模型STFNet-A(Swin Transformer-FPN-NetworksAttention),实现了煤矿复杂作业环境下矿工常规危险性行为实时、准确检测。首先将Swin Transformer作为骨干网络并构建特征金字塔,设计目标检测模型架构STFNet(Swin Transformer-FPN-Networks),引入Quality Focal Loss(QFL)损失函数关注样本类内间差异,有效解决样本分布不均衡问题,对常规危险性行为识别准确率达到94.5%,检测速度为59.6帧/秒,模型参数量为31.3M。接着为进一步抑制场景噪声问题,引入CBAM(Convolutional Block Attention Module)注意力,融合局部和全局上下文信息,构建模型STFNet-A,在检测速度和参数量一致情况下,较STFNet进一步提高了识别准确率,达到96.9%。(3)提出一种基于Alpha Pose的优化模型Alpha-SDL-Pose(Alpha_STFNetA_DNLA_LSTM_Pose),实现了煤矿复杂作业环境下矿工动作姿态类危险性行为检测。首先利用STFNet-A替代Alpha Pose的Faster R-CNN提升检测速度并降低模型参数量。接着引入双向非局部注意力模块(Dual Non-Local Attention,DNLA)并嵌入姿态估计器,捕捉更长距离和更丰富的上下文信息,以挖掘提取目标人物关节点位置、关节连线和骨骼姿态等特征信息。最后基于LSTM(Long Short Term Memory)危险性行为分类网络对危险动作进行准确分类。该模型在超过25万人体姿态样本的MSCOCO 2017公开数据集上识别准确率比Alpha Pose提高了2.7个百分点,达到了74.8%,检测速度提高了13.6帧/秒,达到了49.4帧/秒。在自制数据集上对矿工姿态动作类危险性行为识别准确率达到94.9%,模型参数为43.9M,该模型兼顾了实时性和准确性,能够满足实际项目应用需求。(4)搭建了矿工危险性行为监测示范系统平台。利用Python语言、深度学习Py Torch框架,基于开源可视化界面组件库,融入轻量级、实时性目标检测模型STFNet-A和姿态估计模型Alpha-SDL-Pose,设计并实现了矿工危险性行为监测示范系统平台,平台主要功能包括:系统设置、功能选择、输入源选择、摄像头管理、视频管理、危险行为监测的交并比和置信度大小控制、可视化结果显示区域和监测结果统计等。
其他文献
《中国电影蓝皮书2023》《中国电视剧蓝皮书2023》首发式暨中国电影、电视剧发展对话会高峰论坛于2023年6月12日在上海国际电影节举行。与会专家就中国电影发展的现况、趋势、问题、未来、教育进行研讨。中国电影在2023年表现出类型多元发展、产业侧供给优化、系列生产意识明显等特征,中国电视剧在2023年表现出网台互动、垂类题材不断深化、剧场模式明显的特征。中国产业与评论之间的关系、青年受众的审美变
期刊
近年来,随着物联网的蓬勃发展,智能电网应运而生。作为新一代的电网,智能电网能够进行动态负荷管理以及提高供电可靠性,在产生大量数据的同时对网络端存储资源和计算资源的要求也越来越高。传统的云计算技术已无法满足这些需求,因此,雾计算被引入到物联网中。雾计算与智能电网的融合在一定程度上解决了存储、计算资源紧缺以及通信信道过于拥塞的问题。大多数智能电网系统为了实现电网实时监控和数据可视化,需对从终端设备处收
学位
本论文基于安德鲁·彻斯特曼的翻译规范理论,对以智能电网实验为重点的能源革新研究这一科技类文本展开了翻译实践,并进行了理论反思。译者选择的翻译文本为《理解能源革新:来自智能电网实验的启示》。该书由帕尔格雷夫·麦克米伦出版社于2022年1月出版,目前无中文译本,译者也已经获得了作者的授权,翻译方向为英译汉。文章中有许多电力领域的专业词汇和表达,以及众多专有名词。在翻译这些专业表达时,译者要在保证译文符
学位
<正>欧阳修这辈子最幸运的事,莫过于嘉佑二年(1057)当了一次科举的主考官。在这一届选拔的进士中,居然出了八个文学大家,九个朝廷宰相,还有思想家、军事家,可谓群星灿烂,光耀古今,极一时之盛,因而被称为“千古龙虎榜”,也称“天下第一榜”。听听他录取的那些大名鼎鼎的人物名字吧。有理学大师程颢,文学巨匠苏轼,唐宋八大家之一的曾巩,大学者张载,仅次于王安石的二号改革家吕惠卿,
期刊
阿片受体激动-拮抗剂是一类对阿片受体兼有激动和拮抗作用的药物。已经上市的这类药物主要包括喷他佐辛、布托啡诺、纳布啡、丁丙诺啡和地佐辛等。与吗啡、芬太尼等单纯阿片受体激动剂相比,该类药物具有镇痛效果较强,成瘾性较弱,咳嗽、瘙痒以及呼吸抑制等副作用少的优点。由于阿片受体激动-拮抗剂在不同内源性阿片受体(μ、κ、δ等)间具有不同的倾向性作用,基于不同受体亚型,可在情绪影响、药物依赖方面表现出不同甚至相反
期刊
在当前时期保证做好管道泄漏检测工作是十分必要的,也是关乎于国民经济发展的一项重要工作内容,而在检测管道泄漏的过程中应用数字化的信息技术则能达到更加理想的检测效果,并且在天然气长输管道泄漏检测当中应用数字化技术也尤为常见,这也将成为检测技术顺应时代发展的直观体现。因此,本文针对天然气长输管道泄漏检测的数字化技术展开深入分析,提出几点笔者自己的见解。
期刊
当今社会的发展速度比较快,人们对石油资源的需求量呈现出上涨的趋势。所以,管道工程受到了人们的广泛关注,尤其是管道工程的安全管理工作。如今,信息技术呈现出巨大的影响作用,数字化信息管理体系逐渐演化成为管理体系的创新模式,在安全管理过程中呈现出一定的先进性特征,有助于提高安全管理工作的水平。本篇文章在开展的过程中对数字化信息管理系统在石油天然气管道工程安全管理中的应用进行了分析,以希望能够为石油天然气
期刊
<正>自证陷阱,又称为“认知闭环”或“信息孤岛”,是一种思维偏见的表现。当我们拥有某种观点、信仰或理论时,往往会倾向于寻找和接受与之一致的信息,同时拒绝、忽视或质疑与之不一致的信息。这种现象的结果是,我们的观点在无足够批判性思考的情况下得到了强化,而我们与不同观点的对话和理解却变得日益疏远。在我们日常的思考和交流中,很容易陷入“自证陷阱”的思维误区中。例如别人提出的关于自己的异议,总想要去解释、证
期刊
中医“毒邪”理论内涵丰富,“毒”与慢性肝病的发生发展密切相关,从“毒”论治是慢性肝病的重要治法。本文通过归纳古今文献阐释“毒”相关理论,结合临床经验认为“毒”在慢性肝病中具有偏性较强、毒性缠绵、复杂多变等致病特点,提出“毒使病生,毒致病进”的观点,探讨从“毒”论治慢性肝病的思路,包括溯清毒源、厘清毒性、甄别毒变、扶正祛毒等,以期为慢性肝病的临床治疗提供参考。
期刊
放射性粒子植入治疗癌症是目前治疗癌症的主要方法,尤其在对前列腺的治疗当中相比传统的前列腺癌切除手术,前列腺粒子植入术可以在对患者性功能影响尽可能小的情况下减少对患者生活的影响、减少患者术后并发症出现的可能性。在近些年前列腺粒子植入术采用使用机器人代替医生的方法来减轻医生的工作强度,但前列腺粒子植入机器人还是有很多问题需要进行研究,如可视化效果不好、术前导航单一、交互方式单一等。本文研究混合现实环境
学位