基于分布式深度学习框架的视频大数据分析系统研究与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:lzd_1983
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的迅速发展,视频数据作为人们获取信息的主要方式之一,在互联网中占据的比例逐渐增加,视频数据的形式多种多样,例如电影、电视剧、短视频等。视频信息中包含了丰富的的人物、事件、场景等相关信息,如何利用这些信息进行特定的内容挖掘从而为实际生产生活提供遍历成为人们研究的热点之一。近年来,深度学习在目标检测与追踪、人脸识别、动作识别等任务中展现了显著的优势与潜力,有望胜任更为复杂的任务;同时,Spark并行计算框架在分类、聚类等任务中效果显著。利用深度学习模型,与Spark并行计算框架相结合,进行更为准确有效的相关信息挖掘,逐渐成为新的关注热点。同时,人工智能合成的人脸交换视频已成为一个新兴问题。虚假视频越来越难以识别,给社会保障带来了一系列挑战。视频篡改技术的不断进步和视频质量的不断提高,也给假检测带来了巨大的挑战。基于上述背景,本课题主要做了如下研究工作:(1)提出了一种基于聚类的嵌入正则化方法来检测深度假视频。构建的深度假视频检测模型以Xception为基础网络,从网络结构、参数配置、数据集特性和所研究问题对基础网络进行优化。其中最重要的优化部分是,增加对生成假视频过程的模拟,它通过对生成假视频过程中分辨率缩放产生的伪影的检测来提高深度假视频检测精度。(2)设计实现了深度假视频的并行检测算法。随着多媒体技术的发展,海量视频不断涌现,每天产生的数据量已达到PB级别,如果快速的处理这些视频数据成为大数据领域的研究热点。本文针对提出的深度假视频的检测算法,设计实现基于分布式深度学习框架的并行检测算法。(3)设计实现了一个基于分布式深度学习框架的视频大数据分析原型系统。该分析系统允许使用者使用常用的视频处理算法及本文提出的深度假视频的检测算法去解决实际问题。
其他文献
在软件开发工作中,具有至关重要作用的一个环节是软件测试,测试工作对避免软件缺陷、保证软件用户使用体验是必不可少的流程,但是同时也会占用软件开发过程中的时间和人力资源。自动化测试相比传统方式可以有效地将测试效率提高,实现方法一般是编写编程语言程序脚本,另一种是借助自动化测试工具完成工作。测试用例脚本编写和执行是测试过程中的两个重要步骤。测试脚本的书写简化可以使测试人员的培训难度降低,缩短测试时间。目
提出一种基于灰色系统理论改进传统理想点法的供应商评价方法,即运用层次分析法(AHP)和熵权法对各项评价指标进行主客组合赋权,同时利用灰色关联分析法对传统逼近理想法进行改进,从而构建出一套新的相对贴近度.依据相对贴近度的大小,对各备选供应商的综合评价值进行排序和择优.结果表明:该方法克服了传统单一赋权方法的缺陷,保证了指标权重的客观性,能准确、有效地避免因排序问题带来的评价误差,使其评价结果更为合理.实例分析表明,验证了灰色关联分析法改进TOPSIS法的有效性和实用性,并为以后的供应商评价提供了一种新的选择