万能相机中通用物体识别模块的设计与实现

来源 :南京大学 | 被引量 : 0次 | 上传用户:user1944
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
短视频已经成为了移动互联网的下一个风口,在UGC短视频应用中,视频创作模块往往是最为重要的一个模块,而视频特效则是视频创作模块中不可缺少的一环,丰富的视频特效能为用户提供充足的拍摄灵感,激发用户的拍摄欲望,提高短视频社区内视频的整体数量与质量。在目前的市场上,得益于成熟的人脸识别算法,大部分短视频应用都支持了2D贴纸、3D贴纸、人脸变形等特效。为了为短视频开拓更多的玩法,手势识别、肢体识别等新型的算法也陆续被各个产品应用到了短视频创作中去,这类新特效的发布往往为产品带来超出预期的收益。然而,到目前为止,通用物体识别始终没有被使用到视频特效中,假设一款拍摄工具能够识别任意物体并且为其添加特效,这必将会对短视频的创作提供更多的可能,为短视频应用带来更大的收益。本文所涉及到的万能相机是短视频应用快拍的视频创作工具,万能相机基于通用物体识别能够识别任意物体并且为其添加视频特效。万能相机分为通用物体识别模块、特效处理模块、渲染模块以及业务模块四个部分,通用物体识别模块是本文主要研究设计与实现的模块。通用物体识别模块依赖于物体检测算法与目标追踪算法,其最核心的工作便是在不改变算法的前提下,通过一系列策略将两者有机结合,实现一个稳定、可以在移动端流畅运行的识别算法。通用物体识别模块的主要策略是低频率地进行性能损耗相对较高的物体检测,从不同维度对检测出的结果进行筛选,将筛选通过的的结果作为输入应用于追踪模块,同时通过后续的物体检测来修正追踪模块的结果。最终,集成了通用物体识别模块的万能相机能够在iPhone6s及以上机型、25fps的视频采集的情况下完成流畅、准确的物体识别并且添加特效,并最终集成于快拍并成功上线,成为市面上唯一的物体识别相机。
其他文献
研究了适合马家河油田注水的水质标准、储层的吸水能力,计算了注水压力上限和合理注水量,对注水井管理提出具体合理的要求和管理规范,该研究对低渗裂缝性油藏的科学开发和管
鸡球虫病是由一种或几种球虫寄生于鸡的肠黏膜上皮细胞而引起的一种急性流行性原虫病。该病分布广泛,常呈地方流行性,多危害15~50日龄的雏鸡,发病率可高达50%以上,死亡率为20%-30%,严
在舰载机无人驾驶牵引模式下,应自动生成航母飞行甲板转运路线来辅助决策。针对舰载机在飞行甲板的避碰转运路线问题,首先采用平面多边形法描述飞行甲板面的舰载机,同时,提出
文章介绍了低温甲醇洗的工艺原理和流程,对低温甲醇洗系统的冷量来源与损耗进行说明,并简要介绍了平衡冷量的方法.针对装置运行中出现的冷量不平衡问题并且导致净化气不合格
目的 :探讨对重症ICU病房进行护理风险进行防范的方法与效果。方法 :以2012年4月1日~2014年4月1日期间我院重症ICU病房护理风险进行防范的情况为例,分析我院ICU病房的护理现
研究出一种污水萃取剂——XYL高效萘磺酸络合萃取剂。根据萘磺酸系列污水特性,将母液废水中的有机物从水相转移至有机相,有机物再在反萃剂的作用下由有机相分离出来,通过萃取-反
以双酚A(BPA)为代表的环境内分泌干扰物的广泛使用带来了环境污染和生态健康风险。本实验以BPA为研究对象,对比了BDD电极、Ru O2电极与自制的Ti/Sn O2-Sb和Ti/Sn O2-Sb/Pb O2电
◆ 熟悉《家庭医药》的读者不难发现,新年第1期的杂志,从目录、内容、版式上都发生了一些变化。无论怎样改变,我们的宗旨永远不变,都是为了更好地为读者服务。还希望各位新老读者多提意见。    ◆ 内蒙古包头市中心医院的郜医生询问,如何向本刊投稿。非常感谢读者对本刊的支持。只要是具有临床经验的医药工作者,都可以向本刊投稿。当然,我们特别欢迎副主任医师以上(包括副主任医师)的医生,或获得硕士、博士学位的医
期刊
伴随着快递行业的高速发展,快递公司对于运输车辆的需求不断增大。快递支线运输作为快递配送中非常重要的一环,运输车辆需求量较大,市场前景开阔。在环境污染日益严重、传统
选择河北省具有代表性的5个典型湿地作为研究对象,在全面分析湿地资源特点的基础上,运用生态学方法和资源经济学方法,从湿地生态环境质量和生态服务价值2方面对河北省典型湿