视觉引导下码垛机器人目标检测和堆叠技术

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:aiaiai19870310
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,新冠疫情发展迅猛,在人之间的传播异常,这对物流的安全运输提出了很高的要求。无论是在智能工厂还是在运输物流领域都对工业自动化有很大的需求。在十四五规划中提出目标,要推动工业互联网的平台建设,新一代信息技术与制造业深度融合。这对航空物流领域的智能化发展提出了更高的要求。本文针对航空物流中的运输,检测,装箱的全链路环境,选用多传感器AGV自主导航进行运输,采用视觉等传感器进行货物三维尺寸的智能识别,采用装箱算法进行仿真堆叠优化。主要工作如下:先策划码垛机器人的系统整体方案。包括货物自动搬运子系统、货物三维检测子系统和货物堆叠子系统三部分,然后逐一展开设计研究。对于自动搬运子系统,采用激光雷达自主导航AGV,给出差速AGV的硬件结构,结合AGV几何结构和运行方式,考察转弯变向路段AGV的可通行,在此基础上提出当量膨胀地图障碍后将货物运输到指定堆垛地点的全局路径规划优化方案。对于货物三维检测子系统,给出检测平台的硬件结构,包括传送装置和检测传感器,通过对比分析各类传感器优缺点,选择采用RGBD传感器获取货物三维信息,通过图像分析软件进行三维物体的位姿和尺寸的识别,分别对RGB相机和红外深度相机进行标定和配准;采用双RGBD融合方式,通过侧面的补偿实现遮挡物体的信息提取。从软件多方面途径提高检测精度:通过有监督深度学习网络来提高物体三维尺寸的识别准确率。先采用传统的机器学习方法,进行聚类拟合进行识别;接着针对聚类拟合的单一性和适用范围小的缺点,采用Point Net网络作为底层特征识别网络,并利用Vote Net投票网络,通过建立现有数据集进行识别;再针对Vote Net对遮挡物体的识别率不足,通过引入距离系数和双RGBD融合数据集补偿,建立改进后的New Vote Net网络。对于货物堆叠子系统,针对物体信息是否全部已知,以及装箱顺序是否固定,将堆叠分为三种:在线、半在线、离线堆叠三种方式,分析各类码垛堆叠的三维装箱算法的合适度。根据前述检测已获得的货物三维信息,着重对货物进行半在线堆叠规划。在分析组合优化的基本方式的基础上,讨论半在线装箱的一般解决方法;建立半在线装箱问题模型,找出约束,给出启发式算法的设计流程。针对一般的启发式算法可能会丢失最优解的情况,提出采用混合遗传算法进行堆叠。在一般的遗传算法的流程中引入记忆因子,并给出实现混合免疫遗传算法的具体方式。实验证明,对于获取货物三维信息,双RGBD布置有最好的效果;Vote Net网络比传统目标匹配的识别精度高很多,而改进的New Votenet网络能够在货物间距离远和货物存在遮挡的环境下提高识别精度;采用混合遗传免疫算法进行半在线堆叠能使堆叠空间的使用率最高和堆叠成本最低。
其他文献
随着水电机组单机容量的增大,电力系统运行相对越来越复杂,对水电机组的安全、高效运行也提出更高要求,特别是对于水轮发电机的灭磁系统。发电机灭磁系统是有关发电机安全运行的最后一道防线,既要实现可靠灭磁、又要满足灭磁的快速性,这对灭磁设备的性能是极大的考验。灭磁设备损坏因设备老化以及灭磁事故影响偶有发生,严重影响发电机组的安全稳定运行,所以通过在线灭磁性能指标表征的形式,对灭磁系统整体性能进行评估变得格
学位
<正>随着加州鲈养殖规模的不断提升,疾病也呈现暴发性趋势,养殖过程中常见疾病包括由嗜水气单胞菌、维氏气单胞菌、温和气单胞菌、肠型点状气单胞菌、柱状黄杆菌、诺卡氏菌引起的细菌性疾病,由弹状病毒、蛙虹彩病毒引起的病毒性疾病和由车轮虫、杯体虫、锚头鳋等引起的寄生虫病,可引发加州鲈烂鳃、肠炎、疥疮、烂身、尾鳍出血、溃疡、败血等症状,但目前未见新疆地区关于加州鲈疾病的相关研究报道。
期刊
磁耦合无线电能传输(Magnetic Coupling Wireless Power Transfer,MC-WPT)技术基于电磁感应原理,通过交变的电磁场实现了完全电气隔离的无线传输,具有广大的科研价值和实际应用前景。本文首先以无线电能传输拓扑为研究对象,其次通过二端口理论,简要阐述了目前应用较多的低阶补偿拓扑以及高阶补偿拓扑的输出特性,最后通过对两种二次侧S型补偿拓扑进行了阻抗模型分析对比,明
学位
目的:建立超高效液相色谱(UPLC)法同时测定固本消疹方中5-羟甲基糠醛、升麻素苷、毛蕊异黄酮苷、升麻素、5-O-甲基维斯阿米醇苷、毛蕊异黄酮、亥茅酚苷、6-姜酚、五味子醇甲和梣酮10个成分的含量,明确配伍对10个成分含量变化的影响。方法:应用UPLC梯度洗脱技术,采用ACQUITY UPLC BEH C18色谱柱(2.1 mm×100 mm, 1.7μm),以乙腈-0.1%甲酸水溶液为流动相,流
期刊
目的 探讨华蟾素(CINO)联合5-氟尿嘧啶(5-FU)对人源结肠癌(CRC)耐药细胞株HCT15/5-FU的逆转作用,明确缺氧诱导因子(HIF-1α)/血管内皮生长因子(VEGF)通路在逆转结肠癌化疗耐药中的调控作用。方法 MTT法检测细胞耐药性及耐药指数的变化,流式细胞术评价细胞凋亡的情况,划痕实验和Transwell法检测细胞迁移和侵袭能力的变化。Western blot检测上皮间充质转化(
期刊
作为未来电网建设的目标和方向,智能电网的实现离不开各种先进的配电网信息通信技术。而无线传感器网络(Wireless System Network,在后文中均以WSN表示)具有功耗低、扩展能力强、铺设成本低、组织灵活性强等优点,将其应用于智能配电网(Distance System Network,在后文中均以DSN表示)中,提升现代配电通信网业务的传输质量,已经成为了当下的研究热点。为了给DSN提供
学位
本文主要解决无线电能传输系统中供电侧电源使用寿命和传输效率等问题。针对传统单管逆变并联谐振无线电能传输发射端电路输入电流突变问题,提出一种变拓扑单管并联谐振无线电能传输发射端电路。首先通过对比分析四种逆变电路,选择单管逆变电路。对四种补偿方式进行建模分析,发现并联-并联谐振电路的补偿电容容易受互感和负载的影响。该电路常用在充电距离固定且负载稳定的场景,比如便携式设备供电、人体植入电子设备供电等。然
学位
锁孔效应钨极氩弧焊(Keyhole Tungsten Inert Gas welding,K-TIG welding)采用大焊接电流的自激磁场完成电弧的磁压缩,能够得到能量密度高、挺度大的自由电弧,是一种实现大熔深、单面焊双面成形的高效焊接形式,在中厚板材和大型罐体的焊接领域有很大的应用和发展前景。由于K-TIG焊的焊接稳定性由锁孔保证,电弧长度又是影响锁孔稳定的重要因素,综合考虑K-TIG焊对电
学位
“元宇宙”概念的出现,必将开创超越科技与人文边界、从被动观影走向沉浸式体验、从单向接受到双向互动、从时间叙事到在场感的最新电影形式。“元宇宙”概念下的电影既要利用数字科技革命带来的前沿技术,又要展现人文关怀,电影艺术在后现代语境下也呈现出思维认知的变革。故而,如何厘清电影科技与人文关怀的辩证关系就显得尤为重要。
期刊
随着工业4.0的不断推动,对工业设备的要求不再只是实现自动化,还需对其运行状态进行监控,设备发生故障后从专家凭借经验排除故障的模式,逐渐转变到通过设备运行过程的数据对设备进行实时监控。注塑机作为塑料制品的主要生产设备也是如此,注塑机的液压系统是复杂多变的,而齿轮泵作为液压系统的动力源,一旦发生内泄漏会对很多执行元件造成影响,最终影响制品质量。但是齿轮泵的内泄漏故障特征不明显,不易被发现,往往要出现
学位