基于FPGA的超高清内窥镜图像采集及增强算法实现

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:ArchrSaber
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,外科手术逐渐向微创化方向发展,电子医用内窥镜已经成为微创手术不可缺少的医疗器械。由于内窥镜对图像分辨率的需求不断增加,分辨率需要从1920*1080提升到3840*2160。在视频采集、传输以及实时处理等方面,由于视频数据量成倍增加,传统内窥镜设计方案难以满足超高清内窥镜的需求。针对上述问题,本文采用并行架构的FPGA作为主处理器,设计了一套超高清内窥镜的视频采集、传输与图像增强处理系统。系统分成摄像头手柄和图像处理主机两大部分,摄像头手柄实现超高清视频采集与远距离实时传输功能,图像处理主机实现超高清视频的实时图像增强处理及显示功能。在视频采集方面,由于超高清分辨率图像传感器输出MIPI CSI-2协议数据,本文利用FPGA逻辑编程的优势,实现MIPI CSI-2协议的物理层D-PHY和协议层CSI-2,完成图像数据的解码工作。在视频远距离传输方面,摄像头手柄需要将采集到的视频数据无压缩实时传输到5m之外的图像处理主机上。本文选择基于8B/10B的Aurora协议对原始图像数据进行编码,借助Xilinx的Ser Des实现串行数据的收发。串行数据带宽为3.125Gbps,经光模块将电信号转成光信号,传输给图像处理主机。在视频实时处理及显示方面,本论文借助FPGA并行处理的优势,实现图像预处理及图像增强算法的逻辑映射。图像预处理包括:坏点去除、Bayer插值和白平衡处理。为保证处理过程颜色不发生变化,本文将色彩空间从RGB转到HSI,从对比度、饱和度和锐度三个方面对图像进行增强。为使图像不出现断帧现象,本文设计基于DDR3读写仲裁控制模块,选用两片DDR3作为外部存储器,系统带宽为25.6 Gbps。在视频显示方面,本文选用4K HDMI编码芯片Sil9136-3,视频最终在4K显示器上显示。通过对系统进行性能指标测试,本文设计的视频采集、传输与图像增强处理系统满足超高清内窥镜的需求。系统延时为110 ms,图像分辨率为3840*2160,视频帧率为30 fps。本文的设计为超高清内窥镜场景提供了一套解决方案。
其他文献
广东是我国重要的船舶工业集中地,其毗邻南海、河网密布的自然条件为造船业的发展创造了独特的优势。清末鸦片战争后柯拜在黄埔创建了我国第一个近代船舶企业——柯拜船坞公司,修造船业开始从手工业作坊向近代工业过渡,此后广东的外资船舶修造厂、官办军事船舶工业、民营船舶修造厂及船用机器厂相继发展。新中国成立后,为提高航运能力、促进国民经济发展,广东各地开始陆续修建造船工厂,为广东船舶工业的发展奠定了基础。但改革
激光选区熔化技术(Selective Laser Melting,SLM)能制造出几何形状复杂的高质量金属零件,体现出极高的设计自由度和制造灵活性。然而SLM技术目前只能可靠地打印部分合金,因此有必要拓宽适用于该技术的合金体系。7075铝合金是一种具有高比强度的先进工程材料,而通过SLM技术可将拓扑优化与7075铝合金相结合,实现轻质高强结构件的生产。但是,该合金在SLM加工过程中表现出很强的热裂
船舶智能化是未来一种发展趋势,其中水面无人艇已成为国内外研究热点。面对多样化的海洋作业任务和复杂的海洋环境,相较于单无人艇,多无人艇系统在完成海洋勘探、捕捞、巡逻、搜救等任务时具有明显的优势,多无人艇协同技术是多无人艇系统的核心技术之一,具备智能化的自主避障能力是保证多无人艇系统安全航行的关键。鱼群效应是一种关于鱼群自组织行为形成机制的理论,具有群体分布式自主协同等优点,研究基于鱼群效应的多无人艇
纹理分类是模式识别中的一个重要的核心问题,极具挑战性。近年来,随着深度学习研究的蓬勃发展,基于深度卷积神经网络的复杂纹理分类方法成为了主流的纹理分类方法。尽管普通的卷积神经网络在实践中能有效地学习出极具区分性的图像特征,但对于纹理图像,如何充分利用卷积神经网络得到一个鲁棒且具区分性的整体纹理特征表示,仍然是一个关键问题。本文基于分形几何和统计自相似性,提出两种有效的纹理分类深度学习方法。本文第一个
【目的】肝素在体内外均有抗凝作用,被广泛应用于临床,但其治疗窗窄,抗凝过度可致出血,抗凝不足又会引发血栓。由于肝素的药代学和药效学在不同个体之间存在差异,因此如何个性化精准给药是肝素应用过程中的难题,特别是对于肾功能不全、老年人、孕妇、儿童和肥胖人群,现有的根据体重计算给药量的方法往往效果欠佳。肝素的血药浓度与药物疗效和安全性密切相关,是指导用药的重要指标,但目前尚无快速、有效、低损伤的肝素监测方
报纸
弃风限电是我国风电快速发展过程中面临的主要问题,如何采取措施改善风电消纳现状受到了业界的普遍关注。采用综合能源系统架构,发展多元转换技术,可以提高风电的就地消纳能力。本文重点关注以电解水制氢技术为核心的两种途径实现风电的就地消纳:(1)先利用风电制取氢气,再将氢气转化为系统的终端产品甲烷,由电转气(Power to Gas,P2G)设备实现整个转化过程;(2)先利用风电制取氢气,将氢气存储在储氢罐
木质素作为植物体中含量第二大的天然高分子聚合物,产量丰富,成本低,可生物降解。每年制浆造纸和生物炼制行业产生的工业木质素高达8000万吨,对工业木质素进行高值化利用具有重要的研究意义和极大的经济价值。木质素分子结构具有三维网状结构特性、富含芳香骨架和活性官能团,是一种理想的功能材料前驱体。木质素/无机氧化物纳米颗粒因其兼具有机高分子材料和无机材料的特性,其可控制备及应用得到越来越广泛的关注。ZnO
随着国内考古遗址类博物馆的不断发展,对陈展的要求也越来越高。由于此类博物馆的建设和大遗址的保护通常以考古发现为契机,历史时期的遗址博物馆又常以高规格墓葬为支撑,故考古在其中扮演的角色至关重要。在陈展中,如何在呈现一个完整叙事的同时,兼具考古发现等逻辑,以期做到多音和鸣,是值得思考的问题。
随着科学技术的迅速发展,尤其是计算机、人工智能等技术的进步,离散装备制造业正在进行新一轮的产业变革,将智能化、信息化和工业化深度融合,使越来越多的装备制造企业加快实现智能化转型。对于按订单需求进行加工生产的离散装备制造企业,准确地预测订单完工期能够保证按时给客户交付订单,提高公司的竞争力。由于实际的生产加工环境较为复杂,在订单生产的过程中存在诸多不确定因素影响订单的最终完工时间,这些不确定因素增加