面向跨模态数据协同分析的视觉问答方法综述

来源 :北京工业大学学报 | 被引量 : 0次 | 上传用户:ivantesr
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
协同分析和处理跨模态数据一直是现代人工智能领域的难点和热点,其主要挑战是跨模态数据具有语义和异构鸿沟.近年来,随着深度学习理论和技术的快速发展,基于深度学习的算法在图像和文本处理领域取得了极大的进步,进而产生了视觉问答(visual question answering,VQA)这一课题.VQA系统利用视觉信息和文本形式的问题作为输入,得出对应的答案,核心在于协同理解和处理视觉和文本信息.因此,对VQA方法进行了详细综述,按照方法原理将现有的VQA方法分为数据融合、跨模态注意力、知识推理3类方法,全面总结分析了VQA方法的最新进展,介绍了常用的VQA数据集,并对未来的研究方向进行了展望.
其他文献
滑液囊支原体(Mycoplasma synoviae,MS)又称滑液囊霉形体,属于支原体的一种,其大小介于细菌和病毒之间,是没有细胞壁只有细胞膜且具有自我复制能力的原核微生物。禽滑液囊支原体病是由滑液囊支原体引起的一种传染性疾病,当鸡感染滑液囊支原体后常引起亚临床感染,可陆续发展为呼吸道疾病或传染性滑膜炎,进而导致鸡生长缓慢、跛行明显、产蛋率下降、蛋壳顶端异常(eggshell apex abno
文中针对土壤水分温度预测的实际需求,从基于物联网技术的环境数据采集系统以及适配的深度学习预测模型选择两方面对相关问题进行研究,设计一种基于嵌入式系统及NB-IoT技术的物联网数据采集系统验证平台。基于采集到的数据,分析长短时记忆网络(LSTM)、门控循环单元(GRU)以及双向长短时记忆网络(Bi-LSTM)模型的预测效果。实验结果表明,所提出的数据采集系统可以有效获得深度学习所需数据,而基于该数据
为合理分配养老服务资源,提高老年人生活质量,本文基于2018年中国老年人健康长寿影响因素追踪调查数据(CLHLS),运用Logit回归法,研究农村老人的社区居家养老服务需求及其影响因素。研究表明,农村老人普遍愿意接受社区为其提供的养老服务,各项具体服务需求人数占比均超过55%,其中居家护理与保健知识教育服务需求最高,其需求比例分别达79.95%和72.97%;日常购物服务需求意愿最低,为56.47
为了实现小型化、结构对称、差分效果好的LC差分滤波器,以低温共烧陶瓷(LTCC)技术为基础,以截止频率2.4 GHz为目标,设计出了一款低通差分滤波器。先通过ADS给出一个单端的LC滤波电路,再采用垂直螺旋式电感和垂直直插式电容相耦合的模型,在HFSS中仿真实现,最后利用差分电路原理将其转换成了差分结构的LC滤波器,设计并实现了截止频率为2.4 GHz,具有在通带内对共模信号的抑制超过-15 dB
“十四五”期间全国天然气管网已形成了互联互通,但管输气质更加复杂,一定量的粉尘广泛存在于天然气管道中,导致储气库往复式压缩机压缩缸发生异常磨损。基于切向撞击能量模型,结合现场测量和计算流体力学动网格方法,明确了压缩缸磨损特性。结果表明,压缩缸内润滑油与粉尘混合后形成研磨膏,随着粉尘质量浓度从0.01%增至3.00%,研磨膏黏度从4.51×10~5mPa·s增加至1.27×10~6mPa·s,密度从
综述辉光放电等离子体对淀粉蚀刻、氧化、交联及解聚的作用机理;归纳辉光放电等离子体的技术参数,(包括气体种类、生成方式、处理功率及处理时间的变化对淀粉结构及性质的影响。淀粉的结构变化归纳为颗粒结构、结晶类型、层状结构及链支比例,理化性质的变化归纳为淀粉的糊化性质、流变性、焓热变化、酸度及溶解性等。最后,该文综述了辉光放电等离子体处理的淀粉在食品、包装及材料工业领域中的应用,并展望了今后亟需开展的研究
为认真贯彻落实习近平总书记"以建立农村振兴齐鲁模式"的要求,加快发展新农业和新农村,日照市决定加快发展现代农业产业园。推进现代农业产业园建设,强化优势和特色产业,将其做大做强,延伸产业链,提升产业综合效益,促进现代技术装备一体化和农业"新六产业"发展,为"齐鲁乡村振兴模式"建设提供新模式,创造新经验,为农业和农村经济发展培育新动力。
在制备氯甲基化聚砜(CPSF)的基础上,CPSF与4-(咪唑-1基)苯甲醛反应制备得到侧链含有醛基的季铵化聚砜(PSF-BA),接着PSF-BA与聚乙烯醇(PVA)通过化学反应制备一种交联型聚砜/聚乙烯醇聚砜阴离子交换膜(PSF-VA),在用红外光谱(FT-IR)表征其化学结构的基础上,重点研究了阴离子交换膜的吸水率(water uptaking, WU)、尺寸稳定性和耐碱性等性能。本文的PSF-
通过对武汉市二十多家养老机构、社区老年人服务中心和生活小区的实地调研,结合对412位60岁以上老人的问卷调查和访谈,对比分析了武汉市居家养老、社区老年人服务中心和各种不同类型养老机构的运营状况和不同养老模式满足老年人养老需求的现状。研究发现,随着年龄的增长老年人考虑入住养老院的意愿逐渐增强;男性较女性更不愿入住养老院;和子女同住的老人最不愿考虑将来入住养老院,而空巢老人最愿意入住养老院;与互联网社