大数据下MongoDB数据库档案文档存储去重研究

来源 :现代电子技术 | 被引量 : 0次 | 上传用户:yongqingf
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对大数据下档案存储的现状,通过分析存储档案文档存在重复的原因,提出一种MongoDB存储档案文档的方法,利用MongoDB的GridFs统一处理不同类型和大小的文件,定义3个集合分别存储上传者记录、文件信息记录和分块文件内容,提出存储中通过文件MD5校验码值是否相同来进行去重研究,并实现去重的程序代码,有一定的实际意义。采用的分布式存储数据库增强了档案文档存储系统的可扩展性。实验表明,该方法能有效地去除重复的档案文档,提高查询效率。
其他文献
“9天时间,22万平方米,635271人次,830家企业,67场新车/新闻发布会,全球首发车型56款,缔造这些数据的便是2014年第十二届广州车展。本届展会在规模和规格上都取得了新的突破,
期刊
在汽车配件安全领域,我国强化了儿童安全座椅的检验强度。据质检总局与海关总署发布的关于《出入境检验检疫机构实施检验检疫的进出境商品目录》调整和商品编号联动调整公告,将儿童用汽车安全座椅增设进/出境检验检疫监管要求为“A/B”,即实施进/出口商品法定检验,调整自2015年2月1日起开始执行。儿童安全座椅目前质量问题较为严重,去年12月,广东出入境检验检疫局对2014年法检目录外进出口商品监督抽查发现,
近期,无线电力公司(WiTricity)正与日产进一步合作,推动电动车无线充电系统的应用。两家公司均加入了SAE International J2954标准化作业,致力于无线充电(Wireless Power Transfer,WPT)。两家公司开展合作并共同向特别工作组递交了一份联合设计系统(采用无线电力公司旗下的DRIVE系统)。今年1月,该圆形拓扑(Circular Topology)技术被
本文主要采用文献资料法从大学生主观幸福感入手,对影响大学生主观幸福感的因素进行研究,分析体育锻炼对影响大学生主观幸福感的影响。结果表明:1.大学生主观幸福感与学生的
支持JSON数据格式的MongoDB是面向文档的非关系型数据库的代表,PostgreSQL作为优秀的开源关系型数据库也被广泛使用。MongoDB和PostgreSQL之间的双向数据迁移,是很多用户遇到
【正】 祝贺翻译工作者协会的成立!翻译是十分重要的工作,解放以来成绩斐然。过去我们只能从少数几种语言译过来,现在能译的语种大大增加了(这当中自然还有外语教学工作者的
牛奶以其丰富的营养价值和健康作用,被人们形象地称为"白色血液",它是最理想的天然食品,堪称"营养宝库",对人体健康有着极为重要的作用。那么,作为我们日常饮食中不可或缺的重要
上篇:家族神话秩序的建立与陷落一、形象的叙事功能 李佩甫借助《圣经》里的神喻以呼天成为依托建立了一个中原现代乌托邦,然而在现实与历史的交错中,展示给我们的却是沉重的喟
3月1日,兰州知豆年产4万辆纯电动乘用车建设项目通过了国家发改委批复,成为了第11家获得新建纯电动汽车生产资质的企业。据了解,前10家企业分别是北汽新能源、长江汽车、长城华冠、奇瑞新能源、敏安汽车、万向集团、江铃新能源、重庆金康、国能新能源及云度。兰州知豆电动汽车母公司是宁海知豆电动汽车有限公司,成立于2015年1月10日,是山东新大洋電动车有限公司与吉利集团成立的一家新能源汽车合资公司,借助吉利
青羊区以机制改革推动城市社区治理创新是在社会管理新格局背景下结合自身的实际和相关经验推进的一种新探索。近年来,青羊区以加强基层民主协商、社区减负增效和优化社区资