基于大数据的数据存储及数据筛选问题研究

被引量 : 0次 | 上传用户:forestdancer
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机及移动互联网不断发展,数据量不断增长、数据结构也更为复杂,在这种不断变化的环境下,关系型数据库在解决相关问题上遇到一定瓶颈,其不能完全适应这种变化,数据筛选同样受到大数据影响。分析大数据环境下关系型数据库在存储及数据筛选时遇到的问题十分必要,可以得到非关系型数据库解决相关问题的方法,及数据筛选相关算法使用范围。论文先介绍了大数据产生原因及对传统存储方式的影响;其次立足传统数据库优势及在大数据下缺陷,提出非关系型数据库解决相关问题的方法;最后文章认为非关系型数据库在大数据环境下并不会完全取代关系型数据库,二者可以在不同环节中结合使用。为此文章利用MongoDB、WebCollector等开源软件实现抓取内容灵活存储于非关系型数据库中,此后可依照传统方法在筛选后将数据转存到传统数据库,验证二者共同使用的可行性。
其他文献
从文化解读的视角,结合西方文化中色彩的象征意义,分析了《了不起的盖茨比》中一个重要女性人物梅特尔·威尔逊的名字的内涵及其隐含的该角色的性格本质、角色本质及其悲剧命
中国教育的特点是以教师为主,学校采取授课为主的灌输式的教学方法,学生学习强调继承性;西方教育的特点则是以学生为主,采取启发的方法,注重创造性。在借鉴当今时代西方先进
为了筛选出对苹果绵蚜高效、低毒药剂品种,笔者选择了8种不同类型杀虫剂,对苹果绵蚜进行田间药效评价。结果表明,40%毒死蜱Ew 1 500倍液、10%吡虫啉WP 1 000倍液、70%噻虫嗪W
目的:为了提升教学质量,探讨以胜任力为导向的医学免疫学课程改革。方法:选取临床专业2个班学生作为研究对象,即实验班采用胜任力为导向的教学改革,对照班采用传统教学。完成
音乐学科是一门有着自身的独特性和学科性的课程,是实施审美教育的重要途径,音乐基础知识与技能作为音乐学科的本体,是音乐学习过程中必不可少的环节。随着课程标准的颁布和
以沈周为首的吴门书派开辟了向宋人学习的新径,并由此带来书法审美风尚的转变,适时学宋成为一种风尚,学者们开始重新审视宋人书法的价值。明中帖学大兴,书家以学《淳化阁帖》
城市化进程的加快,不但导致耕地资源的大量减少,也使脆弱的城市生态愈加恶化,土地格局重新分配,探索低碳城市生活方式和新型食物生产方式已迫在眉睫。屋顶农业是城市空间农业
汪国真平白清丽的诗歌创作风格为我国当代诗歌创作提供了新的思路与借鉴,对我国当代诗歌产生了不同程度的影响。在20世纪90年代,汪国真以其"凝练"的手法迅速风靡中国诗坛,引
研究背景甲状腺激素广泛作用于机体的组织器官,参与生长发育、物质代谢及能量消耗等生理活动。基础研究显示,甲状腺激素可作用于肝细胞、骨骼肌细胞、脂肪细胞等,参与调节糖