基于大数据技术的网络信息分析研究

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:liushanxue
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,通信技术和互联网技术飞速发展,人们对社会化媒体的使用也随之骤增,网络产生的数据越来越多。在这样的环境下,推荐系统作为一种有效解决数据过载问题的技术,得到了广泛的关注和研究。同时,大数据技术的成熟应用使得数据处理的速度大幅度提升。本文的研究课题正是基于推荐系统技术以及其与大数据技术的结合进行的。本文分析了课题的研究背景和国内外的研究现状,在对推荐系统技术的国内外研究做出调研总结之后,着重研究了基于邻域的协同过滤和基于模型的协同过滤推荐技术,在此基础上进行自己的改进和创新,提出了一种融合推荐算法。在只有评分数据的场景下,深度融合基于项目邻域的协同过滤算法KNNitem和基于矩阵降维模型的推荐算法RSVD,结合这两种算法的优点,从而同时考虑了局部相似度和全局相似度,提升了推荐算法的准确度。随后采用北邮人论坛的实际数据进行试验证明,改进的推荐算法具有更好的推荐效果。同时,本文针对大数据时代推荐系统的数据处理速度慢的问题,将推荐系统与大数据技术相结合,通过对开源的推荐系统的研究和分析,总结出基于大数据技术的个性化推荐系统的设计与实现方法,基于Mahout框架进行个性化推荐系统的构建。通过分层设计的模式对个性化推荐系统进行设计,阐述各层的功能和设计原理,随后通过程序的编写对系统进行实现。
其他文献
植物的三维建模一直是计算机图形学和计算机视觉等研究领域的重难点,而花朵更是因为其几何结构和种类的多样性使得其建模的过程更加复杂和困难。而随着计算机信息技术、硬件
【目的】基于器官去细胞生物支架制备技术,通过双向电泳(2-DE)电泳、LC-MS/MS技术比较正常大鼠与四氯化碳(CCL4,carbon tetrachloride)诱导肝纤维化大鼠模型2W、4W、6W和8W组去细
随着移动互联网上视频的清晰度越来越高,人们对移动端的视频业务的需求越来越普遍,但是国内无线网络经常因为网络带宽或终端能力的限制不能满足用户观看实时高清视频的需求。
视频运动目标检测与跟踪是计算机视觉学科中的一个很热门的方向,它包括数字图像处理、模式识别,甚至还涉及人工智能和机器学习等,已经被很好的应用在军事、工业、智能交通、
随着民航的快速发展,增长的飞行流量和紧张的空域资源之间的矛盾日益突显,扇区结构需要经常改变以适应不断增长的交通流量需求。在此过程中,需要对扇区容量进行持续评估,辅助扇区规划与日常流量管理。本文针对扇区容量需要随扇区结构改变而经常更新,且对于扇区规划阶段,管制员工作负荷不能科学确定的情况,提出了基于海量航迹数据的K-means聚类和神经网络算法模型评估管制扇区容量的新技术。技术方面,本文首先分析了扇
IP电话是一种通过互联网或其他使用IP技术的网络,来实现新型的电话通讯。很多大型的公司为了方便管理,提高生产力会采取每个工位配置一台的情况。若设备管理员想对其中的一台
随着微波集成电路技术水平的提高,毫米波雷达系统已越来越多的进入人们的日常生活领域——如安全防护、汽车主动安全及智能交通监控等。本文主要针对雷达系统的信号处理方法
随着信息技术的发展,在诸如图像检索、智能导航、视频监控以及其他计算机视觉任务领域,场景识别和分类都有着广泛的应用前景和理论意义,这对快速准确地实现场景图像的分类提
视频业务,在无线传输中占有大多数比例。当前无线视频传输机制存在重传效率低,视频解码不流畅等问题。针对以上问题,本文提出了一种新的信源信道联合优化机制。本方案提出的
面对不断增长的移动互联网业务需求,寻找一种可以为用户提供低成本无线业务的方法成为了当务之急。传统无线接入网受到高额的资本支出与运维开支的限制,已逐渐失去了竞争力,