大数据已经渗透到社会的各个行业,其数量每天都在呈指数增长,不仅类型复杂,还呈现动态特性。如何从海量的数据中挖掘对国家、企业和科研有用的信息成为目前研究的主题和难点。因此,本文主要研究用API和网络爬虫技术获得数据源,然后运用数据挖掘算法对数据源处理、分析并通过可视化图形分析得出相应的结论,运用商业智能软件Tableau对数据源进行分析与展示。最后,将上述实时图形集成在云平台展示。主要工作如下:使用深度优先策略爬取专利之星检索系统云南省高校的高校从2007至2016年专利申请数据并将获得的数据在Tableau中展示,得到了高校专利申请数量与科研创新能力的关系。本文针对卡尔曼滤波时误差值逐渐减小的特点,将数据多次迭代,即将滤波后的输出数据作为新的输入数据,经过多次迭代后使得卡尔曼滤波后真实值尽可能准确地接近真实值,但是迭代次数并非越多越好,当迭代次数过多时会造成滤波数据失真,因此选择适合的迭代次数尤为重要。将改进后的卡尔曼滤波算法得到的误差曲线与传统卡尔曼滤波得到的误差曲线比较,可以知道改进后的卡尔曼滤波算法误差曲线的初始值更小,因此滤波后得到的真实值更接近实际温度。然后,将改进后的卡尔曼滤波算法与平滑指数滤波算法进行比较,前者的预测结果同样更贴近实际温度。Tableau作为当今最流行的商业智能软件,拥有优秀的数据可视化展示效果和较强的数据图表制作能力。R语言可以对数据进行统计和分析,拥有丰富的软件包和图表优势,最重要的是R语言可以跨平台运用和展示。本文将Tableau和R语言集成,弥补Tableau与R语言各自的不足,实验证明二者集成使用确实能优势互补。利用Tableau和R语言对全国34个省会以上城市进行排列,利用可视化图形说明全国宜居城市与温度、湿度和空气质量指数的关联。网络摄像头融合了摄像头与网络技术,根据网络摄像头的IP地址就可以对网络摄像头实时访问。本文使用网络摄像头截取摄像空间内人脸图像,使用支持向量机算法识别人脸,人脸识别作为人数采集方法的一种,也属于数据挖掘的一部分,外网登陆摄像头使得人们能远程控制摄像头。腾讯云服务器平台能提供处理能力可以弹性收缩并且安全可靠、简单高效的计算服务,很多公司都将自己的服务上传到云。本文将在本地构建的系统上传到腾讯云服务器并通过可以跨平台运行的web服务器软件——Apache部署系统,让人们通过任何终端设备均可查看到系统中的数据信息。