论文部分内容阅读
2016年8月25日,“2016第八届中国行业信息化评选活动”在北京隆重举办。来自行业信息化领域的几百位企业代表、政府领导、业内专家和学者参加了本次大会和颁奖典礼,共同分享了行业信息化的经典案例,并深入探讨了我国行业信息化的发展方向。
南京中新赛克科技有限责任公司(简称中新赛克)凭借在大数据领域内扎实的技术能力、持续创新的解决方案以及在商业智能领域的多年实践,获得“2016年度中国行业信息化优秀解决方案”称号、“2016年度中国商业智能领域具影响力企业”殊荣,这是对中新赛克在大数据领域多年默默耕耘、厚积薄发的肯定,也是对中新赛克在大数据技术成果转化和应用提出了更高的要求和期望。
作为信息安全行业大数据的领军企业,中新赛克大数据已经深入到政府、金融、教育、安全等多个领域,多年的积累和坚持,让中新赛克具有丰富的大数据应用落地解决方案及服务经验。
面对大数据、云计算等新一代信息技术革命,中新赛克通过不断的创新发展,依托自身强大的研发团队、深厚的技术沉淀和对于新技术发展的敏锐理解,自主研发了具有完全自主知识产权的大数据操作系统,走上智能、科学、可持续的发展道路。
中新赛克实现了类似PC操作系统的大数据操作系统,它能够屏蔽大数据底层复杂的技术细节,为大数据应用提供一个便捷、快速的支撑平台,加快大数据应用的实施,推动产业链的发展。中新赛克自主研发的Ocean Mind大数据操作系统(大数据平台)整体架构包括以下几部分:
第一是Ocean Source(DSM) 数据源管理。数据源管理组件,可以屏蔽传统多数据源管理的复杂度,实现分布式多源、异构数据类型的数据源管理。
第二是Ocean Storage (DSE) 数据存储引擎。数据存储管理组件,可以屏蔽海量异构数据的存储复杂度,支持存储结构化数据、半结构化数据、非结构化数据存储,无需关注数据存储差异性即可实现数据融合存储。
第三是Ocean Analysis (DAE) 数据分析引擎:数据分析管理组件,可以屏蔽海量异构数据的查询分析复杂度,无需关注数据差异性即可实现海量数据快速查询响应和高效聚合分析。
第四是Ocean Mining (DME)数据挖掘引擎:数据挖掘管理组件,可以屏蔽海量异构数据挖掘过程的复杂度和挖掘算法的复杂度,无需关注挖掘技术复杂度和海量异构数据的差异即可实现数据挖掘分析。
第五是Ocean Eye(ACE) 应用生成引擎。应用生成管理组件,通过可视化交互、APP应用商店等手段,无需关注大数据底层技术细节即可实现大数据应用开发。
第六是BDOMM大数据操作维护模块。大数据操作系统运维管理组件,支持部署、监控、运行、备份、维护等自助运维服务。
同时提供大数据平台系统级安全管理。
中新赛克大数据产品基于上述成熟的引擎及模块,采用自研的软件基础架构,同时吸收优化开源先进的大数据软件框架,自主研发的集海量结构化和非结构化的数据采集、存储、管理、分析挖掘及展现等功能为一体的大数据平台,提供完善的管理、监测、运维、调度工具及Web服务接口,具有NoSQL数据平台所共有的海量存储、线性扩展、高并发读写、低成本使用等优点,并且可以便捷地与开源生态系统中其他组件交互数据,中新赛克大数据整体解决方案具有以下特点:
第一,存储类型丰富。支持各类型数据索引、分布式文件、分布式对象、分布式块、结构化数据和非结构化数据库,可满足文件/流式/数据库等各类型业务数据存储需求。
第二,PB级各类型数据高效存储,可解决客户业务应用数据不断增加的存储需求。
第四,针对多数据源的海量异构数据,提供秒级近实时的统计分析、联合查询、全文搜索、聚合分析等快速查询分析能力。
第五,分布式机器学习算法快速实现海量数据可视化分析、预测、决策等深度数据挖掘,满足各行业各类型的数据挖掘应用。
第六,线性弹性扩容能力,客户业务应用不中断、无感知,满足行业新需求,引导业务的快速变化。
第七,支持各类数据源,兼容客户已有传统库可灵活部署,满足业务应用对多维度各类型数据需求。
第八,提供标准业务能力接口,可快速调用DAE数据分析引擎、DME数据挖掘引擎和DSE数据存储引擎,更便利对接已有业务系统构建新业务应用。
第九,通过组件化APP、应用商店、类自然语言逻辑设计,可节省80%程序量,自行快速开发构建、调整部署大数据的业务应用。
灵活的多数据源管理配置、分布式存储、分布式分析、分布式挖掘、快速应用生成、操作维护管理等功能,提供模块化、一站式大数据平台的能力,等等这些都是中新赛克大数据整体解决方案的一部分,可满足不同行业客户的需求。完整的解决方案和成熟可靠的大数据操作系统使得中新赛克获得“2016年度中国行业信息化优秀解决方案奖”殊荣。
作为新兴的信息技术,大数据从客户角度感知、分析业务信息,通过对海量数据灵活的挖掘和分析,实现对数据、结果分析等全方位的可视化展示,借助大数据在信息挖掘、分析和预测上的强大功能,在商业、经济及其他领域中,决策行为将日益基于数据和分析做出,而并非基于经验和直觉。大数据分析改变人类的生活方式和商业决策,围绕大数据的应用激发了前所未有的商业创新热潮。
中新赛克商业智能产品有效的解决了客户更有效率地运营业务的现实需求,将正确的数据出现在合适的时间,通过数据分析手段获得变革的潜力与直观的理解,影响着教育、安全、交通等各行各业。中新赛克的商业智能产品覆盖数据检索、数据分类、数据过滤、数据排序、数据聚合等多个方面,通过自研的可视化编程语言来进行数据分析挖掘和模型建立,可动态定制输出报表,进行数据可视化展示,建立不同的商业展示,并且,可以随时调整参数,满足快速试错、快速验证的思路,帮助进行商业决策。 对于许多早期的使用者,当他们从传统商业智能 (BI) 的实践发展到可靠直观更容易理解的更高级分析时,新的BI数据改变了他们的业务,改变了业务人员的思维和策略,中新赛克的产品和服务能给客户带来更好的体验。
中新赛克商业智能系列产品可以部署在Windows , Linux, Unix三大平台之上,能在多种平台上运行,如Microsoft的Window Server,CentOS,Ubuntu等,系统为典型的WEB分布式架构,通过浏览器进行访问和操作,可支持数据采集、数据存储、数据分析、数据模型、应用商店等多种功能,可对机器数据、业务数据、结构化数据、非结构化数据等多源异构数据进行分析。在机器数据分析领域,可以应用到安全防护,趋势预测,机器巡检,运维监控管理等多个场景。
在业务应用数据领域,中新赛克可以提供搜索引擎服务,使用类似互联网搜索引擎的做法,直接输入关键字来检索数据,并支持高级复杂的查询表达式来操作数据,再选择时间范围,所有与相关的数据在数秒之内作为结果返回。在搜索结果的基础上,通过界面上的操作,可以进行进一步的深入分析数据关联性,这种数据溯源式搜索在问题定位方面的效率上相较传统的数据分析平台有巨大的优势,灵活性很高。同时,可以将搜索后的结果数据作为数据模型进行存储,并可后续进行增删改查等操作,还可以使用独立的APP进行分析模型定制,满足需求解决固化的现实场景。
在数据格式方面,中新赛克支持多种形式格式,支持对所有以文本形式存在的机器数据进行处理,如标准的syslog和非结构化的事件日志,SNMP事件,XML文本,对于业务数据,通过插件的方式来支撑复杂文本的解析,可以是office文档,pdf格式,zip文件,甚至可以是加密文档等。在数据导入方面,支持通过文件上传,共享目录等方式对文件数据进行索引分析和实时监控;网络设备和应用服务器产生的日志则可以通过TCP/UDP端口侦听的方法进行采集,甚至脚本运行产生的数据也可以作为数据来源进行索引和分析。
为了更好的体现大数据技术在商业智能的实际应用,中新赛克不断的进行产品创新并在用户角度进行优化,比如中新赛克的大数据搜索结果,可以快速转化为报表模型保存下来,保存的模型可作为技术和管理知识或者实时监控使用,并且被系统记忆的搜索语句和模型,可根据特定类型和需求进行重新定义和组合,形成内容丰富的知识集合,以折线图、条形图、柱状图、饼图、区域图、散点图、气泡图、单指、径向仪表、塞尺、标记规、映射等多种可视化形式在同一个页面上进行呈现。
中新赛克的现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术将现有的数据,转换成知识、分析和结论,辅助决策者做出正确且明智的决定,用数据分析实现商业价值,用行动和实力证明中新赛克符合“2016年度中国商业智能领域具影响力企业”之称。
中新赛克OceanMind一站式大数据解决方案,专注于构建大数据操作系统Ocean OS,让大数据管理、应用更加自如,让数据导入、数据存储、数据分析、数据挖掘、数据呈现变得更加轻而易举,是帮助客户平滑、快速升级到现代主流大数据架构的有效保障,是帮助客户便捷、高效的跨越到大数据时代的有力工具。正如中新赛克的大数据发展理念: More than Data不止于数据,大数据技术的进步不会停止,对大数据的探索和挖掘也不断向前,产业的壮大离不开像中新赛克这种专业、专注的企业。
发展大数据产业空间无限,依托大数据的商业模式,已在助力大众创业、万众创新,推动大数据产业的整体繁荣,中新赛克正在贡献企业自己的力量,也在为不同行业的客户贡献自己的价值。在可以预见的未来,大数据必将与我们的生活越来越紧密,这是发展知识经济、循环经济、低碳经济的必然趋势,中新赛克也会持续创新,不断努力,在大数据的浪潮中开创新的局面,谱写新的篇章。
南京中新赛克科技有限责任公司(简称中新赛克)凭借在大数据领域内扎实的技术能力、持续创新的解决方案以及在商业智能领域的多年实践,获得“2016年度中国行业信息化优秀解决方案”称号、“2016年度中国商业智能领域具影响力企业”殊荣,这是对中新赛克在大数据领域多年默默耕耘、厚积薄发的肯定,也是对中新赛克在大数据技术成果转化和应用提出了更高的要求和期望。
作为信息安全行业大数据的领军企业,中新赛克大数据已经深入到政府、金融、教育、安全等多个领域,多年的积累和坚持,让中新赛克具有丰富的大数据应用落地解决方案及服务经验。
面对大数据、云计算等新一代信息技术革命,中新赛克通过不断的创新发展,依托自身强大的研发团队、深厚的技术沉淀和对于新技术发展的敏锐理解,自主研发了具有完全自主知识产权的大数据操作系统,走上智能、科学、可持续的发展道路。
中新赛克实现了类似PC操作系统的大数据操作系统,它能够屏蔽大数据底层复杂的技术细节,为大数据应用提供一个便捷、快速的支撑平台,加快大数据应用的实施,推动产业链的发展。中新赛克自主研发的Ocean Mind大数据操作系统(大数据平台)整体架构包括以下几部分:
第一是Ocean Source(DSM) 数据源管理。数据源管理组件,可以屏蔽传统多数据源管理的复杂度,实现分布式多源、异构数据类型的数据源管理。
第二是Ocean Storage (DSE) 数据存储引擎。数据存储管理组件,可以屏蔽海量异构数据的存储复杂度,支持存储结构化数据、半结构化数据、非结构化数据存储,无需关注数据存储差异性即可实现数据融合存储。
第三是Ocean Analysis (DAE) 数据分析引擎:数据分析管理组件,可以屏蔽海量异构数据的查询分析复杂度,无需关注数据差异性即可实现海量数据快速查询响应和高效聚合分析。
第四是Ocean Mining (DME)数据挖掘引擎:数据挖掘管理组件,可以屏蔽海量异构数据挖掘过程的复杂度和挖掘算法的复杂度,无需关注挖掘技术复杂度和海量异构数据的差异即可实现数据挖掘分析。
第五是Ocean Eye(ACE) 应用生成引擎。应用生成管理组件,通过可视化交互、APP应用商店等手段,无需关注大数据底层技术细节即可实现大数据应用开发。
第六是BDOMM大数据操作维护模块。大数据操作系统运维管理组件,支持部署、监控、运行、备份、维护等自助运维服务。
同时提供大数据平台系统级安全管理。
中新赛克大数据产品基于上述成熟的引擎及模块,采用自研的软件基础架构,同时吸收优化开源先进的大数据软件框架,自主研发的集海量结构化和非结构化的数据采集、存储、管理、分析挖掘及展现等功能为一体的大数据平台,提供完善的管理、监测、运维、调度工具及Web服务接口,具有NoSQL数据平台所共有的海量存储、线性扩展、高并发读写、低成本使用等优点,并且可以便捷地与开源生态系统中其他组件交互数据,中新赛克大数据整体解决方案具有以下特点:
第一,存储类型丰富。支持各类型数据索引、分布式文件、分布式对象、分布式块、结构化数据和非结构化数据库,可满足文件/流式/数据库等各类型业务数据存储需求。
第二,PB级各类型数据高效存储,可解决客户业务应用数据不断增加的存储需求。
第四,针对多数据源的海量异构数据,提供秒级近实时的统计分析、联合查询、全文搜索、聚合分析等快速查询分析能力。
第五,分布式机器学习算法快速实现海量数据可视化分析、预测、决策等深度数据挖掘,满足各行业各类型的数据挖掘应用。
第六,线性弹性扩容能力,客户业务应用不中断、无感知,满足行业新需求,引导业务的快速变化。
第七,支持各类数据源,兼容客户已有传统库可灵活部署,满足业务应用对多维度各类型数据需求。
第八,提供标准业务能力接口,可快速调用DAE数据分析引擎、DME数据挖掘引擎和DSE数据存储引擎,更便利对接已有业务系统构建新业务应用。
第九,通过组件化APP、应用商店、类自然语言逻辑设计,可节省80%程序量,自行快速开发构建、调整部署大数据的业务应用。
灵活的多数据源管理配置、分布式存储、分布式分析、分布式挖掘、快速应用生成、操作维护管理等功能,提供模块化、一站式大数据平台的能力,等等这些都是中新赛克大数据整体解决方案的一部分,可满足不同行业客户的需求。完整的解决方案和成熟可靠的大数据操作系统使得中新赛克获得“2016年度中国行业信息化优秀解决方案奖”殊荣。
作为新兴的信息技术,大数据从客户角度感知、分析业务信息,通过对海量数据灵活的挖掘和分析,实现对数据、结果分析等全方位的可视化展示,借助大数据在信息挖掘、分析和预测上的强大功能,在商业、经济及其他领域中,决策行为将日益基于数据和分析做出,而并非基于经验和直觉。大数据分析改变人类的生活方式和商业决策,围绕大数据的应用激发了前所未有的商业创新热潮。
中新赛克商业智能产品有效的解决了客户更有效率地运营业务的现实需求,将正确的数据出现在合适的时间,通过数据分析手段获得变革的潜力与直观的理解,影响着教育、安全、交通等各行各业。中新赛克的商业智能产品覆盖数据检索、数据分类、数据过滤、数据排序、数据聚合等多个方面,通过自研的可视化编程语言来进行数据分析挖掘和模型建立,可动态定制输出报表,进行数据可视化展示,建立不同的商业展示,并且,可以随时调整参数,满足快速试错、快速验证的思路,帮助进行商业决策。 对于许多早期的使用者,当他们从传统商业智能 (BI) 的实践发展到可靠直观更容易理解的更高级分析时,新的BI数据改变了他们的业务,改变了业务人员的思维和策略,中新赛克的产品和服务能给客户带来更好的体验。
中新赛克商业智能系列产品可以部署在Windows , Linux, Unix三大平台之上,能在多种平台上运行,如Microsoft的Window Server,CentOS,Ubuntu等,系统为典型的WEB分布式架构,通过浏览器进行访问和操作,可支持数据采集、数据存储、数据分析、数据模型、应用商店等多种功能,可对机器数据、业务数据、结构化数据、非结构化数据等多源异构数据进行分析。在机器数据分析领域,可以应用到安全防护,趋势预测,机器巡检,运维监控管理等多个场景。
在业务应用数据领域,中新赛克可以提供搜索引擎服务,使用类似互联网搜索引擎的做法,直接输入关键字来检索数据,并支持高级复杂的查询表达式来操作数据,再选择时间范围,所有与相关的数据在数秒之内作为结果返回。在搜索结果的基础上,通过界面上的操作,可以进行进一步的深入分析数据关联性,这种数据溯源式搜索在问题定位方面的效率上相较传统的数据分析平台有巨大的优势,灵活性很高。同时,可以将搜索后的结果数据作为数据模型进行存储,并可后续进行增删改查等操作,还可以使用独立的APP进行分析模型定制,满足需求解决固化的现实场景。
在数据格式方面,中新赛克支持多种形式格式,支持对所有以文本形式存在的机器数据进行处理,如标准的syslog和非结构化的事件日志,SNMP事件,XML文本,对于业务数据,通过插件的方式来支撑复杂文本的解析,可以是office文档,pdf格式,zip文件,甚至可以是加密文档等。在数据导入方面,支持通过文件上传,共享目录等方式对文件数据进行索引分析和实时监控;网络设备和应用服务器产生的日志则可以通过TCP/UDP端口侦听的方法进行采集,甚至脚本运行产生的数据也可以作为数据来源进行索引和分析。
为了更好的体现大数据技术在商业智能的实际应用,中新赛克不断的进行产品创新并在用户角度进行优化,比如中新赛克的大数据搜索结果,可以快速转化为报表模型保存下来,保存的模型可作为技术和管理知识或者实时监控使用,并且被系统记忆的搜索语句和模型,可根据特定类型和需求进行重新定义和组合,形成内容丰富的知识集合,以折线图、条形图、柱状图、饼图、区域图、散点图、气泡图、单指、径向仪表、塞尺、标记规、映射等多种可视化形式在同一个页面上进行呈现。
中新赛克的现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术将现有的数据,转换成知识、分析和结论,辅助决策者做出正确且明智的决定,用数据分析实现商业价值,用行动和实力证明中新赛克符合“2016年度中国商业智能领域具影响力企业”之称。
中新赛克OceanMind一站式大数据解决方案,专注于构建大数据操作系统Ocean OS,让大数据管理、应用更加自如,让数据导入、数据存储、数据分析、数据挖掘、数据呈现变得更加轻而易举,是帮助客户平滑、快速升级到现代主流大数据架构的有效保障,是帮助客户便捷、高效的跨越到大数据时代的有力工具。正如中新赛克的大数据发展理念: More than Data不止于数据,大数据技术的进步不会停止,对大数据的探索和挖掘也不断向前,产业的壮大离不开像中新赛克这种专业、专注的企业。
发展大数据产业空间无限,依托大数据的商业模式,已在助力大众创业、万众创新,推动大数据产业的整体繁荣,中新赛克正在贡献企业自己的力量,也在为不同行业的客户贡献自己的价值。在可以预见的未来,大数据必将与我们的生活越来越紧密,这是发展知识经济、循环经济、低碳经济的必然趋势,中新赛克也会持续创新,不断努力,在大数据的浪潮中开创新的局面,谱写新的篇章。