若问2016年IT圈儿最热的词汇,相信非“大数据”莫属。从贵州到北京,以大数据为主题的会议不计其数,相关的技术公司也是层出不穷。据IDC预计,到2020年,全球就将拥有40ZB的数据量,而且如此规模之下,将是结构化数据、半结构化数据和非结构化数据并存。要从海量的大数据中攫取数据价值,无异于沙里淘金。
针对火热的大数据,曙光“搞”了一套分析平台
近日,曙光针对大数据推出了一套解决方案:曙光方舟大数据融合分析平台。当前各行业在从GB过渡到PB级数据分析过程中会遇到各种运维管理问题,方舟大数据融合分析平台就瞄准了这一痛点,致力于提供用户大数据融合、分析的“一站式”解决方案。
曙光公司总裁助理、江苏曙光信息技术有限公司总裁王海荣认为:“行业用户要快速响应大数据的时代挑战、提高大数据处理效率,一款涵盖大数据全生态系统的标准化大数据工具必不可少。”
据了解,方舟大数据融合分析平台特别适于为实现行业数据汇聚整合、构建行业数据共享生态、实现数据挖掘结果可视化、完善数据管理体系的公安、医疗、军工、电力、教育、通信等政务、军工、国企行业。例如,目前已部署曙光方舟的徐州公安系统,已能良好应对此前数据不集中、业务系统间信息孤立、数据标准不统一、海量数据运算效率低下、海量数据关联检索等问题,案件响应与办理效率大为提升。
方舟大数据平台实现数据挖掘自动化
谈到产品的优势,王海荣认为:今天发布的方舟大数据是在已有的存储和处理平台基础之上,曙光为了解决大数据落地问题,结合用户应用需求,面向非计算机专业的用户,在平台之上做了一些工具的封装,自助建模、图形化工具等。这些工具提炼主要来自于应用需求,结合平台、方舟提供的工具,将产品落地到一线。这是产品本身的特色定位。
在发布会上,我们看到更多的介绍都来自于江苏曙光,那么它与曙光集团有着什么样的分工呢?据王总介绍,曙光过去在服务器存储领域一直在持续探索,连续多年的IDC数据,曙光在全国信息化最发达的省份江苏市场占有率第一。
曙光要想进一步驱动这个市场的发展,从公司角度,希望找出一个方向。最后公司觉得在大数据发达的地方,江苏的客户对信息化理解程度和要求都比较高,也正是因为这样的情况,公司决定把大数据前端应用最接近的团队放在江苏,把更前端的团队在江苏做研发,因此诞生了江苏曙光。
技术、业务、数据实现深度融合
谈到曙光方舟的创新技术,中科曙光大数据研发经理郭庆表示,首先,底层应用了曙光XenServer标准化产品。无论是在计算、存储分析等方面都有更好的性能表现。同时利用总部研发力量,助推方舟产品的研发。
其次,方舟有两个很鲜明的特色:
一、融合。以前谈的比较多的就是Hadoop、流式计算等等,今天给用户呈现的是融合的平台。至于后端是用哪个计算方法,都会有平台进行封装。
二、方舟更贴近用户。今天所有的语言都是基于用户、业务的逻辑上研发的,这也是为了降低用户使用成本,提高应用落地的数据。这是技术、业务、数据深度融合和应用的平台,是方舟的一大特色。
据了解,曙光方舟平台已经在政府相关部门有了非常具体的应用,例如公安行业的数据分析、知识图谱等等,都能够大大提升数据挖掘效率。在电信行业,构建这样一个大数据平台解决了从数据的采集到数据的存储、到数据分析的整个过程。用户原来没有办法想象每天1000亿条的数据,曙光方舟平台现在可以每天处理、完成、运行,帮助客户解决了原来无法实现的一些业务。