服务器

  |  手机版

收藏网站

投稿QQ:1745232315

IT专家网,汇聚专业声音 解析IT潮流 IT专家网,汇聚专业声音 解析IT潮流

网络

专家视点在现场环球瞭望
IT专家网 > 服务器

曙光XData一体机六大优势 布局大数据市场

作者:Davids出处:IT专家网2013-05-21 11:21

  近年来互联网、云计算、移动终端和物联网迅猛发展。日渐复杂的企业客户信息数据,网店交易记录,视频监控终端产生的信息数据,博客、微博、照片、自创视频等,数据每秒都在爆炸产生……;我们将这种数据无时无刻都在爆炸式增长的现象称之为“大数据时代”。大数据时代,信息成为国家和企业发展的战略资产,大数据分析和挖掘为长远发展提供了决策支持的基础。

  当前我国企业面临产业结构升级、市场竞争加剧,持续创新能力不强等困难。企业信息化是产业迈向现代化,增强竞争力的必然过程。曙光认为数据分析是信息化的核心,其主要的手段就是广泛采用大数据分析技术,精准把握消费者需求,推出创新产品和创新服务,创建新的产业群,以促进经济结构调整,提高自主产品研制能力,实现“中国制造”到“中国创造”的转变。

  应大数据而生:曙光XData大数据一体机

  企业如何在数据爆炸式增长时代,实现商业变革和管理变革?如何提高行业企业创新能力,带动商业模式转型,实现“中国制造”到“中国创造”的转变?XData大数据一体机是曙光立足于当前大数据时代背景下,自主研发的通用海量数据处理平台,可广泛的应用在通信数据统计,互联网/移动互联网的日志和用户行为分析,物联网/传感器网络的数据监控和追踪分析,以及金融交易数据的离线统计和挖掘等众多领域。

  XData大数据处理机将数据存储单元和处理单元分离,通过构架高效的服务中间件,将底层采用无共享(shared-nothing)结构的数据存储节点,聚合成一个单一的数据处理系统映像,达到较高的数据读写并发度,计算并发度,以及良好的系统扩展性,可靠性和可维护性。

  XData向用户提供统一的类JDBC的客户端编程接口,向下管理分布在不同存储模块上的不同类型的数据,并提供简易的用户管理界面。XData系统的核心技术包括自动的服务注册和负载均衡,可扩展的数据划分和分布策略,高效的批量数据加载,通用的并行查询分析和处理引擎,结构化和非结构化数据的统一访问接口,不同类型数据之间的联合查询和检索,以及全方位的系统故障和恢复处理等多项技术。

  曙光XData大数据一体机六大优势

  优势1:并行处理架构

  ①XData采用无共享的结构,提供高速的数据写入能力。写入过程中,采用并行写入的方式,按照一定数据划分策略,将数据写入到后端数据节点。

  ②XData将查询语句分解成为在多个数据模块并行执行的查询任务流,所有的查询处理都在数据节点上并行的执行,充分利用无共享结构的计算并行度。

  ③XData提供任务断点执行功能,发生意外情况时,系统启动后继续执行未完成的任务。

  优势2:分级存储

  XData支持分级存储,以降低系统的总体持有成本。即按照数据量和数据的访问频率,分为在线,离线和备份三个存储级别,并支持数据在各级之间根据策略进行迁移。

  优势3:一体化执行框架

  ①XData提供类JDBC访问接口:XJDBC,有JDBC 使用经验的用户无需额外学习即可很方便的使用XJBDC访问接口;

  ②XData提供XJDBC/MapReduce混合执行框架,提供跨平台的兼容性;

  ③XData还提供较XJDBC访问接口更高的性能的专用编程接口。

  优势4:图形化监控管理

  XData提供基于Web的图形化的管理工具,简化了系统管理员对于大数据系统的管理和维护工作,使得管理一套含有几百个节点的XData和管理一套10个节点的XData的工作量接近。

  优势5:高可扩展性

  ①XData对数据进行细粒度划分,无需进行复杂规划,任意规模的扩展都能够达到数据分布均衡。

  ②XData提供细粒度数据锁,提高数据访问并发度,减小单个查询操作的无效IO,提高整体处理效率。

  优势6:复杂数据类型关联分析

  ①XData支持大表关联和大表嵌套类等复杂的查询语句的处理。XData系统通过将复杂查询解析成在多个数据节点上的并行任务流,提高复杂查询的处理性能。

  ②XData支持用户自定义的并行查询任务流,可以支持任意复杂的结构化/非结构化数据处理语义,满足更广泛的应用需求。

  XData大数据一体机包含两类组件:计算模块、数据模块和客户端。

  计算模块:用于数据的并行加载和查询处理,对客户端提供统一的数据处理接口。

  数据模块:用于提供结构化/非结构化数据一体化存储空间,内嵌高性能数据存取引擎,并行处理所有计算模块的数据访问请求。

  客户端:用于和用户应用对接,提供XJDBC/MapReduce统一访问接口和各服务专用访问接口。

  曙光XData大数据一体机与解决方案捆绑可以整合各个层面的数据,从数据收集、数据存储、数据分析、数据应用等方面构建完整的数据管理链条,为政府管理和决策提供切实可信的数据支持,极大地提高公共管理的运营效率,提高政府的信息化决策水平和公共服务水平,最终实现区域社会、经济、民生长期可持续发展。

相关文章

关键词:曙光,XData,一体机,大数据,服务器

责任编辑:邵海宏

专题推荐

原创文章

微博互动

白皮书

网警备案