国内主要大数据厂商.pdfVIP

国内主要大数据厂商 概述 大数据可以概括为 4 个 V ，数据量大(Volume)、速度快(Velocity)、类型多(Variety)、 价值密度低(Veracity)。大数据作为时下最火热的IT 行业的词汇，随之而来的数据仓库、数 据安全、数据分析、数据挖掘等等围绕大数据的商业价值的利用逐渐成为行业人士争相追捧 的利润焦点。随着大数据时代的来临，大数据分析也应运而生。 目前国内大数据发展很快，但绝大部分都是基于开源生态圈展开的应用开发，很少有自 主的独立技术，下面介绍下国内拥有独立自主技术的大数据厂商。 北京永洪科技：Yonghong Z-Suite Yonghong 在大数据、分布式计算、数据分析等领域具备核心竞争力、自主创新并拥 有多项发明专利。Yonghong 研发团队推出的商业智能平台 Z-Suite ，是由一系列基于MPP 架构的商业智能产品组成。 Z-Suite 是探索式的商业智能产品，她具备丰富的数据分析能力。当用户访问数据应用 的时候，如果看到商业活动的异常或者变化时，除了数据展现，我们更需要的是能够通过即 席的、深入的分析以获取现象背后的深层次原因。基于 Z-Suite ，用户可以不断地与数据对 话（Talk ），深入分析信息(Analyze) ，直到得到满意的答案。 Z-Suite 具有高性能的大数据分析能力，她完全摒弃了向上升级(Scale-Up) ，全面支持 横向扩展(Scale-Out)。Z-Suite 主要通过以下核心技术来支撑 PB 级的大数据： 跨粒度计算(In-Database Computing) Z-Suite 支持各种常见的汇总，还支持几乎全部的专业统计函数。得益于跨粒度计算技 术，Z-Suite 数据分析引擎将找寻出最优化的计算方案，继而把所有开销较大的、昂贵的计 算都移动到数据存储的地方直接计算，我们称之为库内计算(In-Database)。这一技术大大 减少了数据移动，降低了通讯负担，保证了高性能数据分析。 并行计算(MPP Computing) Z-Suite 是基于 MPP 架构的商业智能平台，她能够把计算分布到多个计算节点，再在 指定节点将计算结果汇总输出。Z-Suite 能够充分利用各种计算和存储资源，不管是服务器 还是普通的 PC ，她对网络条件也没有严苛的要求。作为横向扩展的大数据平台，Z-Suite 能够充分发挥各个节点的计算能力，轻松实现针对 TB/PB 级数据分析的秒级响应。 列存储 (Column-Based) Z-Suite 是列存储的。基于列存储的数据集市，不读取无关数据，能降低读写开销，同 时提高 I/O 的效率，从而大大提高查询性能。另外，列存储能够更好地压缩数据，一般压 缩比在 5 -10 倍之间，这样一来，数据占有空间降低到传统存储的 1/5 到 1/10 。良好的数 据压缩技术，节省了存储设备和内存的开销，却大大了提升计算性能。 内存计算 得益于列存储技术和并行计算技术，Z-Suite 能够大大压缩数据，并同时利用多个节点 的计算能力和内存容量。一般地，内存访问速度比磁盘访问速度要快几百倍甚至上千倍。通 过内存计算，CPU 直接从内存而非磁盘上读取数据并对数据进行计算。内存计算是对传统 数据处理方式的一种加速，是实现大数据分析的关键应用技术。 GBase GBase 是南大通用数据技术有限公司推出的自主品牌的数据库产品， GBase 系列产 品包括：分析型数据库 GBase 8a、分布式并行数据库集群 GBase 8a Cluster、高速内存数 据库 GBase 8m/AltiBase、可视化商业智能 GBaseBI、大型目录服务体系 GBase 8d、硬 加密安全数据库 GBase 8s、数据抽取转换加载管理系统 GBase ETL。 GBase 内部使用的是Mysql 的分布式数据仓库Infobright ，所以也介绍下Infobright。 Infobright 是开源的 MySQL 数据仓库解决方案，引入了列存储方案，高强度的数据压 缩，优化的统计计算(类似 sum/avg/group by 之类) ， infobright 是基于 mysql 的，但不装 mysql 亦可，因为它本身就自带了一个。mysql 可以粗分为逻辑层和物理存储引擎，infobright 主要实现的就是一个存储引擎，但因为它自 身存储逻辑跟关系型数据库根本不同，所以，它不能像 In