Oracle-大数据.pptxVIP

数据处理技术的发展2010198020001990MPP Database（大规模并行处理数据库）DatabaseHadoop/MapReduceBig Data 数据处理技术比较MPP Database Hadoop/Map-Reduce 支持Schema，具备数据库表结构不支持Schema，无库表结构支持索引不支持索引直接提供SQL接口，方便开发使用不直接支持SQL接口，使用Map-Reduce，开发使用难度大， 需要专门的程序设计支持大量并行数据处理支持大量数据并行处理具备严格事务处理能力不具备严格事务处理能力直接具备负载管理能力不直接具备负载管理能力扩展性好扩展性极好专利技术、较昂贵开源技术、不昂贵适用于各种OLTP应用系统适用于各种BI/EDW应用系统不支持OLTP应用系统；在下列场景具备优势：1、有哪些信誉好的足球投注网站引擎：Map-Reduce的来源 2、多核/多处理器编程并行计算模型：简化多核程序设计复杂度3、日志分析：电信领域的日志等。4、Web 2.0企业经营分析：客户、商品、广告数据的分析和处理等。 Big Data 数据处理技术总结MPP Database 和 Hadoop/MapReduce是Big Data数据处理技术的2种选择在要求保证事务处理能力的场景，MPP Database具备显著优势Hadoop/MapReduce技术为非结构化海量数据提供了一个开源、低成本、高性能的选择MPP Database 和 Hadoop/MapReduce技术 之间不存在明显竞争关系，两者可以 互相集成和融合Hadoop交叉MPP DatabaseHadoop, A Database killer?Hadoop 不可能替代Database成为OLTP业务的运行平台Hadoop 也不可能替代MPP Database成为BI/EDW的核心平台各厂商的Big Data策略集成Big Data数据处理技术，扩展现有产品收购/开发基于Big Data数据处理技术的产品和解决方案 独立发展Big Data数据处理技术的厂商 扩展 扩展 Exadata、Teradata、Netezza、Vertica等MPP Database：内置Map Reduce技术；集成Hadoop技术，构建 互联Connector； 扩展的四种方式Hadoop ClusterAmazon CloudMPP DatabaseMPP DatabasameNodeJobTracker13Elastic MapReduceData Sources2Data SourcesRaw Weblogs1Amazon S3MPP DatabaseDataNodeTaskTrackerDataNodeTaskTrackerDataNodeTaskTrackerMPP Database收购/开发收购?2010年7月宣布收购GreenPlum ?2010年11月宣布 收购NAS厂商 Isilon，提高Big Data存储能力?2011年3月宣布收购Aster（基于Hadoop/MR的解决方案）开发?2011年5月宣布推出Greenplum Hadoop版本?2011年5月宣布推出InfoSphere Biginsights/Streams作为Big Data平台和工具2011年6月宣布收购Pillar，弥补文件SAN空白，提高Big data存储能力?2011年10月即将推出Big Data Accelerator独立发展 Cloudera作为首家推出Hadoop商业版本的独立发展厂商成为潜在被收购的对象。雅虎在2011年6月，宣布剥离数据分析服务Hadoop，与硅谷风投公司Benchmark?Capital合资组建一家名为Hortonworks的公司，负责继续开发该技术。 （来源：《纽约时报》报道） 1、the MapReduce programming model can be implemented using Oracle External Tables, Parallel Pipelined Table Functions, and Advanced Queuing.? Customers can therefore stream data directly from MapReduce into an Oracle query.? Rdbms和MR有哪些共存的形式呢？共4种形式；这4种形式适用teradata、Exadata、netezza等与MR的共存。