云上大数据—生于战火的云端计算平台：ODPS与阿里PAI教程.pptx

云上大数据－生于战火的云端计算 平台：ODPS与阿里PAI 2! – 介 •  计算引擎 目录 !   Click to edit Master text styles !   简 Second level ! ODPS Third level介绍 –  Fourth level »  Fifth level »  Fifth 简介 !   Click to edit Master text styles 3! 数据平台   –  Second level •  Third level –  Fourth level 完整的数据链路， level 丰富的交换场景。   计算平台   DT生态圈   赋能：高效的生产 数据价值   阿里云   强大的公有计算 底层架构   •  4! 简介 !   Click to edit Master text styles –  Second level 计算平台Third level –  Fourth level »  Fifth level 平台化的服务 模型与算法 数据交换平台 数据挖掘 算法平台 大规模机器学习 数据、预测服务等 统计、BI … … 可视化分析 深度学习 计算引擎 SQL MapReduc e 参数服务器 MPI 图计算 … R ODPS •  简介 !   Click to edit Master text styles –  Second level 5! 计算平台Third level –  Fourth level »  Fifth level 平台化的服务 数据交换平台 数据、预测服务等 … 计算引擎 SQL MapReduc e 参数服务器 MPI 图计算 … R 模型与算法 数据挖掘 大规模机器学习 统计、BI … 深度学习 阿里PAI算法平台 算法平台 可视化分析 6! •  数据 – ：没 level »  Fifth level 生于战火的计算平台 !   Click to edit Master text styles 数据处理和 –  EB级Third level !   生于战火 Fourth 有数据，就没有计算能力 –  一路走来，在有哪些信誉好的足球投注网站、广告、电商、金融等高复杂场景下得到尽情锤 炼 !   相信生态、促进联创、成就大家 –  Second 7! ODPS计算引擎 !   Click to edit Master text styles !   ODPS概述 level !   ODPS Third level –  Fourth level »  Fifth level •  计算框架 !  Master text ODPS系统架构 8! 接入层Click to edit 接入：RESTful协议styles 逻辑层 存储与 计算层 –  Second level •  Third （level 集群A） 服务A 控制 服 务 A 备 用 集 群 Fifth 2 –  Fourth level Worker 1 »  Worker level Scheduler Exe 1 Exe 2 服务B（控制集群B） 服 务 B 备 用 集 群 Worker 1 Worker 2 Scheduler Exe 1 Exe 2 分 布 式 元 仓 服 务 飞天集群I … 飞天集群II –  Fourth level 9! ODPS规模 !   Click to edit Master text styles 器 •  Third level –  单个ODPS部署可以支持100万以上 »  Fifth level !   用户 –  10000+用户数 –  1000+项目应用 –  100+部门（多租户） –  100万以上作业 （目前单日平均提交任务） –  20000以上并发作业 –  Second level –  Fourth level 10! 灵活、安全的管理 Click to edit Master styles 通 个用户分享一个集群的资源 •  Third level 所有的计算任务都运行在安全沙箱中，通过进程和系统沙箱，配合   ODPS提供