大数据平台构建（国家） 大数据平台构建（国家） Ambari平台.pptxVIP

Ambari平台 2 Apache Ambari平台 学习任务 Ambari 部署Hadoop 3 Apache Ambari平台 Apache Ambari 是一种基于Web 的工具，支持Apache Hadoop 集群的供应、管理和监控。 Ambari 已支持大多数Hadoop 组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop 和Hcatalog 等。 4 Apache Ambari平台优点 Web 安装图形界面操作便捷 Hadoop 家族组件支持全面 社区资源比较丰富 5 Apache Ambari平台架构 Ambari框架是Server/Client模式。 其中Ambari Server除了基本的用户、组、集群信息管理之外，还提供了Rest API，一部分是接受Ambari Client发送的心跳请求以及各种数据采集信息，一部分是监控管理功能。通过Rest API可以简洁地操作Ambari。 6 Apache Ambari平台架构 Ambari框架是Server/Client模式。 Ambari Client 负责采集节点相关信息并且发送心跳信息给Ambari Server，同时还需要执行来自Ambari Server的命令（诸如程序安装和服务启动终止等）。 7 Apache Ambari部署方法 部署ambari-server和ambari-agent 首先需要获取 Ambari 的公共库文件（public repository） 使用yum命令安装ambari-server软件包 使用ambari-server setup命令对 Ambari Server 做一个简单的配置 使用ambari-server start来启动ambari 8 Apache Ambari部署方法 当成功启动 Ambari Server 之后，便可以从浏览器登录，默认的端口为 8080。如在浏览器的地址栏输入 http://ip地址:8080，登录用户名和密码为 admin/admin。 登入 Ambari 之后的页面如下图所示 9 Ambari 部署Hadoop 登录 Ambari 之后，点击按钮“Launch Install Wizard”，就可以开始创建属于自己的大数据平台。 第一步，命名集群的名字。 第二步，选择一个 Stack，这个 Stack 相当于一个 Hadoop 生态圈软件的集合。Stack 的版本越高，里面的软件版本也就越高。我们可以选择HDP2.2，里面的对应的 Hadoop 版本为 2.6.x。 第三步，指定 Agent 机器（如果配置了域，必须包含完整域名），这些机器会被安装 Hadoop 等软件包。 10 Ambari 部署Hadoop 11 Ambari 部署Hadoop 第四步，Ambari Server 会自动安装 Ambari Agent 到刚才指定的机器列表。 安装完成后，Agent 会向 Ambari Server 注册。成功注册后，就可以到下一步。 第五步，需要选择要安装的软件名称。可以选择HDFS、YARN + MapReduce2、Zoopkeeper、Storm 以及 Spark。选的组件越多就会需要越多的机器内存。选择之后就可以继续下一步了。这里需要注意某些 Service 是有依赖关系的。如果选择了一个需要依赖其他 Service 的一个 Service，Ambari 会提醒安装对应依赖的 Service。 12 Ambari 部署Hadoop 13 Ambari 部署Hadoop 第六步和第七步，分别是选择安装软件所指定的 Master 机器和 Slave 机器，以及 Client 机器。这里使用默认选择即可（真正在生产环境中，需要根据具体的机器配置选择） 第八步，就是 Service 的配置。绝大部分配置已经有默认值，不需要修改。对于初学者如果不需要进行调优是可以直接使用默认配置的。有些 Service 会有一些必须的手工配置项，则必须手动输入，才可以下一步。 14 Ambari 部署Hadoop 第九步，Ambari 会总结一个安装列表，供用户审阅。如果没问题，就直接到下一步。 第十步，Ambari 会开始安装选择的 Service 到 Ambari Agent 的机器。这里可能需要等待一段时间，因为都是在线安装。安装完成之后，Ambari 就会启动这些 Service。 15 Ambari 部署Hadoop 16 Ambari 部署Hadoop 安装完成之后，就可以查看 Ambari 的 Dashboar