(CDH4.4安装文档.docxVIP

一、准备工作1，修改防火墙，添加过滤端口（7180,7181,9000,9001等，其中7180主要是cdh控制台用的，9000和9001是通讯用的，可以在安装过程中报错之后再去添加或者直接关闭防火墙）2，每台机器上配置一个名称相同的用户，并且配置该用户可以免密码sudo（如果想直接使用root用户的话可以省略这一步骤）e.g.: useradd hadoop passwd hadoop visudo(编辑添加%hadoop ALL=(ALL) NOPASSWORD:ALL ##hadoop群组的用户都可以免密码sudo了)3，配置各个主机ssh互联(这一步骤主要是针对每台机器的用户密码不一样才需要，如果各个主机在上一步新增的用户采用的密码一致可以跳过这一步)（1）在做namenode的机器上运行ssh-keygen -t rsa 然后选择保存路径以及验证口令（随意），生成密钥,注意记住保存路径以及验证口令（2）复制公钥到其他datanode上执行namenode: scp .ssh/id_rsa.pub hadoop@slave:~/master_keys(使用默认22端口，也可以在scp 后加 -P 端口号)登录所有的datanode执行：datanode: mkdir ~/.sshchmod 700 ~/.sshmv ~/master_keys ~/.ssh/authorized_keyschmod 600 ~/.ssh/authorized_keys最后验证一下能不能互联：ssh -p2522 hadoop@slave回车就能登录到slave机器（如果有输入口令还要输入口令）注：最后记得下载私钥到本机，后续安装需要用到4，修改各个主机上的/etc/hosts文件，增加集群内所有主机的ip-主机名映射注，此处的主机名必须与每台机器的主机名一致，否则后续的安装可能会报错二、开始安装1，到cloudera官网下载安装文件cloudera-manager-installer.bin2，执行sudo chmod u+x cloudera-manager-installer.bin然后执行 sudo ./cloudera-manager-installer.bin 开始安装cloudera manager，一路选yes、回车就行了注：这一步骤可能耗时过久导致安装失败，参考三、问题汇总解决3，安装完成之后会提示登录到控制台上继续操作，打开浏览器输入地址，一般是安装cloudera manager主机的ip+端口（7180）如果打不开控制台的网页，查看iptables是否禁用了端口，并修改iptables过滤7180端口，重启iptables即可默认用户名密码为admin/admin4，登录之后开始安装集群以及CDH首先选择免费版，点继续接着有哪些信誉好的足球投注网站主机，输入集群的所有主机地址或者hostname以及ssh端口（注意要用内网地址）选择继续5，选择要安装的软件一般选择使用包裹（parcel），同时选择CDH4,不用选择Solr和Impala6，输入用户名密码根据一、准备工作中创建的用户来选择是用root用户还是其他用户，是所有主机相同密码还是接受相同私钥7，向每台主机安装一些元包（jdk，cloudera-agent等等）这个过程可能会耗时很长，主要是要下载几个安装包总共有几百兆，且每台机都要下载，同时还有可能会安装失败（有时可能是下载超时，或者防火墙问题）注，可参考三、问题汇总快速通过此步骤8，安装完成后会继续下载CDH包（7百多兆）后点继续，此时要求选择在CDH上的服务，根据需要选择，一般选择核心服务就行了，后续可以再添加9，数据库设置，可以选择使用嵌入式数据库（PostgreSQL，已经包含在cloudera中不用安装）也可以使用外部的数据库，点击测试连接，成功后点继续注，此处有可能会在点击测试连接之后提示Unknown host :7432. Unable to find it from host...，这个应该是个bug，解决方法在后面后续的安装一路点继续就可以了，最后安装成功三、问题汇总1，在安装cloudera manager时由于要去下载安装包（国外的源）导致过程非常缓慢，甚至经常出错，此时建议在namenode机子上先下载好所有的包，在本地手动安装，完成之后再重新执行安装cloudera manager：用浏览器打开/cm4/redhat/6/x86_64/cm/4.7.2/（具体路径可查看/etc/yum.repos.d/cloudera-manager.repo）然后在主机上用wget /cm4/redhat/6/x86_64/cm/4.7.2/***.rpm 手动下载所有的软件包，然后执行：y