离线在CentOS上安装CDH

前两天装了一个5节点的CDH5.7.0测试环境,因为管理员不给开互联网连接,所以只能离线本地安装。记录了一下大概的安装步骤。因为过了两天,按照回忆写的,部分步骤可能不全。
1、 准备工作
操作系统:CentOS6.4,设置本地YUM源。

5个节点
XXX.XXX.XXX.11 cdh1(namenode)
XXX.XXX.XXX.12 cdh2
XXX.XXX.XXX.13 cdh3
XXX.XXX.XXX.14 cdh4
XXX.XXX.XXX.15 cdh5

关闭所有节点防火墙

   sudo service iptables stop
   sudo chkconfig iptables off
   sudo vi /etc/selinux/config  SELINUX=disabled

在 namenode节点安装http服务并启动

    yum install httpd
    service httpd start
    chkconfig httpd on

配置所有节点hosts文件

    vi /etc/hosts

内容如下
127.0.0.1 localhost localhost localhost4 localhost44
::1 localhost localhost localhost6 localhost66
XXX.XXX.XXX.11 cdh1
XXX.XXX.XXX.12 cdh2
XXX.XXX.XXX.13 cdh3
XXX.XXX.XXX.14 cdh4
XXX.XXX.XXX.15 cdh5
XXX.XXX.XXX.11 archive.cloudera.com

所有节点安装ssh
yum install openssh-clients

2、下载cdh5.7.0和cm5.7.0
下载CM5.7.0.:
http://archive.cloudera.com/cm5/cm/5/ cloudera-manager-xenial-cm5.7.0_amd64.tar.gz

下载CDH5.7.0:
http://archive-primary.cloudera.com/cdh5/repo-as-tarball/5.7.0/cdh5.7.0-ubuntu16-04.tar.gz

下载Key
http://archive.cloudera.com/navigator-keytrustee5/redhat/6/x86_64/navigator-keytrustee/5/

将下载的文件解压至相应目录如下
mkdir -p /var/www/html/cm5/redhat/6/x86_64/
mkdir -p /var/www/html/cdh5/redhat/6/x86_64/
mkdir -p /var/www/html/navigator-keytrustee5/redhat/6/x86_64/

访问http://cdh1/cm5/redhat/6/x86_64/cm/5/RPMS/x86_64/验证是否可以访问,也可以使用archive.cloudera.com的域名验证一下

3、配置yum文件
cd /etc/yum.repos.d/
下载数据源的repo文件:
http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/cloudera-cdh5.repo
http://archive-primary.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo
http://archive-primary.cloudera.com/navigator-keytrustee5/redhat/6/x86_64/navigator-keytrustee/navigator-keytrustee5.repo

下载下来的文件,baseurl的值都是使用archive.cloudera.com的域名,我们已经在hosts文件中重定向到了namenode节点

4、安装cm5.7.0
下载cloudera-manager-installer.bin:
http://archive-primary.cloudera.com/cm5/installer/5.7.0/cloudera-manager-installer.bin
给下载下来的文件执行权限
chmod +x cloudera-manager-installer.bin
等待一小会就安装完成了,即可访问http://namenode:7180访问进行cdh的安装。注意:在此种安装方法中不需要建立服务器间的互信,也不需要安装JDK

5、一键安装cdh
登录页面,使用 admin/admin登录,根绝界面提示一步步安装即可。

在安装的时候如果提示HTTPS访问不了,就在NameNode上配置HTTPS服务,如果继续提示这个HTTPS不安全什么的,就把对HTTPS安全的验证先关了。

上一篇:ECS服务器使用体验


下一篇:阿里云 ET:人工智能可以是这样的|学习笔记