大数据集群完全分布式部署实操篇:HDFS2.9.2、HBASE2.2.6、YARN2.9.2、SPARK2.4.7,ZOOKEEPER3.6.2

  • 推荐以rpm方式安装jdk,有些软件比如cm只认/usr/java/default目录
  • 配置/etc/hosts文件
  • 配置ssh免密登录
  • 配置时间同步

HDFS安装

  • 单机伪分布式安装
    • ssh远程登录找不到$JAVA_HOME环境变量,所以要写成绝对路径
[root@cm-m0 home]# ll
总用量 745248
drwxr-xr-x 3 root root      4096 12月  2 11:15 cm-install
-rwxr-xr-x 1 root root 366447449 12月 14 12:44 hadoop-2.9.2.tar.gz
-rwxr-xr-x 1 root root 220469021 12月 14 11:52 hbase-2.2.6-bin.tar.gz
-rw-r--r-- 1 root root 176209195 11月 27 09:22 jdk-8u201-linux-x64.rpm
drwxr-xr-x 2 root root        56 10月 20 10:24 ntp-install
[root@cm-m0 home]# mkdir /opt/bigdata
[root@cm-m0 h
上一篇:11 Paxos是一种提高分布式系统容错性的一致性算法。


下一篇:汇总:易兮团队技术专题