Hadoop学习之安装伪分布式

伪分布式安装:启动HDFS和YARN      参考Apache官网伪分布式的配置和启动

一、启动HDFS

1、配置etc/hadoop/core-site.xml 查看hadoop目录 命令:[root@hadoop01 hadoop­2.7.3]# cd ./etc/hadoop/ 命令:[root@hadoop01 hadoop]# ll Hadoop学习之安装伪分布式

 

配置hadoop默认服务访问名,localhost代表本机,可以改成之前设置的主机名称hadoop01 命令:[root@hadoop01 hadoop]# vi core-site.xml    在文件后面添上如下语句 端口号为9000    把hadoop01换成你的虚拟机的ip即可或者你的主机名(看个人设计)   Hadoop学习之安装伪分布式   配置hdfs产生的临时文件的目录。原本默认是放在根路径下的/tmp,有时候会被删除掉,因此自定义一下。 进入hadoop目录为他创建临时目录 命令:[root@hadoop01 hadoop]# cd /usr/local/hadoop-2.7.3/ 命令:[root@hadoop01 hadoop-2.7.3]# mkdir -p data/tmp tips:mkdir -p 帮助你直接将所需要的目录(包含上一级目录)都创建起来! 进入刚才创建的目录把路径拿到配置文件中 命令:[root@hadoop01 hadoop-2.7.1]# cd data/tmp/ 命令:[root@hadoop01 tmp]# pwd Hadoop学习之安装伪分布式

 

修改etc/hadoop/core-site.xml配置文件 命令:[root@hadoop01 tmp]# cd /usr/local/hadoop-2.7.3/ 命令:[root@hadoop01 hadoop-2.7.3]# cd ./etc/hadoop/ 命令:[root@hadoop01 hadoop]# vi core-site.xml     在文件后面添上如下语句 Hadoop学习之安装伪分布式

 

2、配置etc/hadoop/hdfs-site.xml 配置副本复制数量。伪分布式是在一台节点上运行的,如果设置的副本复制数量>1时,副本需要复制到其他节点上,因此伪分布式环境下副本复制数量值必须设置为1。 进入etc/hadoop/hdfs-site.xml 命令:[root@hadoop01 hadoop]# vi hdfs-site.xml    在文件后面添上如下语句 Hadoop学习之安装伪分布式

 

3,格式化NameNode  格式化文件系统     命令:[root@hadoop01 hadoop]# hdfs namenode -format   Hadoop学习之安装伪分布式

 

4,启动namenode 命令:[root@hadoop01 hadoop]# cd .. 命令:[root@hadoop01 etc]# cd .. 命令:[root@hadoop01 hadoop-2.7.3]# sbin/hadoop-daemon.sh start namenode  5,启动datanode 命令:[root@hadoop01 hadoop-2.7.3]# sbin/hadoop-daemon.sh start datanode  通过jps命令查看java进行的进程,此时namenode和datanode启动成功   Hadoop学习之安装伪分布式

 

 

(注:如果namenode没启动成功则可能是主机名称之前没配好,回到core-site.xml文件把hadoop01换成你的虚 拟机的ip即可;也可能是默认的临时目录路径没修改,去加个临时目录路径)
上一篇:HBase集群安装部署


下一篇:2.1.8 hadoop体系之离线计算-hdfs分布式文件系统-HA(高可用)-Hadoop集群环境搭建