hdfs网页查看 localhost：9870

hadoop网页查看 localhost：50070

各种hadoop下载

知识点预览

1、hadoop起源

红色字是nutch

Mapreduce 并行计算框架

YARN 为分布式程序提供资源

HDFS 分布式文件系统

hadoop狭义上指的就是hadoop这一个软件

hadoop广义上指代大数据生态圈，包括很多软件

hdfs 文件系统，yarn计算分配空间

0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzUzNzM5NTQ4,size_16,color_FFFFFF,t_70)

hdfs 白话文理解

如果某一个block块宕机之后，namenode会控制与宕机处含有同意block块的datanode控制宕机处block的复制，从两个block块恢复成三个

Namenode

Datenode

SecondaryNamenode

hadoop namenode -format 尽量不要重复使用，搭建集群使用一次即可

基础介绍

ETL的好与坏决定了数据分析的好与坏

hive

核心操作