export HADOOP_HEAPSIZE=20

export HADOOP_PID_DIR=/home/fenglibin/hadoop_tmp

參数

默认值

说明

fs.default.name

file:///

NameNode的URI，如：

hdfs://locahost:9000/

hadoop.tmp.dir

/tmp/hadoop-${user.name}

其他暂时文件夹的基本文件夹，

/home/fenglibin/hadoop_tmp

hadoop.native.lib

true

是否使用hadoop的本地库

hadoop.http.filter.initializers

空

设置Filter初使器，这些Filter必须是hadoop.http.filter.initializers的子类。能够同一时候设置多个，以逗号分隔。这些设置的Filter，将会对全部用户的jsp及servlet页面起作用。Filter的顺序与配置的顺序同样。

<configuration>  

  <property>  

    <!-- 用于设置Hadoop的文件系统。由URI指定 -->

    <name>fs.default.name</name>  

    <value>hdfs://localhost:9000</value>  

  </property>  

  <property>

<!-- 配置Hadoop的暂时文件夹，默认在/tmp文件夹下，可是/tmp上面可能会被系统自己主动清理掉。-->

<name>hadoop.tmp.dir</name>

<!-- 文件夹假设不存在。须要手动创建 -->

    <value>/home/fenglibin/hadoop_tmp</value>

    <description>A base for other temperary directory</description>

  </property>

</configuration>  

參数

说明

演示样例

mapred.job.tracker

配置JobTracker，以Host和IP的形式

localhost:9001

mapred.system.dir

MapReduce框架在HDFS存放系统文件的路径。必须能够被server及client訪问得到，默认值：

${hadoop.tmp.dir}/mapred/system

${hadoop.tmp.dir}/mapred/system

mapred.local.dir

MapReduce框架在本地的暂时文件夹，能够是多个，以逗号作分隔符，多个路径有助于分散IO的读写，默认值：

${hadoop.tmp.dir}/mapred/local

${hadoop.tmp.dir}/mapred/local

mapred.tasktracker.{map|reduce}.tasks.maximum

在同一台指定的TaskTacker上面同一时候独立的运行的MapReduce任务的最大数量，默认值是2（2个maps及2个reduces），这个与你所在硬件环境有非常大的关系，可分别设定。

2

dfs.hosts/dfs.hosts.exclude

同意/排除的NataNodes。假设有必要。使用这些文件控制同意的DataNodes。

mapred.hosts/mapred.hosts.exclude

同意/排除的MapReduces，假设有必要，使用这些文件控制同意的MapReduces。

mapred.queue.names

可用于提交Job的队列，多个以逗号分隔。MapReduce系统中至少存在一个名为“default”的队列，默认值就是“default”。

Hadoop中支持的一些任务定时器，如“Capacity Scheduler”。能够同一时候支持多个队列，假设使用了这样的定时器，那么使用的队列名称就必须在这里指定了。一旦指定了这些队列。用户在提交任务，通过在任务配置时指定“。而系统默认的复制份数为3。例如以下：

6、格式化namenode

7、启动Hadoop

假设是出现例如以下结果，那就说明Hadoop已经成功启动了：

此时我们能够通过WEB方式查看NameNode及Jobtracker的状态了：

NameNode：http://localhost:50070/

JobTracker：http://localhost:50030/

假设仅仅是測试map/reduce，这里仅仅须要启动例如以下命令：

8、启动Hadoop可能会遇到的问题

后面会提到。