【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件

目标:
编译Apache Hadoop2.2.0在win7x64环境下的Eclipse插件

环境:
win7x64家庭普通版
eclipse-jee-kepler-SR1-win32-x86_64.zip
Apache Ant(TM) version 1.8.4 compiled on May 22 2012
java version "1.7.0_45"

参考文章:

插件源码下载:

前提:
ant、jdk、eclipse、Apache hadoop 2.2.0安装包都准备好
插件源码包已经下载好
在虚拟机上已经部署好Apache hadoop 2.2.0环境

步骤1:
Apache Hadoop 2.2.0的安装包拷贝至任意windows目录,我使用的目录是D:\Development_ProgramFiles_2014\hadoop-2.2.0
切记:整个路径不能出现空格,否则ant编译过程会出错!

步骤2(该步骤应该可以省略)
将Hadoop集群上存配置文件的文件夹hadooproot/etc/hadoop/拷贝到D:\Development_ProgramFiles_2014\hadoop-2.2.0\etc下

步骤3:
运行cmd,进入插件源码根目录,执行
cd src/contrib/eclipse-plugin

步骤4
执行ant jar -Dversion=2.2.0 -Declipse.home=D:\Development_ProgramFiles_2014\eclipse2014 -Dhadoop.home=D:\Development_ProgramFiles_2014\hadoop-2.2.0
注意:命令中需要指定需编译插件的目标eclipse安装目录、hadoop安装目录。
切记:两个目录的全路径中都不能带有空格。

步骤5
然后就是漫长等待了,主要慢的target:ivy-download,ivy-resolve-common这两步。
最后生成的插件在
hadoop2x-eclipse-plugin-master\build\contrib\eclipse-plugin\hadoop-eclipse-plugin-2.2.0.jar

步骤6:
hadoop-eclipse-plugin-2.2.0.jar拷贝到eclipse的plugins目录下,启动eclipse

步骤7:
Window--》Preferences 配置hadoop根目录:
【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件
注意:配置该路径仅仅是为了执行MR程序过程中,eclipse能找到相应的jar包。

步骤8:
打开mapreduce的view:
【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件
配置location:
【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件
【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件
注意:MR Master和DFS Master配置必需和mapred-site.xml和core-site.xml等配置文件一致。

步骤9:
打开Project Explorer,查看HDFS文件系统:
【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件
【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件


步骤10:
新建mapreduce项目
【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件

创建mapreduce程序:
【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件


运行MR程序,提示无法连接集群,请参见后续文章:
【甘道夫】Win7环境Eclipse连接Hadoop2.2.0
http://blog.csdn.net/u010967382/article/details/25368313

【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件,布布扣,bubuko.com

【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件

上一篇:使用反汇编破解 Windows 下Markdown 编辑器 MarkdownPad 2


下一篇:Windows 服务开发框架介绍 - Topshelf