【HDFS API编程】开发环境搭建

使用HDFS API的方式来操作HDFS文件系统

  IDEA

  Java

  使用Maven来管理项目

先打开IDEA,New Project

【HDFS API编程】开发环境搭建

创建GAV然后next

【HDFS API编程】开发环境搭建

默认使用的有idea内置的Maven,可以使用默认的也可以使用自己安装的Maven(看个人喜好Override)

然后next   finish

【HDFS API编程】开发环境搭建

然后就进入了编译器页面,编译器自己在创建,有一些依赖在自动下载,需要等!!!(我的网速等了我半个多小时,卡到发指)

解决IDEA创建Maven项目卡到发指===>https://www.cnblogs.com/Liuyt-61/p/10375191.html

【HDFS API编程】开发环境搭建

点击IDEA顶部  View -> Tool Windows -> maven ,打开Maven视图

修改pom.xml

1、定义hadoop版本

2、引入cdh仓库(默认仓库里是没有cdh的,不添加cdh仓库将无法下载hadoop cdh的依赖包)

3、添加hadoop依赖包

【HDFS API编程】开发环境搭建

然后,重点来了,一段漫长的等待,等待依赖包下载完毕(至少对我的网速来说!)ps:咬着牙写下这句话!

我不会说我的网速下载了几个小时。 上网千万条,科学第一条。

解决下载依赖包慢到发指====>  https://www.cnblogs.com/Liuyt-61/p/10375211.html(虽然我设置了,但是我也不知道有没有提速)

等待完成之后将看到这样的一个美妙的没有红色波浪的画面,表示依赖下载完成基本环境搭建完成。

【HDFS API编程】开发环境搭建

    

上一篇:Java的String、StringBuffer和StringBuilder的区别


下一篇:python ImportError: No module named 的问题