使用HDFS API的方式来操作HDFS文件系统
IDEA
Java
使用Maven来管理项目
先打开IDEA,New Project
创建GAV然后next
默认使用的有idea内置的Maven,可以使用默认的也可以使用自己安装的Maven(看个人喜好Override)
然后next finish
然后就进入了编译器页面,编译器自己在创建,有一些依赖在自动下载,需要等!!!(我的网速等了我半个多小时,卡到发指)
解决IDEA创建Maven项目卡到发指===>https://www.cnblogs.com/Liuyt-61/p/10375191.html
点击IDEA顶部 View -> Tool Windows -> maven ,打开Maven视图
修改pom.xml
1、定义hadoop版本
2、引入cdh仓库(默认仓库里是没有cdh的,不添加cdh仓库将无法下载hadoop cdh的依赖包)
3、添加hadoop依赖包
然后,重点来了,一段漫长的等待,等待依赖包下载完毕(至少对我的网速来说!)ps:咬着牙写下这句话!
我不会说我的网速下载了几个小时。 上网千万条,科学第一条。
解决下载依赖包慢到发指====> https://www.cnblogs.com/Liuyt-61/p/10375211.html(虽然我设置了,但是我也不知道有没有提速)
等待完成之后将看到这样的一个美妙的没有红色波浪的画面,表示依赖下载完成基本环境搭建完成。