大数据Hadoop集群搭建实践记录

大四快要毕业啦,文科专业可太难就业了,自己学过java语言,想要从事大数据相关工作,现在趁这段时间打算好好学一下Hadoop生态,网上找到尚硅谷视频学习,跟着视频先装了VMware虚拟机,结果电脑卡得不行,在跟老哥交流了后,他建议我用服务器搭建,因为Hadoop集群至少2台机器,老哥把他博客的那台阿里云服务器让我捣腾,然后让我自己再申请台阿里云学生服务器(“飞天加速计划·高校学生在家实践”活动)。大厂就是大气呀,还有这种活动,听我老哥说,他读书时也是申请阿里云服务器学生机搞了自己的博客,哈哈哈哈。
由于自己太新太菜了,踩了很多坑,一点小事情都费了好多时间,总体来说就是遇到问题就百度再慢慢学习,这里就简单说一下自己的心得吧。(PS:先学习哈linux基本操作命令),  
连接服务器,个人真心推荐MobaXterm软件,界面简洁,界面可以看到服务器文件夹,最重要的是可以直接拖拉拽上传文件,当然大佬们还可以推荐些更好用的软件,后面听我老哥讲,直接在cmd用ssh连接服务器就行(又学到了),大家也可以试哈。
在搭建hadoop时,很多需要在网页端访问,结果都无法访问,百度了一大圈才知道需要在阿里云管理页面,安全组-配置规则-入方向 添加端口号配置,这样才能成功访问。
实在没得太多的要分享给大家,自己实在太菜了,不过快2周了,我总算对服务器不陌生了,希望通过这段时间的实践,能够在大数据方向有所收获,半年后能找到心仪的工作。
上一篇:HDU4288 Coder(线段树)


下一篇:std::move和右值引用