冬季实战营第五期:轻松入门学习大数据学习总结
这一期的学习内容是关于大数据的,令我印象最深刻的是基于EMR离线数据分析实践,同样的,我们搜先要了解一下新的概念,什么是EMR?
E-MapReduce(简称“EMR”)是云原生开源大数据平台,向客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、Clickhouse、Delta、Hudi等开源大数据计算和存储引擎。EMR计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK、专有云平台。
通过本次实验,让我对EMR集群的基本操作,对EMR产品有初步的了解,EMR集群的数据传输和hive的简单操作,对如何进行离线大数据分析有初步的掌握
数据量爆发式增长的今天,数字化转型成为IT行业的热点,数据需要更深度的价值挖掘,应对未来不断变化的需求。
在这一学期中我学到很多非常实用的知识,掌握到不少新的技能,了解了不少新的学习方法,这些都是前所未闻的。让我们继续期待未来有更多的实战营!