WordCount 案例 Mapper| 学习笔记

开发者学堂课程【Hadoop 分布式计算框架 MapReduce:WordCount 案例Mapper 】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/94/detail/1482


WordCount 案例 Mapper

 

内容简介:

本堂课讲述了 WordCount 案例中的 Map 案例在做之前需要准备的环境以及具体的

1、准备环境(创建 maven 工程)编写操作。

 

1、准备环境(创建 maven 工程)

示例:

WordCount 案例 Mapper|  学习笔记创建成功后把架包导入到新建的 maven 工程中

WordCount 案例 Mapper|  学习笔记

准备好了之后还需要在创建一个 log4j.properties 文件,并在文件中填入

WordCount 案例 Mapper|  学习笔记

都做好了之后就可以开始编写程序;

首先需要创建一个 Map 的类

WordCount 案例 Mapper|  学习笔记

在 Mapper 关联之后其中内容有封装了整个 Map 方法,会在整个编写程序的过程中进行使用。

在 Map 阶段:

WordCount 案例 Mapper|  学习笔记这个 Key 的类型是 text;value 的类型是 Intwritable

WordCount 案例 Mapper|  学习笔记

WordCount 案例 Mapper|  学习笔记


至此 Map 阶段的所有编写就已经结束了。

上一篇:Apache Hive--DML--insert&多重插入&动态分区| 学习笔记


下一篇:Apache Hive--DML--select 查询| 学习笔记