开发者学堂课程【Hadoop 快速入门:Hadoop 推荐系统框架图】学习笔记,与课程紧密联系,让用户快速学习知识。
课程地址:https://developer.aliyun.com/learning/course/92/detail/1400
Hadoop 推荐系统框架图
推荐系统项目框架如图所示:
Tomcat 收集访问日志后,传到文件日志(半结构化数据)中,再传送到 Flume 日志收集,再传送到 HDFS 文件存储中,或者 HBase 非关系型数据库。
由 YARN 资源管理器和 STORM 实时器计算,在最后把结果储存到分析结果文件和分析结果数据库中。
最后,由 Tomcat 从分析结果数据库和分析结果文件中获得结果,并推荐数据。