hue 英 [hjuː] n. 色彩;色度;色调;叫声
oozie ['uːzɪ] (缅甸的)驯象人,驭象者
Hue是一个开源的Apache Hadoop UI系统。 通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据。 例如操作HDFS上的数据、运行Hive脚本、管理Oozie任务等等。 是基于Python Web框架Django实现的。 支持任何版本Hadoop 基于文件浏览器(File Browser)访问HDFS 基于web编辑器来开发和运行Hive查询 支持基于Solr进行搜索的应用,并提供可视化的数据视图,报表生成 通过web调试和开发impala交互式查询 spark调试和开发 Pig开发和调试 oozie任务的开发,监控,和工作流协调调度 Hbase数据查询和修改,数据展示 Hive的元数据(metastore)查询 MapReduce任务进度查看,日志追踪 创建和提交MapReduce,Streaming,Java job任务 Sqoop2的开发和调试 Zookeeper的浏览和编辑 数据库(MySQL,PostGres,SQlite,Oracle)的查询和展示
调度系统: 作业输入输出有依赖;A执行完成再给信号给B
添加hue服务。先添加依赖的服务oozie. mysql> create database oozie DEFAULT CHARACTER SET utf8; mysql> grant all on oozie.* TO 'oozie'@'%' IDENTIFIED BY 'oozie';
Failed to create Oozie database tables. 直接返回主页启动zoozie即可。 https://blog.csdn.net/qiang0066/article/details/79214441
继续添加hue服务
进入hue服务页点击webUI
创建用户
点击右侧下拉创建用户
点击文件浏览器创建和保存文件
拖拽设计作业链
hue hive 创建表
load上传文件到hive表
impala 英 [ɪm'pɑːlə; -'pælə] 美 n. 黑斑羚(产于非洲中南部) n. (Impala)人名;(意)因帕拉
impala 对应hive : 是基于hdfs的sql执行引擎