注册 登录 

首页 表格管理 属性 列管理 新建表格列 转为文章 min 帮助 刷新




概览
(189) 新建 E

E 概览

不同的颜色表示程序不同的状态
1.绿色,已经运行的程序
2.黄色,正在运行的程序
3.灰色,等待运行的程序
4.红色,运行有错的程序

E 概览

图形化调度系统
1.所有的表格(hdfs文件)格式都是定义好的
在图形中以方块来表示
2.所有的程序(hive脚本,MapReduce程序)
在图形中以圆圈表示
http://www.funnyai.com/hadoop_viewer.php

特点
(190) 新建 E

E 特点

界面特点
界面上可以查询每个表节点的数据(自动调用hive命令)
可以查询每个表的字段,定义,说明,注意事项

E 特点

可以在图形界面直接查询所有的表
hive程序可以在界面上直接修改
修改调度依赖关系后,程序自动生成新的脚本

E 特点

1.鼠标滚动可以放大缩小
2.图形无限大,可以类似地图软件任意拖动
3.可以绘图,显示大到太阳,小到白细胞的所有图形

组成部分
(192) 新建 E

E 组成部分


数据库
主要功能是,存储所有的状态,是各个组件数据,状态的交换中心。

E 组成部分


图形化界面
修改各种状态和依赖关系提供后台生成脚本需要的表达数据

E 组成部分


执行器
执行器有两个部分,有一个是定时执行,有的是依赖表生成后触发执行。
每隔一段时间扫描数据库,看哪些节点可以执行,并把执行结果存储到数据库中

数据库设计
(191) 新建 E

E 数据库设计

1.所有hdfs中表,表的名称,注意事项
2.所有hdfs中表的字段名
3.用户管理
4.圈子管理

E 数据库设计

每个程序节点可以指定输入依赖哪些表节点,输出哪些表节点
存储每个运行节点的负责人,这样程序有问题随时可以查到联系方式等

E 数据库设计

所有的节点状态信息在数据库里交换。
图形化界面只是读取数据库里的信息