手动实例是手动任务运行后生成的实例数据。系统支持对手动实例进行运维管理,包括查看运行日志、查看手动任务、查看节点代码等。
请参见入口介绍,进入手动实例页面。
手动实例的运行状态说明。
状态 | 图标 | 说明 |
---|---|---|
未运行 | ![]() |
未开始运行的实例。 |
等待中 | ![]() |
已触发运行的实例,但依赖的所有上游节点已经运行成功,等待到达调度时间或等待调度资源。 |
运行中 | ![]() |
正在运行中的实例。 |
失败 | ![]() |
运行失败的实例。
如果终止等待中或运行中状态的实例,则实例状态变更为失败。 |
成功 | ![]() |
运行成功的实例。
空跑调度的实例系统会直接标记为运行成功。 |
页面介绍
手动实例页面以列表和手动实例详情页的方式,为您展示系统已生成的手动实例。列表为您展示手动实例支持的运维管理操作,包括快速查看手动实例的信息、快捷单节点运维操作和批量运维操作。手动实例详情页展示实例详情,同时支持对当前实例节点进行运维操作:
- 手动实例列表
手动实例列表页面展示当前业务类型的实例对象、运行状态、业务日期、开始运行时间、结束运行时间、运行时长、优先级、 负责人、 调度资源组及支持的操作。说明
- 当前所有实例都在系统分配的调度资源组中执行。
- 仅Data_distill项目下,业务类型包含萃取实例。
操作 描述 筛选 在上图的模块①区域,您可以通过筛选条件过滤需要查询的实例。 筛选项包括:- 我的失败实例:调度负责人为您自己,且运行失败的实例。
- 我的今日运行的实例:调度负责人为您自己,且今日运行的实例。
- 开始运行日期:默认展示开始运行日期为今天的实例数据,您可以手动切换开始运行日期进行筛选实例。
- 业务类型:非Data_distill项目仅支持选择脚本实例。Data_distill项目支持选择脚本实例和萃取实例。
对标签或行为规则任务执行萃取补数据操作时,系统会生成的手动任务。手动任务运行后生成萃取手动实例。
- 细分类型:
- 业务类型选择为脚本实例时,细分类型包括MAX_COMPUTE_SQL、MAX_COMPUTE_MR、SPARK_JAR_ON_MAX_COMPUTE、SHELL、PYTHON、DATAX、DLINK、VIRTUAL。
- 业务类型选择为萃取实例时,细分类型包括MAX_COMPUTE_SQL、SHELL、DATAX、VIRTUAL。
- 运行状态:实例的运行状态,包括成功、失败、运行中、等待中和未运行。
- 负责人:运维对象的负责人。
- 优先级:实例运行的优先级。
如果您需要重新筛选,则单击重置,即可快速清空所有筛选条件,恢复系统默认。
手动实例详情页 单击操作列下的 图标或单击实例对象名称,页面右侧为您展示当前手动实例详情。同时,您也可以手动实例详情页面范围:
- 单击
图标,隐藏手动实例列表,放大DAG图。
- 单击
图标,隐藏DAG图。
- 鼠标悬停至
图标拖动,以扩大或缩小DAG图的页面范围。
单节点运维 上图②区域,支持针对单节点进行运维管理。 多节点批量运维 上图③区域,支持批量选中多个节点(或快捷本页全选)进行运维管理。 - 手动实例详情页
编号 描述 ① 提供运维管理手动实例的入口,详情请参见表 1。 ② 展示手动实例的节点信息和运行信息。 ③ - 计算任务生成的实例,支持查看实例。
- 管道任务生成的实例,默认展示管道任务上下游组件。
您也可以单击页面上方的查看节点代码,查看管道实例的实例代码。
列表区
操作 | 描述 | 限制 | 影响 |
---|---|---|---|
查看节点代码 | 进入代码详情页,查看手动实例的节点代码。 | 无 | 无 |
查看运行日志 | 进入运行日志页面,查看实例节点运行的日志。 | 无 | 无 |
重跑 | 重跑当前实例节点及其下游未运行的实例节点。 | 系统仅支持重跑运行状态为成功和失败的实例。 | 重跑后,当前实例节点及下游实例节点数据更新。 |
查看任务 | 进入生成当前实例节点的任务节点DAG图,查看任务节点详情、上下游节点信息及对任务节点进行运维管理等,详情请参见手动任务。 | 无 | 无 |
查看节点脚本 | 查看管道任务的关联依赖图。
说明 仅数据集成模块提交的手动任务支持查看节点脚本。
|
无 | 无 |
编辑开发节点 | 进入Dev项目下该任务的编辑页面,编辑该任务,仅适用于Dev-Prod开发模式。 | Dev项目中该任务存在。 | 编辑开发节点后,需要提交或发布后,生产节点的数据才会更新。 |
编辑节点 | 编辑某个任务的节点,仅适用于Basic模式。 | Basic项目中该任务存在。 | 编辑节点后,需要提交或发布后,生产节点的数据才会更新。 |
终止 | 终止正在运行中或等待中的实例节点。适用于如下场景,但不仅限于此:
|
系统仅支持终止运行状态为运行中和等待中的实例节点。 | 当前实例节点终止运行后,该节点的下游节点也不会运行。 |
查看生产节点 | 查看Prod项目中生成当前实例节点的任务配置。 | Prod项目中该任务存在。 | 无 |
批量操作区
操作 | 描述 | 限制 | 影响 |
---|---|---|---|
重跑 | 同时重跑多个实例节点。 | 选中的实例节点运行状态,均为成功和失败状态的实例。 | 当前实例节点及下游实例节点数据更新。 |
终止 | 同时终止多个实例节点的运行。 | 选中的实例节点运行状态,均为运行中或等待中的实例。 | 当前实例节点终止运行后,该节点的下游节点也不会运行。 |
手动实例详情区
手动实例详情为您展示计算任务和管道任务运行生成的实例详情。同时,支持对当前实例进行运维管理。
操作 | 描述 |
---|---|
查看生产节点 | 进入Prod项目中,查看当前任务配置。 |
编辑开发节点 | 进入Dev项目下当前任务编辑页面,编辑当前任务。仅适用于Dev-Prod开发模式。 |
编辑节点 | 进入计算任务和管道任务的编辑页面,编辑当前任务。仅适用于Basic模式。 |
查看节点代码 | 查看管道实例的节点代码。
说明 仅管道实例支持查看节点代码。
查看节点代码后,单击
查看节点脚本,返回至可视化展示管道实例上下游组件页面。 ![]() |
查看手动任务 | 进入生成当前实例节点的任务代码详情页,查看任务节点详情和对任务节点进行运维管理等,详情请参见手动任务。 |
查看运行日志 | 进入运行日志页面,查看当前实例的运行日志。 |