运维中心展示您已提交或发布的任务,同时支持对任务及任务生成的实例进行运维管理,包括运维大盘、任务运维、实例运维和监控配置。
功能介绍
运维中心支持按时间和触发任务的机制,调度任务。系统的调度时间包括分钟、小时、日、周和月多种调度周期。触发任务运行包括补数据周期任务、手动运行手动任务和启动实时任务的运行。
数据开发模块开发的任务,提交或发布后进入开发环境或生产环境的运维中心,详情见下表。
开发模式 | 描述 | 作用 |
---|---|---|
Dev-Prod |
|
Dev-Prod开发模式的项目包括开发环境(Dev)运维中心和生产环境(Prod)运维中心:
|
Basic | 任务提交成功后,即可在运维中心查看和运维管理已提交的任务。同时,周期任务即可开始正常调度。 | 保障Basic任务对应的生产数据正常产出。 |
运维中心功能模块说明。
功能模块 | 描述 |
---|---|
运维大盘 | 运维大盘为您提供所有任务运行概况、实例分布统计、异常实例统计,便于您及时获取任务运行的状况、了解实例运行的趋势,以判断资源的消耗及影响,从而作出预算准备、资源扩容或规格升级的决策。 |
任务运维 | 任务运维依照调度时效分为周期任务、实时任务和手动任务。周期任务包括脚本任务、逻辑表任务和萃取任务。任务运维模块为您提供周期任务、实时任务和手动任务的运维和管理,包括查看DAG图、查看实例、补数据、批量修改任务的责任人和运行任务等。 |
实例运维 | 实例运维模块依照实例生成方式分为周期实例、补数据实例、手动实例和实时实例。实例运维模块为您提供周期实例、补数据实例、手动实例和实时实例的运维和管理,包括查看DAG、查看任务、查看运行日志、批量重跑、批量暂停和批量恢复等操作。 |
监控配置 | 在Prod和Basic项目下,支持配置任务的多种监控告警规则。对于逻辑表任务,提供字段视角的监控配置。帮助您及时了解任务运行动态,并监控异常任务。 |
应用场景
- 运维大盘展示实例统计和异常统计情况,包括实例运行统计、实例运行趋势、运行状态统计、运行时长统计、失败次数统计和延时时长统计。帮助您从全局视角管控实例的运行情况,及时同步异常信息,提升运维效率。
- 任务运维和实例运维支持调度与运维管控数据集成、建模研发、编码研发和数据萃取模块生成的代码任务,包括单节点及其上下游依赖任务或实例的状态查看及管理操作,以保障数据有序生产。
- 监控配置支持配置任务或逻辑表字段的监控告警规则。如果被监控的任务或字段异常, 系统通过电话、短信、钉钉或邮件的方式报警给您,降低运维成本。
说明 仅Basic和Prod项目支持配置监控报警。
入口介绍
- 登录Dataphin控制台。
- 在Dataphin控制台页面,选择工作区地域后,单击进入Dataphin>>。
您也可以单击快速开始相关工作区域的调度运维,快速进入运维中心。
- 在Dataphin首页,单击顶部菜单栏的研发。
您也可以单击
运维调度或
调度运维,快速进入运维中心。
- 单击顶部菜单栏的运维,进入运维中心。
- 在运维中心页面,左侧导航栏为您展示各功能模块的入口按钮。鼠标悬停至左侧导航栏后,为您展示各功能模块入口按钮的文字说明,同时您可以单击
图标,锁定左侧菜单栏。
如果您不需要锁定左侧菜单栏,则单击
图标。