大数据开发治理平台:运维中心有什么功能
网站编辑2022-11-16 14:11:55496
什么是运维中心?运维中心包括运维大屏、实时任务运维、周期任务运维、手动任务运维、智能监控、智能诊断、资源运维和引擎运维功能模块,为您提供任务操作与状态、引擎、资源等多方位的运维能力。
当您在DataStudio中完成节点开发,并提交和发布至生产环境后,即可在运维中心对任务进行运维操作,包括周期调度任务的自动调度与手动运行、任务运行详情查看、任务运行状态监控、任务运行使用的资源监控与自动运维;实时任务的执行管控、运行详情查看与监控报警配置;调度任务运维大屏以及数据集成离线同步与实时同步任务运维专页,针对任务运维关键指标的查看。

查看运维大屏
运维大屏以报表的形式为您展示任务的运行的重要指标。包括调度任务的关键运维指标统计与数据集成离线同步与实时同步任务运维专页。
开发环境运维中心无此模块
在实时任务运维界面,您可以针对实时任务进行启动、停止、下线与监控报警相关操作。
周期任务运维为您展示任务提交到调度系统后的调度任务列表与调度环境产生的周期实例。周期任务面板展示当前所有的调度节点,您可以在周期任务面板修改周期调度任务使用的资源组、责任人等信息。
DataWorks每晚会根据周期任务自动生成第二天待运行的周期实例,同时支持您手动触发周期任务,分别生成补数据实例和测试实例,您可以通过生成的实例查看任务的运行详情。
开发环境运维中心无法自动调度生成周期实例。
手动任务运维为您展示任务提交到调度系统后的手动任务列表与经过手动触发运行后生成的手动实例。手动任务面板展示当前所有的手动触发式任务,您可以在手动任务面板修改任务执行时使用的调度资源组,责任人等信息。
在手动任务面板中,选择类型为手动业务流程,支持您手动触发任务运行并且生成手动实例,您可以查看生成的手动实例的运行详情。
监控对象:周期任务、实时计算任务、资源水位。
监控支持为自动调度的周期任务设置监控报警,监控在自动调度场景下的周期实例运行情况、支持独享资源组水位监控及实时计算任务运行状态监控。
监控方式:自定义规则、智能基线
支持针对指定对象(节点、业务流程、工作空间、基线、实时计算任务、独享调度资源组、独享数据集成资源组)的监控报警,同时也支持针对整个“业务线”的基线预警,并通过您配置的报警方式来发送相应的报警信息。
报警方式:支持短信、邮件、电话、钉钉群和webhook,已支持设置值班表,将对应时间的报警消息报警给对应的值班人员。
开发环境运维中心无此模块
资源运维主要对独享调度资源组及独享数据集成资源组的使用情况(使用率、运行中任务列表、排队任务列表)及进行监控和自动运维,支持查看资源组使用趋势。
目前支持对EMR引擎的运维。在DataWorks实例任务中,E-MapReduce计算引擎任务会被分为若干作业有序执行,您可以使用DataWorks的引擎运维功能,查看各个E-MapReduce作业的详细信息,及时查找并清理运行有误的作业,避免该类作业阻塞下游任务,影响实例任务的正常运行。
开发环境运维中心无此模块
DataWorks运维中心为您提供运行诊断功能,帮助您掌握任务运行的全链路信息,以便迅速定位问题。
开发环境运维中心无此模块
在标准模式工作空间下,您可以通过界面左上角切换进入到开发运维中心和生产运维中心。
仅生产环境运维中心支持自动调度。即只有在生产环境运维中心,您才能在周期实例面板中看到自动调度执行的周期实例。







