查看并管理脚本实例
终止 仅 成功、失败、未运行 的实例不支持终止，其他状态实例均支持进行终止操作。终止后实例的运行状态变更为 失败。当前实例节点终止运行后，该节点的下游节点也不会运行。终止操作多用于如下场景：由于Dataphin异常或操作失误，需要终止...
运维中心概述
下表为运维中心各模块功能使用的简单说明：功能模块 描述 运维概览 实例统计：统计系统内离线实例和实时实例的运行详情、运行趋势、运行失败实例数排行、失败报警实例数排行等信息，帮助您从项目视角或全局视角，把控实例运行的情况。...
运维中心概述
下表为运维中心各模块功能使用的简单说明：功能模块 描述 运维概览 实例统计：统计系统内离线实例和实时实例的运行详情、运行趋势、运行失败实例数排行、失败报警实例数排行等信息，帮助您从项目视角或全局视角，把控实例运行的情况。...
工作负载安全保护
云上的工作负载是一套支撑IT业务系统运行的相关功能或一些原子能力，诸如服务器、VM、容器、网络、数据库等。通常情况下企业在云上使用最多的工作负载环境就是VM和容器。针对VM和容器的防护要做到以下几点：有效的识别工作负载，梳理清楚在...
管理监控告警事件
在监控告警事件列表中，找到要下线或重新运行的事件，单击操作列下的 下线 或 运行 菜单即可。修改监控告警事件 任何状态下的事件均支持修改。操作步骤如下：在监控告警事件列表中，找到要修改的事件，单击操作列下的 编辑 菜单。在事件...
查看算法实例运行日志
配置算法实例完成后，您可以查看实例运行状态。如果因为资源不足造成任务运行失败，或者数据不完备造成错误，您可以查看运行...在 算法实例 页签，单击具体实例 操作 列的 运行日志。选择算法检测的时间范围，查看算法运行日志的详细信息。
基本概念
本文介绍任务编排功能中的基本概念。任务 任务是能完成一项功能操作的节点。任务节点 节点是任务流中任务的实体承载，其可以处于...说明 时间范围内运行的任务是串行运行的，即必须一个业务时间的任务执行成功，下一个业务时间才可执行任务。
设置离线节点的调度信息
设置运行超时时间，当运行时间超过设置的时长，则系统运行停止。配置告警监控信息。批量设置监控告警信息 单击画布工具栏的 图标。在 监控配置 对话框，单击目标节点 监控配置 列的 开关，打开监控设置。批量选中需要设置监控的节点，单击...
Hive调研工具准备
规格系统 此外工具服务器需要至少 2C4G 的机器规格，对于操作系统没有依赖。环境依赖 hive-scaner 运行需要工具服务器拥有Java8的运行环境，您可以通过 java-version 来查看机器的Java版本。运行文件下载 请选择合适的执行文件，下载后上传...
查看并管理脚本实例
终止 仅 成功、失败、未运行 的实例不支持终止，其他状态实例均支持进行终止操作。终止后实例的运行状态变更为 失败。当前实例节点终止运行后，该节点的下游节点也不会运行。终止操作多用于如下场景：由于Dataphin异常或操作失误，需要终止...
周期任务基本运维操作
查看周期任务 周期任务列表中为您展示生产环境下调度系统按照调度配置自动定时运行的任务，您可以检查任务代码、调度参数、调度依赖、节点血缘等是否符合预期。同时，支持您通过列表及DAG图的方式，快速查看任务的详细信息并执行相关操作。...
查看并管理实时实例
停止中 已触发停止实例的操作，系统正在执行停止实例。停止 停止正在运行的实例。运行失败 运行失败的实例。启动失败 启动失败的实例。实时实例列表支持的操作 操作 描述 启动 启动当前实时实例。具体操作，请参见 实时任务启动实时实例。...
AWS资源采集工具使用准备
规格系统 此外工具服务器需要至少 2C4G 的机器规格，对于操作系统没有依赖。环境依赖 AWS资源采集工具运行需要工具服务器拥有Java8的运行环境，您可以通过 java-version 来查看机器的Java版本。运行文件下载 请选择合适的执行文件，下载后...
单机部署
解压后的文件结构如下：ossimport├─bin│└─ossimport2.jar#包括Master、Worker、TaskTracker、Console四个模块的总jar├─conf│├─local_job.cfg#Job配置文件│└─sys.properties#系统运行参数配置文件├─console.bat#Windows命令...
查看并管理手动任务
优先级：支持根据任务运行的优先级进行筛选。更新时间：支持快捷选中 今天 或设置任务更新的 开始时间 和 结束时间 范围进行筛选。调度资源组：可根据手动任务配置的调度资源组进行筛选。如果您需要重新选择，则单击，可快速清除已选筛选...
智能诊断
如果上游任务为未运行状态且上游依赖层级较深时，建议您先通过DAG面板中的 上游分析 功能，快速定位阻塞当前任务运行的关键上游任务，再通过 智能诊断 功能，诊断该关键任务未运行的原因，提升运维效率。基本信息：支持您查看当前任务运行...
自动定时重启ECS云服务器
然而，在实际运行中，我们可能会遇到这样一些场景：系统更新：一些操作系统或者软件的更新可能需要重启服务器才能生效。通过定时重启能够保证这些更新的正常应用。内存泄漏：有的程序可能存在内存泄漏的问题，长时间运行后可能会消耗大量的...
查看并管理实时实例
停止中 已触发停止实例的操作，系统正在执行停止实例。停止 停止正在运行的实例。运行失败 运行失败的实例。启动失败 启动失败的实例。实时实例列表支持的操作 操作 描述 启动 启动当前实时实例。具体操作，请参见 实时任务启动实时实例。...
管理笔记本
如果您绑定的集群，集群存储根路径使用了OSS-HDFS，则在运行 PySpark 时，还需授予Notebook访问OSS-HDFS的权限，具体操作请参见 授予EMR Notebook访问OSS-HDFS的权限。Python 当程序代码为Python时，可以在机器启动后，直接运行单元格。...
K8s任务
在SchedulerX控制台 任务管理 页面可以查询历史执行记录，也可以看到Pod运行的日志 Node.js脚本 如果想通过Pod运行Node.js脚本，不需要自己构建镜像，只需要在任务管理创建一个K8s任务，资源类型选择Nodejs-Script，镜像默认是node:16（也...
K8s任务
在SchedulerX控制台 任务管理 页面可以查询历史执行记录，也可以看到Pod运行的日志 Node.js脚本 如果想通过Pod运行Node.js脚本，不需要自己构建镜像，只需要在任务管理创建一个K8s任务，资源类型选择Nodejs-Script，镜像默认是node:16（也...
流水线的运行
待到日常环境测试阶段运行结束后，空闲下来，开始再次运行，此时是接续持续集成阶段第三次运行的版本继续运行，而不是接续持续集成阶段第二次运行的版本继续运行。亦支持在前一阶段运行完成时，若后一阶段正在运行，强制中止后一阶段当前...
Session集群管理概述
停用中 已完成停用Session集群操作，系统正在自动停止在此集群上运行的所有作业。已停用 系统已完成在此集群上运行的所有作业。已停用的状态的Session集群不可以用于实时任务调试等场景。失败 系统进行Session集群初始化失败，或Session...
排查和处理文件备份客户端状态异常
说明 不同Linux操作系统指令不同：新版客户端重启命令：systemctl restart hbrclient systemctl restart hbrclientupdater 旧版客户端重启命令：systemctl restart hybridbackup systemctl restart updater 若客户端仍然没有正常运行，您...
查看并管理待提交实例
待提交实例是对周期任务发起定时补数据操作时产生的实例，待提交实例将在未来时间段生成可运行实例并提交执行补数据。您可以在待提交实例页面，对待提交实例执行暂停、恢复、重试等操作。本文为您介绍如何查看并管理待提交实例。待提交 ...
查看并管理待生成实例
待生成实例是对周期任务发起定时补数据操作时产生的实例，待生成实例将在未来时间段生成可运行实例并提交执行补数据。您可以在待生成实例页面，对待生成实例执行暂停、恢复、重试等操作。本文为您介绍如何查看并管理待生成实例。待生成 ...
如何检查云备份客户端运行状态
说明 不同Linux操作系统指令不同：systemctl restart hbrclient restart hbrclient restart systemctl restart hbrclient restart etc restart systemctl restart hbrclient restart init.d restart 若客户端仍然没有正常运行，您可以卸载...
查看并管理明细及汇总表实例
终止 仅 节点状态 为 成功、失败、未运行 的实例不支持终止，其他 节点状态 实例均支持进行终止操作。终止后实例的节点状态变更为 失败。当前实例节点终止运行后，该节点的下游节点也不会运行。终止操作多用于如下场景：由于Dataphin异常或...
查看并管理明细及汇总表实例
终止 仅 节点状态 为 成功、失败、未运行 的实例不支持终止，其他 节点状态 实例均支持进行终止操作。终止后实例的节点状态变更为 失败。当前实例节点终止运行后，该节点的下游节点也不会运行。终止操作多用于如下场景：由于Dataphin异常或...
查看并管理运行记录
序号 描述 ① 搜索及筛选 支持快捷筛选 我运行的、今日运行 的任务运行记录。您也可单击 图标，按照 运行状态、运行人、对象类型、代码类型、开始时间、持续时长、代码搜素、相关表 等条件进行精确筛选。同时支持按照脚本名称关键字进行...
查看并管理运行记录
序号 描述 ① 搜索及筛选 支持快捷筛选 我运行的、今日运行 的任务运行记录。您也可单击 图标，按照 运行状态、运行人、对象类型、代码类型、开始时间、持续时长、代码搜素、相关表 等条件进行精确筛选。同时支持按照脚本名称关键字进行...
调度配置
您可以根据业务需求选中 时间段 或 时间点：如果您选中了 时间段，您可以单击 开始 或 结束 后的 图标，指定运行的开始和结束时间。同时您可以单击 间隔 后的 图标，在下拉列表中选择间隔时间。如果您选中了 时间点，单击下拉列表框，在...
使用限制
规则 限制数量 注释 同一区域下的编排实例上限 500 个-单个工作流的操作数上限 200 个 如需添加更多操作节点，推荐使用编排实例连接器进行嵌套扩展（公测版暂不支持）操作嵌套层级上限 5 个 如需添加更多操作节点，推荐使用编排实例连接器...
如何创建 App
MinDiskSize：App 运行的最小系统盘大小。DiskType：App 运行的盘类型。MaxRetryCount：App 的某个实例失败后最大的重试次数。Timeout：App 的实例运行的超时时间。注意：以上 Config 中的所有参数，创建 App 时通过默认值指定为某种配置，...
调度配置
您可以根据业务需求选中 时间段 或 时间点：如果您选中了 时间段，您可以单击 开始 或 结束 后的 图标，指定运行的开始和结束时间。同时您可以单击 间隔 后的 图标，在下拉列表中选择间隔时间。如果您选中了 时间点，单击下拉列表框，在...
运行及排错
DataWorks为您提供测试运行、补数据和周期运行三种触发方式，帮助您确认实例运行的定时时间、相互依赖关系、数据结果产出是否符合预期。测试运行：手动触发方式。如果您仅需要确认单个节点的定时情况和运行，建议您使用测试运行。详情请...
场景联动
通过场景联动页面，可以查看网关上运行的所有场景联动规则，也可以对场景联动规则进行启用、停用、触发操作。查看场景联动规则 在边缘网关控制台左侧导航栏单击 场景联动，可在 场景联动 页面显示已关联到网关的所有 场景联动规则。在每个...
计算任务运行配置
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
基于镜像的日常发布
场景介绍 我们在使用ECS的时候要更时常地面临更新软件的问题，如运行的后端服务版本更新，安全打补丁等情况。我们可以使用ECS镜像来维护需要更新的程序版本，更新好镜像后对需要发布的机器更换下系统盘重新启动就能完成对单台机器的程序...
计算任务运行配置
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
- 产品推荐
- 这些文档可能帮助您