查看性能优化建议
背景信息 性能优化主要针对资源不足的ECS实例，即该ECS实例在过去14天内，累计2天及以上每分钟的CPU使用率或MEM利用率高于85%。操作步骤 登录 ECS管理控制台。在左侧导航栏，选择 部署与弹性>>资源管家。在顶部菜单栏左上角处，选择地域。...
任务管理
创建调度任务 重要 创建任务前，请确保您已经创建了任务分组。更多信息，请参见 应用管理。登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务管理 页面，选择目标命名空间，单击 创建任务。在 基本...
脚本任务
本文介绍如何在创建任务时通过编写Shell、Python或Go脚本创建脚本任务。创建脚本任务 步骤一：选择脚本语言 在 任务管理 页面创建任务，具体操作，请参见 任务管理。任务类型 选择 脚本任务，然后选择 脚本语言。当前支持的脚本语言类型：...
基线管理
如果您需保障重要任务能按时完成，则可使用基线管理功能将重要任务添加至基线并设置承诺时间，系统将根据任务运行情况计算基线任务的预计完成时间。当系统判断基线任务可能无法在承诺时间前完成时，将发出告警。本文为您介绍如何创建和管理...
任务详情页
弹窗式任务详情页分为左右两个区域，左侧区域主要呈现的是任务的标题、字段、子任务和关联等信息，右侧区域主要呈现的是任务的参与者、动态和评论等信息。二、举例介绍 下面以弹窗式任务详情页作为介绍：$icmsDocProps={'productMethod':'...
Spring任务
Spring定时任务为您在Java体系下定时任务开放提供了便捷方式，但其便捷的同时也有很多企业化场景下的局限性。通过对接SchedulerX任务调度可快速实现企业化运用的支持。前提条件 客户端1.7.10及以上版本 采用Spring Boot模式接入SchedulerX...
创建和管理订阅任务
本文主要介绍如何在数据同步服务控制台，完成订阅任务的创建与管理。创建订阅任务 进入数据同步服务控制台页签，在左侧导航栏选择 数据订阅。在 数据订阅 页面，单击左上角的 创建订阅任务 按钮。在 创建订阅任务 页面，输入订阅任务的任务...
配置定时任务
如果业务量的变化时间可预测，您可以通过配置定时任务，在业务高峰到达前已准备好充足的计算资源，或者在业务高峰后及时释放空闲的计算资源，满足业务需求的同时又能控制成本。背景信息 定时任务是一种预设任务，可以在指定时间执行指定的...
数据接入任务
该模块任务主要来源于：接口导入：您在“数据服务”模块开通的接口需要依赖客户源数据，而生成的数据开发任务。原始清单：您通过“全部任务>创建任务”上传的数据表而生成的数据开发任务。衍生清单：系统通过追溯您已导入表的血缘信息而...
版本特性
详细信息，请参见 容易触发推空保护的主要场景。优化推送任务模型，大量推送时更加稳定。修复客户端频繁打印 out-date 问题。2.1.0.0 支持推空保护能力，提升高可用能力（仅专业版支持）。详细信息，请参见 推空保护。优化配置监听长轮询...
查看及管理实时计算任务列表
实时计算任务列表介绍 实时计算任务列表页面主要由搜索及筛选区、功能区、实时计算任务列表、批量操作区组成。您可以在实时计算任务列表页面查看创建的计算任务并进行相关操作。区域 描述 ① 搜索与筛选区 支持通过输入计算任务ID或计算...
查看及管理实时计算任务列表
实时计算任务列表介绍 实时计算任务列表页面主要由搜索及筛选区、功能区、实时计算任务列表、批量操作区组成。您可以在实时计算任务列表页面查看创建的计算任务并进行相关操作。区域 描述 ① 搜索与筛选区 支持通过输入计算任务ID或计算...
如何指定标签
本文介绍如何为任务指定标签。应用场景 主要应用在灰度、压测等场景。同一个应用分组下的机器，部分机器可能要用于灰度或者压测，任务实现类和线上其他机器不一致。任务调度时，机器被随机分配，所以灰度任务被分配到正常机器时，可能无法...
SQL任务快速入门
步骤一：创建并发布开发任务 重要 任务必须先发布，然后才能在任务编排过程中使用。进入SQL任务开发页面。登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Serverless>Spark。在 Spark 页面，单击目标工作空间名称。在EMR Serverless ...
Nereids全新优化器
对于每一个规则，Nereids优化器都提供了一组用于描述查询计划形状的模式，可以精确匹配可优化的查询计划。因此，Nereids优化器可以更好的支持诸如多层子查询嵌套等更为复杂的查询语句。Nereids优化器的CBO基于先进的Cascades框架，使用了...
SQL优化
在 实例会话 区域，选中需要进行SQL优化的会话，单击 优化。在弹出的 SQL诊断优化 对话框中，查看SQL诊断结果。若您采纳诊断建议，单击页面右上角的 复制，并将优化后的SQL粘贴到数据库客户端或DMS上执行，若不采纳诊断建议，可直接单击 ...
如何将任务调度应用优雅下线
本文介绍如何将任务调度应用优雅下线。背景信息 在实际业务场景下，定时任务持续地按固定频率在应用进程中执行。当应用在发布重启时，进程需暂时下线。如果直接关闭应用，正在进行中的定时任务将被中断，可能导致数据不完整或其他问题。为...
可选：运维SQL分析任务
SQL分析任务上线后，您可以查看SQL分析任务的基本信息和配置情况，以及SQL分析任务的调度情况。本文介绍运维SQL分析任务的操作步骤。前提条件 已配置并发布SQL分析任务，具体操作，请参见 步骤三：设置任务调度策略并发布。背景信息 SQL...
概述
DDL任务管理中的主要概念 了解以下概念，将帮助您更好地使用DDL任务管理功能：DDL任务：一次DDL语句的执行过程对应一个DDL任务。管理语句：对DDL任务进行查看或者操作的 PolarDB-X 1.0 专有的SQL语句。任务ID：DDL任务的唯一标识，是一个64...
管理导入任务
查看导入任务列表 重要 如果要查看Stream Load任务的信息，需要在导入任务前在StarRocks实例中设置 set global enable_load_profile=true，才能看到任务信息。在EMR StarRocks Manager的 导入任务 页面，支持：查看Broker Load（包含了...
流程管理
SchedulerX支持跨应用的任务编排，您可以将同一个应用的任务，或不同应用的任务按执行逻辑编排在一个工作流中。创建工作流 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 流程管理。在 流程管理 页面选择目标命名...
K8s任务
在使用体验上，相较于Argo，SchedulerX更为便捷易用，尤其是在运行时，它提供了可视化的工作流图展示，能够清晰地追踪任务进度，方便快速识别和定位任务受阻的具体环节，如下图所示显示出具体的任务失败：报警监控 通过SchedulerX对您的Pod...
时间属性配置说明
DataWorks支持的调度类型如下：重要 任务调度频率与上游任务周期无关 任务多久调度一次与任务本身定义的调度周期有关，与上游任务调度周期无关。DataWorks支持不同调度周期的任务互相依赖 DataWorks中，调度任务会根据调度类型及周期数生成...
查看订阅任务
在 数据订阅 页面，您可以查看到当前工作空间中所有的数据订阅任务及其概览信息，包括任务名称、任务状态、订阅源端、订阅分组以及实时的订阅延迟数据信息，如下图所示。如当前环境中数据订阅任务过多，您可以通过筛选任务状态以及搜索任务...
任务列表
重要 当前仅支持RDS MySQL、RDS PostgreSQL和RDS SQL Server实例相关任务，不支持RDS MariaDB实例相关任务。仅支持查看当前时间之前30天内的任务。在任务列表管理的任务和支持的操作具体如下：RDS MySQL 任务列表管理的任务 任务 本地盘 云...
实例迁移操作步骤
本文介绍迁移旧版公共实例下数据到目标企业版实例下的完整操作步骤，依次为创建迁移任务、灰度迁移和全量迁移。前提条件 已了解实例迁移的整体流程和注意事项。详细说明，请参见 迁移的整体流程。已完成业务评估和系统改造。详细内容，请...
运维中心概述
重要 开发环境的所有任务默认不运行，需要您手动触发任务的运行。周期任务发布到生产环境后即可开始正常调度。周期实例生成逻辑 当开发 调度类型为周期任务 的节点被提交或发布至运维中心后，您可以在运维中心的周期任务列表中看到该任务...
任务列表
重要 当前仅支持RDS MySQL（不包括本地盘只读实例）、RDS PostgreSQL和RDS SQL Server实例相关任务，不支持RDS MariaDB实例相关任务。仅支持查看当前时间之前30天内的任务。在任务列表管理的任务和支持的操作具体如下：RDS MySQL 任务列表...
任务列表
重要 当前仅支持RDS MySQL（不包括本地盘只读实例）、RDS PostgreSQL和RDS SQL Server实例相关任务，不支持RDS MariaDB实例相关任务。仅支持查看当前时间之前30天内的任务。在任务列表管理的任务和支持的操作具体如下：RDS MySQL 任务列表...
任务节点人工干预
在拓扑任务中，您可以通过查看单个任务节点的执行状态以快速发现和定位拓扑中的执行问题。您还可以通过对拓扑进行人工干预以控制拓扑任务的执行。任务节点状态 任务节点的生命周期如下：在拓扑任务中，单个任务节点可能处于以下状态之一：...
使用闲时资源
相关文档 由于闲时计算任务在资源紧张时有被抢占的风险，为了优化这类任务的运行效率并提升整体算力的有效利用率，DLC建议您启用 AIMaster：弹性自动容错引擎 功能，以便在任务被抢占时实现无缝切换和继续执行。推荐您使用PAI团队提供的 ...
计划任务管理
“计划任务管理”的主要功能是管理服务型任务和定时任务，并可查看任务运行信息。说明：【机器人数量】：创建计划任务时，设定运行该应用的机器人数量。【执行策略】：排队和重试。排队：控制台下发任务时当前机器人在该时间点已有任务正在...
应用管理
本文介绍如何通过应用管理功能创建应用（任务分组）、测试该应用的连接机器、为RAM用户进行分组授权等操作。创建应用 在创建调度任务前，您需要先创建应用。步骤一：基本配置 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏...
查看数据校验详情
本文介绍如何查看数据传输服务DTS（Data Transmission Service）数据校验任务的详情。前提条件 已创建并配置数据校验任务，详情请参见 配置数据校验。注意事项 在DTS同步或迁移实例中配置的校验任务，支持在实例详情和校验任务列表查看；...
周期任务通用运维概述
周期任务页面介绍 周期任务页面主要由搜索及筛选区、粒度筛选区、周期任务列表、批量操作区组成。您可以在周期任务页面对提交的周期任务进行相关的运维操作。区域 描述 ① 筛选及搜索区 快捷筛选支持通过输入节点ID或节点名称来筛选周期...
周期任务通用运维概述
周期任务页面介绍 周期任务页面主要由搜索及筛选区、粒度筛选区、周期任务列表、批量操作区组成。您可以在周期任务页面对提交的周期任务进行相关的运维操作。区域 描述 ① 筛选及搜索区 快捷筛选支持通过输入节点ID或节点名称来筛选周期...
任务运行诊断
上游任务对当前任务执行的影响如下：上游任务是否为成功状态，决定当前任务是否执行 节点依赖关系设置后，默认当前任务与当前任务依赖的上游存在数据依赖（即上游任务未执行，将导致当前节点依赖的上游数据未产出，当前节点执行会产生数据...
产品功能
SchedulerX主要提供调度、执行和运维三方面的功能。多种表达式的定时调度 Crontab：支持Unix Crontab表达式，详情请参见 Cron。不支持秒级别。Fixed rate：Crontab必须被60整除，不支持其它数量级时间间隔的任务，如每隔40分钟的定时任务。...
优化PyTorch模型
另外一种方式可以参考如下代码：optimized_model,opt_spec,report=blade.optimize('path/to/torch_model.pt','o1',device_type='gpu')后续步骤 经过PAI-Blade优化的模型，您可以通过Python直接执行或部署为 EAS 服务。此外，PAI-Blade也...
DataWorks作业调度
任务简介 任务之间的依赖是任务调度中的一个重要的功能，例如，我们在DataWorks里面创建两个云原生数据仓库PostgreSQL版的任务，其中表与任务之间的关系如下图：任务：finished_orders 从orders表清洗出已经完成的订单：o_orderstatus='F'...
- 产品推荐
- 这些文档可能帮助您