DML无锁变更
该功能通过将单个SQL拆分成多个批次执行，以实现不锁表进行表数据变更，同时也可以减少DML操作对数据库性能，空间等的影响。本文介绍在DMS中进行无锁数据变更的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、...
概述
任务调度 TS（Task Scheduler）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和...
成本分摊管理
步骤三：运行非固定任务 单击 运行任务 按钮，列表中启用状态下的任务将开始运行。运行后可查看该任务的分摊结果。单击 复制任务 按钮，筛选期间勾选该期间对应的任务，单击 确定 后将复制此任务至任务列表。在任务列表中的 顺序 列，修改...
任务的复制和移动
三、整个任务分组的复制、移动操作 点击任务分组名称右侧的「·」按钮，在打开的任务分组菜单中可以进行整个分组任务的复制、移动操作。Tips：复制任务时，您可以选择相关的可复制的内容进行复制；复制任务时，勾选原任务接收新任务的更新...
离线任务监控概述
任务监控页面 任务监控页面展示已配置的任务监控的监控对象、报警原因、创建人、接收人（类型）、接收方式、最近更新人/时间、监控开关的状态信息及支持的操作。操作 描述 ① 搜索与筛选区 在搜索与筛选区域，您可以通过 输入任务名称/任务...
离线任务监控概述
任务监控页面 任务监控页面展示已配置的任务监控的监控对象、报警原因、创建人、接收人（类型）、接收方式、最近更新人/时间、监控开关的状态信息及支持的操作。操作 描述 ① 搜索与筛选区 在搜索与筛选区域，您可以通过 输入任务名称/任务...
服务端发布记录
如何接入日志服务 修复 已删除的任务看不到历史日志的问题。报警升级 优化 邮件报警、短信报警支持格式化，新增支持飞书海外版报警。无 脚本任务 修复 脚本任务无法导出、导入问题。脚本任务 任务管理 HTTP任务 修复 HTTP任务无法获取到...
ContainerOS概述
为了适应更多的使用场景，传统的操作系统OS发行版包含大量的用户态工具、软件包、系统服务等，使得OS臃肿、启动慢，各种软件包种类繁多、版本零散，给运维人员带来了极大的挑战。为了解决传统OS在云原生场景下的各种适配问题，给容器服务的...
操作流程
数据同步主要内容包括数据源配置、获取物理表、创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 ...任务监控 任务监控对发布上线的任务实现全链路监控和实例监控，提供查看异常日志和任务重跑操作。
操作流程
数据同步主要内容包括数据源配置、获取物理表、创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 ...任务监控 任务监控对发布上线的任务实现全链路监控和实例监控，提供查看异常日志和任务重跑操作。
停止命令
不涉及 示例 停止一个已经处于停止状态的任务（假设ID为 dlc14qrqbpo1*的任务处于停止状态）./dlc stop job dlc14qrqbpo1*系统会返回如下类似的告警信息。[FAILED]code:400,Job can't be stopped,because it is Stopped request id:63C1C...
服务器迁移中心的审计事件
服务器迁移中心已与操作审计服务集成，您可以在操作审计中查询用户操作服务器迁移中心产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了...
计算任务概述
因不同计算引擎支持的创建的任务不同，支持的计算任务请以页面显示为准。计算任务：支持 获取锁、编辑、克隆、重命名、移动、删除、下线、下线并删除。重要 对于 Basic模式项目，删除任务提交成功后，即更新至生产环境，请谨慎操作。对于 ...
计算任务概述
因不同计算引擎支持的创建的任务不同，支持的计算任务请以页面显示为准。计算任务：支持 获取锁、编辑、克隆、重命名、移动、删除、下线、下线并删除。重要 对于 Basic模式项目，删除任务提交成功后，即更新至生产环境，请谨慎操作。对于 ...
添加自定义任务
当批量设置设备属性和服务调用任务无法满足您的业务需求时，您可以添加自定义任务，通过设置自定义规则，实现多场景的设备任务。本文介绍该任务的创建方法、运行中Topic及其数据格式的说明，查看状态的具体操作。前提条件 已在设备端完成...
查看并管理脚本任务
说明 若已开通基线功能，基线任务取所有基线中最高的作为优先级，覆盖原有配置的任务优先级。运维负责人 该周期任务的运维负责人。相关基线 展示作为末节点被保障的归属基线，以及作为上游节点被纳入保障范围的相关基线。说明 若未开通基线...
如何接入日志服务
阿里巴巴分布式任务调度系统SchedulerX 2.0提供日志服务，您无需修改代码，只需增加一个Log4j或Logback的配置，即可在控制台看到每次任务调度（包括分布式任务）的业务日志。本文介绍如何通过SchedulerX接入并查看日志服务。前提条件（可选...
创建PYTHON计算任务
参数配置 若您的任务中调用了参数变量，您可在属性中对参数进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。配置说明，请参见：参数配置及使用节点参数。调度属性（周期任务）如果离线计算任务的调度类型为 周期任务...
启动数据解析任务
数据解析任务配置完成后，您需启动任务。数据解析任务启动后，便可实时地处理数据，然后输出到目标Topic、IoT孪生引擎 或数据存储表，以进一步分析、处理和使用数据。本文介绍如何启动和查看数据解析任务。前提条件 已配置数据解析任务，...
查看并管理脚本任务
说明 若已开通基线功能，基线任务取所有基线中最高的作为优先级，覆盖原有配置的任务优先级。运维负责人 该周期任务的运维负责人。相关基线 展示作为末节点被保障的归属基线，以及作为上游节点被纳入保障范围的相关基线。说明 若未开通基线...
操作系统迁移（Windows）
微软目前已停止对Windows Server 2008 R2等操作系统提供技术支持，出于安全或业务需求的考虑，您需要将Windows Server 2008 R2及以上操作系统迁移到更高的版本。本文介绍如何通过SMC迁移Windows系统。前提条件 已完成迁移前准备工作。具体...
配置任务流依赖检查节点
任务编排的任务流依赖检查节点可实现任务流自依赖或跨任务流间依赖，依赖的目标对象可以是某个任务流或任务节点。本文介绍配置任务流依赖检查节点的步骤。应用场景 跨任务流依赖：任务流A需要在任务流B运行成功后才能执行。例如，每周一...
运行并管理手动任务
操作 描述 筛选 在上图的模块1区域，您可以通过筛选条件过滤出需要查询的任务。您可以根据 业务流程名称、节点ID、责任人、我的节点 和 今日修改的节点 等条件进行精确筛选。说明 任务名搜索的结果会受到其它筛选条件的影响，只有同时满足...
产品相关问题
可视化任务编排：简化多任务调度的运维管理，并支持暂停/恢复、跳过、加锁/解锁、重置、失败重试等多种人工预操作。任务监控：支持实时查看任务的执行状态及执行进度，执行时长，执行的客户端 IP、执行是否成功、执行失败原因等信息。更多...
查看并管理定时调度补数据任务
定时调度补数据任务是指任务将按照配置的定时调度时间生成并运行补数据实例，进行历史数据的回刷。本文将为您介绍如何查看并管理定时调度类型的补数据任务。定时调度补数据任务入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 ...
管理工作流实例
（暂停）对正在运行的工作流实例进行 暂停 操作，系统状态变为 准备暂停，会等待正在执行的任务结束，暂停下一个要执行的任务。（删除）删除工作流实例及工作流实例下的任务实例。（甘特图）甘特图纵轴是当前工作流实例下的任务实例的拓扑...
新建SPARK_SQL任务
运行参数 若您的任务中调用了参数变量，您可在属性中对参数进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。配置说明，请参见 参数配置及使用节点参数。Spark资源设置 项目计算源的 Spark SQL服务配置 使用 Kyuubi ...
设备的自定义任务示例
运行自定义任务 示例代码使用的开发环境如下：操作系统：Windows 10 JDK版本：JDK8 集成开发环境：IntelliJ IDEA社区版 示例代码支持的命令参见下表。重要 命令、字段和字段后的参数值之间，必须使用单个空格分隔，但参数值中不能包含空格...
新建数据库SQL任务
运行参数 若您的任务中调用了参数变量，您可在属性中对参数进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。配置说明，请参见 参数配置及使用节点参数。调度属性（周期任务）如果离线计算任务的调度类型为 周期任务...
基本概念
可以查看和删除创建过的任务的执行记录，并支持通过状态筛选，状态分为：未执行、执行成功、执行失败、执行中。任务记录列表可以查看任务ID、执行状态、创建时间、完成时间、正在运行的实例数、成功运行的实例数和运行失败的实例数。启动...
新建HIVE_SQL任务
参数配置 若您的任务中调用了参数变量，您可在属性中对参数进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。配置说明，请参见 参数配置及使用节点参数。调度属性（周期任务）如果离线计算任务的调度类型为 周期任务...
新建IMPALA_SQL任务
参数配置 若您的任务中调用了参数变量，您可在属性中对参数进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。配置说明，请参见 参数配置及使用节点参数。调度属性（周期任务）如果离线计算任务的调度类型为 周期任务...
新建SPARK_JAR_ON_HIVE任务
本文为您介绍如何基于Dataphin新建SPARK_JAR_ON_HIVE类型的任务。背景信息 SPARK_JAR_ON_HIVE任务中引用到的JAR和PYTHON文件需要提前创建，因此您在资源管理中先上传JAR和PYTHON文件，然后在SPARK_JAR_ON_HIVE任务中引用。具体操作，请参见...
实时同步任务运维
在 运维中心>实时同步任务 页面，找到目标任务，单击实时任务的任务名称，即可进入实时任务Logview页面。您可以在该页面查看如下信息：参数 描述 日志 您可以在该页面查看实时任务的日志详情，并可以根据时间筛选日志。进度 您可以在该页面...
新建SPARK_JAR_ON_MAX_COMPUTE任务
本文为您介绍如何基于Dataphin新建SPARK_JAR_ON_MAX_COMPUTE类型的任务。背景信息 SPARK_JAR_ON_MAX_COMPUTE任务中引用到的JAR和PYTHON文件需要提前创建，因此您在资源管理中先上传JAR和PYTHON文件，然后在SPARK_JAR_ON_MAX_COMPUTE任务中...
新建SPARK_JAR_ON_MAX_COMPUTE任务
本文为您介绍如何基于Dataphin新建SPARK_JAR_ON_MAX_COMPUTE类型的任务。背景信息 SPARK_JAR_ON_MAX_COMPUTE任务中引用到的JAR和PYTHON文件需要提前创建，因此您在资源管理中先上传JAR和PYTHON文件，然后在SPARK_JAR_ON_MAX_COMPUTE任务中...
新建Flink_SQL任务
说明 Dataphin实时计算支持流批一体任务，使用统一的流批计算引擎，在一份代码上可同时配置 流+批 的任务配置，基于同一份代码生成不同模式下的实例。开启批处理需在任务配置页面开启离线模式并进行资源、调度依赖等相关配置。实时模式 ...
新建FLINK_DATASTREAM任务
本文为您介绍如何基于Fusioninsight Flink实时引擎创建FLINK_DATASTREAM任务。前提条件 在您开始执行操作前，请确认项目已 开启实时引擎 并已 配置Fusioninsight Flink计算源。具体操作，请参见 创建通用项目。在您开始执行操作前，请确认...
完成用户任务
本文介绍逻辑流中完成用户任务操作的主要使用方法。简介 完成用户任务操作可用于在当前逻辑流执行环境中完成指定工作流的用户任务。配置属性 完成用户任务操作属性由以下部分组成，逻辑流通用属性部分请参考 逻辑流操作通用属性：基础属性 ...
配置镜像检测
关于操作系统限制的更多信息，请参见 镜像检测操作系统限制。计费 镜像检测功能本身不会收取任何费用。操作步骤 登录 SMC控制台。在左侧导航栏，单击 迁移源。在目标迁移源对应的 操作 列，单击 创建迁移任务。在 创建迁移任务 对话框中，...
- 产品推荐
- 这些文档可能帮助您