创建EMR Hive节点
您可以创建EMR（E-MapReduce）HIVE节点，通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析...如果您需要查看更多周期调度任务详情，可单击顶部菜单栏的 运维中心，详情请参见 运维中心概述。
配置并管理实时同步任务
提交并发布实时同步任务 单击工具栏中的 图标，保存节点。单击工具栏中的 图标，提交节点任务。在 提交新版本 对话框中，输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间，任务提交成功后，需要将任务发布至生产环境进行发布...
OSS对象检查节点
请单击顶部菜单栏左侧的 任务发布。具体操作请参见 发布任务。查看运行结果。您需进入 运维中心，查看节点的运行日志。若出现如下日志信息，表示未检测到OSS对象产生。Code>NoSuchKey</Code><Message>The specified key does not ...
恢复NAS文件
您可以将备份的NAS文件恢复到原ECS实例中，也可以根据需要，将同仓库中其他ECS实例或本地备份客户端备份的NAS文件恢复到该ECS实例。前提条件 已完成NAS备份。...恢复任务创建后，可以在 恢复任务 页签的 状态 栏查看恢复任务进度。
恢复NAS文件
您可以将备份的NAS文件恢复到原服务器或虚拟机器中。您也可以根据需要，将同仓库中其他客户端备份的文件恢复到该服务器或虚拟机器中。前提条件 已完成NAS备份。...恢复任务创建后，可以在 恢复任务 页签的 状态 栏查看恢复任务进度。
恢复NAS文件
您可以将备份的NAS文件恢复到原服务器或虚拟机器中。您也可以根据需要，将同仓库中其他客户端备份的文件恢复到该服务器或虚拟机器中。前提条件 已完成NAS备份。...恢复任务创建后，可以在 恢复任务 页签的 状态 栏查看恢复任务进度。
查看及管理离线计算任务列表
离线计算任务支持的批量操作，请参见 离线计算任务支持的批量操作 离线 计算任务列表支持的操作 离线计算任务列表操作栏支持的操作如下：操作 描述 打开任务 可在代码编辑器中打开当前计算任务。获取编辑锁 可获取当前离线计算任务的编辑锁...
查看及管理离线计算任务列表
离线计算任务支持的批量操作，请参见 离线计算任务支持的批量操作 离线 计算任务列表支持的操作 离线计算任务列表操作栏支持的操作如下：操作 描述 打开任务 可在代码编辑器中打开当前计算任务。获取编辑锁 可获取当前离线计算任务的编辑锁...
查询任务日志
数据传输服务DTS（Data ...在左侧导航栏，单击 任务日志。页面默认展示 任务时间轴 信息，您可以查看任务运行的具体时间点。单击 运行日志 页签。查看日志信息。您可以根据需要，按照日志产生的模块、时间、状态和内容的维度进行筛选。
配置并管理实时同步任务
提交并发布实时同步任务 单击工具栏中的 图标，保存节点。单击工具栏中的 图标，提交节点任务。在 提交新版本 对话框中，输入 变更描述。单击 确定。如果您使用的是标准模式的工作空间，任务提交成功后，需要将任务发布至生产环境进行发布...
Spring任务
在左侧导航栏，单击 任务管理。在 任务管理 页面，单击 创建任务。选择springschedule任务类型，配置对应定时任务类及其方法名。配置名称 意义 任务名 任务名称。描述 任务描述，尽量简洁地描述业务，便于后续搜索。应用ID 任务所属分组。...
创建EMR Spark SQL节点
您可以通过创建EMR（E-MapReduce）Spark SQL节点，实现分布式SQL查询引擎处理结构化数据，提高作业的执行效率。前提条件 数据开发...如果您需要查看更多周期调度任务详情，可单击顶部菜单栏的 运维中心，详情请参见 运维中心概述。
管理工作流实例和节点实例
在 EMR Serverless Spark 页面，单击左侧导航栏中的 任务编排。在 任务编排 页面，单击目标工作流名称。进入 工作流实例列表 页面。您可以查看所有工作流实例，以及各工作流实例的运行时间、运行状态等。单击 工作流实例列表 区域的 工作流...
查看及管理离线集成任务列表
离线计算任务列表介绍 离线计算任务列表页面主要由工具栏、筛选区、离线集成任务列表、批量操作区组成。您可以在离线集成任务列表页面查看创建的离线集成任务并进行相关管理操作。区域 描述 ① 功能区 搜索及筛选：支持通过输入集成任务ID...
查看及管理离线集成任务列表
离线计算任务列表介绍 离线计算任务列表页面主要由工具栏、筛选区、离线集成任务列表、批量操作区组成。您可以在离线集成任务列表页面查看创建的离线集成任务并进行相关管理操作。区域 描述 ① 功能区 搜索及筛选：支持通过输入集成任务ID...
创建OSS恢复任务
恢复任务创建后，可以在 恢复任务 页签的 状态 栏查看恢复任务进度。恢复任务 的 状态：失败（恢复目标路径不存在），如何处理？配置 恢复目的地 时，参数 恢复到Bucket Prefix 配置的Prefix不存在，导致恢复任务失败。请在OSS侧创建Prefix...
任务列表
如果进度百分比长时间不动，一般都是后台正在进行比较耗时的步骤，请耐心等待 对于库表恢复、数据恢复等长时任务，步骤备注栏会展示步骤的详细进度，请以该进度为准。说明 当前仅 PolarDB MySQL版 标准版，及 企业版的集群版支持展示长时...
分支节点
如果您需要查看更多周期调度任务详情，可单击顶部菜单栏的 运维中心，详情请参见 运维中心概述。输出示例：下游节点挂载分支节点 在下游节点中，添加分支节点作为上游节点后，通过选择对应的分支节点输出来定义不同条件下的分支走向。例如...
查看任务进度
在左侧导航栏，单击 任务管理，并取消选中 隐藏已完成模块。说明 系统默认将已经完成的模块隐藏，仅显示正在运行中的模块。根据需要查看的任务类型，选择下述操作步骤。说明 本示例以结构任务和全量任务为例，介绍操作步骤。实际页面可能会...
SQL任务开发
在 EMR Serverless Spark 页面，单击左侧导航栏中的 任务开发。新建任务。在 任务开发 的 任务目录 页签下，单击 新建。在 新建任务 对话框中，输入 名称，选择 任务类型 为 SQL>SparkSQL，然后单击 确定。在右上角选择数据目录、数据库和...
查看备份计划
单击左侧导航栏的 备份任务>全量数据备份，查看备份集ID、保留到期时间、备份大小等信息。说明 关于查询备份集和下载备份数据，更多信息，请参见 备份集查询功能概览 和 备份集下载功能概览。增量数据备份 如果配置了增量数据备份功能，则...
EDAS应用支持金丝雀发布时指定任务调度比例
在左侧导航栏，单击 任务调度>执行列表，单击对应任务 操作 列的 详情。在 任务实例详情 面板，单击 历史执行记录 页签，可查看任务实例运行结果。K8s应用 操作步骤 登录 EDAS控制台。在左侧导航栏，单击 应用管理>应用列表，在顶部菜单栏...
DataStudio侧实时同步任务配置
步骤二：配置资源组 实时同步任务仅支持使用独享数据集成资源组，您可以在实时同步任务编辑页面的右侧导航栏，单击 基本配置。在 资源组 下拉框选择已经与数据库网络连通的独享数据集成资源组。说明 建议实时同步任务与离线同步任务运行在...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可...请单击顶部菜单栏左侧的 任务发布。具体操作请参见 发布任务。后续步骤 任务配置完成后，您可以在 运维中心>实时任务运维>实时同步任务 面板启动并管理该任务，详情请参见：实时同步任务运维。
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可...请单击顶部菜单栏左侧的 任务发布。具体操作请参见 发布任务。后续步骤 任务配置完成后，您可以在 运维中心>实时任务运维>实时同步任务 面板启动并管理该任务，详情请参见：实时同步任务运维。
JAR任务快速入门
在左侧导航栏，单击 任务列表。单击 开发任务。在 开发任务 页面，单击目标任务操作列的 详情。在 任务总览 页签，单击Spark UI。将自动打开Spark UI页面，可查看任务详情。相关文档 任务发布完成后，您可以在工作流调度中使用，详情请参见...
导入开源引擎任务
在左侧导航栏，单击 任务上云>调度引擎作业导入。创建导入任务。在 调度引擎作业导入 页面，单击右上方的 新建导入任务。在 新建导入任务 对话框中，配置各项参数。参数 描述 导入名称 输入导入任务的名称。调度引擎 包括 Airflow、Azkaban...
SQL任务快速入门
在EMR Serverless Spark页面，单击左侧导航栏中的 任务开发。新建users_task任务。在 任务目录 页签下，单击 新建。在 新建任务 对话框中，输入名称（例如users_task），类型使用默认的SparkSQL，然后单击 确定。即创建了一个SparkSQL任务...
执行冒烟测试
在 运维中心 页面左上角切换到开发环境运维中心后，在左边导航栏单击 周期任务运维>周期任务。然后右键单击相应节点，在提示框中单击 测试。配置冒烟测试参数 通过上述入口进入冒烟测试界面后，您需要在界面配置中选择冒烟测试的业务日期。...
Stream模型
使用限制 客户端存在版本限制，具体版本请在以下界面查看：登录 分布式任务调度平台，在左侧导航栏，单击 任务管理。在 任务管理 页面，单击 创建任务。在 创建任务 面板，鼠标悬停在 执行模式 右侧的 图标处查看客户端版本要求。开发接口 ...
设置镜像加速
在左侧导航栏，单击 任务模板列表，在顶部菜单栏选择地域。在 任务模板列表 页面，单击 创建任务模板。在 任务基本信息 配置向导页面，设置相关信息，然后单击 下一步：部署配置。在 部署配置 配置向导页面，设置相关信息。本文仅介绍关键...
通用型NAS备份
恢复任务创建后，可以在 恢复任务 页签的 状态 栏查看恢复任务进度。更多操作 分类 说明 备份计划相关操作 编辑备份计划：您可以根据业务实际修改备份计划的执行间隔、保留策略及备份文件路径等信息。删除备份计划：当不再需要此备份计划，...
查看并管理实时任务
实时任务列表支持的操作 实时任务列表操作栏支持的运维操作如下：操作 描述 DAG图 单击可查看该实时任务的DAG图。更多信息，请参见 实时任务DAG图支持的操作。查看实例 查看实时任务运行生成的实例。说明 查看实例需实时任务已启动运行并...
MapReduce模型
否 操作步骤 登录 分布式任务调度平台，在左侧导航栏，单击 任务管理。在 任务管理 页面，单击 创建任务。在 创建任务 面板，执行模式 下拉列表选择 MapReduce，在 高级配置 区域配置相关信息。配置项 说明 分发策略 说明 需客户端版本>=1....
查看并管理实时任务
实时任务列表支持的操作 实时任务列表操作栏支持的运维操作如下：操作 描述 DAG图 单击可查看该实时任务的DAG图。更多信息，请参见 实时任务DAG图支持的操作。查看实例 查看实时任务运行生成的实例。说明 查看实例需实时任务已启动运行并...
PySpark任务快速入门
在左侧导航栏，单击 任务列表。单击 开发任务。在 开发任务 页面，单击目标任务操作列的 详情。在 任务总览 页签，单击Spark UI。将自动打开Spark UI页面，可查看任务详情。相关文档 任务发布完成后，您可以在工作流调度中使用，详情请参见...
管理和使用保密字典（K8s Secret）
在左侧导航栏，单击 任务模板列表，在顶部菜单栏选择地域。在 任务模板列表 页面，单击 创建任务模板。在 任务基本信息 配置向导页面，设置相关信息，然后单击 下一步：部署配置。在 部署配置 配置向导页面，设置相关信息。本文仅介绍关键...
补数据任务概述
Dataphin补数据任务可以对历史数据进行补数，将数据写入至对应时间分区。代码中若使用调度参数，则该参数将根据补数据时选择的业务日期自动替换为具体值，结合业务代码...在 运维 中心页面，单击左侧导航栏 补数据任务，进入补数据任务页面。
补数据任务概述
Dataphin补数据任务可以对历史数据进行补数，将数据写入至对应时间分区。代码中若使用调度参数，则该参数将根据补数据时选择的业务日期自动替换为具体值，结合业务代码...在 运维 中心页面，单击左侧导航栏 补数据任务，进入补数据任务页面。
查看任务日志
在左侧导航栏，单击 任务日志，页面将默认展示 运行日志 信息。在 全量迁移 下拉菜单中选择 增量迁移，增量迁移的日志内容如下图所示。日志内容 中显示的参数和参数功能说明如下表。参数名称 功能说明 generator 当前接收增量数据的总量。...
- 产品推荐
- 这些文档可能帮助您