配置节点上下文
各类型节点的调度参数配置，详情请参见 SQL类型节点及离线同步节点。配置输出参数 通用场景 您可以在节点上下文中定义 本节点输出参数，输出参数的取值分为 常量 和 变量 两种类型。完成输出参数的定义并提交当前节点后，即可在下游节点中...
计算节点计费规则
本文介绍按量付费和包年包月集群中计算节点的计费规则，以及使用固定规格计算包抵扣按量付费集群的计算节点费用时，固定规格计算包的消耗规则。标准版的计算节点规格支持 通用规格 子系列。通用规格：同一服务器上的不同集群，会互相充分...
增加或删除节点
节点费用 增加节点时的计费方式如下：如果集群为 包年包月（也称预付费），则增加的节点也是 包年包月。如果集群为 按量付费（也称后付费或按小时付费），则增加的节点也是 按量付费。说明 包年包月和按小时付费的只读节点都可以随时释放，...
新增离线数据同步任务
参数 说明 依赖配置 支持配置上游依赖节点，可依赖同周期数据同步节点或数据开发节点。开启后将等待上游节点调度运行成功后，再运行当前节点。表结构变化 选择是否开启检测表结构变化。开启后，以天为单位，进行数据源端表结构检测。若发现...
新增离线数据同步任务
参数 说明 依赖配置 支持配置上游依赖节点，可依赖同周期数据同步节点或数据开发节点。开启后将等待上游节点调度运行成功后，再运行当前节点。表结构变化 选择是否开启检测表结构变化。开启后，以天为单位，进行数据源端表结构检测。若发现...
读写分离架构
只读节点均从主节点同步数据，为星型复制架构，数据同步延迟远小于 经典 版链式复制架构。支持自定义只读节点数量，范围为1~9个。承担读请求的处理，特点如下：只读节点采取链式复制架构，当只读节点数越多，靠近链路末端的只读节点数据...
读写分离版
只读节点均从主节点同步数据，为星型复制架构，数据同步延迟远小于 经典 版链式复制架构。支持自定义只读节点数量，范围为1~9个。承担读请求的处理，特点如下：只读节点采取链式复制架构，当只读节点数越多，靠近链路末端的只读节点数据...
包年包月
计费如下所示：节点组类型 节点组名称 规格 系统盘 数据盘 节点数量 ECS费用（1节点/小时）EMR服务费（1节点/小时）Task emr-task（自定义）通用型（ecs.g7.xlarge）4 vCPU,16 GiB,3 Gbps ESSD 云盘80 GiB*1 ESSD 云盘80 GiB*1 2 1.0465 0....
使用Terraform创建具备自动伸缩功能的节点池
在 节点池 页面右上方，单击 同步节点池。如果您未在集群中使用alicloud_cs_kubernetes_autoscaler组件，请直接进行以下操作。使用Terraform创建开启自动伸缩功能的节点池。创建节点池的配置文件。在已有集群中创建开启自动伸缩功能的节点...
开通指南
费用按AI引擎节点的规格、数量和时长计费。时序预测 时序异常检测 已开通时序引擎，且时序引擎版本为3.4.26及以上版本。AI基础节点。AI基础节点免费。注意事项 AI引擎开通过程中，Lindorm实例的状态为 服务开通中，此时实例可正常读写数据...
配置Kafka输入
在实时同步节点的编辑页面，鼠标单击 输入>Kafka 并拖拽至编辑面板。单击 Kafka 节点，在 节点配置 对话框中，配置各项参数。参数 描述 数据源 选择已经配置好的Kafka数据源，此处仅支持Kafka数据源。如果未配置数据源，请单击右侧的 新建...
将表格存储数据表中数据同步到另一个数据表
在 数据集成 节点下会显示新建的离线同步节点。步骤四：配置离线同步任务并启动 在 数据集成 节点下，双击打开新建的离线同步任务节点。配置同步网络链接。选择离线同步任务的数据来源、数据去向以及用于执行同步任务的资源组，并测试连通...
同步增量数据到MaxCompute
在 数据集成 节点下会显示新建的离线同步节点。步骤二：配置离线同步任务并启动 配置 表格存储 到MaxCompute的增量数据同步任务，具体步骤如下：在 数据集成 节点下，双击打开新建的离线同步任务节点。配置同步网络链接。选择离线同步任务...
配置数据脱敏
在实时同步节点的编辑页面，鼠标单击 转换>数据脱敏 并拖拽至编辑面板，连线已配置好的输入节点。单击 数据脱敏 节点，在 数据脱敏 对话框中，配置各项参数。新建 脱敏规则：单击 新建脱敏规则，在弹出来的 新建脱敏规则 对话框中选择需要...
运行及排错
背景信息 在 设置周期和依赖 的操作中，您配置了每周二凌晨2点执行离线同步节点。提交节点后，需要到第2天才能看到调度系统自动执行的结果。DataWorks为您提供测试运行、补数据和周期运行三种触发方式，帮助您确认实例运行的定时时间、相互...
规格与定价（金融云）
金融云 PolarDB 的SQL洞察按照审计日志存储的容量收取费用，价格为0.012元/小时/GB。说明 审计日志的存储容量按量扣费，不支持包年包月。全球数据库网络GDN（可选）目前全球数据库网络（GDN）跨地域传输流量0折优惠，您只需要支付每个金融...
增加或删除节点
增加节点仅收取节点规格的费用（详情请参见 计费项概览），存储费用仍然按实际使用量收费，与节点数量无关。若您使用的 PolarDB MySQL版 集群计费方式为包年包月，则需要将其转为按量付费后才能使用固定规格计算包进行抵扣，详情请参见 ...
实时同步能力说明
使用限制 实时同步不支持在数据开发界面运行任务，您需要保存、提交实时同步节点后，在生产环境运维中心运行该节点。实时同步仅支持运行在独享数据集成资源组上，详情请参见 独享数据集成资源组。实时同步任务不支持同步视图。注意事项 ...
MSE Sync迁移方案
JAVA_OPT="$JAVA_OPT-Dmsesync.deamon.refresh.interval=10"重要 定时任务时间间隔默认为60秒，扫描间隔不宜设置过短，否则会造成服务端和同步节点压力过大。具体时间设置需要根据集群负载和同步工具负载确定，建议值不要小于10秒。请勿在...
常见问题
A：只读节点的价格和主节点的价格一致，请参见 计算节点价格明细。Q：如果增加一个只读节点，存储容量是否会增大一倍？A：PolarDB 采用计算与存储分离的架构，购买的只读节点是计算资源，因此存储容量不会增加。存储空间采用Serverless方式...
基本概念
任务（Task）任务是对数据执行的操作的定义，示例如下：通过数据同步节点任务，将数据从RDS同步至MaxCompute。通过MaxCompute SQL节点任务，运行MaxCompute SQL来进行数据的转换。每个任务使用0或0个以上的数据表（数据集）作为输入，生成...
将MaxCompute数据同步到表格存储
在 数据集成 节点下会显示新建的离线同步节点。步骤四：配置离线同步任务并启动 新建并配置MaxCompute到表格存储的同步任务，具体步骤如下：在 数据集成 节点下，双击打开新建的离线同步任务节点。配置同步网络链接。选择离线同步任务的...
计费项
计算资源费用=单Segment节点价格×Segment节点数量×时长 按量付费 华北2（北京）地域，某个按量付费的实例，Segment节点规格为2C16G，Segment节点数量为4个，实际使用时长为2000小时。那么，计算资源的费用=0.915元/小时×4×2000小时=...
数据集成服务
在 数据集成 节点下会显示新建的离线同步节点。配置网络与资源链路。选择离线同步任务的数据来源、数据去向以及用于执行同步任务的资源组，并测试连通性。在 数据集成 节点下，双击打开新建的离线同步任务节点。在 网络与资源配置 步骤，...
API概览
SyncClusterNodePool 同步节点池 您可以调用SyncClusterNodePool接口同步集群节点池，包含节点池元数据、节点池内节点信息等。DescribeClusterAttachScripts 查询添加已有节点到集群节点池的脚本 如果需要将已有ECS实例添加到ACK集群中作为...
文档修订记录
创建CDH Hive节点 创建CDH Spark节点 创建CDH MR节点 创建CDH Presto节点 创建CDH Impala节点 2024.2.6 更新功能 数据保护伞 数据保护伞新版系统配置页面发布上线。您可通过系统配置：设置数据保护伞的识别内容、识别范围。设置水印文件...
成本洞察功能说明
在统计命名空间维度的费用时，转换为：Σ（Pod资源申请/节点容量）*节点单位价格 这种方式可以精确估算命名空间的成本费用。用户折扣、代金券抵扣、包年包月等各种延迟计费策略可能会导致命名空间的成本费用和集群的实际账单费用不一致。但...
API概览
SyncClusterNodePool 同步节点池 您可以调用SyncClusterNodePool接口同步集群节点池，包含节点池元数据、节点池内节点信息等。DescribeClusterAttachScripts 查询添加已有节点到集群节点池的脚本 如果需要将已有ECS实例添加到ACK集群中作为...
时间属性配置说明
运行成功或失败后皆不可重跑 如果节点不管运行成功或失败，重跑后都会影响运行结果（例如，某些数据同步节点），可选择使用该重跑类型。说明 当选择该类型时，如果系统出故障，在故障恢复后，系统也不会自动重跑相应节点。不支持配置 出错...
DescribeSDGs-查询SDG信息
sdg_copying：跨节点同步中。failed：制作失败。success：制作成功。success CreationInstanceId string 创建 SDG 的实例 ID。aic-5x20dyeos*CreationRegionId string 创建 SDG 的节点 ID。cn-hangzhou-26 CreationTime string SDG 首次...
数仓版（3.0）计费项
计费公式：单机版 基础计算资源费用=基础计算资源规格的单价×时长 集群版 基础计算资源费用=单节点价格×节点数×时长 弹性IO资源 按量付费 包年包月 计费场景：以下场景涉及基础资源中弹性IO资源的费用：购买集群时订购弹性IO资源。...
API概览
SyncClusterNodePool 同步节点池 您可以调用SyncClusterNodePool接口同步集群节点池，包含节点池元数据、节点池内节点信息等。DescribeClusterAttachScripts 查询添加已有节点到集群节点池的脚本 如果需要将已有ECS实例添加到ACK集群中作为...
产品架构
必须有半数以上的Follower节点同步成功才算元数据写入成功。Leader从Follower中选出，进行选主需要实例中有半数以上的Follower节点存活。如果Leader节点失败，则Follower会发起新一轮选举。Follower 只有元数据读取权限，无写入权限。通过...
Cloud Controller Manager
定时同步节点标签。此次升级不会对业务造成影响。2021年04月 版本号 镜像地址 变更时间 变更内容 变更影响 v1.9.3.380-gd6d0962-aliyun registry....
数据开发
提交并发布离线同步节点ods_mbr_user_info。说明 必须要提交了以后才可以在下游节点配置依赖关系的时候被搜索到，发布可以等到全部提交完后批量发布。同步地区源表 ods_t_area。新建如下MySQL到MaxCompute的离线同步任务，使用向导模式。...
高可用和容灾设计
RDS SQL Server 最大支持一主一备高可用架构和七个只读节点，支持横向扩展集群读能力，备节点和所有只读节点都是从主节点同步数据。集群系列的高可用能力与高可用系列相同，而且只读节点可以创建在和主备节点不同的其它可用区。说明 仅RDS ...
开启读写分离功能
背景信息 读写分离功能采用星型复制架构，所有只读节点均从主节点同步数据，数据同步延迟低。所有只读节点均具备容灾功能，可作为备节点进行数据备份，您可以按需选择只读节点数量（范围为1~9），更多信息请参见 读写分离架构。操作步骤 ...
高可用版
采用三副本方案，数据日志从主节点同步复制到两个备节点，当集群中至少两个节点都写入成功后，数据写入才完成提交。节点间采用线性一致性写。限制 基于性能考虑，高可用版实例的三个节点均在同一可用区。常见问题 基础版可以升级为高可用...
开启读写分离功能
背景信息 读写分离功能采用星型复制架构，所有只读节点均从主节点同步数据，数据同步延迟低。所有只读节点均具备容灾功能，可作为备节点进行数据备份，您可以按需选择只读节点数量（范围为1~9），更多信息请参见 读写分离版。操作步骤 访问...
执行DDL操作提示“获取不到MDL锁”
主节点等待所有只读节点同步到最新的复制位点。在一定时间内，主节点会判断所有只读节点是否都解析到了此Redo日志以及是否加锁成功。然后有下列两种情况：所有只读节点同步到最新的复制位点，DDL成功。某些只读节点未同步到最新的复制位点...
- 产品推荐
- 这些文档可能帮助您