实时同步任务告警设置最佳实践
指标6：DDL通知 报警监控原理与适用场景 配置建议 DDL通知指标监控支持设置DDL类型（与DDL处理策略解耦），当监控的DDL事件发生时发送对应告警。功能包含 DDL不支持 类型告警功能，DDL类型监控告警场景推荐使用此告警设置。指标7：脏数据 ...
管理 DDL 任务
通过数据访问代理中的任务管理模块，能直观地对执行过的 DDL 任务进行审计操作，在执行 DDL 任务时查看当前的执行进度，并在出现问题时快速定位到执行出错的位置与详细信息。任务管理模块针对执行出错的 DDL 任务提供出错处理机制。您可以...
任务管理概述
因此，数据访问代理提供一整套针对 DDL 任务的管理体系与界面，方便您直观地对执行过的 DDL 进行审计操作，您也可以在执行 DDL 任务时查看当前的执行进度，出现问题时快速定位到执行出错的位置与详细信息。数据访问代理中的任务管理模块...
MySQL分库分表同步至Hologres（方案1.0）
步骤六：DDL消息处理规则 来源数据源会包含许多DDL操作，数据集成体提供默认处理策略，您也可以根据业务需求，对不同的DDL消息设置同步至目标端的处理策略。不同DDL消息处理策略请参见：DDL消息处理规则。步骤七：运行资源设置 当前方案...
MySQL分库分表同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步...
MySQL分库分表同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步...
如何正确处理DDL异常
PolarDB-X 的DDL处理框架拥有一定的容错能力，会保证DDL的正确性和一致性。但在特殊情况下，需要手动处理DDL异常。处理步骤 下面以创建全局唯一二级索引为例，介绍处理DDL异常的步骤。创建全局唯一二级索引时，会校验列中数据的全局唯一性...
DataStudio侧实时同步任务配置
说明 您可以在 数据集成>配置选项>实时同步DDL消息处理策略 页面，针对每个写入的目标数据库类型，设置DDL处理策略。不同DDL消息处理策略如下表所示。DDL消息类型 处理策略 新建表 DataWorks收到对应类型的DDL消息时，处理策略如下：正常...
一键实时同步至Hologres
操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建...
一键实时同步至Elasticsearch
操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置目标索引 步骤五：DDL消息处理规则 步骤六：运行资源设置 步骤七：执行同步任务 步骤一：选择同步方案 创建同步解决方案任务，根据需求选择...
实时同步常见问题
处理方式如下：正常处理 忽略 报警 出错 此DDL消息将会继续下发给目标数据源，由目标端数据源来处理，不同目标端数据源处理策略可能会不同。丢弃掉此DDL消息，目标端数据源不会做任何处理。丢弃掉此DDL消息，同时发送告警信息。说明 如果...
MySQL一键实时同步至MaxCompute
步骤三：设置同步来源与规则 步骤四：设置目标表 步骤五：DDL消息处理策略 步骤六：设置任务运行资源 执行同步任务 同步任务运维 实时同步报警配置 Merge节点监控报警配置 创建同步任务 选择同步方案。创建同步解决方案任务，选择需要同步...
MySQL一键实时同步至MaxCompute
步骤三：设置同步来源与规则 步骤四：设置目标表 步骤五：DDL消息处理策略 步骤六：设置任务运行资源 执行同步任务 同步任务运维 实时同步报警配置 Merge节点监控报警配置 创建同步任务 选择同步方案。创建同步解决方案任务，选择需要同步...
一键实时同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置目标表 步骤五：DDL消息处理策略 步骤六：设置任务运行资源 步骤七：执行同步任务 步骤一：选择同步方案 创建同步解决方案任务，根据需求选择...
一键实时同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置目标表 步骤五：DDL消息处理策略 步骤六：设置任务运行资源 步骤七：执行同步任务 步骤一：选择同步方案 创建同步解决方案任务，根据需求选择...
UpdateDIJob
Table（表）Schema（schema）JobSettings Object 否 同步任务维度的设置，含DDL处理策略、源端和目标端列数据类型映射策略、任务运行时参数等。DdlHandlingSettings Array 否 DDL处理设置，支持多值。Type String 否 AddColumn DDL类型，可...
控制参数与行为
DDL执行引擎相关参数 目前您可以在 PolarDB-X 1.0 控制台上自定义如下与DDL执行引擎相关的参数。参数 影响范围 默认值 ENABLE_ASYNC_DDL 数据库级别、语句级别 TRUE（启用）PURE_ASYNC_DDL_MODE 数据库级别、会话级别、语句级别 FALSE...
Query洞察
同时可以通过Query洞察快速判断当前Query是否产生了DDL冲突，以及表锁情况，辅助业务进一步排查问题和处理问题。前提条件 存在已登录实例，请参见 登录实例。进入Query洞察 您可从HoloWeb的 诊断与优化 页面直接进入 Query洞察，也可通过...
数据集成侧同步任务配置
设置写入规则 此步骤根据选择的同步方案类型不同，需要进行的配置存在一定差异：DDL或DML消息处理规则（一键实时同步任务）：来源数据源会包含许多DDL或DML操作，为保障数据符合预期，您可以根据写入的目标端数据源类型配置DDL或DML消息...
全增量实时同步至Hologres
步骤七：DDL能力配置 来源数据源会包含许多DDL操作，您可以根据业务需求，单击界面右上方 DDL能力配置，进入DDL能力配置页面对不同的DDL消息设置同步至目标端的处理策略。不同DDL消息处理策略请参见：DDL消息处理规则。步骤八：资源组配置 ...
创建并使用MaxCompute表
您可通过MaxCompute的SQL语句及DataWorks提供的可视化方式，创建与管理MaxCompute表。相比SQL方式，可视化方式操作更加便捷。本文为您介绍如何使用可视化方式创建及管理MaxCompute表。前提条件 在 工作空间配置 页面绑定MaxCompute引擎后，...
创建并使用MaxCompute表
您可通过MaxCompute的SQL语句及DataWorks提供的可视化方式，创建与管理MaxCompute表。相比SQL方式，可视化方式操作更加便捷。本文为您介绍如何使用可视化方式创建及管理MaxCompute表。前提条件 在 工作空间配置 页面绑定MaxCompute引擎后，...
变更表类型及分区策略（AUTO模式）
常见问题 Q：为什么有时分区变更的DDL任务会执行失败？此时该如何处理？A：实例崩溃或唯一索引存在冲突等因素会导致分区变更的DDL任务执行失败。但这不会损坏原表任何数据，也不会阻塞正常的DML和查询语句执行。当分区变更的DDL任务执行...
其他SQL语句
END 事务结束，Hologres的 END 仅支持与DDL语句配合使用。EXPLAIN 查看执行计划。INSERT 导入。ROLLBACK 事务回滚。SELECT Hologres仅支持PostgreSQL中 SELECT 语句的部分语句功能。其中，不支持的功能如下：递归查询 TABLESAMPLE LOCKING ...
如何处理DDL异常
本文介绍如何处理使用 PolarDB-X 1.0 时出现的DDL异常情况。DDL原理简介 PolarDB-X 1.0 的DDL指令会在所有分表上执行对应的DDL操作。失败的情况可以分为两类：DDL在分库执行失败。DDL在任意分库执行出错都可能导致各分表结构不一致。分库...
MySQL分库分表同步至Hologres（方案2.0）
步骤七：DDL能力配置 来源数据源会包含许多DDL操作，您可以根据业务需求，单击界面右上方 DDL能力配置，进入DDL能力配置页面对不同的DDL消息设置同步至目标端的处理策略。不同DDL消息处理策略请参见：DDL消息处理规则。步骤八：资源组配置 ...
实时同步任务运维
修改DDL规则 您可以在启动同步任务前，进入DataStudio界面，重新定义该任务对源端DDL消息的处理策略。详情请参见：配置整库增量数据实时同步任务。说明 DataStudio 界面的变更操作，若要生效，都需要先停止线上实时同步任务，在操作完成后...
外部表概述
通过一条简单的DDL语句，即可在MaxCompute上创建一张外部表，建立MaxCompute表与外部数据源的关联，提供各种数据的接入和输出能力。创建好的外部表可以像普通的MaxCompute表一样使用（大部分场景），充分利用MaxCompute SQL的强大计算功能...
版本发布说明
修复执行语法不正确的DDL时，DDL有概率卡住的问题。修复在JDBC模式下，通过DMS不带执行limit的大表扫描时可能偶发报错的问题。发布日期：2023-07-13 大版本：V5.4.17 小版本：16890724 类别 说明 优化 优化索引的缺省命名逻辑，与MySQL保持...
2024年
修复缩容期间DDL阻塞问题。修复QueryMonitor异常崩溃的问题。修复扩容时重建索引造成不可读写的问题。2024年03月（V7.0.5.2）类别 功能 功能描述 相关文档 修复 修复beam分区表加列后分区主表reloptions不正确的问题。修复beam分区表包含多...
V5.4.x系列实例版本说明
修复时间类型与函数的兼容性问题，提升对时间类型数据的处理效率。修复监控中的连接数显示不正确的问题。修复ALTER TABLE语句中CONVERT TO CHARACTER SET不能同时修改GSI索引表的问题。修复部分PARSER报错信息不明确的问题。优化性能 优化...
PolarDB MySQL版8.0.1版本发布日志
8.0.1.1.35.3 类别 说明 发布时间 问题修复 修复未及时触发只读节点（RO）反馈给读写节点（RW）的ACK，导致DDL操作变慢的问题。修复在X-Engine引擎中执行DROP PARTITION操作时，导致节点异常崩溃的问题。2023-08-17 8.0.1.1.35.1 类别 说明...
错误码表（2.0版）
DDL相关错误码 范围 说明 18000~18100 DDL CREATE语句用户错误。18600~18799 DDL ALTER语句用户错误。18800~18899 DDL DROP语句用户错误。19000~19599 DDL CREATE语句系统错误。19600~19799 DDL ALTER语句系统错误。19800~19899 DDL DROP...
AliSQL内核小版本发布记录
不建议升级到此版本，如遇到备份失败问题，请参见 RDS MySQL 8.0.31(20230630)版本备份失败问题处理。新特性 合并官方 8.0.31 变更。支持取消正在运行的Buffer Pool Online Resize。Statement Concurrency Control功能新增模板级别并发控制...
实时同步能力说明
定义DDL/DML消息处理策略 来源数据源会包含许多DDL操作，进行实时同步时，您可以根据业务需求，对不同的DDL消息设置同步至目标端的处理策略。说明 关于实时同步各目标端支持的DML与DDL操作详情请参见：支持的DML及DDL操作。实时同步任务运...
常见问题
本文为您介绍数据集成任务常见问题。资源组操作及网络连通 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下...
ODC 常见问题
DDL 语句展示问题 Q：表结构 DDL 查看信息不全，应如何解决？A：获取索引和约束 DDL 本身就包含在现有的 DDL 中，可通过 DBMS_METADATA.get_ddl 或 show create table 实现。示例：获取表索引DDL SELECT dbms_metadata.get_ddl('INDEX','...
数据库优化
数据库选型 阿里云拥有丰富的云数据库产品选项，涵盖关系型数据库、非关系型数据库、数据仓库、数据库生态工具四大板块，可以为企业数据生产和集成、实时处理、分析与发现、开发与管理提供全链路生命周期的服务。主要关系型数据库包括 云...
V5.3.x系列实例版本说明
性能优化 优化MysqlDump兼容性问题处理，支持MySQL可执行HINT。优化MysqlDump兼容性问题处理，支持MySQL单行注释“—”。修复问题 修复存在HINT时，没有正确设置ThreadLocal变量导致NPE的问题。修复特殊场景下子查询条件上拉失败，导致全表...
云数据库RDS简介
阿里云关系型数据库RDS（Relational Database Service）是一种安全稳定可靠、高性价比、可弹性...常见问题和故障处理 使用RDS时遇到的各类问题，例如CPU过高、实例锁定等，您可以在 Q&A 或 常见问题 内搜索查看，可以解决您的绝大部分问题。
- 产品推荐
- 这些文档可能帮助您