迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
对于无主键且包含 LOB 类型字段的表，反向增量会出现数据质量问题。如果源端字符集为 UTF-8，建议目标端使用兼容源端的字符集（例如，UTF-8、UTF-16 等），避免产生因字符集不兼容导致目标端出现乱码等问题。节点之间的时钟不同步，或者...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
转换后可以确保源端不同字符集中的数据能成功迁移至目标端，但割接后反向增量可能会出现数据超长无法写回源端的问题。如果源端存在包含时区信息的数据类型（例如 TIMESTAMP WITH TIME ZONE），请您确保目标端数据库支持并存在源端对应的...
快速开始
在创建全量加增量类型的Tunnel时，由于Tunnel的增量日志最多会保留7天（具体的值和数据表的Stream的日志过期时间一致），全量数据如果在7天内没有消费完成，则此Tunnel进入增量阶段会出现OTSTunnelExpired错误，导致增量数据无法消费。...
数据迁移链路规格说明
使用DTS可实现数据秒级增量迁移到目标实例，但受限于源实例的运行负载、传输网络的带宽、网络延时、目标实例写入性能等多种因素的影响，DTS增量迁移任务会出现延迟增大的情况，无法绝对保证秒级延迟。名词解释 名词 说明 规格 数据传输为...
业务切换流程
由于创建的反向迁移任务会将目标库产生的增量数据实时迁移回源库，如果业务运行出现问题，可随时将业务切换回源库。后续步骤 业务切换至目标数据库并稳定运行一段时间，测试所有业务涉及的功能并确认无问题，可结束反向数据迁移的任务，...
业务切换流程
由于创建的反向迁移任务会将目标库产生的增量数据实时迁移回源库，如果业务运行出现问题，可随时将业务切换回源库。后续步骤 业务切换至目标数据库并稳定运行一段时间，测试所有业务涉及的功能并确认无问题，可结束反向数据迁移的任务，...
应用场景
当出现这些故障时，如果用户业务部署在单个地区，那么就会因为地区故障导致服务不可用，且不可用时间完全依赖故障恢复时间。通过构建灾备库，使用数据同步服务实时增量同步主库数据以确保主库与灾备库数据的完全一致，当业务中心发生地区...
大数据计算服务MaxCompute
Long 否 100000 如果维表数据量超过了cacheSize，则会出现报错 Row count of table<table-name>partition<partition-name>exceeds maxRowCount limit。重要 由于维表数据量太大会占用大量JVM堆内存，同时也会让作业启动和维表更新变慢，...
一键MaxCompute任务出错恢复
常见的实时任务写入失败场景 场景分类 相关文档 Binlog无丢失场景及全增量同步任务 Binlog无丢失 Binlog有丢失场景及全增量同步任务 Binlog有丢失 Merge任务的报错失败场景及全增量同步任务 Merge任务的报错失败 Binlog无丢失 出现不支持的...
从自建PostgreSQL（10.1~13版本）增量迁移至RDS ...
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建PostgreSQL或RDS PostgreSQL实例增量迁移至自建PostgreSQL或RDS PostgreSQL实例。DTS支持结构迁移、全量数据迁移和增量数据迁移，同时使用这三种迁移类型可以实现在...
迁移时源库为SQL Server的注意事项及限制
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待迁移的表，分批配置任务。如需进行增量迁移，数据日志：需开启，备份模式设置为Full，且已成功执行过全量物理备份。如为增量迁移任务，DTS要求源数据库的数据日志保存24...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
由于 UPDATE 和 DELETE 操作在 RDS PostgreSQL 中不支持 LIMIT 语法，当全列匹配时匹配到多条数据，可能会出现 UPDATE 或 DELETE 数据比目标端多的情况。例如，无主键表 t1 中存在 c1 和 c2 两列，在源端有两条 c1=1 和 c2=2 的数据。当源...
查看数据校验详情
若源库出现增量数据，同步或迁移到目标库后，经过增量校验对比未发现不一致的数据，则结果列表为空。为什么增量校验模块的位点信息一直不更新？增量校验模块的 当前位点 是最近一次增量校验的时间点。若源库没有新的增量数据，当前位点 将...
全增量同步任务运维
强制重跑 在某些特殊情况下，例如发现源端数据被污染、数据链路出现问题等，您可以单击 操作 列 更多>强制重跑 强制对源端所有表进行全增量初始化操作，将源端数据重新迁移到目标表中，以快速恢复数据。说明 仅Hologres和MaxCompute支持...
跨阿里云账号迁移RDS实例
观察迁移任务的进度变更为 增量迁移，并显示为 无延迟 时，将源库停写几分钟，此时 增量迁移 可能会显示延迟的时间。等待迁移任务的 增量迁移 再次进入 无延迟 后，手动结束迁移任务。常见问题 选择源库RDS实例ID时，出现的常见告警信息及...
全量扫描和增量扫描
缺点：但扫描速度较慢，问题量会比较多，难以修复 2）代码规约增量扫描，是基于代码的一次 push，自动获取 diff 内容，对 diff 文件用编码规约规则进行扫描，并过滤出此次提交产生 diff 规约问题功能。优点：只扫描 diff 文件，扫描速度...
使用限制
故障切换 对于高可用系列、集群系列实例，当主节点出现故障时，RDS会在30秒内切换到备节点（某些主备不一致等特殊场景可能切换时间较长）。切换过程中有30秒左右的连接闪断，需要您设置好程序的自动重连，避免因为切换导致服务不可用。切换...
补数据
为什么补数据选择业务时间昨天和今天，也会出现等待时间的情况？为什么补数据选择补0点~1点生成了多个实例？为什么进行大量补数据操作时，会出现等待资源情况（实例显示黄色，实例状态为等待资源）？为什么补数据报错调起的节点运行时间不...
OSS违规检测
本文汇总了OSS违规检测功能的常见问题。内容安全OSS违规检测是否支持配置多个回调地址？未上传图片到OSS，可以使用OSS违规检测吗？OSS违规检测支持检测哪些格式的文件？为什么OSS中文件格式符合要求却没有被检测？OSS违规检测是否可以检测...
LTS（原BDS）服务介绍
在线离线业务分离、历史库 RDS全增量同步 HBase 数据导出 ODPS（MaxCompute）支持历史数据和增量数据 全量导出MaxCompute 增量归档MaxCompute SLS->HBase 支持订阅SLS实时数据到HBase 日志服务（SLS）增量导入 HBase增量数据订阅 支持云...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能会产生隐式的转换问题，导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度...
迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能会产生隐式的转换问题，导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度...
自动或手动主备切换
A：RDS在发生异常触发高可用切换时，应用端长连接可能无法感知到连接状态变化，如果没有设置socket超时时间，应用程序会一直等待数据库返回结果，通常会等到几百秒后才会断连，期间数据库的部分连接无法正常工作，SQL会出现大量执行异常。...
LTS（原BDS）服务介绍
安全可靠：LTS充分考虑对源端和目标端系统在线影响最小化，以及兼容可能出现的故障。在任务启动前会有网络联通性、安全性等前置校验，运行过程中会实时监控同步延迟、目标集群存储水位等并有相关的限速和报警，任务结束后还会提供数据校验...
迁移 OceanBase 数据库 Oracle 租户的增量数据至 ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能会产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时...
MySQL一键实时同步至MaxCompute
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。执行同步任务 进入 数据集成>同步任务 界面，找到已创建的同步方案。单击操作列的 ...
强弱依赖治理概述
如果商品详情页对下游依赖是强依赖，例如当下游依赖 库存、优惠、物流 出现故障的时候，将导致业务流程无法推进，会出现类似如下的说明，严重影响用户体验。如果商品详情页对下游依赖是弱依赖，例如当下游依赖 评价、店铺 等系统出现故障的...
MySQL一键实时同步至MaxCompute
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。执行同步任务 进入 数据集成>同步任务 界面，找到已创建的同步方案。单击操作列的 ...
数据消费框架原理
背景信息 Tunnel Client可以解决全量和增量数据处理时的常见问题，例如负载均衡、故障恢复、Checkpoint、分区信息同步确保分区信息消费顺序等。使用Tunnel Client后，您只需要关心每条记录的处理逻辑。Tunnel Client的代码详情请参见 ...
同步时源库为SQL Server的注意事项及限制
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。不支持同步内存优化表。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志...
备份SQL Server数据
RDS SQL Server支持自动备份和手动备份两种方式，您可以通过设置备份策略调整RDS数据备份和日志...例如增量备份开启状态下，星期一为全量备份，星期二为增量备份，如果星期三手动执行了全量备份，那么星期四和星期五系统会自动执行增量备份。
RDS SQL Server迁移至DataHub
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待迁移的表，分批配置任务。如需进行增量迁移，数据日志：需开启，备份模式设置为Full，且已成功执行过全量物理备份。如为增量迁移任务，DTS要求源数据库的数据日志保存24...
迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能产生隐式的转换问题导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度时，...
分析实例简介
使用场景 随着企业业务发展，精细化实时运营诉求越来越强烈，RDS MySQL用户经常会遇到以下问题：进行复杂分析查询时，经常会出现查询卡顿。只读实例只能分担读压力，无法从根本上解决复杂分析慢的问题。构建实时数仓成本太高，公司留给数据...
OceanBase 数据库之间的数据迁移
仅适用于 OceanBase 数据库 Oracle 租户的注意事项：如果您在迁移过程中，跳过"源端-主库-数据库 ROW_MOVEMENT 检查"预检查项，同步 ROW_MOVEMENT 为 enable 的表，会出现数据不一致的情况。支持的源端和目标端实例类型 下表中，OceanBase ...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
如果源端和目标端的表结构不完全一致，可能会出现数据不一致的情况。目前已知场景如下：用户手动创建表结构时，因超出数据传输的支持范围，可能会产生隐式的转换问题，导致源端和目标端列的类型不一致。目标端的数据长度小于源端的数据长度...
PolarDB-X 1.0迁移至DataHub
警告 在选择附加列规则前，您需要评估附加列和目标表中已有的列是否会出现名称冲突。关于附加列的规则和定义说明，请参见 附加列名称和定义说明。目标库对象名称大小写策略 您可以配置目标实例中迁移对象的库名、表名和列名的英文大小写...
可用性与可靠性
备份恢复 在某些极端异常的场景，例如整个机房出现故障或者用户数据误删，导致数据丢失，AnalyticDB PostgreSQL版 仍然可以通过远端数据备份的方式恢复集群，提供服务，为极端场景或者用户数据误删情况下提供进一步的数据恢复手段。...
PolarDB PostgreSQL版间的迁移
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
RDS MySQL或自建MySQL逻辑备份
功能概述 功能 说明 增量备份 支持增量备份，采用增量日志流技术，实时获取Binlog进行增量备份。全量备份 逻辑备份采用parquet存储格式，物理备份默认采用gzip存储格式。下载备份文件 支持下载备份文件。更多信息，请参见 备份集下载功能...
- 产品推荐
- 这些文档可能帮助您