自建PostgreSQL同步至RDS PostgreSQL

注意事项 类型 说明 源库限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。若同步对象为表级别,且需进行编辑(如表列名映射),单次同步任务的表数量超过5000时,建议您拆分待同步的表,...

迁移时源库为MySQL的注意事项及限制

待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持迁移至多1000张表。当超出数量限制,任务提交后显示请求报错,...

FineBI连接MaxCompute

如果连接出现问题,请参见 数据连接FAQ。步骤四:使用FineBI查询及分析数据 在FineBI操作界面,您可以在左侧导航栏,单击 数据准备 或 仪表板,查询MaxCompute项目数据及分析数据。您可以执行如下操作,操作详细指导,请参见 FineBI帮助。...

解决SQL Server表中的中文乱码问题

如果没有使用前置词N,则SQL Server将字符串转换成当前数据库的非Unicode字符编码页,可能导致乱码问题。正确示例 将上述示例中的数据类型VARCHAR改为NVARCHAR,执行如下代码,查询SQL Server表中的生僻字“䅇”(su)。使用tempdb数据...

自建PostgreSQL迁移至云原生数据仓库 AnalyticDB ...

待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。待迁移的数据库名称中间不能包含短划线(-),例如dts-testdata。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持...

云数据库Redis间的迁移

源库单机版Redis迁移到目标库集群版Redis的操作限制:由于集群cluster只允许单个命令操作单个slot,若在源库执行多Key操作时,Key不在同一个slot或涉及多个slot,则会出现报错 CROSSSLOT Keys in request don't hash to the same slot 建议...

迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...

目标端表对象存在数据时,如果原数据与写入数据冲突,数据传输采用将冲突数据记录日志,保留原数据不变的策略进行数据写入。重要 全量校验将使用 IN 模式拉取数据,无法校验目标端多数据的场景,并且校验性能存在一定程度降级。单击 预检查...

自建PostgreSQL同步至RDS PostgreSQL

注意事项 类型 说明 源库限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。若同步对象为表级别,且需进行编辑(如表列名映射),单次同步任务的表数量超过5000时,建议您拆分待同步的表,...

多表归并任务中执行Online DDL操作导致目标库数据丢失

问题描述 在通过DTS进行多表归并任务时,若在源库进行Online DDL操作,对源库的表结构等进行了调整修改,则同步到目标库时,会出现数据丢失的情况。说明 多表归并任务指将不同源库的表进行归并,继而同步或迁移到目标库。例如:当用户配置...

淘宝万亿级交易订单背后的存储引擎

总结 淘宝交易订单记录流水型的访问特征是最近写入的记录会被大量访问,随着时间推移,记录访问频次急剧衰减。X-Engine引擎的冷热分离机制能很好地处理这种流水型业务,单一X-Engine数据库集群完全可以解决此类需求。对于新开业务或者有...

按时间戳冷热分离

可以在查询条件中添加热数据时间范围,避免出现此类问题。示例如下:/您需要设置_l_ts_min_(当前时间-冷热分界线),_l_ts_max_(当前时间),注意时间单位统一 SELECT/*+_l_hot_only_(true),_l_ts_min_(1000),_l_ts_max_(2001)*/*FROM test ...

迁移时源库为MongoDB的注意事项及限制

待迁移的集合需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。如迁移对象为集合级别,且需进行编辑(如集合的名称映射),则单次迁移任务仅支持迁移至多1000张集合。当超出数量限制,任务提交后显示...

同步时源库为MySQL的注意事项及限制

MySQL同步至PolarDB MySQL版 MySQL单向同步至PolarDB MySQL版 类型 说明 源库限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。如同步对象为表级别,且需进行编辑(如表列名映射),则单...

跨云账号迁移云数据库Redis实例

源库单机版Redis迁移到目标库集群版Redis的操作限制:由于集群cluster只允许单个命令操作单个slot,若在源库执行多Key操作时,Key不在同一个slot或涉及多个slot,则会出现报错 CROSSSLOT Keys in request don't hash to the same slot 建议...

从Amazon Aurora MySQL迁移至PolarDB MySQL版

警告 选择为 忽略报错并继续执行,可能导致数据不一致,给业务带来风险,例如:表结构一致的情况下,在目标库遇到与源库主键的值相同的记录,则保留目标库中的该条记录,即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下,...

数据资产定级

局部性质:数据直接或间接用于某些业务线的运营、报告等,如果出现问题会给业务线造成一定的影响或造成工作效率降低。标记为A3。一般性质:数据主要用于日常数据分析,出现问题带来的影响极小。标记为A4。未知性质:无法明确数据的应用场景...

数据资产定级

局部性质:数据直接或间接用于某些业务线的运营、报告等,如果出现问题会给业务线造成一定的影响或造成工作效率降低。标记为A3。一般性质:数据主要用于日常数据分析,出现问题带来的影响极小。标记为A4。未知性质:无法明确数据的应用场景...

从Amazon RDS SQL Server全量迁移至阿里云

警告 选择为 忽略报错并继续执行,可能导致数据不一致,给业务带来风险,例如:表结构一致的情况下,在目标库遇到与源库主键的值相同的记录,则保留目标库中的该条记录,即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下,...

PolarDB PostgreSQL版同步至RDS PostgreSQL

增量期间,DTS不会保留目标集群中的该条记录,即源库中的该条记录会覆盖至目标数据库中。表结构不一致的情况下,可能会导致无法初始化数据、只能同步部分列的数据或同步失败,请谨慎操作。目标库对象名称大小写策略 您可以配置目标实例中...

通过DTS导入数据

增量期间,DTS不会保留目标集群中的该条记录,即源库中的该条记录会覆盖至目标数据库中。表结构不一致的情况下,可能会导致无法初始化数据、只能同步部分列的数据或同步失败,请谨慎操作。目标库对象名称大小写策略 您可以配置目标实例中...

自建PostgreSQL迁移至PolarDB PostgreSQL版

待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。待迁移的数据库名称中间不能包含短划线(-),例如dts-testdata。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持...

从腾讯云MySQL迁移至阿里云

警告 选择为 忽略报错并继续执行,可能导致数据不一致,给业务带来风险,例如:表结构一致的情况下,在目标库遇到与源库主键的值相同的记录,则保留目标库中的该条记录,即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下,...

同步时源库为MongoDB的注意事项及限制

待同步的集合需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。如同步对象为集合级别,且需进行编辑(如集合的名称映射),则单次同步任务仅支持同步至多1000张集合。当超出数量限制,任务提交后显示...

从Amazon Aurora PostgreSQL全量迁移至阿里云

警告 选择为 忽略报错并继续执行,可能导致数据不一致,给业务带来风险,例如:表结构一致的情况下,在目标库遇到与源库主键的值相同的记录,则保留目标库中的该条记录,即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下,...

从Amazon RDS for PostgreSQL全量迁移至阿里云

警告 选择为 忽略报错并继续执行,可能导致数据不一致,给业务带来风险,例如:表结构一致的情况下,在目标库遇到与源库主键的值相同的记录,则保留目标库中的该条记录,即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下,...

数据授权

您授权允许 数据安全中心(DSC)访问MaxCompute、RDS和对象存储OSS数据时,可能会出现授权失败的情况。您可以参考以下原因排查数据授权问题。RDS连接授权失败有哪些原因?RDS数据库账号或密码输入错误。您自行删除了RDS访问白名单中 DSC ...

通过Kafka导入数据

在Kafka调用执行preCommit时,将对象存储中的数据由COPY INTO操作导入至 云数据库 SelectDB 版 中,此时 云数据库 SelectDB 版 会记录已提交成功的last_offset。若此时SelectDB Connector执行COPY INTO失败,则从Kafka中获取当前分区...

同步时源库为PolarDB-X 2.0的注意事项及限制

PolarDB-X 2.0同步至云原生数据仓库AnalyticDB MySQL 3.0 类型 说明 源库限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。若同步对象为表级别,且需进行编辑(如表列名映射),单次同步...

操作指南

节点内部报错 蓝图节点内代码出现问题时,导致的节点初始化报错等。说明 当调用组件方法时的参数不符合组件声明时,将产生警告信息。复制组件ID:双击报错记录的组件名称,可复制ID到剪贴板。搜索组件ID:将复制到的组件ID,在编辑器中搜索...

RDS MySQL迁移至Tair/Redis

数据传输服务DTS(Data Transmission Service)支持将MySQL数据库(例如自建MySQL或RDS MySQL)迁移至 云原生内存数据库Tair 或 云数据库Redis,降低后端关系型数据库的负载,从而提升用户体验。本文以 RDS MySQL 实例为源,云数据库Redis ...

数据质量教程概述

例如表 province 字段中如果有 浙江、ZJ 两种表述,在您 group by province 时会出现两条记录。及时性 及时性主要体现在最终ADS层的数据可以及时产出。为保证及时性,您需要确保整条数据加工链路上的每个环节都可以及时产出数据。本教程将...

数据质量教程概述

例如表 province 字段中如果有 浙江、ZJ 两种表述,在您 group by province 时会出现两条记录。及时性 及时性主要体现在最终ADS层的数据可以及时产出。为保证及时性,您需要确保整条数据加工链路上的每个环节都可以及时产出数据。本教程将...

同步时源库为PolarDB MySQL版的注意事项及限制

PolarDB MySQL版同步至 云原生数据仓库 AnalyticDB MySQL 版 2.0 具体注意事项及限制如下:类型 说明 源库限制 待同步的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。如同步对象为表级别,且需进行...

会话管理

常见问题 Q:为什么会出现%的 访问来源?A:该情况可能在您使用存储过程时出现。按如下示例可以复现这种情况:说明 示例中数据库实例为RDS MySQL,测试账号为test_user,测试数据库为testdb。在RDS控制台创建普通权限账号及其授权的数据库...

RDS MySQL同步至Tair/Redis

数据传输服务DTS(Data Transmission Service)支持将MySQL数据库(例如自建MySQL或RDS MySQL)同步至 云原生内存数据库Tair 或 云数据库Redis,降低后端关系型数据库的负载,从而提升用户体验。本文以 RDS MySQL 实例为源,云数据库Redis ...

MongoDB数据

在并发大于1的情况下,同步任务配置的集合中所有_id 字段类型必须一致(例如,_id 字段都为string类型或者ObjectId类型),否则会出现部分数据无法同步的问题。说明 并发大于1时,任务拆分会使用_id 字段进行划分,因而在此场景下_id 字段...

使用DTS将自建PostgreSQL迁移至RDS PostgreSQL

待迁移的表需具备主键或唯一约束,且字段具有唯一性,否则可能导致目标数据库中出现重复数据。待迁移的数据库名称中间不能包含短划线(-),例如dts-testdata。如迁移对象为表级别,且需进行编辑(如表列名映射),则单次迁移任务仅支持...

SQL洞察

数据库实例负载非常高时,会丢失少量记录,因此通过SQL洞察来统计增量数据可能会出现不准确的情况。SQL洞察中记录的SQL语句最大长度为8192字节,超过部分不再记录。其中 RDS MySQL 和 PolarDB MySQL版 实例记录的SQL语句最大长度受参数...

同步时源库为Redis的注意事项及限制

如果同步的源数据库类型为Redis,如自建Redis、云数据库Redis,您需要在配置具体的同步任务前,参考本文的注意事项及限制,以保障数据同步任务的正常运行。源库为Redis的同步方案概览 根据如下同步方案,查看同步任务的注意事项及限制:...

使用Kafka客户端消费订阅数据

注意事项 使用本文提供的Demo消费数据时,如果采用auto commit(自动提交),可能因为数据还没被消费完就执行了提交操作,从而丢失部分数据,建议采用手动提交的方式以避免该问题。说明 如果发生故障没有提交成功,重启客户端后从上...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 数据库审计 云数据库 RDS 数据库备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用