一键实时同步至MaxCompute
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键，写入目标端时将会使用该主键进行去重。选择表建立方式 支持 自动建表 和...
创建多元索引
} 常见问题 多元索引路由字段的使用 使用GetRange接口和Search接口范围查询数据时的区别 表格存储是否支持存储JSON数据？使用多元索引Search接口查不到数据 如何查看表的总行数 表格存储是否支持类似关系数据库的in和between.and查询 如何...
通过控制台使用多元索引
如果实际业务中要用到非主键列查询、多条件组合查询等多种查询功能，您可以通过控制台为数据表创建多元索引，然后使用多元索引查询数据。前提条件 已创建数据表，且数据表的最大版本数（max Versions）必须为1，数据生命周期（Time to Live...
使用教程（宽表模型）
但不推荐您将作业提交至Session集群中，因为会存在业务稳定性问题。具体操作，请参见 步骤一：创建Session集群。步骤七：启动并查看Flink计算结果 说明 如果您对作业进行了修改（例如更改SQL代码、增删改WITH参数、更改作业版本等），且...
INSERT ON CONFLICT(UPSERT)
通过Flink写入数据默认 写入冲突策略 使用 InsertOrIgnore（保留首次出现的数据，忽略后续所有数据），但是需要您在Hologres建表时设置主键。详情请参见 Flink全托管。如果使用 ctas 语法，则 写入冲突策略 默认为 InsertOrUpdate（替换...
PolarDB MySQL版间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间新增了某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
PolarDB MySQL版间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间新增了某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
表引擎
ReplacingMergeTree 用于解决MergeTree表引擎相同主键无法去重的问题，可以删除主键值相同的重复项。CollapsingMergeTree 在建表语句中新增标记列 Sign，用于消除ReplacingMergeTree表引擎的如下功能限制。在分布式场景下，相同主键的数据...
MySQL实例间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
AnalyticDB for PostgreSQL数据源
否 insert conflictMode 当 writeMode 为 upsert，写入数据至PostgreSQL出现主键或唯一性索引冲突时，可选择如下冲突处理策略：replace：写入数据发生冲突后，使用待同步的新数据覆盖原有的旧数据。ignore：写入数据发生冲突后，忽略新数据...
V5.4.x系列实例版本说明
修复PREPARE协议下异常传递丢失的问题及元数据获取报错的问题。修复某些情况下，当执行包含Interval函数的语句时，物理SQL会报错的问题。修复DML执行过程中报错，导致事务未释放的问题。修复子查询全表扫描误判，导致全表扫描不合理的问题...
Upsert Kafka
本文为您介绍如何使用Upsert Kafka连接器。背景信息 Upsert Kafka连接器支持以upsert方式从Kafka topic中读取数据并将数据写入Kafka topic。作为源表，此连接器可以将Kafka中存储...最佳实践 MySQL整库同步Kafka 如何解决Flink依赖冲突问题？
SSH远程登录ECS服务器卡顿
问题描述 SSH 远程登录ECS服务器卡顿且已无法再次远程。解决方案 这是因为服务端资源已经被耗尽了，无法顺畅响应远程操作。检查服务器的网络带宽资源是否够用，比如是否被业务系统流量大量占用。检查服务器运行的服务是否将CPU和内存占用率...
调整实例WRITESET相关参数
WRITESET模式解决了这个问题，当该模式开启时，每个事务提交时，会将当前事务修改的数据行与其他事务修改的数据行比较，只要事务修改的数据行互相不冲突，就可以在备库并行回放，能够解决大部分的备库回放并发度不够的问题。开启条件 ...
etc/ssh/ssh_host_rsa_key”报错
Could not load host key:/etc/ssh/ssh_host_rsa_key 问题原因 SSH连接协议中一般需要有RSA或DSA密钥的鉴权，由于目前缺少RSA密钥的鉴权而出现问题。解决方案 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾...
SSH登录Linux系统执行命令提示Argument list too long...
问题症状 SSH登录ECS实例，无论执行任何Linux命令，都会提示如下错误信息。bash:Argument list too long 解决方案 进入单用户模式，依次排查如下目录的文件。etc/profile/etc/profile.d~/.bash_profile~/.bash_login~/.profile~/.bashrc 经...
AnalyticDB for MySQL 3.0数据源
当存在主键/唯一性索引冲突时，会先删除冲突数据所在的行，再插入新行，即新行会替换原有行的所有字段。update：当没有遇到主键/唯一性索引冲突时，数据会正常写入。当存在主键/唯一性索引冲突时，会使用新行替换原有行的所有字段。说明 仅...
DRDS（PolarDB-X）数据源
DRDS（PolarDB-X）Writer通过数据同步框架获取Reader生成的协议数据，通过 replace into（没有遇到主键/唯一性索引冲突时，与 insert into 行为一致，冲突时会用新行替换原有行所有字段）语句写入数据至DRDS（PolarDB-X）。DRDS（PolarDB-X...
MySQL实例间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
Linux系统的ECS实例中，启动SSH服务时提示“must be ...
问题原因 SSH服务基于安全性考虑，对服务相关的目录或文件的权限配置、属组等都有要求。如/var/empty/sshd Owner属性与Group属性为root用户和root用户组，当/var/empty/sshd Owner属性与Group属性为其他时，则会出现异常。解决方案 您可以...
MySQL实例间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
Linux实例中由于SELinux服务开启导致SSH远程连接异常
解决方案 可以根据现场环境需求，选择临时或永久关闭SELinux服务解决SSH连接异常问题。检查SELinux服务状态。使用救援远程连接轻量应用服务器实例。具体操作，请参见 使用救援连接Linux服务器。执行如下命令，查看当前SELinux服务状态。usr...
表设计
主键设计——数据散列 为什么需要数据散列 数据散列是分布式数据系统中的通常要考虑的问题，散列的目的是让数据分布更均匀，避免热点。假设数据分布不均匀，会出现以下问题：数据写入和读取能力受限于单个分区的能力，或者是单机能力，存在...
云数据库MongoDB版（副本集架构）间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
云数据库MongoDB版（副本集架构）间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
RDS MySQL与PolarDB MySQL版间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
云数据库MongoDB版（分片集群架构）间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
云数据库MongoDB版（分片集群架构）间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
RDS PostgreSQL间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
RDS PostgreSQL间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
2022-03-04版本
本文为您介绍2022年3月4日发布的Flink全托管版本的重大功能变更和主要缺陷修复。概述 2022年3月4日正式对外发布VVR 4.0.12版本，该版本是...修复Flink CDC currentFetchEventTimeLag指标、类冲突等问题。修复CTAS语法无法修改已有列的问题。
PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
测试数据构建
工单参数信息中的 冲突处理 模式说明如下：遇到数据冲突则跳过：遇到主键、唯一键的数据写入冲突则跳过冲突记录，继续写入其他数据。遇到数据冲突则替换：遇到主键、唯一键的数据写入冲突则更新原记录的数据并继续写入其他数据。参数配置...
分区设计
表的数据将拆解成多个数据分区独立存储，通常的设计原则是：主键（Primary Key）单实例数据库不要求表一定要有主键，但是对于分布式数据库，主键则是必须的，以保证一行数据是全局唯一的，避免迁移过程出现问题。如果用户没有特殊的性能...
分支模式选型及落地指南
另外一种冲突，是合并的冲突，如主干上的某个增强补丁合并到发布过的一个分支上，由于代码的基线不同，产生冲突，无法合并。分支模式通过合理的开发、合并约定，来避免或减少上述冲突情况发生。减少返工 由此可见，每一次返工的成本是很高...
DeleteUserKey-删除指定的SSH密钥
为当前用户删除指定的SSH密钥。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 DELETE/api/v3/user/keys...
Linux实例中由于SELinux服务开启导致SSH远程连接异常
可以根据现场环境需求，选择临时或永久关闭SELinux服务解决SSH连接异常问题。检查SELinux服务状态 通过 管理终端 登录Linux实例，执行如下命令，查看当前SELinux服务状态。usr/sbin/sestatus-v 系统显示类似如下。SELinux status:enabled ...
上下游存储
使用SASL_SSL作为安全协议，并使用SCRAM-SHA-256作为SASL机制。CREATE TABLE KafkaTable(`user_id` BIGINT,`item_id` BIGINT,`behavior` STRING,`ts` TIMESTAMP(3)METADATA FROM 'timestamp')WITH('connector'='kafka',.'properties....
MariaDB数据源
是 无 writeMode 选择导入模式，支持insert into、on duplicate key update和replace into 三种方式：insert into：当主键/唯一性索引冲突时会写不进去冲突的行，以脏数据的形式体现。如果您通过脚本模式配置任务，请设置 writeMode 为...
HybridDB for MySQL数据源
replace：没有遇到主键或唯一性索引冲突时，与 insert 行为一致，冲突时会用新行替换原有行所有字段。insert：当没有遇到主键或唯一性索引冲突时，数据正常写入。当主键或唯一性索引冲突时会写不进去冲突的行，以脏数据的形式体现。否 ...
- 产品推荐
- 这些文档可能帮助您