使用SDK时出现Validate PK size fail异常
介绍使用SDK时出现...现象 使用SDK更新数据时出现如下异常：Caused by:[ErrorCode]:OTSInvalidPK,[Message]:Validate PK size fail 原因 设置的主键个数和数据表的主键个数不一致。解决方案 设置的主键个数必须和数据表的主键个数一致。
性能测试
存储空间占用测试结果如下：数据库 表大小 时空主键索引大小 云原生多模数据库 Lindorm Ganos引擎 4.7 GB 无需占用空间 开源GeoMesa（HBase）5.9 GB 无需占用空间 云数据库MongoDB分片集群 8.2 GB 1.6 GB 空间范围的查询耗时 在空间范围...
配置列映射
配置示例 宽表和索引表的列映射采用JSON文件实现，列映射的配置示例如下，将宽表 testTable 的数据同步至索引表 democollection，宽表的 f:name 这一列映射到索引表的 f_name_s 这一列，宽表的 f:age 这一列映射到索引表的 f_age_i 这一列...
不支持同步无主键的表
问题描述 DTS同步任务是整库同步，在源库创建的无主键表没有同步到目标库中时，报错信息一般是表不存在。问题原因 DTS不支持无主键表同步到AnalyticDB MySQL中。解决方案 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必...
行业算法版表结构
选择主表,设置主表主键：3.设置辅表主键：4.设置主辅表关联关系（在主表里设置）：注意：行业算法版支持的主辅表数据关联关系可参考 创建多表join；只有 int 或 literal 字段类型可以做关联字段；主辅表join时，join的字段必须类型相同，...
Hologres结果表
当导入数据的Hologres目标表设置了主键，实时写入的默认语义不会按照主键进行更新，后续导入的主键数据如果重复，则会被丢弃。Hologres为异步写入数据，您在进行作业时需要添加 blink.checkpoint.fail_on_checkpoint_error=true 配置，当...
表存储格式：列存、行存、行列共存
说明 orientation：指定了数据库表在Hologres中的存储模式是列存还是行存，Hologres从 V1.1版本开始支持行列共存的模式。建表时默认为列存（column storage）形式。行存或行列共存需要在建表时显式指定。修改表的存储格式需要重新建表，不...
创建数据表
接口/*创建数据表，并设置主键的个数、名称、顺序和类型，以及预留读写吞吐量、TTL和stream选项。api*@param[]$request 请求参数。return[]返回为空。CreateTable成功时不返回任何信息，此处返回一个空的array，与其他API保持一致。throws ...
常见问题
数据同步过程中如果源实例中的数据库名、表名或者列名中含有划线（-）会报错吗？由于ADB中不允许数据库名、表名或者列名中含有划线（-），为保证数据同步成功，系统会将中划线（-）映射为下划线（_）。如果在数据同步过程中遇到其他因数据...
云数据库 RDS MySQL 版如何查看表的主键字段
概述 本文介绍云数据库 RDS MySQL 版查看表主键字段的方法。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改...
写入与查询
当 加载内置数据集 前出现 并为灰质状态，且 库表 页签下可以查看到ADB_SampleData_TPCH数据库及相关的表，则为加载成功。加载内置数据集时，提示加载失败或者长时间加载中如何处理？您需要先通过SQL语句 DROP TABLE table_name;删除库中的...
UPDATE
结果表有主键 如果为表设置了主键（PK），那么主键索引文件就可以通过PK快速定位到RID，然后定位到数据文件。在UPDATE的过程中也是如此，可以通过主键快速过滤出要更新的文件，减少文件扫描；如果没有主键，更新就很容易退化成全表更新，...
主键与唯一键（DRDS模式）
本节介绍了在DRDS模式数据库中，判断表的主键是Global主键还是Local主键，表的唯一键是Global唯一键还是Local唯一键的方法。主键 在 PolarDB-X 中，主键分为Global主键与Local主键。区别如下：能保证全局唯一，就称为Global主键；只保证...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
数据传输不支持迁移 TiDB 数据库的无主键表，以及包含空格的数据至 OceanBase 数据库 MySQL 租户。数据源标识和用户账号等，在数据传输系统内全局唯一。数据传输仅支持迁移库名、表名和列名为 ASCII 码且不包含特殊字符（包括换行、空格，...
主键与唯一键（AUTO模式）
本节介绍了在AUTO模式数据库中，判断表的主键是Global主键还是Local主键，表的唯一键是Global唯一键还是Local唯一键的方法。主键 在 PolarDB-X 中，主键分为Global主键与Local主键。当创建出的主键：能保证全局唯一，就称为Global主键；只...
备份恢复性能说明
如果源数据库中存在无主键表、字符串主键表或联合主键表等情况，也会导致备份时间变长。增量备份 规格 MBPS（MByte Per Second）large 46.1 medium 29.8 small 14.9 micro 5.0 全量恢复 规格 RPS（Record Per Second）large 34,190.5 ...
产品架构
索引类型 描述 数据表主键 数据表类似于一个巨大的Map，它的查询能力也就类似于Map，只能通过主键查询。二级索引 通过创建一张或多张索引表，使用索引表的主键列查询，相当于把数据表的主键查询能力扩展到了不同的列。多元索引 使用了倒排...
Microsoft Azure Database for MySQL数据库迁移到阿里...
DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，甚至导致数据...
添加自增主键导致主从节点查询数据不一致
在没有主键的情况下，数据在表中的顺序是由存储引擎内部的RowID决定的，同样的数据在主从节点上的RowID可能不同，因此无主键表中的数据在主从节点中的排列顺序不同，从而导致同样的数据对应的自增主键值不同，即用相同的自增主键值分别在主...
添加自增主键导致主从节点查询数据不一致
在没有主键的情况下，数据在表中的顺序是由存储引擎内部的RowID决定的，同样的数据在主从节点上的RowID可能不同，因此无主键表中的数据在主从节点中的排列顺序不同，从而导致同样的数据对应的自增主键值不同，即用相同的自增主键值分别在主...
OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库
数据传输支持的 Oracle 数据库版本为 10G/11G/12C/18C/19C，12C 及之后版本包含数据库容器（Container Database，CDB）和可插拔数据库（Pluggable Database，PDB）。数据传输不支持表中全部列均为 LOB 类型（BLOB/CLOB/NCLOB）的增量数据...
如何理解主键、数据分区和数据分区键
主键 表中的每一行由主键（PK）唯一确定。您在创建表的时候必须指定组成主键的列，这些列称为主键列。主键列必须有值。您必须确保主键列的值的组合能够唯一地确定一行。在后续使用的过程中，主键列的类型不能改变。数据分区和分区键 表格...
Dataphin事实逻辑表来源配置中关联主键字段是灰色无法...
问题原因 是因为事实表主键字段数据类型与来源对象中对应字段的数据类型不一致。解决方案 修改事实表主键字段数据类型使其与来源对象中的字段类型保持一致，即可正常选择关联主键字段。适用于 Dataphin 基于独立部署V3.7环境验证
Dataphin是否有索引的概念
概述 Dataphin在创建三种逻辑表的时候，需要设置主键，并且常见的数据库能够设置索引，用户想了解Dataphin是否有索引的概念。详细信息 1.三种逻辑表的主键并非主键索引，只是为了确保数据的唯一性。2.Dataphin创建的物理表是存储在计算引擎...
创建 OceanBase Serverless 实例用户及授权
表分类 结构迁移 全量迁移 增量同步 DML 增量同步 DDL 全量校验 反向增量 有主键表、有非空唯一键表 只读 只读 只读 只读 只读 仅 DDL（仅同步 DDL）仅 DML（仅同步 DML）读写（同步 DDL+DML）无主键表、无非空唯一键表 只读 只读 需要_...
创建 OceanBase 集群实例用户及授权
表分类 结构迁移 全量迁移 增量同步 DML 增量同步 DDL 全量校验 反向增量 有主键表、有非空唯一键表 只读 只读 只读 只读 只读 仅 DDL（仅同步 DDL）仅 DML（仅同步 DML）读写（同步 DDL+DML）无主键表、无非空唯一键表 只读 只读 需要_...
数据迁移服务隐藏列机制说明
Oracle 数据库至 OceanBase 数据库 Oracle 租户的数据迁移 迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户时，数据传输不区分是否为无主键表，会统一添加隐藏列和唯一索引。添加隐藏列 ALTER TABLE"{schema}"."{table}"ADD"OMS_...
创建 OceanBase 集群实例用户及授权
表分类 结构迁移 全量迁移 增量同步 全量校验 反向增量 有主键表、有非空唯一键表 只读 只读 只读 只读 读写 无主键表、无非空唯一键表 只读 只读 需要_OCEANBASE_INNER_DRC_USER 用户 只读 需要_OCEANBASE_INNER_DRC_USER 用户 读写 目标...
概述
支持的迁移类型 简称说明 实例类型 简称 RDS 实例 RDS PolarDB MySQL 实例 PolarDB VPC 内自建数据库 VPC 数据库网关（Database Gateway）DG 公网 IP 自建数据库 公网 OceanBase 数据库 MySQL 租户 OB_MySQL OceanBase 数据库 Oracle 租户 ...
管理Databases
database=db.create_database("<yourDbname>")为待创建的数据库名称。本文以 milvus_demo 为例，您可以根据实际情况更改。使用Database 通常情况下，Milvus实例默认会自动创建一个名为“default”的预设数据库。除非在创建Collection时另有...
迁移评估
源实例无主键表校验 源RDS实例存在没有主键的表，同步数据后可能会导致目标数据库中出现重复数据。您可以通过在源RDS实例上通过高权限账号连接数据库，并执行如下SQL，查询没有主键的表：SELECT t1.table_schema,t1.table_name FROM ...
大版本升级常见问题
源实例无主键表校验 源PolarDB集群存在没有主键的表，同步数据后可能会导致目标数据库中出现重复数据。您可以通过在源PolarDB集群上通过高权限账号连接数据库，并执行如下SQL，查询没有主键的表：SELECT t1.table_schema,t1.table_name ...
升级评估
源实例无主键表校验 源PolarDB集群存在没有主键的表，同步数据后可能会导致目标数据库中出现重复数据。您可以通过在源PolarDB集群上通过高权限账号连接数据库，并执行如下SQL，查询没有主键的表：SELECT t1.table_schema,t1.table_name ...
数据集成服务
且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到Tablestore表中存储和使用。您还可以通过DataWorks数据集成服务实现...
Dataphin中全域数据表联合主键的质量规则设置方法
详细信息 全域数据表可以针对数据源中的数据表设置质量规则。创建质量规则，模板来源选择“自定义SQL”，模板规则选择“自定义统计指标校验”，规则类型选择“完整性”。然后指标口径的where里写联合主键字段同时不为空。适用于 Dataphin
terraform是否支持主键自增列？
目前通过terraform定义表主键时，暂不支持指定主键列自增。如果需要使用主键列自增功能，请通过表格存储控制台、命令行工具或者SDK在创建数据表时指定...重要 每张数据表最多只能设置一个主键列为自增列，主键中的分区键不能设置为自增列。
主键类型报错
[Message]:Validate PK type fail.Input:VT_STRING,Meta:VT_BLOB.[RequestId]:00055f43-3d31-012b-62c3-980a3eefe39e,[TraceId]:02822839-3b5b-af35-409a-cf68841239fa,[HttpStatus:]400 原因 建表时设置的主键类型为binary，写入数据时...
Kafka Partition同步策略说明
在配置同步到Kafka的数据同步作业时，为提升同步的性能，您可以调整Kafka Partition（分区）同步策略，例如根据Hash结果将数据同步至不同的Partition...缺点：只能保证单条记录的变更的先后顺序，无主键表以及多张表之间的先后顺序无法保证。
Dataphin中如何使用有联合主键的物理表创建维度逻辑表
概述 Dataphin中如何使用有联合...详细信息 当物理表中主键的形式为联合主键时，可以在写维度逻辑表的主键定义逻辑时，通过计算源支持的一些函数，比如concat（）函数，将两个字段合并为一个主键字段，实现逻辑表主键的定义。适用于 Dataphin
Kafka Partition迁移策略说明
在配置迁移到Kafka的数据迁移任务时，为提升迁移的性能，您可以调整Kafka Partition（分区）迁移策略，例如根据Hash结果将数据迁移至不同的Partition...缺点：只能保证单条记录的变更的先后顺序，无主键表以及多张表之间的先后顺序无法保证。
- 产品推荐
- 这些文档可能帮助您