INSERT ON CONFLICT(UPSERT)
但在实际应用中，如果数据源有主键重复数据需要去重，建议使用keep last，命令如下：保留重复数据的最后一条数据 set hg_experimental_affect_row_multiple_times_keep_last=on;使用示例 INSERT ON CONFLICT 语句的示例用法：准备表和数据...
概述
随着云原生技术的不断普及，以Snowflake为代表的新一代云原生数仓以及数据库HTAP架构不断创新，可见在未来一段时间后行列混存HTAP将会成为一个数据库的标配能力，需要在当前数据库列存设计中面向未来的低成本、易用性、高性能上有更多的...
DescribeDBClusterSpaceSummary-查看集群的空间概览
说明 计算公式为：热数据总量=表记录数据量+普通索引数据量+主键索引数据量+其他 4194304 DataSize long 表记录数据量，单位：Byte。1048576 IndexSize long 普通索引数据量，单位：Byte。1048576 PrimaryKeyIndexSize long 主键索引数据量...
DescribeDBClusterSpaceSummary-查看集群的空间概览
说明 计算公式为：热数据总量=表记录数据量+普通索引数据量+主键索引数据量+其他。4194304 DataSize long 表记录数据量，单位：Byte。1048576 IndexSize long 普通索引数据量，单位：Byte。1048576 PrimaryKeyIndexSize long 主键索引数据...
性能测试
写入耗时的测试结果如下：数据库 写入耗时 云原生多模数据库 Lindorm Ganos引擎 7分钟 开源GeoMesa（HBase）13分钟 云数据库MongoDB分片集群 34分钟 创建时空索引后的时空数据存储空间占用情况 创建时空主键索引场景中，Lindorm Ganos引擎...
如何解决全量迁移慢或迁移卡住
排查主键和索引情况：检查源库大表是否都有主键或唯一索引。以MySQL数据库为例，您可输入命令 show create table<数据库名>.<表名>;查询源库大表是否都有主键或唯一索引。说明 普通索引或无索引可能会出现多数据现象。排查目标库：排查账号...
索引结构
索引设置有且仅有一个主键索引；多值分割符除默认分割符外，只支持单字符，且不支持全角字符；在设置数据分片时需要注意，假设集群的副本个数为2，数据分片设置为2，那么在购买实例时 数据节点数量需要大于副本个数*数据分片，新加的索引表...
索引使用率
主键 索引是否是主键。禁用 索引是否被禁用。列 索引包含的列。填充因子 索引的填充因子。创建时间 索引的创建时间。统计信息更新时间 索引对应的统计信息最后更新时间。导出脚本 导出索引的创建语句。导出文件 将索引使用率导出为excel、...
概述
回收站支持的对象 在当前版本中，支持进入回收站的对象有索引、表和数据库，各模式回收站对象的支持情况如下：MySQL 模式的租户支持管理的回收站对象包括数据库、表及索引。Oracle 模式的租户支持管理的回收站对象包括表和索引。说明 直接...
索引结构
数据节点-在线表配置」编辑索引加载方式，以此降低对性能的影响 说明 字段类型与数据库表字段类型的对应关系 索引表配置 分析器说明 倒排索引 正排索引 摘要 索引设置：索引字段设置压缩：索引字段可以选择是否压缩，默认为不压缩，选择...
DescribeTableStatistics-查询表统计信息
计算公式 1：总数据量=热数据量+冷数据量，计算公式 2：总数据量=表记录数据量+普通索引数据量+主键索引数据量+其他。1577 HotDataSize long 热数据量，单位：Byte。1048576 OtherSize long 其他，单位：Byte。1048576 示例 正常返回示例 ...
全局二级索引
局部索引：分布式数据库中，如果数据行和对应的索引行保存在相同分片上，称这种索引为局部索引。PolarDB-X 1.0 中特指物理表上的MySQL二级索引 两者的关系：两者需要搭配使用，PolarDB-X 1.0 通过GSI将查询下发到单个分片后，该分片上的...
基于TairSearch加速多列索引联合查询
但在关系型数据库中，不仅可以存在主键索引，还可以设置多个二级索引以及多种联合索引等，用于提高查询效率。然而Redis在如下场景中存在明显局限性：二级索引查询：Redis不支持以Hash结构中的field内容进行查询，因此只能在Redis中创建2层...
增加或删除已运行任务的同步表
同步数据至Kafka解决方案为您提供了一键增加及删除同步表功能，方便您为已成功配置运行的同步任务快速添加新表或删除已有同步表。本文为您介绍如何增加或删除已运行任务的同步表。前提条件 已创建并运行同步数据至Kafka解决方案的任务，...
通过DMS导入SQL文件失败
通过DMS将SQL文件导入云虚拟主机MySQL数据库时，提示 Duplicate entry '1' for key 'PRIMARY'。本文介绍这种情况的可能原因和解决方案。问题现象 通过DMS将SQL文件导入云虚拟主机MySQL数据库时，提示 Duplicate entry '1' for key 'PRIMARY...
UPDATE
技术原理 在Hologres中，每一张表都会有一个数据文件、主键索引文件以及标记文件，主键索引文件详情请参见 主键Primary Key。标记文件主要用在DELETE、UPDATE、INSERT ON CONFLICT等有数据删除、更新的场景中。以如下SQL为例来介绍Hologres...
搜索索引介绍
索引是加速数据库查询的重要方法。云原生多模数据库 Lindorm 宽表引擎除了支持高性能原生二级索引，也支持一种新的索引类型，称为搜索索引（SearchIndex），搜索索引主要面向复杂的多维查询场景，能够覆盖分词、模糊查询、聚合分析、排序...
时空服务介绍
时空主键索引 时空主键索引可以加快时空数据查询的速度，查询条件中支持空间范围或者包含空间范围和时间范围。空间范围查询：CREATE TABLE gtest(id INT,g GEOMETRY(POINT),name VARCHAR,PRIMARY KEY(Z-ORDER(g),id));空间范围和时间范围...
创建 RDS 实例用户及授权
在右侧 已授权数据库 列表中，为单个数据库授予 读写（DDL+DML）、只读、仅 DDL 或 仅 DML 权限。您也可以单击列表右上方 全部设 右侧的按钮，为多个数据库批量设置相同的权限。新密码 至少包含大写字母、小写字母、数字和特殊字符（包括!...
数据传输服务DTS
任务创建 在 Source（源）配置向导，选择 数据提供方 为 数据库 DTS，设置以下参数，然后单击 下一步。参数 说明 示例 数据订阅任务 选择您在 数据传输服务DTS控制台 上创建的数据订阅任务ID。dts8jqe*接入方式 默认为创建的数据订阅任务的...
创建 OceanBase Serverless 实例用户及授权
表分类 结构迁移 全量迁移 增量同步 DML 增量同步 DDL 全量校验 反向增量 有主键表、有非空唯一键表 只读 只读 只读 只读 只读 仅 DDL（仅同步 DDL）仅 DML（仅同步 DML）读写（同步 DDL+DML）无主键表、无非空唯一键表 只读 只读 需要_...
Dataphin是否有索引的概念
概述 Dataphin在创建三种逻辑表的时候，需要设置主键，并且常见的数据库能够设置索引，用户想了解Dataphin是否有索引的概念。详细信息 1.三种逻辑表的主键并非主键索引，只是为了确保数据的唯一性。2.Dataphin创建的物理表是存储在计算引擎...
Cost-based SQL诊断引擎
本文介绍数据库自治服务DAS（Database Autonomy Service）的Cost-based SQL诊断引擎。背景信息 在业务系统中，数据库扮演着举足轻重的角色。和其它公司一样，在阿里巴巴业务场景下，大部分业务跟数据库有着非常紧密的关系，数据库一个微小...
HBase SQL（Phoenix）FAQ
创建同步索引表，同步索引数据的速度怎么样？一般情况下1000W数据创建索引需要5~20min,具体情况视集群配置和资源使用情况而定。创建索引由于时间太长，客户端断开了链接怎么办？一般情况下当前索引表的状态是building状态的（可以在sqlline...
创建 OceanBase 集群实例用户及授权
表分类 结构迁移 全量迁移 增量同步 DML 增量同步 DDL 全量校验 反向增量 有主键表、有非空唯一键表 只读 只读 只读 只读 只读 仅 DDL（仅同步 DDL）仅 DML（仅同步 DML）读写（同步 DDL+DML）无主键表、无非空唯一键表 只读 只读 需要_...
不支持同步无主键的表
问题描述 DTS同步任务是整库同步，在源库创建的无主键表没有同步到目标库中时，报错信息一般是表不存在。问题原因 DTS不支持无主键表同步到AnalyticDB MySQL中。解决方案 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必...
DTS触发器
通过函数可以对DTS数据订阅获取的数据库实时增量数据进行自定义处理。本文介绍如何在函数计算控制台创建DTS触发器、配置入口参数以及编写代码并测试代码。功能简介 您在函数计算的控制台提交触发器创建请求之后，函数计算会根据触发器的...
DTS触发器
通过函数可以对DTS数据订阅获取的数据库实时增量数据进行自定义处理。本文介绍如何在函数计算控制台创建DTS触发器、配置入口参数以及编写代码并测试代码。功能简介 您在函数计算的控制台提交触发器创建请求之后，函数计算会根据触发器的...
二级索引限制
通过本文您可以了解二级索引的使用限制。索引表限制 资源 限制值 说明 表名长度 1~255 Bytes...数据生命周期（TTL）支持 需要禁止数据表更新，保证索引表的TTL和数据表TTL一致。Stream功能 不支持 无。反查数据表 不支持 需要手动反查数据表。
配置并管理实时同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。实时同步支持的数据源及其配置详情请参见 实时同步支持的数据源。说明 数据源...
一键实时同步至Kafka
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
时空查询的性能调优
同时，使用Sharding可以在写入数据时将空间或时空相邻的数据写入到索引表的不同位置，进而写入到数据库物理存储的不同分片中。您可以通过 Z-ORDER 索引函数，为数据类型为点（Point）的列创建时空索引，并指定索引分片（Shard）的数量 ...
升级数据库版本
其他引擎升级数据库版本请参见：PostgreSQL升级数据库大版本 SQL Server基础系列升级为高可用系列 SQL Server 2008 R2升级为2012/2016 SQL Server 2012升级为2016 方式一：通过控制台直接升级数据库版本 功能介绍 支持在控制台进行如下形式...
数据流管理
基本概念 数据流及后备索引 数据流 由一个或多个自动生成的后备索引组成，每个数据流都需要一个匹配的索引模板，该模板包含用于配置数据流的后备索引的映射和设置。相同的索引模板可用于多个数据流，但不能删除数据流正在使用的索引模板。...
如何选择二级索引和多元索引
本地二级索引 同步方式 异步方式 同步方式 第一列主键要求 可选数据表中的任意主键列或者预定义列 必须和数据表的第一列主键相同 同步延迟 毫秒级别 实时 读取一致性 最终一致性 强一致性 多元索引 多元索引相比数据表主键查询和二级索引，...
空间分析
您可以通过DAS的空间分析功能直观地查看某个数据库实例的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间碎片、空间异常诊断等，本文以 RDS MySQL 数据库为例介绍如何使用空间分析功能。注意事项 空间分析功能最...
分区设计
用户存有海量数据的表应该按照数据规模进行拆解，表的数据将拆解成多个数据分区独立存储，通常的设计原则是：主键（Primary Key）单实例数据库不要求表一定要有主键，但是对于分布式数据库，主键则是必须的，以保证一行数据是全局唯一的，...
hypopg
说明 id列上的简单B-树索引有助于此查询。函数 hypopg_create_index()将接受任何标准的 CREATE INDEX 语句（传递给该函数的任何其它语句将被忽略），并为每条语句创建一个虚拟索引。标识符是动态生成的，本示例中为13925。运行 EXPLAIN ...
hypopg
说明 id列上的简单B-树索引有助于此查询。函数 hypopg_create_index()将接受任何标准的 CREATE INDEX 语句（传递给该函数的任何其它语句将被忽略），并为每条语句创建一个虚拟索引。标识符是动态生成的，本示例中为13925。运行 EXPLAIN ...
hypopg
说明 id列上的简单B-树索引有助于此查询。函数 hypopg_create_index()将接受任何标准的 CREATE INDEX 语句（传递给该函数的任何其它语句将被忽略），并为每条语句创建一个虚拟索引。标识符是动态生成的，本示例中为13925。运行 EXPLAIN ...
- 产品推荐
- 这些文档可能帮助您