索引选择
如需其他组合需创建新的索引表 可对索引字段做任意组合查询 查询性能 通过索引键可定位到对应的分片，性能佳 需要查询所有的分片 大范围扫描 支持，性能与表引擎一致 支持，但性能低于表引擎及二级索引 数据可见延迟 全局二级索引：毫秒级 ...
多元索引介绍
索引介绍 多元索引基于倒排索引和列式存储，可以解决大数据的多维数据查询和统计分析难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询和统计聚合（max、min、count、sum、avg、distinct...
8.0.1和8.0.2版功能对比
支持 支持 HTAP&复杂/分析查询 列存索引 面向OLAP场景大数据量复杂查询。通过列存索引，PolarDB for MySQL 版实现了一体化的实时事务处理和实时数据分析的能力，成为一站式HTAP数据库产品解决方案。通过一套数据库系统，即可满足业务的OLTP...
01新建模型目录
具有数据量大，查询计算较慢的特点。DWS：全称Data Warehouse Summary，汇总数据层，存储以事实表为基础，以维度为单位的统计度量。DIM：全称Dimension，公共维度层，是在存储层的基础上清洗脏数据、筛选有价值数据，并且对明细数据层的...
分区表常见问题
在这种场景下，您可以在一张分区表中同时使用两种分区：大租户单独使用LIST分区，或多个大租户组合使用一个LIST分区。分区个数取决于大租户的个数和数据量。其他中小租户使用HASH分区，HASH分区的分区个数确定方法同HASH分区表。使用分区表...
Quick BI v4.6版本说明
监控配置能力提升，支持同步和修改仪表板数据过滤条件，维度拆分支持全选维值，支持告警规则的复杂组合逻辑。告警体验优化提升，支持更灵活的告警时间，支持多条异常的合并告警，有效减少告警次数。指标监控中心全面升级，支持查看维度拆分...
SQL洞察和审计
说明 您可以查询数据存储时长范围内，任意24小时的数据。如果需要查询更大时间范围的SQL记录，可以使用日志服务接入洞察日志。详情请参见 采集RDS SQL审计日志。在线查询支持组合查询。例如在关键字搜索栏输入 test1 test2 可以查询包含...
SQL洞察和审计
说明 您可以查询数据存储时长范围内，任意24小时的数据。如果需要查询更大时间范围的SQL记录，可以使用日志服务接入洞察日志。详情请参见 采集RDS SQL审计日志。在线查询支持组合查询。例如在关键字搜索栏输入 test1 test2 可以查询包含...
公告
数据标准拆分标准集和标准模板，分别用于定义标准的管理属性（如查看权限、审批模板）和填写规范（即属性定义），简化操作链路。安全扫描适配分区字段不是ds或者无分区的情况，采用 全表扫描+Limit条数 的方式进行扫描。数据服务新增组合...
Hints
取值范围：true/false 默认值：false JDBC jdbc-scan-splits 含义：控制在查询JDBC类数据源时，拆分多少个split来获取数据 取值范围：1-500 默认值：1 jdbc-split-column 含义：查询JDBC类数据源时，选择哪一列作为切分列，注意，切分列的...
全文检索
全文检索（Full Text Search）指数据库将自然语言文本转换为可被查询数据的能力。云原生数据仓库AnalyticDB PostgreSQL版 使用PostgreSQL内核，提供完善的全文检索功能。本文介绍 AnalyticDB PostgreSQL版 如何实现“一站式全文检索”业务...
使用流程
操作流程概览如下：开通云原生数据湖分析服务 可选：创建虚拟集群：CU版适用于查询频率高、查询数据量较大的场景，同时也能够给您使用DLA的费用预算带来一定的确定性。推荐您使用CU版本来进行数据分析与计算。说明 如果您使用系统默认的...
RDS术语
数据库代理 RDS数据库代理是位于数据库服务端和应用服务端之间的网络代理服务，用于代理应用服务端访问数据库时的所有请求，具有高可用、高性能、可运维、简单易用等特点，同时提供自动读写分离、事务拆分、连接池等高级功能。更多信息，请...
查询执行模式
适用场景：适用于执行时间长、计算数据量大的查询。例如：清洗类查询（Extract-Transform-Load）。默认执行模式 版本 产品系列 默认执行模式 是否支持Batch模式 数仓版（3.0）预留模式集群版 Interactive 否 弹性模式集群版（新版）是 切换...
分区表简介
当大表用于存储历史数据，新数据均加入至某个最新的分区，该场景下建议使用分区表。例如，大表用于存储一年12个月的历史数据。当前月份的数据存在一个单独的分区中，该分区的数据是可更新的。而历史月份的数据则存在另一个只读的分区中。...
分区表简介
当大表用于存储历史数据，新数据均加入至某个最新的分区，该场景下建议使用分区表。例如，大表用于存储一年12个月的历史数据。当前月份的数据存在一个单独的分区中，该分区的数据是可更新的。而历史月份的数据则存在另一个只读的分区中。...
分区表简介
当大表用于存储历史数据，新数据均加入至某个最新的分区，该场景下建议使用分区表。例如，大表用于存储一年12个月的历史数据。当前月份的数据存在一个单独的分区中，该分区的数据是可更新的。而历史月份的数据则存在另一个只读的分区中。...
版本发布说明
缺陷修复 修复INFORMATION_SCHEMA中部分视图带IN查询条件导致无法正常查询数据的问题。修复BKA Join在特殊字符场景导致的物理sql语法问题。修复子查询大于等于三个关联项时，关联匹配错乱的问题。修复BKA Join场景下路由计算不正确的问题。...
开发限制
PolarDB-X 高度兼容MySQL协议和语法，但由于分布式数据库和单机数据库存在较大的架构差异，存在SQL使用限制。本文将介绍数据库开发过程中的使用限制。常见标识符限制 类型 最大字符长度 取值范围 Database 32 大小写字母、数字和下划线（_...
PolarDB处理TPC-H查询的挑战和机遇
本文深入分析了TPC-H查询中，可能存在的性能优化点和对应的优化思路，以及MySQL的现状和 PolarDB 做的一些改进工作。背景信息 TPC-H是世界上最为流行的OLAP workload的benchmark程序，只要是和查询处理过程相关的任务，大多会使用TPC-H作为...
RDS术语
A AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
RDS术语
数据库代理 RDS数据库代理是位于数据库服务端和应用服务端之间的网络代理服务，用于代理应用服务端访问数据库时的所有请求，具有高可用、高性能、可运维、简单易用等特点，同时提供自动读写分离、事务拆分、连接池等高级功能。更多信息，请...
深度解析PolarDB数据库并行查询技术
如何将查询并行起来 对于一个类OLAP的查询，它通常是对大批量数据的查询，数据量大意味着数据远大于数据库的内存容量，大部分数据可能无法缓存到数据库的缓冲区中，而必须在查询执行时才动态加载到缓冲区中，这样就会造成大量IO操作，而IO...
RDS术语
数据库代理 RDS数据库代理是位于数据库服务端和应用服务端之间的网络代理服务，用于代理应用服务端访问数据库时的所有请求，具有高可用、高性能、可运维、简单易用等特点，同时提供自动读写分离、事务拆分、连接池等高级功能。更多信息，请...
RDS术语
数据库代理 RDS数据库代理是位于数据库服务端和应用服务端之间的网络代理服务，用于代理应用服务端访问数据库时的所有请求，具有高可用、高性能、可运维、简单易用等特点，同时提供自动读写分离、事务拆分、连接池等高级功能。更多信息，请...
SQL使用限制
数据库管理 SHOW WARNINGS语法不支持LIMIT和COUNT的组合。SHOW ERRORS语法不支持LIMIT和COUNT的组合。运算符 暂不支持‘:=’赋值运算符。更多关于运算符的信息，请参见 运算符。函数 暂不支持 全文检索函数。暂不支持 XML 函数。不支持 ...
文档更新动态（2024年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 数据引入-离线集成-离线单条管道-...
2021年
使用DBLink跨库查询数据 Rownum 对Rownum进行了优化，兼容rownum和varchar2/text比较时，按照数值类型比较的行为。无 polar_resource_group插件 polar_resource_group插件新增 total_mem_limit_remain_size、idle_mem_limit_rate、enable_...
Presto FAQ
大查询功能并不能让您查询任意大小的数据量和任意复杂的SQL，如果big_query还解决了不了您的问题请联系DLA答疑同学。Schema的Catalog类型必须是Hive，否则会出现如下报错：big_query only support hive catalog.如何调整查询RDS类数据源...
数据集拆分
功能说明 数据集拆分组件可以根据拆分比例对输入数据集做拆分处理，输出两个变量名称相同但数据量不同的数据集。可使用数据集拆分组件将数据集拆分为两份以适用于不同的场景。支持随机拆分和前后拆分两种方式。计算逻辑原理 随机拆分：按照...
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
Cost-based SQL诊断引擎
和其它公司一样，在阿里巴巴业务场景下，大部分业务跟数据库有着非常紧密的关系，数据库一个微小的抖动都有可能对业务造成非常大的影响，如何让数据库更稳定，得到持续优化一直都是非常重要的诉求。数据库环境下的业务优化，通常涉及三个...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
功能更新动态（2024年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 新建Amazon S3数据源 离线集成 新增集成任务...
计费概述
适用于查询频率高、查询数据量较大的场景，同时也能够给您使用DLA的费用预算带来一定的确定性。说明 若您的业务量波动较大且频繁，每个月甚至每周都可能要变更集群配置，推荐您购买按量付费集群并搭配资源包使用。按计算资源付费（CU版计费...
DLA Lakehouse实时入湖
DLA Lakehouse实时入湖方案...单击 操作 列的 查询数据，在 Serverless Presto>SQL执行 页面，查看从RDS数据源同步过来的全量表数据。如果您在数据源RDS中变更了原始数据，在 Serverless Presto>SQL执行 页面进行查询时，数据会同步进行更新。
核心概念
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目，所以...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
如何分析数据分布不均衡
分区级数据倾斜 对于 PolarDB-X 的分区表来说，支持更灵活的数据拆分方式，即LIST、HASH或RANGE分区，以及灵活的分区分裂、合并、迁移。对于分区表来说，同样支持通过 show table info from$TABLE 命令查询每个分表的物理大小。除此之外，...
- 产品推荐
- 这些文档可能帮助您