PolarDB HTAP实时数据分析技术解密
在目前的迭代阶段，优化器按如下的流程执行：执行SQL的Parse过程，并生成LogicalPlan，然后再调用MySQL原生优化器。同时该阶段获得的逻辑执行计划转给IMCI的执行计划编译模块后，会尝试生成一个列存的执行计划（此处可能会被白名单拦截并...
功能特性
湖仓版（3.0）产品定价 存储空间 集群使用过程中，存储数据会占用一定的空间，包括热数据存储空间和冷数据存储空间，并按照实际使用的空间按量计费，您无需预分配存储空间大小。湖仓版（3.0）产品定价 数仓版 基础资源 数仓版集群的基础...
查询改写与下推
背景信息 根据 PolarDB-X SQL语句优化的基本原则，可以下推更多的计算到存储层MySQL上执行。可下推计算主要包括：JOIN连接。过滤条件（如 WHERE 或 HAVING）。计算（如 COUNT、GROUP BY）。排序（如 ORDER BY）。去重（如 DISTINCT）。函数...
DQL操作常见问题
子查询 在执行MaxCompute SQL过程中，使用NOT IN后面接子查询，子查询返回的结果是上万级别的数据量，但当IN和NOT IN后面的子查询返回的是分区时，返回的数量上限为1000。在必须使用NOT IN的情况下，该如何实现此查询？交集、并集和补集 ...
查询计划概述
Lindorm支持查看SQL语句在数据库中的执行过程，帮助您定位和排查SQL执行问题。您可以通过 EXPLAIN 语句查看不同深度的执行计划，进一步分析优化查询逻辑，以提升查询性能。适用引擎 适用于宽表引擎和时序引擎。背景信息 查询计划（Query ...
列存索引配置参数说明
存储过程的可用内存大小。取值范围：0~18446744073709551615。默认值为8388608。单位为Byte。loose_etl_from_imci 是否从只读列存节点读取数据。取值如下：OFF（默认）：不从只读列存节点读取数据。ON：从只读列存节点读取数据。loose_etl_...
存储过程
示例二 本示例将分别在存储过程和函数中执行一个循环任务并回收表的存储空间，以体现存储过程和函数在提交事物方面的区别。存储过程提供了事务提交能力，您可以在存储过程执行过程中对事务进行提交。以下示例，存储过程可以实现在循环任务...
版本发布说明
优化存储过程的创建和删除流程，避免出现元数据残留问题。降低REPLACE/UPSERT语句在包含GSI或UGSI的表上执行时的CPU消耗。缺陷修复 修复包含clustered index的表在创建local索引时，部分旧的执行计划没有清理的问题。修复在DRDS模式数据库...
概述
本文介绍如何选择和优化阿里云存储服务，帮助您在满足数据存储需求的同时节省成本。企业和组织一般将数据存储视为辅助服务，在数据上云后不会优化存储，也不会清理未使用的存储，从而使这些服务以巨额成本长期运行。根据 RightScale的博客...
功能发布记录
专注于向量执行引擎（Hologres Query Engine，HQE）和优化器（Query Optimizer，QO）的持续演进，其中：向量执行引擎HQE能力优化，在如下场景中性能得到提升：Runtime Filter能力增强，支持Shuffle Join场景，Runtime Filter场景的查询效率...
2023年
DDL逻辑复制 2023年4月 支持pldebugger插件，可用于调试存储过程。使用pldebugger插件 2023年4月 支持polar_sql_mapping插件，当应用程序出现错误SQL，无法立即修改时，可以通过SQL映射功能，将错误的SQL映射为正确的SQL。polar_sql_...
列存索引技术架构介绍
在目前的迭代阶段，优化器按如下的流程执行：执行SQL的Parse过程并生成LogicalPlan，然后调用MySQL原生优化器，并执行优化操作（join order等）。同时该阶段获得的逻辑执行计划会转给IMCI的执行计划编译模块，并尝试生成一个列存的执行计划...
2021年
ALL_TAB_COLUMNS、ALL_OBJECTS 优化 支持DBMS_SQL.TO_CURSOR_NUMBER/DBMS_SQL.TO_REFCURSOR 支持DBMS_SQL.TO_CURSOR存储过程。例如，-从本地动态SQL转换为DBMS_SQL curid:=dbms_sql.to_cursor_number(cursrc);无 时空数据库（V4.3）类别 ...
概述
PolarDB MySQL版 内置了一系列存储过程，您可以使用这些存储过程获取SQL语句中未被索引覆盖的列名，同时可以获取创建列存索引的DDL语句。本文介绍了 PolarDB MySQL版 内置的存储过程以及如何使用存储过程辅助创建列存索引。简介 PolarDB ...
企业版和标准版功能对比
PolarDB MySQL版 企业版和标准版在功能上有很多差异，可分为集群管理、弹性管理、高性能、备份与恢复、高可用性、高安全、连接管理、高性价比、监控与优化、DB for AI、数据迁移&同步等11个类别。本文为您介绍这两个版本的功能区别，帮助您...
RDS SQL Server空间不足问题
SQL Server中提供了一个专用的存储过程 sp_estimate_data_compression_savings 可以帮助您快速评估在指定的表或索引上开启压缩可以节省多少数据存储空间。说明 修改表或索引上的压缩选项设置是DDL操作，大表执行此类操作会造成长时间锁表，...
慢SQL
PolarDB MySQL版 提供慢SQL分析功能，能够查看慢日志趋势和统计信息，并且提供SQL建议和诊断分析。操作步骤 登录 PolarDB控制台。在左侧导航栏单击 集群列表。在左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，选择...
dbms_sql.reload_trace
您可以使用存储过程 dbms_sql.reload_trace 将 mysql.sql_sharing 表中的模板化SQL语句载入到 information_schema.sql_sharing 表中。语法 dbms_sql.reload_trace()示例 将 mysql.sql_sharing 表中的模板化SQL语句载入到 information_...
SQL窗口介绍
可编程对象 可创建、查看、执行、管理 视图、存储过程、函数、触发器、事件 等可编程对象。说明 最多只显示1000条。键值（key-value）对信息 说明 NoSQL数据库将会显示键值对信息。备份数据 RDS MySQL实例支持历史备份数据查询功能，可以在...
通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark
使用场景 大数据性能评估 当您希望评估使用OSS-HDFS服务作为Hadoop数据存储时的大数据处理性能，特别是对于大规模数据分析和查询优化工作负载，TPC-DS可以作为标准的决策支持系统基准测试工具。数据湖架构验证 如果您正在构建或已经拥有...
配置SQL审核优化建议
DMS的安全规则中新接入了SQL审核优化建议，在SQLConsole或数据变更中，对提交的SQL语句进行规范审核并提出相关优化建议。可协助您在提交变更操作前审核、解决问题SQL，规避潜在问题SQL在变更到数据库后产生异常。前提条件 您的系统角色为 ...
计算层变量
MERGE_UNION 否 FALSE[TRUE|FALSE]默认关闭，打开意味着物理SQL不做union优化，且将串行执行下推的物理SQL。MERGE_UNION_SIZE 否-1[0-10000]通过union合并物理SQL的数量，默认结合连接池可用连接数自适应推导。TABLE_META_CACHE_EXPIRE_...
2023年
无 优化器 Planner优化器优化了NestLoop Join Cost和优化Index相关SQL计划，以获得更好的执行性能。优化分区表内存使用和管理，避免大分区场景下内存使用率高的问题。ORCA优化器支持多动态分区裁剪。ORCA优化器提升了对分区表生成计划的...
V5.4.x系列实例版本说明
优化字符存储方式，提升系统处理字符类型时处理效率。优化只读事务和单分片写事务的性能。V5.4.8-16069335 日期2020-12-03 类别 说明 新增特性 支持窗口函数，详情请参见 窗口函数。支持分布式死锁的检测。支持 ROW_COUNT()和 FOUND_ROWS()...
时序引擎版本说明
Lindorm ML：时序异常检测和时序预测，优化用户输入参数的检查逻辑，优化后遇到未知参数将报错。时序预测，修复输入非单位频率（如freq=30s）的数据时，推理结果为空的问题。时序异常检测，修复训练时可能由于并发保存模型文件导致训练失败...
EMR-3.22.x版本说明
本文介绍EMR-3.22.x发行版本的发布日期、组件升级、新功能和更新内容等信息。发布日期 EMR-3.22.0 2019年7月28日 新功能 服务 变更点 Kudu 新增组件，Kudu填补Hadoop生态圈的功能空白，可提供类似HBase快速数据插入以及随机存取的功能，...
慢日志分析
在 慢日志明细 区域，单击目标SQL 操作 列的 优化 和 限流，也可对目标SQL进行 SQL诊断优化 和 SQL限流。查看全局慢日志 若您有多个数据库实例，您可以在 全局慢日志趋势 页面，查看所选数据库引擎整体的慢日志趋势以及TOP10实例的慢日志...
搜索（审计）
数据库自治服务DAS 提供搜索（审计）功能，查询并导出SQL语句对应的各种信息，本文介绍如何在SQL洞察和审计中使用搜索功能。重要 如果您开通了DAS企业版 V3，搜索功能将更名为审计功能。前提条件 已在DAS中接入对应的数据库实例，并且接入...
产品架构
BE BE负责SQL计算和数据存储的任务，采用本地存储和多副本机制以提高系统的可用性。数据存储：BE节点在存储方面完全均等，没有主次之分。数据由前端节点（FE）根据特定政策分配到各个BE节点，其中BE节点负责将接收的数据转换成可存储的格式...
新功能发布记录
08-11 创建PostgreSQL Serverless实例 优化 备份恢复 RDS PostgreSQL备份恢复页面列表页签名称变更，原归档列表页签名称变更为 日志备份，不影响原有功能使用，旨在更加精简和优化备份管理页面，提升用户体验。08-09 备份与恢复 优化 迁移...
调优集群性能
如下图所示，某个大表分布不均，存储节点0上的Shard_0和Shard_1中数据量较大，而在存储节点1上的Shard_2和Shard_3中数据量较小，那么当您查询这个大表时，较大概率会出现存储节点0需要处理的数据多，存储节点1上需要处理的数据少的情况，...
PL 编译和调试
PL 调试 在 SQL 开发窗口的左侧导航栏>存储过程列表中，选择调试存储过程 PROC_VARCHAR2，进入调试模式。设置参数值后，单击 确定。重要 OceanBase V4.0.0 及之后的版本，调试前需要获取调试权限。示例：GRANT DEBUG CONNECT SESSION TO ...
功能特性
服务器端加密 客户端加密 OSS客户端加密是在数据上传至OSS之前，由用户在本地对数据进行加密处理，确保只有密钥持有者才能解密数据，增强数据在传输和存储过程中的安全性。客户端加密 合规保留策略 OSS保留策略具有WORM（Write Once Read ...
常见问题
该用法可以用于解决少数 PolarDB 代理由于保证正确性，要求特殊语法被路由到从库的场景（比如存储过程的调用，multistatement的使用等语句默认是会被路由到从库）。说明 若您需要通过MySQL官方命令行执行上述Hint语句，请在命令行中加上-c ...
数据库备份到OSS
背景 对象存储OSS 对象存储OSS 提供了标准类型存储，作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也提供了成本更低、存储期限更长的低频访问类型存储和归档类型存储，作为不经常访问数据的备份和归档。对象存储OSS非常...
产品概述
什么是PolarDB PolarDB 是阿里巴巴自研的新一代云原生数据库，在计算存储分离架构下，利用了软硬件结合的优势，为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL和PostgreSQL生态，高度兼容Oracle语法。...
版本发布记录
2024年01月 功能名称 描述 相关文档 社区兼容版22.8 优化 从MaxCompute外表导入数据时，增加支持独享Tunnel和在网络传输过程中进行数据压缩功能。默认打开text_log日志，记录日志等级为Warning、Error和Fatal的日志，可通过system.text_log...
创建SQL Server只读实例
因此，在创建只读实例前，建议对主实例的数据量和IO性能进行评估和优化，以减少创建时间。存储空间：只读实例存储空间不能低于主实例。只读实例存储空间范围详情，请参见 RDS SQL Server只读实例规格列表。费用说明 创建只读实例会产生费用...
创建SQL Server只读实例
因此，在创建只读实例前，建议对主实例的数据量和IO性能进行评估和优化，以减少创建时间。存储空间：只读实例存储空间不能低于主实例。只读实例存储空间范围详情，请参见 RDS SQL Server只读实例规格列表。费用说明 创建只读实例会产生费用...
功能与优势
SQL引擎在兼容开源Flink语法的同时增加了一系列优化，包括但不限于算子的状态结构优化、计算层延迟物化、Codegen增强，以及针对Join场景如维表Cache增强、数据倾斜，流Join Minibatch优化、精细化的状态设置等，实现CPU、内存利用率的提升...
- 产品推荐
- 这些文档可能帮助您