分区表管理（auto_partition）
AnalyticDB PostgreSQL版 支持将大表定义为分区表，并支持通过auto_partition插件对分区表进行自动删除或新增，当您进行条件查询时，系统只会扫描满足条件的分区，避免全表扫描，从而提升查询性能。新增分区的粒度包括小时，天，星期，月，...
技术面临的挑战与革新
在过去网络IO还是一大瓶颈的年代，分布式系统设计以及优化的一大原则就是尽量使得计算存储本地化，避免昂贵的网络开销。然而share nothing架构对于跨分片的数据访问不是很友好，比如事务，比如全局索引，实现起来十分复杂，效率也要打上...
PolarDB MySQL版DDL操作指南
是否支持并行DDL（多线程加速）：对于在大表上创建索引、重建表等场景，PolarDB 支持通过并行DDL，使用多线程提升DDL的执行效率，最高可提升15~20倍的性能。详细内容请查看 并行DDL 的说明文档。DDL执行算法 PolarDB MySQL版 支持以下三种...
为什么设置表生命周期TTL后，表大小变大了？
表格存储的每行数据都占用一定的存储空间。...如果开启多版本或者设置数据表生命周期，则每个版本的数据需要包括版本号（占用8字节）、列名和数据值，因此表大小会变大。关于数据版本和生命周期的更多信息，请参见 数据版本和生命周期。
查看物理表信息
数据查询提供不同数据资源的物理表基础信息，包括物理表基本信息、表结构和物理表DDL语句。本文介绍如何查看物理表信息。前提条件 已新建云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角，...
查看物理表信息
数据查询提供不同数据资源的物理表基础信息，包括物理表基本信息、表结构和物理表DDL语句。本文介绍如何查看物理表信息。前提条件 已新建云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录企业数据智能平台。在页面左上角，单击...
查看内置规则模板
数据质量为您提供内置表级别、字段级别的监控模板。本文为您介绍数据质量的校检逻辑及内置模板规则。计算说明 计算波动率：您可以根据波动率计算公式（波动率=（样本-基准值）/基准值）计算结果。样本 当天采集的具体的样本的值。例如对于...
清理表空间（pg_repack）
RDS PostgreSQL支持通过插件pg_repack在线清理表空间，有效解决因对全表大量更新等操作引起的表膨胀问题。pg_repack无需获取排它锁，相比CLUSTER或VACUUM FULL更加轻量化。前提条件 请确保实例大版本满足要求，本插件具体支持的实例大版本...
数据总览
操作步骤 进入数据地图页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据治理>数据地图，在右侧页面中单击 进入数据地图。...热门表 根据数据地图表详情页访问PV，为您展示表访问量的排行榜。为实时统计的数据。
普通表快速转换为RANGE分区表
PolarDB 支持在不做数据重分布的情况下，可以使用该语法快速的将普通表转为RANGE分区表。本文将介绍 PolarDB 普通表快速转RANGE分区表的操作步骤。背景信息 PolarDB 普通表快速转RANGE分区表时，普通表的数据不经校验直接作为分区表的第一...
查看监控任务
数据质量的任务查询模块展示规则的校验结果。规则运行后，您可以在任务查询页面...数据分布 单击相应表名后的 数据分布，查看该规则每次运行的情况，以及表行数、表大小等信息。查看血缘 点击此处将快速跳转至 数据地图，查看该表的血缘信息。
实时存储引擎
实时存储引擎会有以下瓶颈：在一些大宽表场景下，单行的更新带来了严重的写放大问题。实时存储引擎内存高频换入换出，Cache Miss高的同时，大量的压缩、解压缩带来CPU瓶颈。针对以上两类问题，AnalyticDB MySQL版 设计了新一代的实时存储...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
CLONE TABLE
当您需要将一张表中的数据复制到另一个表中时，可以使用MaxCompute的 clone table 功能，可以提高数据迁移效率。本文为您介绍 clone table 的功能、使用限制、命令格式及使用示例。功能介绍 支持高效地将源表中的数据复制到目标表中。将...
通过SDK使用二级索引
二级索引相当于把数据表的主键查询能力扩展到了不同的列，当需要使用属性查询数据时，您可以通过创建二级索引加快数据查询的效率。设置预定义列后，在创建二级索引时将预定义列作为索引表的索引列或者属性列。创建二级索引后，您可以使用二...
数据操作篇
拆分属性列访问热度差异大的表 如果行的属性列较多，但是每次操作只访问一部分属性列，可以考虑将表拆分成多个表，将不同访问频率的属性列放到不同的表中。例如，在商品管理系统中，每行存放商品数量、商品价格和商品简介。商品数量和商品...
多主集群（库表）商业化
简介 随着 PolarDB MySQL版 客户的不断增加，大规模头部客户不断涌入，部分头部客户业务体量规模庞大，使得目前 PolarDB MySQL版 的单写（一写多读）架构在特定场景下，写性能出现瓶颈。PolarDB MySQL版 全新推出多主集群（库表），实现从...
概述
应用场景 并行查询适用于大部分SELECT语句，例如大表查询、多表连接查询、计算量较大的查询。对于非常短的查询，效果并不显著。同时由于并行方式的多样化，可以适用于多种广泛而灵活的应用场景：海量数据分析场景 在中等及更大规模数据量的...
Explain和Explain Analyze
rows：算子的预估输出行数，如果rows的值与实际行数相差较大，大部分原因是表的统计信息未更新，建议对表执行一次 analyze命令。width：算子的预估输出平均宽度（单位：字节），值越大说明列越宽。[20:20 id=100002 dop=20 time=2427/2424/...
集群版-单副本
架构简介 针对纯缓存类业务、QPS压力较大的业务场景，云数据库Redis推出单副本集群版实例，轻松突破Redis自身单线程瓶颈，满足Redis大容量或高性能的业务需求。相比于双副本集群版，提供了更高的性价比。经典 版集群架构实例默认采用代理...
云原生多模数据库Lindorm助力蚂蚁链IoT数据降本
业务挑战 业务增速快，数据总量不断增大，MySQL出现性能瓶颈 日增数据量大，一年数据增量超6TB，存储成本压力大 数据冷热区分明显，和数据生成时间强相关 数据需要实时归档到离线进行分析 解决方案 阿里云Lindorm历经阿里众多核心服务的大...
AUTO OPTIMIZE语句
当您的Iceberg表的读性能瓶颈是因为存在大量小文件时，建议启动该优化任务以提高Iceberg的读性能。功能特性 功能 详情 优化单个表 对指定的表进行优化。优化单个数据库 对指定的数据库下的所有表进行优化。优化流程 当执行AUTO OPTIMIZE...
客户案例
视频介绍 社交媒体行业：欢聚时代大规模数据湖建设 客户简介 欢聚时代成立于2005年，是全球领先的社交媒体企业，旗下运营多款社交娱乐产品，包括即时通讯、电商业务等。目前基于Hadoop+HDFS开源架构进行离线（HDFS+Spark）、实时计算...
上海新能源汽车车辆基础数据
客户感言 2019年开始上海市新能源汽车大数据平台从自建Hadoop集群迁移至阿里云Lindorm+DLA Spark产品，有效解决了我们平台存储和计算的横向动态扩容瓶颈，同时借助其产品中间件LTS实现了我们平台数据的冷热分离，有效降低了数据存储成本，...
向量检索版介绍
向量检索版简介 OpenSearch-向量检索版是阿里巴巴自主研发的大规模分布式搜索引擎，支持了淘宝、天猫、菜鸟、优酷乃至海外电商在内整个集团的搜索业务，同时也支撑了阿里云上的开放搜索业务。OpenSearch-向量检索版经过多年的发展，在满足...
弹性并行查询（ePQ）发布说明
简介 对于复杂分析型查询场景，PolarDB MySQL版 已支持的 单机并行（PQ）特性提供了对大查询进行并行加速的能力，但它仅能利用单机多核CPU进行并行加速。节点规格（CPU核数）将成为制约加速能力的瓶颈，而且集群内其它节点即便有空闲计算的...
列存索引技术架构介绍
本文介绍了列存索引的技术背景、简介以及技术架构等内容。技术背景 MySQL生态HTAP数据库解决方案 MySQL是一款主要面向OLTP型场景设计的开源数据库，开源社区的研发方向侧重于加强其事务处理能力。如提升单核性能、多核扩展性和增强集群能力...
DROP TABLE
简介 DROP TABLE 从数据库移除表。只有表拥有者、模式拥有者和超级用户能删除一个表。要清空一个表中的行但是不销毁该表，可以使用DELETE或者TRUNCATE。DROP TABLE 总是移除目标表的任何索引、规则、触发器和约束。不过，要删除一个被视图...
lo-intro
简介 所有的大对象都存在一个名为 pg_largeobject 的系统表中。每一个大对象还在系统表 pg_largeobject_metadata 中有一个对应的项。大对象可以通过类似于标准文件操作的读/写 API 来进行创建、修改和删除。PostgreSQL也支持一种称为...
表分区
简介 划分指的是将逻辑上的一个大表分成一些小的物理上的片。划分有很多益处：在某些情况下查询性能能够显著提升，特别是当那些访问压力大的行在一个分区或者少数几个分区时。划分可以取代索引的主导列、减小索引尺寸以及使索引中访问压力...
CREATE TABLE AS
简介 CREATE TABLE AS 创建一个表，并且用由一个 SELECT 命令计算出来的数据填充该表。该表的列具有和 SELECT 的输出列相关的名称和数据类型（不过可以通过给出一个显式的新列名列表来覆盖这些列名）。CREATE TABLE AS 和创建一个视图有些...
库表恢复方式1：从备份集恢复
简介 PolarDB 提供的库表恢复功能，不会覆盖和删除原集群中已有的库表，不会将数据写入原集群的库表中，而是在原集群中新建库表。您可以在库表恢复过程中指定新的库名或表名，通过指定库和表的方式，将 db1 的备份数据恢复到 db2。库表恢复...
表格存储建表注意事项
您可以将结构化或半结构化的数据存在一张稀疏的大表中，不用担忧数据量过大后的访问的性能问题。应用的快速增长 除了数据本身及访问量的增长，您可能使用表格存储为您的客户（如第三方伙伴、供应商等）提供服务。以为供应商提供服务为例，...
免费体验Lindorm宽表性能&价格力
本文介绍了如何免费体验Lindorm宽表引擎和开源社区版HBase的性能&...相关内容 Lindorm产品简介 Lindorm产品优势 Lindorm宽表引擎简介 Lindorm宽表引擎用户指南 10倍压缩比？Lindorm与其他数据库实测大比拼 手把手教您将HBase数据迁移至Lindorm
元数据
背景信息 元数据（字典）是属于数据库本身的一些数据，包含数据库名、数据库字符集、表名、表的大小、表的记录行数、表的字符集、表的字段、表的索引、表的描述、字段的类型、字段的精度、字段的描述等。所有信息均来源于 information_...
管理项目数据
本文为您介绍如何在MaxCompute Studio上查看项目空间中的表、视图、函数和资源。前提条件 已连接MaxCompute项目，详情请参见 管理项目连接。背景信息 您可以在 Project Explorer 区域查看已添加连接的MaxCompute项目中的表、视图、函数和...
2021年
该参数在低QPS场景下，对于执行时间较长（超过3秒）的计算密集型查询有线性提升，典型场景为单表聚合查询（TPCH Q1、Q6）、大表与小表的JOIN。对于I/O密集型查询和性能瓶颈为落盘的场景，提升有限。对于网络密集型查询，可能会影响性能。无...
数据膨胀诊断
AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能，可以定期自动诊断数据库内的所有表，并生成诊断信息表。您可以通过诊断信息表，查看表的膨胀情况并获得相应的处理建议（如执行VACUUM或VACUUM FULL操作）。注意事项 智能诊断数据膨胀...
ALTER TABLE
对于较大的表而言，这可能需要相当长的时间，并且会临时需要两倍的磁盘空间。添加CHECK或NOT NULL约束需要扫描表来验证现有行是否满足约束。DROP COLUMN格式不会实际删除列，而只是使列对SQL操作不可见。表中后面的插入和更新操作会为该列...
- 产品推荐
- 这些文档可能帮助您