迁移时源库为PolarDB-X 2.0的注意事项及限制
源库为PolarDB-X 2.0的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及限制：PolarDB-X 2.0迁移至RDS MySQL、自建MySQL PolarDB-X 2.0迁移至PolarDB MySQL版 PolarDB-X 2.0间的迁移 PolarDB-X 2.0迁移至 云原生数据仓库 ...
ALTER TABLE…SPLIT PARTITION
ALTER TABLE…SPLIT PARTITION命令将一个分区划分为两个分区，并重新分配新分区的内容。语法介绍 ALTER TABLE…SPLIT PARTITION命令的语法有两种形式：第一种形式用于将RANGE分区划分为两个分区。ALTER TABLE table_name SPLIT PARTITION ...
为什么使用表格存储过程中会有少量的500错误
当某个数据分区的数据量过大，或者访问过热，如下图的数据分区P1，表格存储的动态负载均衡机制能够检测到这种情况的发生，并将数据分区分裂成两个数据分区P1和P5，并将该两个数据分区调度到负载较低的服务节点上。表格存储使用上述的自动...
Topic引流
您在升级 云消息队列 Kafka 版 实例的流量规格时，可能会触发集群横向扩容。集群横向扩容完成后，您需要进行Topic引流，使Topic流量重新均匀分布到扩容后的集群上。否则原有的Topic流量还是打在扩容前的集群节点上，原有的Topic的峰值流量...
Topic分区倾斜怎么办？
问题现象 Topic分区倾斜导致部分磁盘水位偏高，无法充分使用所有磁盘性能和容量...调整后，Topic分区新增的数据会被引流到磁盘水位较低的磁盘上。老磁盘上的数据需要等待消息过期后才会被删除，水位随之下降。更多信息，请参见 分区均衡引流。
概述
为此，PolarDB-X 2.0的AUTO模式数据库分区表配套了非常完善的分区变更及管理能力，具体的分区管理能力包括以下几种：分裂分区 分裂热点 合并分区 迁移分区 重命名分区 增加分区 删除分区 修改分区 重组分区 清空分区 分区变更操作对不同...
自动扩容失败时如何手动扩容Linux系统盘
概述 由于部分Linux操作系统版本较旧，无法使用growpart等工具在线扩容时，这种情况下需要手动扩容Linux系统盘。本文主要针对MBR分区系统盘的手动扩容方式进行介绍。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，...
批量上传质量规则
说明 批量配置调度时，需要确保所选资源表的分区表达式一致，如果配置的分区和表实际分区不一致，可能会报错。批量配置调度时，非分区表不会保存分区表达式，只会保存调度配置。试跑：试跑后，可单击 图标 查看试跑日志。说明 批量运行时，...
批量上传质量规则
说明 批量配置调度时，需要确保所选资源表的分区表达式一致，如果配置的分区和表实际分区不一致，可能会报错。批量配置调度时，非分区表不会保存分区表达式，只会保存调度配置。试跑：试跑后，可单击 图标 查看试跑日志。说明 批量运行时，...
迁移时源库为Redis的注意事项及限制
若在数据迁移过程中源端Redis发生连接闪断导致断点续传失败，则可能会使全量数据重新迁移至目标端，从而导致数据不一致。特殊情况 当源库为自建Redis时：迁移时源库进行主备切换，会导致迁移任务失败。由于DTS的延迟时间是根据迁移到目标库...
使用JindoTable实现对OSS上表或分区的归档和解冻
本文介绍了JindoTable中的archiveTable和unarchiveTable命令，这两个命令可以用于对OSS上的表或分区进行归档和解冻操作。使用限制 该文档仅适用于使用Hive Metastore存储元数据的情况。archiveTable命令 archiveTable 命令可以对OSS上的表...
NVMe云盘概述
分区名称显示为<设备名称>p<分区号>，例如/dev/nvme0n1p1、/dev/nvme1n1p1 和/dev/nvme1n1p2 等。另外，NVMe云盘支持被同时挂载到最多16台支持NVMe协议的ECS实例上，即多重挂载功能。为NVMe云盘开启多重挂载功能的具体操作，请参见 开启...
管理分区
DDM目前支持对MySQL、Oracle、DB2和GaussDB等数据库进行表分区操作。在逆向数据库时，支持抽取MySQL和Oracle数据库的表分区信息至模型工具中。操作步骤 在模型设计区，右键单击 编辑表，进入 表编辑器。在 表编辑器 页面，您可以编辑 分区 ...
管理运维事件
数据传输服务DTS（Data Transmission Service）支持运维事件报警功能，当系统检测到可能会导致DTS实例无法正常运行的风险时会触发相应的运维事件，并会通过控制台、短信、邮件或站内消息进行通知。您可以查看运维事件涉及的DTS实例信息、运...
发布者最佳实践
鉴于该默认策略对无Key消息的分区效率低问题，云消息队列 Kafka 版 在2.4版本引入了黏性分区策略（Sticky Partitioning Strategy）。黏性分区策略主要解决无Key消息分散到不同分区，造成小Batch问题。其主要策略是如果一个分区的Batch完成...
MaxCompute表的高级功能
MaxCompute会根据每张非分区表或者分区表中分区的LastModifiedTime和Lifecycle的设置，判断是否要进行回收操作。MaxCompute SQL提供TOUCH操作，将表或分区的LastModifiedTime值修改为当前时间。如果您使用TOUCH操作，MaxCompute会认为表或...
为什么额外增加分区要收费？
云消息队列 Kafka 版 优化了集群增加大量分区后带来的性能下降问题。自建开源Apache Kafka集群分区数大于1000后，集群性能开始急剧下降，遭遇性能瓶颈。阿里云 云消息队列 Kafka 版 对此进行了优化，单个集群的分区数理论上没有上限。但...
Topic删除后不能减少分区？
问题现象 您在删除某个分区数为XX的Topic后，再次创建该Topic并将分区数配置为小于XX，系统提示 创建topic成功，分区数不能小于曾经配置过的分区数，已重置为XX。可能原因 老版本删除Topic时，不会彻底清除路由，导致再次创建Topic时无法...
基本概念
但是会出现部分分区发送消息失败的情况，等到宕机机器重新上线后即可恢复正常。更多信息，请参见 存储引擎对比。Connector 云消息队列 Kafka 版 的组件，用于 云消息队列 Kafka 版 和其他阿里云服务之间的数据同步。更多信息，请参见 ...
分区剪裁合理性评估
本文为您介绍如何评估分区剪裁合理性。背景信息 MaxCompute分区表是指在创建表时指定分区空间，即指定表内的几个字段作为分区列。使用数据时，如果指定了需要访问的分区名称，则只会读取相应的分区，避免全表扫描，提高处理效率，降低费用...
为什么分区消费时间相差较大、滞后明显或乱序？
同一个 Group 的所有消费端实例，分区消费时间相差较大、滞后明显或乱序。现象 在 云消息队列 Kafka 版 控制台 的 Group 管理 页面，找到目标Group，在其 操作 列，选择 更多>消费状态。在 Group 详情 的 消费状态 页签，显示该Group订阅的...
存储成本优化
本文从数据分区、表生命周期和定期删除表3个方面为您介绍如何优化存储成本。对于存储优化而言，有三个关键点：合理地进行数据分区。设置合理的表生命周期。定期删除废表。合理设置数据分区 MaxCompute将分区列的每个值作为一个分区。您可以...
表分区
另一方面，使用较少的列可能会导致粗粒度的分区策略得到较少数量的分区。如果条件涉及这些列中的一部分或者全部，访问分区表的查询将不得不扫描较少的分区。例如，考虑一个使用列`lastname`和`firstname`（按照这样的顺序）作为分区键进行...
kritis-validation-hook
组件升级异常可能会导致集群资源变更失败，若需要升级组件，请在业务低峰期进行升级操作。2022年08月 版本号 镜像地址 变更时间 变更内容 变更影响 v0.8.0.4-g61d3531e-aliyun registry....
分布式线性扩展
数据分区方式由分区函数决定，PolarDB-X 支持哈希（Hash）、范围（Range）等常用的分区函数。以下图为例，shop库中的orders表根据每行数据的ID属性进行哈希，被分区水平切分成orders_00～orders_11共计12个分区，均匀分布在4个数据节点上。...
生命周期
MaxCompute表的生命周期（Lifecycle），指表（分区）数据从最后一次更新的时间算起，在经过指定的时间后没有变动，则此表（分区）将被MaxCompute自动回收。这个指定的时间就是生命周期。通过设置生命周期可以实现自动数据清理或数据保留，...
配置数据同步任务
警告 选择源和目标实例后，建议您仔细阅读页面上方显示的 使用限制，否则可能会导致任务失败或数据不一致。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源库信息 ...
RDS MySQL同步至PolarDB MySQL版
警告 选择源和目标实例后，建议您仔细阅读页面上方显示的 使用限制，否则可能会导致任务失败或数据不一致。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。源库信息 ...
分区分桶
为了帮助您深入理解 云数据库 SelectDB 版 的分区分桶的概念和如何实施分区分桶，本文档详细阐释了分区分桶的原理和操作示例，以帮助您理解分区分桶原理和如何实施分区分桶。概述 为了能高效处理大数据量的存储和计算，云数据库 SelectDB ...
如何快速测试云消息队列 Kafka 版服务端是否正常？
操作流程 快速测试 云消息队列 Kafka 版 服务端的流程如下：创建Topic 发送消息 查看分区状态 按位点查询消息 您可以多次重复步骤2到步骤4，如果多次操作正常，则说明服务端正常。说明 如果服务端正常，但发送消息依然失败，建议您去调用方...
何时选择间隔（Interval）分区
Interval Range分区是Range分区的扩展，在数据到达时自动创建间隔分区，不需要再手动创建新分区，方便了Range分区维护操作。向RANGE分区表插入数据时，如果插入的数据超出当前已存在分区的范围，将无法插入并且会返回错误；而对于INTERVAL ...
同步时源库为SQL Server的注意事项及限制
AnalyticDB MySQL 版 3.0 云原生数据仓库AnalyticDB PostgreSQL 阿里云流式数据服务DataHub SQL Server间的同步 RDS SQL Server同步至MySQL SQL Server同步至PolarDB MySQL SQL Server同步至云原生数据仓库 AnalyticDB MySQL 版 3.0 SQL ...
迁移时源库为PolarDB MySQL版的注意事项及限制
如为全量迁移和增量迁移任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量迁移完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取Binlog而导致任务失败，极端情况下甚至可能会导致数据不一致或丢失。...
表分区定义
分区表维护 分区表支持多种分区管理操作，包括新增分区，删除分区，重命名分区，清空截断分区，交换分区，分裂分区等，具体信息，请参见 Partitioning Large Tables。分区表子表重命名 AnalyticDB PostgreSQL版 在6.3.10.9版本之后支持对...
创建虚拟机并安装操作系统
操作步骤 不同的操作系统安装步骤可能不同，请您根据实际的安装界面提示进行操作，本文以在BoxVirtualBox 7.0.2上创建虚拟机并安装Windows Server 2019操作系统为例。步骤一：创建虚拟机 打开Oracle VM VirtualBox管理器，单击 新建。在 ...
创建分区概述
本文为您介绍迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户时，CREATE TABLE DDL 分区同步的支持转换范围。总览 { range_partitions|list_partitions|hash_partitions|composite_range_partitions|composite_list_partitions|...
数据导入性能优化
如Lineitem表按l_shipdate列做二级分区，数据范围横跨7年，按年做分区有7个分区，按日做分区有2000多个分区，单分区约3000万条记录，选择按月或者按年做分区则更合适。导入后，数据建模诊断中如有不合理的二级分区，则选择的分区键不合适。...
如何使用表分区？
本文介绍 AnalyticDB PostgreSQL版 如何使用表分区。对于数据库中的事实表以及一些比较大的表，建议您使用表分区。使用表分区功能，方便您定期进行数据删除（通过alter table drop partition命令可删除整个分区的数据）和导入（使用交换...
数据导入性能优化
如Lineitem表按l_shipdate列做二级分区，数据范围横跨7年，按年做分区有7个分区，按日做分区有2000多个分区，单分区约3000万条记录，选择按月或者按年做分区则更合适。导入后，数据建模诊断中如有不合理的二级分区，则选择的分区键不合适。...
编辑资源队列
关联YARN分区与队列 重要 该功能适用于EMR-5.12.1及之后版本、EMR-3.46.1及之后版本。如果关闭了分区与队列关联，则会一键清空当前分区已关联的队列。进入服务的配置页面。登录 E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 ...
- 产品推荐
- 这些文档可能帮助您