管理数据集
若您的数据集带有分区字段，则会出现分区字段同步设置，具体设置请参见 分区值格式说明。（可选）单击 更多操作>复制，可以复制当前数据集。（可选）单击 更多操作>重命名，可以重命名当前数据集。（可选）单击 更多操作>相关卡片和作品，...
EMR Kafka磁盘写满运维
业务场景 Kafka将日志数据存储到磁盘中，当磁盘写满时，相应磁盘上的Kafka日志目录会出现offline问题。此时，该磁盘上的分区副本不可读写，降低了分区的可用性与容错能力，同时由于leader迁移到其他Broker，增加了其他Broker的负载。因此，...
分区格式化数据盘
不同操作系统的数据盘分区格式化的操作不同，请您根据服务器实际的操作系统进行选择：分区格式化Linux服务器的数据盘的具体操作，请参见 分区格式化Linux服务器的数据盘。分区格式化Windows服务器的数据盘的具体操作，请参见 分区格式化...
解决Windows实例中无法查看数据盘问题
本文介绍在Windows实例中无法查看数据盘问题的原因以及解决方案。问题描述 Windows实例中无法查看数据盘。问题原因 无法查看数据盘通常是如下几种原因：磁盘显示为外部或脱机 新增的驱动被禁用 新购买磁盘未进行分区和格式化 磁盘未分配...
EMR Kafka磁盘故障运维
业务场景 Kafka将日志数据存储到磁盘中，当磁盘出现故障时，会导致磁盘IO能力下降、集群吞吐下降、消息读写延时或日志目录offline等问题。这些情况有可能影响到线上业务平稳运行、数据丢失、Kafka集群容错能力下降，单块盘故障甚至有可能...
polar_ddl_manager
ALTER TABLE[IF EXISTS]name ATTACH PARTITION partition_name { FOR VALUES partition_bound_spec|DEFAULT }[NOCHECK_CONSTRAINT]用户需确保ATTACH的分区和DEFAULT的分区中的数据已经满足分区约束，否则会出现数据正确性问题。性能对比 ...
时序引擎版本说明
修复并发更新Schema时会出现大量版本冲突的问题。修复Lindorm ML时序预测在预测条件为大于或小于某时间点时，拉取数据不足的问题。修复Lindorm ML时序异常检测ostl-ttest算法和ostl-esd在数据量较大时会报错的问题。优化Lindorm ML时序异常...
转换MBR分区为GPT分区
重要 转换Windows云盘分区过程中，云盘数据不可用，如果您正在运行的业务依赖于该盘的数据，可能会出现问题。建议您先停止服务，待分区转换完成并恢复云盘数据后再继续运行业务。步骤一：转换分区（可选）备份云盘数据。警告 Windows转换...
Dataphin中代码任务运行报错“Logical table ...
问题描述 Dataphin中代码任务运行报错“Logical table translate failed：Failed to ...这种情况也会出现报错中提示的分区值和代码中其他表传递的分区值不一致的情况。解决方案 给代码中逻辑表指定分区之后，问题解决。适用于 Dataphin
初始化小于等于2 TiB数据盘（Linux）
如果e2fsprogs版本低于1.42，会出现如下错误信息。mkfs.ext4:Size of device/dev/vdb too big to be expressed in 32 bits using a blocksize of 4096.您需要按以下方式安装高版本的e2fsprogs，例如本示例中使用的1.42.8。运行以下命令，...
CREATE TABLE
创建非分区表、分区表、外部表或聚簇表。限制条件 分区表的分区层级不能超过6级。例如某张表以日期为分区列，分区层级为 年/月/周/日/时/分。一张表允许的分区个数支持按照具体的项目配置，默认为6万个。更多表的限制条件，请参见 SQL使用...
数据建模
时序引擎支持在数据库设置时间分区，一般情况下，如果创建周期性时间线导致了时间线膨胀，建议您开启时间分区来避免同一个分区出现大量索引膨胀。时间分区不建议设置的过小，默认时长为30天。具体操作，请参见 CREATE DATABASE。示例 创建...
创建OSS投递任务（旧版）
分区格式 按照投递任务的创建时间动态生成OSS Bucket目录，不能以正斜线（/）开头，默认值为%Y/m/d/H/M，相关示例请参见 分区格式，参数详情请参见 strptime API。写OSS RAM角色 授予OSS投递任务将数据写入到OSS Bucket的权限。默认角色：...
查询优化建议
尽可能使用筛选条件 HybridDB for MySQL可以对任意列做过滤（一般建表通过 index_all='Y' 声明默认全索引），所以用户使用不需要考虑组合索引、谓词顺序和数量等问题，尽量多做筛选。过滤条件尽量使用折叠好了的谓词，比如使用 ds='2017-01...
Windows实例中数据恢复
在处理磁盘相关问题时，您可能会碰到操作系统中数据盘分区丢失的情况。本文介绍了Windows系统下常见的数据盘分区丢失的问题以及对应的处理方法，同时提供了使用云盘的常见误区以及最佳实践，避免可能的数据丢失风险。前提条件 已注册阿里云...
Linux实例中数据恢复
数据恢复方法 在Linux实例里，您重启系统后，可能会出现数据盘分区丢失或者数据丢失的问题。这可能是因为您未在/etc/fstab 文件里设置自动挂载。此时，您可以先手动挂载数据盘分区。如果手动挂载时报分区表丢失，您可以尝试如下三种办法...
重新初始化数据盘
如果您在/etc/fstab 中添加了开机自动挂载数据盘分区的命令，重新初始化后，开机自动挂载会失效，启动时一般会出现异常。建议您在/etc/fstab 里注释掉开机挂载数据盘分区的命令。操作步骤如下：远程连接Linux实例。运行 vim/etc/fstab。按 ...
查看实例风险
Topic 格式转换 同步发送问题 碎片化发送问题 单分区Topic风险 Topic分区倾斜问题 生产流量 分区数量配额 分区分配策略问题 Group 消费消息接收耗时 消费消息排队耗时 消费消息读磁盘耗时 消费消息读磁盘耗时 消费消息格式转换时间 Group...
创建MaxCompute投递任务（新版）
时间分区格式 时间分区格式，配置示例和参数详细请参见 参考信息 和 Java SimpleDateFormat。说明 仅当 MaxCompute分区列 中的字段配置为_partition_time_时，时间分区格式才生效。请勿使用精确到秒的日期格式，易导致单表的分区数目超过...
常见问题
使用云消息队列 Kafka 版时客户端的报错及解决方案 无法ping通云消息队列 Kafka 版的接入点 客户端消费问题 订阅者最佳实践 客户端首次接入云消息队列 Kafka 版时出现异常的排查方法 使用云消息队列 Kafka 版时出现消息堆积 为什么消费客户...
PolarDB MySQL版8.0.2版本发布日志
修复RO节点的物理机出现故障时，RW节点在特殊情况下未将其复制关系中断，而引发RW节点刷脏受阻的问题。修复HA后，因表数量过多而引发table cache淘汰导致Autoinc回退的问题。修复删除X-Engine中的表或索引时，由于与偶发的后台...
OSS数据源
由于元信息发现通过采样的方式并不能覆盖所有的记录，如果不同行的字段变化很大，会出现生成的表字段减少的情况。在识别分区及表的时候，只支持子目录下只有文件的场景。如果目录下既有子目录又有文件，则该目录会被忽略掉，从而导致分区...
块存储
创建一块新云盘，作为数据盘挂载到实例上，并需要自行分区格式化。更换系统盘的同时指定更高的系统盘容量。安全性 您可以通过访问控制RAM授权其他用户访问您云盘的权限。对于数据敏感型应用，建议您加密存储设备。ECS云盘加密采用行业标准...
初始化大于2 TiB数据盘
关于分区格式的更多介绍，请参见 分区格式介绍。右键单击 磁盘 2 的 未分配 区域，选择 新建简单卷，创建一个3 TiB的NTFS格式的卷。在 新建简单卷向导 对话框中，单击 下一步，然后根据向导完成初始化操作。在 指定卷大小 对话框中，设置 ...
扩容数据盘
前提条件 已挂载数据盘并进行分区格式化。具体操作，请参见 挂载数据盘 和 分区格式化数据盘。步骤一：创建快照 警告 扩容数据盘可能会导致数据丢失，建议在扩容数据盘前，为数据盘创建快照，做好数据备份。登录 轻量应用服务器管理控制台...
自动扩容失败时如何手动扩容Linux系统盘
fdisk-u/dev/vda 系统显示类似如下，保存分区信息时，会出现警告信息，由于系统盘分区是busy状态，重新读取分区表会失败。Welcome to fdisk(util-linux 2.23.2).Changes will remain in memory only,until you decide to write them.Be ...
块存储FAQ
写入数据与分区格式化有什么关系？回滚云盘问题 数据盘进行二次分区后，此时回滚快照后，数据盘是几个分区？回滚云盘时为什么报错“执行回滚磁盘需要停止实例，并且确保当前磁盘没有创建中的快照和没有更换过操作系统。其他问题 如何转移...
快速入门
Schema详情 选择TUPLE类型会出现Schema详情，根据自己需求创建字段，允许为NULL代表如果上游没有该字段值自动置为NULL,不允许为NULL则会严格检验，字段类型不匹配写入报错。Shard数量 Shard表示对一个Topic进行数据传输的并发通道，每个...
冷数据归档常见问题
本文汇总了 PolarDB 冷数据归档相关的常见问题。出现"[Data Lifecycle Management]DLM storage engine is not support.The value of polar_dlm_storage_mode is OFF."报错，如何处理？您需要在 PolarDB控制台 上开启冷数据归档功能。详情请...
通过日志服务迁移日志数据至MaxCompute
时间分区格式_partition_time_输出的日期格式。例如 yyyy-MM-dd。导入时间间隔 MaxCompute数据投递间隔，默认1800，单位：秒（s）。说明 不同Logstore的数据不能导入到同一个MaxCompute表中，否则会造成分区冲突或丢失数据。海外Region不...
分区表常见问题
本文汇总了 PolarDB MySQL版 分区表相关的常见问题。说明 如需了解更多关于分区表的内容，请搜索钉钉群号加群进行咨询。钉钉群号：24490017825。PolarDB MySQL版 是否支持表分区?支持。目前 PolarDB MySQL版 100%兼容MySQL，同时做了功能和...
添加磁盘
添加完成后，页面上会出现 新硬盘 配置项。设置新硬盘容量大小。建议采用厚置备模型部署磁盘，即展开 新硬盘 配置项，将 磁盘置备 配置为 厚置备延迟置零 或者 厚置备置零，这样可以获得更好的IO性能。说明 此处以添加一块磁盘为例，请根据...
通过DataWorks周期性导入MaxCompute数据最佳实践
说明 导入的分区数据必须和分区键值（本文示例使用的是 ds）保持一致，否则会出现报错。导入分区数据的逻辑场景比较多，下面有两个场景供参考，请您根据实际业务逻辑两者选其中一个。场景一：导入新的分区数据。创建临时分区子表 BEGIN;...
创建同步MaxCompute
目前管控台默认固定的MaxCompute分区格式，分区配置对应为 分区 时间Format 说明 ds%Y%m%d day hh%H hour mm%M minute 分区间隔决定了根据时间戳转换MaxCompute分区时所采用的时间间隔。时间范围是 15分钟~1440分钟（1天），跳变间隔 15...
投递日志到MaxCompute（旧版）
时间分区格式 时间分区格式，配置示例和参数详细请参见 参考示例 和 Java SimpleDateFormat。说明 仅当 分区字段 配置为_partition_time_时，时间分区格式才生效。请勿使用精确到秒的日期格式，易导致单表的分区数目超过限制（60000个）。...
订阅者最佳实践
消费位点 每个Topic会有多个分区，每个分区会统计当前消息的总条数，这个称为最大位点MaxOffset。云消息队列 Kafka 版 Consumer会按顺序依次消费分区内的每条消息，记录已经消费了的消息条数，称为消费位点ConsumerOffset。剩余的未消费的...
CREATE TABLE（AUTO模式）
Hash分区与Key分区是 原生MySQL的标准分区语法 之一，PolarDB-X 为提供灵活强大的分区管理能力（例如分裂、合并与迁移等）以及考虑支持向量分区键下热点散裂，PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...
添加磁盘
添加完成后，页面上会出现 新硬盘 配置项。设置新硬盘容量大小。建议采用厚置备模型部署磁盘，即展开 新硬盘 配置项，将 磁盘置备 配置为 厚置备延迟置零 或者 厚置备置零，这样可以获得更好的IO性能。说明 此处以添加一块磁盘为例，请根据...
集群扩容
扩容后分区会执行负载均衡，部分分区会转移到新节点，单个分区转移过程中会有短暂不可用（正常200ms内），如果客户端配置了重试（默认开启）一般都会重试成功。但如果客户端的超时时间设置的比较短则可能出现请求报错现象。磁盘扩容 可以对...
DDL操作常见问题
本文为您介绍对表、分区、列执行DDL操作过程中的常见问题。问题类别 常见问题 表操作 MaxCompute支持虚拟表吗？例如MySQL中的DUAL表？MaxCompute的表有无索引？如何修改表的Hash Clustering属性？如何将非分区表修改为分区表？因误操作删除...
- 产品推荐
- 这些文档可能帮助您