Windows系统实例的宕机问题排查
更多信息，请参见 常见宕机原因和解决方案。方式二：通过系统事件定位 登录 ECS管理控制台，左侧导航栏单击 事件。在左侧导航栏单击 非预期运维事件。单击发生宕机运维事件实例右侧的 诊断操作系统错误根因，诊断实例宕机原因。根据返回的...
使用限制
云存储单分区 宕机和升级时可能导致不可用 建议创建的分区数大于1，如果强依赖单分区，可以使用Local存储。说明 仅专业版实例支持在创建Topic时将存储引擎类型选择为Local存储，标准版暂不支持。说明 云消息队列 Kafka 版 不再支持按照...
创建OSS投递任务（新版）
如果您设置了 时区选择 和 分区格式，系统将根据您的设置生成OSS Bucket的目录。查看OSS数据 将数据投递到OSS成功后，您可以通过OSS控制台、API、SDK或其他方式访问OSS数据。更多信息，请参见 文件管理。OSS Object地址格式如下所示：oss:/...
扩容数据盘
具体操作，请参见 挂载数据盘 和 分区格式化数据盘。步骤一：创建快照 警告 扩容数据盘可能会导致数据丢失，建议在扩容数据盘前，为数据盘创建快照，做好数据备份。登录 轻量应用服务器管理控制台。在左侧导航栏，单击 服务器。在 服务器...
挂载数据盘
选中 该功能通过云助手实现，执行分区和格式化后，该分区上的文件及其他数据会被完全破坏！确认通过此方式进行云盘分区、挂载文件系统操作。单击 开始执行。重要 此时如果您单击了 取消，后续您只能通过命令行方式为云盘创建分区和文件系统...
分区格式化数据盘
不同操作系统的数据盘分区格式化的操作不同，请您根据服务器实际的操作系统进行选择：分区格式化Linux服务器的数据盘的具体操作，请参见 分区格式化Linux服务器的数据盘。分区格式化Windows服务器的数据盘的具体操作，请参见 分区格式化...
通过数据同步功能同步Kafka至湖仓版（推荐）
格式处理方法选择时间格式化，选择源端字段格式和目标分区格式。AnalyticDB for MySQL 会按源端字段格式识别分区字段的值，并将其转换为目标分区格式进行分区。例如，源字段为gmt_created，值为1711358834，源端字段格式为秒级精度时间戳，...
通过数据同步功能同步SLS至湖仓版（推荐）
目标端分区键的格式处理方法分为：时间格式化和指定分区字段。选择时间格式化处理方法时，需要选择一个时间字段（如时间戳）。按指定的时间字段和格式进行分区。例如，源字段为gmt_created，源字段格式为yyyy-MM-dd，目标字段名为year，...
如何快速测试云消息队列 Kafka 版服务端是否正常？
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
分区
分区表是指拥有分区空间的表，即将表数据按照某个列或多个列进行划分，从而将表中的数据分散存储在不同的物理位置上。合理设计和使用分区，可以提高查询性能、简化数据管理，并支持更灵活的数据访问和操作。概述 分区可以理解为分类，通过...
作为Output接入
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
作为Output接入
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
作为Output接入
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
作为Output接入
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
COALESCE PARTITION
本文档介绍了减少基于HASH和KEY分区的分区数和对应分区的所有子分区，并将数据合并到其他分区和子分区中的方法。语法 ALTER TABLE…COALESCE PARTITION 命令用于减少基于HASH和KEY分区的分区数和对应分区的所有子分区，并将数据合并到其他...
ALTER TABLE…ADD PARTITION
ALTER TABLE…ADD PARTITION命令用于将分区添加到现有的分区表中。语法介绍 使用ALTER TABLE…ADD PARTITION命令把分区添加到现有的分区表中。语法如下：ALTER TABLE table_name ADD PARTITION partition_definition;其中 partition_...
ALTER TABLE…ADD SUBPARTITION
ALTER TABLE…ADD SUBPARTITION命令用于添加子分区到现有的分区中，且这个分区必须已经进行了子分区的划分。语法介绍 使用ALTER TABLE…ADD SUBPARTITION命令添加一个子分区到现有的包含子分区的分区中。语法如下：ALTER TABLE table_name ...
表设计规范
分区设计与存储逻辑 一张表里有很多个一级分区，每个一级分区都会按时间存储二级分区，每个二级分区都会存储所有的列，如下图所示。分区设计需要注意：设置分区的数量上限。避免每个分区中只存少量数据。以方便数据查询和计算为前提设置...
列存索引中HashMatch算子的实现
ProbeDisk用于磁盘分区的probe操作，按分区来处理，处理指定磁盘分区时先从该分区的临时文件中加载chunk，然后直接调用Probe处理，若为Left类型的Join，还需要调用ProbeLeft对该分区进行处理。Join逻辑 HashMatch实现Inner/LeftOuter/...
变更表类型及分区策略（AUTO模式）
本文介绍了变更表类型（即在单表、广播表和分区表三者间进行相互转换）及分区策略（包括拆分函数或分区列）的相关语法和示例。本语法仅适用于AUTO模式数据库。前提条件 仅适用于分区模式为auto/partitioning的逻辑库（请参见 CREATE ...
Kafka Rebalancer工具介绍
Borker分区数据量的不均衡：导致部分机器的磁盘利用率明显高于集群平均值，增加Broker宕机的风险。节点内磁盘间的利用率不均衡：部分磁盘的利用率明显高于节点磁盘的平均利用率，增加了副本offline甚至Broker宕机的风险。热点Topic：导致...
Dataphin的管道同步任务中如何配置多分区值和多分区...
问题描述 Dataphin的管道同步任务中如何配置使用多分区值和多分区字段...解决方案 配置使用多分区和多分区字段的方法示例参考（数据源是Maxcompute）：/*query*/sale_date>=20190311 and sale_date适用于 Dataphin 基于公共云v2.9.4-3环境验证
步骤一：扩容云盘容量
在 扩容分区和文件系统 向导页面 处理建议 区域，单击 立即重启实例，重启云盘所挂载的ECS实例使扩容生效。在 扩容分区和文件系统 向导页面查看云盘的分区信息，并根据实际情况在 解决方案 区域选择一种方式扩容分区和文件系统。文档自助：...
原理
本文概述了分区表模块的主要实现原理，便于用户了解分区表在底层实现时的一些细节，从而能够更好地学习如何去使用分区表。分区表创建原理 分区表的创建主要涉及语法解析模块和执行模块。语法解析模块 分区表创建是分区表整个功能的核心部分...
并行查询
PolarDB PostgreSQL版 支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版 对分区表的并行查询，和普通...
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版（兼容Oracle）...
顺序消息
顺序消息可以保证消息的消费顺序和发送的顺序一致，即先发送的先消费，后发送的后消费，常用于金融证券、电商业务等对消息指令顺序有严格要求的场景。本文介绍 云消息队列 RocketMQ 版 顺序消息的概念、适用场景、实现原理以及使用过程中的...
DDL操作常见问题
本文为您介绍对表、分区、列执行DDL操作过程中的常见问题。问题类别 常见问题 表操作 MaxCompute支持虚拟表吗？例如MySQL中的DUAL表？MaxCompute的表有无索引？如何修改表的Hash Clustering属性？如何将非分区表修改为分区表？因误操作删除...
ALTER TABLE…SPLIT PARTITION
ALTER TABLE…SPLIT PARTITION命令将一个分区划分为两个分区，并重新分配新分区的内容。语法介绍 ALTER TABLE…SPLIT PARTITION命令的语法有两种形式：第一种形式用于将RANGE分区划分为两个分区。ALTER TABLE table_name SPLIT PARTITION ...
DROP PARTITION
本文档介绍了删除分区和子分区以及存储在分区和子分区内数据的方法。语法 ALTER TABLE…DROP PARTITION 命令用于删除分区和子分区及存储在分区和子分区内的数据。ALTER TABLE table_name DROP PARTITION partition_names;说明 该命令不可以...
ALTER TABLE…SPLIT SUBPARTITION
ALTER TABLE…SPLIT SUBPARTITION命令用于将子分区添加到现有的子分区表中。语法介绍 使用ALTER TABLE…SPLIT SUBPARTITION命令将一个子分区划分为两个子分区，并重新分配子分区的内容。ALTER TABLE…SPLIT SUBPARTITION命令有两种形式：第...
CREATE TABLE（AUTO模式）
Hash分区与Key分区是 原生MySQL的标准分区语法 之一，PolarDB-X 为提供灵活强大的分区管理能力（例如分裂、合并与迁移等）以及考虑支持向量分区键下热点散裂，PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...
基础术语
本文主要对 SOFAStack 消息队列涉及的专有名词及术语进行定义和解析，方便您更好地理解相关概念并使用消息队列。中文 英文 释义 消息主题 Topic 消息主题，一级消息类型，通过 Topic 对消息进行分类。详情请参见 Topic 与 Tag。消息 ...
创建ID安全匹配任务
数据引入 选择使用方和加持方的输入表名、分区和碰撞字段。使用方：指需要数据的一方。加持方：指提供数据的一方。数据名称：选择已创建的数据，如需创建，请参见上传数据。数据分区：分区分为动态分区和静态分区，动态分区按照日、小时...
宽表模型介绍
表格存储 按照分区键对数据表的数据进行分区，具有相同分区键的行会被划分到同一个分区，实现数据访问负载均衡。属性列（Attribute Column）一行中除主键列外，其余都是属性列。属性列会对应多个值，不同值对应不同的版本，每行的属性列...
创建安全数据对齐任务
数据引入 选择使用方和加持方的输入表名、分区和碰撞字段。使用方：指需要数据的一方。加持方：指提供数据的一方。数据名称：选择已创建的数据。数据分区：分区分为动态分区和静态分区，动态分区按照日、小时调度，可点击数据分区后的图标...
基本概念
本文主要对 云消息队列 RocketMQ 版 涉及的专有名词及术语进行定义和解析，方便您更好地理解相关概念并使用 云消息队列 RocketMQ 版。Topic 消息主题，一级消息类型，通过Topic对消息进行分类。更多信息，请参见 Topic与Tag最佳实践。消息...
创建安全数据加密任务
数据引入 选择使用方和加持方的输入表名、分区和碰撞字段。使用方：指需要数据的一方。加持方：指提供数据的一方。数据名称：选择已创建的数据。数据分区：分区分为动态分区和静态分区，动态分区按照日、小时调度，可点击数据分区后的图标...
创建安全数据左对齐任务
数据引入 选择使用方和加持方的输入表名、分区和碰撞字段。使用方：指需要数据的一方。加持方：指提供数据的一方。数据名称：选择已创建的数据。数据分区：分区分为动态分区和静态分区，动态分区按照日、小时调度，可点击数据分区后的图标...
批量上传质量规则
说明 批量配置调度时，需要确保所选资源表的分区表达式一致，如果配置的分区和表实际分区不一致，可能会报错。批量配置调度时，非分区表不会保存分区表达式，只会保存调度配置。试跑：试跑后，可单击 图标 查看试跑日志。说明 批量运行时，...
- 产品推荐
- 这些文档可能帮助您