迁移数据上云
普通消息在宕机时可能会乱序，分区顺序消息在宕机时依然保持顺序。VPC接入 配置 consumer.properties。自建Kafka集群的接入点 bootstrap.servers=XXX.XXX.XXX.XXX:9092#消费者分区分配策略 partition.assignment.strategy=org.apache.kafka...
稳定性说明与使用限制
分区列 限制项 说明 分区列 按照字符串处理，需要满足MaxCompute分区列的格式要求。管理投递 限制项 说明 暂停投递任务 投递任务会记录上次投递的日志Cursor，恢复运行时从记录的Cursor开始继续投递。因此暂停投递任务时存在如下机制。暂停...
MaxCompute投递（新版）
分区列 限制项 说明 分区列 按照字符串处理，需要满足MaxCompute分区列的格式要求。管理投递 限制项 说明 暂停投递任务 投递任务会记录上次投递的日志Cursor，恢复运行时从记录的Cursor开始继续投递。因此暂停投递任务时存在如下机制。暂停...
Hologres SQL语句的常见问题
解决方法：提交工单排查Hologres实例宕机原因。报错：value too long for type character varying(256)问题原因：字段长度超过了VARCHAR类型的长度限制。解决方法：处理数据或将VARCHAR的长度设置得更长。报错：internal error:Write is ...
初始化概述
分区格式介绍 数据盘支持主引导记录分区MBR（Master Boot Record）和全局分区表GPT（Globally Unique Identifier Partition Table）两种分区格式，二者说明如下：分区格式 最大分区容量 分区数量 分区说明 MBR 2 TiB MBR有以下分区形式：4...
Dataphin资产质量调度日志中调度执行的分区为什么和...
概述 本文主要介绍资产质量调度日志中调度执行的分区和手动执行分区不一致的原因。详细信息 Dataphin资产质量调度日志中调度执行的分区为什么和手动执行分区不一致？原因如下：代码检查触发是基于代码中的分区日期来触发的。手动执行是按照...
读取以分区方式存储的OSS数据
本文为您介绍MaxCompute支持的OSS标准分区路径格式和自定义分区路径格式。背景信息 创建OSS外部表后，MaxCompute会全量扫描OSS目录下的所有数据，包括子目录下的数据文件。但当数据量比较大时，对全目录扫描会产生不必要的I/O消耗以及数据...
创建虚拟机并安装操作系统
您可以基于VirtualBox工具提供的Windows操作系统，制作VHD格式的Windows镜像文件。本文介绍如何基于VirtualBox创建虚拟机并安装Windows操作系统。前提条件 已安装VirtualBox工具。VirtualBox工具官方下载地址，请参见 VirtualBox官网。已...
使用fdisk扩容新分区起始位置无法与扩容前保持一致
问题原因 用户在最初进行分区格式化时，可能使用了其他工具，例如，使用了parted命令指定了小于2048的分区起始位置。用户在最初进行分区格式化时，在进行“切换dos兼容性标志”的操作时，可以指定小于2048的值作为分区起始位置。解决方案 ...
扩容数据盘
前提条件 已挂载数据盘并进行分区格式化。具体操作，请参见 挂载数据盘 和 分区格式化数据盘。步骤一：创建快照 警告 扩容数据盘可能会导致数据丢失，建议在扩容数据盘前，为数据盘创建快照，做好数据备份。登录 轻量应用服务器管理控制台...
导入镜像
选择 Name and Operating System，然后输入虚拟机的名称并选择操作系统类型和版本。选择 Hardware，然后设置内存大小和CPU数量。重要 您可以按需设置合适的内存大小和CPU数量，此处设置的内存大小和CPU数量与云电脑规格无关。无影云电脑不...
Control Center设置告警
如果具有副本的broker宕机，或者不干净的leader选举被禁用并且副本不同步，导致没有可以被选为leader（可能需要确保没有消息丢失），就会发生这种情况。应为该值大于零创建触发器。不干净的选举计数 上一个时间间隔内报告的集群中不干净...
如何配置客户端参数？
acks=all：服务端主节点写成功且备节点同步成功才返回Response，性能较差、数据较为安全、主节点和备节点都宕机才会导致数据丢失。batch.size 发往每个分区的消息缓存量。达到设置的数值时，就会触发一次网络请求，然后Producer客户端把...
应用场景
只需要将原来的 N 份数据，每一份都通过分区表打散为 M 个数据分区，利用分区表打破单机的容量限制，就可以从数据层完成这一拆分过程，无需业务改造，极大地节省了成本，降低了技术风险。同时，OceanBase 数据库的分区表方案也可以使得用户...
创建虚拟机并安装操作系统
您可以基于VirtualBox工具提供的Linux操作系统，制作VHD格式的Linux镜像文件。本文介绍如何基于VirtualBox创建虚拟机并安装Linux操作系统。前提条件 已安装VirtualBox工具。VirtualBox官方下载地址，请参见 VirtualBox官网。已准备好ISO...
2021年
对分区表使用跨机并行查询 GLOBAL INDEX支持对分区表进行DDL操作 支持在对分区表进行DDL操作时（如DROP、SPLIT、MERGE等），操作该分区表下的所有GLOBAL INDEX。支持对分区表进行DDL操作 优化 ORA_HASH函数兼容性 ORA_HASH函数替换为DBMS_...
Word2Vec
多级分区格式为 name1=value1/name2=value2。如果指定多个分区，用英文逗号（,）分隔。无 wordColName 是 单词列名。单词列中每行为一个单词，换行符用表示。无 inVocabularyTableName 否 对输入词汇表执行wordcount操作后的输出结果。系统...
合并小文件
分区格式也可能是其他格式 for partition in t.iterate_partitions(spec="ds=s"%$datetime):instance=odps.run_merge_files(table_name,str(partition),hints=hints)#从这个logview的Waiting Queue点进去，才可以找到真正执行的logview ...
解决Windows实例中无法查看数据盘问题
本文介绍在Windows实例中无法查看数据盘问题的原因以及解决方案。问题描述 Windows实例中无法查看数据盘。问题原因 无法查看数据盘通常是如下几种原因：磁盘显示为外部或脱机 新增的驱动被禁用 新购买磁盘未进行分区和格式化 磁盘未分配...
何时使用Range-List分区
Range-List分区是指一级分区是Range分区，二级分区是List分区的组合分区类型。Range-List分区通常用于存储历史数据的大表，并且在多个维度上访问。数据的历史视图通常是一个访问路径，但是某些业务用例向访问路径添加了另一种分类。例如，...
存储引擎对比
在创建Topic时，您可以为 云消息队列 Kafka 版 选择云存储或Local存储引擎。云存储依托阿里云云盘...分区顺序消息 集群宕机时，会自动从ISR中选取新Leader。相关文档 如何为专业版实例在创建Topic时选择存储引擎，请参见 步骤一：创建Topic。
步骤三：创建资源
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
使用快照创建云盘
重要 如果快照容量小于2,048 GiB，但您希望设置的新云盘容量大于2,048 GiB，请提前确认快照对应的历史云盘采用的是GPT分区格式（通过 fdisk-lu 命令查看 Disk label type 值是否为 gpt）。否则，建议您设置为小于2,048 GiB，避免配置分区...
Linux实例SWAP分区的配置和常见问题处理
sysctl-p 常见问题处理 常见问题描述 使用mkswap创建SWAP时出现类似如下报错信息：mkswap:error:swap area needs to be at least 40 KiB 问题原因 指定的SWAP分区文件太小，SWAP分区文件至少应该大于40KB。解决方法 重新生成更大的文件格式...
配置示例：MaxCompute
多级分区表达式格式：1级分区名=分区值/2级分区名=分区值/N级分区名=分区值，分区值可以是固定值，也可以是内置参数表达式。参数必须使用中括号表示，例如$[yyyymmdd-N]。分区表达式周期由配置的业务日期决定，例如配置运行时间为前5天，则...
增量同步性能白皮书
单机同步单分区 单机同步4个分区 单机同步8个分区 单机同步32分区 单机同步64分区 2台机器同步64分区 2台机器同步128分区 说明 上述测试场景不是产品能力的极限测试，对表格存储服务端的整体压力较小。测试步骤 创建数据表并进行预分区...
Hash Clustering
ALTER TABLE语句只会影响分区表的新建分区（包括insert overwrite生成的），新分区将按新的聚集属性存储，老的数据分区保持不变。由于ALTER TABLE语句只影响新分区，所以该语句不可以再指定PARTITION。ALTER TABLE语句适用于存量表，在增加...
CREATE PARTITION TABLE
CREATE PARTITION TABLE语句用于创建分区表。...动态分区管理 Hologres的动态分区功能无需预先设定所有分区信息，可依据创建分区表时配置的动态分区规则，自动创建并管理分区子表。关于动态分区的管理详情，请参见 动态分区管理。
版本发布说明
修复CoHash的Right分区函数计算结果不正确导致的分区路由问题，发布日期：2023-12-27 大版本：V5.4.18 小版本：17034692 类别 说明 新增&优化 新增支持AUTO模式数据库的co_hash分区策略。优化使用AB表方案进行事务日志清理的流程，避免一次...
对分区表使用跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）支持对分区表使用跨机并行查询的功能。通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询...
对分区表使用跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）支持对分区表使用跨机并行查询的功能。通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询...
动态分区
本文介绍 云数据库 SelectDB 版 动态分区相关的概念和示例，帮助您进行分区的动态管理，降低您的使用成本。概述 在某些场景下，可能会将数据库表按照天进行分区划分。如果需要手动管理分区，可能由于没有创建分区导致数据导入失败，这给...
如何快速测试云消息队列 Kafka 版服务端是否正常？
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
离线同步常见问题
非插件报错原因及解决方案 如何处理编码格式设置/乱码问题导致的脏数据报错？任务存在SSRF攻击Task have SSRF attacts如何处理？离线同步任务执行偶尔成功偶尔失败 离线同步源表有加列（修改）如何处理？如何处理表列名有关键字导致同步...
Quick Audience数据导入中调度任务...提示表分区无数据
问题描述 Quick Audience数据导入中调度任务执行失败，报错提示表分区无数据...解决方案 数据导入的任务调度的分区日期与业务数据分区日期保持一致，可以在表结构配置的时候对分区日期字段和分区值格式进行设置。适用于 Quick Audience V4版本
作为Output接入
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
作为Input接入
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
作为Output接入
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
作为Input接入
集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 选择 Local 存储 时，默认选择 分区顺序消息。普通消息 日志清理策略 Topic日志的清理策略。当 存储...
出错提示“Btrfs has been removed”
问题原因 待迁移的操作系统使用了Btrfs文件系统，而迁移后Anolis/Alibaba Linux不再支持Btrfs文件系统，这会导致使用了Btrfs文件系统的硬盘分区中的文件在迁移后将无法读取，从而导致操作系统迁移失败。解决方案 远程连接ECS实例。具体操作...
- 产品推荐
- 这些文档可能帮助您