DataWorks的审计事件
操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过OpenAPI或控制台等方式操作云资源时产生的管控事件，DataWorks支持在操作审计中查询的事件如下表...
PolarDB PostgreSQL（兼容Oracle）2.0版本商业化公告
同时，PolarDB PostgreSQL版（兼容Oracle）2.0版本 还解决了B-树索引的资源消耗问题，包括频繁更新索引导致的表膨胀问题。此外，该版本还提供了GiST索引，在构建过程中预先排序数据，从而可以大幅提高GiST和SP-GiST索引的创建速度，并减少...
PolarDB PostgreSQL（兼容Oracle）2.0版本与1.0版本...
同时，PolarDB PostgreSQL版（兼容Oracle）2.0版本 还解决了B-树索引的资源消耗问题，包括频繁更新索引导致的表膨胀问题。此外，该版本还提供了GiST索引，在构建过程中预先排序数据，从而可以大幅提高GiST和SP-GiST索引的创建速度，并减少...
8.0.1和8.0.2版功能对比
PolarDB for MySQL 8.0.1版和8.0.2版在功能上存在一些差异，包括Warm Buffer Pool、Hash Join、弹性并行查询、执行器增强、优化器增强、分区表、多主集群（库表）、Blink Tree等方面的差异。本文介绍这两个版本的功能区别，以便您基于业务...
DataWorks OpenAPI概述
1级 UpdateIDEEventResult 用于在数据开发过程中触发扩展点时，通过调用UpdateIDEEventResult接口，将扩展程序对扩展点事件的检查结果返回给DataWorks的数据开发系统。2级 GetIDEEventDetail 调用GetIDEEventDetail，根据DataWorks开放消息...
Hive数据源
背景信息 Hive是基于Hadoop的数据仓库工具，用于解决海量结构化日志的数据统计。Hive可以将结构化的数据文件映射为一张表，并提供SQL查询功能。Hive的本质是一个SQL解析引擎，其底层通过MapReduce实现数据分析，使用HDFS存储处理的数据，将...
INSERT
插入分区子表 INSERT INTO public.hologres_2022 values('2022',1,now(),'a')常见问题 问题一：数据在写入时，为什么监控指标中存储用量上涨非常多，写入完成后存储用量又下降？根据写入的技术原理，为了尽可能快的写入数据，后台会先将...
流式数据通道概述
支持自动创建分区：解决数据同步服务并发创建分区导致的并发抢锁问题。支持增量数据异步聚合（Merge）：提升数据存储效率。MaxCompute流式数据通道服务可以解决流式服务使用批量数据通道写入数据引发的各种问题，优势如下：更优化的数据...
Dataphin周期任务查询对应的分区，报其他分区错误
问题描述 本文主要解决Dataphin周期任务查询对应的分区，报其他分区错误。问题原因 报错提示20211122分区存在问题。然而客户并没有对20211122分区数据进行操作。经过和客户沟通了解到昨天两个人同时对20211122分区进行补数据后来停止过一个...
分区表扫描算子
为了解决该问题，PolarDB PostgreSQL版 提供了分区表扫描算子（PartitionedTableScan，简称PTS）。与Append算子相比，PTS能够明显减少优化器生成执行计划的时间，且在SQL执行过程中使用更少的内存，能够有效避免OOM。使用限制 PTS当前仅...
Kafka常见问题
本文介绍使用Kafka时可能遇到的问题及解决方法。如何清理Kafka组件输出日志 如何清理Kafka-Manager服务输出日志 是否可以停止Kafka-Manager服务 报错“ERROR:Wile executing topic command:Replication factor:1 larger than available ...
SLB中删除扩展域名时出现“The DomainExtension is ...
问题描述 SLB中删除扩展域名时，出现以下报错。The DomainExtension is related with rules 问题原因 扩展域名必须关联转发策略才能生效，若转发策略存在，则无法直接删除扩展域名。解决方案 删除监听的转发策略，关于如何删除转发策略，请...
出错提示S6磁盘分区创建快照出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S6_*磁盘分区创建快照出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S6_*磁盘分区创建快照出错”。其中S6_*可能的错误码如下：S6_8 S6_1 问题原因 块...
使用须知
问题与解决方法 使用云数据库HBase的SQL功能（Phoenix）的过程中可能会遇到以下问题，为您提供解决以下问题的方法。meta可能存在不同步。问题描述：在同一时间多个连接访问Phoenix的场景下，一个连接进行DDL操作后（例如创建表，删除表，...
出错提示S4目标磁盘分区初始化出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S4_*目标磁盘分区初始化出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S4_*目标磁盘分区初始化出错”。其中S4_*可能的错误码如下：S4_105 S4_U28、S4...
解决Linux实例磁盘空间满问题
一、磁盘分区空间使用率达到100%您可以通过清理占用磁盘空间较大的文件或目录、扩容磁盘或新购磁盘等几种方式来解决磁盘分区空间使用率达到100%的问题。具体操作步骤如下：清理占用空间较大的文件或者目录 远程连接ECS实例。具体操作，请...
Linux实例磁盘空间满和Inode满的问题排查方法
一、磁盘分区空间使用率达到100%您可以通过清理占用磁盘空间较大的文件或目录、扩容磁盘或新购磁盘等几种方式来解决磁盘分区空间使用率达到100%的问题。具体操作步骤如下：清理占用空间较大的文件或者目录 使用救援连接Linux服务器。具体...
出错提示S3磁盘分区数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S3磁盘分区数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S3_*磁盘分区数据同步出错”。其中S3_*可能的错误码如下：S3_F30 S3_F32 S3_F6 S3_...
出错提示S8磁盘分区数据同步准备出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S8_*磁盘分区数据同步准备出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S8_*磁盘分区数据同步准备出错”。其中S8_*可能的错误码如下：S8_U28 S8_U7 ...
使用限制
迁移数据限制 待迁移服务器操作系统 迁移数据限制说明 Windows系统 不支持复制部分磁盘分区结构，如动态磁盘分区、扩展磁盘分区。不支持的磁盘分区结构会被重建为普通分区。不支持迁移系统卷影副本备份（Volume Shadow Snapshots）。Linux...
发布者最佳实践
黏性分区策略主要解决无Key消息分散到不同分区，造成小Batch问题。其主要策略是如果一个分区的Batch完成后，就随机选择另一个分区，然后后续的消息尽可能地使用该分区。这种策略在短时间内看，会将消息发送到同一个分区，如果拉长整个运行...
Dataphin管道任务是否支持数据数仓的动态分区
问题原因 静态分区与动态分区的分区字段都是一个表外的虚拟字段,静态分区需要是手动指定分区字段及文件位置(load data);动态分区则是根据指定的字段值自动判断分区；目前Dataphin管道任务不支持动态分区。适用于 Dataphin 版本V3.6.2
出错提示S9磁盘分区头数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”。其中S9_*可能的错误码如下：S9_F4 S9_F40 问题...
扩容磁盘
系统盘扩容完成后，您需要对扩容的磁盘进行扩展分区和文件系统操作，详情请参见 扩展分区和文件系统_Linux系统盘。说明 在扩展分区和文件系统过程中，如果 umount 命令运行失败，请先在集群上关闭 YARN 和 HDFS 服务。在Disk1操作时，如果...
出错提示S7磁盘分区头数据同步准备出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S7_*磁盘分区头数据同步准备出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S7_*磁盘分区头数据同步准备出错”。其中S7_*可能的错误码如下：S7_U28 S7...
出错提示S2磁盘分区文件数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”。其中S2_*可能的错误码如下：S2_R255 S2_R...
Hudi存储
同时支持热点数据自动打散，解决数据倾斜问题，大幅提升写入稳定性。分区级生命周期管理 支持设置多种策略，如按分区数、按数据量和按过期时间策略管理分区数据生命周期，同时支持并发设置生命周期管理策略，进一步降低存储成本。异步Table...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
PartitionedTable Scan Node
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
出错提示S10磁盘分区文件数据同步测试出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S10_*磁盘分区文件数据同步测试出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S10_*磁盘分区文件数据同步测试出错”。其中S10_*可能的错误码如下：S...
计划加速
该算子用于解决分区表分区数量过多时，查询性能慢的问题。下方展示了当使用 PartitionedTableScan 算子时，分别查询这两个SQL所用的 Planning Time 和内存。explain analyze select*from part_hash;QUERY PLAN-PartitionedTableScan on ...
计划加速
该算子用于解决分区表分区数量过多时，查询性能慢的问题。下方展示了当使用 PartitionedTableScan 算子时，分别查询这两个SQL所用的 Planning Time 和内存。explain analyze select*from part_hash;QUERY PLAN-PartitionedTableScan on ...
2023年
ePQ支持并行写入及查询OSS外部表 Global Index支持多级分区 PolarDB PostgreSQL版（兼容Oracle）支持在多级分区表上以及分区键上创建全局索引。支持多级分区表上创建全局索引 Global Index支持作为主键/外键 PolarDB PostgreSQL版（兼容...
Hologres SQL语句的常见问题
本文为您介绍编写和优化Hologres SQL语句时可能遇到的常见问题及解决方法。报错：Creating publication with table that without binlog is not supported now 报错：bigint out of range 报错：too many shards in this instance 报错：...
分区表常见问题
本文汇总了 PolarDB MySQL版 分区表相关的常见问题。说明 如需了解更多关于分区表的内容，请搜索钉钉群号加群进行咨询。钉钉群号：24490017825。PolarDB MySQL版 是否支持表分区?支持。目前 PolarDB MySQL版 100%兼容MySQL，同时做了功能和...
基于CEN-TR实现企业级云上互联
本方案基于云企业网CEN及转发路由器TR帮客户实现云上网络架构设计及云上内部网络互通，实现合理的云上网络分区设计、简单的运维管理及灵活的弹性扩展。方案概述 随着云计算的普及，越来越多的传统企业客户也在选择把云下的业务系统搬到云上...
分区索引
分区索引是为了解决大宽表的存储和高并发访问问题而设计的一种新特性。创建搜索索引时可以指定数据分区策略，服务端自动将数据进行拆分并存储，查询数据时系统自动进行分区裁剪。本文介绍数据分区的策略和使用方法。前提条件 已开通 云原生...
Dataphin管道任务表分区如何配置当天时间
问题描述 Dataphin管道任务表分区配置当天时间的方法。解决方案 需要在调度配置页面配置“参数配置”，并且表分区中使用配置的变量，在运维环境中执行。适用于 Dataphin 版本v3.6.2 运维环境
ODPS-0123031
解决方案 一般作业输出动态分区数达到几千已经很大，超过10000可能存在业务逻辑或SQL语法问题。如无逻辑或语法问题，建议修改分区表的分区字段，或将业务逻辑拆分为多个作业，避免出现该错误。错误3：invalid dynamic partition value 错误...
块存储FAQ
上一代云盘-本地SSD盘相关问题 云盘空间不足问题 解决Windows实例磁盘空间满问题 解决Linux实例磁盘空间不足 什么是存储容量单位包SCU？存储容量单位包SCU（Storage Capacity Unit）是一种预付费存储售卖形态，可以抵扣云盘等部分存储产品...
- 产品推荐
- 这些文档可能帮助您