Dataphin周期任务查询对应的分区，报其他分区错误
问题描述 本文主要解决Dataphin周期任务查询对应的分区，报其他分区错误。问题原因 报错提示20211122分区存在问题。然而客户并没有对20211122分区数据进行操作。经过和客户沟通了解到昨天两个人同时对20211122分区进行补数据后来停止过一个...
2021年
对分区表使用跨机并行查询 GLOBAL INDEX支持对分区表进行DDL操作 支持在对分区表进行DDL操作时（如DROP、SPLIT、MERGE等），操作该分区表下的所有GLOBAL INDEX。支持对分区表进行DDL操作 优化 ORA_HASH函数兼容性 ORA_HASH函数替换为DBMS_...
使用须知
问题与解决方法 使用云数据库HBase的SQL功能（Phoenix）的过程中可能会遇到以下问题，为您提供解决以下问题的方法。meta可能存在不同步。问题描述：在同一时间多个连接访问Phoenix的场景下，一个连接进行DDL操作后（例如创建表，删除表，...
时序引擎版本说明
功能优化 修复TSQL条件中出现BOOLEAN数据类型的数据时可能出现异常的问题。3.4.17（稳定版本）发布日期 类型 说明 2022年06月17日 新特性 支持设置写入的最大时间（即当前时间和偏移时间），超过偏移时间后写入的数据会被丢掉。功能优化 ...
数据导入常见问题
本文汇总了StarRocks数据导入的常见问题。通用问题 如何选择导入方式？影响导入性能的因素都有哪些？报错“close index channel failed“或“too many tablet versions”，该如何处理？报错“Label Already Exists”，该如何处理？报错...
503错误
解决方案：单个账号的总QPS为10,000，但在不同的读写方式下，实际能达到的值如下：顺序读写：2,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间中某个特定分区的...
Dataphin管道任务如何配置多个静态分区
问题描述 Dataphin管道任务如何配置多个静态分区？解决方案 多个静态分区需要使用逗号隔开。适用于 Dataphin 数据仓库静态分区
通过SQL导出数据至MaxCompute
常见问题 问题现象 在数据导出至MaxCompute时报错：internal error:odps_writer_xxx，UploadId:xxx,Block 0 close odps writer failed:RequestId=xxx,ErrorCode=FlowExceeded,ErrorMessage=GlobalSlot Quota。可能原因 Hologres通过SQL导出...
消息堆积和延迟问题
本文主要介绍 云消息队列 RocketMQ 版 TCP协议的Java客户端使用过程中，经常会出现的消息堆积和消息延迟的问题。通过了解 云消息队列 RocketMQ 版 客户端的消费原理和消息堆积的主要原因，帮助您可以在业务部署前更好的规划资源和配置，或...
订阅者最佳实践
消费客户端（Consumer）频繁出现Rebalance 心跳超时会引发Rebalance，可以通过参数调整、提高消费速度等方法解决。更多信息，请参见 为什么消费客户端频繁出现Rebalance？分区个数 分区个数主要影响的是消费者的并发数量。对于同一个Group...
PolarDB MySQL版8.0.1版本发布日志
修复对KEY分区表进行剪枝时，因未考虑生成列（STORED GENERAGED COLUMN），导致在KEY分区表中执行插入操作时报错"ERROR 1748(HY000)Found a row not matching the given partition set"的问题。修复将冷数据归档为IBD格式的文件时，由于...
大数据计算服务MaxCompute
背景信息 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的EB级数据仓库解决方案，致力于批量结构化数据的存储和计算，提供海量数据仓库的解决方案及分析建模服务。MaxCompute的详情请参见 什么是MaxCompute。MaxCompute连接器...
投递日志到MaxCompute（旧版）
日志服务中一个日志字段只能映射到一个MaxCompute表的列（数据列或分区列），不支持字段冗余，同一个字段名第二次使用时其投递的值为null，如果null出现在分区列会导致数据无法被投递。MaxCompute数据列、分区列与日志服务字段的映射关系...
历史版本常见问题
现象描述 当分库分表列的类型是date/datetime/timestamp，且使用YYYYMM/YYYYWEEK/YYYYDAY/MMDD/MM/DD等拆分函数进行水平分区时，对于诸如 col>time1 and col的区间范围查询，有概率出现路由后部分分区缺失导致查询结果不完整的问题。...
Python SDK常见问题
问题类别 常见问题 安装PyODPS 安装PyODPS时，提示Warning:XXX not installed，如何解决？安装PyODPS时，提示Project Not Found，如何解决？安装PyODPS时，报错Syntax Error，如何解决？在Mac上安装PyODPS时，报错Permission Denied，如何...
列存索引中HashMatch算子的实现
为了解决上述问题，IMCI执行器实现了基于中间结果物化的算子集合，本文介绍了HashJoin算子的物化版本HashMatch的实现细节。设计方案 HashMatch实现主要分为build与probe两个阶段，其中build阶段将左表每一行按join谓词作为key构建出散列表...
PyODPS常见问题
问题类别 常见问题 安装PyODPS 安装PyODPS时，提示Warning:XXX not installed，如何解决？安装PyODPS时，提示Project Not Found，如何解决？安装PyODPS时，报错Syntax Error，如何解决？在Mac上安装PyODPS时，报错Permission Denied，如何...
常见问题
本文汇总了 云数据库ClickHouse 的常见问题及解决方案。选型与购买 云数据库ClickHouse和官方版本对比多了哪些功能和特性？购买实例时，推荐选择哪一个版本？单双副本实例各有什么特点？购买链路资源时显示“当前区域资源不足”，应该如何...
一键实时同步至MaxCompute
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。步骤七：执行同步任务 进入 数据集成>同步任务 界面，找到已创建的同步方案。单击...
一键实时同步至MaxCompute
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。步骤七：执行同步任务 进入 数据集成>同步任务 界面，找到已创建的同步方案。单击...
使用表格存储过程中返回503错误码
问题描述 在使用表格存储的过程中，偶尔会出现503错误，详细错误信息请参见下表。HTTPStatus ErrorCode ErrorMsg 503 OTSPartitionUnavailable The partition is not available.503 OTSServerUnavailable Server is not available.503 ...
MaxCompute近实时增全量一体化架构介绍
解决方案 MaxCompute存储引擎配套支持了合理高效的表数据服务，对存储数据进行自动治理和优化，降低存储和计算成本，提升分析处理性能。如上图所示，Transactional Table 2.0的表数据服务主要分成 Auto Sort、Auto Merge、Auto Partial ...
MaxCompute投递任务（新版）常见报错与问题
本文介绍MaxCompute投递任务（新版）的常见报错与问题。出现用户不存在错误时，如何解决？如果MaxCompute投递（新版）的执行记录中显示 ODPS-0420095:Access Denied-Authorization Failed[4002],You don't exist in project*.Context ID:...
使用SQL导入MaxCompute的数据至Hologres
注意事项 通过SQL导入MaxCompute数据至Hologres时，您需要注意如下内容：MaxCompute的分区与Hologres无强映射关系，MaxCompute的分区字段映射至Hologres为普通字段，因此支持MaxCompute分区数据导入Hologres非分区或者分区。Hologres仅支持...
离线同步常见问题
本文为您介绍离线同步的相关问题。文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步...
冷数据归档常见问题
本文汇总了 PolarDB 冷数据归档相关的常见问题。出现"[Data Lifecycle Management]DLM storage engine is not support.The value of polar_dlm_storage_mode is OFF."报错，如何处理？您需要在 PolarDB控制台 上开启冷数据归档功能。详情请...
多元索引最佳实践
主键设计对多元索引的同步速度有一定的影响，对数据表主键的要求是写入数据时要尽可能分散到数据表的不同分区，因此如果写入TPS较高时，需要尽可能分散在数据表的多个分区中，避免出现写单分区、写尾部分区等问题。目前仅支持从数据表中...
2023年
2024年1月 14.9.15.0 内核小版本 类别 说明 相关文档 发布时间 新增 支持分区表扫描算子，加速分区表执行计划的生成，解决大量分区场景下查询慢、内存消耗多的问题。分区表扫描算子 2023年12月 全局执行计划缓存功能，支持进程间共享执行...
SQL错误码（ODPS-01CCCCX）
触发条件：当批量添加同一分区时，会出现此错误。MaxCompute仅会执行接收到的第一个添加分区命令，并忽略后续请求。处理方法：避免同时对同一分区执行操作。ODPS-0110061:Failed to run ddltask-Your project is not allowed to install ...
关键缺陷通知
本文将为您介绍Hologres各版本相关缺陷的修复记录，包括问题描述、影响程度等。您可以通过报错或问题描述，检查您当前的业务中是否产生了相关问题，提前进行问题规避。建议加入实时数仓Hologres交流群联系对应技术支持协助您将产品升级到...
常见问题
比如，手动分区分别可以与单表打散或自动分区配合使用，共同帮助用户解决问题。Q：透明分布式自动分区的工作模式，默认会采用什么样的分区方案？A：自动分区的工作模工下，建表SQL在不指定分区键的情况下，PolarDB-X 会按主键（如果表没有...
常见问题
本文为您介绍数据集成任务常见问题。资源组操作及网络连通 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下...
局部事务
为了解决上述问题，您可以使用局部事务功能实现一个分区键值范围内的通用读取-修改-写回流程。使用StartLocalTransaction接口为分区键值创建一个局部事务，并获取局部事务ID。使用GetRow或GetRange接口获取数据，且在请求中需要带上局部...
错误码表（2.0版）
18056 CTAS_INSERT_TIMEOUT schema=xxx table=xxx timeoutDuration=xxx CTAS_INSERT_THREAD_ERROR message=xxx 18057 SUBPARTITION column conflicts with PARTITION column 二级分区列与一级分区列冲突，请修改。18058 No column ...
通过Holo Client读写数据
针对分区表场景，写入时能自动路由对应分区，减少分区提前创建的复杂操作。同JDBC接口一致，支持订阅Hologres Binlog，实现数据的实时消费。支持Java、C、Go等多种编程语言，提升开发的便捷性。需要注意的是，Holo Client不是替代JDBC接口...
列存索引如何实现高效数据过滤
优点是数据预先按分区键分布，通常均具有较好的过滤效果，如果用户大部分查询条件均包含分区键，并且还有按分区管理数据生命周期的需求，分区表pruning是个不错的选择，可根据需要建立一级或二级分区。minmax：一般需要该列数据分布有较好...
手动扩容云盘数据卷
随着业务发展和应用数据增长，当云盘使用空间不足时，您可以通过云盘扩容来解决磁盘容量不足的问题。但容器服务Kubernetes 1.16之前的旧版本不支持云盘自动扩容，您需要手动扩容云盘。本文介绍如何通过手动扩容云盘增加云盘空间。使用说明 ...
手动扩容云盘数据卷
随着业务发展和应用数据增长，当云盘使用空间不足时，您可以通过云盘扩容来解决磁盘容量不足的问题。但容器服务Kubernetes 1.16之前的旧版本不支持云盘自动扩容，您需要手动扩容云盘。本文介绍如何通过手动扩容云盘增加云盘空间。使用说明 ...
数据消费框架原理
背景信息 Tunnel Client可以解决全量和增量数据处理时的常见问题，例如负载均衡、故障恢复、Checkpoint、分区信息同步确保分区信息消费顺序等。使用Tunnel Client后，您只需要关心每条记录的处理逻辑。Tunnel Client的代码详情请参见 ...
MySQL分库分表同步至MaxCompute
您可以在 时间自动分区设置 配置该任务写入MaxCompute分区表或是非分区表，并定义分区字段的名称，本案例中选择写入分区表，分区字段为 ds。说明 若选择写入分区表，可单击 图标定义目标表分区字段名称。刷新源表与目标表映射。单击 刷新源...
- 产品推荐
- 这些文档可能帮助您