一键MaxCompute Merge任务节点问题排查方案
其后的数据处理逻辑：在T+1日的凌晨，启动Merge任务合并log表T日分区的增量数据和Base表T-1日分区中的全量数据，输出T日的全量分区数据。其过程如下图所示（分区表为例）：离线任务节点 一键实时同步到MaxCompute流程执行完成后，数据集成...
错误码
解决方案：请提交 工单，或联系Dataphin的支持人员协助处理。DPN.Bbox.MetaCenterServiceError 错误原因：元数据服务不可用。解决方案：请提交 工单，或联系Dataphin的支持人员协助处理。DPN.Bbox.ModelNotFound 错误原因：根据模型ID查询...
使用ODPS Foreign Table访问MaxCompute数据
分区外表定义时，不需要指定 partition 属性，这是因为 partition 属性标记的是末级分区外表，与分区外表在逻辑上冲突。当出现MaxCompute上不存在的分区外表，查询外表时，会告警显示，用户可以参考本章的3.5节 如何删除子分区外表 删除...
2021年
对分区表使用跨机并行查询 GLOBAL INDEX支持对分区表进行DDL操作 支持在对分区表进行DDL操作时（如DROP、SPLIT、MERGE等），操作该分区表下的所有GLOBAL INDEX。支持对分区表进行DDL操作 优化 ORA_HASH函数兼容性 ORA_HASH函数替换为DBMS_...
扩容分区和文件系统（Linux）
例如您有/dev/vdb1（主分区）、/dev/vdb2（扩展分区）、/dev/vdb5（逻辑分区）三个分区，此时您需要依次执行 growpart/dev/vdb 2、growpart/dev/vdb 5 完成分区的扩容。使用growpart工具时，如果出现报错信息，请参见 常见问题 进行排查。...
Windows主机上磁盘无法分区
概述 本文主要介绍Windows主机上磁盘无法分区的解决方案。问题症状 Windows主机上磁盘无法进行分区，系统工具操作异常。解决方案 做好快照备份，然后将基本磁盘 转换为动态磁盘，重新分区操作，恢复正常。右键单击 我的电脑 选择 管理，弹...
PolarDB PostgreSQL（兼容Oracle）2.0版本与1.0版本...
主要功能 PolarDB PostgreSQL版（兼容Oracle）2.0版本 高度兼容Oracle语法，支持Oracle常见语法特性以及分区表、事务能力、PL/SQL、包、异构连接等重要功能，并且进一步提升了高并发、高写入负载、并行查询和逻辑复制等方面的性能。...
数据脱敏
分区写法参考 分区类型 分区写法 分区示例 后N周 自定义分区字段名称=$[yyyymmdd+7*N]time=$[20190710+7*1]，表示对2019年7月10日后一周的数据进行脱敏。前N周 自定义分区字段名称=$[yyyymmdd-7*N]time=$[20190710-7*3]，表示对2019年7月10...
常见问题
本文汇总了 云数据库ClickHouse 的常见问题及解决方案。选型与购买 云数据库ClickHouse和官方版本对比多了哪些功能和特性？购买实例时，推荐选择哪一个版本？单双副本实例各有什么特点？购买链路资源时显示“当前区域资源不足”，应该如何...
通过整库迁移配置集成任务
使用最新非空分区：来源库为MaxCompute时，支持使用该表当前的最新非空分区（max_pt）作为需同步的分区，如该表不存在任何有数据的分区，则任务报错并置失败。Hive来源库不支持配置。说明 来源库为FTP时，不支持数据过滤配置。参数配置 ...
列存索引如何实现高效数据过滤
优点是数据预先按分区键分布，通常均具有较好的过滤效果，如果用户大部分查询条件均包含分区键，并且还有按分区管理数据生命周期的需求，分区表pruning是个不错的选择，可根据需要建立一级或二级分区。minmax：一般需要该列数据分布有较好...
历史版本常见问题
处理建议 临时解决方案：清理baseline/plancache或摘除有问题节点的权重。长期处理方案：将实例升级至5.4.12的最新版本。版本范围 5.4.1-*5.4.12-16444832（不包含）查询分片缺失及查询数据不正确问题 现象描述 在小于等于负整数的范围查询...
数据倾斜调优
数据倾斜排查及解决方法 根据使用经验总结，引起数据倾斜的主要原因有如下几类：Join GroupBy Count（Distinct）ROW_NUMBER（TopN）动态分区 其中出现的频率排序为 JOIN>GroupBy>Count(Distinct)>ROW_NUMBER>动态分区。Join 针对Join端产生...
Hologres数据源
Hologres数据源连通性获取Hologres端点的逻辑：当前地域的Hologres实例，Hologres端点获取顺序：any Tunnel>single Tunnel>Public（公网）。跨地域的Hologres实例，Hologres端点获取顺序：Public（公网）>single Tunnel。整库实时写 实时...
ALTER TABLE
如果指定了 IF NOT EXISTS 并且使用这个名字的列已经存在，则不会抛出错误。DROP COLUMN[IF EXISTS]这种形式从表删除一列。涉及到该列的索引和表约束也将会被自动删除。如果该列的移除会导致引用它的多元统计信息仅包含单一列的数据，则该...
错误处理
} 错误码 使用SDK时，只需要关心处理逻辑为“返回错误”的错误码，其余错误码会被SDK自动处理或重试，建议直接按相应处理逻辑处理错误码。HTTP状态码 错误码 描述 处理逻辑 400 OTSParameterInvalid API请求参数错误或数据表不存在。返回...
Linux实例的/etc/fstab文件配置错误导致系统启动异常
本节主要解决CentOS和Ubuntu系统因为/etc/fstab 配置文件错误导致启动失败的解决方法。挂载分区重启实例前，您可以通过自助诊断系统检测挂载信息是否正确，详情请参见 自助诊断系统。说明 本文相关配置及说明适用于CentOS6.5、CentOS7.0、...
云盘扩容后使用growpart扩展GPT分区失败该如何处理？
解决方案 您可以参考以下步骤，重新分区后再扩展分区，解决上述问题。远程连接ECS实例。具体操作，请参见 连接方式概述。执行以下命令，查看 etc/fstab 中/dev/vdb1 的分区信息。cat/etc/fstab 例如/dev/vdb1 分区的信息如下图所示。执行...
0007-00000205
解决方案 检查回调服务器部署的代码逻辑，或尝试使用代码、Postman等发送POST请求给回调服务器，验证响应内容是否为合法的JSON结构。更多信息，请参见 常见问题。相关文档 关于203错误的原因与解决方案，请参见 203错误。关于上传回调的...
Quick BI抽取加速时报错：分区配置错误，根据您所配置...
概述 Quick BI抽取加速时报错：分区配置错误，根据您所配置的分区没有匹配到源头表的分区。详细信息 这个抽取加速默认是T-1的，勾选了最新分区后会同步当天的分区数据，但是底表数据没有产出的话就会报错，因为底表没有对应的分区。建议...
编排逻辑流
说明 逻辑流执行过程中，如果有报错，可以通过错误处理功能排查，详细操作请参见 排查逻辑流错误。前端逻辑流和后端逻辑流的编排操作相同，请根据业务场景选择。添加异常处理 在逻辑流中可以开启异常处理，系统会自动添加异常处理节点，以...
常见问题
逻辑编排解决什么问题？逻辑编排能帮助您简化系统集成的过程。系统预置了阿里云多个产品服务的连接器（连接器固化了阿里云产品服务的调用流程）；并提供了多个场景化模板；图形化方式编排流程，让您快速上手。2.逻辑编排图形化编排能否满足...
Dataphin管道任务运行失败，提示“分区配置错误”
问题描述 Dataphin管道任务运行失败，提示“分区配置错误”。问题原因 输入配置中分区配置异常，写成了ds。解决方案 分区配置需填写具体分区，如需导入多分区，建议分任务执行。适用于 Dataphin 说明：本文适用于公共云v2.9.4-3版本数据...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
调用前端逻辑流
异常说明 错误码 说明 解决方案 RESOLVE_FAILED 传入参数设置中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。REQUEST_DENY 前端逻辑流无权限。添加自定义异常处理或为该角色配置该逻辑流...
调用后端逻辑流
异常说明 错误码 说明 解决方案 RESOLVE_FAILED 传入参数设置中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。REQUEST_DENY 后端逻辑流无权限。添加自定义异常处理或为该角色配置该逻辑流...
修改结构体对象
本文介绍逻辑流中修改结构体对象操作的主要使用方法。简介 修改结构体对象操作可...异常说明 错误码 说明 解决方案 RESOLVE_FAILED 修改值中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。
修改对象
异常说明 错误码 说明 解决方案 RESOLVE_FAILED 修改值中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。REQUEST_DENY 当前该登录角色无选中实体的修改权限。添加自定义异常处理或为该角色...
显示页面
异常说明 错误码 说明 解决方案 RESOLVE_FAILED 设置Query 中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。REQUEST_DENY 当前该登录角色无目标页面的使用权限。添加自定义异常处理或为该...
修改变量
本文介绍逻辑流中修改变量操作的主要使用方法。简介 修改变量操作可用于在当前逻辑...异常说明 错误码 说明 解决方案 RESOLVE_FAILED 修改值中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。
概述
表分区裁剪：根据过滤条件进行逻辑分区（Split）的细化匹配，提前筛选出无效的Split，降低服务端的数据出口量。Projection和Filter下推：将Projection列和Filter条件下推到服务端，降低每个分区的数据出口量。动态指定Split大小：支持调整...
显示消息
本文介绍逻辑流中显示消息操作的主要使用方法。简介 显示消息操作可用于在...异常说明 错误码 说明 解决方案 RESOLVE_FAILED 消息模板参数中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。
INSERT INTO|OVERWRITE
这是因为从同一个表的同一个分区 select 出来再 insert overwrite 回相同分区时，文件切分逻辑发生变化，从而导致数据的Size发生变化。数据的总长度在 insert overwrite 前后是不变的，您不必担心存储计费会产生问题。并发写入场景，...
打印日志
本文介绍逻辑流中打印日志操作的主要使用方法。简介 打印日志操作可用于在...异常说明 错误码 说明 解决方案 RESOLVE_FAILED 消息模板参数中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。
提交对象
异常说明 错误码 说明 解决方案 RESOLVE_FAILED 设置初始值中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。REQUEST_DENY 当前该登录角色无选中实体的创建权限。添加自定义异常处理或为该...
创建对象
异常说明 错误码 说明 解决方案 RESOLVE_FAILED 设置初始值中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。REQUEST_DENY 当前该登录角色无选中实体的创建权限。添加自定义异常处理或为该...
设置定时器
异常说明 错误码 说明 解决方案 RESOLVE_FAILED 是否只执行一次或传入参数设置中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。FLOW_CALL_DENY 调用逻辑流异常 添加自定义异常处理。
创建结构体对象
本文介绍逻辑流中创建结构体对象操作的主要使用方法。简介 创建结构体对象操作...异常说明 错误码 说明 解决方案 RESOLVE_FAILED 设置初始值中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。
清除本地存储
本文介绍逻辑流中清除本地存储操作的主要使用方法。简介 清除本地存储操作可...异常说明 错误码 说明 解决方案 RESOLVE_FAILED 属性名设置中存在表达式逻辑异常。添加自定义异常处理或检查表达式中是否存在对可能为空的对象进行了属性访问。
插入或覆写数据（INSERT INTO|INSERT OVERWRITE）
这是因为从同一个表的同一个分区 select 出来再 insert overwrite 回相同分区时，文件切分逻辑发生变化，从而导致数据的Size发生变化。数据的总长度在 insert overwrite 前后是不变的，您不必担心存储计费会产生问题。并发写入场景，...
- 产品推荐
- 这些文档可能帮助您