DTS数据迁移过程中在预检查阶段目标数据库权限检查...
问题描述 阿里云数据传输服务DTS在进行数据迁移过程中，检查目的数据库的账号权限是否满足迁移要求时，...相关文档 DTS预检查提示“源库账号缺乏sysadmin权限”错误 DTS数据迁移过程中“源库权限检查”预检查失败 适用于 数据传输服务 DTS
PolarDB处理TPC-H查询的挑战和机遇
在scan时尽早避免后续的CPU计算，在MPP系统中，可以在传输probe数据前，先传递bloom filter来减少数据传输。MySQL不存在上述问题，因为如果有主外键，它是一定是要nested loop join的。但值得一提的是，PolarDB 的hash join实现了基于bloom...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
异常处理
} } ClientException ClientException指客户端尝试向OSS发送请求以及数据传输时遇到的异常。例如，当发送请求时网络连接不可用，则会抛出ClientException。当上传文件时发生IO异常，也会抛出ClientException。OSSException OSSException指...
使用DTS数据订阅时提示“Connection timed out”错误
问题描述 在使用DTS数据订阅时，报类似如下错误。2015-11-11 16:16:36,724 INFO[com.aliyun.drc.clusterclient.partition.PartitionPool]-client partition is empty,wait partition balance 2015-11-11 16:16:46,748 INFO...
使用ossftp工具上传文件到OSS失败的解决方法
Bucket和Endpoint不匹配：OSS会为每一个存储空间（Bucket）分配默认的访问域名（Endpoint），Bucket和Endpoint不匹配就会导致上传错误。Bucket权限不正确：当Bucket读写权限设置为公共读写时，任何人（包括匿名访问者）都可以对该Bucket内...
2023年
无 2023年10月 内核小版本（V1.1.35）类别 名称 描述 相关文档 新增 ePQ支持并行写入及查询OSS外部表 弹性跨机并行查询支持并行写入及查询OSS外部表，提升冷数据归档和冷数据查询性能。ePQ支持并行写入及查询OSS外部表 2023年8月 内核小...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
本文为您介绍如何使用数据传输迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动释放...
什么是云工作流（CloudFlow）
例如图片经过人脸识别函数后，根据人脸位置剪裁图像，最后发送消息通知您，云工作流 提供了一个Serverless的解决方案，降低了您的编排运维成本。协调分布式组件 云工作流 能够协调在不同基础架构上、不同网络内，以不同语言编写的应用。...
2023年
无 2023年10月 内核小版本（V1.1.35）类别 名称 描述 相关文档 新增 ePQ支持并行写入及查询OSS外部表 弹性跨机并行查询支持并行写入及查询OSS外部表，提升冷数据归档和冷数据查询性能。ePQ支持并行写入及查询OSS外部表 Global Index支持...
常见问题
错误码 203错误 400错误 403错误 404错误 405错误 409错误 411错误 412错误 416错误 424错误 500错误 503错误 售前常见问题 在购买和使用OSS之前，建议您查阅 售前常见问题 快速了解OSS服务。计量计费常见问题 购买了资源包为何仍会欠费？...
DescribeProject-查询项目的详情
true ErrorDetail object 错误详情。Code string 错误码（新）。CM-RESOAT1111 Level string 包括 FATAL、ERROR、WARNING 和 CRITICAL。ERROR Message string 错误描述（新）。A system error occurred.ExtraContext object 用于填充 ...
2023年
2023年11月 14.9.13.0 内核小版本 类别 说明 相关文档 发布时间 新增 弹性跨机并行查询支持并行写入及查询OSS外部表，提升冷数据归档和冷数据查询性能。ePQ支持并行写入及查询OSS外部表 2023年10月 oss_fdw插件支持ZSTD压缩算法，该压缩...
离线集成管道通道配置
全局并发度配置 任务期望最大并发数 用于定义当前管道脚本中组件从源端并行读取或并行写入目标端的最大线程数。JVM配置 JVM参数 用于定义当前管道脚本所占用的JVM资源，包括CPU和内存参数。CPU Core资源最大不超过4.0Core，不支持小数和...
离线集成管道通道配置
全局并发度配置 任务期望最大并发数 用于定义当前管道脚本中组件从源端并行读取或并行写入目标端的最大线程数。JVM配置 JVM参数 用于定义当前管道脚本所占用的JVM资源，包括CPU和内存参数。CPU Core资源最大不超过4.0Core，不支持小数和...
LLM on DLC-Megatron on DLC最佳实践
预训练大语言模型面对来自于模型规模和数据规模的多重挑战，为了解决这些问题，PAI提供了在 DLC 上使用Megatron-LM进行大语言模型预训练的最佳实践。该实践通过准备镜像环境与训练数据、调整训练策略、提交与管理任务等流程，帮助您在 DLC ...
技术架构
数据传输服务（Data Transmission Service，简称DTS），支持关系型数据库、NoSQL、大数据等数据源，集数据迁移、订阅及实时同步功能于一体，能够解决公共云、混合云场景下，远距离、毫秒级异步数据传输难题。其底层基础设施采用阿里双11...
PolarDB-X间的数据实时同步
云原生分布式数据库 PolarDB-X 是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品，高度兼容MySQL协议和语法，支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离，具备数据库全生命周期运维管控能力。...
产品优势
并行备份：全程无锁备份、多线程并行备份、数据拉取自适应分片。任意时间点恢复：提供可恢复日历及时间轴选择。在进行数据恢复时，通过全量备份与增量备份实现精确到秒级的数据库恢复，最大限度保障数据安全。多规格：弹性扩展，无缝支撑...
0048-00000200
问题描述 通过OSS默认公网域名访问2023年08月15日后创建的Bucket中后缀为.apk或者.ipa的文件，服务器返回400错误。问题原因 出于安全考虑，自2023年08月15日起，针对该日期之后创建的Bucket，如果通过OSS默认公网域名（bucketname.oss-...
迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...
本文为您介绍如何使用数据传输迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
PolarDB MySQL版8.0版本内核参数发布日志
2023.12.11 类型 参数 级别 说明 新增 loose_pq_mpp_shared_subquery Global/Session 用于设置弹性并行查询（ePQ）中shared access子查询是否支持跨机并行执行。取值范围如下：OFF（默认）：弹性并行查询（ePQ）中shared access子查询不...
迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
数据集成概述
基本概念 并发数 并发数是数据同步任务中，可以从源并行读取或并行写入数据存储端的最大线程数。限速 限速是数据集成同步任务可以达到的传输速度限制。脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据...
CreateFileSystem-创建文件系统
删除错误码：202 删除错误码：400 删除错误码：403 2023-12-26 OpenAPI 错误码发生变更、OpenAPI 入参发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。删除错误码：202 删除错误码：400 删除错误码：403 入参 OpenAPI ...
CreateFileSystem-创建文件系统
删除错误码：202 删除错误码：400 删除错误码：403 2023-12-26 OpenAPI 错误码发生变更、OpenAPI 入参发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。删除错误码：202 删除错误码：400 删除错误码：403 入参 OpenAPI ...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
PolarDB MySQL版间的单向同步
相关解决方案请参见 源库存在触发器时如何配置同步作业。RENAME TABLE限制 RENAME TABLE操作可能导致同步数据不一致。例如同步对象只包含某个表，如果同步过程中源实例对该表执行了重命名操作，那么该表的数据将不会同步到目标库。为避免该...
OceanBase 数据库之间的数据迁移
本文为您介绍如何使用数据传输迁移 OceanBase 数据库的数据至 OceanBase 数据库同类型租户中。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将...
从PolarDB MySQL版同步至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB MySQL版 同步至RDS MySQL，实现增量数据的实时同步。前提条件 已购买 PolarDB MySQL版 集群，详情请参见 创建PolarDB MySQL集群。PolarDB MySQL版 集群已开启...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
从RDS MySQL同步至PolarDB MySQL版
相关解决方案请参见 源库存在触发器时如何配置同步作业。RENAME TABLE限制 RENAME TABLE操作可能导致同步数据不一致。例如同步对象只包含某个表，如果同步过程中源实例对该表执行了重命名操作，那么该表的数据将不会同步到目标库。为避免该...
PolarDB PostgreSQL版架构介绍
算子并行化 PolarDB PostgreSQL版 中有4类算子需要并行化，以下介绍一个具有代表性的Seqscan的算子的并行化。为了最大限度的利用存储的大IO带宽，在顺序扫描时，按照4 MB为单位做逻辑切分，将IO尽量打散到不同的盘上，达到所有的盘同时提供...
常见问题
解决方法：执行命令 show proc"/cluster_balance;和 show proc"/statistic;查看是否有tablet正在进行rebalance：如果有，则等待执行完成。如果没有，则可以执行命令 set disable_balance=true，然后发起创建物化视图操作。数据查询缓慢，...
PolarDB PostgreSQL版架构介绍
算子并行化 PolarDB PostgreSQL版（兼容Oracle）中有4类算子需要并行化，以下介绍一个具有代表性的Seqscan的算子的并行化。为了最大限度的利用存储的大IO带宽，在顺序扫描时，按照4 MB为单位做逻辑切分，将IO尽量打散到不同的盘上，达到...
企业版和标准版功能对比
支持 支持 弹性并行查询（ePQ）弹性并行查询（Elastic Parallel Query，ePQ）目前支持单机并行和多机并行两种并行引擎，单机并行引擎等效于原有的并行查询，多机并行引擎支持集群内跨节点的自适应弹性调度。支持 支持 SQL引擎查询优化 ...
从ECS上的自建MySQL同步至PolarDB MySQL版
通过数据传输服务DTS（Data Transmission Service），您可以将自建的MySQL数据库同步至 PolarDB MySQL版，本文以ECS上的自建MySQL为例介绍配置流程。前提条件 已创建 PolarDB MySQL版 集群，详情请参见 购买按量付费集群。注意事项 DTS在...
计划加速
QUERY PLAN-PartitionedTableScan on prt1(cost=0.00.1.00 rows=1 width=40)->Seq Scan on prt1(cost=0.00.1.00 rows=1 width=40)(2 rows)并行查询 PolarDB PostgreSQL版 支持分区表的 并行查询，它能很好的处理大规模数据的查询。...
计划加速
QUERY PLAN-PartitionedTableScan on prt1(cost=0.00.1.00 rows=1 width=40)->Seq Scan on prt1(cost=0.00.1.00 rows=1 width=40)(2 rows)并行查询 支持分区表的 并行查询，它能很好的处理大规模数据的查询。和 Append 一样，...
CREATE FUNCTION
定义新函数。...如果当前用户没有足够的特权来执行查询 emp 表的 SELECT 语句（以显示员工工资），则函数将报告错误。要指示服务器使用与定义了函数的角色关联的特权，可将 AUTHID CURRENT_USER 子句替换为 AUTHID DEFINER 子句。
- 产品推荐
- 这些文档可能帮助您