Window Function的并行加速
Window Function是社区版MySQL 8.0为提升查询分析能力而引入的功能，在 PolarDB MySQL版 8.0版本中对Window Function进行了全面支持，并可以做并行执行。前提条件 集群版本需为 PolarDB MySQL版 8.0 集群版，且Revision version为8.0.2.2.0...
PolarDB并行查询
在join的表集合中，寻找一个可以做逻辑分片的表做拆分，如果3个表都不足以拆分足够多的分片，那就选最多的表，比如这里选择了t2，它可能拆出12个分片，但仍然无法满足并行度16的要求，导致有4个worker读不到数据而idle。聚集操作先在worker...
PolarDB处理TPC-H查询的挑战和机遇
数据访问位置（Data Access Locality）Columnar Locality 这是列存的天然优势，紧凑的数据布局有益于cache locality，并且可以做压缩来减少IO开销。利用向量化技术以及基于SIMD指令集的计算原语，实现高效的算子内并行，提升算子执行效率。...
什么是阿里云PCDN
充分发挥P2P技术特点，在并行传输、弱网优化、下载加速等方面优势明显。体验优质 支持主流终端平台、主流内容格式的内容加速分发，均可达到等于或略高于CDN的用户体验指标。针对移动端进行多重优化，支持纯内存模式，不必读写TF或ROM，极低...
启动加速-模块并行启动
依赖树没有定义启动顺序的模块，可以并行启动，也可以串行启动。依赖树示例如下：该依赖树表示：模块 B 和模块 C 依赖模块 A 模块 F 依赖模块 E，模块 E 依赖模块 D 该依赖树会保证：模块 A 必定在模块 B 和模块 C 之前启动 模块 D 在模块 ...
传输加速
如果您希望实现Bucket远距离数据传输加速，例如从中国内地向非中国内地Bucket请求加速上传或下载文件，您可以开启传输加速。传输加速利用全球分布的云机房，将全球各地用户对Bucket的访问，经过智能路由解析至就近的接入点，使用优化后的...
并行查询
PolarDB PostgreSQL版 支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据...p3(9 rows)如上所示，整个查询使用了8个worker进行并行查询（Workers Planned:8），每个分区之间可以并行查询，每个分区内部也可以并行查询。
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地...p3(9 rows)如上所示，整个查询使用了8个worker进行并行查询（Workers Planned:8），每个分区之间可以并行查询，每个分区内部也可以并行查询。
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地...p3(9 rows)如上所示，整个查询使用了8个worker进行并行查询（Workers Planned:8），每个分区之间可以并行查询，每个分区内部也可以并行查询。
概述
正向切换是数据迁移必不可少的一个流程，通过正向切换，数据传输可以确保完成了数据正向迁移的相关工作，并且您可以根据业务需求启动反向增量组件。正向切换主要涉及的工作如下：您需要自行确认已完成数据迁移，并等待正向同步延迟被追平。...
WAL日志并行回放
则可以并行回放的子任务集合有三个：[Task 0,0 ,Task 1,0 ]、[Task 0,1 ,Task 1,1 ]、[Task 0,2 ,Task 2,0 ]。综上所述，在整个WAL日志所表示的回放子任务集合中，存在很多子任务序列可以并行执行，而且不会影响最终回放结果的...
WAL日志并行回放
则可以并行回放的子任务集合有三个：[Task 0,0 ,Task 1,0 ]、[Task 0,1 ,Task 1,1 ]、[Task 0,2 ,Task 2,0 ]。综上所述，在整个WAL日志所表示的回放子任务集合中，存在很多子任务序列可以并行执行，而且不会影响最终回放结果的...
查看数据迁移项目的详情
正向切换是数据迁移必不可少的一个流程，通过正向切换，数据传输可以确保完成了数据正向迁移的相关工作，并且您可以根据业务需求启动反向增量组件。正向切换主要涉及的工作如下：您需要自行确认已完成数据迁移，并等待正向同步延迟被追平。...
将本地表并行导出至OSS引擎
NULL|ALL|NULL|NULL|NULL|NULL|1348211|100.00|Parallel scan(4 workers)|+-+-+-+-+-+-+-+-+-+-+-+-+2 rows in set,1 warning(0.05 sec)若 Extra 列有Parallel scan，则表示当前SQL语句可以并行执行。创建导出的OSS Server，此处以创建 ...
淘宝App在短视频场景下的IETF QUIC最佳实践
多路复用：相比于HTTP/2，真正的单通道并行传输，彻底解决TCP协议中队头阻塞问题。拥塞算法：拥塞算法灵活，不需要基于内核或操作系统，可直接在应用层改造 持续在线：频繁切换网络的情况下，不会断线，不需要重连，用户无任何感知。阿里云...
DCDN为淘宝App短视频场景加速的IETF QUIC最佳实践
多路复用：相比于HTTP/2，真正的单通道并行传输，彻底解决TCP协议中队头阻塞问题。拥塞算法：拥塞算法灵活，不需要基于内核或操作系统，可直接在应用层改造 持续在线：频繁切换网络的情况下，不会断线，不需要重连，用户无任何感知。阿里云...
流程配置
任务：在阶段中具体需要完成的动作，任务之间可以串行执行也可以并行执行，目前任务包括：代码扫描、单元测试、构建、部署、合并代码、人工审核等功能。步骤：步骤作为 Flow 最底层的核心能力，所有的流水线都是通过步骤的编排组合而成的。...
计划加速
QUERY PLAN-PartitionedTableScan on prt1(cost=0.00.1.00 rows=1 width=40)->Seq Scan on prt1(cost=0.00.1.00 rows=1 width=40)(2 rows)并行查询 PolarDB PostgreSQL版 支持分区表的 并行查询，它能很好的处理大规模数据的查询。...
计划加速
QUERY PLAN-PartitionedTableScan on prt1(cost=0.00.1.00 rows=1 width=40)->Seq Scan on prt1(cost=0.00.1.00 rows=1 width=40)(2 rows)并行查询 支持分区表的 并行查询，它能很好的处理大规模数据的查询。和 Append 一样，...
深度解析PolarDB数据库并行查询技术
如何选择并行扫描的表 选择并行扫描的表是生成并行计划的重要基础，通过基于并行扫描代价的计算和比较，选择可以并行扫描的表作为候选，是并行执行计划迭代的第一步。基于新的并行代价，也许会有更优的JOIN顺序选择，尤其是当参与JOIN的表...
OSS/OSS-HDFS的性能优化最佳实践
对于高吞吐量传输，您可以根据您的ECS规格和应用程序，调整特定参数，在多个线程或多个实例中控制上传和下载数据的并发或并行度来优化吞吐量。测量性能指标 根据CPU、网络吞吐量的要求来评估不同的ECS实例规格。有关实例规格的更多信息，请...
常见问题
且数据同步基于内网传输，可以保证更低的网络延时。账户欠费有什么影响？账户欠费的影响，请参见 到期或欠费说明。如何提前释放包年包月的任务？释放包年包月的操作，请参见 退订包年包月实例。包年包月任务是否可以转成按量计费？可以。...
PolarDB MySQL版8.0.2版本发布日志
8.0.2.2.15 类别 说明 发布时间 新增功能和性能优化 读写（RW）节点和只读（RO）节点之间支持通过RDMA网络进行日志传输。支持将带有自增列的分区表和普通表归档至OSS。联邦查询引擎支持将Order语法下推至远端数据库，Order语法与Limit ...
数据传输服务概述
数据传输服务是MaxCompute数据进出的最重要通道，其中包括适用于批量操作的普通Tunnel和适用于流式写入的Stream Tunnel，同时在所有Region提供免费限量使用的数据传输服务共享资源组，也提供数据传输服务（包年包月）独享资源组，供您采购...
PolarDB MySQL版8.0.1版本发布日志
修复并行查询将GROUP BY下推到Worker上去并行执行时，在有分区表的情况下，返回结果集中存在分组重复的问题。修复执行 EXCHANGE PARTITION 操作时，因索引顺序不同导致索引损坏，无法访问表数据的问题。修复主键不包含分区键的分区表在使用...
数据传递
并行（Parallel）状态：同一份输入，将会被深拷贝后同时传输给多个分支。输出将会被收集为Map[String]Any的形式，其中Key是每个Parallel分支的隐式名称“Branch0～BranchN”，对应Value是每个Parallel分支实际的处理结果。循环（Map）状态...
购买与使用独享数据传输服务资源组
当您在MaxCompute中需要对大规模数据进行传输且对传输稳定性和延迟有要求时，您可以使用独享数据传输服务资源组。独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件，以减少传输时间并提高效率。本文为您介绍如何购买、...
推荐的性能设计模式
对于某些应用程序，您可以通过在不同的线程或实例中同时启动多个请求来实现并行连接。扩展策略取决于您的应用程序和您访问的对象的结构。当您要调整并发的请求数时，性能测量非常重要。建议从单个请求开始，测量当前的网络带宽以及其他资源...
PolarDB PostgreSQL版架构介绍
同时，PolarDB PostgreSQL版 具有大规模并行计算能力，可以应对OLTP与OLAP混合负载。还具有时空、向量、搜索、图谱等多模创新特性，可以满足企业对数据处理日新月异的新需求。PolarDB PostgreSQL版 支持多种部署形态：存储计算分离部署、X-...
PolarDB PostgreSQL版架构介绍
同时，PolarDB PostgreSQL版（兼容Oracle）具有大规模并行计算能力，可以应对OLTP与OLAP混合负载。还具有时空、向量、搜索、图谱等多模创新特性，可以满足企业对数据处理日新月异的新需求。PolarDB PostgreSQL版（兼容Oracle）支持多种部署...
常见问题
任务并行度 在Partition数量和BE数量较多时，您可以调大以下参数来加速任务执行。但是，增加并行度可能会带来更多的CPU资源消耗。max_routine_load_task_concurrent_num desired_concurrent_number 单个Routine Load任务会根据Kafka Topic ...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
配置同步任务（新控制台）
数据传输服务DTS（Data Transmission Service）提供的数据同步功能简单易用，您只需在新版控制台上进行简单操作，即可完成整个数据同步作业的配置。注意事项 本文仅简单介绍数据同步任务的通用配置流程，不同的同步链路在配置数据同步任务...
查看数据校验详情
本文介绍如何查看数据传输服务DTS（Data Transmission Service）数据校验任务的详情。前提条件 已创建并配置数据校验任务，详情请参见 配置数据校验。注意事项 在DTS同步或迁移实例中配置的校验任务，支持在实例详情和校验任务列表查看；...
创建DTS专属集群
您可以选择创建DTS专属集群，然后在专属集群中配置DTS任务（迁移、同步、订阅），以实现DTS任务间的隔离，从而提升DTS任务的稳定性。前提条件 如果使用RAM用户创建DTS专属集群，其阿里云主账号需要有 AliyunDTSDefaultRole 的默认角色权限...
PolarDB MySQL版8.0版本内核参数发布日志
2023.12.11 类型 参数 级别 说明 新增 loose_pq_mpp_shared_subquery Global/Session 用于设置弹性并行查询（ePQ）中shared access子查询是否支持跨机并行执行。取值范围如下：OFF（默认）：弹性并行查询（ePQ）中shared access子查询不...
创建任务工作负载Job
2+1 固定结束次数的并行Job 多个Pod同时处理工作队列 依次创建多个Pod运行直至Completions个成功结束 2+2+并行Job 多个Pod同时处理工作队列 创建一个或多个Pod直至有一个成功结束 1 2+操作步骤 说明 本例中创建的任务属于固定结束次数的...
快速入门
并发控制策略 当两个任务流中的一个任务流中已有正在运行的实例时，再次运行时您可以选择如下策略：跳过：不运行该任务流，直接跳过。忽略：直接运行该任务流（请确认之前的执行实例不会收到影响）。并行：并行运行两个任务流。并行模式1：...
技术原理
PolarDB-X 1.0 控制台上创建 PolarDB-X 1.0 数据库时，在选定一个数据库实例的情况下，可以选择将底层数据库实例下的一个逻辑数据库直接引入 PolarDB-X 1.0 做读写分离，不需要做数据迁移。分布式事务 分布式事务通常使用二阶段提交来保证...
配置迁移任务（新控制台）
数据传输服务DTS（Data Transmission Service）提供的数据迁移功能简单易用，您只需在新版控制台上进行简单操作，即可完成整个迁移任务的配置。注意事项 本文仅简单介绍数据迁移任务的通用配置流程，不同迁移链路在配置迁移任务时略有不同...
- 产品推荐
- 这些文档可能帮助您