PolarDB PostgreSQL版架构介绍
还具有时空、向量、搜索、图谱等多模创新特性，可以满足企业对数据处理日新月异的新需求。PolarDB PostgreSQL版 支持多种部署形态：存储计算分离部署、X-Paxos三节点部署以及本地盘部署。本文通过以下几个方面介绍 PolarDB PostgreSQL版 的...
存储资源
存储资源是指用于存储和管理数据的硬件和软件资源，包括节点的本地磁盘、分布式文件存储、数据库和缓存等。存储资源的主要作用是存储和管理系统的数据。存储资源需要提供数据的持久性、可靠性和高效性，以满足系统的数据存储和访问需求。...
产品功能
跨数据库分布式事务 系统分库、分表后，跨库事务几乎无法避免，GTS 可以让应用轻松具备跨库事务处理能力。跨服务的分布式事务 提供跨库、跨服务的事务支持，实现业务链路级别的分布式事务。消息队列分布式事务 在多次调用消息系统的场景中...
Multi-Master基础架构
对于查询场景，部分查询的最后阶段会在Master节点上进行最终的数据处理，需要消耗一定的CPU以及内存资源。对于写入场景，大量的实时插入、更新、删除的需要高性能保证。同时并发连接数很大的情况Single-Master结构也较难处理。虽然以上问题...
PolarDB PostgreSQL版架构介绍
还具有时空、向量、搜索、图谱等多模创新特性，可以满足企业对数据处理日新月异的新需求。PolarDB PostgreSQL版（兼容Oracle）支持多种部署形态：存储计算分离部署、X-Paxos三节点部署以及本地盘部署。本文通过以下几个方面介绍 PolarDB ...
中间件产品总览
提供高可用消息云服务 任务调度 提供分布式任务调度框架 提供自动化任务调度服务 分布式事务 金融级分布式事务中间件 支持跨数据库、跨服务以及混合分布式事务 数据访问代理 通过 MySQL 协议与 RDS\OceanBase 通信 通过触发 DDL 任务管理...
分布式事务问题
数据访问代理是否支持分布式事务 数据访问代理支持与分布式事务的集成使用。版本要求：数据访问代理 V2.9.5 或更高版本 分布式事务 V2.5.2 或更高版本 具体配置信息请参考 分布式事务>开发指南>依赖与配置项。在数据访问代理 V2.9.5 之前的...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
背景信息 PolarDB-X 1.0 是由阿里巴巴自主研发的云原生分布式数据库，融合分布式 SQL 引擎和分布式自研存储 X-DB，基于云原生一体化架构设计。PolarDB-X 1.0 可以支撑千万级并发规模，以及百 PB 级海量存储。详情请参见 产品概述。PolarDB-...
网络资源
网络资源需要支持安全的数据传输和通信协议，以保护分布式系统的敏感数据和通信内容的机密性和完整性。网络资源还需要提供高带宽、低延迟和稳定的网络连接，以确保节点之间的通信和数据传输的效率和可靠性。网络资源是流量入口和数据交互的...
常见问题
如何处理分布式DDL报错：longer than distributed_ddl_task_timeout(=xxx)seconds？如何处理语法报错：set global on cluster default？有什么BI工具推荐？有什么数据查询IDE工具推荐？数据存储 如何查看每张表所占的磁盘空间？如何查看冷...
V5.2.x系列实例版本说明
V5.2.8-15432885 日期 2018.11.27 类别 说明 新增特性 支持2PC分布式事务策略。兼容分布式事务中的INSERT、REPLACE…SELECT语句。优化性能 减少清理 PolarDB-X 1.0 事务日志的周期和数据保留时间，降低RDS存储空间占用。修复问题 修复使用...
灾备方案
跨地域容灾方案★由多个子实例构成全球分布式实例，所有子实例通过同步通道保持实时数据同步，由通道管理器负责子实例的健康状态监测、主备切换等等异常事件的处理，适用于异地灾备、异地多活、应用就近访问、分摊负载等场景。单可用区高可...
连接数据库
在分布式数据库场景，Kill 语句执行成本偏高，高频执行会对数据库系统的资源消耗相对较高。因此，不推荐应用大量使用上述的超时机制连接数据库。从最佳实践来看，您的应用应该直接使用JDBC URL的socket_timeout参数（网络套接字超时参数）...
灾备方案介绍
跨地域容灾方案★由多个子实例构成全球分布式实例，所有子实例通过同步通道保持实时数据同步，由通道管理器负责子实例的健康状态监测、主备切换等等异常事件的处理，适用于异地灾备、异地多活、应用就近访问、分摊负载等场景。单可用区高可...
PolarDB-X间的数据实时同步
云原生分布式数据库 PolarDB-X 是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品，高度兼容MySQL协议和语法，支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离，具备数据库全生命周期运维管控能力。...
常见问题
而通过分布式表读数据时，默认每个shard仅会使用一个连接，此时的连接数是会少于机器数的，所以存在一些机器上的数据无法被读取的情况。代码示例如下。CREATE TABLE db.table_local(.)Engine=MergeTree()CREATE TABLE db.table_distributed...
PolarDB PostgreSQL版：ePQ架构详解
PxScan算子将shared-storage的数据映射为shared-nothing的数据，通过Worker之间的协调，将目标表划分为多个虚拟分区数据块，每个Worker扫描各自的虚拟分区数据块，从而实现了跨机分布式并行扫描。PxScan算子扫描出来的数据会通过Shuffle算...
历史记录
广播分片模型：广播任务可以通过JobContext获取 shardingNum 和 sharingId，通过自己机器的index进行数据分布式处理。分片模型增强：JobContext可以从 shardingNum 获取所有分片数量。1.2.7，2021-4-28 新特性 新增开关，可以关闭的...
基本概念
分布式链路跟踪 EDAS鹰眼监控系统能够分析分布式系统的每一次系统调用、消息发送和数据库访问，从而精准发现系统的瓶颈和隐患。分布式任务管理 SchedulerX 是阿里巴巴中间件团队开发的一款分布式任务调度产品。用户在应用中依赖SchedulerX-...
客户案例
OceanBase 兼容 MySQL5.6 版本大部分功能，完全覆盖报表业务的需求，报表业务可以像使用 MySQL 那样去使用 OceanBase，不需要业务做过多的逻辑改造，同时作为分布式关系数据库，还能够提供复杂的跨多结点的分布式 JOIN 能力，以及并行的...
Db2 for LUW同步至PolarDB-X 2.0
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库同步至 PolarDB分布式版。前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB分布式版 实例，支持的版本，请参见 同步方案概览。说明 PolarDB分布式版 需兼容...
源为PolarDB-X的任务配置方案
方案对比 对比项 方案一 方案二 性能 拆分成多个DTS任务，性能成倍增长，可承载大规模的 PolarDB分布式版 数据写入，仅配置一个以 PolarDB分布式版 为源的DTS任务，当业务系统写入源实例数据量较大时，会存在性能瓶颈。稳定性 稳定性较强。...
源为PolarDB-X的任务配置方案
方案对比 对比项 方案一 方案二 性能 拆分成多个DTS任务，性能成倍增长，可承载大规模的 PolarDB分布式版 数据写入，仅配置一个以 PolarDB分布式版 为源的DTS任务，当业务系统写入源实例数据量较大时，会存在性能瓶颈。稳定性 稳定性较强。...
Db2 for LUW迁移至PolarDB-X 2.0
数据传输服务DTS（Data Transmission Service）支持将 Db2 for LUW 数据库迁移至 PolarDB分布式版。前提条件 已创建源 Db2 for LUW 数据库和目标 PolarDB分布式版 实例，支持的版本，请参见 迁移方案概览。说明 PolarDB分布式版 需兼容...
RDS MySQL同步至PolarDB-X 2.0
通过数据传输服务DTS（Data Transmission Service），您可以将RDS MySQL同步至 PolarDB分布式版。支持的源数据库 MySQL同步至 PolarDB分布式版 实例，支持源数据库MySQL为以下类型。本文以RDS MySQL实例为例介绍配置流程，其他类型的源数据...
V5.1.x系列实例版本说明
修复分布式事务中FOR UDPATE查询返回数据错误的问题。V5.1.28-1349132 日期 2017.08.10 类别 说明 修复问题 修复由于新增关键字DB，导致无法使用DB作为列名或表名，并且影响Navicat 从 PolarDB-X 1.0 导入或导出数据的问题。修复字符串类型...
什么是MaxCompute
MaxCompute还为您提供完善的数据导入方案以及多种经典的分布式计算模型，您可以不必关心分布式计算和维护细节，便可轻松完成大数据分析。MaxCompute适用于100 GB以上规模的存储及计算需求，最大可达EB级别，并且MaxCompute已经在阿里巴巴...
技术原理
当提交一个分布式事务时，PolarDB-X 1.0 服务器会作为事务管理器的角色，等待所有数据节点（MySQL服务器）PREPARE成功，之后再向各个数据节点发送COMMIT请求。全局二级索引 全局二级索引（Global Secondary Index，GSI）支持按需增加拆分...
PolarDB-X 2.0间的迁移
是：配置ETL功能，并在文本框中填写数据处理语句，详情请参见 在DTS迁移或同步任务中配置ETL。否：不配置ETL功能。监控报警 是否设置告警，当迁移失败或延迟超过阈值后，将通知告警联系人。不设置：不设置告警。设置：设置告警，您还需要...
PolarDB-X 1.0迁移至PolarDB-X 2.0
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB分布式版 1.0迁移至 PolarDB分布式版 2.0实例。前提条件 已创建源 PolarDB分布式版 1.0和目标实例 PolarDB分布式版 2.0，且兼容MySQL 5.7版本。更多信息，请参见...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
不支持结构初始化的结构对象有：assemblies、service broker、全文索引、全文目录、分布式schema、分布式函数、CLR存储过程、CLR标量函数、CLR表值函数、内部表、系统、聚合函数。不支持同步数据类型为TIMESTAMP、CURSOR、ROWVERSION、...
如何优化数据全量抽取
并且在分布式数据库中，全表排序的吞吐无法通过增加DN数量来提高。改进方案1 每次获取下一页记录时，指定从上次结束的位置继续往后取，这样不需要设置offset，能够避免出现全表扫描的情况。如下为一个按ID进行分页查询的例子：select*from ...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
不支持结构初始化的结构对象有：assemblies、service broker、全文索引、全文目录、分布式schema、分布式函数、CLR存储过程、CLR标量函数、CLR表值函数、内部表、系统、聚合函数。不支持同步数据类型为TIMESTAMP、CURSOR、ROWVERSION、...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
不支持结构初始化的结构对象有：assemblies、service broker、全文索引、全文目录、分布式schema、分布式函数、CLR存储过程、CLR标量函数、CLR表值函数、内部表、系统、聚合函数。不支持同步数据类型为TIMESTAMP、CURSOR、ROWVERSION、...
概述
分布式（线性扩展）传统分布式数据库，业界常见基于Paxos/Raft的多副本机制构建列存，但OLTP和OLAP各自的查询场景会有不同的诉求，对资源的依赖程度也不同，不同副本之间强一致分区策略/扩缩容机制，使得TP和AP的线性扩容能力容易相互制约...
通过DTS导入数据
通过数据传输服务DTS（Data Transmission Service），您可以将 PolarDB分布式版（原DRDS）的数据导入至 AnalyticDB MySQL 湖仓版（3.0）或 数仓版（3.0），轻松实现数据的传输，用于实时数据分析。操作方法 您可以选择数据同步或数据迁移...
PolarDB-X 2.0和1.0功能对比
数据同步 PolarDB-X 1.0中的数据同步到下游，需要使用DTS来订阅其中的每一个MySQL实例，并仔细处理同一个逻辑表的不同分表之间，例如表名的差异等细节，并且在同步链路中不支持DDL操作。提供统一的Binlog服务，可以使用DTS像订阅一个单机...
私有RDS变配
操作步骤 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。找到目标 PolarDB-X 1.0 实例，单击实例ID。在左侧导航栏中单击 配置与管理>私有RDS管理。找到待变配的私有RDS实例名称，单击 升配 或 降配。说明 变更任务下达后...
PolarDB-X 2.0迁移至Elasticsearch
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB-X 2.0 迁移至 Elasticsearch 实例。前提条件 已创建源 PolarDB-X 2.0 实例，且需兼容MySQL 5.7版本。已创建目标 Elasticsearch，请参见 创建阿里云...
验证分析型查询请求能力
OceanBase 数据库采用了分布式架构，将数据分片存储在不同的节点上，通过数据分片和任务分片实现了数据和计算的并行处理。在OceanBase 中，每个节点都可以独立地执行任务，并且可以通过高速的网络互相通信，实现数据的交互和同步。PARALLEL...
- 产品推荐
- 这些文档可能帮助您