概述
分片网关 分片网关根据设定的分片维度对任务数据进行拆分，动态生成需要执行的分片数，成对出现。在拓扑图中使用分片网关时，需要在分片网关的开始节点配置分片维度。拓扑任务执行过程中，会根据拓扑任务执行上下文获取对应的分片配置，...
分库分表问题
常见分库分表问题列表：分库分表是否支持多个拆分字段 分库分表是否支持跨库 JOIN 分库分表对拆分库表的数量是否有限制 分库分表是否支持多个拆分字段 数据访问代理分库分表功能支持多个拆分字段，但是如果配置了拆分字段，后续执行 SQL 均...
应用场景
但是水平拆分后，单表的数据被分散到多个库的表中，原来对单表多行数据进行的变更，可能会变为对多库多表的数据变更，即单机本地事务变成了分布式事务。使用分布式事务能够轻易获得分布式事务处理能力。如果交易服务使用数据访问代理来分库...
基于OSS外表的单表多文件查询
说明 拆分CSV格式的文件时，必须按照完整的一行数据进行拆分，不能从一行数据中间进行拆分，需要保证每一个OSS数据文件的完整性。文件命名规则如下：使用OSS外表的建表语句 CONNECTION 参数中配置的文件名称。如果该参数中没有配置文件名称...
DescribeDrdsDB
InstRole String MASTER 数据库所属的实例类型，取值范围如下：MASTER：主实例 SLAVE：只读实例 Mode String HORIZONTAL 数据库拆分方式，取值范围如下：HORIZONTAL：水平拆分 VERTICAL：垂直拆分 Schema String db_test*数据库物理名。...
DescribeDrdsDBs
Mode String HORIZONTAL 数据库拆分模式，取值范围如下：HORIZONTAL：水平拆分 VERTICAL：垂直拆分 DbInstType String RDS 数据库类型，取值为 RDS或 POLARDB。示例 请求示例 http(s):/[Endpoint]/?Action=DescribeDrdsDBs&DrdsInstanceId=...
概述
列存架构 架构理念 随着云原生技术的不断普及，以Snowflake为代表的新一代云原生数仓以及数据库HTAP架构不断创新，可见在未来一段时间后行列混存HTAP将会成为一个数据库的标配能力，需要在当前数据库列存设计中面向未来的低成本、易用性、...
条形图
可选择字符型字段到拆分框，以该字段下数据，拆分出多条折线进行展示。Y轴和拆分仅支持添加一个字段，X轴可添加多个字段 Y轴 拆分 筛选 添加时间型或数值型字段，配置过滤条件，展示特定数据。更多信息，请参见 指标卡的配置字段。（可选）...
拆分函数概述
拆分方式 在 PolarDB-X 1.0 中，一张逻辑表的拆分方式由拆分函数（包括分片数目与路由算法）与拆分键（包括拆分键的 MySQL 数据类型）共同定义。只有当 PolarDB-X 1.0 使用了相同的拆分函数和拆分键时，才会被认为分库与分表使用了相同的...
标准架构
Tair 标准架构具有数据高度一致、架构简单、性价比高等特点，可满足多种场景下的需求，但标准架构不支持增加数据分片或只读节点，仅提供高可用（双副本）与单副本实例类型。说明 如需增加数据分片或实现读写分离，请选择 集群架构 或 读写...
Lateral View
功能介绍 直接在 select 语句中使用UDTF会存在限制，为解决此问题，您可以通过MaxCompute的Lateral View与UDTF结合使用，将一行数据拆成多行数据，并对拆分后的数据进行聚合。当您定义的UDTF不输出任何一行时，对应的输入行在Lateral View...
系统架构
本文为您介绍云数据库Memcache的系统架构。简介 云数据库Memcache版采取集群版架构。云数据库Memcache版内置数据分片及读取算法，整体过程对用户透明，免去用户开发及运维烦恼。每个分片节点采取主备架构保证服务高可用。系统架构 云数据库...
Lateral View
功能介绍 直接在 select 语句中使用UDTF会存在限制，为解决此问题，您可以通过MaxCompute的Lateral View与UDTF结合使用，将一行数据拆成多行数据，并对拆分后的数据进行聚合。当Lateral View命令格式中含有 outer 关键字（即 lateral view ...
水平拆分（PL/Proxy）
CLUSTER模式测试 数据水平拆分测试步骤如下：在每个数据节点创建插入函数，示例如下：pl_db0=>CREATE OR REPLACE FUNCTION insert_user(i_id int,i_name text)pl_db0->RETURNS integer AS$pl_db0$>INSERT INTO users(userid,name)VALUES($1...
表删除，更新和合并
架构验证 merge自动验证通过插入和更新表达式生成的数据的架构是否与表的架构兼容。它使用以下规则来确定merge操作是否兼容：对于update和insert操作，目标Delta表中必须存在指定的目标列。对于updateAll和insertAll动作，源数据集必须具有...
什么是云数据库Redis版
云数据库Redis版（ApsaraDB for Redis）是兼容开源Redis协议标准的数据库服务，基于双机热备架构及集群架构，可满足高吞吐、低延迟及弹性变配等业务需求。为什么选择云数据库Redis版 硬件部署在云端，提供完善的基础设施规划、网络安全保障...
概述
产品特点 高可扩展性：采用分层架构、数据分片存储等方式，突破单机性能与容量瓶颈，接近理论上的“无限水平扩展”。经受过蚂蚁集团生产环境海量节点数与服务数的考验。高时效性：借助 SOFABolt 通信框架，实现基于 TCP 长连接的节点判活与...
读写分离架构
只读节点均从主节点同步数据，为星型复制架构，数据同步延迟远小于 经典 版链式复制架构。支持自定义只读节点数量，范围为1~9个。承担读请求的处理，特点如下：只读节点采取链式复制架构，当只读节点数越多，靠近链路末端的只读节点数据...
CreateDrdsDB
InstDbName.N.ShardDbName.N String 否["db1","db2"]参数表示对应RDS实例中需要垂直拆分的数据库列表，参数是一个符合JSON数组格式的字符串。该参数仅在垂直拆分时使用。返回数据 名称 类型 示例值 描述 Success Boolean true 请求结果。...
读写分离版
只读节点均从主节点同步数据，为星型复制架构，数据同步延迟远小于 经典 版链式复制架构。支持自定义只读节点数量，范围为1~9个。承担读请求的处理，特点如下：只读节点采取链式复制架构，当只读节点数越多，靠近链路末端的只读节点数据...
实例选型和集群规划
Segment节点数量：采用MPP架构，数据处理能力随实例节点数量增加而线性增长，保证数据量增加而响应RT时间不变。可以参照原始数据量及应用场景，选择适合的实例节点数。存储类型：ESSD：可以提供更好的I/O能力，带来更高的分析性能，适用于...
在TairSearch中使用Msearch实现索引分片搜索
图 1.TairSearch数据在TairProxy架构的写入流程 当客户端发送读请求（TFT.MSEARCH）给TairProxy后，TairProxy会将请求分发给各个对应的数据分片节点，数据分片节点会完成各个Key的查询与首次汇总，并将结果集返回给TairProxy，此时，...
云数据库Redis版产品选型必读
选择部署架构 云数据库Redis支持 标准架构、集群架构 和 读写分离架构，可满足不同的业务场景对业务读写能力、数据量和性能的要求。选择容灾方案 当云数据库Redis实例因不可预料的原因（例如设备故障、机房断电等）发生故障，容灾机制可...
什么是云数据库ClickHouse
产品架构 企业版架构 云数据库ClickHouse 企业版采用云原生存储与计算资源分离架构打造，支持进行独立的存储和计算资源的扩容，存储和计算资源Serverless 模式按需弹性使用。具体特点如下：存储资源采用多分片（Shard）和副本（Replica）的...
云数据库Redis实例间单向数据迁移
如果您需要将一个 云数据库 Redis 版 实例的数据迁移到另一个 云数据库 Redis 版 实例中，且您未创建新实例，推荐您通过 备份集克隆、数据闪回功能 将数据克隆至新实例，若您已创建新实例，建议您通过数据传输服务DTS（Data Transmission ...
产品优势
云数据库MongoDB版（ApsaraDB for MongoDB）是阿里云基于飞天分布式系统和高可靠存储引擎研发的完全兼容MongoDB协议，并支持多节点高可用架构、弹性扩容、容灾、备份恢复、性能优化等功能的文档数据库服务。灵活的部署架构 云数据库MongoDB...
内存型
数据结构模块集成 集成多个自研的Redis模块，包括 exString（包含 Redis String命令增强）、exHash、GIS、Bloom、Doc、TS、Cpc、exZset、Roaring、Vector 和 Search，扩展了Redis的适用性，使业务无需再关心存储的结构和时效性，能够极大...
什么是PolarDB MySQL标准版
PolarDB MySQL版 的标准版采用计算与存储分离的架构，数据库代理和计算节点分别采用独立的ECS进行部署，共享存储层使用ESSD云盘，极大的降低了用户使用 PolarDB 的成本。说明 上述产品架构为一写多读的多节点架构。如果您购买标准版时选择...
入门概述
部署架构 云数据库MongoDB具有可灵活部署的架构，能够满足不同的业务场景。具体如下：单节点架构 适用于开发、测试、学习培训及其他非企业核心数据存储的场景。您可以根据各类场景的差异适配对应的规格配置，为企业降低更多的成本支出。...
内存型
数据结构模块集成 集成多个自研的数据模块，包括 exString（包含 Redis String命令增强）、exHash、GIS、Bloom、Doc、TS、Cpc、exZset、Roaring、Vector 和 Search，扩展了Redis的适用性，使业务无需再关心存储的结构和时效性，能够极大...
步骤一：架构规划
应用名 Zone 类型 txnflow RZone acccenter RZone pointcenter RZone 数据拆分 在本教程中，uid 格式如：08006660000*，按照 uid 进行 10 库 10 表拆分。使用的中间件 中间件 配置信息 备注 消息队列 TopicGroupID 创建 topic、groupid 和...
数据集成：全领域数据汇聚
核心技术与架构 引擎架构 采用星形引擎架构，数据源接入数据集成后，即可与其他各类型数据源组成同步链路进行数据同步。当前支持的数据源请参见 支持的数据源与读写插件、实时同步支持的数据源。数据集成资源组与网络连通 如上图所示，进行...
企业版及社区兼容版功能对比
本文将介绍 云数据库ClickHouse 企业版和社区兼容版的产品架构、内核版本的对比。产品架构对比 企业版架构 云数据库 ClickHouse 企业版 采用云原生存储与计算资源分离架构，且存储资源和计算资源均采用Serverless模式，该模式下可按需弹性...
创建调度任务
并行执行索引块数量上限：配置集群最大并行索引块（chunk，单个执行步骤中对任务进行拆分的数据分片）数量。索引块在客户端平均分配。假设单台并行索引块数量上限为 x，集群并行执行索引块数量上限为 y，客户端数量为 m，则单台客户端实际...
创建Vertica数据源
通过创建Vertica数据源能够实现Dataphin读取Vertica的业务数据或向Vertica写入数据。本文为您介绍如何创建Vertica数据源。背景信息 Vertica是一款基于列存储架构的数据库。如果您使用的是Vertica，在对接Dataphin进行数据开发时，您需要先...
创建Vertica数据源
通过创建Vertica数据源能够实现Dataphin读取Vertica的业务数据或向Vertica写入数据。本文为您介绍如何创建Vertica数据源。背景信息 Vertica是一款基于列存储架构的数据库。如果您使用的是Vertica，在对接Dataphin进行数据开发时，您需要先...
将ECS上分片集群架构的自建MongoDB迁移上云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将ECS上分片集群架构的自建MongoDB数据迁移至阿里云MongoDB实例中。通过DTS的增量迁移功能，可以实现在应用不停服的情况下，平滑完成数据库的迁移。本文为旧版DTS迁移操作...
管理数据
企业管理员使用数据域可以基于业务属性、组织架构、数据特征等维度对数据资产进行分类管理。通过将拥有共同属性的数据资产集中到同一个数据域中，管理员可以高效管理数据资产及资产中的敏感数据。本文介绍首次使用数据域功能的具体操作。...
单元化介绍
单元化 多地多机房部署，是互联网系统的必然发展方向，一个系统要走到这一步，也就必然要解决上面提到的问题：流量调配、数据拆分、延时等。业界有很多技术方案可以用来解决这些问题，而承载这些方案的，是一个部署架构。尽管可采用的部署...
PolarDB PostgreSQL版架构介绍
PolarDB PostgreSQL版 是一款阿里云自主研发的企业级数据库产品，采用计算存储分离架构，兼容PostgreSQL与Oracle。PolarDB PostgreSQL版 的存储与计算能力均可横向扩展，具有高可靠、高可用、弹性扩展等企业级数据库特性。同时，PolarDB ...
- 产品推荐
- 这些文档可能帮助您