通过DTS导入数据
操作方法 您可以选择数据同步或数据迁移任意一种方式，将 PolarDB分布式版 数据导入至 AnalyticDB MySQL 湖仓版（3.0）或 数仓版（3.0）。具体操作，请参见：PolarDB-X同步至AnalyticDB MySQL 3.0。PolarDB-X迁移至AnalyticDB MySQL 3.0。
创建应用
事务数据存储位置：选择 异库存储，表示事务存储在事务服务器端。异库存储下，无需进行发起方、参与方配置。Client 通过长连接把日志送到 Server 端，存储在 Server 端的数据库中。适合需要将业务数据单独存储的场景。拆分模式：选择 单库...
使用Stage和Task详情分析查询
AnalyticDB for MySQL 在前端接入节点接收到查询请求后，会将查询切分成多个Stage，在存储节点（Worker节点）和子任务执行节点（Executor节点）分布式进行数据的读取和计算。部分Stage可以并行执行，但部分Stage之间存在依赖关系，只能串行...
数据建模诊断
复制表合理性诊断 AnalyticDB MySQL版 在创建表时可以指定数据的分布方式为复制方式（DISTRIBUTED BY BROADCAST），复制表会在实例的每个存储节点保存一份完整的表数据，您在使用其他表和复制表JOIN时，不需要在网络间对复制表进行重分发，...
移除分布式实例
分布式实例不支持直接释放，若您需要释放闲置的 云原生内存数据库Tair 分布式实例资源，您可以移除或释放分布式实例下各子实例，以节省资源。注意事项 在移除或释放实例的过程中，分布式实例中未被操作的实例可正常访问，不会发生闪断。...
移除分布式实例
分布式实例不支持直接释放，若您需要释放闲置的 云原生内存数据库Tair 分布式实例资源，您可以移除或释放分布式实例下各子实例，以节省资源。注意事项 在移除或释放实例的过程中，分布式实例中未被操作的实例可正常访问，不会发生闪断。...
无感集成（Zero-ETL）
id 分布键 数据表中的一个或多个字段，用来确定数据在分布式环境下的存储位置。id 类型 数据分区类型。哈希分布表 定义状态 定义完库表字段配置状态后，即从未定义变为已定义。已定义 配置完所有资源后，请单击 下一步保存任务并预检查。预...
管理缓存
Alluxio利用E-MapReduce（简称EMR）集群的本地节点的内存和磁盘对数据进行分布式缓存。本文为您介绍缓存相关的内容。前提条件 已创建集群，并选择了Alluxio服务，详情请参见 创建集群。已登录集群，详情请参见 登录集群。背景信息 EMR默认...
数据分布策略
AnalyticDB PostgreSQL版 支持三种数据在节点间的分布方式，分别是哈希（HASH）分布、随机（RANDOMLY）分布、复制（REPLICATED）分布。语法 CREATE TABLE table_name(.)[DISTRIBUTED BY(column[,.])|DISTRIBUTED RANDOMLY|DISTRIBUTED ...
新建 PolarDB-X 2.0 数据源
背景信息 云原生数据库 PolarDB 分布式版（简称 PolarDB-X）是由阿里巴巴自主研发的云原生分布式数据库，为您提供高吞吐、大存储、低延时、易扩展和超高可用的云时代数据库服务。详情请参见 什么是云原生数据库 PolarDB 分布式版。前提条件...
企业版产品系列
数据库的计算节点仅存储元数据，而将数据文件、Redo Log等存储在共享分布式存储（PolarStore）的数据库存储节点中。各计算节点之间仅需同步Redo Log相关的元数据信息，极大降低了主节点和只读节点间的复制延迟，而且在主节点故障时，只读...
Join优化
Shuffle方式概述 作为分布式的MPP数据库，SelectDB在Join的过程中需要先进行数据的Shuffle，然后才调用物理算子进行处理。SelectDB现阶段支持4种Shuffle方式，以下举例说明。例如表S和表R进行Join，N表示参与Join计算的节点的数量，T则表示...
产品优势
高可靠 通过分布式架构、数据三备份、消息At-least-once delivery、Failover和定期轮检等手段，保证任务调度和运行的高可靠。高性能 支持秒级别调度，轻量级分布式计算可以帮助您完成准实时的大数据跑批。节约成本和提升效率 无机器和人工...
SQL 路由
拆分键 分库分表过程中，数据访问代理按照指定的拆分键，采用特定的算法进行计算，然后根据计算结果将数据存储到对应的分表中。拆分键是数据访问代理中数据分布和 SQL 路由的凭证。SQL 路由 当用户发起执行 SQL 语句的请求时，数据访问代理...
表格存储建表注意事项
放开表个数的需求一般有以下几种情况：数据量大、访问性能要求高 不同于传统的SQL数据库（例如MySQL）解决海量数据访问需求的方法是分库分表，表格存储作为分布式实现方式很好地解决了数据量及访问延迟的瓶颈。您可以将结构化或半结构化的...
与TSDB的功能对比
Java SDK Java SDK 数据模型 半结构化的 时序数据表 模型 OpenTSDB风格的时序数据模型 存储引擎 自研的分布式时序存储引擎 基于HBase的KV存储引擎 预计算能力 原生支持 Continuous Query 存储引擎层面数据预降精度能力 不支持 TTL能力 支持...
计算设置概述
设置Dataphin实例的计算引擎为Hadoop CDH5.x Hadoop CDH6.x Hadoop 全球应用较广的分布式系统基础架构，核心为HDFS和MapReduce，提供了海量数据存储与计算。全球应用较广的分布式系统基础架构，核心为HDFS和MapReduce，提供了海量数据存储...
分布式序列
数据访问代理提供了生成分布式环境下的分布式唯一序列（Sequence）的能力，该序列有全局唯一、全局递增的特性，常用于分库分表下的主键、业务主键生成的场景。重要 数据访问代理分布式序列功能是基于数据库实现，如果需要使用该功能，需要...
通过LOCALITY指定存储位置（DRDS模式）
数据库中分布式表的存储位置与该库的存储位置保持一致，以实现分表上的数据隔离。数据库中单表的存储位置不受所在数据库存储位置的影响。创建单表时若未指定存储位置，则会被随机放置在一个存储节点上，且后续该 PolarDB-X 实例上创建的...
方案选择
伴随着订单数据量的增加，采取分库分表方案应对，通过这种伪分布式方案解决数据膨胀带来的问题。但数据一旦达到瓶颈，便会出现明显的弊端。数据纵向（数据规模）膨胀：采用分库分表方案，MySQL在部署时需要预估分库规模，数据量一旦达到...
离线同步并发和限流之间的关系
限制和最佳实践：分布式执行模式下，配置较大任务并发度可能会对您的数据存储产生较大的访问压力，请评估数据存储的访问负载。如果您的独享资源组机器台数为1，不建议使用分布式执行模式，因为执行进程仍然分布在一台Worker节点上，无法...
多语言版本分片模型
动态分片：主要场景是分布式处理未知数据量的数据，例如一张大表在不停变更，需要分布式跑批。主流的框架为SchedulerX提供的MapReduce模型，目前还没有对外开源。功能特性 多语言版本分片模型还具有以下特性。兼容elastic-job的静态分片...
管理敏感数据
说明 开通免费试用后，系统会根据您提供的用户名和密码抽取目标数据库中的元数据和少量随机数据用于敏感数据分析，这些数据不会被存储和修改。您可以在页面中查看到数据库相关信息和数据库中敏感数据的扫描结果。如需对扫描出来的敏感数据...
实例介绍
数据访问代理实例在物理上是由多个数据访问代理服务器节点组成的分布式集群。数据访问代理的数据库是逻辑概念，只包含元信息，具体数据由后端连接的物理库存储。目前，只提供 专享实例 类型的数据访问代理实例。用户专享的数据访问代理集群...
引擎类型
计算引擎是基于云原生架构提供的分布式计算服务，支持社区版计算模型以及编程接口，同时深度融合Lindorm存储引擎特性，利用底层数据存储特征以及索引能力，高效地完成分布式作业任务。流引擎 兼容SQL、Kafka接口 IoT数据处理、应用日志处理...
产品整体介绍
在第三方认证层面，AnalyticDB PostgreSQL版 通过了“国际数据库TPC官方TPC-H 30TB认证”（性价比综合排名第一），信通院“分布式事务型数据库基础能力评测”（TPC-C）和“分布式分析型数据库大规模性能认证”（640节点 TPC-DS 100TB）。...
概述
背景信息 Flink核心是一个流式的数据流执行引擎，其针对数据流的分布式计算提供了数据分布、数据通信以及容错机制等功能。基于流执行引擎，Flink提供了更高抽象层的API以便您编写分布式任务。Flink（VVR）完全兼容开源Flink，相关内容请...
常见问题
DAS企业版 V3超出最近7天的数据，采用的存储方式是冷数据存储，相较DAS企业版 V1数据的存储方式，数据没有全文索引等信息，并且底层采用snappy对数据进行高效压缩，所以数据量最多可降低为旧版的30%，从而极大降低了存储成本。如何查看企业...
多语言版本分片模型
动态分片：主要场景是分布式处理未知数据量的数据，例如一张大表在不停变更，需要分布式跑批。主流的框架为SchedulerX提供的MapReduce模型，目前还没有对外开源。功能特性 多语言版本分片模型还具有以下特性。兼容elastic-job的静态分片...
创建同步任务
通常，网卡流量是通道流量膨胀的1至2倍，实际流量膨胀取决于具体的数据存储系统传输序列化情况。错误记录数控制（脏数据控制）用于定义脏数据阈值，及对任务的影响。重要 当脏数据过多时，会影响同步任务的整体同步速度。不配置时默认允许...
云监控控制台查看监控
分布式表文件个数 向分布式表写数据时待插入数据的文件个数。失败Query个数 查询失败的语句个数。MaterializeMySQL同步个数 使用MaterializeMySQL引擎创建的同步数据库个数。失败Insert Query个数 插入失败的语句个数。Kafka外表个数 已...
功能特性
分布式事务（Distributed Transaction-eXtended，简称 DTX）是蚂蚁集团自主研发的金融级分布式事务中间件，支持跨数据库、跨服务以及混合的方式处理分布式应用，具备多种接入模式和金融级配套功能，本文将主要介绍分布式事务的功能特性。...
产品概述
高可用，服务永远在线 支持分布式事务，数据ACID一致性支持，所有节点和数据跨机器冗余部署，任意硬件故障，自动化监控切换，保持服务在线。广泛生态兼容 支持主流BI、ETL工具。通过PostGIS插件支持地理信息数据分析，MADlib库内置超过300...
存储空间分析
说明 热数据的相关信息，请参见 数据存储冷热分离。冷数据量 AnalyticDB for MySQL 集群所有表的冷数据量。说明 数仓版（3.0）预留模式集群不支持冷热数据分离，因此不显示冷数据量。冷数据的相关信息，请参见 数据存储冷热分离。热数据量 ...
产品架构
Shared Disk/Storage（共享存储）有一个分布式的存储集群，每个计算节点像访问单机数据一样访问这个共享存储上的数据。这种架构的存储层可以比较方便的扩展，但是计算节点需要引入分布式协调机制保证数据同步和一致性，因此计算节点的可...
产品概述
时间序列数据库(Time Series Database,简称 TSDB)是一种高性能、低成本、...TSDB是一个分布式时间序列数据库，具备多副本高可用能力。同时在高负载大规模数据量的情况下可以方便地进行弹性扩容，方便用户结合业务流量特点进行动态规划与调整。
产品概述
数据使用简单可依赖：通过主题式数据查询服务，您可以快速查询和访问研发构建的数据逻辑表，简化约80%的查询代码。同时，Dataphin可以为您提升构建数据体系的效率，降低成本：提升效率：提供全链路、一站式、智能化的数据建设与治理工具，...
Cassandra数据建模
Cassandra是一款分布式、去中心化、高可用的列存储（Wide Column Store）的No SQL数据库。分布式层面主要依靠一致性Hash算法把数据分布在整个集群中，单机主要实现了基于LSM-Tree的引擎。集群中的每个节点将整个Hash范围均匀地分担，每个...
验证分析型查询请求能力
OceanBase 数据库采用了分布式架构，将数据分片存储在不同的节点上，通过数据分片和任务分片实现了数据和计算的并行处理。在OceanBase 中，每个节点都可以独立地执行任务，并且可以通过高速的网络互相通信，实现数据的交互和同步。PARALLEL...
分布式链路概述
分布式链路（原 SOFAStack 中间件中的 概述）会逐步融合到业务智能可观测服务中，实现监控和链路分析一体化，方便用户对问题进行跟踪定位，对应用性能、调用链路进行实时分析。背景信息 分布式链路是面向分布式架构、微服务（比如 Spring ...
- 产品推荐
- 这些文档可能帮助您