元数据中心
元数据的本质就是用来管理各个实体以及各个实体之间的关联关系，RMS 的元数据中心支持多种方式对接元数据信息：支持对接第三方 CMDB 系统来接入元数据。支持对接 SPI 接口的方式对接客户的发布平台接入元数据。支持对接客户的 kubeconfig，...
管理数据架构待发布对象
前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，进入发布包 总览 管理页面。单击 数据架构 页签，进入待发布 数据架构 对象页面。管理数据架构待发布对象 待发布数据架构页面主要由搜索与...
管理数据架构待发布对象
前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，进入发布包 总览 管理页面。单击 数据架构 页签，进入待发布 数据架构 对象页面。管理数据架构待发布对象 待发布数据架构页面主要由搜索与...
应用场景
应用程序只需配置一个连接地址，无需修改代码即可将业务平滑扩展到更多地域，从1个数据中心，扩展到2个、3个甚至更多的数据中心。上海、深圳的集群规格无需与北京保持一致，可以灵活选择。部署流程 创建一个GDN，将已有集群作为GDN中的主...
数据传输服务
支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建安全、可扩展、高可用的数据架构。
应用场景
云数据库Cassandra可以很容易添加新的数据中心，不同的数据中心可以设定不同的副本数，既可以作为跨数据中心多活高可用，也可以作备份容灾或离线分析使用。业务灵活多变 云数据库Cassandra的数据模型灵活，对表结构的变更是一个非常轻量级...
系统架构
如下架构图：有两个DC，DC1有4个节点组成，DC2有4个...不同的数据中心可以设定不同的复本数，既可以作为跨数据中心容灾，也可以作备份或离线分析使用。节点 其中，存储空间：一个节点为 160GB~16TB，500个节点，也就是8000TB，大约8PB左右。
Tair命令概览
Hash增强 exHash 无 TairHash支持为field设置过期时间和版本，提高了Hash数据结构的灵活性，简化了很多场景下的业务开发工作。该数据结构已开源，更多信息请参见 TairHash。最佳实践：基于TairHash实现用户多设备登录管理。Zset增强 exZset...
Tair扩展数据结构概览
Hash增强 exHash 无 TairHash支持为field设置过期时间和版本，提高了Hash数据结构的灵活性，简化了很多场景下的业务开发工作。该数据结构已开源，更多信息请参见 TairHash。最佳实践：基于TairHash实现用户多设备登录管理。Zset增强 exZset...
什么是Dataphin
运维中心 资产全景及目录 支持采集、解析和管理基础数据中心、公共数据中心、萃取数据中心的元数据。在元数据中心基础上，深度分析元数据，实现数据资产化管理。为您可视化地呈现资产分布、元数据详情等，方便您快速查找、深度了解数据资产...
概述
地域和可用区 地域是指物理的数据中心。可用区是指在同一地域内，拥有独立电力和网络的物理区域。更多信息请参见 阿里云全球基础设施。控制台 阿里云提供了简单易用的Web控制台，方便您操作阿里云的各种产品和服务，包括云数据库 PolarDB。...
概述
地域和可用区 地域是指物理的数据中心。可用区是指在同一地域内，拥有独立电力和网络的物理区域。更多信息请参见 阿里云全球基础设施。控制台 阿里云提供了简单易用的Web控制台，方便您操作阿里云的各种产品和服务，包括云数据库 PolarDB。...
技术面临的挑战与革新
当前的数据中心已经有了25G，50G和100G的网络，系统瓶颈也逐渐变成了资源使用率。随着云的概念不断发展，公有云厂商使用基于网络的块存储逐步代替了单机的本地存储，在这样的基础架构下计算和存储耦合的架构已经变得不透明不合理，此时存储...
功能特性
它是一种集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。数据传输服务DTS（Data Transmission Service）是阿里云提供的一种支持关系型数据库、NoSQL、OLAP等多种数据源之间...
外部数据
简介 本数据库实现了部分的 SQL/MED 规定，允许我们使用普通 SQL 查询来访问位于本地数据库之外的数据。这种数据被称为外部数据。说明 这种用法不要和外键混淆，后者是数据库中的一种约束 外部数据可以在一个外部数据包装器的帮助下被访问...
概述
PolarDB-X 提供列存索引的形态（Clustered Columnar Index，CCI），行存表默认有主键索引和二级索引，列存索引是一种额外基于列式结构的二级索引（覆盖行存所有列），一张表可以同时具备行存和列存的数据。架构特点 云原生架构（存储和计算...
功能简介
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。通过数据同步的自定义同步任务...
添加数据集
DataV数据集支持多种数据源的接入，如数据库、excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...
数据同步
数据同步提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、超图等...
功能简介
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、...
从Oracle迁移应用至阿里云PolarDB全流程指南
应用评估：ADAM应用评估功能可以帮助用户智能分析出应用改造工作量，应用SQL兼容性，应用与数据库集群的架构情况等迁移痛点，可靠快速去地帮助用户进行数据库与应用迁移。数据库资源 依据ADAM评估选型建议以及结合自己业务的实际情况，选择...
基本概念
多源异构数据：指的是多种不同结构的数据源。数据模板：用于对非结构化数据的解释，当创建数据同步任务时，且源端数据类型为消息中间件时，通过数据模板对其进行解释。Oracle CDC：实时数据同步模式，对源表进行INSERT、UPDATE或DELETE等...
索引加速
前缀索引 不同于传统的数据库设计，云数据库 SelectDB 版 这类 MPP 架构的 OLAP 数据库，一般通过提高并发来处理大量数据。同时可结合一些索引结构，来加速查询性能。SelectDB的数据存储在类似SSTable（Sorted String Table）的数据结构中...
磁盘型
云原生内存数据库Tair 推出磁盘（ESSD/SSD）型实例，均兼容Redis核心数据结构与接口，可提供大容量、低成本、持久化的数据库服务。适用于兼容Redis、需要大容量且访问性能较高的温冷数据存储场景。背景信息 传统Redis基于内存属于易失性...
磁盘型
Tair 推出磁盘（ESSD/SSD）型实例，均兼容Redis核心数据结构与接口，可提供大容量、低成本、持久化的数据库服务。适用于兼容Redis、需要大容量且访问性能较高的温冷数据存储场景。背景信息 传统Redis基于内存属于易失性存储介质，随着业务...
什么是云数据库Redis版
云数据库Redis版（ApsaraDB for Redis）是兼容开源Redis协议标准的数据库服务，基于双机热备架构及集群架构，可满足高吞吐、低延迟及弹性变配等业务需求。为什么选择云数据库Redis版 硬件部署在云端，提供完善的基础设施规划、网络安全保障...
什么是数据传输服务DTS
支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建安全、可扩展、高可用的数据架构。DTS视频简介 为什么选择DTS 相对于传统数据迁移...
持久内存型性能白皮书
由于开源版本仅支持测试Hash结构的数据，下载YCSB工具后，需要将 YCSB/redis/src/main/java/site/ycsb/db/RedisClient.java 文件替换为 RedisClient.java 文件，用于测试String结构的数据。工作负载 测试的总数据量8 GB，数据分布方法为...
互联网金融：上海富友支付服务股份有限公司
支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助力用户构建安全、可扩展、高可用的数据架构。DTS支持源为传统商业数据库的迁移，如Db2 ...
什么是数据管理DMS
相关服务 DTS：数据传输服务DTS（Data Transmission Service）支持RDBMS、NoSQL、OLAP等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，构建安全、可扩展、高可用的数据架构。RDS：阿里云关系型数据库RDS（Relational ...
基本概念
简称DTS）支持关系型数据库（RDBMS）、非关系型数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，帮助您构建安全、可扩展、高可用的数据架构。更多信息，请参见 什么是数据传输服务...
如何处理Tair集群数据倾斜
常见于在KKV（Key-key-value）类型的数据结构中，例如Hash、List、Set、Zset等，存放过多或过大的field，从而导致单个Key过大，产生实例数据倾斜。更多关于大Key的信息，请参见 发现并处理大Key和热Key。避免使用大Key。对大Key进行拆分，...
列存索引（IMCI）发布说明
开启列存索引后与ClickHouse性能对比 下图展示了开启列存索引后，执行TPC-H的21条查询语句（Q21除外，ClickHouse不支持）的查询响应时间，与相同数据量和数据结构的ClickHouse数据库的对比。结论：列存索引对大多数的复杂查询操作都有加速...
产品整体介绍
不仅仅是关系型也是对象-关系型，数据库的对象通常包括：表、视图、函数、序列、索引、分区子表、外部表等，而对象-关系型则进一步支持用户自定义对象和它的属性，包括数据类型、函数、操作符，域和索引，甚至复杂的数据结构也可以被创建，...
从自建MySQL迁移至PolarDB-X
根据自建MySQL数据库中待迁移数据表的数据结构，在目标 PolarDB-X 中创建相应的数据库和数据表，详情请参见 创建数据库 和 SQL基本操作。操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角...
MaxCompute近实时增全量一体化架构介绍
表数据组织格式 如上图所示，展示了分区表的数据结构，先按照分区对数据文件进行物理隔离，不同分区的数据在不同的目录之下。每个分区内的数据按照桶数量来切分数据，每个桶的数据文件单独存放;数据文件类型主要分为Delta Data File和...
概述
开启列存索引后与ClickHouse性能对比 下图展示了开启列存索引后，执行TPC-H的21条查询语句（Q21除外，ClickHouse不支持）的查询响应时间，与相同数据量和数据结构的ClickHouse数据库的对比。结论：列存索引对大多数的复杂查询操作都有加速...
自建Oracle迁移至PolarDB-X
DTS在迁移Oracle至 PolarDB-X 时，不支持结构迁移，您需要根据自建Oracle数据库中待迁移数据表的数据结构，提前在目标 PolarDB-X 中创建相应的数据库和数据表，详情请参见 创建数据库 和 执行SQL基本操作。说明 由于Oracle和 PolarDB-X 的...
PolarDB-X间的数据实时同步
准备工作 由于 PolarDB-X 间的数据同步不支持 结构初始化，所以您需要根据源 PolarDB-X 中待同步对象的数据结构，在目标 PolarDB-X 中创建相应的数据库和数据表，详情请参见 创建数据库 和 SQL基本操作。说明 结构初始化：将源库中待同步...
功能更新动态（2022年之前）
2021年08月19日 华北2（北京）、华东1（杭州）逻辑表实例 2021年08月24日 华南1（深圳）2021年08月26日 华东2（上海）离线整库迁移 为了满足更丰富的场景，Dataphin支持将本地数据中心或在ECS上自建的数据库同步至Hive、MaxCompute、Oracle...
- 产品推荐
- 这些文档可能帮助您