数据方案概览
空库初始化 支持将源数据库的表结构同步至空数据库中，实现快速同步数据库表结构。表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行差异脚本，以保障不同表之间的表结构一致性 无锁结构变更 可以较好地规避因锁表以致于...
空库初始化
数据管理DMS 的空库初始化功能支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、PolarDB MySQL版、...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
导出数据
本文将为您介绍如何导出表结构、SQL查询结果集、整个数据库。前提条件 数据库关联的安全规则已开启 结果集是否支持导出 规则（系统默认开启）。更多信息，请参见 SQL窗口-关系型数据库。具有目标数据库的查询、导出等权限。更多信息，请...
功能特性
结构同步 空库初始化 支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。空库初始化 表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行...
表结构发布流程化
提交执行后请等待审批完成，待审批完成后，系统会将新的表结构写入到dev_database数据库中。可选：前往 SQL Console 插入数据或提交 数据变更工单 对dev_database数据库进行测试。插入数据示例代码如下：insert into teacher(teacher_id,...
数据扫描和识别
在MaxCompute、数据库的表结构发生变化后（仅指数据表的列有新增或删减），会触发自动扫描并扫描有变化的列；数据表的行发生变化不会触发自动扫描。对该数据源中的所有数据收取全量扫描费用。在OSS文件新增和修改后会触发自动扫描。说明 ...
迁移数据库账号
即在 配置任务对象及高级配置 阶段中，同步类型 勾选了 库表结构同步 或者 迁移类型 勾选了 库表结构迁移。注意事项 当前仅MySQL实例间的同步或迁移、MySQL实例同步或迁移到 PolarDB MySQL版 集群、PolarDB MySQL版 集群间的同步或迁移实例...
新功能发布记录
当您在数据管理DMS中对数据库进行表结构变更后，DMS将会保存最新的表结构至数据库版本列表中。您可以在数据库版本列表中下载、比对、恢复历史版本的表结构。管理表结构版本 超级SQL模式 新增 开启超级SQL模式后，管理员和DBA在SQLConsole中...
将MySQL数据迁移到Redis
关系型数据库中库表结构的数据无法直接传入以键值结构保存数据的Redis数据库，迁移前需要将源端数据转换为特定的结构。这篇最佳实践以MySQL向Redis整表迁移为例，介绍如何通过原生工具进行简单高效地迁移。MySQL的表数据将通过Redis ...
管理表结构版本
当您在 数据管理DMS 中对数据库进行表结构变更后，DMS将会保存最新的表结构至数据库版本列表中。您可以在数据库版本列表中下载、对比、恢复历史版本的表结构。前提条件 您具有该表（或库）的查询权限，更多信息，请参见 查看我的权限。表...
结构同步
数据管理DMS 的结构同步功能支持对比不同数据库、指定表之间的表结构，产生差异化脚本并执行到目标数据库。适用于对比、同步多套数据库环境的表结构，例如生产库与测试库、不同的测试库、不同的生产库等。前提条件 支持的数据库类型如下：...
通过无锁变更工单实现无锁结构变更
为解决变更数据库表结构时的锁表问题，数据管理DMS 推出了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。本文介绍通过提交无锁变更工单实现数据库无锁结构变更的方法。前提条件 ...
数据库迁移
库表结构迁移：迁移来源数据库中的表结构。全量数据迁移：迁移来源数据库中的表数据。一致性校验 迁移完成后，对迁移前后的数据进行对比，以确定迁移后的数据与源数据相同。不校验：不校验迁移后的数据是否与源数据相同。迁移完成，自动...
无锁结构变更
背景信息 为解决变更数据库表结构时的锁表问题，ODC V4.2.0 版本提供了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...
实例间的数据库复制
若选择了某个数据库，则数据库内的表结构和表数据均会复制过去。是否复制用户和权限 是否将源数据库的所属用户以及权限复制到目标实例的数据库中。同步复制数据库的用户和权限：将源实例中该库对应的用户和权限复制到目标实例。存在以下两...
从MySQL导入数据
当您需要将云数据库RDS MySQL或云原生数据库PolarDB MySQL中的数据迁移至 云数据库ClickHouse 中进行实时分析时，本文档为您提供了以RDS MySQL为参考的示例，以帮助您轻松完成数据迁移任务。前提条件 已创建目标 云数据库ClickHouse 集群，...
ACL权限体系
以下列出AnalyticDB for MySQL 2.0的权限对象和各对象权限：Database（库），即 db_name.*或*（默认数据库），指定数据库或数据库上所有表/表组。TableGroup（表组），即 db_name.table_group_name 或 table_group_name，特定表组。Table...
Dataiku连接
本文介绍如何在Dataiku中连接 云原生数据仓库 AnalyticDB...完成配置之后，您可以单击页面底部的 Import tables to datasets 批量导入数据库中的表结构到数据集。导入之后您可以进行数据分析，更多关于数据分析的操作请参见 Dataiku官方文档。
逻辑订阅
说明 请提前在目标数据库中创建与源数据库相同表结构的数据表。同实例时，必须使用WITH添加订阅参数 create_slot=false。CREATE SUBSCRIPTION<订阅名称>CONNECTION 'dbname=<源实例数据库名>' PUBLICATION publication_name WITH(create_...
Spark SQL
登录 DLA控制台，单击左侧导航栏的 SQL执行，您可以看到所有数据湖中的数据库和表结构，对表进行在线分析查询，以及管理子用户对库表的权限，如下图所示。纯SQL作业 DLA Spark支持直接在控制台写Spark SQL。无需用户打包jar包或者写python...
从MaxCompute外表导入（20.3及以上）
本文介绍如何将数据通过阿里云MaxCompute外表方式导入至 云数据库ClickHouse。注意事项 云数据库ClickHouse 社区兼容版集群的内核版本为20.3及以上。MaxCompute服务为付费服务。计费详情，请参见 MaxCompute计费方式。为了确保 云数据库...
使用DataWorks同步数据
本文以MaxCompute为例介绍如何将数据通过DataWorks同步至 云数据库ClickHouse。背景信息 您可以通过DataWorks，将支持的各种数据源数据离线同步至 云数据库ClickHouse。离线同步支持的数据源类型，具体请参见 支持的数据源与读写插件。前提...
依赖跟踪
为了保证整个数据库结构的完整性，本数据库确保我们无法删除仍然被其他对象依赖的对象。例如，尝试删除产品表会导致一个如下的错误消息，因为有订单表依赖于产品表：DROP TABLE products;ERROR:cannot drop table products because other ...
恢复库表
RDS MySQL支持常规和极速级别的库表恢复功能，您可以将指定的库、表按备份集或时间点恢复至原实例或新实例...手动创建逻辑备份，然后 恢复逻辑备份到自建数据库。通过mysqldump进行备份和恢复。（可选）连接RDS MySQL实例，查看恢复到原实例或...
通过Kafka导入数据
默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 Kafka topic database.history.kafka.topic=dbhistory ...
PolarDB-X 1.0在DMS控制台上无法显示修改后的表结构
问题描述 使用阿里云云原生分布式数据库PolarDB-X 1.0过程中，通过其他客户端修改表结构后，在DMS控制台上无法显示修改后的表结构。解决方案 DMS会从影子库系统表中获取 PolarDB-X 1.0 的表结构。在处理异常DDL过程中，由于种种原因可能会...
库表结构优化
要做好库表结构设计和优化，用户通常需要关注以下信息：数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点，才能结合业务的数据分布特征与业务场景特征，进行数据建模，从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...
企业版和标准版功能对比
支持 不支持 全球数据库 全球数据库网络（Global Database Network，简称GDN）是由分布在同一个国家内多个地域的多个 PolarDB 集群组成的网络。GDN网络中所有集群的数据保持同步，网络中每个集群均提供读服务（写服务会被转发到主集群处理...
跨库操作（dblink、postgres_fdw）
创建数据库 postgres=>\c<数据库名>/切换数据库 示例 postgres=>create database db1;CREATE DATABASE postgres=>\c db1 新建postgres_fdw插件。db1=>create extension postgres_fdw;新建用于连接远端目标数据库的服务器对象。db1=>CREATE ...
如何清理孤立文档
数据库列表 var databasesToProcess=["database1","database2","database3"];shardNames.forEach(function(shardName){/遍历指定的数据库列表 databasesToProcess.forEach(function(dbName){ var dbInstance=db.getSiblingDB(dbName);获取...
资源角色
可查询实例下所有数据库中的数据（不包含敏感字段），提交各类数据方案与库表结构的工单。对应于审批节点中 动态计算 的DBA。实例Owner 每个实例可以设置3个实例Owner。云数据库资源默认主账号为实例Owner。非云数据库默认当前录入的云账号...
基础用户权限
云数据库 SelectDB 版 的权限管理系统借鉴了MySQL的权限管理机制，实现了表级别细粒度的权限控制，并支持基于角色的权限访问控制和白名单机制。本文介绍 云数据库 SelectDB 版 包含的权限管理系统的背景和具备的权限管理能力，及一些使用时...
同步节点
表结构变化 当选中 开启检测 复选框后，以天为单位，进行数据源端表结构检测。若发现表结构变更，则进行异常推送。异常信息可在“运维监控-全景监控”中查看。开发资源组 测试时使用的资源组，支持选择用户自有的资源。生产资源组 正式环境...
同步节点
表结构变化 当选中 开启检测 复选框后，以天为单位，进行数据源端表结构检测。若发现表结构变更，则进行异常推送。异常信息可在“运维监控-全景监控”中查看。开发资源组 测试时使用的资源组，支持选择用户自有的资源。生产资源组 正式环境...
表一致性修复
表一致性修复功能用于对比不同表之间的表结构，找出差异并在目标表执行差异脚本，以保障不同表之间的表结构一致性。应用场景 多套不同环境之间进行表结构对比，以保障不同环境之间的表结构一致性。例如，确保测试环境与生产环境的表结构...
清空云虚拟主机数据库中表的数据
在左侧导航栏的 表 页签下，单击任一数据库的表，选择 批量操作表>更多批量操作.在 批量操作表 页面，清空数据库中一个或多个表的数据。如果您想单独清空一个表的数据，单击对应 单行操作 列下的 清空。如果您想批量清空多个表的数据，...
数据管理DMS中重新加载库表结构的元数据说明
详细信息 通过数据管理DMS登录某个数据库实例时，DMS会加载该实例当前的数据库、表等元数据的结构信息。例如，数据库的名称列表、表的名称列表、当前表的结构字段、索引等信息。在某些情况下，DMS将无法显示最新的元数据，需要重新登录DMS...
管理迭代
空库初始化 将源库的表结构同步至空数据库中。说明 数据库只有同时符合以下条件才可以被选择：在迭代的可选数据库列表内。数据库环境类型符合迭代模板的定义。完成一个阶段的所有工单操作后，单击 推进到下一阶段，单击 确认，推进迭代到下...
新增数据表
数据表是项目中的原始数据，可通过数据校验和数据授权...物理数据库名称 目标节点中存放 MySQL 数据表的 Database 数据库的名称。物理数据表名称 MySQL 数据表在 MySQL 数据库的真实名称。描述 选填，数据表的描述信息。配置完成后单击 确定。
- 产品推荐
- 这些文档可能帮助您