设计规范

设计主要影响 设计影响的操作有:创建、导入数据、更新、删除及管理。其中,导入数据场景按照实时数据采集和离线导入批量数据的方式分为如下三种:导入后立即查询与计算。导入后立即查询与计算,需要考虑每次导入的数据量,...

数据表-数据概况

功能说明 在数据详情的数据概况标签页,基于对元数据及存储数据的统计,为您提供了数据更加详细的指标信息,比如存储大小、文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小,分区文件数,分区最后更新时间等...

配置同步任务

配置同步任务是将数据源的数据同步到目标的过程。本文为您介绍如何配置同步任务。配置流程说明 同步任务的配置流程如下图。来源和目标均支持多种数据源。数据库类型 数据源 关系型数据库 MySQL、Oracle、Microsoft SQL Server、...

配置同周期调度依赖

修改自动解析的依赖关系 当自动解析的依赖关系不符合预期,或存在 不支持调度依赖的场景(非周期性调度产出数据的表)需手动删除依赖关系时,您可参考以下内容修改自动解析的依赖关系。场景及方式 描述 操作及结果示例 开启自动解析时,...

授权与回收权限

类型 支持选择 建模逻辑、标签逻辑、物理、元、镜像、物理视图、逻辑视图。环境 选择数据表所在的环境,支持选择 生产环境、开发环境。数据板块 当类型选择为 逻辑视图、建模逻辑、标签逻辑 时,需要选择逻辑所在的...

授权与回收权限

类型 支持选择 建模逻辑、标签逻辑、物理、元、镜像、物理视图、逻辑视图、物化视图。环境 选择数据表所在的环境,支持选择 生产环境、开发环境。数据板块 当类型选择为 逻辑视图、建模逻辑、标签逻辑 时,需要选择逻辑...

何时选择间隔(Interval)分区

Interval Range分区是Range分区的扩展,在数据到达时自动创建间隔分区,不需要再手动创建新分区,方便了Range分区维护操作。向RANGE分区插入数据时,如果插入的数据超出当前已存在分区的范围,将无法插入并且会返回错误;而对于INTERVAL ...

数据引入概述

Dataphin支持通过数据集成和数据同步的方式,将业务数据源的数据...数据集成支持通过整库迁移(快速生成批量同步任务)和一键生成目标(同步到MaxCompute的数据无需手动)的方式,提高数据同步的效率。更多信息,请参见 数据集成概述。

数据引入概述

Dataphin支持通过数据集成和数据同步的方式,将业务数据源的数据...数据集成支持通过整库迁移(快速生成批量同步任务)和一键生成目标(同步到MaxCompute的数据无需手动)的方式,提高数据同步的效率。更多信息,请参见 数据集成概述。

外部常见问题

本文为您介绍外部的常见问题。问题类别 常见问题 OSS外部 自定义Extractor在读取非结构化数据时,如果数据字段存在DATETIME类型,报错ODPS-0123131,如何解决?在MaxCompute上访问OSS外部,编写UDF本地测试通过,上传后报错内存溢出...

管理数据

本文介绍数据树的管理功能。前提条件 已登录DataV-Atlas控制台。已添加可用数据库。上传数据 在左侧数据树中单击已添加的数据库名称。单击右上角的 上传数据。在 选择文件 页签,将文件拖拽至添加处或单击 浏览 从本地文件选择需要上传的...

云数据库 RDS MySQL 版收集的统计信息

什么情况下需要收集统计信息 当上有大量的数据修改时,例如从数据源加载大量数据(ETL)或者大量历史数据归档,建议手动收集上的统计信息,以保证查询优化器可以选取最优的执行计划。如何收集统计信息 您可以 连接MySQL实例 后执行如下...

统计信息

本文介绍 AnalyticDB MySQL 统计信息的作用与分类,自动收集统计信息的机制,手动收集统计信息的方法,以及如何查看统计信息。功能介绍 查询优化器(Query Optimizer)将查询转换为执行计划,并交给执行引擎执行。执行计划的质量会影响查询...

数据集成概述

背景信息 面对各行各业对大数据的应用,数据集成会有很多的诉求,包括能够简单高效的配置大量数据的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优(例如容错,限速,并发)等。...

物理化数据字典

手动执行物理 当运行方式选择的是 手动执行 时,物理化数据字典后,需要手动运行已上线的数据字典,在 数据字典管理 页面的 物理 页签,单击目标物理 操作 列的 手动执行,运行已经上线的物理。说明 如果字典的值有更新,可以通过...

物理化数据字典

手动执行物理 当运行方式选择的是 手动执行 时,物理化数据字典后,需要手动运行已上线的数据字典,在 数据字典管理 页面的 物理 页签,单击目标物理 操作 列的 手动执行,运行已经上线的物理。说明 如果字典的值有更新,可以通过...

查看Dataphin数据表校验记录

Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 Dataphin数据表 校验...

查看Dataphin数据表校验记录

Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 Dataphin数据表 校验...

PolarDB MySQL版同步至RDS MySQL

预检查完成后,DTS会将源实例中待同步对象的全量数据在目标集群中初始化,作为后续增量同步数据的基线数据。目标已存在的处理模式 预检查并报错拦截:检查目标数据库中是否有同名的。如果目标数据库中没有同名的,则通过该检查项目;...

RDS PostgreSQL同步至RDS MySQL

若同步对象为级别,且需进行编辑(如列名映射),单次同步任务的数量超过5000时,建议您拆分待同步的,分批配置多个任务,或者配置整库的同步任务,否则任务提交后可能会显示请求报错。WAL日志:需开启,即设置 wal_level 参数的值...

PolarDB MySQL版间的同步

如同步对象为级别,且需进行编辑(如列名映射),则单次同步任务仅支持同步至多1000张。当超出数量限制,任务提交后会显示请求报错,此时建议您拆分待同步的,分批配置多个任务,或者配置整库的同步任务。如需进行增量同步,需开启...

三节点企业系列的RDS MySQL迁移到集群系列的RDS MySQL

本文介绍如何使用数据传输服务(Data Transmission Service,简称DTS),实现将三节点企业系列的 RDS MySQL 实例的数据迁移到集群系列的RDS MySQL。前提条件 已创建源和目标 RDS MySQL 实例,创建方式,请参见 快速创建RDS MySQL实例。目标...

删除数据

简介 到目前为止我们已经解释了如何向增加数据以及如何改变数据。剩下的是讨论如何删除不再需要的数据。和前面增加数据一样,你也只能从中整行地删除数据。在前面的一节里我们解释了 SQL 不提供直接访问单个行的方法。因此,删除行...

PolarDB MySQL版间迁移

通过数据传输服务DTS(Data Transmission Service),可以帮助您实现 PolarDB MySQL版 集群间的数据迁移。说明 目前 PolarDB MySQL版 集群暂不支持升级MySQL版本至8.0版本,您可以创建一个新的 PolarDB MySQL版 集群(8.0版本),使用本...

RDS MySQL同步至PolarDB MySQL版

警告 选择为 忽略报错并继续执行,可能导致数据不一致,业务带来风险,例如:结构一致的情况下,如在目标库遇到与源库主键或唯一键的值相同的记录:全量期间,DTS会保留目标集群中的该条记录,即源库中的该条记录不会同步至目标数据库...

查看全域数据表校验记录

全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 全域数据表 校验记录页面。参数 说明 ...

查看全域数据表校验记录

全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 全域数据表 校验记录页面。参数 说明 ...

手动续费(2.0版)

在包月套餐数据库未到期或者到期后7天内,您可以手动给数据库续费,延长数据库的使用时间。按量付费数据库没有到期时间,不涉及续费操作。AnalyticDB支持 自动续费,开通自动续费可以免去定期手动续费的烦恼,且不会因忘记续费而导致业务...

从Amazon Aurora MySQL迁移至PolarDB MySQL版

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将Amazon Aurora MySQL迁移至阿里云 PolarDB MySQL版。DTS支持结构迁移、全量数据迁移以及增量数据迁移,同时使用这三种迁移类型可以实现在自建应用不停服的情况下,平滑地...

PolarDB MySQL版迁移至云原生数据仓库 AnalyticDB ...

通过数据传输服务DTS(Data Transmission Service),您可以将 PolarDB MySQL版 迁移至 云原生数据仓库AnalyticDB PostgreSQL版。前提条件 已创建目标 AnalyticDB PostgreSQL版 实例,如未创建请参见 创建实例。目标 AnalyticDB PostgreSQL...

PolarDB MySQL版间迁移

通过数据传输服务DTS(Data Transmission Service),可以帮助您实现 PolarDB MySQL版 集群间的数据迁移。说明 目前 PolarDB MySQL版 集群暂不支持升级MySQL版本至8.0版本,您可以创建一个新的 PolarDB MySQL版 集群(8.0版本),使用本...

OceanBase(MySQL模式)迁移至RDS MySQL

数据传输服务DTS(Data Transmission Service)支持将OceanBase数据库迁移至 RDS MySQL 实例,帮助您解决数据库运维的烦恼。前提条件 源OceanBase数据库需为社区版,且为4.X 版本。已创建存储空间须大于源OceanBase数据库的目标 RDS MySQL ...

RDS MariaDB迁移至RDS MySQL

数据传输服务DTS(Data Transmission Service)支持将MariaDB的数据迁移至 RDS MySQL 实例,本文以 RDS MariaDB 为源数据库为您介绍迁移操作的步骤。前提条件 已创建存储空间大于 RDS MariaDB 的目标 RDS MySQL 实例。创建方式,请参见 ...

PolarDB MySQL版迁移至RDS MySQL

通过数据传输服务DTS(Data Transmission Service),您可以将 PolarDB MySQL版 迁移至MySQL(包括自建MySQL和 RDS MySQL 实例)。支持的目标数据库 PolarDB MySQL版 除了支持迁移至 RDS MySQL 以外,还支持迁至以下类型的自建数据库。说明...

RDS MariaDB实例间的迁移

数据传输服务DTS(Data Transmission Service)支持 RDS MariaDB 实例间的数据迁移。前提条件 已创建目标 RDS MariaDB 实例。创建方式,请参见 快速创建RDS MariaDB实例。目标 RDS MariaDB 实例的存储空间须大于源 RDS MariaDB 实例占用的...

RDS MariaDB同步至RDS MySQL

如同步对象为级别,且需进行编辑(如列名映射),则单次同步任务仅支持同步至多1000张。当超出数量限制,任务提交后会显示请求报错,此时建议您拆分待同步的,分批配置多个任务,或者配置整库的同步任务。Binlog日志:RDS MariaDB ...

自建Oracle迁移至PolarDB-X

说明 如果目标库中同名的不方便删除或重命名,您可以更改该在目标库中的名称,请参见 库列名映射。忽略报错并继续执行:跳过目标数据库中是否有同名的检查项。警告 选择为 忽略报错并继续执行,可能导致数据不一致,业务带来风险...

OceanBase(MySQL模式)迁移至PolarDB MySQL版

PolarDB MySQL版 集群是具备高性能、海量存储、安全可靠的数据库服务,本文为您介绍如何使用数据传输服务DTS(Data Transmission Service)将OceanBase数据库迁移至 PolarDB MySQL版 集群。前提条件 源OceanBase数据库需为社区版,且为4.X ...

PolarDB-X 2.0间的迁移

通过数据传输服务DTS(Data Transmission Service),您可以实现 PolarDB-X 2.0 间的数据迁移。前提条件 已创建源和目标 PolarDB-X 2.0 实例,且兼容MySQL 5.7版本。目标 PolarDB-X 2.0 实例的存储空间须大于源 PolarDB-X 2.0 实例占用的...

PolarDB-X 2.0迁移至PolarDB MySQL版

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 PolarDB-X 2.0 迁移至 PolarDB MySQL版。前提条件 已创建源 PolarDB-X 2.0 实例,且需兼容MySQL 5.7版本。已创建目标 PolarDB MySQL版 集群,详情请参见 购买按量付费...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 云数据库 Redis 版 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用