数据传输提供数据同步功能,帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...
数据传输提供数据迁移功能,帮助您实现同构或异构数据源之间的数据迁移。适用于数据库升级、跨实例数据迁移、数据库拆分、扩容等业务场景。您可以参考以下流程进行迁移前的准备工作、以及购买、配置和管理数据迁移项目。完成准备工作。数据...
结束数据迁移项目 结束数据迁移项目后,数据传输仍保留当前项目的源端、目标端、迁移对象、监控和告警等配置信息。您可以根据业务需求,选择清空项目配置后重新配置或者释放当前项目。重要 数据传输支持结束处于 已暂停、失败 和 已完成 ...
启动数据迁移项目 配置数据迁移项目时,如果在预检查完成后仅保存该数据迁移项目,未进行启动,则需要在迁移项目列表中手动启动数据迁移项目。登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据迁移。在 数据迁移 页面,单击未...
费用概述 云数据库 OceanBase 数据传输服务提供数据迁移和数据同步两种项目,不同项目的计费方式略有不同。数据迁移项目:目前仅支持后付费模式,即按量付费计费模式。当前为限时免费阶段,具体收费时间另行通知。数据同步项目:目前仅支持...
新建数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 OceanBase 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 ...
数据同步项目的状态包括:未配置:表示数据同步项目尚未配置,您可以在对应的操作列中单击 配置。未启动:表示数据同步项目尚未启动,您可以在对应的操作列中单击 启动。运行中:表示数据同步项目在运行中,您可以查看数据同步的运行计划和...
如果写出数据和目标存储已有数据发生数据约束(主键冲突、唯一键约束、外键约束等),数据库则使用来源数据update更新目标表已有数据行,在目标表存在多个数据约束的情况下,数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
1.定义 1.1 OceanBase 数据传输服务项目:指 OceanBase 数据传输服务根据用户不同使用场景建立的数据传输链路,用户可基于项目的维度使用和管理数据传输链路(如数据迁移项目,数据同步项目等)。1.2 服务周期:一个服务周期为一个自然月。...
数据传输支持下载数据同步项目的同步对象配置信息,并支持通过导入 CSV 文件的方式实现自动配置和确认同步对象的配置信息,以实现保存项目配置信息和批量、快速配置项目。下载对象配置 新建数据同步项目后,您可以下载同步对象的配置信息。...
新建数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 TiDB 数据源。前提条件 已获取相关数据库的 IP 地址和端口号。已存在用于数据迁移的数据库用户。建议您为数据迁移项目创建一个专属的数据库用户,该用户...
本文为您介绍如何引用和清空已有数据迁移项目的配置。引用项目配置 重要 目前处于 未配置 状态的数据迁移项目支持 引用配置 操作。登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据迁移。在 数据迁移 页面,单击未配置的目标...
本文为您介绍如何引用和清空已有数据同步项目的配置。引用项目配置 重要 目前处于 未配置 状态的数据同步项目支持 引用配置 操作。登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据同步。在 数据同步 页面,单击未配置的目标...
DataWorks默认租户成员可进入数据地图模块,在数据地图模块中,默认可查看已接入数据地图的项目元数据,您可通过当前文档针对以上场景进行不同粒度的访问控制。数据地图权限管控介绍 数据地图支持的 功能模块、项目、表 这三个级别的元数据...
DataWorks在多个行业中均有典型的案例落地,帮助多个行业的企业解决数据痛点,挖掘数据价值,本文为您介绍典型行业中已落地的客户案例。新零售行业:大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型,拥抱新零售,...
新建数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PostgreSQL 数据源。前提条件 已创建 RDS PostgreSQL 实例。详情请参见 创建 RDS PostgreSQL 实例。重要 数据传输不支持 Serverless 模式实例和只读实例...
本文为您介绍如何使用数据传输对数据同步项目进行批量操作。背景信息 数据传输支持在 同步项目列表 页面,对数据同步项目进行批量操作。不同状态的数据同步项目支持不同的批量操作。数据同步项目的状态 支持的批量操作 未配置 无 未启动 ...
开启或关闭项目空间的数据保护机制。您只能在项目空间中访问数据。数据只能在项目空间内流动,不允许流出到项目空间之外,以提高数据的安全性。使用限制 本文中的命令您需要在 MaxCompute客户端 执行。本命令为CMD命令,仅支持在客户端...
数据传输支持对数据迁移和数据同步项目进行监控项的配置。项目创建完成后,您可以对单个项目设置告警监控,也可以选择多个项目进行批量操作。本文以数据迁移项目为例,为您介绍如何设置告警监控。背景信息 告警监控功能是数据传输重要的运...
数据传输支持修改已启动告警监控功能的数据迁移和数据同步项目的告警监控设置。本文以数据迁移项目为例,为您介绍如何修改告警监控。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据迁移。如果您需要设置数据同步...
本文为您介绍如何结束数据同步项目。使用限制 数据传输支持结束处于 已暂停、失败 和 已完成 状态的数据同步项目。操作步骤 项目结束后,仍保留当前项目的配置信息,您可以根据需要选择清空项目配置后重新配置。详情请参见 清空项目配置。...
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 Oracle 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 ...
创建E-MapReduce集群后,您可以在数据开发中创建项目,并在项目中进行作业的编辑和工作流的调度。新建项目之后,您可以对项目进行管理,为项目关联集群资源、添加项目成员以及设置全局变量。前提条件 已创建集群,详情请参见 创建集群。...
选择项目、数据库、数据库权限类型、权限有效期并输入申请原因后,单击 新建,创建库权限申请。工单管理 无数据库编辑权限的项目普通成员可以通过工单申请执行导出数据/导入数据/模拟数据/数据库变更/无锁结构变更/SQL 计划/数据归档任务。...
数据传输支持下载数据迁移项目的迁移对象配置信息,并支持通过导入 CSV 文件的方式实现自动配置和确认迁移对象的配置信息,以实现保存项目配置信息和批量、快速配置项目。导入对象功能通常适用于百+对象进行批量重命名和设置操作。下载对象...
数据迁移项目的状态包括:未配置:表示数据迁移项目尚未配置,您可以在对应的操作列中单击 配置。未启动:表示数据迁移项目尚未启动,您可以在对应的操作列中单击 启动。运行中:表示数据迁移项目在运行中,您可以查看数据迁移的运行计划和...
本文为您介绍如何使用数据传输对数据迁移项目进行批量操作。背景信息 数据传输支持在 迁移项目列表 页面,对数据迁移项目进行批量操作。不同状态的数据迁移项目支持不同的批量操作。数据迁移项目的状态 支持的批量操作 未配置 无 未启动 ...
单击 项目/数据库,即可进入项目或数据库的详情页,查看项目或数据库的 基础信息 及该项目或数据库中的表信息。您可在操作列收藏表,也可单击表名称进入表详情页,查看相应表的明细、产出及血缘等信息。更多表的管理操作,详情请参见 查看...
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输新建 MySQL 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建...
适用场景 创建数据库至消息队列的数据同步项目时,数据传输支持您在选择需要同步的 Topic 类型后,通过 更改 Topic 功能重新选择 Topic 名称。操作步骤 将数据同步项目配置至 选择同步对象 步骤。详情请参见相应类型的 数据同步 项目文档。...
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 板块管理员 项目管理员 普通成员 权限申请 申请数据表权限 Y Y-Y 申请数据源权限 Y Y-Y 申请函数权限 Y Y-Y 申请变量权限 Y Y-Y 申请密钥权限 Y Y-Y 申请数据...
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建云原生数据仓库 AnalyticDB MySQL 版(简称 ADB)数据源。背景信息 ADB 的基本介绍请参见 基础数据类型。ADB 的建表、分区表和分布表的详情请参见 ...
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 板块管理员 项目管理员 普通成员 权限申请 申请数据表权限 Y Y-Y 申请数据源权限 Y Y-Y 申请函数权限 Y Y-Y 申请变量权限 Y Y-Y 申请密钥权限 Y Y-Y 申请数据...
创建项目 MaxCompute控制台创建的Project允许被各客户端使用,DataWorks提供统一的全链路大数据开发治理平台,紧密的集成MaxCompute,其工作空间标准模式不支持绑定存量MaxCompute项目。推荐您直接通过DataWorks创建MaxCompute项目并进行...
使用流程概览:参考文档:数据集成概述 数据建模与开发 子模块:数据建模 功能说明:数据建模是全链路数据治理的第一步,沉淀阿里巴巴数据中台建模方法论,从数仓规划、数据标准、维度建模、数据指标四个方面,以业务视角对业务的数据进行...
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PolarDB 数据源。背景信息 PolarDB-X 1.0 是由阿里巴巴自主研发的 PolarDB 分布式版数据库,融合分布式 SQL 引擎和分布式自研存储 X-DB,基于云原生...
数据传输是 OceanBase 数据库提供的一种支持同构或异构数据源与 OceanBase 数据库之间进行数据交互的服务,具备在线迁移存量数据和实时同步增量数据的能力。产品功能 数据传输提供可视化的集中管控平台,您只需要进行简单的配置即可实时...
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 DataHub 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 ...
创建数据迁移项目后,您可以通过标签功能实现对数据迁移项目的管理,快速筛选目标项目。本文为您介绍数据传输如何通过标签功能实现对数据迁移项目的管理。使用限制 每个数据迁移项目最多支持添加 4 个标签。所有数据迁移项目的标签总数不得...
创建数据同步项目后,您可以通过标签功能实现对数据同步项目的管理,快速筛选目标项目。本文为您介绍数据传输如何通过标签功能实现对数据同步项目的管理。使用限制 每个数据同步项目最多支持添加 4 个标签。所有数据同步项目的标签总数不得...