数据集成概述

数据集成是稳定高效、弹性伸缩的数据同步平台,致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。使用限制 数据同步:支持且仅支持结构化(例如RDS、DRDS等)、半结构化、无结构化(OSS、TXT等,要求具体同步...

基本概念

所以为保障数据一致性,迁移期间请勿在源库写入新的数据。说明 为保证数据一致性,建议迁移期间不要往源数据库写入新的数据。如需实现不停机迁移,您需要在配置数据迁移任务时,同时选择结构迁移、全量数据迁移和增量数据迁移。增量...

常见问题概览

本文主要列举使用 数据管理DMS 时遇到的常见问题。商品订单 如何查看与管理DMS的商品订单?DMS商品订单与数据库实例是绑定关系吗?已购买的包年包月和按量付费商品,在DMS使用上有没有区别?已退订DMS按量付费商品订单,为何还会收到账单...

我是安全管理员

运维管理 数据库分组 在SQL变更或结构设计快速载入创建的数据库分组的所有数据库。智能化运维 智能化运维可以查看到工单量、查询量、用户量、元数据的整体信息。工单 工单管理 DMS提供产品内的工单审批和工单执行状态通知功能,可...

数据同步

支持自定义选择已经注册的数据源端数据和目标端,支持多种常见离线同步链路,如PostGIS、Ganos、超图SDX和ArcGIS SDE的空间数据同步到PostGIS和Ganos(邀测)。提供全量任务自动建表、同名字段自动映射、任务调度配置功能。支持对离线...

功能简介

支持自定义选择已经注册的数据源端数据和目标端,支持多种常见离线同步链路,如PostGIS、Ganos、超图SDX和ArcGIS SDE的空间数据同步到PostGIS和Ganos(邀测)。提供全量任务自动建表、同名字段自动映射、任务调度配置功能。支持对离线...

业务切换流程

此步骤创建的反向迁移任务的作用是为业务提供回退方案,业务恢复运行后,一旦出现异常可将业务切换至原有的数据。例如原先是将自建MySQL迁移至RDS MySQL,反向数据迁移任务配置案例请参见 从RDS MySQL迁移至自建MySQL(仅选择 增量数据...

应用场景

构建数据中台,行业领域模型快速沉淀 场景:快速构建数据仓库,有效治理数据质量,实现政企客户各部门数据的业务协同和共享。痛点:以政务服务为例,政务服务部门众多,业务系统复杂、流程长,数据来源多且更新频率高;数据口径标准、数据...

创建Impala数据

使用限制 Dataphin的Impala数据源的数据集成使用JDBC的方式进行集成,因此性能相较于Hive较差,若您集成的表为非Kudu表,您可使用Hive数据源及输入输出组件集成。仅当连接E-MapReduce 5.x版本的Impala数据源时,才支持使用DLF获取元数据。...

MaxCompute数据迁移至OSS

本文为您介绍如何使用DataWorks的数据同步功能将MaxCompute数据迁移至对象存储OSS(Object Storage Service)。前提条件 开通MaxCompute和DataWorks。在DataWorks上完成创建业务流程,本例使用DataWorks简单模式。详情请参见 创建业务流程...

MaxCompute数据迁移至OTS

order":{"hops":[{"from":"Reader","to":"Writer"}]},"setting":{"errorLimit":{"record":"0"},"speed":{"throttle":false,"concurrent":1,"dmu":1 } } } 在表格存储控制台中查看新增的表数据。登录 表格存储控制台。在左侧导航栏上,单击...

产品概述

针对不同业务场景所面临的不同数据安全问题,以下列举了一些全密态数据库适用的典型场景:平台安全运维:该场景主要针对在不可信环境(如第三方平台)下提供的数据库服务的安全防护,保证用户数据在运维过程的安全。在一般的应用场景,...

常见问题

本文汇总了云数据库RDS MySQL的常见恢复问题。说明 更多数据恢复方案,请参见 数据恢复方案概览。如何使用binlog恢复数据?使用 全量恢复 并选择 还原方式 为 按时间点 恢复即可。误删除了一个或多个库,如何恢复?您可以通过库表恢复功能...

多账号统一管理

费用详情,请参见 接入DSC的数据库产品附加费用说明。前提条件 已开通资源目录。具体操作,请参见 开通资源目录。已在资源目录创建新的成员账号或邀请已有的阿里云账号。具体操作,请参见 创建成员、邀请阿里云账号加入资源目录。已购买...

添加DataWorks数据服务数据

说明 获取 AppKey 和 AppSecret:在 DataWorks数据服务控制 ,单击 服务管理>API调用,可获取您的 AppKey 和 AppSecret。信息填写完成后,单击 确定,完成数据源的添加。新添加的数据源会自动显示在数据源列表中。使用DataWorks数据...

准备工作

开通企业数据智能平台 企业数据智能平台默认为关闭状态,使用前需要前往 AnalyticDB PostgreSQL版 控制台开通。登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角,选择实例所在地域。...单击 开通数据中台

添加区块链服务数据

在 我的数据 页面,单击 添加数据。从 类型 列表,选择 区块链服务。填写区块链服务相关信息。参数 说明 自定义数据源名称 区块链服务数据源的显示名称,您可以自由命名。Endpoint 区块链服务数据源的REST API地址。进入 区块链服务...

恢复数据

前提条件 实例已产生备份集,您可以在GDB控制台中,获取当前实例的数据备份信息。更多信息,请参见 查看备份文件列表。注意事项 数据恢复仅支持将备份数据恢复至另一个新建GDB实例中,不支持将备份数据恢复至当前实例。操作步骤 登录 图...

添加日志服务SLS数据

在 我的数据 页面,单击 添加数据。从 类型 列表,选择 简单日志服务SLS。填写 简单日志服务SLS 相关信息。参数 说明 自定义数据源名称 数据源的显示名称,您可以自由命名。AppKey 拥有目标SLS访问权限的账号的AccessKey ID。AppSecret...

添加 MySQL 数据源的白名单

使用其它类型的数据源时,无需添加公网服务的白名单。添加 RDS MySQL 白名单 如果您添加 MySQL 数据源时,选择实例类型为 RDS 实例,请设置 RDS IP 白名单。在 RDS 实例 ID 下拉列表选择目标 RDS 实例后,单击右侧的复制图标,复制 RDS ...

添加 Oracle 数据源的白名单

使用其它类型的数据源时,无需添加公网服务的白名单。操作步骤 如果您添加 Oracle 数据源时,选择实例类型为 VPC 内自建数据库 或 数据库网关,请添加数据传输服务器 IP 至对应数据库的白名单。因为 VPC 或数据库实例对应的 VPC 可能在 ...

RDS MySQL物理备份文件恢复到自建数据库

技术实现 本文介绍的物理备份恢复方式主要是通过如下流程实现的:在RDS MySQL的管理控制台中,对数据库进行全量物理备份。将物理备份文件下载到本地,然后通过 qpress 工具进行解压。使用 Percona XtraBackup 工具,将解压后的备份文件恢复...

添加 Kafka 数据源的白名单

使用其它类型的数据源时,无需添加公网服务的白名单。添加阿里云 Kafka 实例白名单 如果您添加 Kafka 数据源时,选择实例类型为 阿里云 Kafka 实例,请设置阿里云 Kafka 实例的白名单。选择 Kafka 实例 ID 和 接入点 后,分别单击右侧的...

添加 OceanBase 数据源的白名单

因为 VPC 可能在 ECS 平台进行访问限制,而作为数据迁移或数据同步的数据源,需要被数据传输服务器 IP 访问。说明 如果租户参数 ob_tcp_invited_nodes 设置了白名单,会出现 sys 账号可以连通数据源,普通账号无法连接的问题。此时,请在...

添加ClickHouse数据

在 我的数据 页签选择 数据源管理,单击 添加数据。从 类型 列表,选择 ClickHouse。在列表选择 内网,并选择ClickHouse实例所在的区域。填写数据库信息。参数 说明 名称 数据源的显示名称,可以自由命名。VPC ID VPC实例的ID,此VPC...

常见问题

读取kafka配置了endDateTime来指定所要同步的数据的截止范围,但是在目的数据源发现了超过这个时间的数据。Kafka数据量少,但是任务出现长时间不读取数据也不结束,一直运行的现象是为什么?写入OSS出现随机字符串如何去除?MySQL分...

适配组件数据

在 工作 页面,选择已创建的数据看板,单击 编辑。在左侧图层栏,单击选中某一组件。例如:Echarts 基本折线图。在右侧样式面板选择 数据源 页签,数据源类型 选择 静态数据。在下方的数据配置区域内,按照您的需求修改模板已有...

管理敏感数据

说明 RDS控制台中仅支持对数据库中的敏感字段进行监控与统计,如需使用上述所有功能,需登录DMS控制台进行操作。更多信息,请参见 管理敏感数据。操作步骤 访问 RDS实例列表,在上方选择地域,然后单击目标实例ID。在左侧导航栏,单击 数据...

手动添加数据

您可以通过 数据库备份DBS 的手动添加数据源功能,将不同环境的数据库添加至 数据库备份DBS ,便于后续对数据源进行管理与备份。费用说明 添加数据源操作不会产生费用,只有在添加数据源后开启备份才会产生费用。如何开启备份,请参见 ...

SQL Console初体验

进入数据库 成功创建数据库后,您可在DMS控制页面左侧 数据库实例 列表,找到并展开目标实例,再双击数据库名称,即可进入目标数据库的SQL Console页面。实例下未显示数据库的常见问题 Q:为什么实例下未显示已创建的数据库呢?A:...

什么是备份数据

本文介绍数据库备份DBS备份数据量的概念。名词解释 备份数据量,是指通过DBS备份链路的数据量。常见概念 在数据库备份DBS业务场景下,含有常见以下几个概念:数据库磁盘空间、数据文件空间、备份数据量、存储数据量等。概念 说明 数据库...

添加宜搭数据

在 我的数据 页签选择 数据源管理,单击 添加数据。在 添加数据 对话框,类型 选择 宜搭数据源。填写宜搭数据源相关信息。参数 说明 自定义数据源名称(必填)数据源的显示名称。应用编码(必填)宜搭应用平台已创建表单的应用编码。...

添加AnalyticDB for MySQL数据

实例ID VPC下数据库实例的ID,可在 AnalyticDB控制 获取。说明 通常您可以直接在数据库产品的控制台查看数据库实例的VPC实例ID。但是由于VPC网络实现机制的原因,有时控制台显示的实例ID并不是DataV数据源配置VPC网络需要的实例ID。...

(可选)创建数据库账号并添加权限

本文以DMS(Data Management Service)为例,介绍如何在云数据库MongoDB创建...在左侧 数据库实例 列表,右键单击目标实例。在弹出的列表选择 账号管理。在 账号管理 页面,单击数据库列表,选择目标数据库,查看已创建的数据库账号。

(可选)创建数据库账号并添加权限

本文以DMS(Data Management Service)为例,介绍如何在云数据库MongoDB创建...在左侧 数据库实例 列表,右键单击目标实例。在弹出的列表选择 账号管理。在 账号管理 页面,单击数据库列表,选择目标数据库,查看已创建的数据库账号。

(可选)创建数据库账号并添加权限

本文以DMS(Data Management Service)为例,介绍如何在云数据库MongoDB创建...在左侧 数据库实例 列表,右键单击目标实例。在弹出的列表选择 账号管理。在 账号管理 页面,单击数据库列表,选择目标数据库,查看已创建的数据库账号。

筛选数据

本文介绍在DataV筛选数据源的方法。系统支持按照类别对数据源进行筛选。操作步骤 登录 DataV控制。在 我的数据 页签单击 数据源管理。...在数据源类别下拉列表,选择需要查找的数据源类型,即可从数据源里面筛选出您需要的数据源。

添加AnalyticDB for PostgreSQL数据

实例ID VPC下数据库实例的ID,可在 AnalyticDB for PostgreSQL控制 获取。说明 通常您可以直接在数据库产品的控制台查看数据库实例的VPC实例ID。但是由于VPC网络实现机制的原因,有时控制台显示的实例ID并不是DataV数据源配置VPC网络...

数据防泄漏典型案例

使用数据安全中心可以监测和防范各类数据泄露风险,例如身份...处理方法:通过 数据安全中心控制 数据审计>日志分析 页面的审计日志持续监控后续行为,观察是否有违规行为。相关文档 查看审计日志 发现和处理异常告警 自定义检测模型

配置VPC数据

这两种ID都可以在阿里云控制台中获取。通过 RDS控制台 获取 VPC ID 和 实例ID。图 1.获取数据库实例ID 图 2.获取VPC ID 如果您的数据库安装在VPC内的ECS上,则需要配置该ECS的 VPC ID 和 实例ID。图 3.获取ECS的实例ID 图 4.获取ECS的VPC ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 阿里邮箱 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用