教程概述
本案例使用阿里云DTS将您的增量数据同步到DataHub上，再通过阿里云实时计算Flink订阅DataHub的数据进行实时计算，并将结果插入到RDS数据库中，最终通过DataV大屏进行展示。说明 本案例仅提供具体的操作指导，业务场景和数据与实际情况会有...
数据源配置常见问题
如果您的API使用了DataV暂不支持的数据源或接口，例如调用函数计算等，此类API也可以通过阿里云API网关中的数据源来获取数据。数据库数据源配置时报timeout，该如何处理？确认您是否已经完成 数据库白名单的配置。如果您的数据源为阿里云...
数据源配置常见问题
如果您的API使用了DataV暂不支持的数据源或接口，例如调用函数计算等，此类API也可以通过阿里云API网关中的数据源来获取数据。数据库数据源配置时报timeout，该如何处理？确认您是否已经完成 数据库白名单的配置。如果您的数据源为阿里云...
什么是数据库网关
为什么选择数据库网关 数据库网关提供安全可靠、低成本的数据库接入服务，通过数据库网关您可以安全且低成本地将第三方云或本地的数据库接入至阿里云。同时数据库网关可以与其他阿里云产品（例如数据传输服务DTS，数据库备份DBS，数据管理...
跨阿里云账号任务如何配置RAM授权
本文介绍在使用数据传输服务DTS（Data Transmission Service）配置跨阿里云账号的任务时，如何为源或目标库实例所属的阿里云账号配置RAM授权。背景信息 在使用DTS配置跨账号任务时，需要使用数据库实例所属的阿里云账号（主账号）配置RAM...
创建PostgreSQL数据源
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 数据源白名单配置。权限说明 Dataphin仅支持 超级管理员、...
创建Microsoft SQL Server数据源
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 数据源白名单配置。使用限制 Dataphin仅支持 超级管理员、...
配置DTS迁移、同步或校验任务
Reserve String 否 {"srcInstanceId":"cen-9kqshqum*"} DTS预留参数，格式为JSON字符串，您可以传入本参数完善源目库信息（如目标Kafka数据库的数据存储格式、云企业网CEN的实例ID）。更多信息，请参见 Reserve参数说明。Checkpoint String...
不同阿里云账号下RDS实例间的数据同步
前提条件 源RDS实例和目标RDS实例的数据库类型为 RDS MySQL。目标 RDS MySQL 实例的存储空间须大于源 RDS MySQL 实例占用的存储空间。注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，...
什么是数据库网关
通过数据库网关，您可以安全且低成本地将第三方云或本地的数据库接入至阿里云。同时，数据库网关可以与其他阿里云产品（例如数据传输服务DTS，数据库备份DBS，数据管理DMS）集成使用。使用指引 如果您是第一次使用数据库网关，您可以参考...
跨阿里云账号备份恢复数据
说明 恢复时间取决于备份计划规格和要恢复的数据库大小。规格越高恢复速度越快，数据量越大恢复所需的时间也就越长。更多信息，请参见 备份恢复性能说明。若您选择恢复至新建实例中，系统大约需要5~10分钟创建RDS新实例。恢复成功后，您...
创建Hologres数据源
若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 数据源白名单配置。操作步骤 在Dataphin首页，单击顶部菜单栏 管理...
创建Aliyun HBase数据源
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 附录：数据源白名单配置。权限说明 仅支持 超级管理员、...
配置订阅实例
旧版订阅实例支持订阅自建MySQL、RDS for MySQL和DRDS的数据，新版订阅实例支持订阅自建MySQL、RDS for MySQL、PolarDB MySQL和Oracle的数据。SubscriptionInstance.VPCId String 否 vpc-bp1vwnn14rqpyiczj*订阅实例的专有网络ID。说明 当 ...
配置迁移实例
SourceEndpoint.EngineName String 否 MySQL 源库的数据库类型，取值：MySQL、TiDB、SQLServer、PostgreSQL、Oracle、MongoDB、Redis、POLARDB、polardb_pg。说明 当 DestinationEndpoint.InstanceType取值为 RDS、POLARDB、ECS、...
创建MySQL数据源
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 数据源白名单配置。使用限制 Dataphin仅支持 超级管理员、...
创建PolarDB数据源
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 数据源白名单配置。权限说明 Dataphin仅支持 超级管理员、...
配置同步实例
说明 如在Redis企业版实例间的数据同步可使用该参数，更多信息，请参见 调用OpenAPI配置Redis企业版实例间单向或双向数据同步。Checkpoint String 否 1610540493 同步位点。AccountId String 否 12323344*阿里云主账号ID，无需设置，该参数...
ADAM登录账号
ADAM支持使用阿里云账号登录。...添加权限策略，请参见 为RAM用户授权。说明 AliyunADAMFullAccess：管理ADAM的权限。AliyunADAMReadOnlyAccess：只读访问ADAM的权限。...说明 某RAM用户产生的数据，其阿里云账号下的其他的RAM用户都可以看到。
概述
阿里云DataWorks联合建模工具DDM（Datablau Data Modeler）为您提供一体化的数据建模解决方案（DATABLAU），将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力用户实现数据资产价值化输出，在数据全生命周期上夯实数据...
创建Aliyun HBase数据源
您可以在 阿里云Hbase控制台 的数据库连接页面，查看主版本号。zkQuorum 配置阿里云HBase实例的链接地址，推荐您使用专有云网络的链接地址。您可以在 阿里云Hbase控制台 的数据库连接页面，查看链接地址。单击 测试连接，测试数据源是否...
步骤二：实时项目规划
本文将指导您完成本教程的Ververica Flink计算源、数据源、实时项目的创建...阿里云数据库：在阿里云上创建的数据库。ECS（VPC）自建数据库：使用（VPC）自建的数据库。高级设置 使用 默认配置。单击 测试连接。连通性测试通过后，单击 确定。
步骤二：实时项目规划
本文将指导您完成本教程的Ververica Flink计算源、数据源、实时项目的创建...阿里云数据库：在阿里云上创建的数据库。ECS（VPC）自建数据库：使用（VPC）自建的数据库。高级设置 使用 默认配置。单击 测试连接。连通性测试通过后，单击 确定。
通过DMS连接StarRocks实例
背景信息 DMS是由阿里云提供的数据库管理Web终端，为您管理Windows系统和Linux系统下的数据库。您只需在数据管理控制台上录入StarRocks实例信息，即可使用数据管理功能，例如新建数据库、新建表等。更多信息，请参见 什么是数据管理DMS。...
不同阿里云账号下RDS实例间的数据同步
前提条件 源RDS实例和目标RDS实例的数据库类型为 RDS MySQL。目标 RDS MySQL 实例的存储空间须大于源 RDS MySQL 实例占用的存储空间。注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，...
数据连接管理
可能是您录入的数据库实例已从 数据连接管理 页面删除，或者 选择已有的数据库连接 所属的区域与已录入的数据库实例的 类型 不符。如何在DMS中录入数据库实例？请参见 云数据库录入 和 他云/自建数据库录入。说明 DMS不支持以源库或目标库...
步骤二：规划数仓
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层...阿里云数据库：在阿里云上创建的数据库。ECS（VPC）自建数据库：使用（VPC）自建的数据库。高级设置 使用 默认配置。单击 测试连接。连通性测试通过后，单击 确定。
步骤二：规划数仓
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层...阿里云数据库：在阿里云上创建的数据库。ECS（VPC）自建数据库：使用（VPC）自建的数据库。高级设置 使用 默认配置。单击 测试连接。连通性测试通过后，单击 确定。
创建OceanBase数据源
数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源 标签 您可根据标签给数据源进行分类打标，如何创建标签，请参见 ...
创建OceanBase数据源
数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源 标签 您可根据标签给数据源进行分类打标，如何创建标签，请参见 ...
常见问题
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段，扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、...
创建PolarDB-X数据源
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 数据源白名单配置。权限说明 Dataphin仅支持 超级管理员、...
云数据库录入
本文介绍如何通过数据管理DMS录入阿里云数据库。前提条件 支持录入的云数据库类型，请参见 支持的云数据库。系统角色为DBA或管理员。查看系统角色的操作，请参见 查看我的系统角色。已在云数据库的白名单中添加DMS的服务器访问地址。详细...
跨阿里云账号同步RDS MySQL实例
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 数据库账号的权限要求 数据库 所需权限 创建及授权方式 源 RDS MySQL 同步对象的...
自建Hadoop数据迁移到阿里云E-MapReduce
客户在决定上云之后，会将自建Hadoop集群的数据迁移到阿里云自建Hadoop集群或者EMR集群。本实践方案提供安全和低成本的HDFS数据迁移方案。适用场景 本实践方案提供如下场景的最佳实践：基于IPSec VPN隧道+DistCp（Hadoop原生工具），将数据...
跨阿里云账号迁移RDS实例
说明 如果未选择 增量迁移，为保障数据一致性，数据迁移期间请勿在源实例中写入新的数据。源库触发器迁移方式 请根据实际情况选择迁移触发器的方式，若您待迁移的对象不涉及触发器，则无需配置。更多信息，请参见 同步或迁移源库中的触发器...
云数据库录入
RegisterInstance-录入新的数据库实例 常见问题 Q：在DMS录入阿里云数据库的过程中，提示白名单问题（如下图所示），该如何操作？A：您可单击提示框的 设置白名单，系统将自动尝试在云数据库的白名单中添加DMS的服务器访问地址。若自动添加...
创建Hologres数据源
进行数据同步：DataWorks的数据集成模块为您提供读取和写入数据至Hologres的能力，您可将其他数据源的数据同步至当前Hologres数据源，或将当前Hologres数据源的数据同步至其他数据源。同时，可根据需要选择离线同步、实时同步、同步解决...
场景：跨账号创建数据源
说明 您可根据跨账号添加的数据源在A工作空间的使用场景，提前为RAM角色授权与相关权限，例如，若要在A工作空间查询B工作空间数据源下的表，需确保数据源配置的RAM角色已拥有该表的SELECT权限。账号A：使用账号B的用户信息创建数据源 说明 ...
产品概述
背景信息 随着国家对数据安全和个人敏感信息的加强监管，原子化的数据安全能力已无法满足监管要求，国家标准和行业标准逐渐提出数据全生命周期的安全保障的需求，传统的三方安全加固和客户端加密都在客户成本、架构改造、数据库性能等带来...
- 产品推荐
- 这些文档可能帮助您