数据归档至用户OSS
如果您开启了后置行为，源表已归档数据会被清理，同时在源数据库中生成备份临时表。清理备份临时表：通过新建普通数据变更工单，清理数据库中的备份临时表。新建普通数据变更工单，请参见 普通数据变更。说明 在数据归档工单详情页的最下方...
数据扫描和识别
DSC 扫描数据库类型和数据表类型数据源中的字段名称和字段值，同时根据字段名称和值综合判断该数据是否为敏感数据。例如：年龄数据。如果只通过字段值无法判断数据是否敏感，DSC 会结合数据源列中的字段名称和对应的数值来综合判断。首次...
创建Lindorm数据源
背景信息 Lindorm是阿里云推出的自研数据库，提供宽表、时序、文件、搜索等多种数据模型，支持毫秒级在线数据处理、海量数据低成本存储和分析。更多阿里云Lindorm信息，请参见 云原生多模数据库 Lindorm。权限说明 Dataphin仅支持 超级管理...
数据集成支持的数据源
例如，将本地数据库MySQL的数据迁移至阿里云数据库RDS中。整库迁移 适用于将本地数据中心或在ECS上自建的数据库，同步数据至离线数仓（Hive）、大数据计算服务等场景。例如，将ECS上自建的MySQL数据库的数据迁移至MaxCompute中。实时集成 ...
创建Lindorm数据源
背景信息 Lindorm是阿里云推出的自研数据库，提供宽表、时序、文件、搜索等多种数据模型，支持毫秒级在线数据处理、海量数据低成本存储和分析。更多阿里云Lindorm信息，请参见 云原生多模数据库 Lindorm。权限说明 Dataphin仅支持 超级管理...
逻辑订阅
说明 请提前在目标数据库中创建与源数据库相同表结构的数据表。同实例时，必须使用WITH添加订阅参数 create_slot=false。CREATE SUBSCRIPTION<订阅名称>CONNECTION 'dbname=<源实例数据库名>' PUBLICATION publication_name WITH(create_...
创建GoldenDB数据源
在 新建数据源 对话框的 关系型数据库 区域，选择Golden DB。如果您最近使用过Golden DB，也可以在 最近使用 区域选择Golden DB。同时，您也可以在搜索框中，输入Golden DB的关键词，快速筛选。在 新建GoldenDB数据源 对话框中，配置连接...
新建TDengine数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。配置 集群配置 区域的参数。参数 描述 ...
创建PostgreSQL数据源
类型 支持公网数据库、阿里云数据库与ECS(VPC)自建数据库，您可根据您数据库类型及业务情况进行选择与配置：公网数据库：通过公网可直接访问的数据库。阿里云数据库：在阿里云购买的数据库。支持VPC网络或公网IP进行访问。VPC网络访问数据...
创建OpenGauss数据源
在新建数据源对话框的 关系型数据库 区域，选择 OpenGauss。如果您最近使用过OpenGauss，也可以在 最近使用 区域选择OpenGauss。同时，您也可以在快搜索框中，输入OpenGauss的关键词，快速筛选。在 新建OpenGauss数据源 对话框中，配置连接...
创建MySQL数据源
访问方式 支持公网数据库、阿里云数据库与ECS(VPC)自建数据库，您可根据您数据库类型及业务情况进行选择与配置：公网数据库：通过公网可直接访问的数据库。阿里云数据库：在阿里云购买的数据库。支持VPC网络或公网IP进行访问。VPC网络访问...
创建Redis数据源
背景信息 Redis一个高性能的key-value数据库，多用于缓存，事件发布或订阅，高速队列等场景。更多学信息，请参见 Redis官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在...
创建Microsoft SQL Server数据源
类型 支持公网数据库、阿里云数据库与ECS(VPC)自建数据库，您可根据您数据库类型及业务情况进行选择与配置：公网数据库：通过公网可直接访问的数据库。阿里云数据库：在阿里云购买的数据库。支持VPC网络或公网IP进行访问。VPC网络访问数据...
MySQL整库实时同步至OSS数据湖
配置页面的右侧为源端数据库表的预览，是根据上述步骤中配置的数据源预览出来的待同步的数据库表和已选择好要同步的数据库表的预览情况。您可根据待同步的源端数据库表的数量，参考以下操作建议，快速选择要同步的库表。如果您的数据库表...
创建OpenGauss数据源
在新建数据源对话框的 关系型数据库 区域，选择 OpenGauss。如果您最近使用过OpenGauss，也可以在 最近使用 区域选择OpenGauss。同时，您也可以在快搜索框中，输入OpenGauss的关键词，快速筛选。在 新建OpenGauss数据源 对话框中，配置连接...
创建PolarDB数据源
类型 支持公网数据库、阿里云数据库与ECS（VPC）自建数据库，您可根据您数据库类型及业务情况进行选择与配置：公网数据库：通过公网可直接访问的数据库。阿里云数据库：在阿里云购买的数据库。支持VPC网络或公网IP进行访问。VPC网络访问...
新建TDengine数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。配置 集群配置 区域的参数。参数 描述 ...
创建GoldenDB数据源
在 新建数据源 对话框的 关系型数据库 区域，选择Golden DB。如果您最近使用过Golden DB，也可以在 最近使用 区域选择Golden DB。同时，您也可以在搜索框中，输入Golden DB的关键词，快速筛选。在 新建GoldenDB数据源 对话框中，配置连接...
创建Vertica数据源
背景信息 Vertica是一款基于列存储架构的数据库。如果您使用的是Vertica，在对接Dataphin进行数据开发时，您需要先完成Vertica数据源的创建。更多Vertica信息，请参见 Vertica官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、...
创建Teradata数据源
在 新建数据源 对话框的 关系型数据库 区域，选择 Teradata。如果您最近使用过Teradata，也可以在 最近使用 区域选择Teradata。同时，您也可以在搜索框中，输入Teradata的关键词，快速筛选。在 新建Teradata数据源 对话框中，配置连接数据...
创建PolarDB数据源
背景信息 PolarDB是阿里云自主研发新一代关系型数据库，兼容MySQL、PostgreSQL语法的云托管数据库产品。如果您使用的是PolarDB，在对接Dataphin进行数据开发时，您需要先完成PolarDB数据源的创建。更多PolarDB信息，请参见 什么是PolarDB。...
创建MySQL数据源
背景信息 MySQL是一种关系型数据库。常用于网站、应用程序和商业产品，是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作...
创建Redis数据源
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 附录：数据源白名单配置。权限说明 Dataphin仅支持 超级...
创建Vertica数据源
背景信息 Vertica是一款基于列存储架构的数据库。如果您使用的是Vertica，在对接Dataphin进行数据开发时，您需要先完成Vertica数据源的创建。更多Vertica信息，请参见 Vertica官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、...
创建PostgreSQL数据源
在 新建数据源 对话框的 关系型数据库 区域，选择 PostgreSQL。如果您最近使用过PostgreSQL，也可以在 最近使用 区域选择PostgreSQL。同时，您也可以在搜索框中，输入PostgreSQL的关键词，快速筛选。在 新建PostgreSQL数据源 对话框中，...
创建TiDB数据源
在 新建数据源 对话框的 关系型数据库 区域，选择TiDB。如果您最近使用过TiDB，也可以在 最近使用 区域选择TiDB。同时，您也可以在搜索框中，输入TiDB的关键词，快速筛选。在 新建TiDB数据源 对话框中，配置连接数据源的参数。配置数据源的...
创建达梦（DM）数据源
背景信息 达梦（DM）属于OLTP类型数据库，被集成在业务系统中。达梦（DM）数据库吸收借鉴当前先进新技术思想与主流数据库产品的优点，融合了分布式、弹性计算与云计算的优势，具有灵活性、易用性、可靠性、高安全性等特点。如果您使用的是...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据...
创建ClickHouse数据源
背景信息 如果您使用的是数据库ClickHouse，引入ClickHouse的业务数据至Dataphin中或将Dataphin数据导出至ClickHouse的场景中，您需要先完成ClickHouse数据源的创建。阿里云数据库ClickHouse的更多信息，请参见 云数据库 ClickHouse-什么是...
创建Microsoft SQL Server数据源
在 新建数据源 对话框的 关系型数据库 区域，选择 Microsoft SQL Server。如果您最近使用过Microsoft SQL Server，也可以在 最近使用 区域选择Microsoft SQL Server。同时，您也可以在搜索框中，输入Microsoft SQL Server的关键词，快速...
创建Teradata数据源
在 新建数据源 对话框的 关系型数据库 区域，选择 Teradata。如果您最近使用过Teradata，也可以在 最近使用 区域选择Teradata。同时，您也可以在搜索框中，输入Teradata的关键词，快速筛选。在 新建Teradata数据源 对话框中，配置连接数据...
创建Oracle数据源
类型 支持公网数据库与ECS(VPC)自建数据库，您可根据您数据库类型及业务情况进行选择与配置：公网数据库：通过公网可直接访问的数据库。ECS(VPC)自建数据库：您在阿里云ECS上自建的数据库。支持VPC方式访问。VPC网络访问数据库需配置以下...
配置Hologres输入组件
使用限制 不支持读取Hologres数据库的视图。操作步骤 请参见 配置离线单条管道，进入离线单条管道脚本的开发页面。按照下图指引，进入 Hologres输入配置 对话框。序号 说明 ① 单击页面右上角的 组件库。② 单击 输入。③ 拖动 Hologres ...
创建PolarDB-X数据源
背景信息 PolarDB-X（原DRDS升级版）是由阿里巴巴自主研发的云原生分布式数据库。如果您使用的是PolarDB-X，在对接Dataphin进行数据开发时，您需要先完成PolarDB-X数据源的创建。更多PolarDB-X信息，请参见 什么是云原生分布式数据库...
创建PolarDB-X数据源
前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 数据源白名单配置。权限说明 Dataphin仅支持 超级管理员、...
新建AnalyticDB for MySQL 3.0数据源
背景信息 云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版），是阿里巴巴自主研发的海量数据实时高并发在线分析云计算服务，使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索。更多信息，请参见 云...
创建达梦（DM）数据源
背景信息 达梦（DM）属于OLTP类型数据库，被集成在业务系统中。达梦（DM）数据库吸收借鉴当前先进新技术思想与主流数据库产品的优点，融合了分布式、弹性计算与云计算的优势，具有灵活性、易用性、可靠性、高安全性等特点。如果您使用的是...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。更多信息，请参见 Apache Hudi官网。权限说明 仅支持 超级管理员、数据源管理员、...
创建TiDB数据源
在 新建数据源 对话框的 关系型数据库 区域，选择TiDB。如果您最近使用过TiDB，也可以在 最近使用 区域选择TiDB。同时，您也可以在搜索框中，输入TiDB的关键词，快速筛选。在 新建TiDB数据源 对话框中，配置连接数据源的参数。配置数据源的...
新建Doris数据源
背景信息 Doris即Apache Doris，是一个基于MPP架构的高性能、实时的分析型数据库，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景，也能支持高吞吐的复杂分析场景。基于此，能够较好的满足报表分析、...
- 产品推荐
- 这些文档可能帮助您