数据源管理概述

功能介绍 多数据源类型接入:Dataphin内置丰富的数据源类型,支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息,请参见 Dataphin支持的数据源。自定义数据源类型:在内置的...

数据源管理概述

功能介绍 多数据源类型接入:Dataphin内置丰富的数据源类型,支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息,请参见 Dataphin支持的数据源。自定义数据源类型:在内置的...

新建 MySQL 数据

密码 数据库用户的密码。Database Name MySQL 数据库的名称。说明 如果您配置了 Database Name,当数据源作为源端时,数据迁移项目仅支持选择指定 Database Name 下的迁移对象。备注 数据源的备注信息。单击 测试连接,验证数据传输和数据...

新建 Oracle 数据

密码 数据库用户的密码。Schema Name Oracle 数据库的 Schema 名称。说明 如果您配置了 Schema Name,当数据源作为源端时,数据迁移或数据同步项目仅支持选择指定 Schema Name 下的迁移或同步对象。如果您未配置 Schema Name,则可以将您可...

数据重排

在MaxCompute的使用过程中,如果已经积累了大量数据占用了大量存储资源,且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理,在您的存储预算有限,计算资源还有冗余的情况下,可以考虑使用数据重排方式对存储空间进行优化。...

Iceberg概述

您可以借助Iceberg快速地在HDFS或者阿里云OSS上构建自己的数据湖存储服务,并借助开源大数据生态的Spark、Flink、Hive和Presto等计算引擎来实现数据湖的分析。核心能力 Apache Iceberg设计初衷是为了解决Hive数仓上云的问题,经过多年迭代...

DataWorks On CDP/CDH使用说明

一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至CDP/CDH Hive、CDP/CDH HBase的能力,您需要将Hive或HBase组件创建为 DataWorks的 Hive或HBase数据源,实现将其他数据源的数据同步至Hive或HBase数据源,或将Hive或HBase数据...

新建 PostgreSQL 数据

密码 数据库用户的密码。Database Name RDS PostgreSQL 数据库的名称。说明 当数据源作为源端时,数据迁移或数据同步项目仅支持选择指定 Database Name 下的迁移或同步对象。备注(可选)数据源的备注信息。单击 测试连接,验证数据传输和...

数据质量概述

功能介绍 数据质量支持对常见大数据存储(MaxCompute、E-MapReduce Hive、Hologres等)进行质量校验。从完整性、准确性、有效性、一致性、唯一性和及时性等多个维度,配置质量监控规则。并可以将质量监控规则与调度节点进行关联,当任务...

新建 PolarDB-X 1.0 数据

密码 数据库用户的密码。重要 您需要在底层的 RDS 内部也创建相同的用户名和密码。备注(可选)数据源的备注信息。单击 测试连接,验证数据传输和数据源的网络连接,以及用户名和密码的有效性。待数据源测试连接成功,单击 确定。

DataWorks On MaxCompute使用说明

DataWorks基于 云原生大数据计算服务MaxCompute 轻松构建离线数仓分析系统。MaxCompute可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理,保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发...

新建 TiDB 数据

密码 数据库用户的密码。DB Name TiDB 数据库的名称。说明 如果您配置了 DB Name,当数据源作为源端时,数据迁移项目仅支持选择指定 DB Name 下的迁移对象。增量同步选项设置 Kafka 数据源/Topic Kafka 数据源用于保存 Binlog 及 TiCDC ...

从SLS同步

账号密码 数据库账号的密码。字段映射 日志字段和云数据库ClickHouse表字段的映射。投递开始时间 日志写入SLS的时间。例如,选择时间为 2021-12-31 08:00,即把 2021-12-31 08:00 之后的日志数据投递到云数据库ClickHouse。是 否过滤脏数据...

支持的云服务

数据集成 MaxCompute可以通过数据集成功能加载不同数据源(例如MySQL数据库)的数据,也可以通过数据集成把MaxCompute的数据导出到各种业务数据库。数据集成功能已集成在DataWorks上,您可以直接在DataWorks上配置MaxCompute数据源并读写...

常见问题

数据水印的基础上,数据安全中心通过系统内置的异常事件检测,对运维高危操作、异常访问、拖库攻击、数据库注入、数据库外联、数据库高危操作等行为进行监控告警,覆盖传统数据库的基础上,还支持对象存储OSS、大数据平台MaxCompute以及...

有数BI

密码 数据库账号的密码。单击 连接。测试连接成功后,单击右上角 保存。选择指定文件夹或新建文件夹后,单击 确定,即可完成数据连接配置。使用网易有数BI创建可视化模型 创建数据模型,为数据可视化分析做准备。在已创建的数据连接右上角...

DBeaver

testuser 密码 数据库账号对应的密码。PassW0rd 单击 测试链接(T),在返回的窗口中提示 已连接 即可。说明 如果测试链接时遇到了 org.postgresql.Driver 报错,可以尝试 下载/更新 Greenplum驱动的库,具体操作如下:在 连接设置 页面的 ...

执行在线评估

密码 数据库用户的密码。连接类型 仅选择评估模式为 Oracle>>OceanBase Oracle Mode 时,需要配置该参数。连接类型包括 SERVICE-NAME 和 SID,请根据业务需求选择,并输入连接名称。连接名称 备注(可选)数据源的备注信息。单击 测试连通...

创建MySQL数据

用户名、密码 数据库的 用户名 和 密码。SSL加密 开启后,需上传Truststore证书并填写Truststore证书密码。配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长(单位ms),默认900000毫秒(15分钟)。说明 若您在...

创建GBase 8a数据

用户名和密码 数据库对应的用户名和密码。配置数据源的高级设置。参数 描述 socketTimeout 数据库的socketTimeout时长(单位ms),默认1800000毫秒(30分钟)。说明 若您在JDBC URL中带有socketTimeout配置,则socketTimeout为JDBC URL中...

Redis逻辑备份

密码 数据库账号的密码,根据选取账号的不同,密码的填写格式有一定区别。默认账号:直接填写密码即可。默认账号为default,或以实例ID命名的账号(例如r-bp10noxlhcoim2*)。新创建的账号:密码格式为<user>:,默认账号也支持此认证方式。...

创建GBase 8a数据

用户名和密码 数据库对应的用户名和密码。配置数据源的高级设置。参数 描述 socketTimeout 数据库的socketTimeout时长(单位ms),默认1800000毫秒(30分钟)。说明 若您在JDBC URL中带有socketTimeout配置,则socketTimeout为JDBC URL中...

新建AnalyticDB for MySQL 3.0数据

用户名、密码 数据库的用户名和账号密码。配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长(单位ms),默认900000毫秒(15分钟)。说明 若您在JDBC URL中带有connectTimeout配置,则connectTimeout为JDBC URL...

创建AnalyticDB for PostgreSQL数据

用户名、密码 数据库的用户名和密码。配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长(单位s),默认900秒(15分钟)。说明 若您在JDBC URL中带有connectTimeout配置,则connectTimeout为JDBC URL中配置的...

创建AnalyticDB for MySQL 2.0数据

用户名、密码 数据库的用户名和账号密码。配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长(单位ms),默认900000毫秒(15分钟)。说明 若您在JDBC URL中带有connectTimeout配置,则connectTimeout为JDBC URL...

新建AnalyticDB for MySQL 3.0数据

用户名、密码 数据库的用户名和账号密码。配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长(单位ms),默认900000毫秒(15分钟)。说明 若您在JDBC URL中带有connectTimeout配置,则connectTimeout为JDBC URL...

创建AnalyticDB for MySQL 2.0数据

用户名、密码 数据库的用户名和账号密码。访问方式 仅支持公网IP访问。配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长(单位ms),默认900000毫秒(15分钟)。说明 若您在JDBC URL中带有connectTimeout配置,...

创建MySQL数据

用户名、密码 数据库的 用户名 和 密码。访问方式 支持公网数据库、阿里云数据库与ECS(VPC)自建数据库,您可根据您数据库类型及业务情况进行选择与配置:公网数据库:通过公网可直接访问的数据库。阿里云数据库:在阿里云购买的数据库。...

创建AnalyticDB for PostgreSQL数据

用户名、密码 数据库的用户名和密码。访问方式 选择对应的访问方式:数据源所在网络环境为公网,则访问方式选择为 公网IP。数据源所在网络环境为阿里云VPC网络,则访问方式选择为 VPC网络。VPC网络访问数据库需配置以下信息:区域:数据库...

从Amazon RDS Oracle迁移至阿里云RDS MySQL

注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

自建Oracle间的数据迁移

注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

从自建Oracle迁移至PolarDB-X

DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,甚至导致数据...

从自建PostgreSQL(10.0及以下版本)增量迁移至RDS ...

注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

从自建Oracle迁移至阿里云RDS MySQL

注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

从自建Oracle迁移至阿里云RDS MySQL

注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

从自建Oracle迁移至PolarDB MySQL版

注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

同步时源库为Db2 for LUW的注意事项及限制

说明 如为增量同步任务,DTS要求源数据库的数据日志保存24小时以上,如为全量同步和增量同步任务,DTS要求源数据库的数据日志至少保留7天以上(您可在全量同步完成后将数据日志保存时间设置为24小时以上),否则DTS可能因无法获取数据日志...

PolarDB MySQL版迁移至Elasticsearch

数据密码 Elasticsearch实例的数据密码为创建ElasticSearch实例时设置的登录密码。配置完成后,单击页面下方的 测试连接以进行下一步。如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等),DTS会自动将...

跨云账号迁移云数据库Redis实例

数据密码 填入目标云数据库Redis实例的密码,根据选取的账号(需具备读写权限)填写密码,如果忘记密码,您可以重置密码,具体操作请参见 修改或重置密码。默认账号(即以实例ID命名的账号):直接填写密码即可。新创建的账号:密码格式...

跨云账号单向同步云数据库Redis实例

数据密码 填入目标云数据库Redis实例的密码,根据选取的账号(需具备读写权限)填写密码,如果忘记密码,您可以重置密码,具体操作请参见 修改或重置密码。默认账号(即以实例ID命名的账号):直接填写密码即可。新创建的账号:密码格式...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生大数据计算服务 MaxCompute 云数据库 RDS 数据库备份 DBS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用