数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
在工作空间创建数据源或注册集群
更多数据源或集群的介绍，详情请参见 创建并管理数据源。前提条件 已创建工作空间，详情请参见 创建工作空间。已购买所需引擎产品，详情请参见各引擎的官网文档。权限说明 若创建数据源或注册集群时，您不具备相关权限，请按照界面提示申请...
访问外部数据源
说明 对于数据源绑定场景，如果多个数据源共用一个VPC下的交换机，打通其中一个数据源意味着相同交换机下的所有数据源一并打通。因此，只能打通同一Region下的数据源。在Databricks数据洞察控制台，进入集群详情页面。点击详情页面 数据源 ...
管理数据源权限
您可以在数据源管理页面，分享数据源权限给相应的工作空间，并进入被分享的工作空间查看该数据源。本文为您介绍如何管理数据源权限及查看分享的数据源。背景信息 通常数据源会承载数据的具体地址、账户和密码等敏感信息，但普通开发人员仅...
开发前准备：绑定数据源或集群
管理数据源：设置默认数据源：若同类型数据源存在多个，则可设置某个数据源为默认数据源，设置后，后续开发任务默认首选使用该数据源。说明 当同类型数据源仅存在一个，则该数据源即为默认数据源。解绑数据源：若某数据源无需用于数据建模...
创建与使用逻辑组
您可以在 数据库备份DBS 中添加多个逻辑组，可根据来源、项目、类型等维度将数据源添加至对应逻辑组中，以便更好地管理多个数据源。创建逻辑组 访问 逻辑组列表 页面，然后在上方选择目标地域。单击 添加逻辑组。每个地域的逻辑组上限为20...
管理数仓规划待发布对象
数据源对象信息：包括数据源名称、数据源类型、发布状态/完成时间、负责人、数据源格式、变更类型、环境变更（从上一次导入后，当前目标环境是否有过变更）、同名同类型（当前环境中是否包含与来源环境同名同类型的数据源，且仅包含新增...
管理数仓规划待发布对象
数据源对象信息：包括数据源名称、数据源类型、发布状态/完成时间、负责人、数据源格式、变更类型、环境变更（从上一次导入后，当前目标环境是否有过变更）、同名同类型（当前环境中是否包含与来源环境同名同类型的数据源，且仅包含新增...
一键实时同步至MaxCompute
同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据源相关能力介绍详情请参见：数据源概述。已完成数据源环境准备。您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作...
一键实时同步至MaxCompute
同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据源相关能力介绍详情请参见：数据源概述。已完成数据源环境准备。您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作...
场景：跨账号创建数据源
更多创建数据源的配置详情，请参见 创建MaxCompute数据源。配置资源组连通性。根据需要选择合适资源组，并测试连通性。资源组相关介绍，详情请参见 DataWorks资源组概述。单击 完成创建，即完成跨账号创建数据源。后续步骤 数据源创建后，...
一键实时同步至Kafka
同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据源相关能力介绍详情请参见：数据源概述。已完成数据源环境准备。您可以基于您需要进行的同步配置，在同步任务执行前，授予数据源配置的账号在数据库进行相应操作...
备份数据库
若待备份的数据源较多，建议您进行多次批量备份。您可以使用搜索或逻辑组过滤功能，快速查找目标备份源。更多信息，请参见 使用逻辑组。若待备份的数据源未设置账号密码，请先设置账号密码。具体操作，请参见 设置数据源的账号与密码。在 ...
使用DataWorks
更多添加数据源操作，请参见 配置数据源。创建业务流程 在DataWorks上创建业务流程，为创建离线同步任务做准备。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 ...
配置MySQL输入
MySQL节点支持分库分表，您可以单击 添加分库分表数据源，从下拉列表中选择相应的 数据源 和 表，添加多个数据源，同时进行同步。重要 所选表的Schema需要保持一致，否则执行会报错。单击工具栏中的 图标。常见问题 实时同步MySQL数据源的...
MySQL整库实时同步至OSS数据湖
如果您有多个数据源、数据库、数据表，您可以在左侧手动添加限定条件来进行过滤，或者在右侧页面的搜索框中通过关键词搜索出对应的库表进行添加或删除的操作。入湖配置。OSS存储路径选择：选择入湖后数据存储在OSS的哪个路径下。选择元数据...
配置转换组件
Join条件+新增条件 单击+新增条件，从多个数据源中选择Join的条件字段。说明 等号（=）左侧为数据源左表字段，右侧为数据源右表字段。完成Join条件配置后，单击 输出字段 页签。根据实际需要，在 列名称 列勾选需要的字段。配置字段计算器 ...
逻辑数仓
数据管理DMS提供的逻辑数仓具有强大的数据源管理能力，可以实现将企业的异构数据源进行逻辑聚合，形成物理分散、逻辑统一的虚拟数仓，然后快速地提供数据分析和访问服务，满足业务人员、BI分析师、运营人员等各种角色的需求。背景信息 企业...
图层配置项说明
当在可视化应用中需要对三维城市项目图层做出更多类型数据源或者数据交互需求时，则建议您将后续需要修改数据的图层一键生成区块接口，再在可视化应用中配置数据。单击场景编辑器页面右上角的 图标，在预览页面中，您可以单击左侧的 测试...
创建API数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 URL地址 请填写API请求的URL...
创建API数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 URL地址 请填写API请求的URL...
手动添加数据源
您可以通过 数据库备份DBS 的手动添加数据源功能，将不同环境的数据库添加至 数据库备份DBS 中，便于后续对数据源进行管理与备份。费用说明 添加数据源操作不会产生费用，只有在添加数据源后开启备份才会产生费用。如何开启备份，请参见 ...
批量添加数据源
您可以通过 数据库备份DBS 的批量添加数据源功能，快速导入大批量同类型的数据源，便于后续对数据源进行管理与备份。功能说明 批量导入功能仅支持MySQL公网自建数据库。...相关文档 添加数据源的更多方式：手动添加数据源 自动添加数据源
配置MySQL输出组件
同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建MySQL数据源。进行FTP输出组件属性配置的...
配置MySQL输出组件
同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建MySQL数据源。进行FTP输出组件属性配置的...
生成数据API
说明 数据服务支持多种类型的数据源，更多内容，请参见 配置数据源。本次实验Hologres数据源，前提是已绑定Hologres引擎且已创建ads_ec_ec360_gmv_kpi_overview_bi外表。如果没有开通Hologres，也可以使用 数据开发 的MySQL数据源来测试。...
水印使用限制
数据源嵌入水印时有以下使用限制。哪些数据源适合嵌入水印？数据安全中心支持静态脱敏的数据源，均支持嵌入水印。支持静态脱敏的数据源类型，请参见 支持的数据类型。对待嵌入水印的源数据有什么要求？由于嵌入水印的原理是将水印原子信息...
功能特性
创建数据投递实例 数据投递SDK 通过SDK将各种类型的数据源投递到DTS，再由DTS同步至目标数据库，从而支持更多类型的数据源。使用SDK将源端数据投递到DTS 同构同步 逻辑同构实时同步 支持同构数据库间的数据同步。自建MySQL同步至RDS MySQL ...
Quick BI数据可视化
在选择数据源步骤，单击 显示更多。选择SelectDB数据源。在 配置连接 步骤，复制自动生成的白名单列表，将IP地址加入 云数据库 SelectDB 版 实例的白名单中。具体操作，请参见 设置白名单。根据业务场景，完成以下配置。名称 描述 显示名称...
管理数据源
查看数据源 创建数据源后，您可以在数据源列表查看所有已创建数据源的基本信息、详情和网络连接等信息，也可以根据数据源类型进行筛选、根据数据源的创建时间进行排序，以及模糊搜索指定数据源。登录 OceanBase 管理控制台。在左侧导航栏，...
数据源管理
本文介绍数据源的一般操作，包括新建、搜索、重命名、编辑和删除等操作。新建数据源 具体操作请参见 添加数据源。搜索数据源 登录 DataV控制台。在 功能导航 模块单击 数据源，进入数据源管理页面。在数据源卡片页右上角可以做以下操作。...
数据源权限管理
本文为您汇总数据源权限管理相关的问题。哪些角色可以管理数据源的权限？是否支持再次分享已被分享的数据源？数据源的创建者是否有权控制该数据源？什么是私有模式的数据源？哪些用户能够收回数据源的分享权限？如何检查数据源分享关系的...
创建Salesforce数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 实例URL 访问Salesforce实例的...
创建Salesforce数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 实例URL 访问Salesforce实例的...
数据源概述
数据源功能概述 配置数据源时，您需要了解如下内容：能力 说明 数据源支持情况与配置 在配置数据集成同步任务前，您需要提前在DataWorks数据源管理页面配置好需要同步的数据源。数据集成目前支持几十种数据源，目前支持的数据源及其配置...
创建GBase 8a数据源
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
创建Sap Table数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 HOST SAP实例所在的服务器的...
创建Sap Table数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 HOST SAP实例所在的服务器的...
支持的数据源及同步方案
Lindorm数据源-LogHub（SLS）数据源-MaxCompute数据源-MariaDB数据源-Maxgraph数据源-Memcache（OCS）数据源-MetaQ数据源-MongoDB数据源-MySQL数据源-OpenSearch数据源-Oracle数据源-OSS数据源-OSS-HDFS数据源-PolarDB数据源-PolarDB-X 2.0...
- 产品推荐
- 这些文档可能帮助您