数据源开发和生产环境隔离

背景信息 同一个名称的数据源存在开发环境和生产环境两套配置,在配置数据源时,您可基于标准模式工作空间对应底层两个数据库或数据仓库的背景,针对不同环境设置不同的数据源信息。在同步任务执行过程中,可由执行环境控制离线同步任务所...

在工作空间创建数据源或注册集群

工作空间创建完成后,您需要先将您的数据库或数据仓库,通过创建数据源的方式添加至DataWorks工作空间,或将您的集群注册至DataWorks工作空间,以便进行数据同步、数据分析与开发、数据调度等操作。本文主要以使用正式开发环境为例,为您...

新建自定义数据源

完成自定义数据源类型后,您可将该类型的数据源接入到Dataphin中,为后续进行集成开发做准备。前提条件 已有自定义数据源类型。具体操作,请参见:新建离线自定义源类型。新建实时自定义源类型。操作步骤 请参见 数据源管理入口,进入 数据...

API任务概述

任务名称 任务用途 任务链接 通过直连数据源模式创建API 直连数据源模式是通过SQL直接从数据源创建API。通过直连数据源模式创建API 通过SQL模式创建API SQL模式是基于服务单元、Dataphin逻辑表通过编写SQL语句创建API,灵活应用。通过SQL...

数据源管理

本文介绍数据源的一般操作,包括新建、搜索、重命名、编辑和删除等操作。新建数据源 具体操作请参见 添加数据源。搜索数据源 登录 DataV控制台。在 功能导航 模块单击 数据源,进入数据源管理页面。在数据源卡片页右角可以做以下操作。...

适配组件数据

具体配置API数据源时,是否选中 服务器代理请求 等操作,详情请参见 如何配置跨域数据。操作步骤 登录 DataV控制台。在 工作台 页面中,选择已创建的数据看板,单击 编辑。在左侧图层栏中,单击选中某一组件。例如:Echarts 基本折线图。在...

修改名单抽奖数据

具体配置API数据源时,是否勾选 服务器代理请求 等操作,详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。在 我的可视化 页面内,单击 名单抽奖 可视化应用,进入画布编辑器内。以画布中 抽奖池 组件为例,单击选中该组件后,在画布...

修改名单抽奖数据

具体配置API数据源时,是否勾选 服务器代理请求 等操作,详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。在 我的可视化 页面内,单击 名单抽奖 可视化应用,进入画布编辑器内。以画布中 抽奖池 组件为例,单击选中该组件后,在画布...

修改组件数据

具体配置API数据源时,是否勾选 服务器代理请求 等操作,详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。以模板画布中 轮播列表 组件为例,单击选中该组件后,在画布右侧配置面板的 数据 页签中,单击 配置数据源。在 设置数据源 ...

修改组件数据

具体配置API数据源时,是否勾选 服务器代理请求 等操作,详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。以模板画布中 轮播列表 组件为例,单击选中该组件后,在画布右侧配置面板的 数据 页签中,单击 配置数据源。在 设置数据源 ...

适配组件数据

具体配置API数据源时,是否选中 服务器代理请求 等操作,详情请参见 如何配置跨域数据。操作步骤 登录 DataV控制台。在 我的可视化 页面中,选择已创建的可视化应用,单击 编辑。在左侧图层栏中,单击选中某一组件。例如:双十一气泡图。在...

创建数据源

概述 您可以通过以下方式创建 OceanBase 开发者中心(OceanBase Developer Center,ODC)数据源:ODC 首页中创建数据源:进入 ODC 首页后,单击 新建连接 按钮创建数据源。公有云实例中创建数据源:公有云的实例中,单击 登录数据库,输入...

开发Dataphin数据源并加速数据查询

单击 创建数据源,完成Dataphin数据源的创建。Dataphin数据源创建成功后,数据服务自动将该数据源发布至数据服务市场的Dataphin数据源列表中,后续供应用调用。加速数据查询 为Dataphin数据源已绑定的计算空间添加Hologres计算源。具体操作...

创建Redis数据源

通过创建Redis数据源能够实现Dataphin向Redis写入业务数据。...重要 创建Redis数据源时不支持测试数据源是否可以和Dataphin进行正常的连通,因此需要您确保连接信息的正确性。您可根据 附录:网络连通解决方案 自行排查。

创建RocketMQ数据源

本文为您介绍如何创建RocketMQ数据源。背景信息 RocketMQ即阿里云消息队列RocketMQ...重要 创建RocketMQ数据源时不支持测试数据源是否可以和Dataphin进行正常的连通,因此需要您确保连接信息的正确性。单击 确定,完成RocketMQ数据源的创建

概述

系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中,同时在数据仓库和DLA中创建数据源表相同的表结构,基于目标数据仓库进行数据分析,影响数据源端的线业务运行。方案优势 T+1全量同步一键建仓...

创建RocketMQ数据源

本文为您介绍如何创建RocketMQ数据源。背景信息 RocketMQ即阿里云消息队列RocketMQ...重要 创建RocketMQ数据源时不支持测试数据源是否可以和Dataphin进行正常的连通,因此需要您确保连接信息的正确性。单击 确定,完成RocketMQ数据源的创建

任务运行失败

您可以参考 配置MySQL数据源 进入 数据源管理 页面,单击目标数据源 操作 列的 编辑,在 数据源编辑 页面查看创建数据源时所使用的模式。For-each,do-while、pai等节点如何在运维中心查看日志 找到实例右键查看内部节点。分支节点运行报错...

创建Kafka数据源

重要 创建Kafka数据源时不支持测试数据源是否可以和Dataphin进行正常的连通,因此需要您确保连接信息的正确性。单击 测试连接,测试数据源是否可以和Dataphin进行正常的连通。测试成功后,单击 确定,完成Kafka数据源的创建。后续步骤 完成...

创建Hudi数据源

本文为您介绍如何创建Hudi数据源。背景信息 Hudi即Apache Hudi,Hudi是一个通用的大数据...重要 创建Hudi数据源时不支持测试数据源是否可以和Dataphin进行正常的连通,因此需要您确保连接信息的正确性。您可根据 网络连通解决方案 自行排查。

数据源和项目协同

背景信息 项目管理员创建一个项目成员后,项目成员可以创建数据源,并在项目中添加数据源中的数据库后,即可进行数据库变更任务。系统管理员在 Web 版 ODC 中创建项目,并为该项目指定成员。系统管理员或者拥有新建数据源角色权限的项目...

数据源权限管理

数据源权限受Owner粒度权限管理的控制,所以创建者无权控制该数据源。租户数据源的Operator机制完善,Owner信息完善。Owner可能被移除,降为开发角色等低权限角色。为保障数据源的安全,仅允许具备相应权限的角色控制数据源。什么是...

数据源中心

创建数据源 进入数据源中心页面。使用阿里云账号(主账号)或RAM用户登录 E-MapReduce控制台。在左侧导航栏,选择 EMR Workbench>Workflow。在Workflow页面,单击目标工作空间操作列的 控制台。单击上方的 数据源中心 页签。在 数据源中心 ...

管理数据源

查看数据源 创建数据源后,您可以在数据源列表查看所有已创建数据源的基本信息、详情和网络连接等信息,也可以根据数据源类型进行筛选、根据数据源的创建时间进行排序,以及模糊搜索指定数据源。登录 OceanBase 管理控制台。在左侧导航栏,...

创建及管理标签离线服务任务

加载策略 目标数据源为MySQL、Oracle数据源时,仅支持 覆盖策略 加载策略;覆盖数据策略下,当主键/约束冲突时,会先删除原数据,再插入整行新数据。输入标签 勾选实体下需要进行映射的标签,并单击 按钮进行数据源字段映射关系配置。映射...

配置数据源

HBase 支持 支持 配置HBase数据源 重要 配置HBase数据源时,配置要点如下。请选择 连接串 模式添加数据源。仅支持Hbase 1.4.9版本,请在 配置信息 中填写"hbaseVersion":"1.4.9。仅支持 特殊认证方 式为 无认证。仅支持使用独享数据服务...

数据查询与分析管控

管控数据源的查询权限 说明 如您未创建数据源,请先进入 数据源管理 页面创建。您可根据下图步骤,授权某成员或角色,拥有指定工作空间数据分析模块中目标数据源的查询权限。配置要点如下。参数 描述 工作空间 仅支持选择当前账号为 空间...

数据源管理概述

权限说明 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与配置请参见 添加Dataphin成员。板块架构师配置请参见 创建数据板块。项目管理员配置请参见 添加项目成员。...

数据源管理概述

权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。功能介绍 多数据源类型接入:Dataphin内置丰富的数据源类型,支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系...

创建ClickHouse数据源

操作前准备:权限说明与配置 使用RAM用户(即子账号)或 RAM角色 创建数据源,需拥有如下任意权限:仅拥有 项目所有者、空间管理员 或 运维 空间角色的RAM用户或RAM角色可创建数据源,授权详情请参见 添加空间成员并管理成员角色权限。...

支持的数据源

当前DBS支持如下三种方式添加数据源:手动添加数据源 批量添加数据源 自动添加数据源 DBS支持的数据源类型请参见下表。数据源类别 数据库类型 阿里云数据库 RDS MySQL RDS SQL Server RDS PostgreSQL RDS MariaDB RDS PPAS PolarDB MySQL版...

Dataphin支持的数据源

创建GBase 8a数据源 KingbaseES 支持 支持 支持 支持 支持 创建KingbaseES数据源 TiDB 支持 支持 支持 支持 支持 创建TiDB数据源 GoldenDB 支持 支持 支持 支持 支持 创建GoldenDB数据源 OpenGauss 支持 支持 ...

创建Hologres数据源

支持创建数据源时选择是否需要对数据源开启SSL认证,如果Hologres实例开启了传输加密,您可以在创建Hologres数据源时开启SSL认证,但开启认证后的Hologres数据源能用于数据开发和调度。仅支持使用独享数据集成资源组、独享调度资源组运行...

开发前准备:绑定数据源或集群

若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建数据源或集群绑定至数据开发(DataStudio)模块。绑定后,才可读取数据源或集群中的数据,并进行相关开发操作。前提条件 您需根据后续要开发和调度...

创建AnalyticDB for PostgreSQL数据源

说明 若选择的地域与当前工作空间地域一致,则创建数据源后,该数据源支持在数据开发(DataStudio)绑定,即此类数据源能用于数据开发或周期性调度任务,仅可用于数据集成模块进行数据同步。AnalyticDB for PostgreSQL实例及访问身份...

Dataphin支持的数据源

支持 支持 支持 创建HDFS数据源 FTP 支持 支持 支持 支持 支持 支持 支持 创建FTP数据源 OSS 支持 支持 支持 支持 支持 支持 支持 创建OSS数据源 Amazon S3 支持 支持 支持 支持 支持 支持 支持...

跨账号授权配置

在数据集成模块中同步阿里云部分实例(例如MaxCompute、Hologres、AnalyticDB for PostgreSQL等)的数据时,如果在创建数据源时选择的数据源类型为阿里云实例模式,且实例所属云账号和同步任务的云账号一致,您需要进行实例跨账号授权的...

使用自定义镜像创建服务器

通过自定义镜像创建服务器时,系统盘大小能小于自定义镜像中系统盘数据的大小。如果自定义镜像中包含数据数据,则数据盘的大小也能小于自定义镜像中数据数据的大小。在轻量应用服务器创建完成前,请注意不要进行以下操作,否则将...

Quick BI如何接入TSDB

操作步骤 验证数据源连接并创建数据源。登录Quick BI控制台,操作详情请参见 Quick BI控制台。按照下图指引添加数据源。在 添加TSDB数据源 对话框,您可以根据业务场景,完成以下配置。名称 描述 显示名称 数据源配置列表的显示名称。名称...

数据源管理

创建数据源 连接属性配置。连接名称:请输入你要建立的数据源名称。连接类型:支持数据库与Kafka两种类型。数据库引擎:当 连接类型 为数据库,支持MySQL引擎。当 连接类型 为Kafka,支持阿里云消息队列Kafka,EMR Kafka,自建Kafka。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云服务器 ECS 云数据库 RDS 轻量应用服务器 数据库备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用