不同阿里云账号下RDS实例间的数据同步
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 功能限制 不兼容触发器 当同步对象为整个库，且库中的触发器（TRIGGER）会更新库内...
基本概念
在使用计算节点配置任务流程时，流程中连接上下游的连接线表示计算节点的输入和输出数据，而节点参数需要通过单独的界面进行配置。节点任务流程：通过有向无环的流程图（DAG）描述，定义了一段处理逻辑。节点任务流程中所有计算节点的输入...
LogHub（SLS）实时ETL同步至Hologres
在 数据输出预览 窗口，您可以根据需要修改输入数据，或单击 手工构造数据 按钮自定义输入数据，再单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点对输入数据处理异常，或产生脏数据时，也会反馈出异常信息，能够...
新建Hologres类型公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
DataStudio侧实时同步任务配置
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，将多种输入及输出数据源搭配组成同步链路，进行单表或整库数据的实时增量同步。本文为您介绍如何创建单表或整库增量数据实时同步任务，并在创建完成后查看任务运行情况。前提...
新建Spark SQL类型公共节点并运行
如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出，自定义填写输出标识，并选择输出数据结构。如果需要设置节点的全局控制参数，单击 添加参数，添加节点变量并赋值，关于全局变量的设置，更...
新建RDS MySQL类型的公共节点
数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建Flink SQL类型的公共节点
输出数据格式 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建RDS MySQL类型的公共节点
数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建PostgreSQL类型的公共节点
数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建Hive类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建Hive类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建PostgreSQL类型的公共节点
数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建Flink Vvr SQL类型的公共节点
输出数据格式 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建Flink Vvr SQL类型的公共节点
输出数据格式 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建MaxCompute SQL类型的公共节点
数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建MaxCompute SQL类型的公共节点
数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建AnalyticDB PostgreSQL类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建AnalyticDB PostgreSQL类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建Blink类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建Blink类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
使用Stage和Task详情分析查询
Task输出数据量 Task的输出数据量，包括输出行数和输出数据大小。根据当前Stage算子计划树中的聚合节点（Aggregation）或Join节点的属性，对应到具体的SQL语句，判断分区字段或者Join条件字段中是否存在某些字段组合。例如：a.id=b.id 中...
配置IBM DB2输出组件
解析方案 非必选项，选择输出数据前后的一些操作。解析方案 包括 填写准备语句 和 填写完成语句。输入字段 根据上游的输入，为您展示输入字段。输出字段 单击 字段管理，在 字段管理 对话框，添加输出字段：单击 图片，将 已选的输入字段 ...
配置IBM DB2输出组件
解析方案 非必选项，选择输出数据前后的一些操作。解析方案 包括 填写准备语句 和 填写完成语句。输入字段 根据上游的输入，为您展示输入字段。输出字段 单击 字段管理，在 字段管理 对话框，添加输出字段：单击 图片，将 已选的输入字段 ...
新建Blink DataStream类型的公共节点
如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出，自定义填写输出标识，并选择输出数据结构。如果需要设置节点的全局控制参数，单击 添加参数，添加节点变量并赋值，关于全局变量的设置，更...
新建Blink DataStream类型的公共节点
如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出，自定义填写输出标识，并选择输出数据结构。如果需要设置节点的全局控制参数，单击 添加参数，添加节点变量并赋值，关于全局变量的设置，更...
配置SAP HANA输出组件
解析方案 非必选项，选择输出数据前后的一些操作。解析方案 包括 填写准备语句 和 填写完成语句。输入字段 根据上游的输入，为您展示输入字段。输出字段 单击 字段管理，在 字段管理 对话框，添加输出字段：单击 图片，将 已选的输入字段 ...
配置SAP HANA输出组件
解析方案 非必选项，选择输出数据前后的一些操作。解析方案 包括 填写准备语句 和 填写完成语句。输入字段 根据上游的输入，为您展示输入字段。输出字段 单击 字段管理，在 字段管理 对话框，添加输出字段：单击 图片，将 已选的输入字段 ...
新建Flink SQL类型的公共节点
如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出，自定义填写输出标识，并选择输出数据结构。如果需要设置节点的全局控制参数，单击 添加参数，添加节点变量并赋值，关于全局变量的设置，更...
配置OceanBase输出组件
解析方案 非必选项，选择输出数据前后的一些操作。解析方案 包括 填写准备语句 和 填写完成语句。输入字段 根据上游的输入，为您展示输入字段。输出字段 单击 字段管理，在 字段管理 对话框，添加输出字段：单击 图片，将 已选的输入字段 ...
新建Elastic Service在线类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建Flink Vvp SQL类型的公共节点
如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出，自定义填写输出标识，并选择输出数据结构。如果需要设置节点的全局控制参数，单击 添加参数，添加节点变量并赋值，关于全局变量的设置，更...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
新建Elastic Service在线类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
DataWorks数据服务对接DataV最佳实践
DataV通过与DataWorks数据服务的对接，通过交互式分析Hologres连接DataWorks数据服务开发并生成API，快速在DataV中调用API并展现MaxCompute的数据分析结果。数据服务对接DataV产生背景 MaxCompute是阿里巴巴集团自主研究的快速、完全托管的...
备份集查询功能概览
搭建离线数据仓库：您可以将DBS备份数据作为数据湖存储，搭建离线数据仓库，实现湖仓一体，挖掘数据价值。应对审计需求：全量备份数据保存在DBS中，若有临时审计需求，可以快速过滤出需要的数据进行审计分析。快速定位数据：库-表-分区的新...
Kafka单表实时入湖OSS（HUDI）
在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助...
我是普通用户
数据服务 数据服务提供最小粒度数据输出、可视化制作、云市场售卖等功能。数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。工单 工单管理 DMS提供产品内的工单审批和工单执行状态通知功能，可通过钉钉和邮件两种方式进行通知。
数据仓库需求模板
数据交互方式 涉及到数据输出的，需要描述数据的交互方式、格式等。附件说明 如果有附件需要补充的，请在此说明，并同步附加附件。项目涉众 数据产品经理 设计人员 开发人员 测试人员 数据安全与合规人员 需求版本变更历史 版本号 版本确认...
- 产品推荐
- 这些文档可能帮助您