新建Elastic Service在线类型的公共节点
如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出，自定义填写输出标识，并选择输出数据结构。如果需要设置节点的全局控制参数，单击 添加参数，添加节点变量并赋值，关于全局变量的设置，更...
新建PostgreSQL类型的公共节点
数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为任意...
新建Flink SQL类型的公共节点
如果节点文件和脚本中有要求输入，则打开 节点输入 后面的 开关，单击 添加节点输入，添加节点输入，自定义填写输入标识并选择输入数据结构。如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出...
新建Flink Vvp SQL类型的公共节点
如果节点文件和脚本中有要求输入，则打开 节点输入 后面的 开关，单击 添加节点输入，添加节点输入，自定义填写输入标识并选择输入数据结构。如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出...
新建MaxCompute SQL类型的公共节点
数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为任意...
新建MaxCompute SQL类型的公共节点
数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为任意...
新建Hive类型的公共节点
输入数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为...
valuePath配置规则
当图形用户界面GUI（Graphical User Interface）的渲染结构和数据结构不一致时，您可以通过valuePath字段处理对应的关系，使配置和数据一一对应。使用场景 一般情况下，GUI渲染结构和数据结构是一致的，例如：GUI渲染结构 {"apply":{"type...
新建Hive类型的公共节点
输入数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为...
新建Elastic Job类型的公共节点
输入数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建AnalyticDB PostgreSQL类型的公共节点
输入数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为...
新建Spark Batch类型的公共节点
当选择星号（*）时，代表数据结构为任意结构，用于对未创建数据模型的表进行操作。节点输出 输出标识 输出变量的标识，用户可根据前面编写的 脚本内容 来自定义，例如：Output。数据结构 云计算资源类型 输出数据的数据源类型。输出数据...
新建AnalyticDB PostgreSQL类型的公共节点
输入数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为...
valuePath配置规则
当图形用户界面GUI（Graphical User Interface）的渲染结构和数据结构不一致时，您可以通过valuePath字段处理对应的关系，使配置和数据一一对应。使用场景 一般情况下，GUI渲染结构和数据结构是一致的，例如：GUI渲染结构 {"apply":{"type...
新建Flink SQL类型的公共节点
当选择星号（*）时，代表数据结构为任意结构，用于对未创建数据模型的表进行操作。节点输出 输出标识 输出变量的标识，用户可根据前面编写的 脚本内容 来自定义，例如：Output。数据结构 云计算资源类型 输出数据的数据源类型，在下拉列表...
新建Flink Vvp SQL类型的公共节点
当选择星号（*）时，代表数据结构为任意结构，用于对未创建数据模型的表进行操作。节点输出 输出标识 输出变量的标识，用户可根据前面编写的 脚本内容 来自定义，例如：Output。数据结构 云计算资源类型 输出数据的数据源类型。输出数据...
新建Elastic Service在线类型的公共节点
输入数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建Flink Vvr SQL类型的公共节点
当选择星号（*）时，代表数据结构为任意结构，用于对未创建数据模型的表进行操作。节点输出 输出标识 输出变量的标识，用户可根据前面编写的 脚本内容 来自定义，例如：Output。数据结构 云计算资源类型 输出数据的数据源类型，在下拉列表...
新建Flink Vvr SQL类型的公共节点
当选择星号（*）时，代表数据结构为任意结构，用于对未创建数据模型的表进行操作。节点输出 输出标识 输出变量的标识，用户可根据前面编写的 脚本内容 来自定义，例如：Output。数据结构 云计算资源类型 输出数据的数据源类型，在下拉列表...
数据模型架构规范
数据层次的划分 ODS：Operational Data Store，操作数据层，在结构上其与源系统的增量或者全量数据基本保持一致。它相当于一个数据准备区，同时又承担着基础数据的记录以及历史变化。其主要作用是把基础数据引入到MaxCompute。CDM：Common ...
基本概念
数据库实例：数据库实例是在云中运行的独立数据库环境。一个数据库实例可以包含多个由数据库用户创建的数据库，并且...索引：索引是数据库管理系统对数据库表中一个或多个列的值进行排序的数据结构，使用索引可快速访问数据库表中的特定信息。
新建过滤器
数据过滤器功能 在DataV中可以使用数据过滤器，可以通过自定义JavaScript代码，实现数据结构转换、数据筛选展示和一些简单的计算。前提条件 已进入画布编辑器页面。新建过滤器 您可以通过以下两种方法新建过滤器。通过 数据过滤器 新建。在...
同步节点
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
同步节点
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
我是普通用户
测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。数仓开发 数仓开发以数据库为主要计算引擎，融合数据库生态中多种工具和服务（如DTS、DLA等），让用户可以轻松拥有数据仓库进行开发和...
功能简介
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
需求分析
MySQL用户信息数据结构（ods_user_info_d）字段名称 字段说明 uid 用户名 gender 性别 age_range 年龄分段 zodiac 星座 步骤二：分析产出目标用户画像数据结构 根据原始数据分析可获得的有效数据，并基于业务需求确认最终数据表结构。...
需求分析
MySQL用户信息数据结构（ods_user_info_d）字段名称 字段说明 uid 用户名 gender 性别 age_range 年龄分段 zodiac 星座 步骤二：分析产出目标用户画像数据结构 根据原始数据分析可获得的有效数据，并基于业务需求确认最终数据表结构。...
数据同步
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
功能简介
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
Sqoop概述
将HDFS数据导入MySQL 创建好对应HDFS中的数据结构的MySQL表后，在集群的Master节点上执行如下命令。sqoop export-connect<dburi>/<dbname>-username<username>-password<password>-table<tablename>-export-dir参数 描述 dburi 数据库的...
名词解释
INDEX 〇 ✖️ Index（索引）是一种数据结构，用于加快数据库中数据的检索速度，提高查询性能。索引可以看作是表中一个或多个列的快速访问入口，可以根据某个特定的列值快速定位到想要访问的数据。宽表引擎支持多种索引，例如二级索引、...
常见错误码及排查方法
解决方法：检查表结构和DML语句涉及的记录，确保源和目的表结构一致，或者订正数据后重启任务。DTS-70004:execute statement failed:/*s2gb356ds228bt8MysqlEngine(0)*/insert into `xxx`.`yyy`(`.`)values(.)error detail message:INSERT ...
TDE透明数据加密
每个Page的头部数据结构如下：typedef struct PageHeaderData {/*XXX LSN is member of*any*block,not only page-organized ones*/PageXLogRecPtr pd_lsn;LSN:next byte after last byte of xlog*record for last change to this page*/...
结构设计
支持多人协同在Web页面变更数据结构操作。注意事项 结构设计暂不支持在工单创建过程中，删除创建工单前就已经存在的表，创建工单后新建的表可以删除。执行变更到目标数据库后，元数据字典信息会自动同步。说明 您可在SQLConsole窗口输入 ...
自建Oracle迁移至阿里云消息队列Kafka版
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建Oracle迁移至阿里云消息队列Kafka。前提条件 已创建源数据库自建Oracle和目标实例 阿里云消息队列Kafka版。说明 源数据库和目标实例支持的版本，请参见 迁移方案概览...
表结构发布流程化
保障数据结构的规范性 安全规则 的研发规范包含新建表、修改表字段、修改表索引等多方面的近40条规范，方便研发同学自助设计满足企业研发规范的表结构，可避免因不满足规范的结构发布上线而导致的生产故障。同时，该功能可节省运维人员因...
基本概念
结构初始化：将源库中待同步对象的结构定义信息，同步至目标库中。全量数据初始化：将源库中待同步对象的存量数据，同步至目标库中。同步性能 同步性能是指每秒同步到目标库的记录数。单位为每秒记录数（RPS），详情请参见 数据同步链路...
上传数据
说明 GeoJSON数据文件大小不可超过100MB，且不支持多层嵌套数据结构。OSS上传 在 方法二：OSS上传 下方的输入框中，输入GeoJSON数据文件的OSS链接地址，并单击对话框右下方 上传 即可上传一个GeoJSON数据文件。说明 大型文件建议选择OSS...
上传数据
说明 GeoJSON数据文件大小不可超过100MB，且不支持多层嵌套数据结构。OSS上传 在 方法二：OSS上传 下方的输入框中，输入GeoJSON数据文件的OSS链接地址，并单击对话框右下方 上传 即可上传一个GeoJSON数据文件。说明 大型文件建议选择OSS...
- 产品推荐
- 这些文档可能帮助您