ARRAYS_OVERLAP
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。a 和 b 中元素的数据类型必须一致。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、...
ARRAY_MAX
数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、TIMESTAMP、IntervalDayTime、IntervalYearMonth STRING、BINARY、VARCHAR、CHAR ARRAY、STRUCT、MAP 返回值说明...
ARRAY_MIN
数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、TIMESTAMP、IntervalDayTime、IntervalYearMonth STRING、BINARY、VARCHAR、CHAR ARRAY、STRUCT、MAP 返回值说明...
ARRAY_UNION
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。a 和 b 中元素的数据类型必须一致。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、...
ALL_MATCH
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。predicate：必填。用于对ARRAY数组 a 中的元素进行判断的函数（内建函数或自定义函数）或表达式。输入参数的数据类型必须与ARRAY数组 a 中元素的数据类型一致。返回...
ARRAY_EXCEPT
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。a 和 b 的数据类型必须保持一致。返回值说明 返回ARRAY类型。返回规则如下：新ARRAY数组无重复元素且元素顺序与 a 中的元素顺序保持一致。ARRAY数组中存在元素为...
ANY_MATCH
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。predicate：必填。用于对ARRAY数组 a 中的元素进行判断的函数（内建函数或自定义函数）或表达式。输入参数的数据类型必须与ARRAY数组 a 中元素的数据类型一致。返回...
ARRAY_DISTINCT
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。返回值说明 返回ARRAY类型。返回规则如下：新ARRAY数组无重复元素且元素顺序与 a 中的元素顺序保持一致。ARRAY数组 a 中存在元素为NULL时，NULL值会参与运算。输入...
ARRAY_INTERSECT
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。a 和 b 的数据类型必须保持一致。返回值说明 返回ARRAY类型。返回规则如下：ARRAY数组中存在元素为NULL时，NULL值会参与运算。新ARRAY数组无重复元素且元素顺序与 a...
SIZE
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。b：必填。MAP对象。map,V>中的 K、V 指代MAP对象的Key、Value。返回值说明 返回INT类型。使用示例 示例1：计算ARRAY数组 array('a','b')中的元素数目。命令示例如下...
什么是数据库网关
完成接入后，通过数据库传输服务DTS，在数据迁移、数据同步或数据订阅时，您可以直接将数据库网关中接入的数据库作为源库或目标库。数据库备份DBS 数据库备份DBS（Database Backup）是阿里云提供的低成本、高可靠的一站式备份和恢复服务。...
什么是数据库网关
完成接入后，通过数据库传输服务DTS，在数据迁移、数据同步或数据订阅时，您可以直接将数据库网关中接入的数据库作为源库或目标库。数据库备份DBS 数据库备份DBS（Database Backup）是阿里云提供的低成本、高可靠的一站式备份和恢复服务。...
应用场景
完成接入后，通过数据库传输服务DTS，在数据迁移、数据同步或数据订阅时，您可以直接将数据库网关中接入的数据库作为源库或目标库，架构图如下所示。云上云下数据库同步 通过数据库传输服务DTS的数据同步功能，可以使本地IDC或其他云厂商的...
应用场景
完成接入后，通过数据库传输服务DTS，在数据迁移、数据同步或数据订阅时，您可以直接将数据库网关中接入的数据库作为源库或目标库，架构图如下所示。云上云下数据库同步 通过数据库传输服务DTS的数据同步功能，可以使本地IDC或其他云厂商的...
通过数据库网关将本地IDC或第三方云的数据库接入至...
完成接入后，在配置DTS的数据迁移、数据同步或数据订阅时，您可以直接将数据库网关中接入的数据库作为源库或目标库。前提条件 创建AccessKey并获取AccessKey ID和AccessKey Secret信息，详情请参见 创建AccessKey。背景信息 将本地或第三...
创建与使用逻辑组
您可以在 数据库备份DBS 中添加多个逻辑组，可根据来源、项目、类型等维度将数据源添加至对应逻辑组中，以便更好地管理多个数据源。创建逻辑组 访问 逻辑组列表 页面，然后在上方选择目标地域。单击 添加逻辑组。每个地域的逻辑组上限为20...
概述
数据湖构建可以帮助用户快速构建云上数据湖，采用统一的管理视角治理数据湖。本产品目前处于公测阶段，您可以随时开通使用，目前数据湖构建所有功能均为...入湖模板 用户创建入湖模板将数据源中的数据通过手动或者定时的方式抽取到数据湖中。
ARRAY_REMOVE
在ARRAY数组 a 中删除与 element 相等的元素。命令格式 array<T>array_remove(array<T><a>,T)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型。支持的数据类型如下：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE ...
Kafka实时入湖
本文为您介绍如何在数据湖构建（Data Lake Formation，简称DLF）中使用Kafka实时入湖任务将数据同步到数据湖中。重要 数据入湖功能已经停止更新，如果您有数据入湖需求请参考：数据入湖停止更新公告。前提条件 已开通数据湖构建服务，尚未...
ARRAY_POSITION
计算元素 element 在ARRAY数组 a 中第一次出现的位置。ARRAY数组元素位置编号自左往右，从1开始计数。命令格式 bigint array_position(array<T><a>,T)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型。支持的数据...
LTS（原BDS）服务介绍
MaxCompute/Hive->Lindorm 离线数据查询加速，将数仓中的明细、指标等数据批量回流Lindorm提供在线查询。待补充，目前可联系值班咨询 Lindorm 数据导出 ODPS（MaxCompute）重要 该功能自2023年6月16日下线，2023年6月16日后购买的LTS 不再...
配置项常见问题
该配置项用于定义一组不同的样式数组，来循环渲染数据中的不同系列。如下图中配置项定义了两个系列，组件会使用['系列1','系列2']的样式，依次循环渲染数据中的 s 字段。常见误区 配置项中的 系列名 为该样式的名称，同时作为图表中图例的...
配置项常见问题
该配置项用于定义一组不同的样式数组，来循环渲染数据中的不同系列。如下图中配置项定义了两个系列，组件会使用['系列1','系列2']的样式，依次循环渲染数据中的 s 字段。常见误区 配置项中的 系列名 为该样式的名称，同时作为图表中图例的...
数据建模
在左侧组件列表，将 数据预处理 下的 拆分 组件拖入画布中。通过连线，将 拆分-1 节点作为 data4ml 节点的下游节点。右键单击 拆分-1，在快捷菜单，单击 执行该节点。待运行完成后，右键单击 拆分-1，选择 查看数据>输出表，查看拆分后的表...
解决方案
整体导入导出 将工作组中已沉淀的数据标准、数据模型、数据加工场景、数据服务API配置、云计算资源配置等数据资产创建解决方案后，进行下载、导入以及实例化。支持将工作组内已加工完成的数据标准、数据模型、数据加工场景、数据服务API...
功能简介
整体导入导出 将工作组中已沉淀的数据标准、数据模型、数据加工场景、数据服务API配置、云计算资源配置等数据资产创建解决方案后，进行下载、导入解决方案、实例化等。支持将工作组内已加工完成的数据标准、数据模型、数据加工场景、数据...
AnalyticDB MySQL 2.0数据导入
MaxCompute中已经没有原始数据，原始数据只存在于 AnalyticDB for MySQL 2.0集群的数据库中，可以使用两种数据迁移方式将 AnalyticDB for MySQL 2.0集群中的数据导入到 数仓版（3.0）。具体操作，请参见 数据迁移。准备工作 了解 ...
关系数据库全量入湖
本文为您介绍如何在数据湖构建（Data Lake Formation，简称DLF）中使用关系数据库全量入湖任务将RDS或PolarDB数据批量同步到数据湖中。重要 数据入湖功能已经停止更新，如果您有数据入湖需求请参考：数据入湖停止更新公告。前提条件 已开通...
数据格式描述文件
键 格式 描述 是否必须 dimensions JSON数组 数据包含的维度。每个维度可以只是个字符串，或者可以额外指明维度的属性。例如“dimensions”:[“dimenssion1”,“dimenssion2”,“{“type”:“long”,“name”:“dimenssion3”}]，默认是...
入湖基础操作
关系数据库全量入湖：可以实现RDS MySQL或PolarDB数据库表数据全量同步到数据湖，选择在数据源管理中配置好的数据源，将数据源对应数据库中选定表的数据全量同步到OSS中，如果待同步表中数据量大，则所消耗的资源也会比较大，建议在业务...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
MongoDB数据源
否则同步任务在抽取MongoDB中数据时，可能会导致只查询到指定 shard 的数据，而非预期的全集。关于 mongos、mongod，详情请参考 mongos、mongod。在并发大于1的情况下，同步任务配置的集合中所有_id 字段类型必须一致（例如，_id 字段都为...
应用场景
物流应用：使用云数据库MongoDB存储订单信息，订单状态在运送过程中会不断更新，以云数据库MongoDB内嵌数组的形式来存储，一次查询就能将订单所有的变更读取出来，方便快捷且一目了然。社交应用：使用云数据库MongoDB存储用户信息以及用户...
接入数据库实例
本文介绍如何将数据库实例接入到 数据库自治服务DAS 中。功能说明 DAS支持接入阿里云数据库、阿里云ECS自建数据库、其他自建或其他云厂商数据库（包括本地IDC的自建数据库、其他云上的自建数据库、其他云上的云数据库等）。对于阿里云数据...
附录：ECS自建数据库的安全组配置
数据库开启白名单时，已将资源组对应的IP地址段添加至数据库白名单中，详情可参见 添加白名单。添加安全组 进行ECS自建数据源的数据同步时，如果同步任务运行在：独享数据集成资源组上 需要将独享数据集成资源组的EIP地址段或独享数据集成...
ZIP_WITH
array、array中的 T、S 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。combiner：必填。用于合并ARRAY数组 a、b 中元素的函数（内置函数或自定义函数）或表达式。它的两个输入参数类型分别与ARRAY数组 a、b 中元素的数据类型...
关联数组
以下示例从emp表中读取前十名员工的姓名，将它们存储在一个数组中，然后显示数组中的结果。DECLARE TYPE emp_arr_typ IS TABLE OF VARCHAR2(10)INDEX BY BINARY_INTEGER;emp_arr emp_arr_typ;CURSOR emp_cur IS SELECT ename FROM emp ...
【通知】数据库网关DG下线通知
若您需要使用DTS的功能，请先将数据库接入至阿里云。具体操作，请参见 通过数据库网关将本地IDC或第三方云的数据库接入至阿里云。若您需要使用DBS的功能，请先将数据库接入至阿里云。具体操作，请参见 通过数据库网关DG备份本地或第三方云...
【通知】数据库网关DG下线通知
若您需要使用DTS的功能，请先将数据库接入至阿里云。具体操作，请参见 通过数据库网关将本地IDC或第三方云的数据库接入至阿里云。若您需要使用DBS的功能，请先将数据库接入至阿里云。具体操作，请参见 通过数据库网关DG备份本地或第三方云...
- 产品推荐
- 这些文档可能帮助您