ARRAYS_OVERLAP
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。a 和 b 中元素的数据类型必须一致。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、...
ARRAY_MAX
计算ARRAY数组 a 中的最大元素。命令格式 T array_max(array<T><a>)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL...
ARRAY_MIN
计算ARRAY数组 a 中的最小元素。命令格式 T array_min(array<T><a>)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL...
ARRAYS_ZIP
array及 array中的 T 和 U 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、TIMESTAMP、...
ARRAY_UNION
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。a 和 b 中元素的数据类型必须一致。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、...
ALL_MATCH
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。predicate：必填。用于对ARRAY数组 a 中的元素进行判断的函数（内建函数或自定义函数）或表达式。输入参数的数据类型必须与ARRAY数组 a 中元素的数据类型一致。返回...
ARRAY_EXCEPT
找出在ARRAY数组 a 中，但不在ARRAY数组 b 中的元素，并去掉重复的元素后，返回新的ARRAY数组。命令格式 array<T>array_except(array<T><a>,array<T><b>)参数说明 a、b：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型，数组中...
ANY_MATCH
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。predicate：必填。用于对ARRAY数组 a 中的元素进行判断的函数（内建函数或自定义函数）或表达式。输入参数的数据类型必须与ARRAY数组 a 中元素的数据类型一致。返回...
ARRAY_DISTINCT
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。返回值说明 返回ARRAY类型。返回规则如下：新ARRAY数组无重复元素且元素顺序与 a 中的元素顺序保持一致。ARRAY数组 a 中存在元素为NULL时，NULL值会参与运算。输入...
ARRAY_INTERSECT
MaxCompute ARRAY_INTERSECT函数用于计算两个ARRAY数组之间的交集，并返回一个包含两个数组中都存在的相同值的新数组。本文为您介绍ARRAY_INTERSECT函数的命令格式、参数说明以及使用示例。命令格式 array<T>array_intersect(array<T><a>,...
SIZE
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。b：必填。MAP对象。map,V>中的 K、V 指代MAP对象的Key、Value。返回值说明 返回INT类型。使用示例 示例1：计算ARRAY数组 array('a','b')中的元素数目。命令示例如下...
数仓版扩缩容
如果热数据量超过缩容后规格可锁定的热数据量，建议将部分数据放入冷数据后，再进行缩容操作。重要 满足以下条件的集群，才可以变更弹性IO资源规格：模式为弹性模式，且 计算资源 为 16核64 GB（集群版）、24核96 GB（集群版）、32核128 GB...
设置连接池
如果您的应用连接创建频繁（例如短连接场景）或者连接数量很大（大于MySQL数据库的连接数限制），您可以参考本文使用合适的RDS MySQL数据库代理连接池，降低应用与数据库建立连接的频率来减少MySQL数据库主线程的开销，减少数据库上的总...
EMR Hive数据整库离线同步至MaxCompute
您可以依次单击 保存、提交 按钮将同步任务提交到生产环境，如果是标准模式工作空间，您还需要单击 发布 按钮才能将同步任务发布至生产环境，后续离线同步任务将会周期性（分钟或小时或天）将Hive的数据写入MaxCompute的表中。提交发布的...
EMR Hive数据整库离线同步至MaxCompute
您可以依次单击 保存、提交 按钮将同步任务提交到生产环境，如果是标准模式工作空间，您还需要单击 发布 按钮才能将同步任务发布至生产环境，后续离线同步任务将会周期性（分钟或小时或天）将Hive的数据写入MaxCompute的表中。提交发布的...
概述
参见 入湖模板 章节，创建数据湖模板，定期将数据源中的数据抽取到数据湖。参见 元数据管理 章节，定义数据湖的元数据库和表。控制台概览 控制台概览分为2个部分，左侧为主要功能区，右侧为产品主要信息，帮助用户快速上手产品。注册数据湖...
Kafka单表实时入湖OSS（HUDI）
在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助...
新建 RocketMQ 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 RocketMQ 数据源。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已在 RocketMQ 实例中创建 Group。详情请参见 创建 ...
图表管理
每一个图表均需要关联一个数据集，图表编辑器通过将数据集中的原始SQL语句与数据模型进行组合，生成新的SQL语句到数据库中执行，获取图表展示所需要的数据。图表功能流程图 编辑器介绍 序号 名称 说明 ① 数据模型展示区 在左上角选择了...
使用DTS将腾讯云MongoDB增量迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将腾讯云MongoDB副本集实例增量迁移至阿里云。DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在不停服的情况下，平滑地完成腾讯云MongoDB数据库的...
使用DTS将腾讯云MongoDB增量迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将腾讯云MongoDB副本集实例增量迁移至阿里云。DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在不停服的情况下，平滑地完成腾讯云MongoDB数据库的...
使用DTS将腾讯云MongoDB副本集实例全量迁移至阿里云
费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费 不收费 迁移类型说明 全量数据迁移：将源MongoDB数据库迁移对象的存量数据全部迁移到目标MongoDB数据库中。说明 支持database、collection、index的迁移。迁移权限要求 ...
使用DTS将腾讯云MongoDB副本集实例全量迁移至阿里云
费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费 不收费 迁移类型说明 全量数据迁移：将源MongoDB数据库迁移对象的存量数据全部迁移到目标MongoDB数据库中。说明 支持database、collection、index的迁移。迁移权限要求 ...
Kafka实时ETL同步至Hologres
实时ETL同步方案根据来源Kafka指定Topic的内容结构对目的Hologres表结构做初始化，然后将Kafka指定Topic的存量数据同步至Hologres，同时也持续将增量数据实时同步至Hologres。本文为您介绍如何创建Kafka实时ETL同步至Hologres任务。使用...
什么是MaxCompute
MaxCompute是适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效...
Kafka数据源
offset Long timestamp Long headers String partition Long 离线写数据 DataWorks将数据写入Kafka时，支持写入JSON格式或text格式的数据，不同的数据同步方案往Kafka数据源中写入数据时，对数据的处理策略不一致，详情如下。重要 写入text...
LogHub（SLS）实时ETL同步至Hologres
在 数据输出预览 窗口，您可以根据需要修改输入数据，或单击 手工构造数据 按钮自定义输入数据，再单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点对输入数据处理异常，或产生脏数据时，也会反馈出异常信息，能够...
表单容器
将 表单容器 拖入编排页面画布中，并绑定该变量。您可根据需要在选中 后拖动表单输入框的位置，为每个输入组件修改 显示名称 及对应的 组件类型。通过底部 批量添加 按钮，您可对每一行数据对应的结构对象类型进行下钻，并选择对应的想要在...
读API
说明 从返回值中提取的数据必须是数组类型。以下是返回值和映射关系配置的示例：{"code":"SUCCESS","data":{"pageSize":20,"pageNum":1,"list":[/需要提取的数组 {"name":{"firstName":"Alice","lastName":"Brown"},"age":22,"email":...
MySQL 5.6测试结果
磁盘I/O型：适用于数据量大的场景，只将最常访问的数据放入Buffer Pool进行存取，压测时会读写磁盘以及更新Buffer Pool。场景一：内存命中型 规格 单表数据量 表数量 最大连接数 IOPS Sysbench线程数 Sysbench读取（单位：次）SysBench写入...
MySQL 5.7测试结果
磁盘I/O型：适用于数据量大的场景，只将最常访问的数据放入Buffer Pool进行存取，压测时会读写磁盘以及更新Buffer Pool。场景一：内存命中型 规格 单表数据量 表数量 最大连接数 IOPS Sysbench线程数 Sysbench读取（单位：次）SysBench写入...
什么是数据库网关
完成接入后，通过数据库传输服务DTS，在数据迁移、数据同步或数据订阅时，您可以直接将数据库网关中接入的数据库作为源库或目标库。数据库备份DBS 数据库备份DBS（Database Backup）是阿里云提供的低成本、高可靠的一站式备份和恢复服务。...
MySQL 8.0测试结果
磁盘I/O型：适用于数据量大的场景，只将最常访问的数据放入Buffer Pool进行存取，压测时会读写磁盘以及更新Buffer Pool。场景一：内存命中型 规格 单表数据量 表数量 最大连接数 IOPS Sysbench线程数 Sysbench读取（单位：次）SysBench写入...
什么是数据库网关
完成接入后，通过数据库传输服务DTS，在数据迁移、数据同步或数据订阅时，您可以直接将数据库网关中接入的数据库作为源库或目标库。数据库备份DBS 数据库备份DBS（Database Backup）是阿里云提供的低成本、高可靠的一站式备份和恢复服务。...
数据格式描述文件
键 格式 描述 是否必须 dimensions JSON数组 数据包含的维度。每个维度可以只是个字符串，或者可以额外指明维度的属性。例如“dimensions”:[“dimenssion1”,“dimenssion2”,“{“type”:“long”,“name”:“dimenssion3”}]，默认是...
自建MySQL数据导入
本文介绍如何通过 AnalyticDB MySQL 的外表将ECS自建MySQL数据库的数据导入至 AnalyticDB MySQL 数仓版（3.0）。前提条件 已创建与 AnalyticDB MySQL 集群相同地域、相同VPC的ECS实例。已在ECS实例中安装自建MySQL。已在ECS实例的安全组中...
创建与使用逻辑组
您可以在 数据库备份DBS 中添加多个逻辑组，可根据来源、项目、类型等维度将数据源添加至对应逻辑组中，以便更好地管理多个数据源。创建逻辑组 访问 逻辑组列表 页面，然后在上方选择目标地域。单击 添加逻辑组。每个地域的逻辑组上限为20...
列表
在 列表 组件中拖入 表单容器，为表单绑定数据集 orders 列表中的单个 item，即可为表单内的输入框绑定 item 的各个字段信息。列表 内的文本内容，您可选用 列表 的迭代变量 item 内的信息。列表 组件部署效果如下图所示。
通过数据库网关将本地IDC或第三方云的数据库接入至...
完成接入后，在配置DTS的数据迁移、数据同步或数据订阅时，您可以直接将数据库网关中接入的数据库作为源库或目标库。前提条件 创建AccessKey并获取AccessKey ID和AccessKey Secret信息，详情请参见 创建AccessKey。背景信息 将本地或第三...
如何提升写入效率
SDK的内部处理逻辑为：1）将Points放入内部队列；2）消费者线程从内部队列取出小于等于批次大小个数据点，发送个TSDB服务端；同步写：同步写调用putSync()方法即可；SDK的内部处理逻辑为：1）直接将方法传入的数据点Point发送给TSDB服务端...
- 产品推荐
- 这些文档可能帮助您