功能特性
创建自定义层 在函数中配置自定义层 在函数中配置官方公共层 官方公共层使用示例 如何基于Dockerfile构建层 如何在Custom Runtime中引用层中的依赖 环境变量 您可以使用环境变量，在不修改代码的前提下灵活调整函数的行为。环境变量 自定义...
添加转发到的数据目的
IoT孪生引擎支持将指定孪生节点的属性变更Topic数据，流转至AMQP消费组和其他阿里云产品中。本文介绍添加数据目的对应的操作步骤。使用限制 每个数据目的中最多添加一个转发操作。每个数据目的中最多关联10个数据源。创建数据目的 进入孪生...
2021年
新说明 MaxCompute Studio的Project Explorer提供了可视化编辑器，可以帮助您快速在MaxCompute项目中注册自定义函数（MaxCompute UDF），并提供查看MaxCompute UDF实现代码、删除MaxCompute UDF的操作入口。可视化管理函数 2021-11-08 补充...
通过函数计算设置伸缩组自定义实例移出策略
示例 在 函数代码 页签下，在代码编辑器中编辑index.py代码为如下函数代码，然后单击 部署代码。说明 如果进入函数详情页面时，弹出 Web IDE使用必读 对话框，单击 我知道了 即可。在函数代码中，您可以基于自身业务特性引入特定筛选策略，...
用户画像分析概述
主体思路是在离线阶段把相对稳定的属性表离线聚合成宽表，将多张表的关联操作转化一张宽表的运算，新的标签列的场景通过增加列的方式实现，以表的方式提供非常灵活的标签计算，详情请参见 画像分析-标签宽表。RoaringBitmap优化方案 基于...
DataWorks大数据开发治理平台
DataWorks为您提供函数计算节点，您可通过该节点周期性调度处理事件函数，并完成与其它类型节点的集成和联合调度。本文为您介绍如何使用函数计算节点。背景信息 DataWorks 基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为...
UDF开发（Python3）
返回值为Generator类型，调用者通过遍历获取表的内容，每次遍历得到的是以数组形式存在的表中的一条记录。引用表资源示例如下。from odps.udf import annotate from odps.distcache import get_cache_table@annotate('->string')class ...
Python 3 UDAF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。具体使用方法请参见 引用资源（Python UDF 3）和 引用资源（Python UDTF 3）。使用说明 按照 开发流程，完成Python 3 UDAF开发后，...
使用函数计算
通过函数计算访问表格存储，对表格存储增量数据进行实时计算。背景信息 函数计算（Function Compute，简称FC）是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算为您准备...
脚本语法
使用云产品流转函数实现数据流转到数据目的。云产品流转函数使用说明，请参见 流转数据到数据目的函数。您也可使用流程控制语句，设置数据流转的更多过滤条件，例如本文“脚本示例”中使用了 if 语句。脚本支持的控制语句，请参见本文下方...
2023年
本文为您介绍了MaxCompute 2023年内容更新的最新动态，基于此您可以了解MaxCompute中增加了哪些新功能、语法新特性和权限变更，提升项目开发效率。MaxCompute的重要功能发布记录请参见 产品重大更新。2023年12月更新记录 时间 特性 类别 ...
数据服务入门
步骤三：新建业务流程 数据服务基于业务流程实现以业务为单元的API开发，并基于业务流程对API及创建API所使用的函数等文件进行组织管理。因此，创建API前，需先新建业务流程。新建业务流程。在 数据服务>服务开发 页面，通过如下两种方式...
通过向导模式生成API
支持您选择 独享服务资源组 或 公共服务资源组，独享服务资源组 可以在列表中选择目标资源组名称。公共服务资源组 不可选择资源组名称，由DataWorks内部自动维护。说明 若在列表中无法选中目标资源组名称，请进入 DataWorks控制台 通过...
配置原生OSS触发器
您可以在 函数计算 控制台创建并配置原生OSS触发器，当在OSS上发生特定事件时会自动触发函数执行。这可以让您轻松响应如文件上传等事件，无需在代码中增加监听事件逻辑即可快速实现完整的流程。示例场景 您可以配置一个OSS触发器，并将其...
配置原生OSS触发器
您可以在 函数计算 控制台创建并配置原生OSS触发器，当在OSS上发生特定事件时会自动触发函数执行。这可以让您轻松响应如文件上传等事件，无需在代码中增加监听事件逻辑即可快速实现完整的流程。示例场景 您可以配置一个OSS触发器，并将其...
配置EventBridge类别的OSS触发器
如果您需要为OSS触发器设置多个文件前缀和文件后缀，或者希望在一个OSS Bucket中关联10个以上的触发器，您可以创建EventBridge类别的OSS触发器，以便轻松应对文件上传等事件。注意事项 EventBridge类别的OSS触发器与 原生OSS触发器 不同，...
PHP脚本示例
}/*将设备的自定义格式数据转换为Alink协议的数据，设备上报数据到物联网平台时调用*入参：$rawData 普通数组，数组元素为整数*出参：$jsonObj 关联数组，关联数组key取值为英文字符串，不能是字符类型的数字如"10",不能为空*/function ...
开发ODPS SQL任务
编辑代码：进阶示例 更复杂的ODPS SQL任务示例如下：与标准SQL的主要区别及解决方法 MaxCompute SQL中的关联操作 JSON数据从OSS迁移至MaxCompute 基于GitHub公开事件数据集的离线实时一体化实践 基于MaxCompute UDF将IPv4或IPv6地址转换为...
开发ODPS SQL任务
编辑代码：进阶示例 更复杂的ODPS SQL任务示例如下：与标准SQL的主要区别及解决方法 MaxCompute SQL中的关联操作 JSON数据从OSS迁移至MaxCompute 基于GitHub公开事件数据集的离线实时一体化实践 基于MaxCompute UDF将IPv4或IPv6地址转换为...
配置EventBridge类别的OSS触发器
如果您需要为OSS触发器设置多个文件前缀和文件后缀，或者希望在一个OSS Bucket中关联10个以上的触发器，您可以创建EventBridge类别的OSS触发器，以便轻松应对文件上传等事件。注意事项 EventBridge类别的OSS触发器与 原生OSS触发器 不同，...
DTS触发器
DTS（Data Transmission Service）作为事件源通过 事件总线EventBridge 与函数计算集成后，通过DTS触发器能够触发关联函数执行。通过函数可以对DTS数据订阅获取的数据库实时增量数据进行自定义处理。本文介绍如何在函数计算控制台创建DTS...
通过脚本模式生成API
数据服务支持通过脚本模式或向导模式生成API，相对于向导模式，您可以自行编写API的查询SQL，支持多表关联、复杂查询和聚合函数等功能，满足您个性化查询需求。本文为您介绍如何通过脚本模式生成API。前提条件 配置API前，请先在 工作空间...
DTS触发器
DTS（Data Transmission Service）作为事件源通过 事件总线EventBridge 与函数计算集成后，通过DTS触发器能够触发关联函数执行。通过函数可以对DTS数据订阅获取的数据库实时增量数据进行自定义处理。本文介绍如何在函数计算控制台创建DTS...
Clickhouse兼容函数
返回结果 array_agg-{1,2}(1 row)数组函数 Hologres更多数组函数及其使用方法请参见 数组函数。arrayJoin(anyarray)描述：将数组的每个元素扩展到单独行。Hologres实现：unnest(anyarray)。使用示例：SELECT unnest(ARRAY[1,2]);返回结果 1...
复杂类型函数
函数类别 函数 功能 ARRAY函数 ALL_MATCH 判断ARRAY数组中是否所有元素都满足指定条件。ANY_MATCH 判断ARRAY数组中是否存在满足指定条件的元素。ARRAY 使用给定的值构造ARRAY。ARRAY_CONTAINS 检测指定的ARRAY中是否包含指定的值。ARRAY_...
编写自定义脚本
自定义协议解析的函数（executeScript）的入参为整型数组，需要通过 0xFF 进行与操作，获取其对应的补码。返回结果为关联数组，要求 key 取值包含非数组字符（例如：数组 key 为“10”，PHP数组中会获取到整数10）。PHP执行环境对于异常...
UDF示例：引用表资源
本文以在MaxCompute客户端操作为例，为您介绍如何通过Python UDF引用表资源。...c0|+-+|(4,'c')|(5,'d')|(1,'a')|(2,'b')|NULL|+-+相关文档 基于Java语言实现的读取MaxCompute表资源的示例请参见 Java UDTF读取MaxCompute资源示例。
功能发布记录
计算组（Virtual Warehouse）实例支持写入计算组自动路由，无需手动指定计算组，系统自动路由，降低执行写入操作时计算组的使用难度。详情请参见 计算组Table Group授权管理。动态分区Auto Partition支持自定义分区创建时间或删除时间，...
配置实例生命周期
函数计算 基于实例生命周期增加多种回调操作，有效解决传统应用迁移至Serverless架构时遇到的指标数据延迟或丢失等痛点。本文介绍函数实例生命周期、如何配置实例周期回调函数及回调函数日志查询。实例生命周期介绍 如上图所示，函数计算 ...
使用示例
背景 我有一个呼叫中心，按地区划分了不同的技能组，如北京客服组，河北客服组，上海客服组等，能不能根据来电号码归属地，将通话分配给对应的客服组呢？下面我们基于上述背景，通过函数计算实现相应的IVR流程 创建函数 1.函数计算开通授权...
Python 2 UDAF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。具体使用方法请参见 引用资源（Python UDF 2）和 引用资源（Python UDTF 2）。使用说明 按照 开发流程，完成Python 2 UDAF开发后，...
数据集常见问题
数据集关联问题 不同数据库间如何实现表关联？如何将数据集复制到其他工作空间？如何将两个数据源中的数据应用于同一个交叉表中？如何实现多表关联分析？如何通过参数SQL实现占比的灵活运算？目前Quick BI是不支持直接计算占比的，您可以...
示例：模型设计
业务中台是基于DDD方法论进行实践并抽象出来的一种企业应用架构。项目的建模过程主要由技术建模构成。本文介绍示例项目中技术建模的相关内容。背景信息 技术建模包括限界上下文划分、领域模型、数据模型、服务模型等内容，主要目的是能够...
函数计算节点
DataWorks为您提供函数计算节点，您可通过该节点周期性调度处理事件函数，并完成与其他类型节点的集成和联合调度。本文为您介绍如何使用函数计算节点。前提条件 已开通函数计算。您需要先开通函数计算服务后，才可在DataWorks使用函数计算...
2019年
本文为您介绍了MaxCompute 2019年内容更新的最新动态，基于此您可以了解MaxCompute中增加了哪些新功能、语法新特性和权限变更，提升项目开发效率。2019年12月更新记录 时间 特性 类别 描述 产品文档 2019-12-31 新增Oracle数据迁移...
快速创建函数
使用 函数计算，您无需采购和管理服务器等基础设施，只需编写并上传代码或镜像，就可以实现弹性可靠的应用。本文介绍如何在 函数计算 控制台快速开发一个简单的Serverless Hello World函数。前提条件 您已成功注册阿里云账号，并完成实名...
函数实例生命周期
函数计算 基于实例生命周期增加多种回调操作，有效解决传统应用迁移至Serverless架构时遇到的指标数据延迟或丢失等痛点。本文介绍 函数计算 的运行时扩展功能原理、如何配置PreFreeze和PreStop回调函数及回调函数日志查询。背景信息 传统...
在DataWorks中通过函数计算节点发送邮件
本文为您介绍如何在DataWorks中通过函数计算节点调用函数计算服务，并实现发送邮件功能。背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务，在函数计算服务中可以自定义各种功能，最终可通过DataWorks进行调用。前提条件 ...
COLLECT_LIST
将 colname 指定的列值聚合为一个数组。此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用...
时空数据库版本发布记录
新增 ST_SetCost 函数，用于设置给定网格数组的开销。新增 ST_CostUnion 函数，用于合并所有的网格开销数组。新增 ST_3DGridPath 函数，用于计算三维地理网格路径。性能优化 Geometry SQL Ganos_Geometry插件兼容性增强，支持与PostGIS插件...
- 产品推荐
- 这些文档可能帮助您