UDT示例
collect_list 会先将所有数据都收集到一起，无法实现Partial Aggregate，处理效率比内置聚合函数或者UDAF低，请尽量使用内置聚合函数。同时，把一个Group的所有数据都收集到一起，会增加数据倾斜的风险。如果UDAF的逻辑是要将所有数据收集...
聚合操作
7.9 如果在消除重复后的列上进行聚合，可以先调用 unique 函数，再调用相应的聚合函数。iris.name.unique().cat(sep=',')返回结果如下。u'Iris-setosa,Iris-versicolor,Iris-virginica' 如果所有列支持同一种聚合操作，可以直接在整个...
算子
说明 如果SELECT字段没有出现在GROUP BY子句中，也没有使用任何其他聚合函数，则系统会自动调用 arbitrary()函数随机选取分组中的一个值输出。更多详情，请参见 ARBITRARY。Step 当前聚合所处的阶段，取值如下：PARTIAL：局部聚合。FINAL：...
分组聚合查询优化
例如，在需要使用手机号码或用户ID进行分组的场景下，如果依旧使用典型的两步聚合方式，那么在局部聚合阶段，可以被聚合的数据较少，但是局部聚合流程依旧会执行（例如，计算分组的HASH值、去重以及执行聚合函数）。由于分组数多，局部聚合...
MaxCompute UDF概述
背景信息 广义的UDF定义是 自定义标量函数（UDF）、自定义表值函数（UDTF）及 自定义聚合函数（UDAF）三种类型的自定义函数的集合。狭义的UDF仅代表用户自定义标量函数。MaxCompute UDF支持的自定义函数类型如下。自定义函数类型 名称 应用...
Clickhouse兼容函数
返回结果 2001-09-27 00:00:00 聚合函数 Hologres更多聚合函数及其使用方法请参见 通用聚合函数、APPROX_COUNT_DISTINCT、UNIQ、MAX_BY与MIN_BY。argMin(x,y)描述：计算y列最小值对应x列的值。Hologres实现：min_by(x,y)。说明 当y列最小值...
窗口函数
聚合函数只有在调用之后有一个 OVER 子句时才作为窗口函数;否则，它们充当普通的聚合，并为整个集合返回一行。通用窗口函数 row_number()→bigint 返回其分区内的当前行数，从1开始计数。rank()→bigint 返回当前行的排名，包含间隔;即对等...
BITMAP精准去重
概述 云数据库 SelectDB 版 支持Bitmap类型，在Aggregate数据模型中，Bitmap类型的Value字段可以和集合的交并集聚合函数配合，实现数据的精确去重功能。传统数据仓库中的Bitmap去重功能，对亿级别以上Bitmap大基数的交并集计算性能较差，有...
内建函数概述
聚合函数 支持将多条输入记录聚合成一条输出值，实现求和、求平均值、求最大最小值、求平均值、参数聚合、字符串连接等业务处理能力。字符串函数 支持处理STRING类型字符串，实现截取字符串、替换字符串、查找字符串、转换大小写、转换字符...
新建计算字段
场景举例 聚合函数 求和：SUM([字段])计数：COUNT([字段])计数去重：COUNT(DISTINCT[字段])求平均值：AVG([字段])配置了聚合计算的计算字段，将根据仪表板中配置的维度自动进行聚合运算。四则运算 支持加减乘除运算 例如从订单明细表计算客...
UDAF概述
背景信息 UDAF为用户自定义聚合函数，适用于多进一出业务场景。即其输入与输出是多对一的关系，将多条输入记录聚合成一个输出值。MaxCompute支持您通过如下两种代码语言编写UDAF。UDAF类型 说明 Java UDAF 使用Java语言编写UDAF逻辑实现...
函数概览
聚合函数 函数名称 说明 支持SQL 支持SPL arbitrary函数 返回x中任意一个非空的值。avg函数 计算x中的算术平均值。bitwise_and_agg函数 返回x中所有值按位与运算（AND）的结果。bitwise_or_agg函数 返回x中所有值按位或运算（OR）的结果。...
CREATE AGGREGATE
CREATE OR REPLACE AGGREGATE 将定义新的聚合函数或替换现有定义。如果要定义一个新类型或者需要一个还没有被提供的聚集函数，那么 CREATE AGGREGATE 就可以被用来提供想要的特性。在替换现有定义时，参数类型、结果类型和直接参数的数量...
ST_ClusterDBSCAN
返回聚类结果ID的窗口函数，此函数基于二维的DBSCAN算法（Density-based spatial clustering of applications with noise）计算聚类。语法 语法一：integer ST_ClusterDBSCAN(geometry winset geom,float8 eps,integer minpoints);语法二：...
ST_ClusterKMeans
该函数是窗口函数。示例 SELECT ST_ClusterKMeans(geom,2)over(),st_AsText(geom)from(select unnest(ARRAY['POINT(0 0)':geometry,'POINT(1 1)':geometry,'POINT(-1-1)':geometry,'POINT(-2-2)':geometry])as geom)as test;st_...
触发器高级功能
在10s内消息积累100条（消息累积大小100*2KB=200KB），达到异步调用 body 大小限制数，则立即触发推送，第一批聚合64条消息推送到 函数计算，第二批聚合36条消息推送到 函数计算。推送格式 用于指定函数入口参数Event中每个数据元素的格式...
触发器高级功能
在10s内消息积累100条（消息累积大小100*2KB=200KB），达到异步调用 body 大小限制数，则立即触发推送，第一批聚合64条消息推送到 函数计算，第二批聚合36条消息推送到 函数计算。推送格式 用于指定函数入口参数Event中每个数据元素的格式...
实例级别指标
函数维度或函数Qualifier维度：指以函数维度进行的聚合，例如，函数A同时有两个实例在执行，那么函数维度的vCPU指标就是这两个实例中的vCPU使用最大值。实例维度：具体的某个特定函数实例的指标。说明 Qualifier指调用函数时传入的版本信息...
实例级别指标
函数维度或函数Qualifier维度：指以函数维度进行的聚合，例如，函数A同时有两个实例在执行，那么函数维度的vCPU指标就是这两个实例中的vCPU使用最大值。实例维度：具体的某个特定函数实例的指标。说明 Qualifier指调用函数时传入的版本信息...
2024年功能发布记录
2024年03月 功能名称 变更类型 功能描述 相关文档 标签功能 新增 函数计算 支持将相同作用的函数资源通过标签Tag归类，便于搜索和资源聚合。可以通过标签功能将函数进行分组，实现不同角色对不同分组的函数拥有不同的操作权限。标签管理 ...
Java函数监控
功能 描述 实例级别的可观测性 以函数实例作为维度，聚合丰富的主机监控指标，例如CPU、内存及请求等。链路追踪 ARMS探针自动获取函数与上下游组件的拓扑关系及相关指标，您可以在ARMS监控平台查看相关信息，例如数据库、Redis及MQ等。Java...
Custom Runtime支持ARMS应用监控扩展
功能 描述 实例级别的可观测性 以函数实例为维度，聚合丰富的主机监控指标，例如CPU、内存及请求等。链路追踪 ARMS探针自动获取函数与上下游组件的拓扑关系及相关指标，您可以在ARMS监控平台查看相关信息，例如数据库、Redis及MQ等。Java...
Custom Runtime支持ARMS应用监控扩展
功能 描述 实例级别的可观测性 以函数实例为维度，聚合丰富的主机监控指标，例如CPU、内存及请求等。链路追踪 ARMS探针自动获取函数与上下游组件的拓扑关系及相关指标，您可以在ARMS监控平台查看相关信息，例如数据库、Redis及MQ等。Java...
监控数据
Period 函数计算监控指标的聚合粒度均为60s。使用Java SDK设置代码示例如下：request.setPeriod("60");Metric 使用Java SDK设置代码示例如下：request.setMetric("your_metric");函数计算监控指标参考手册中详细介绍的各项指标项，对应的...
监控数据
Period 函数计算监控指标的聚合粒度均为60s。使用Java SDK设置代码示例如下：request.setPeriod("60");Metric 使用Java SDK设置代码示例如下：request.setMetric("your_metric");函数计算监控指标参考手册中详细介绍的各项指标项，对应的...
准实时推理场景
支持请求批量聚合的推理应用：建议GPU函数实例的并发度根据能同时聚合的推理请求数量进行设置，以便批量推理。GPU物理卡的使用上限 默认情况下，无论Tesla系列T4卡型、还是Ampere系列A10卡型的GPU实例，单个阿里云账号地域级别的GPU物理卡...
准实时推理场景
支持请求批量聚合的推理应用：建议GPU函数实例的并发度根据能同时聚合的推理请求数量进行设置，以便批量推理。GPU物理卡的使用上限 GPU物理卡的使用上限，请参见 GPU卡数限制。冷启动 当您的GPU函数长时间无业务流量后，所有按量GPU实例将...
概述
窗口函数 Flink SQL窗口函数支持基于无限大窗口的聚合（无需在SQL Query中，显式定义任何窗口）以及对一个特定的窗口的聚合。例如，需要统计在过去的1分钟内有多少用户单击了某个网页，可以通过定义一个窗口来收集最近1分钟内的数据，并对...
配置数据聚合
您可以将数据聚合节点类比为Flink SQL的窗口函数，该节点的作用是将解析任务中流转的消息按照窗口进行聚合计算。通过该节点聚合生成多样化的数据，可用于后续分析或输出。使用说明 目前支持的Flink SQL的窗口函数规则为滚动时间窗口...
监控指标
您可以在 函数计算 控制台查询 函数计算 资源概览指标以及资源所在地域和函数维度的监控指标详情。具体的监控指标通过指定MetricName参数实现。本文介绍 函数计算 各类监控指标对应的MetricName参数的取值和含义。资源概览指标 您可以登录 ...
函数类型选型
函数计算 的编程模型中，入口函数的模型由函数名、函数入参和返回值三部分组成。其中，函数入参也可以调用代码中定义的其他函数。事件函数和HTTP函数在触发方式和函数入参两方面的区别如下。函数类型 触发方式 函数入参 事件函数 您可以...
监控指标
您可以在 函数计算 控制台查询 函数计算 资源概览指标以及资源所在地域、服务和函数维度的监控指标详情。具体的监控指标通过指定MetricName参数实现。本文介绍 函数计算 各类监控指标对应的MetricName参数的取值和含义。资源概览指标 您...
管理函数
函数计算 的资源调度与运行以函数为单位。一个服务下可以创建多个函数，这些函数彼此相互独立，互不影响，但这些函数可以共享一些相同的设置，例如服务授权和日志配置等。您可以通过 函数计算 控制台创建函数、更新函数及获取函数ARN等。...
配置实例生命周期
函数计算 在实例中调用您的函数，该实例提供一个安全和隔离的运行时环境。函数计算 基于实例生命周期增加多种回调操作，有效解决传统应用迁移至Serverless架构时遇到的指标数据延迟或丢失等痛点。本文介绍函数实例生命周期、如何配置实例...
快速创建函数
使用 函数计算，您无需采购和管理服务器等基础设施，只需编写并上传代码或镜像，就可以实现弹性可靠的应用。本文介绍如何在 函数计算 控制台快速开发一个简单的Serverless Hello World函数。前提条件 您已成功注册阿里云账号，并完成实名...
快速创建函数
背景信息 通过函数计算控制台快速创建函数的流程包括：开通函数计算服务、创建服务、创建函数和执行函数。服务（Service）是 函数计算 的基本资源单位。您可以在服务级别上授权、配置日志和创建函数等。函数（Function）是调度与运行的基本...
函数实例生命周期
函数计算 基于实例生命周期增加多种回调操作，有效解决传统应用迁移至Serverless架构时遇到的指标数据延迟或丢失等痛点。本文介绍 函数计算 的运行时扩展功能原理、如何配置PreFreeze和PreStop回调函数及回调函数日志查询。背景信息 传统...
Custom Container函数状态及调用
函数计算 中的函数，函数状态用于标识函数当前是否可以被调用，对于需要平台侧预留资源的函数，例如自定义容器镜像Runtime的函数，有如下状态：Pending（资源准备中）：新建函数时，函数的初始状态为Pending，在Pending过程中，函数计算 会...
什么是函数计算
函数计算 是事件驱动的全托管计算服务。使用 函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算 为您准备好计算资源，弹性地、可靠地运行任务，并提供日志查询、性能监控和报警等功能。视频介绍 什么是函数...
数据面安全性
函数实例提供用户或函数级别的隔离能力 虚拟化级别安全隔离 神龙裸金属计算节点可运行来自不同用户的函数实例，使用阿里云 安全沙箱 提供函数级别虚拟化及容器隔离，ECS虚拟机只允许运行同用户的函数实例，借助ECS隔离提供用户级别虚拟化...
- 产品推荐
- 这些文档可能帮助您