漏斗数据分析函数
本文主要介绍相关漏斗数据分析函数。FUNNEL_COUNT v 语法 funnel_count(<事件发送时间戳:bigint>,<事件窗口毫秒宽度:bigint>,<事件id:int/varchar>,<事件id列表:varchar>)函数说明 过滤所有满足事件窗口宽度内的数据。将过滤后的事件按时间...
特定结构化数据函数
本文介绍JSON和XML结构化数据函数的语法规则，包括参数解释、函数示例等。函数列表 类型 函数 说明 JSON json_select 根据JMES语法提取或计算JSON表达式中特定的值。json_parse 将值解析为JSON对象。XML xml_to_json 将xml数据转成JSON数据...
数据探索函数
数据探索函数得到样本数据的趋势、极大值、中心值，检验数据是否符合正态分布、均匀分布或指数分布。函数 说明 均匀分布或指数分布的检验函数 检验数据分布是否满足均匀分布或指数分布。正态分布检验函数 检验数据分布是否满足正态分布。...
数据预处理函数
通过滑动平均函数，采集相邻数据的信息，对数据曲线进行平滑，便于进行数据分析。加权平均函数 针对输入的时序曲线进行滤波，从而发现时序曲线形态。物联网设备数据采集的原始数据中，大都含有各种各样的噪声影响。通过加权平均函数，采集...
数据类型格式化函数
本文介绍了 PolarDB PostgreSQL版（兼容Oracle）支持的数据类型格式化函数。本数据库格式化函数提供一套强大的工具用于把各种数据类型（日期/时间、整数、浮点、数字）转换成格式化的字符串以及反过来从格式化的字符串转换成指定的数据类型...
调用函数清洗数据
您可以通过日志服务数据加工函数清洗您所采集的海量日志数据，实现数据格式标准化。本文介绍调用函数清洗数据的常见场景和相关操作。场景1：过滤日志（e_keep函数和e_drop函数）您可以使用 e_drop 函数或 e_keep 函数过滤日志，也可以使用 ...
使用空间函数查询数据方法
Hologres支持使用PostGIS的空间函数查询包含空间数据的表。本文以导入本地数据至Hologres并使用空间函数查询数据为例，为您介绍在Hologres中使用PostGIS空间函数的操作方法。前提条件 已创建Hologres实例，创建实例方法请参见 购买Hologres...
通过函数计算消费日志数据
依托阿里云函数计算服务，日志服务提供流式数据加工服务。您可以通过配置一个函数计算触发器任务，定时获取更新的数据并触发函数的执行，进而增量消费日志服务Logstore的数据，并完成自定义加工任务。日志服务提供的函数模板或者用户自定义...
数据转发到函数计算（FC）
使用说明 目前，新版和旧版云产品流转功能均支持将数据流转到函数计算。旧版云产品流转使用示例，请参见 数据转发到函数计算（旧版）。创建数据目的 登录 物联网平台控制台。在 实例概览 页签的 全部环境 下，找到对应的实例，单击实例卡片...
数据转发到函数计算（FC）
使用限制 目前，新版和旧版云产品流转功能均支持将数据流转到函数计算。与旧版云产品流转相比，新版云产品流转提供脚本解析器服务，可加工处理更复杂的消息数据后与云产品交互。新版云产品流转使用方法，请参见 数据转发到函数计算（新版）...
使用函数计算实现消息数据清洗
云消息队列 RocketMQ 版 消息数据清洗任务创建完成后，您可以登录 函数计算控制台，进行代码自定义及相应函数配置的修改。算子 算子能力说明 消息过滤 按照正则表达式匹配消息内容，将匹配成功的消息发送至目标。更多信息，请参见 事件模式...
使用函数计算实现消息数据清洗
云消息队列 RocketMQ 版 消息数据清洗任务创建完成后，您可以登录 函数计算，进行代码自定义及相应函数配置的修改。算子 算子能力说明 消息过滤 按照正则表达式匹配消息内容，将匹配成功的消息发送至目标。更多信息，请参见 事件模式。消息...
通过函数计算节点实现GitHub实时数据分析与结果发送
阿里云原生大数据计算MaxCompute 阿里云对象存储OSS 阿里云函数计算FC MaxCompute配置 数据源类型 显示当前数据源类型，即MaxCompute。数据源名称 选择 步骤二 中创建的MaxCompute数据源。OSS配置 数据源类型 显示当前数据源类型，即OSS。...
使用资源函数增量获取数据
背景信息 某科技公司将客户信息保存在云数据库RDS MySQL数据库中，将客户维护记录保存在日志服务的Logstore中，两种数据都在持续更新。现在该公司希望将两种数据JOIN后保存到一个新的Logstore中。日志服务提供res_rds_mysql函数，可从RDS ...
使用函数计算清洗数据
将数据写入到表格存储时，您可以通过函数计算对新增的数据做简单的清洗，将清洗后的数据写回到表格存储的另一种数据表中。同时，您也可以实时访问表格存储中的原始数据和结果数据。样例场景 假设写入表格存储的为日志数据，且日志数据包括...
使用e_dict_map、e_search_dict_map函数进行数据富化
搜索映射函数包括 e_search_dict_map 函数和 e_search_table_map 函数，两者区别在于e_search_dict_map函数接收的是dict类型的数据，而e_search_table_map函数接收的是通过 资源函数 获取的table类型的数据。例如：在nginx日志中，将一定...
云数据库MongoDB版（副本集架构）同步至函数计算FC
数据传输服务DTS（Data Transmission Service）支持将 云数据库MongoDB版（副本集架构）实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码，结合同步至函数中的数据，对数据进行二次加工。前提条件 已创建源 云数据库MongoDB...
云数据库MongoDB版（分片集群架构）同步至函数计算FC
数据传输服务DTS（Data Transmission Service）支持将 云数据库MongoDB版（分片集群架构）实例的增量数据同步至函数计算FC的指定函数。您可以编写函数代码，结合同步至函数中的数据，对数据进行二次加工。前提条件 已创建源 云数据库...
云数据库 RDS PostgreSQL v9.4版如何支持jsonb_set和...
概述 本文主要介绍RDS PostgreSQL实例（云数据库 RDS PostgreSQL v9.4版）如何支持jsonb_set和jsonb函数。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例...
从OSS导入数据
您可以通过表引擎或表函数将数据从OSS中导入至 云数据库ClickHouse，实现日志查询分析和加工等操作。本文介绍如何将OSS数据导入至 云数据库ClickHouse。前提条件 已开通OSS服务。如何开通，请参见 开通OSS服务。已创建存储空间（Bucket），...
函数概述
漏斗数据分析函数 地理空间函数：地理空间函数 JSON函数：JSON函数 数学函数：数学函数 手机号码函数：手机号码函数 事件路径分析函数：事件路径分析函数支持按照事件时间和时间戳得到事件顺序发生的时间序列 SQL分析函数：SQL分析函数 ...
操作流程
数据标准中引用 将字段标准数据元、维度、指标值域设置中引用该函数。生成标准，给数据模型使用。具体操作，请参见 新建数据元、新建指标 和 添加维度属性。质量规则中使用 按照标准检测质量，查看质量检查结果，方便用户掌握当前逻辑表的...
Quick BI数据集是否可以上传自定义函数
问题描述 Quick BI数据集是否可以上传自定义函数?解决方案 Quick BI数据集不可以上传自定义函数。替代方案一：可以在后台数据库自定义函数。替代方案二：可以在新建字段中处理自定义函数逻辑。适用于 Quick BI
Spark UDF
重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能，并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档，请参见 Spark SQL开发介绍。使用元数据服务管理用户自定义函数...
云数据库MongoDB版（分片集群架构）
您可以在数据传输服务DTS（Data Transmission Service）控制台创建数据同步任务，实时或定时将 云数据库 MongoDB 版 的分片集群架构实例的增量数据同步至 函数计算 的指定函数。然后结合同步至函数中的数据，在 函数计算 编写相应的代码，...
云数据库MongoDB版（副本集架构）
您可以在数据传输服务DTS（Data Transmission Service）控制台创建数据同步任务，实时或定时将 云数据库 MongoDB 版 的副本集架构实例的增量数据同步至 函数计算 的指定函数。然后结合同步至函数中的数据，在 函数计算 编写相应的代码，对...
物理化质量校验函数
您可以通过对已创建的质量校验函数进行物理化操作，将质量校验函数存储至对应的云计算资源中，供数据元、指标、维度使用。本文介绍如何物理化质量校验函数。前提条件 已存在质量校验函数，具体操作，请参见 新建质量校验函数。操作步骤 ...
物理化自定义函数
通过物理化自定义函数，可以将您在数据资源平台中创建的自定义函数存储到对应的云计算资源中，成为云计算资源中实际存在的函数，便于被引用后检测质量或者在数据开发中处理数据。本文介绍如何物理化自定义函数。前提条件 已新建自定义函数...
【20231204】函数计算公网出流量将切换为CDT计费模式...
函数计算公网出流量切换为CDT计费模式 云数据传输 CDT（Cloud DataTransfer）是一种为云上流量提供统一计费和出账服务的开通型产品，帮助您实现流量资源的弹性使用和便捷管理，从而有效降低IT成本。如需了解更多详细信息，请参见 什么是云...
拆分函数概述
拆分函数对数据类型支持情况 拆分函数 数据类型 INT BIGINT MEDIUMINT SMALLINT TINYINT VARCHAR CHAR DATE DATETIME TIMESTAMP 其他类型 HASH√UNI_HASH√RANGE_HASH√RIGHT_SHIFT√STR_HASH×MM×DD×WEEK×MMDD×YYYYMM×YYYYWEEK×...
Dataphin的数据处理中unix_timestamp函数如何使用
问题描述 Dataphin的数据处理中unix_timestamp函数如何使用？如何将时间戳再转换成日期格式？解决方案 unix_timestamp函数的使用示例如下：将时间戳再转换成日期使用from_unixtime函数，示例如下：适用于 Dataphin 基于公共云2.9.7环境验证
地理空间函数
360000|简介 为满足部分客户在云上做Geometry数据的分析需求，阿里云Data Lake Analytics（以下简称：DLA）支持多种格式的地理空间数据处理函数，符合Open Geospatial Consortium’s(OGC)OpenGIS规范，支持的常用数据格式包括：WKT WKB ...
Quick BI在MySQL数据源的数据集中计算字段使用PERIOD_...
问题描述 Quick BI在MySQL数据源的数据集中计算字段使用PERIOD_DIFF函数结果不符合预期不是相差月数。问题原因 函数参数格式传递错误。解决方案 PERIOD_DIFF函数需要传入的两个参数格式要求是：YYMM或YYYYMM。按要求传递后即可正常计算相差...
窗口函数
窗口函数基于查询结果的行数据进行计算。窗口函数运行在 HAVING 子句之后，ORDER BY 子句之前。触发一个窗口函数需要特殊的关键字 OVER 子句来指定窗口。一个窗口包含三个组成部分：分区规范，用于将输入行分裂到不同的分区中。这个过程和 ...
函数相关命令
FC组件是一款基于Serverless Devs的阿里云函数计算操作工具，通过该工具，您可以直接通过交互式命令使用函数相关的API。前提条件 您已完成以下操作：安装Serverless Devs和Docker 配置Serverless Devs 创建服务 创建函数 命令格式：sudo s ...
查看自定义函数
本文介绍如何查看自定义函数的函数名称、函数标识和云计算资源等信息。前提条件 已新建自定义函数，具体操作，请参见 新建自定义函数。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择...
使用ClickHouse-Local迁移上云
clickhouse local 示例1：使用集成引擎从MySQL迁移到云数据库ClickHouse企业版 您可以使用集成表引擎（通过MySQL表函数动态创建）从源MySQL数据库读取数据，并使用remoteSecure表函数将数据写入云数据库ClickHouse企业版集群上的目标表。...
Quick BI探索空间数据源新建计算字段月份增加1月用...
概述 Quick BI探索空间数据源新建计算字段月份增加1月用什么函数。详细信息 addMonths(时间字段,1)适用于 Quick BI 当前环境：公共云专业版4.5
Dataphin使用rand（）函数，每次返回的数据一致
问题描述 用户是MaxCompute计算源，使用 rand()函数，每次返回的数据一致。问题原因 MaxCompute使用 rand()函数如下：解决方案 1.如果想要直接获取随机数，需要设置seed值，例如填入时间戳，select rand(当前日期时间戳数字)。2.可以在后面...
- 产品推荐
- 这些文档可能帮助您