通用聚合函数
函数名 描述 用例 结果 array_agg(anyelement)将表达式的值串联到数组中。暂不支持JSON、JSONB、TIMETZ、INTERVAL、INET、OID、UUID数据类型和数组类型。array_agg(c1){1,2} {true,false} {a,b} {1.1,2.2} avg(bigint)求BIGINT类型表达式...
过滤日志
说明 日志字段的值完全匹配 采集日志 中的正则表达式，且不匹配 丢弃日志 中的正则表达式时，日志才会被采集，否则直接丢弃。参数 说明 采集日志 输入日志字段名和该字段值匹配的正则表达式。如果原始日志中的目标字段值符合对应的正则表达...
数组函数
array_agg-{1,2}(1 row)array_agg(expression[order_by_clause])[FILTER(WHERE filter_clause)]ARRAY 将表达式的值串联到数组中。Hologres从V1.3版本开始支持filter过滤 CREATE TABLE test_array_agg_int(c1 int);INSERT INTO test_array_...
Clickhouse兼容函数
返回结果 id|max_by-+-2|bb 1|aaa 3|c(3 rows)groupArray(anyelement)描述：将表达式的值串联到数组中。Hologres实现：array_agg(anyelement)。使用示例：CREATE TABLE test_array_agg_int(c1 int);INSERT INTO test_array_agg_int VALUES...
正则表达式
本视频向您介绍日志服务数据加工中的关于正则表达式的语法。
OSS存储空间名称符合正则表达式
规则详情 参数 说明 规则名称 OSS存储空间名称符合正则表达式 规则标识 oss-bucket-name-regex-match 标签 OSS、Bucket、ResourceName 自动修正 不支持 规则触发机制 配置变更 规则支持的资源类型 OSS存储空间 规则入参 pattern 修正指导 ...
数据脱敏
{"type":"processor_desensitize","detail":{"SourceKey":"password","Method":"const","Match":"full","ReplaceString":"*"} } 处理结果"password":"*"示例2 使用正则表达式指定目标字段值中的敏感内容，并替换为对应的MD5值，即设置 ...
资源名称符合指定正则要求
资源名称匹配参数指定的正则表达式，视为“合规”。应用场景 对资源进行规范化的命名，便于对资源进行日常管理。风险等级 默认风险等级：低风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 资源名称匹配参数指定的正则...
正则刷新说明
正则表达式配置规则如下：目前仅支持在URL中填入这4种正则表达式：[0-9]、[a-z]、[^/]*、.*，请您不要输入这4种固定搭配以外的正则表达式。输入方式：一行一条规则。例如：http://www.example.com/[0-9][a-z].*.jpg 默认情况下，一个账号...
正则刷新说明
正则表达式配置规则如下：目前仅支持在URL中填入这4种正则表达式：[0-9]、[a-z]、[^/]*、.*，请您不要输入这4种固定搭配以外的正则表达式。输入方式：一行一条规则。例如：http://www.example.com/[0-9][a-z].*.jpg 默认情况下，一个账号...
Fn:MatchPattern
调用内部函数Fn:MatchPattern，检查输入字符串的值能否与正则表达式匹配，如果能匹配则返回true，否则返回false。函数声明 JSON {"Fn:MatchPattern":[pattern,value]} YAML 完整函数的语法。Fn:MatchPattern:pattern,value 缩写形式。...
正则表达式
InfluxQL支持在以下场景中使用正则表达式：在 SELECT 子句中的field key和tag key。在 FROM 子句中的measurement。在 WHERE 子句中的tag value和字符串类型的field value。在 GROUP BY 子句中的tag key。目前，InfluxQL不支持在 WHERE 子句...
如何优化正则表达式的性能
通过优化正则表达式的性能，可以达到优化采集性能的目的。关于如何优化正则表达式，为您提供以下建议：使用更为精确的字符。不随意使用.*来匹配字段，这个表达式包含了很大的搜索空间，容易发生误匹配，导致匹配性能下降。比如您要提取的...
云解析域名格式匹配指定正则表达式
云解析域名格式匹配指定正则表达式 规则标识 alidns-domain-regex-match 标签 Alidns、Domain 自动修正 不支持 规则触发机制 配置变更 规则支持的资源类型 DNS域名 规则入参 pattern 修正指导 为云解析DNS中的域名匹配指定的正则表达式。...
复杂类型函数
用于对ARRAY数组 a 中的元素进行判断的函数（内建函数或自定义函数）或表达式。输入参数的数据类型必须与ARRAY数组 a 中元素的数据类型一致。返回值说明 返回BOOLEAN类型。返回规则如下：如果ARRAY数组 a 中所有的元素满足 predicate 条件...
三角函数
sin(2.0)0.9092974268256817 tan(bigint)返回BIGINT类型表达式的正切值。tan(2)-2.185039863261519 tan(int)返回INT类型表达式的正切值。tan(2)-2.185039863261519 tan(float8)返回FLOAT8类型表达式的正切值。tan(2.0)-2.185039863261519 ...
子查询函数
IN(subquery)逐行比较指定表达式的值与子查询结果是否相等：如果存在相等行，则IN的结果返回 t，代表true。如果不存在相等行，则IN的结果返回 f，代表false。说明 指定表达式的值与子查询结果的列数目必须相同。NOT IN(subquery)逐行比较...
比较函数
函数名 描述 expression NOT IN(values,.)如果Expression表达式的值与所有Value的值都不相等，则结果返回 TRUE，反之返回 FALSE。expression IN(values,.)如果Expression表达式的值与任意Value的值相等，则结果返回 TRUE，反之返回 FALSE。
进阶功能
通过正则表达式放行需要访问的文件 正则表达式同样用于批量的文本匹配，在静态页面的源码部署过程中，使用正则表达式对到来的请求进行过滤和筛查，对不符合要求的文件请求进行过滤。示例如下：放行所有请求：/仅放行 src 目录下的所有文件...
使用限制
聚合函数类表达式 表达式 是否支持使用列存索引功能 JSON_ARRAYAGG()不支持 JSON_OBJECTAGG()不支持 窗口函数类表达式 表达式 是否支持使用列存索引功能 FIRST_VALUE()不支持 NTH_VALUE()不支持 LAST_VALUE()不支持 加密与压缩类表达式 ...
循环
如果使用 WHEN 子句，则仅当 WHEN 子句中指定表达式的求值结果为 true 时才开始循环的下一迭代。否则，控制权将传给 CONTINUE 语句后面的下一个语句。CONTINUE 语句不能在循环外部使用。下面是上一示例的变体，它使用 CONTINUE 语句跳过...
资源标签匹配指定正则表达式
API分组 API资源 应用 加密参数 参数 模板 全站加速域名 Kafka实例 消费组 主题 物理专线 ADB PG存储实例 CDN域名 成员账号 规则入参 tagKeyRegex 修正指导 使关联的资源类型下实体资源标签存在匹配指定的正则表达式的键值对。具体操作，请...
正则表达式函数
e_set("regex2",regex_select(v("str"),r"\d+",mi=1))加工结果 regex:123 regex2:456 str:abc123 xyz456 示例3 原始日志 str:abc123 xyz456 加工规则#提取字段str中符合正则表达式的第一个表达式的第一个分组的值。e_set("regex",regex_...
正则表达式
本视频向您展示数据加工非结构化数据解析时正则表达式函数的使用。
如何调试正则表达式
说明 完整正则模式提供自动生成正则表达式功能，但是在为多行日志生成正则表达式时，会存在问题，本文以Regex101为例进行正则表达式的调试和修改。具体操作 访问 Regex101，将日志服务根据日志样例自动生成的完整正则表达式拷贝到 REGULAR ...
ValueTransferRule
使用正则表达式匹配到字符串后，将字符串转换为String、Integer或者Double类型。数据结构 message ValueTransferRule { required string regex=1;optional VariantType cast_type=2;} 名称 类型 是否必选 描述 regex string 是 正则表达式...
条件函数（CASE、COALESCE、NULLIF、NVL、NVL2、...
CASE SQL语言的CASE表达式为一般条件表达式，类似于其它语言中的if/else语句：CASE WHEN condition THEN result[WHEN.][ELSE result]END CASE子句可使用于任何有效的表达式中。condition是一个返回BOOLEAN结果的表达式。如果结果为TRUE，...
数据脱敏
在日志服务数据加工服务中，常见的脱敏方法有正则表达式替换（关键函数 regex_replace）、Base64转码（关键函数 base64_encoding）、MD5编码（关键函数 md5_encoding）、str_translate映射（关键函数 str_translate）、GROK捕获（关键函数 ...
CASE 表达式
CASE 表达式返回一个值，该值在 CASE 表达式位于某一表达式内时被替换。CASE 表达式有两种格式：一种称为搜索 CASE，另一种使用选择器。选择器 CASE 表达式 选择器 CASE 表达式尝试将一个称为选择器的表达式与一个或多个 WHEN 子句中指定的...
POSITIVE
返回表达式的值。命令格式 TINYINT|SMALLINT|INT|BIGINT|DOUBLE|DECIMAL positive(TINYINT|SMALLINT|INT|BIGINT|DOUBLE|DECIMAL)参数说明 expr：必填。输入表达式，支持TINYINT、SMALLINT、INT、BIGINT、DOUBLE、DECIMAL类型。返回值说明 ...
转换函数
ct_float 将字段或表达式的值转换为浮点数。ct_str 将字段或表达式的值转换为字符串。ct_bool 将字段或表达式值转换为布尔值。数字转换 ct_chr 将字段或表达式的ANSI值、Unicode值转换为对应字符。ct_ord 将字段或表达式的字符转换为对应...
JSON_INSERT
说明 若input参数中包含数组，数组中的JSON内容插入规则，假设input中数组的长度为n，指定插入的位置为m时：如果 m>=n，在数组末尾添加值value。如果 m，在数组开头添加值value。如果-n，根据insert_after的值确定添加值value的位置。若...
条件表达式
查询和分析语句*|SELECT sum(IF(status=200,1,0))*1.0/count(*)AS status_200_percentag 查询和分析结果 COALESCE表达式 COALESCE表达式用于返回多个表达式中第一个非null的值。语法 COALESCE(expression1,expression2,expression3.)参数...
数组类型相关
本文为您介绍数组类型相关函数的语法、参数、示例和返回值。arr_concat 使用arr_concat将字段表中的字符串按照指定的字符进行连接，函数的详细信息见下表。项目 描述 语法 arr_concat(tbl,sep)参数 tbl：数组变量。sep（可选参数）：拼接符...
数组类型相关
本文为您介绍数组类型相关函数的语法、参数、示例和返回值。arr_concat 使用arr_concat将字段表中的字符串按照指定的字符进行连接，函数的详细信息见下表。项目 描述 语法 arr_concat(tbl,sep)参数 tbl：数组变量。sep（可选参数）：拼接符...
数组类型相关
本文为您介绍数组类型相关函数的语法、参数、示例和返回值。arr_concat 使用arr_concat将字段表中的字符串按照指定的字符进行连接，函数的详细信息见下表。项目 描述 语法 arr_concat(tbl,sep)参数 tbl：数组变量。sep（可选参数）：拼接符...
正则函数
如果pattern中包含带括号的子正则表达式，那么结果数组中的元素为各个子正则表达式对应的子字符串，否则为单个匹配pattern的子字符串。输入值说明：source：待搜索的字符串，取值类型为VARCHAR。pattern：正则表达式。flag：标志一个或多个...
数组函数和运算符
zip_with函数 zip_with(x,y,lambda_expression)根据Lambda表达式中的定义将两个数组合并为一个数组。下标运算符 下标运算符用于返回数组中的第 x 个元素。等同于element_at函数。语法[x]参数说明 参数 说明 x 数组下标，从1开始。参数值为...
概述
这些函数用于为正则表达式指定的模式搜索字符串，且返回在字符串中模式的发生信息。这个模式应该为POSIX式的正则表达式。REGEXP_COUNT REGEXP_INSTR REGEXP_SUBSTR 更多关于组成POSIX式的正则表达式的信息，请参见 核心文件网址。
表达式函数概览
正则表达式函数 regex_select 根据正则表达式提取符合条件的值。regex_findall 根据正则表达式获得符合条件的所有值列表。regex_match 判断是否匹配正则表达式。regex_replace 根据正则表达式替换字符串中的指定字符。regex_split 将一个...
- 产品推荐
- 这些文档可能帮助您