过滤日志
说明 日志字段的值完全匹配 采集日志 中的正则表达式，且不匹配 丢弃日志 中的正则表达式时，日志才会被采集，否则直接丢弃。参数 说明 采集日志 输入日志字段名和该字段值匹配的正则表达式。如果原始日志中的目标字段值符合对应的正则表达...
日志主题
说明 文件路径的正则表达式中，需要对正斜线（/）进行转义。例如不同用户将日志记录在不同目录下，但是日志文件名称相同，目录路径如下所示。logs|-/userA/serviceA|-service.log|-/userB/serviceA|-service.log|-/userC/serviceA|-service...
背景信息以及准备工作
在DLA中创建日志文件外表时，最繁琐的一步是写正则表达式，正则表达式说明如下：正则表达式中的每个字段用()作为边界，通常日志中的每个字段以空格分隔。建表语句中定义的列的个数与正则表达式中的字段数完全匹配。通常，数字可以用([0-9]*...
错误编码：HSF-0022
问题描述 启动HSF应用时，hsf.log 日志文件中出现以下错误：[Grouping Rule]xxx error message.问题原因 配置的动态归组规则格式错误或者不合法。解决方案 请检查归组规则...服务名称列表中的正则表达式合法。适用于 企业级分布式应用服务EDAS
SPL概述
本文介绍 日志服务 SPL语言的基本信息，包括工作原理、语法、指令表达式等。工作原理 日志服务SPL支持在实时消费、扫描查询和Logtail采集三个日志服务场景中使用，工作原理如下图：...parse-regexp 提取指定字段中的正则表达式分组匹配信息。
PolarDB PostgreSQL 14版相对于PolarDB PostgreSQL 11...
如果想在name列上的正则表达式中使用非 C 行为，请附加一个明确的 COLLATE 子句。（对于用户定义的name列，另一种可能性是在创建表时指定不同的排序规则，但这只是将不向后兼容性移动到比较运算符。将 information_schema 视图中的对象名称...
日志服务采集数据常见的错误类型
unmatch this log content.：日志无法匹配配置中的正则表达式 match result count less.：匹配的结果数量少于配置中指定的 Keys 数量。SAME_CONFIG_ALARM 同一个Logstore下存在同名的配置，后发现的配置会被抛弃。单击错误查看详细报错，...
SPL指令
重要 SQL表达式中null值处理，请参见 SQL表达式null值处理。示例 示例1：根据字段内容过滤数据条目。where userId='123' 示例2：使用匹配字段名的正则表达式过滤数据条目。where regexp_like(server_protocol,'\d+')示例3：转换数据类型后...
正则表达式函数
本文介绍正则表达式函数的语法规则，包括参数解释、函数示例等。函数列表 类型 函数 说明 值提取函数 regex_select 根据正则表达式提取符合条件的值。regex_findall 根据正则表达式获得符合条件的所有值列表。匹配判断 regex_match 判断...
正则式函数
字段样例 message:error'1232 查询和分析语句*|SELECT regexp_extract(message,'''\d+')说明 使用正则式函数提取字符串中的单引号（'）时，需要在正则表达式中再添加一个单引号（'）。查询和分析结果 SPL 示例1：提取server_protocol字段值...
资源标签匹配指定正则表达式
规则详情 参数 说明 规则名称 资源标签匹配指定正则表达式 规则标识 matched-tag 标签 Tag 自动修正 支持 ACS-TAG-TagResources 规则触发机制 配置变更 规则支持的资源类型 ECS专有宿主机DDH ECS云盘 ECS实例 ECS实例启动模板 ECS弹性网卡 ...
OSS存储空间名称符合正则表达式
规则详情 参数 说明 规则名称 OSS存储空间名称符合正则表达式 规则标识 oss-bucket-name-regex-match 标签 OSS、Bucket、ResourceName 自动修正 不支持 规则触发机制 配置变更 规则支持的资源类型 OSS存储空间 规则入参 pattern 修正指导 ...
资源名称符合指定正则要求
资源名称匹配参数指定的正则表达式，视为“合规”。应用场景 对资源进行规范化的命名，便于对资源进行日常管理。风险等级 默认风险等级：低风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 资源名称匹配参数指定的正则...
ValueTransferRule
如果正则表达式中包含部分匹配语法，则返回第一个满足的子匹配结果。例如列值为1aaa51bbb5，如果正则表达式为1[a-z]+5，则返回值为1aaa5；如果正则表达式为1([a-z]+)5，则返回值为aaa。cast_type VariantType 是 将字符串转换为String、...
正则表达式
本视频向您介绍日志服务数据加工中的关于正则表达式的语法。
动态CEP中规则的JSON格式定义
LOOPING 代表该模式为循环模式，可能出现多次，类比正则表达式中的*与+。TIMES 代表该模式会出现指定次数。GREEDY 代表在匹配该模式时，会采用贪婪匹配策略，尽可能多地匹配。OPTIONAL 代表该模式为可选模式。示例一：普通Pattern示例 例如...
如何优化正则表达式的性能
通过优化正则表达式的性能，可以达到优化采集性能的目的。关于如何优化正则表达式，为您提供以下建议：使用更为精确的字符。不随意使用.*来匹配字段，这个表达式包含了很大的搜索空间，容易发生误匹配，导致匹配性能下降。比如您要提取的...
CREATE INDEX
要在索引表达式中使用用户定义的函数，请记住在创建函数时将其标记为不可变。如果您在分区表上创建索引，则 CREATE INDEX 命令会将索引传播到表的二级分区。说明 多列索引中最多可以指定 32 个字段。参数 参数 说明 UNIQUE 使得系统在创建...
创建索引
索引的关键字字段可以是列名，也可以是写在括号中的表达式。您可以指定多个字段来创建多列索引。索引字段可以是由表记录中一列或者多列表字段值计算出来的一个表达式。您可以使用这种特性来快速访问基于基础数据转换后的数据。例如，由 ...
正则刷新说明
正则表达式配置规则如下：目前仅支持在URL中填入这4种正则表达式：[0-9]、[a-z]、[^/]*、.*，请您不要输入这4种固定搭配以外的正则表达式。输入方式：一行一条规则。例如：http://www.example.com/[0-9][a-z].*.jpg 默认情况下，一个账号...
正则刷新说明
正则表达式配置规则如下：目前仅支持在URL中填入这4种正则表达式：[0-9]、[a-z]、[^/]*、.*，请您不要输入这4种固定搭配以外的正则表达式。输入方式：一行一条规则。例如：http://www.example.com/[0-9][a-z].*.jpg 默认情况下，一个账号...
正则函数
如果pattern中包含带括号的子正则表达式，那么结果数组中的元素为各个子正则表达式对应的子字符串，否则为单个匹配pattern的子字符串。输入值说明：source：待搜索的字符串，取值类型为VARCHAR。pattern：正则表达式。flag：标志一个或多个...
函数概览
reduce函数 根据Lambda表达式中的定义，对数组中的各个元素进行相加计算，然后返回计算结果。reverse函数 对数组中的元素进行反向排列。sequence函数 通过指定的起始值返回一个数组，其元素为起始值范围内一组连续且递增的值。递增间隔为...
导入Amazon S3文件
跨行文本日志特有参数 参数 说明 正则匹配位置 设置正则表达式匹配的位置，具体说明如下：首行正则：使用正则表达式匹配一条日志的行首，未匹配部分为该条日志的一部分，直到达到最大行数。尾行正则：使用正则表达式匹配一条日志的行尾，未...
如何设置哪些关键字不能用作邮箱密码？
正则表达式：输入不允许成员设置为密码的正则表达式规则，输入多个关键字，关键字之间请换行区隔，校验时不区分大小写。...须同时包含大写字母、小写字母、数字、特殊字符中的任意三种。...3、正则表达式中不可存在特殊字符，如“\”。
过滤器
如果正则表达式中包含部分匹配语法，则返回第一个满足的子匹配结果。例如列值为1aaa51bbb5，如果正则表达式为 1[a-z]+5 时，则返回值为1aaa5；如果正则表达式为 1([a-z]+)5，则返回值为aaa。VariantType 使用正则表达式匹配到子字段值后，...
过滤器
如果正则表达式中包含部分匹配语法，则返回第一个满足的子匹配结果。例如列值为1aaa51bbb5，如果正则表达式为 1[a-z]+5 时，则返回值为1aaa5；如果正则表达式为 1([a-z]+)5，则返回值为aaa。重要 只有Java SDK支持使用...
规则vs触发器
software 上的索引扫描，而在该命令的正则表达式版本中正是这样做的。触发器将为要被删除的 2000 个旧计算机中的每一个调用，并且会导致在 computer 上的一次索引扫描和 software 上的 2000 次索引扫描。采用规则的实现将会使用两个使用...
导入OSS数据
跨行文本日志特有参数 参数 说明 正则匹配位置 设置正则表达式匹配的位置，具体说明如下：首行正则：使用正则表达式匹配一条日志的行首，未匹配部分为该条日志的一部分，直到达到最大行数。尾行正则：使用正则表达式匹配一条日志的行尾，未...
正则表达式
本视频向您展示数据加工非结构化数据解析时正则表达式函数的使用。
新建计算字段
表达式中输入的括号均为半角括号。即，在英文输入法中输入的括号。函数请使用各个数据源支持的函数。数据源支持的函数可查看配置面板右侧函数列表，或查询该数据源类型支持的函数。常见的字段表达式示例请参见 场景举例。选择 数据类型 和 ...
TABLE()
可在使用表正则表达式的任意位置中使用TABLE()函数。TABLE()函数返回SETOF ANYELEMENT（任意类型的一组值）。例如，如果传递给此函数的参数是dates数组，则TABLE()将返回SETOF dates。如果传递给此函数的参数是paths数组，则TABLE()将返回...
云解析域名格式匹配指定正则表达式
云解析域名格式匹配指定正则表达式 规则标识 alidns-domain-regex-match 标签 Alidns、Domain 自动修正 不支持 规则触发机制 配置变更 规则支持的资源类型 DNS域名 规则入参 pattern 修正指导 为云解析DNS中的域名匹配指定的正则表达式。...
正则表达式
InfluxQL支持在以下场景中使用正则表达式：在 SELECT 子句中的field key和tag key。在 FROM 子句中的measurement。在 WHERE 子句中的tag value和字符串类型的field value。在 GROUP BY 子句中的tag key。目前，InfluxQL不支持在 WHERE 子句...
CREATE POLICY
因此，使用一条给定策略的用户必须能够访问表达式中引用的任何表或函数，否则在尝试查询启用了行级安全性的表时，他们将简单地收到一条没有权限的错误。不过，这不会改变视图的工作方式。就普通查询和视图来说，权限检查和视图所引用的表的...
如何调试正则表达式
说明 完整正则模式提供自动生成正则表达式功能，但是在为多行日志生成正则表达式时，会存在问题，本文以Regex101为例进行正则表达式的调试和修改。具体操作 访问 Regex101，将日志服务根据日志样例自动生成的完整正则表达式拷贝到 REGULAR ...
日期和时间函数
查询和分析语句（调试）*|SELECT*FROM log WHERE_time_(now())AND_time_>to_unixtime(date_add('day',-1,now()))查询和分析结果 day函数 day函数用于提取日期和时间表达式中的天数，按月计算。day函数等同于day_of_month函数。语法 day(x)...
比较函数
IN()检查特定的值或者字段在IN罗列的表达式中。ISNULL()判断表达式是否为NULL。LEAST()返回列表中的最小值。STRCMP()用于比较两个字符串并根据比较结果返回整数。基本形式为 STRCMP(s1,s2)，如果s1与s2相等返回0，如果s1>s2返回1，如果s1...
REGEXP_EXTRACT_ALL
在字符串中查找所有出现的正则表达式匹配模式的子字符串，并把找到的字符串以数组返回。命令格式 array<T>regexp_extract_all(string,string[,bigint])参数说明 source：必填。STRING类型。待分析的字符串。pattern：必填。STRING类型。待...
配置数据计算和数据过滤
由于上报的JSON数据格式，可以是数组或者嵌套的JSON，因此，表达式中支持使用JSONPath获取其中的属性值。例如：{a:{key1:v1,key2:v2}} 可通过 a.key2 获取到值 v2。有关JSONPath的更多信息，请参见 LanguageManual UDF。表达式中使用变量时...
- 产品推荐
- 这些文档可能帮助您