日志服务采集数据常见的错误类型
REGEX_MATCH_ALARM 完整正则模式下，日志内容和正则表达式不匹配。复制错误信息中的日志样例，并生成新的正则表达式。PARSE_LOG_FAIL_ALARM JSON、分隔符等模式下，由于日志格式不符合定义而解析失败。单击错误信息，查看失败的详细报错。...
过滤器
正则匹配并转换数据类型后再过滤结果 当某些列中存储了自定义格式数据（例如JSON格式字符串）时，如果用户希望过滤查询该列的某个子字段值，则可以通过正则表达式匹配并转换子字段值类型后，再使用过滤器来过滤需要的数据。例如列中存储的...
通过DaemonSet方式采集Kubernetes容器文本日志
文件路径提取：设置为文件路径正则，则需要设置 自定义正则，用正则表达式从路径里提取一部分内容作为Topic。用于区分不同源产生的日志。自定义：自定义日志主题。高级参数 其它可选的与配置全局相关的高级功能参数，请参见 创建Logtail...
SQL性能问题
慎用正则函数（REGEXP）正则表达式是非常耗时的操作，对比加减乘除通常有百倍的性能开销，而且正则表达式在某些极端情况下可能会进入无限循环，导致作业阻塞，具体情况请参见 Regex execution is too slow，因此建议使用LIKE。正则函数包括...
导入发布包
匹配方式支持全文、文本匹配、正则表达式。大小写敏感。说明 正则表达式使用Java语言规范。更多信息，请参见 Java正则表达式指南。设置替换文本。在输入框输入用于替换的文本。单击 保存。重要 所设置的规则将按照由上而下顺序进行替换。...
导入发布包
匹配方式支持全文、文本匹配、正则表达式。大小写敏感。说明 正则表达式使用Java语言规范。更多信息，请参见 Java正则表达式指南。设置替换文本。在输入框输入用于替换的文本。单击 保存。重要 所设置的规则将按照由上而下顺序进行替换。...
Logtail常见问题
如何采集企业内网服务器日志 如何使用Logtail自动诊断工具 Windows场景 Windows实例安装Logtail服务日志提示异常信息 容器场景 如何采集K8s集群的容器日志 日志格式解析问题 如何调试正则表达式 如何优化正则表达式的性能 如何通过完整正则...
时序引擎版本说明
修复正则查询降采样数据时间条件不生效的问题。3.4.10 2022年02月28日 新特性 SQL查询语句tags支持通过正则表达式过滤。支持non_negative_rate和non_negative_delta时序函数。增加table/database/CQ/column的长度限制。功能优化 优化大量...
ValueTransferRule
使用正则表达式匹配到字符串后，将字符串转换为String、Integer或者Double类型。数据结构 message ValueTransferRule { required string regex=1;optional VariantType cast_type=2;} 名称 类型 是否必选 描述 regex string 是 正则表达式...
正则刷新说明
用户可以在刷新任务中提交含有正则表达式的URL，阿里云 CDN 会对匹配该正则表达式的所有URL进行批量刷新，这样可以更有针对性地刷新URL。当您的 刷新类型 选择 正则 时，可以提交含有正则表达式的URL，对符合该表达式的URL进行大批量刷新。...
正则刷新说明
用户可以在刷新任务中提交含有正则表达式的URL，阿里云 DCDN 会对匹配该正则表达式的所有URL进行批量刷新，这样可以更有针对性地刷新URL。当您的 刷新类型 选择 正则 时，可以提交含有正则表达式的URL，对符合该表达式的URL进行大批量刷新...
过滤日志
说明 日志字段的值完全匹配 采集日志 中的正则表达式，且不匹配 丢弃日志 中的正则表达式时，日志才会被采集，否则直接丢弃。参数 说明 采集日志 输入日志字段名和该字段值匹配的正则表达式。如果原始日志中的目标字段值符合对应的正则表达...
正则解析
Logtail正则解析插件支持通过正则表达式提取日志字段，并将日志解析为键值对形式。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件。具体操作，请参见 概述。配置说明 参数名称 说明 原始字段 ...
添加识别特征
正则（大小兼容）：在输入框中输入正则表达式。例如您需要匹配所有名称中带有test，则正则表达式定义为.*test.*。正则表达式：在输入框中输入正则表达式。例如您需要匹配所有名称中带有test，则正则表达式定义为.*test.*。识别阈值：只有...
添加识别特征
正则（大小兼容）：在输入框中输入正则表达式。例如您需要匹配所有名称中带有test，则正则表达式定义为.*test.*。正则表达式：在输入框中输入正则表达式。例如您需要匹配所有名称中带有test，则正则表达式定义为.*test.*。识别阈值：只有...
Dataphin执行计算任务发现正则表达式不能使用
问题描述 用户执行一段SQL代码，发现在Hive执行结果和Dataphin不一致，用户使用了正则表达式。问题原因 MaxCompute计算引擎，如果没有开启Hive语法兼容，并不能完美适配Hive项目切换到MaxCompute之后的语法。解决方案 需要加上set odps.sql...
新建及管理数据分类
正则（大小兼容）：在输入框中输入正则表达式。例如：您需要匹配所有名称中带有test，则正则表达式定义为.*test.*，可匹配存在test、Test、TEST等大小写兼容的名称。正则表达式：在输入框中输入正则表达式。例如您需要匹配所有名称中带有...
新建及管理数据分类
正则（大小兼容）：在输入框中输入正则表达式。例如：您需要匹配所有名称中带有test，则正则表达式定义为.*test.*，可匹配存在test、Test、TEST等大小写兼容的名称。正则表达式：在输入框中输入正则表达式。例如您需要匹配所有名称中带有...
正则表达式
InfluxQL支持在以下场景中使用正则表达式：在 SELECT 子句中的field key和tag key。在 FROM 子句中的measurement。在 WHERE 子句中的tag value和字符串类型的field value。在 GROUP BY 子句中的tag key。目前，InfluxQL不支持在 WHERE 子句...
匹配条件说明
正则匹配、正则不匹配 匹配字段正则表达式、不匹配字段正则表达式 内容为空 匹配字段内容为空。配置示例 示例1：匹配字段 为URI、逻辑符 为包含、匹配内容 为/login.php ，表示当被请求的路径包含/login.php 时，则请求命中该规则。示例2：...
概述
这些函数用于为正则表达式指定的模式搜索字符串，且返回在字符串中模式的发生信息。这个模式应该为POSIX式的正则表达式。REGEXP_COUNT REGEXP_INSTR REGEXP_SUBSTR 更多关于组成POSIX式的正则表达式的信息，请参见 核心文件网址。
资源标签匹配指定正则表达式
关联的资源类型下实体资源标签存在匹配指定的正则表达式的键值对，视为“合规”。支持输入一组标签键值正则表达式。应用场景 标签可以用于权限隔离、账单划分和自动化运维等常见运维场景。该规则支持正则表达式的键值对，适合对标签格式有...
日志主题
提取文件路径中的单个值 您可以在创建Logtail配置时将 Topic生成方式 设置为 文件路径正则，并且输入文件路径的正则表达式，并使用捕获组捕获待提取的内容（此处的正则表达式需要完整匹配文件路径，捕获组有且仅有一个）。Logtail上报数据...
正则式函数
本文介绍正则式函数基本语法及示例。日志服务支持如下正则式函数。重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示字符串status，...
配置重写策略
重写：重写方式为正则重写，模式串为/httpbin/(.*)/(.*)，替换串为/\2/\1，其中 \1 表示第一个正则匹配到的字符串，\2 表示第二个正则匹配到的字符串，对应Nginx中的$1，$2用法。说明 正则重写属于高阶用法，语法较为复杂且一般用于特殊的...
配置重写策略
重写：重写方式为正则重写，模式串为/httpbin/(.*)/(.*)，替换串为/\2/\1，其中 \1 表示第一个正则匹配到的字符串，\2 表示第二个正则匹配到的字符串，对应Nginx中的$1，$2用法。说明 正则重写属于高阶用法，语法较为复杂且一般用于特殊的...
配置域名和路径的转发规则
转发条件的域名配置规则 域名配置规则支持精准域名、通配符域名和正则表达式域名。关于如何添加转发规则，请参见 添加转发规则。域名配置规则 说明 精准匹配及通配符 匹配说明 精准匹配：请求的域名和设定的域名需完全一致。通配符匹配：...
如何设置哪些关键字不能用作邮箱密码？
正则表达式：输入不允许成员设置为密码的正则表达式规则，输入多个关键字，关键字之间请换行区隔，校验时不区分大小写。默认密码规则：密码长度8-64字符。须同时包含大写字母、小写字母、数字、特殊字符中的任意三种。密码不能包含邮箱账号...
RewriteConfig
名称 类型 描述 示例值 object 重写规则配置 equalRules array 精确匹配规则列表 EqualRule 精确匹配规则 regexRules array 正则匹配规则列表 RegexRule 正则匹配规则 wildcardRules array 通配匹配规则列表 WildcardRule 通配匹配规则
匹配条件字段说明
Referer 高级版、企业版、旗舰版、独享版 等于、不等于、等于多值之一、不等于任一值 包含、不包含、包含多值之一、不包含任一值 存在、不存在 内容为空 长度等于、长度大于、长度小于 前缀匹配、后缀匹配 正则匹配、正则不匹配 重要 高级...
代码合并
用户也可以输入一个字符串或者正则表达式，只有匹配的分支才会被删除。完整的正则表达式支持请参见：https://docs.oracle.com/javase/8/docs/api/java/util/regex/Pattern.html 。正则表达式在线验证工具：...
正则表达式函数
本文介绍正则表达式函数的语法规则，包括参数解释、函数示例等。函数列表 类型 函数 说明 值提取函数 regex_select 根据正则表达式提取符合条件的值。regex_findall 根据正则表达式获得符合条件的所有值列表。匹配判断 regex_match 判断...
配置域名和路径的转发策略
转发策略配置示例如下：示例1：转发动作为重写和转发至 类别 说明 如果（条件全部匹配）路径 是 正则匹配（区分大小写）匹配说明 请求的路径和设定的路径根据正则表达式匹配。输入条件 只允许包含大小写英文字母、数字和.-_/\=?()[]+|"'@...
数据脱敏
正则指定：使用正则表达式提取敏感内容。替换字符串 用于替换敏感内容的字符串。设置 脱敏方式 为 字符串替换 时，必填。敏感内容前缀正则 匹配敏感内容前缀的正则表达式。设置 敏感数据内容 为 正则指定 时，必填。敏感内容正则 匹配敏感...
管理本地日志的数据接入任务
您可以手动输入正则表达式，也可以根据 示例日志 自动生成正则表达式。自动生成正则表达式的方法如下：在 示例日志 中输入日志示例。单击 确定输入。在 示例日志 中选中待解析的字段，单击 生成正则。日志抽取结果 本地日志数据的抽取结果...
制品源触发
设置事件 规则名称、设置事件通知触发的 事件类型（目前 Flow 仅接收 镜像扫描完成 和 镜像推送完成 两个事件自动触发）、设置事件 生效范围（可设置镜像版本过滤的正则规则，在该镜像仓库下只有符合正则规则的镜像版本才会触发事件通知）...
正则表达式入门教程
正则表达式是一种强大的文本匹配工具，可以用于在文本中查找特定的模式。本文将提供简单且实用的正则表达式快速上手教程，帮助您快速掌握其基本用法。 重要 本文档可能包含第三方产品信息，该信息仅供参考。阿里云对第三方产品的性能、...
如何优化正则表达式的性能
通过优化正则表达式的性能，可以达到优化采集性能的目的。关于如何优化正则表达式，为您提供以下建议：使用更为精确的字符。不随意使用.*来匹配字段，这个表达式包含了很大的搜索空间，容易发生误匹配，导致匹配性能下降。比如您要提取的...
正则表达式检查
本文介绍正则表达式检查如何进行配置。功能介绍：检测文本内容，是否符合正则表达式配置的规则内容。配置方法：将正则表达式输入即可。在“命中”中输入期望命中的规则内容，在“排除”中输入期望过滤不命中的规则内容。其中，“命中”为必...
使用正则表达式检测标签值的合规性
您可以在标签策略中设置标签值需要满足正则表达式。对不满足正则表达式的标签值，支持自动修复。前提条件 请确保您已经启用了标签策略功能。具体操作，请参见 启用标签策略。背景信息 支持标签自动检测和修复的云服务都支持正则表达式检测...
- 产品推荐
- 这些文档可能帮助您