UDF示例：使用正则表达式替换字符串
本文为您介绍如何分别通过Java UDF和Python UDF实现使用正则表达式替换字符串。命令说明 本示例将注册一个名称为 UDF_REPLACE_BY_REGEXP 的自定义函数，下面对命令格式和入参进行说明。命令格式：string UDF_REPLACE_BY_REGEXP(string,...
Dataphin在SQL脚本使用正则表达式判断字符是不是小数
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是小数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '123.6' REGEXP '^([0-9]{1,}[.][0-9]*)$';适用于 Dataphin v3.6.3
Dataphin在SQL脚本中使用正则表达式判断字符是不是...
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是整数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '123' REGEXP '^([0-9]{1,})$';适用于 Dataphin v3.6.3
Dataphin在SQL脚本使用正则表达式判断字符是不是整数...
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是整数或小数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '100' REGEXP '^[0-9]{1,}+(\.[0-9]{1,})?';适用于 Dataphin v3.6.3
使用正则表达式检测标签值的合规性
您可以在标签策略中设置标签值需要满足正则表达式。对不满足正则表达式的标签值，支持自动修复。前提条件 请确保您已经启用了标签策略功能。具体操作，请参见 启用标签策略。背景信息 支持标签自动检测和修复的云服务都支持正则表达式检测...
Dataphin同步任务中多表模式如何使用类正则表达式匹配...
问题描述 Dataphin同步任务中多表模式如何使用类正则表达式匹配多个日期结尾的表？解决方案 使用类正则表达式pjl_info_log_[202008-202112]可以匹配到pjl_info_log_202008和pjl_info_log_202112两张表。使用类正则表达式与枚举形式混合方式...
Dataphin执行计算任务发现正则表达式不能使用
问题描述 用户执行一段SQL代码，发现在Hive执行结果和Dataphin不一致，用户使用了正则表达式。问题原因 MaxCompute计算引擎，如果没有开启Hive语法兼容，并不能完美适配Hive项目切换到MaxCompute之后的语法。解决方案 需要加上set odps.sql...
正则表达式
InfluxQL支持在以下场景中使用正则表达式：在 SELECT 子句中的field key和tag key。在 FROM 子句中的measurement。在 WHERE 子句中的tag value和字符串类型的field value。在 GROUP BY 子句中的tag key。目前，InfluxQL不支持在 WHERE 子句...
正则表达式
本视频向您展示数据加工非结构化数据解析时正则表达式函数的使用。
ValueTransferRule
使用正则表达式匹配到字符串后，将字符串转换为String、Integer或者Double类型。数据结构 message ValueTransferRule { required string regex=1;optional VariantType cast_type=2;} 名称 类型 是否必选 描述 regex string 是 正则表达式...
REGEXP_INSTR
REGEXP_INSTR用于为POSIX式的正则表达式搜索字符串。这个函数返回的是字符串中的匹配内容的位置信息。语法 INTEGER REGEXP_INSTR(srcstr TEXT,pattern TEXT,position INT DEFAULT 1,occurrence INT DEFAULT 1,returnparam INT DEFAULT 0,...
正则式函数
字段样例 message:error'1232 查询和分析语句*|SELECT regexp_extract(message,'''\d+')说明 使用正则式函数提取字符串中的单引号（'）时，需要在正则表达式中再添加一个单引号（'）。查询和分析结果 SPL 示例1：提取server_protocol字段值...
模式匹配函数
'abc' NOT SIMILAR TO '(b|c)%' true rlike~使用正则表达式判断字符串与模式是否匹配：匹配则返回true。不匹配则返回false。说明 区分大小写。'abc'~'(b|d)' true rlike!使用正则表达式判断字符串与模式是否不匹配：不匹配则返回true。匹配...
数据脱敏
正则指定：使用正则表达式提取敏感内容。替换字符串 用于替换敏感内容的字符串。设置 脱敏方式 为 字符串替换 时，必填。敏感内容前缀正则 匹配敏感内容前缀的正则表达式。设置 敏感数据内容 为 正则指定 时，必填。敏感内容正则 匹配敏感...
进阶功能
通过正则表达式放行需要访问的文件 正则表达式同样用于批量的文本匹配，在静态页面的源码部署过程中，使用正则表达式对到来的请求进行过滤和筛查，对不符合要求的文件请求进行过滤。示例如下：放行所有请求：/仅放行 src 目录下的所有文件...
RDS安全
RDS实例ID：待监控的RDS实例ID（支持正则表达式）。默认值.*，表示监控阿里云账号下的所有RDS实例。数据库名称：待监控的数据库名称（支持正则表达式）。默认值.*，表示监控阿里云账号下的所有数据库。外部配置 无 消除方法 检查出现慢SQL...
OSS流量安全
您可以使用正则表达式.*进行配置。默认值为.*，表示监控目标阿里云账号下的所有的OSS Bucket。外部配置 无 消除办法 检查触发告警的OSS Bucket是否存在异常。前提条件 确保已在日志审计服务中的 审计配置>云产品接入>全局配置 中打开OSS ...
NAS数据安全
您可以使用正则表达式.*进行配置。默认值为.*，表示监控目标阿里云账号下所有的Volume。外部配置 无 消除办法 检查触发告警的NAS Volume是否存在异常。前提条件 确保已在日志审计服务中的 审计配置>云产品接入>全局配置 中打开NAS 访问日志...
K8s流量安全
您可以使用正则表达式.*进行配置。默认值为.*，表示监控目标阿里云账号下所有的K8s集群名称。外部配置 无 消除办法 检查触发告警的K8s集群是否存在异常。前提条件 确保已在日志审计服务中的 审计配置>云产品接入>全局配置 中打开Kubernetes...
字段操作函数
regex Boolean 否 如果设置为False，表示不使用正则表达式进行匹配。当不配置该参数时，系统默认取值为True。返回结果 返回删除后的日志。函数示例 如果 content 字段的值为 123，则删除 content 字段和 age 字段。原始日志 age:18 content...
推送规则设置
如何书写正则表达式 提交邮箱 即 git config 设置的邮箱，规则请使用正则表达式书写，提交作者邮箱需符合正则表达式匹配才允许推送，为空表示允许所有邮箱。如何书写正则表达式 禁止强制推送（Force Push）强制推送即强制用本地代码覆盖...
导入Amazon S3文件
跨行文本日志特有参数 参数 说明 正则匹配位置 设置正则表达式匹配的位置，具体说明如下：首行正则：使用正则表达式匹配一条日志的行首，未匹配部分为该条日志的一部分，直到达到最大行数。尾行正则：使用正则表达式匹配一条日志的行尾，未...
云防火墙安全事件
您还可以使用正则表达式.*进行配置。默认值.*表示监控目标阿里云账号下所有的访问协议。外部配置 无 消除办法 检查云防火墙对流入流量的拦截事件，确认是否存在异常。前提条件 确保已在日志审计服务中的 审计配置>云产品接入>全局配置 中...
WAF安全事件
您可以使用正则表达式.*进行配置。默认值.*表示监控目标阿里云账号下所有被应用防火墙防护的网站。外部配置 无 消除办法 检查触发告警的网站是否存在异常。前提条件 确保已在日志审计服务中的 审计配置>云产品接入>全局配置 中打开应用防火...
API网关流量安全
API名称：待监控的API名称（支持正则表达式）。默认值.*，表示监控所有API。外部配置 无 消除方法 检查服务端平均延时过高的API是否存在异常。前提条件 确保已在日志审计服务中的 审计配置>云产品接入>全局配置 中打开API网关 访问日志 的...
K8s安全
K8s集群名称：待监控的K8s集群名称（支持正则表达式）。默认值.*，表示监控该阿里云账号下的所有K8s集群。外部配置 无 消除方法 检查Warning事件数过多的K8s集群是否存在异常。前提条件 确保已在日志审计服务中的 审计配置>云产品接入>全局...
SLB流量安全
SLB实例名称：待监控的SLB实例名称（支持正则表达式）。默认值.*，表示监控您操作账号绑定的所有SLB实例。外部配置 无 消除方法 检查响应报文长度异常点过多的负载均衡实例是否存在异常。前提条件 确保已在日志审计服务中的 审计配置>云...
转义字符
正则表达式 正则表达式除了对一般的不可见字符使用 \，为了做一些文本匹配，声明了模式，而这些模式中大量使用了()^%等符号，例如MaxCompute的底层正则引擎使用了RE2，RE2详情请参见 RE2，一些使用 \ 的转义写法如下：转义字符写法 说明 \d...
过滤器
SingleColumnValueRegexFilter：支持对类型为String的列值，使用正则表达式进行子字符串匹配，然后根据实际将匹配到的子字符串转换为String、Integer或者Double类型，再对子值使用过滤器进行过滤。CompositeColumnValueFilter：根据多个...
配置信任规则
在条件框中输入要匹配的报文内容，支持使用正则表达式。单击 添加条件 可以添加多个条件。添加一个条件后，您可以执行 正则校验，验证指定的内容是否与设置的正则表达式相匹配。操作步骤如下：单击条件下的 正则校验。在 正则校验 对话框，...
过滤器
正则匹配并转换数据类型后再过滤结果 当某些列中存储了自定义格式数据（例如JSON格式字符串）时，如果用户希望过滤查询该列的某个子字段值，则可以通过正则表达式匹配并转换子字段值类型后，再使用过滤器来过滤需要的数据。例如列中存储的...
关键词检查
如果需要使用更加高效的配置方式，请使用正则表达式进行配置。使用示例：假设要检测客服是否规范使用欢迎语，可以使用关键词检查算子，在其中添加符合规范的关键词，如“您好”、“你好”等，也可以对检测角色、检测范围、分析方式做限定。...
REGEXP_REPLACE
系统会将pattern和replacement的字符串解析成正则表达式，正则表达式使用 Java Pattern 进行处理，因此pattern和replacement的字符串需遵从Java Regex语法。示例 测试数据 表 1.T1 str1(VARCHAR)pattern1(VARCHAR)replace1(VARCHAR)2014-03...
一键同步MaxCompute表结构
表名规则 您可以使用正则表达式选择需要同步的表名称，默认同步远程数据库中的所有表。更多筛选外部表的规则请参见 IMPORT FOREIGN SCHEMA。正则预览 查看正则表达式的运行结果。同步外部表的规则如下：如果同步外部表时存在名称相同的表，...
一键同步MaxCompute表结构
表名规则 您可以使用正则表达式选择需要同步的表名称，默认同步远程数据库中的所有表。更多筛选外部表的规则请参见 IMPORT FOREIGN SCHEMA。正则预览 查看正则表达式的运行结果。同步外部表的规则如下：如果同步外部表时存在名称相同的表，...
TDI安全事件
您可以使用正则表达式.*进行配置。默认值.*表示监控目标阿里云账号下所有的网站。外部配置 无 消除办法 检查云安全中心的请求事件是否存在异常，是否存在过多攻击事件。前提条件 确保已在日志审计服务中的 审计配置>云产品接入>全局配置 中...
导入OSS数据
跨行文本日志特有参数 参数 说明 正则匹配位置 设置正则表达式匹配的位置，具体说明如下：首行正则：使用正则表达式匹配一条日志的行首，未匹配部分为该条日志的一部分，直到达到最大行数。尾行正则：使用正则表达式匹配一条日志的行尾，未...
配置过滤规则
在条件框中输入要匹配的报文内容，支持使用正则表达式。单击 添加条件 可以添加多个条件。添加一个条件后，您可以执行 正则校验，验证指定的内容是否与设置的正则表达式相匹配。操作步骤如下：单击条件下的 正则校验。在 正则校验 对话框，...
2018年
2018年6月 出参提取支持正则表达式，当使用正则表达式匹配到多个结果时，您可以指定提取其中的特定项；URL自动encode；POST的Body支持回车；监控和报告的采样数据精准度提升。云端录制发布。PTS铂金版推出云端录制功能，手机端压测请求也能...
- 产品推荐
- 这些文档可能帮助您