SPL与SQL的使用场景对照
parse(Time,'%Y-%m-%d%H:%i')字段提取 正则提取 select cast(Status as BIGINT)as Status,date_parse(Time,'%Y-%m-%d%H:%i')AS Time JSON提取 select cast(Status as BIGINT)as Status,date_parse(Time,'%Y-%m-%d%H:%i')AS Time 正则提取：...
日志主题
提取文件路径中的单个值 您可以在创建Logtail配置时将 Topic生成方式 设置为 文件路径正则，并且输入文件路径的正则表达式，并使用捕获组捕获待提取的内容（此处的正则表达式需要完整匹配文件路径，捕获组有且仅有一个）。Logtail上报数据...
事件处理流
动作配置 待提取字段：location 提取正则表达式：([a-zA-z]+-[a-zA-z]+)-(.*)填充的字符：region、datacenter 执行结果 匹配更新 当系统检测到事件的指定字段中存在某段内容时，就将设置的字段值填充到目标字段中。场景 告警字段："message...
安装Logtail（ECS实例）
此处以正则-文本日志为例，您可以根据需求选择对应的数据源。在 选择日志空间 步骤中，选择 项目Project 和 日志库Logstore，单击 下一步。如果需要新建Project和Logstore，请单击 立即创建。具体操作请参见 管理Project 和 管理Logstore。...
匹配查找报警
匹配查找报警 是对固定位置关键字进行预警，可发送包含该关键字的日志内容为预警内容，也可提取部分...当不需要整条日志内容作为预警内容时，可用正则方式提取部分日志内容作为报警内容。重要 如果您未配置日志筛选，则必须配置自定义文案。
通过Sidecar方式采集日志
Logtail支持通过极简模式、正则模式、分隔符模式、JSON模式等模式采集文本日志。更多信息，请参见 概述。说明 是否为Docker文件 的配置项请保持关闭。标准输出示例 采集标准输出时，日志路径为stdlog卷在容器的挂载路径，本文示例为/stdlog...
通过Sidecar方式采集日志
Logtail支持通过极简模式、正则模式、分隔符模式、JSON模式等模式采集文本日志。更多信息，请参见 概述。说明 是否为Docker文件 的配置项请保持关闭。标准输出示例 采集标准输出时，日志路径为stdlog卷在容器的挂载路径，本文示例为/stdlog...
通过Sidecar方式采集日志
Logtail支持通过极简模式、正则模式、分隔符模式、JSON模式等模式采集文本日志。更多信息，请参见 概述。说明 是否为Docker文件 的配置项请保持关闭。标准输出示例 采集标准输出时，日志路径为stdlog卷在容器的挂载路径，本文示例为/stdlog...
正则式函数
说明 使用正则式函数提取字符串中的单引号（'）时，需要在正则表达式中再添加一个单引号（'）进行提取。具体示例，请参见 regexp_extract函数（示例3）。regexp_extract_all函数 regexp_extract_all函数用于提取目标字符串中符合正则表达式...
正则表达式函数
函数列表 类型 函数 说明 值提取函数 regex_select 根据正则表达式提取符合条件的值。regex_findall 根据正则表达式获得符合条件的所有值列表。匹配判断 regex_match 判断是否匹配正则表达式。替换 regex_replace 根据正则表达式替换字符串...
SQL Adapter
匹配文本 填写待匹配替换的文本或正则表达式。替换文本 填写替换的文本或正则表达式。规则生效范围 表示配置的替换规则生效的范围。取值范围：全局生效。指定SQL替换。不兼容SQL选择 该参数仅当 规则生效范围 选择为 指定SQL替换 时出现。...
字符串替换
您在使用Logtail采集日志时，可以使用processor_string_replace插件，实现文本日志的全文替换、正则提取替换或去转义符。本文介绍processor_string_replace插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用...
全局操作函数概览
字段值提取函数 e_regex 根据正则表达式提取字段的值并赋值给其他字段。e_json 对特定字段中的JSON对象进行JSON操作，包括JSON展开、JMES提取或者JMES提取后再展开。e_kv 通过quote提取多个源字段中的键值对信息。e_kv_delimit 通过分隔符...
配置域名和路径的转发规则
客户端发送的请求路径：/sys/ccc/bbb/aaa 匹配到的转发条件路径：/sys/(.*)/(.*)/aaa 3 提取与替换 按照正则表达式规范，转发条件路径中的两个(.*)分别提取到 ccc 和 bbb，并分别保留至转发动作中重写或重定向路径中的${1}和${2}。...
配置域名和路径的转发策略
客户端发送的请求路径：/sys/ccc/bbb/aaa 匹配到的转发条件路径：/sys/(.*)/(.*)/aaa 3 提取与替换 按照正则表达式规范，转发条件路径中的两个(.*)分别提取到 ccc 和 bbb，并分别保留至转发动作中重写或重定向路径中的${1}和${2}。...
正则表达式入门教程
正则表达式是一种强大的文本匹配工具，可以用于在文本中查找特定的模式。本文将提供简单且实用的正则表达式快速上手教程，帮助您快速掌握其基本用法。 重要 本文档可能包含第三方产品信息，该信息仅供参考。阿里云对第三方产品的性能、...
JSON函数和操作符
object(text[])→json jsonb_object(text[])→jsonb json_object('{a,1,b,"def",c,3.5}')→{"a":"1","b":"def","c":"3.5"} json_object('{{a,1},{b,"def"},{c,3.5}}')→{"a":"1","b":"def","c":"3.5"} 这种形式的json_object从单独的文本数...
使用正则表达式检测标签值的合规性
您可以在标签策略中设置标签值需要满足正则表达式。对不满足正则表达式的标签值，支持自动修复。前提条件 请确保您已经启用了标签策略功能。具体操作，请参见 启用标签策略。背景信息 支持标签自动检测和修复的云服务都支持正则表达式检测...
接口出参
data.items[-2].value 不支持 获取items整个数组 data.items[ALL]$.data.items[*]获取items数组中随机一个对象 data.items[RANDOM]$.data.items[randomIndex()]Body:TEXT类型 TEXT格式解析 支持任意文本格式且可使用正则表达式提取。...
接口出参
data.items[-2].value 不支持 获取items整个数组 data.items[ALL]$.data.items[*]获取items数组中随机一个对象 data.items[RANDOM]$.data.items[randomIndex()]Body:TEXT类型 TEXT格式解析 支持任意文本格式且可使用正则表达式提取。...
如何使用RPA编辑器发送邮件
5.提供create_html_table工具方法，传入二维列表，自动生成html表格，可以作为html文本写到邮件正文中"""#初始化内容，smtp服务器，发件人地址，发件人smtp密码（初始为空），收件人地址列表 def_init_(self,smtp_server:str,sender:str,...
日志服务
system#当前支持Regexp、JSON两种提取模式 extractMode:Regexp#提取表达式（正则），JSON类型则不需要 extractExpression:^time=?P<time>.+)level=?P<level>.+)msg="?P<msg>.+)"logColumns:#name与正则匹配到的name一致或使用JSON的key-...
ALB使用约束
客户端发送的请求路径：/sys/ccc/bbb/aaa 匹配到的转发条件路径：/sys/(.*)/(.*)/aaa 3 提取与替换 按照正则表达式规范，转发条件路径中的两个(.*)分别提取到 ccc 和 bbb，并分别保留至转发动作中重写或重定向路径中的${1} 和${2}。...
ALB使用约束
客户端发送的请求路径：/sys/ccc/bbb/aaa 匹配到的转发条件路径：/sys/(.*)/(.*)/aaa 3 提取与替换 按照正则表达式规范，转发条件路径中的两个(.*)分别提取到 ccc 和 bbb，并分别保留至转发动作中重写或重定向路径中的${1} 和${2}。...
大语言模型
文本处理：润色文本和提取文本摘要等。编程辅助：编写和优化代码等。qwen-72b-chat 通义千问对外开源的72B规模参数量的经过人类指令对齐的chat模型。通义千问14B qwen-14b-chat 通义千问对外开源的14B规模参数量的经过人类指令对齐的chat...
通义千问
文本处理：润色文本和提取文本摘要等。编程辅助：编写和优化代码等。翻译服务：提供各类语言的翻译服务，如英语、日语、法语或西班牙语等。对话模拟：扮演不同角色进行交互式对话。数据可视化：图表制作和数据呈现等。qwen-plus 通义千问...
正则表达式检查
功能介绍：检测文本内容，是否符合正则表达式配置的规则内容。配置方法：将正则表达式输入即可。在“命中”中输入期望命中的规则内容，在“排除”中输入期望过滤不命中的规则内容。其中，“命中”为必填项，“排除”为选填项。使用示例：...
全文索引的分词器
Pattern分词器 Pattern分词器按正则表达式切分文本，不支持通过全文词典使用实体词、停用词和通过SQL语句查询分词效果。语法 FULLTEXT INDEX fidx_name(`column_name`)WITH ANALYZER pattern_tokenizer("Custom_rule")[WITH DICT `tbl_dict...
概述
有几个函数 to_tsquery、plainto_tsquery 以及 phraseto_tsquery 可用于将用户书写的文本转换为正确的 tsquery，它们会主要采用正则化出现在文本中的词的方法。相似地，to_tsvector 被用来解析和正规化一个文档字符串。因此在实际上一个...
SPL概述
字段赋值表达式，直接对字段赋值例如 level='INFO'，或者将正则表达式的提取结果赋值给字段例如 msg=regex_extract(content,'\S+')。SQL表达式 数据计算表达式返回值，例如 cast(status as int)>=500。output 处理结果中的输出字段。例如|...
钉钉应用配置SLS审计日志
eventName=([a-zA-Z0-9_-]+),request=(.*),response=(.*)提取字段的正则表达式，根据该表达式，解析日志文本 日志抽取内容 提取字段名称 提取字段值 根据正则提取的字段*eventTime 2022-03-09 18:36:13.236 事件的发生时间*eventLevel...
LLM-Copyright信息移除（MaxCompute）
首先检测文本中是否有符合正则表达式 '/\\*[^]*\\*+?[^/*][^]*\\*+)*/'（注释字符）的字符串。如果匹配到对应字符串，则检测字符串中是否包含 copyright 字段，如果包含，则删除整段字符串并返回；否则不做删除，直接返回。如果匹配不到该...
日志功能配置及查询
在下方表达式框中输入字段提取表达式，目前支持正则表达式的形式，如上图的日志为：level=info ts=2022-05-10T08:16:57.403Z caller=custom_mysql_user_connections.go:82 scraper=custom.info_schema.processlist msg="custom user ...
扫描（Scan）查询概述
正则式函数 函数名称 语法 说明 regexp_extract_all函数 regexp_extract_all(x,regular expression)提取目标字符串中符合正则表达式的子串，并返回所有子串的合集。regexp_extract_all(x,regular expression,n)提取目标字符串中符合正则...
Terraform类型模板结构
如果.tf文件中定义的参数未在Parameters中定义，则ROS会自动从.tf文件中提取参数，并在Parameters中生成定义。如果.tf文件中定义的参数已经在Parameters中定义，则不会提取参数，使用Parameters中已有的定义。Parameters中的参数类型必须与...
函数概览
正则式函数 函数名称 说明 支持SQL 支持SPL regexp_extract_all函数 提取目标字符串中符合正则表达式的子串，并返回所有子串的合集。提取目标字符串中符合正则表达式的子串，然后返回与目标捕获组匹配的子串合集。regexp_extract函数 提取...
转义字符
简单文本+正则表达式+SQL转义 有一段文字：010-12345678，使用函数提取出最前面的 010 步骤如下：写出正则表达式(\d+)-。根据SQL的转义规则，对其中的 \ 进行转义，同时在两边添加单引号，可以得到字符串 '(\\d+)-'。在MaxCompute中执行...
案例：构建文本语义检索系统
文本语义检索概述 文本语义检索的架构如下图所示，通常包括两个组件：文本向量化和索引构建 文本向量化：指利用机器学习模型将文本转换为向量特征。机器学习模型能够对文本进行编码，使得在语义上与其他文本相似的文本，被编码为在向量空间...
模型介绍
文本处理：润色文本和提取文本摘要等。编程辅助：编写和优化代码等。翻译服务：提供各类语言的翻译服务，如英语、日语、法语或西班牙语等。对话模拟：扮演不同角色进行交互式对话。数据可视化：图表制作和数据呈现等。模型概览 模型名称 ...
CREATE TEXT SEARCH CONFIGURATION
如果给定一个模式名称，则文本搜索配置会被创建在指定的模式中。否则它将会被创建在当前模式中。定义一个文本搜索配置的用户会成为其拥有者。语法 CREATE TEXT SEARCH CONFIGURATION name(PARSER=parser_name|COPY=source_config)参数 name...
- 产品推荐
- 这些文档可能帮助您