如何发布和调用JDBC数据服务
服务地址:8086/CSB"\-api"JDBC数据服务名"-version"服务版本号"-ak"凭证ak"-sk"凭证sk"\-cbJSON"{'requireTotalCount':true,'offset':跳过n条记录,'limit':返回记录数上限,'queryValues':{'查询条件字段1':'查询条件字段值1','查询条件字段...
流程控制函数
函数示例 示例1：字段值匹配后再进行操作。result 字段值为 failed 或 failure 时，设置_topic_字段的值为 login_failed_event。e_if(e_match("result",r"failed|failure"),e_set("_topic_","login_failed_event"))示例2：根据字段值判断后...
文字
使用方法 表达式.Enum.WdHeaderFooterIndex.wdHeaderFooterPrimary 表达式：文档类型应用对象 参数 字段 值 描述 wdHeaderFooterPrimary 1 返回文档或节中除第一页外所有页上的页眉或页脚。wdHeaderFooterFirstPage 2 返回文档或节中的第一...
配置DataWorks平台GDB Writer
{"name":"person_age","value":"#{1}",/{1}表示取源端第2个字段值，同上支持拼接。type":"int","columnType":"vertexProperty"/字段分类，vertexProperty表示是点的属性。},/点的属性，支持int、long、float、double、boolean和string类型...
表格
使用方法 表达式.Enum.XlReferenceStyle.xlR1C1 表达式：文档类型应用对象 参数 字段 值 描述 xlR1C1-4150 使用xlR1C1返回R1C1样式的引用。xlA1 1 使用xlA1返回A1样式的引用。默认值。XlRowCol 通过 XlRowCol 指定对应于特定数据系列的数值...
Graph Database（GDB）数据源
{"name":"person_age","value":"#{1}",/{1}表示取源端第2个字段值，同上支持拼接。type":"int","columnType":"vertexProperty"/字段分类，vertexProperty表示是点的属性。},/点的属性，支持INT、LONG、FLOAT、DOUBLE、BOOLEAN和STRING类型...
Dataphin的字段计算组件如何计算对日期字段值增加8...
问题描述 Dataphin的集成管道任务中字段计算报错，字段计算组件如何计算对日期字段值增加8小时？问题原因 FROM_UNIXTIME函数的参数使用错误，应该只有一个日期参数，没有第二个日期格式的参数。解决方案 去除FROM_UNIXTIME函数的第二个日期...
数据脱敏
配置示例 示例1 将目标字段值中的所有内容替换为字符串，即设置 Method 为 const，Match 为 full。原始日志"password":"123abcdefg"Logtail插件处理配置 {"type":"processor_desensitize","detail":{"SourceKey":"password","Method":...
使用方法 表达式.Enum.ZoomToFitType.msoTrue 表达式：文档类型应用对象 参数 字段 值 描述 msoTrue-1 文档窗口大小进行调整后使页面以最佳尺寸适应活动窗口。msoFalse 0 对文档窗口大小进行调整后不为适应文档窗口尺寸而缩放视图。...
演示
使用方法 表达式.Enum.MsoTriState.msoTrue 表达式：文档类型应用对象 参数 字段 值 描述 msoTrue-1 带边框。msoFalse 0 不带边框。PpFixedFormatIntent 通过 PpFixedFormatIntent 指定导出文件的目的。使用方法 表达式.Enum....
filter表达式
filter:"contain(nid,\"1|2|3\")"使用 notcontain，检索nid字段值 不在[1,2,3]范围内的所有记录 filter:"notcontain(nid,\"1|2|3\")"in/notin in和notin:判断字段值是否（不）在指定列表中 举例：查询文档中type（int类型）为1或2或3的文档...
从RDS MySQL数据库获取数据进行数据富化
time:1563436326 data:123 city:nanjing province:jiangsu 加工规则 根据指定的RDS MySQL数据库表中的字段值（例如 content 字段的值）去匹配日志字段，其中指定的RDS MySQL数据库表中的字段值为Key-Value形式，Key对应日志字段，Value为正...
特殊字符和保留字段
特殊字符 在图探索中进行Gremlin查询，对于string类型的pkey或者skey，字段值如果带有;(、)、=、+等保留字符，Query查询时，需要将字段值urlencode。例子1：pkey值为【ab;33】的边信息 原串：g("graphName").E("ab;33").hasLabel(...
正则式函数
字段样例 request_uri:/request/path-3/file-5 查询和分析语句（调试）*|SELECT regexp_extract(request_uri,'.*\/(file.*)',1)AS file,count(*)AS count GROUP BY file 查询和分析结果 示例3：提取 message 字段值中的单引号（'）和数字...
数据结构
如下为各数据类型转换为字符串示例：类型 样例 转换类型 转换样例 整数 1 字符串"1"浮点 1.2 字符串"1.2"布尔 True 字符串"true"字节 b"123"使用UTF8解码为字符串"123"元组 样例1：(1,2,3)样例2：("a",1)列表的字符串 样例1："[1,2,3]"样例...
如何降低索引流量费用？
如果是全文索引，则日志字段名（Key）和字段值（Value）都将作为text类型存储，字段名和字段值都被计入在索引流量中。如果是字段索引，long类型和double类型的字段名不计入在索引流量中。使用字段索引，可降低索引流量费用。例如：对 ...
比较运算符
字段样例 request_uri:/request/path-2/file-6 查询和分析语句*|SELECT request_uri LIKE '%file-6' 查询和分析结果 SPL 示例1：查询 request_uri 字段值是以file-8或file-6结尾的日志。字段样例 request_uri:/request/path-2/file-6 SPL...
事件检查函数
函数示例 判断字段k1的值是否为数字。原始日志 k1:123 加工规则 e_set("match",e_match("k1",r'\d+'))加工结果 k1:123 match:True 更多参考 支持和其他函数组合使用。相关示例，请参见 调用函数清洗数据。e_match_any 判断当前日志字段的值...
控制台错误日志说明
校验场景 主键类型为文本类型，字段值为null or empty 7503 JSON插件字段内容不是JSON格式，推送失败，请检查后重试。JSON插件 字段值不是JSON格式 7504 JSON插件字段内容对应key不存在，补充默认值。JSON插件 字段值JSON内容中不包含JSON...
事件判断
status 字段值为 200，且 request_method 字段值为 GET，且 header_length，且 body_length 的字段值之和小于等于 1000 的日志事件，添加一个新字段 type，其值为 normal。SLS DSL编排 e_if(op_and(e_search('status:200 and request_...
控制台错误日志说明
校验场景 主键类型为文本类型，字段值为null or empty 7503 json插件字段内容不是JSON格式，推送失败，请检查后重试。json插件 字段值不是JSON格式 7504 json插件字段内容对应key不存在，补充默认值。json插件 字段值json内容中不包含json...
字符串函数
示例 查询 instance_id 字段值和 owner_id 字段值的最小编辑距离。字段样例 instance_id:i-01 owner_id:owner-01 查询和分析语句（调试）*|SELECT levenshtein_distance(owner_id,instance_id)查询和分析结果 lower函数 lower函数用于将...
分类玫瑰图（v4.x版本）
字段为空时，系统会将组件数据中的 s 字段值作为系列字段值进行显示。如果不为空，您需要保证数据返回的顺序。系列名：数据系列的系列显示名称，可自定义。系列s值 和 系列显示 配置项，仅在隐藏 CSV数据 并打开 系列映射 配置项开关时生效...
UNNEST子句
对这种特殊类型的日志字段进行查询和分析时，您可以先使用UNNEST子句将字段值展开。语法 将array类型的数据展开为多行单列形式，列名为 column_name。UNNEST(x)AS table_alias(column_name)将map类型的数据展开为多行多列形式，列名为 key_...
使用介绍
支持单值和多值 notcontain 判断字段值不在给定集合内，支持单值和多值 MATCHINDEX 使用给定的条件查询指定字段的倒排索引 QUERY 使用给定的条件查询倒排索引,原HA3 query语法 hashcombine 将多个int64的值合并成1个int64的值 rangevalue ...
清理文档
立即清理 保留字段：必须为主表中的 INT 字段类型，该字段值为“秒级”或“毫秒级”unix 时间戳值。在最近X天内的文档：这里的 X 表示需保留最近多少天内的文档，值域[7-180]。该字段值单位为：秒：秒级 unix 时间戳一般为10位整数。毫秒：...
字段操作函数
e_set 添加新字段或为现有字段设置新的字段值。支持和其他函数组合使用。相关示例，请参见 调用函数清洗数据。e_drop_fields 删除符合条件的日志字段。支持和其他函数组合使用。相关示例，请参见 复杂JSON数据加工。e_keep_fields 保留符合...
过滤日志
参数 说明 采集日志 输入日志字段名和该字段值匹配的正则表达式。如果原始日志中的目标字段值符合对应的正则表达式，则采集该日志。支持添加多个键值对，键值对之间为与关系。丢弃日志 输入日志字段和该字段值匹配的正则表达式。如果日志中...
JSON函数
示例 示例1：计算 Results 字段值中JSON元素的数量。字段样例 Results:[{"EndTime":1626314920},{"FireResult":2}]查询和分析语句*|SELECT json_array_length(Results)查询和分析结果 示例2：计算 time 字段值中JSON元素的数量。字段样例 ...
GetCustomFieldOption-获取字段自定义选项
error errorCode string 错误码 Openapi.RequestError success boolean true 或者 false true fileds object[]字段值信息 displayValue string 展示的值 223 fieldIdentifier string 字段唯一标识 e8bxxxxxxxxxxxxxxxx23 identifier string...
查询原始日志
可以设置为：预设：在原始日志页面中单击字段值，跳转到目标日志库查询页面后，保持日志服务的默认查询时间范围，即15分钟（相对）。继承当前时间：在原始日志页面单击字段值，跳转到目标日志库查询页面后，对应的查询时间范围为查询原始...
filter子句
1 fieldlen:获取LITERAL类型字段长度 举例：返回用户名usr_name不为空的文档 query=default:'关键词'&filter=fieldlen(usr_name)>0 in/notin:判断字段值是否（不）在指定列表中 举例：查询文档中包含"iphone"且type（int类型）为1或2或3的...
filter子句
1 fieldlen:获取LITERAL类型字段长度 举例：返回用户名usr_name不为空的文档 query=default:'关键词'&filter=fieldlen(usr_name)>0 in/notin:判断字段值是否（不）在指定列表中 举例：查询文档中包含"iphone"且type（int类型）为1或2或3的...
通用参考
举例如下：SPL语句*|extend status_cast=cast(status as bigint)输入数据 Status:'200' status:'404' 处理结果 第一种可能结果，保留Status字段值 Status:'200'-保留第1列，舍弃第2列 status_cast:'200' 第二种可能结果，保留status字段值 ...
Quick BI中如何通过聚合度量字段跳转或者联动展示该...
可以转换思路，采用即席SQL的方式新建数据集，SQL语句中用case when将具体的度量值标记划分范围且计算每个范围的总数，生成新的范围相关的维度字段，具体的范围字段值就为“度量1到100”、“100到500”、“度量500到1000”、“度量1000以上...
SkewedInfo
名称 类型 描述 示例值 object SkewedInfo SkewedColNames array 包含倾斜值的字段列表 string 倾斜字段 col1 SkewedColValueLocationMaps object 倾斜值和字段的映射 Map string 倾斜值和字段的映射 Map {“col1”:"val1"} ...
查看内置规则模板
最大值，1天波动率 取该字段的最大值，与前1天进行比较，计算出波动率后，再与阈值进行比较。汇总值，上周期的波动率。取该字段的sum值，与上一周期进行比较，计算出波动率后，再与阈值进行比较，只要有一个不符合规则即可触发报警。最小值...
过滤处理
Logtail过滤处理插件支持根据日志字段值来进行日志过滤。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件。具体操作，请参见 概述。配置说明 参数名称 说明 原始字段 解析日志前，用于存放日志...
质量规则参数配置
稳定性 统计值（1天波动率、7天波动率、30天波动率）与1天、7天、30天前采集的表行数进行比较，对比波动率，再与设定的阈值进行比较，只要有一个不符合规则，则触发报警。自定义SQL 异常行数/正常行数/异常率/正常率 正常行数：唯一值行数...
质量规则参数配置
稳定性 统计值（1天波动率、7天波动率、30天波动率）与1天、7天、30天前采集的表行数进行比较，对比波动率，再与设定的阈值进行比较，只要有一个不符合规则，则触发报警。自定义SQL 异常行数/正常行数/异常率/正常率 正常行数：唯一值行数...
- 产品推荐
- 这些文档可能帮助您