过滤日志
说明 日志字段的值完全匹配 采集日志 中的正则表达式，且不匹配 丢弃日志 中的正则表达式时，日志才会被采集，否则直接丢弃。参数 说明 采集日志 输入日志字段名和该字段值匹配的正则表达式。如果原始日志中的目标字段值符合对应的正则表达...
有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有、all 表示全部类型。主键（PRIMAEY KEY）约束下...
有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段长度的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有。主键（PRIMARY KEY）约束下字段长度的修改 ...
CSV格式
存在同名字段时，系统只随机投递其中一个字段的值。请尽量避免日志中使用同名字段。分隔符 支持半角逗号（,）、竖线（|）、空格和制表符，用于分割不同字段。转义符 当字段内出现分隔符时，需要使用转义符包裹该字段，避免读数据时造成字段...
有约束的列修改长度
主键（PRIMAEY KEY）约束下字段长度的修改 如果 主键 列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY DDL 对该列进行字段长度的修改操作，Oracle 数据库和 OceanBase 数据库 Oracle 租户的区别如下。Oracle 数据库的字段...
删除有约束的列
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型。删除主键（PRIMARY KEY）约束下的列 如果删除的 主键列 中包含下表中的字段类型...
没有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段长度修改操作，MySQL 数据库...
投递日志到MaxCompute（旧版）
格式_partition_time_是根据日志服务中_time_字段的值计算得到的，结合分区时间格式，向下取整。为避免触发MaxCompute单表分区数目的限制，日期分区列的值会根据投递间隔对齐。例如：日志服务的日志时间为 27/Jan/2016 20:50:13+0800，日志...
没有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段类型的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段类型修改操作，MySQL 数据库...
没有约束的列修改长度
本文为您介绍 Oracle 数据库和 OceanBase 数据库 Oracle 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY DDL 对该列进行字段长度的修改操作，Oracle 数据库和 ...
基本概念
Trajectory Field Value 轨迹属性值，轨迹属性在某一时刻某个字段的值。Trajectory Events 轨迹事件，在轨迹行程中发生的额外事件，比如汽车行程轨迹中的加油事件、抛锚事件、锁车事件等，由事件类型ID和事件时间组成。图 1.轨迹示意图
配置相邻消息计算
通过表达式或筛选器节点解析源节点数据后，可使用相邻消息计算节点，取当前消息的某个数值字段的值（仅支持BIGINT、DOUBLE类型）与前一条消息的相同数值字段的值，按照定义的表达式进行计算，将计算的结果输出到定义的输出字段上。...
基本概念
Trajectory Field Value 轨迹属性值，轨迹属性在某一时刻某个字段的值。Trajectory Events 轨迹事件，在轨迹行程中发生的额外事件，比如汽车行程轨迹中的加油事件、抛锚事件、锁车事件等，由事件类型ID和事件时间组成。轨迹示意图如下。...
字段操作
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，ALTER TABLE DDL 字段操作支持的转换范围。总览 ALTER TABLE tbl_name[alter_option[,alter_option].]alter_option:{ ADD[COLUMN]col_name column_definition[FIRST...
基本概念
Trajectory Field Value 轨迹属性值，轨迹属性在某一时刻某个字段的值。Trajectory Events 轨迹事件，在轨迹行程中发生的额外事件，比如汽车行程轨迹中的加油事件、抛锚事件、锁车事件等，由事件类型ID和事件时间组成。轨迹示意图如下。...
扩展字段
可类比关系型数据库中字段的 DEFAULT 值。数据类型：不可编辑。默认值：可编辑。字段类型：下拉框 Select 数据类型：指定数据为字符串或数字。数据项：定义下拉框中不同选项的键值对。处于数据兼容性考虑，数据项创建完成后无法删除，只能...
数据类型
SELECT ip_to_province(client_ip)as province,count(*)AS pv GROUP BY province ORDER BY pv long和double类型 设置字段的数据类型为long或double后，您才能通过数值范围查询该字段的值。如果日志字段的值为整数类型，建议您在配置索引时...
ALTER DATABASE
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
数据脱敏
所有人生效/所有人不生效 后续查看上述指定字段的数值时：权限生效人员查看到的字段值会根据配置的权限规则而受限，只能看到脱敏后的字段值。权限未生效人员不受权限规则限制，可查看完整字段值。单击 完成。设置其他字段的查看权限。未被...
字段加密
失败保留原始数据 选中该选项后，如果加密失败，系统将保留原始字段的值。如果未选中该选项，则加密失败后，字段值将被替换为 ENCRYPT_ERROR。JSON配置方式 配置 type 为 processor_encrypt，detail 说明如下表所示。参数 类型 是否必选 ...
数据解析工作台说明
配置超时插值 相邻消息计算 取当前消息与前一条消息中的同一数值字段的值（仅支持BIGINT、DOUBLE类型），按照定义的表达式进行计算，将计算的结果输出到定义的输出字段上。配置相邻消息计算 输出 目标节点 将解析后的数据转入IoT实例Topic...
查看敏感数据血缘（公测）
DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系，自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段，帮助您梳理敏感数据的扩散情况及影响面，提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...
查看数据探查报告及探查记录
建议针对主键字段不可重复的值或出现频率最高字段的值配置该探查场景，此外，若字段类型为 布尔型，不支持唯一值统计。若字段存在重复值的情况，治理建议如下：若该字段为 主键 且探查结果存在 重复值，建议您为该字段配置 字段值唯一 的...
查看数据探查报告及探查记录
建议针对主键字段不可重复的值或出现频率最高字段的值配置该探查场景，此外，若字段类型为 布尔型，不支持唯一值统计。若字段存在重复值的情况，治理建议如下：若该字段为 主键 且探查结果存在 重复值，建议您为该字段配置 字段值唯一 的...
控制台错误日志说明
索引重建错误 编号 含义 触发条件 7500 系统错误-7601 定时任务执行失败 定时索引重建执行失败 数据同步错误 错误码 报错内容 使用场景 触发条件 7301 文档主键值不存在,请检查后重试 校验场景 字段的值为null即触发 7304 文档主键值为空,...
从RDS MySQL数据库获取数据进行数据富化
说明 日志字段的值和RDS MySQL数据库表字段的值进行等值匹配时，如果RDS MySQL数据库表字段存在多个相同的值（例如RDS MySQL数据库表有多个值为 1 的 cid 字段。e_table_map函数只获取匹配到的第一行数据。e_table_map函数只支持单行匹配，...
字段分析
SLS（Simple Log Service）具备字段分析功能，专注于对text、long和double类型字段的统计分析。此功能涵盖了字段的基本分布情况、各种统计指标以及TOP5的时间序列图，为用户提供了深入的数据洞察和可视化工具，便于理解和挖掘。前提条件 已...
列级权限
设置查看规则 当您的数据集中存在敏感字段（员工级别、员工薪资、客户姓名等）时，系统将该字段的值隐藏。此时，您可以配置权限规则为 禁止查看。登录 Quick BI控制台，在工作台中设置目标数据集的列级权限。打开 启用列级权限 开关。启用...
为什么查询和分析时，字段值会被截断？
当单个字段值长度超过最大长度时，超出部分被截断，不参与查询和分析。日志服务查询和分析的字段值长度存在如下限制。查询时，单个字段值最大长度为512 KB（524,288 字节），超出部分不参与查询。分析时，默认支持的字段值最大长度为2 KB...
查询和分析
无 字段值大小 单个字段值最大为512 KB，超出部分不参与查询。如果单个字段长度大于512 KB，有一定几率无法通过关键词查询到日志，但数据仍然是完整的。操作并发数 单个Project支持的最大查询操作并发数为100个。例如100个用户同时在同一个...
字段安全级别
根据存储业务的数据性质差异，字段如手机号码、身份证号码等属于敏感数据，常规查询数据时此类字段的值应该加密展现。为了根据数据的敏感程度对数据进行不同策略的脱敏和管理，数据管理DMS将敏感数据分为3个安全级别。根据数据的敏感程度，...
Quick BI能否将数据集里面的字段值进行替换
概述 本文主要介绍如何将Quick BI数据集里面的字段值进行替换。详细信息 本文档举例将男和女改变成0和1。创建数据集存在以下两种方式：SQL创建数据集，可以使用SQL进行处理。select 其他字段,CASE WHEN 性别字段='男' THEN '0' WHEN 性别...
分析概述
字段值大小 单个字段值最大长度为16 KB（16384字节），超出部分不参与分析。说明 默认支持的字段值最大长度为2048字节，即2 KB。如果您需要修改字段值的最大长度，可设置 统计字段（text）最大长度。具体操作，请参见 设置字段值的最大长度...
URL函数
示例 对 url 字段的值进行编码。字段样例 url:https://homenew.console.aliyun.com/home/dashboard/ProductAndService 查询和分析语句*|select url_encode(url)查询和分析结果 url_decode函数 url_decode函数对URL进行解码。语法 url_...
单选
④数据字段：下拉菜单选择所选数据表中的 某一个数据字段。⑤默认值：根据设置 数据字段内容 进行下拉选择。⑥自动关联字段ID值：选择是否自动关联字段ID值，勾选后即配置控件 的选项展示名称 关联 对应的ID值字段。来源于 选择 数据集。①...
特定结构化数据函数
restrict Bool 否 提取字段的值不是合法的JSON格式时，是否严格限制加工。默认值False。False：忽略报错，数据加工继续处理，返回 default 定义的值。True：直接报错，数据加工不再继续处理，直接丢弃该条日志。返回结果 返回提取到的值。...
下拉多选
④数据字段：下拉菜单选择所选数据表中的 某一个数据字段 ⑤默认值：根据设置 数据字段内容 进行下拉选择。来源于 选择 数据集。①来源于数据集：选择 数据集 后可支持数据集内 数据字段 选择您所需要的选项。②数据集：下拉菜单选择当前...
Quick BI图表如何修改字段名称
问题描述 如何修改字段名称 解决方案 可以通过数据集编辑页面修改字段名称，也可以在图表的数据配置区设置。如果您在数据集编辑页设置，那么用这个数据集新建的图表，都会自动变为数据集修改后的字段名称。适用于对所有图表的字段名称统一...
追加字段
您可以使用processor_appender插件为指定的字段（可以为不存在的字段）追加特定的值，支持在字段值中添加模板变量。该插件通常与input_prometheus、input_system_v2等时序监控相关的插件结合使用，用于给拉取到的Prometheus数据追加特定的...
路网轨迹层
本文介绍路网轨迹层各配置项的含义。图表样式 路网轨迹层是3D地球的子组件，支持独立的样式和数据配置，包括轨迹线的长宽、运动速度、颜色以及轨迹点经纬度等，适用...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
- 产品推荐
- 这些文档可能帮助您