创建逻辑模型：应用表
当选择导入部分字段时，在弹出的窗口中，会为您展示所选表的字段，您可选择需要添加至模型的字段，完成后单击界面下方的 导入。说明 如果已导入字段中存在 字段显示名 为空的字段，您可根据界面提示将字段描述填充为字段显示名。快捷模式：...
KEY
KEY分区与HASH分区的区别在于：KEY分区可以没有分区字段，没有分区字段时，默认将主键字段作为分区键。如果没有主键字段时，则按照唯一键进行分区。KEY分区支持多列分区字段。KEY分区支持INT类型、字符类型、DATE类型、TIME类型、DATETIME...
字段值映射处理
处理原始字段缺失 选中该选项后，当原始日志中缺失目标字段时，将处理缺失字段，即按照 结果字段填充值 中的值进行填充。结果字段填充值 处理原始日志中缺失的目标字段时，设置对应的填充值。默认值为 Unknown。映射字典最大大小 映射字典...
创建逻辑模型：汇总表
当选择导入部分字段时，在弹出的窗口中，会为您展示所选表的字段，您可选择需要添加至模型的字段，完成后单击界面下方的 导入。说明 如果已导入字段中存在 字段显示名 为空的字段，您可根据界面提示将字段描述填充为字段显示名。快捷模式：...
分组评估
选择分组评估字段时，请选择具备标识监控实体特征的字段，字段的值可枚举。请勿选择不具备区分监控实体特征的字段。使用这些字段会产生很多分组，每个分组对应一个告警，造成告警风暴，导致错过重要的告警信息。例如：选择Nginx日志中的 ...
没有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段长度修改操作，MySQL 数据库...
创建文件数据源
数据字段 文件上传至数据库后，会以数据库表的形式存储，数据库字段名称 和 字段类型 为生成数据库表的字段名和类型，而 文件字段名 为上传文件的表头名，会变成数据库表的字段备注。您可以在文件上传时，修改 文件字段名、数据库字段名称 ...
没有约束的列修改长度
本文为您介绍 Oracle 数据库和 OceanBase 数据库 Oracle 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY DDL 对该列进行字段长度的修改操作，Oracle 数据库和 ...
没有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段类型的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段类型修改操作，MySQL 数据库...
从RDS MySQL数据库获取数据进行数据富化
说明 日志字段的值和RDS MySQL数据库表字段的值进行等值匹配时，如果RDS MySQL数据库表字段存在多个相同的值（例如RDS MySQL数据库表有多个值为 1 的 cid 字段。e_table_map函数只获取匹配到的第一行数据。e_table_map函数只支持单行匹配，...
数据编码与解码
NoKeyError Boolean 否 原始日志中无您所指定的原始字段时，系统是否报错。true：报错。false（默认值）：不报错。BASE64解码 您可以通过processor_base64_decoding插件对字段值进行解码。表单配置方式 配置 处理器类型 为 BASE64（解码）...
打包字段
AlarmIfIncomplete Boolean 否 原始日志中无您所指定的原始字段时，系统是否报错。true（默认值）：报错。false：不报错。配置示例 将指定的 a 字段和 b 字段打包成JSON字段 d_key，配置示例如下：原始日志"a":"1""b":"2"Logtail插件处理...
查询及分析日志
说明 未添加任何 显示字段 时，右侧日志信息展示系统默认配置的字段。单击字段后的 图标，查看字段的 基本分布情况、统计指标 等信息。具体操作，请参见 快速分析。图示⑤ 设置 显示字段 后，单击 图标，将显示字段列表收藏为视图，便于...
视频打点
Manifest 格式中 data 字段的下一级字段均对应一个数据集字段，字段名 可自定义，在配置数据集字段名时选择对应的字段名即可。CSV 及 XLSX 格式 video_url oss:/*.oss-cn-hangzhou.aliyuncs.com/iTAG/mov/1.mp4 oss://*.oss-...
创建索引或约束支持的字段类型
主键（PRIMARY KEY）字段类型 通过 CREATE TABLE DDL 创建 PRIMARY KEY 时，MySQL 数据库和 OceanBase 数据库 MySQL 租户支持的字段类型区别如下。MySQL 数据库字段类型 是否支持 OceanBase 数据库 MySQL 租户字段类型 是否支持 INT 支持 ...
展开JSON字段
NoKeyError Boolean 否 原始日志中无您所指定的原始字段时，系统是否报错。true（默认值）：报错。false：不报错。ExpandDepth Int 否 JSON展开的深度。默认值为0，表示不限制。1表示当前层级，以此类推。ExpandConnector String 否 JSON...
配置本地文件输入组件
数据内容起始行 首行内容选为字段名称时，数据内容起始行不可小于2；首行内容选为数据内容时，数据内容起始行不可小于1。新建输出字段 新建输出字段：单击 新建输出字段。根据页面提示，配置 来源序号 和 字段，选择字段类型。对于已添加的...
配置Hive输出组件
同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 orc、parquet、text、iceberg（iceberg...
行业算法版表结构
DOUBLE,BOOLEAN,DATETIME,STRING,DECIMAL,MAP,ARRAY,TINYINT,SMALLINT,INT,FLOAT,CHAR,VARCHAR,DATE,TIMESTAMP,BINARY,INTERVAL_DAY_TIME,INTERVAL_YEAR_MONTH,STRUCT 行业算法版表的字段类型与数据库表的字段类型的对应关系 行业算法版表 ...
敏感数据保护概览
RDS MariaDB、其他来源MariaDB PolarDB PostgreSQL版（兼容Oracle）PolarDB分布式版 OceanBase Oracle DB2 达梦数据库 Lindorm：Lindorm_CQL、Lindorm_SQL OpenGauss 数据仓库：AnalyticDB MySQL版 AnalyticDB PostgreSQL版 DLA（Data Lake...
字段操作
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，ALTER TABLE DDL 字段操作支持的转换范围。总览 ALTER TABLE tbl_name[alter_option[,alter_option].]alter_option:{ ADD[COLUMN]col_name column_definition[FIRST...
用户信息录入配置
登录数字社区Web端->住户信息录入管理 选择您需要管理的小区 选择对应字段的是否可见、是否必填以及数据类型 是否可见，指这个字段是否需要出现在住户录入信息的页面中 是否必填，指这个字段是否在住户录入信息时是必选字段 数据类型 主...
设置数据库索引
使用数据库时，对成为查询条件的字段设置索引可以有效提高查询效率，更快的获取信息。缺省情况下会对_id_字段默认创建一个非唯一索引。前提条件 创建数据表 添加记录 操作步骤 登录 EMAS管理控制台。查找您的项目，单击项目，进入EMAS 概览...
配置图表字段
在仪表板编辑页面的 字段 页签，您可以为仪表板添加维度和度量字段，并配置图表样式和分析设置：说明 不同的数据源字段、图表类型会导致设置图表数据时，字段类型、图表样式和分析选项与本文部分描述存在差异，请以实际环境为准。...
配置本地文件输入组件
数据内容起始行 首行内容选为字段名称时，数据内容起始行不可小于2；首行内容选为数据内容时，数据内容起始行不可小于1。新建输出字段 新建输出字段：单击 新建输出字段。根据页面提示，配置 来源序号 和 字段，选择字段类型。对于已添加的...
数据类型
您在创建索引时，可将字段的数据类型设置为text、long、double或JSON。本文介绍各个数据类型的配置示例及注意事项。text类型 如果您要查询和分析字符串类型的字段，需在配置索引时，将字段的数据类型设置为text，并开启统计功能。说明 开启...
搜索增强
是否关联文件数据 当接入数据源同时存在文件类型及数据库类型数据时，且“文件路径字段”和“文件类型字段”都是数据库中的字段，需要开启“关联文件数据”功能，可以参考最佳实践说明。开启后，系统会自动校验，若源数据表中字段和系统...
DB2数据源
增量数据同步的方式 DB2 Reader使用JDBC SELECT语句完成数据抽取工作，因此可以使用 SELECT…WHERE…进行增量数据抽取，方式如下：数据库在线应用写入数据库时，填充modify字段为更改时间戳，包括新增、更新、删除（逻辑删除）。...
算子级别诊断结果
如果分布字段的值分布不均匀，那么数据存储在各个节点上时也会不均匀，最终导致数据读取时，各个节点在读取数据时存在时间上的长尾，影响最终的查询效果。建议 通过选择合适的分布字段来减少表扫描数据量的倾斜。优化方法，请参见 分布字段...
索引、属性、字段作用详解
通俗说就是数据库的名字 字段 在es中索引创建完了之后，是类型，类型之后，是字段 通俗说就是某个表里面的属性的名称 属性 字段的类型（string、int、double.）字段的类型（string、int、double.）OpenSearch：名词 OpenSearch解释 与关系...
虚拟列
使用虚拟列功能时，您可以通过修改多元索引Schema或者新建多元索引来实现新字段新数据类型的查询功能，而无需修改表格存储的存储结构及数据。功能概述 虚拟列功能支持用户在创建多元索引的时候将表中一列映射到多元索引中的虚拟列。新的...
索引、属性、字段作用详解
通俗说就是数据库的名字 字段 在es中索引创建完了之后，是类型，类型之后，是字段 通俗说就是某个表里面的属性的名称 属性 字段的类型（string、int、double.）字段的类型（string、int、double.）OpenSearch：名词 OpenSearch解释 与关系...
数据表管理
更新从数据库导入的数据表 字段同步 当数据库中新增或删除有关列的字段后，通过 同步字段 功能，系统会自动检测数据库中的字段变更内容，并可根据实际业务需求选择是否对有关元数据做字段变更同步。具体操作如下：选择 知识中心>数据问答>...
新建字段标准通用信息
新建字段标准时需要为字段标准设置属性，如果默认属性不满足需要，可以为字段标准添加自定义属性。本文介绍如何新建字段标准通用信息。背景信息 可根据需要同时新建多个字段标准通用信息供新建字段标准时使用。新建的字段标准通用信息适用...
新建字段标准通用信息
新建字段标准时需要为字段标准设置属性，如果默认属性不满足需要，可以为字段标准添加自定义属性。本文介绍如何新建字段标准通用信息。背景信息 可根据需要同时新建多个字段标准通用信息供新建字段标准时使用。新建的字段标准通用信息适用...
配置数据识别规则
DataWorks支持通过内置敏感字段类型和自定义敏感字段类型，有效识别组织内的敏感数据。本文将为您介绍如何新建、配置数据识别规则。背景信息 DataWorks支持您按照数据的敏感级别和所属分类定义数据识别规则，帮助您识别组织内的敏感数据，...
查看审计日志
在日志服务控制台查看审计日志 日志服务存储了数据库审计系统审计到的数据库操作日志，在数据库审计系统查看到的审计日志来源是日志服务。您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的审计日志数据。...
删除有约束的列
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型。删除主键（PRIMARY KEY）约束下的列 如果删除的 主键列 中包含下表中的字段类型...
JSON解析
解析失败时保留原始字段 选中 解析失败时保留原始字段，则解析失败时，将保留原始字段。解析成功时保留原始字段 选中 解析成功时保留原始字段，则解析成功时，将保留原始字段。重命名的原始字段 选中 解析失败时保留原始字段 或 解析成功时...
新建及管理质量规则模板
说明 识别表达式支持使用函数，但需要注意执行时的数据库需要支持该函数。支持多个字段之间的业务逻辑的校验。如总销售额=单价*销售数量，校验总销售额是否出错可以用${total_sales}=${unit_price}*{sales_volume}。表达式中的${total_...
- 产品推荐
- 这些文档可能帮助您