产品名称 Quick BI 产品模块 平台管理 概述 本文通过介绍群空间和个人空间的偏好设置的配置方式,设置数据集的字段名的展示类型。问题描述 数据库的建表语句已经给字段加了备注名称,希望创建数据集时,可以直接用该备注名称作为字段名 ...
将原始字段名作为展开字段名前缀 选中该选项后,系统会将原始字段名作为所有JSON展开字段名的前缀。解析失败保留原始日志 选中该选项后,如果解析日志失败,系统将保留原始日志。配置示例 对 s_key 字段进行JSON展开,并使用 j 和原始字段...
参数 说明 添加字段 待添加的字段名和字段值,支持添加多个。忽略重复字段 存在相同的字段名时,是否忽略重复的字段。配置示例 添加 aaa2 字段和 aaa3 字段,配置示例如下:原始日志"aaa1":"value1"Logtail插件处理配置 处理结果"aaa1":...
参数 说明 CSV字段 您可以在日志服务的 原始日志 页签中查看日志字段的Key,将您需要投递到OSS的字段名(Key)有序填入。除了日志内容的Key和Value外,日志服务还提供保留字段_time_、_topic_、_source_,保留字段更多信息,请参见 保留...
如果是字段索引,long类型和double类型的字段名不计入在索引流量中。使用字段索引,可降低索引流量费用。例如:对 request_uri 字段设置了索引(text类型),字段值为/request/path-2/file-7,则字符串 request_uri 和/request/path-2/file...
default 任意 否 指定的字段名不存在时,返回default的值。默认值为 None。返回结果 返回日志中第一个存在的字段值。不存在时返回 default 参数的值。函数示例 将content字段的值赋给test_content字段。原始日志 content:hello 加工规则 e_...
DestKey String 否 映射后的字段名。HandleMissing Boolean 否 当原始日志中缺失目标字段时,系统是否处理。true:处理。系统将按照 Missing 参数中的值进行填充。false(默认值):不处理。Missing String 否 处理原始日志中缺失的目标...
示例的字段名或枚举值,如果没有特殊说明,均为大小写敏感。目前GDB服务端仅支持UTF-8编码格式,导出的数据均为UTF-8编码格式。由于网络限制,运行数据集成任务时,只能使用 独享资源模式。参数说明 参数 描述 是否必选 默认值 datasource ...
分隔符提取 e_csv、e_psv、e_tsv 使用自定义的分隔符与预定义的字段名,从特定字段中提取多个字段。e_csv:默认分隔符为半角逗号(,)。e_psv:默认分隔符为竖线(|)。e_tsv:默认分隔符为\t。支持和其他函数组合使用。相关示例,请参见 ...
'GetLogs'-保留method status:'200' 场景2:新产生数据字段冲突:为了避免歧义,对于SPL指令中产生的明确的新字段名,此类指令包括 extend 的字段名和 parse-regexp、parse-csv 中 as 明确指定的字段名,SPL的输出结果仍会保持新字段名大...
选择 已有表 为对应的 控件 选择写入的 表字段名,将自动匹配表字段名的 字段描述、字段类型,您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行。选择 新建表 您可以新建一张物理表,并自定义填写 表名、表字段名、...
字段命名规范 字段默认使用源系统的字段名。字段名与MaxCompute关键字冲突时,在源字段名后加上 col,即 源字段名col。MaxCompute关键字详情请参见 保留字与关键字。同步任务命名规范 任务名:{源系统表名}[delta]。说明 同一Project下异库...
前提条件 本文需要操作使用桌面版开发工具,详情请参见开发工具使用...说明 container 中的字段名要和 package.json 文件中的字段名保持一致。this.container.show();显示代码,开发者自定义 this.container.hide();隐藏代码,开发者自定义
是否输出字段名 选择 是,将以上游组件的字段名作为输出文件的首行内容;选择 否,不输出字段名。字段映射 输入字段 展示上游的输入字段。输出字段 为您展示输出字段。您可以手动添加输出字段:单击 批量添加。以JSON格式批量配置,例如,...
参数 说明 Key名称 您可以在 原始日志 页签中查看日志字段,将需要投递到OSS的字段名有序填入。OSS投递任务将按照此顺序组织ORC数据,并使用该字段名作为ORC数据的列名。日志服务还提供保留字段_time_、_topic_、_source_。保留字段的更多...
本章节介绍对于导入Quick Audience的用户标签表的数据要求。说明 由于您存储原始数据的 计算源 类型为MaxCompute,Quick Audience使用的 分析...说明 所有字段的字段名均可自定义。user_id是表的主键,每个user_id仅有一条记录。支持分区表。
参数 说明 CSV字段 在 原始日志 页签中查看日志字段,将需要投递到OSS的字段名有序填入。日志服务还提供保留字段_time_、_topic_、_source_等。保留字段的更多信息,请参见 保留字段。说明 同一个日志字段在 CSV字段 中只能配置一次,不...
本文档示例为开发者的自定义组件提供功能开发的参考,主要介绍三个蓝图...说明 container 中的字段名要和 package.json 文件中的字段名保持一致。this.container.show();显示代码,开发者自定义 this.container.hide();隐藏代码,开发者自定义
default 默认值 array 否 对象数组,对象的属性应与 child 字段中定义的字段名一致。child 对象名 object 否 请将该字段内的 type 设置为 object。child.child 对象属性 object 否 定义对象属性及其默认值。重要 数据系列的 default 值必须...
如果未对示例的字段名或枚举值进行特别说明,请注意大小写敏感。GDB服务端仅支持UTF-8编码格式,导出的数据均为UTF-8编码格式。GDB需要升级至1.0.20或更高版本才支持SET属性。使用SET属性时,请确认实例的版本。必须先运行点的同步任务,...
此时两个表中包含的会员ID均是同一内容,但是使用了两种不同的字段名进行描述,字段出现了歧义便需要人工介入理解进行确认。解决方法如下:我们可通过DataWorks数据建模创建新的字段标准,预先在模型中定义会员ID标准,然后在创建注册表和...
如果需要的字段超出范围,则可以 自定义字段,单击 新建字段,并填写以下信息:字段名称:系统入参的字段名。为防止与系统默认字段冲突,自带DE前缀(不需要输入)。建议取有业务含义的名称,例如:DEorderId。字段显示名:字段在决策引擎...
default 默认值 array 否 对象数组,对象的属性应与 child 字段中定义的字段名一致。child 对象名 object 否 请将该字段内的 type 设置为 object。child.child 对象属性 object 否 定义对象属性及其默认值。注意 数据系列的 default 值必须...
选择 已有表 为对应的 控件 选择写入的 表字段名,将自动匹配表字段名的 字段描述、字段类型,您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行 选择 新建表 您可以新建一张物理表,并自定义填写 表名、表字段名、...
说明 所有字段的字段名均可自定义。user_id、user_id_2等属于用户ID字段,可用于营销、推送等。ID类型支持OneID、UnionID、手机号码、电子邮箱、淘宝ID、淘宝昵称、淘宝OUID、支付宝ID、微博ID、IMEI、IDFA、IMSI、OAID、MAC地址、OpenID,...
选择 已有表 为对应的 控件 选择写入的 表字段名,将自动匹配表字段名的 字段描述、字段类型,您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行。选择 新建表 您可以新建一张物理表,并自定义填写 表名、表字段名、...
日志提取字段 为提取的日志内容(Value),设置对应的字段名(Key)。解析失败时保留原始字段 选中 解析失败时保留原始字段,则解析失败时,将保留原始字段。解析成功时保留原始字段 选中 解析成功时保留原始字段,则解析成功时,将保留...
若您需要在Kafka使用字段的别名,选择某个字段用于推送后,可以修改该字段的字段名映射。默认映射为原字段名,修改后,推送到Kafka的字段名将为新的字段名映射,非原字段名。说明 推送的ID字段、标签字段必须来自于受众来源的用户标签数据...
参数 说明 Key名称 您可以在 原始日志 页签中查看日志字段,将需要投递到OSS的字段名有序填入。OSS投递任务将按照此顺序组织Parquet数据,并使用该字段名作为Parquet数据的列名。日志服务还提供保留字段_time_、_topic_、_source_。保留...
fieldName—待匹配的字段名,该字段需要为TEXT或者SHORT_TEXT,必须是常量。QueryMinSlideWindow create(OpsScorerInitParams params,CString indexName,CString fieldName,boolean inOrder)构造QueryMinSlideWindow对象,计算查询词在某个...
场景示例:在 输出模式 选择 多行输出 情况下,将先根据数组所在位置路径指定的JSON路径解析出JSON数组,然后取出JSON数组中的每一个JSON对象,再根据定义的字段名和取值方式解析组成输出字段,取值方式的定义与单行输出模式一样,可以通过...
示例的字段名或枚举值,如果没有特殊说明,均为大小写敏感。目前GDB服务端仅支持UTF-8编码格式,要求来源数据均为UTF-8编码格式。由于网络限制,运行数据集成任务时,只能使用 独享资源模式。参数说明 参数 描述 是否必选 默认值 ...
提取的字段名必须满足字符条件,否则会被丢弃。不支持正则表达式 u'_*[\u4e00-\u9fa5\u0800-\u4e00a-zA-Z][\u4e00-\u9fa5\u0800-\u4e00\\w\\.\\-]*'。例如 123=abc_1_:100 1k=200 {"123":"456"} 等字段名会被丢弃。示例:使用默认的字段...
已有CSV文件,如果需要追加或替换Excel文件中的某个Sheet下的数据时,只要保持新数据文件的字段名和字段数据类型与历史上传数据文件的字段名和字段数据类型一致即可。在完成第一次的业务数据文件上传后,新追加或替换的文件字段顺序及数据...
SubstringBefore(idpUser.email,"@")使用 AD UPN 前缀:SubstringBefore(idpUser.userPrincipalName,"@")使用固定值:Trim("myString")说明 IDaaS 表达式中的字段格式为“idp”+“User/OrganizationUnit”+“.”+“身份提供方中的字段名”...
若您需要在Kafka使用标签的别名,选择某个标签用于推送后,可以修改该标签的字段名映射。默认映射为原字段名,修改后,推送到Kafka的字段名将为新的字段名映射,非原字段名。说明 最多可选择30个标签,可选标签均来自于人群来源的用户标签...
函数格式 e_has("key")参数说明 参数名称 参数类型 是否必填 说明 key String 是 日志的字段名。返回结果 字段存在返回True,不存在返回False。函数示例 判断日志是否存在content字段,存在则保留,不存在则丢弃。原始日志 content:123 ...
全量文档格式 向量检索版目前只支持MaxCompute全量数据源,schema中配置的字段名要和MaxCompute中的字段名相同。对于多值字段,在MaxCompute中的内容需要使用多值分隔符'\x1D'('^]')进行分割。MaxCompute中的数据不需要执行cmd,全量时...
全量文档格式 召回引擎版目前只支持MaxCompute全量数据源,schema中配置的字段名要和MaxCompute中的字段名相同。对于多值字段,在MaxCompute中的内容需要使用多值分隔符'\x1D'('^]')进行分割。MaxCompute中的数据不需要执行cmd,全量时...
字段名较多,事先无法获取具体的字段名,无法建立字段索引。字段类型发生变化,无法查询。针对上述问题,日志服务推出扫描查询和扫描分析功能,用于查询和分析日志,无需对扫描的目标字段建立索引。关于扫描查询的更多信息,请参见 扫描...