配置数据识别规则
DataWorks支持通过内置敏感字段类型和自定义敏感字段类型，有效识别组织内的敏感数据。本文将为您介绍如何新建、配置数据识别规则。背景信息 DataWorks支持您按照数据的敏感级别和所属分类定义数据识别规则，帮助您识别组织内的敏感数据，...
属性设置器
属性配置示例：{ name:'text',title:'按钮文字',defaultValue:'按钮',setter:{ type:'text',props:{ },},},UI效果：配置参数：字段 类型 含义 备注 placeholder string 输入框的提示文字 模型和Props参数类型：string。number 配置一个静态...
新建查询控件
例如，下图中设置第二层级 省份 进行关联图表及字段时，同数据集的图表 柱图 和 饼图 的关联字段可以自动选入，非同数据集的图表 指标看板 的关联字段需要手动录入。移动端 树形下拉支持清空，您可以在移动端每一层点击清空按钮清空筛选...
配置本地文件输入组件
示例代码如下：{"textReaderConfig":{"caseSensitive":true,"useTextQualifier":false,"textQualifier":"\"","trimWhitespace":false } } 新建输出字段 新建输出字段：单击 新建输出字段。根据页面提示，配置 来源序号 和 字段，选择字段...
符号地图
在 字段标签 页，选择需要的 维度 字段和 度量 字段：地理信息支持通过 区域名称 和 经纬度 两种方式创建。若选择 区域名称，双击或拖拽 区域 至 区域名称/维度。若选择 经纬度，双击或拖拽 经度字段 和 纬度字段 至经纬度/维度；位置标签/...
表格填报
选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段类型，您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行 选择 新建表 您可以新建一张物理表，并自定义填写 表名、表字段名、...
FieldMatchWeighted
简介 计算查询词在指定字段上的匹配度。字段上命中的查询词越多，权重越高，匹配分数也越高。FieldMatchWeighted的分数由两部分组成，baseScore和bonusScore，计算公式可以简单表示为：(A*baseScore+bonusScore)/(A+1)。通过A来调节...
配置本地文件输入组件
示例代码如下：{"textReaderConfig":{"caseSensitive":true,"useTextQualifier":false,"textQualifier":"\"","trimWhitespace":false } } 新建输出字段 新建输出字段：单击 新建输出字段。根据页面提示，配置 来源序号 和 字段，选择字段...
配置Oracle输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行...
配置Oracle输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行...
FieldTermMatchCount
简介 计算字段中与查询词匹配的分词词组个数。例子：假设字段title分词之后为：fieldmatchratio使用手册，查询词分词后为：OpenSearch使用手册。那么字段title中匹配到的分词词组个数为2。函数列表 函数原型 函数简介 FieldTermMatchCount ...
数据转换
在使用统计图表进行格式化展示前，您可以通过数据转换对查询分析结果进行处理。例如合并多个查询分析结果、对查询分析结果进行分类等。注意 仅统计图表（Pro版本）支持设置数据转换。日志服务支持的统计图表（Pro版本），请参见 图表类型。...
日志设置与日志容量管理
开通日志服务后，您可以根据业务防护及分析需要，设置日志字段和存储类型，开启或关闭防护对象日志采集功能，修改日志存储时长，更有效地利用日志容量。您也可以实时查看日志容量，及时升级容量，避免日志数据无法写入专属日志库。本文介绍...
数据类型
配置索引 相关说明如下：IP 字段和 data 字段的值为JSON数组，所以您无法为 IP 字段和 data 字段建立索引，也无法通过这两个字段进行查询和分析。region 字段和 CreateTime 字段在JSON数组中，所以您无法为 region 字段和 CreateTime 字段...
日志设置与日志容量管理
开通日志服务后，您可以根据业务防护及分析需要，设置日志字段和存储类型，开启或关闭防护对象日志采集功能，修改日志存储时长，更有效地利用日志容量。您也可以实时查看日志容量，及时升级容量，避免日志数据无法写入专属日志库。本文介绍...
ModelScope魔搭社区
本文介绍如何通过 ModelScope魔搭社区 中的 多模态表征开源模型 进行 多模态向量生成，并入库至向量检索服务DashVector中进行向量检索。ModelScope魔搭社区 旨在打造下一代开源的模型即服务共享平台，为泛AI开发者提供灵活、易用、低成本的...
配置FTP输出组件
列分隔符用于分隔字段名与字段类型，默认英文逗号（,）新建输出字段：单击+新建输出字段，根据页面提示填写 字段 及选择 类型。同时您也可以对已添加的字段执行如下操作：单击 操作 列下的 图标，编辑已有的字段。单击 操作 列下的 图标，...
配置FTP输出组件
列分隔符用于分隔字段名与字段类型，默认英文逗号（,）新建输出字段：单击+新建输出字段，根据页面提示填写 字段 及选择 类型。同时您也可以对已添加的字段执行如下操作：单击 操作 列下的 图标，编辑已有的字段。单击 操作 列下的 图标，...
配置MaxCompute输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。快速映射 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行...
配置MaxCompute输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。快速映射 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行...
字段排序
本文介绍字段排序算子的使用方法和注意事项。用途 字段排序算子可以对节点的输出字段顺序进行调整。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 字段排序 通过拖拽的方式对字段...
复合查询控件
单击删除图标可删除该节点下对应的所有筛选字段和筛选关系。说明 一条链路上最多添加三层关系节点。单击 确定 完成复合查询配置。复合查询示例展示 文本查询 文本类型数据支持枚举筛选-单选、枚举筛选-多选、条件筛选三种筛选方式。单击 ...
字符串函数
本文介绍字符串函数的基本语法和示例。日志服务支持如下字符串函数。重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示字符串status，...
sort子句
子句说明 用户可以通过查询语句控制结果的排序方式，包括指定排序的字段和升降序。语法说明 排序子句格式为：+field1;field2 field为要排序的字段，+为按字段值升序排序，-为降序排序；field也支持简单的算术运算，如+、-、*、\等，但参与...
配置AnalyticDB for PostgreSQL输出组件
解析方案 解析方案用于自定义数据写入至AnalyticDB for PostgreSQL数据源前和数据写入至AnalyticDB for PostgreSQL数据源后的一些特殊处理。解析方案 包括 填写准备语句 和 填写完成语句：填写准备语句：导入前执行的SQL脚本。例如，数据...
TextRelevance
简介 计算查询词在指定索引和字段上的文本相关性。TextRelevance主要从下面几个维度衡量相关性：命中词在查询词中所占比重；命中词在字段中所占比重；命中词在字段中出现的频率；字段中命中词之间的顺序关系与查询词中命中词之间的顺序关系...
配置ClickHouse输出组件
解析方案 解析方案用于自定义数据写入至ClickHouse数据源前和数据写入至ClickHouse数据源后的一些特殊处理。解析方案 包括 填写准备语句 和 填写完成语句，适用场景说明如下：填写准备语句：导入前执行的SQL脚本。例如数据同步至ClickHouse...
数据建模
自定义SQL规则：单表自定义SQL：除了表和字段不支持的规则外的其他自定义SQL规则返回值和期望值做对比。说明 Select结果仅支持返回一行一列的值。多表自定义SQL：逻辑表和其他逻辑表的自定义SQL规则返回值进行运算和期望值做对比。（比如：...
配置TDH Inceptor输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。快速映射 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行...
新建和管理公共标准属性
取值约束 根据已选 属性字段类型 和 填写方式，可配置如下不同的取值约束：下拉单选/多选框：若属性字段取值为枚举类型，需要在此处通过取值约束配置可枚举范围，枚举项将生成对应的下拉选项值，创建数据标准时可以从下拉列表中选取此处...
新建和管理公共标准属性
取值约束 根据已选 属性字段类型 和 填写方式，可配置如下不同的取值约束：下拉单选/多选框：若属性字段取值为枚举类型，需要在此处通过取值约束配置可枚举范围，枚举项将生成对应的下拉选项值，创建数据标准时可以从下拉列表中选取此处...
配置AnalyticDB for PostgreSQL输出组件
解析方案 解析方案用于自定义数据写入至AnalyticDB for PostgreSQL数据源前和数据写入至AnalyticDB for PostgreSQL数据源后的一些特殊处理。解析方案 包括 填写准备语句 和 填写完成语句：填写准备语句：导入前执行的SQL脚本。例如，数据...
单元格填报
选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段类型，您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行。选择 新建表 您可以新建一张物理表，并自定义填写 表名、表字段名、...
配置数据计算和数据过滤
完成数据解析的源节点配置后，您可根据源节点的数据，配置字段和表达式，添加数据过滤的筛选器。通过解析生成多样化的数据，可用于后续分析或输出。前提条件 已配置源节点，具体操作，请参见 配置源节点。背景信息 数据解析功能说明，请...
配置ClickHouse输出组件
解析方案 解析方案用于自定义数据写入至ClickHouse数据源前和数据写入至ClickHouse数据源后的一些特殊处理。解析方案 包括 填写准备语句 和 填写完成语句，适用场景说明如下：填写准备语句：导入前执行的SQL脚本。例如数据同步至ClickHouse...
创建多元索引
参数 创建多元索引时，需要指定数据表名称（tableName）、多元索引名称（indexName）和索引的结构信息（schema），其中schema包含fieldSchemas（Index的所有字段的设置）、indexSetting（索引设置）和indexSort（索引预排序设置）。...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续的表加工和使用做基础。本文介绍如何手动新建逻辑表。前提条件 已新建目录，具体操作，请参见 新建模型目录。操作步骤 登录 数据资源平台...
结构设计
校验某些字段是否存在 保存编辑，校验字段 新增字段，禁止字段名为关键字 新增字段，字段必须填写备注 新增字段，限制字段名大小写 原有表新增非空字段必须明确指定默认值 原有字段，可空改为非空必须明确指定默认值 限制新增主键字段必须...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续的表加工和使用做基础。本文介绍如何手动新建逻辑表。前提条件 已新建目录，具体操作，请参见 新建模型目录。操作步骤 登录企业数据智能...
CreateLogtailPipelineConfig-创建Logtail流水线配置
说明 可分为原生处理插件和扩展处理插件，具体信息详见 处理插件概述。注意 原生插件仅可用于采集文本日志。不支持同时添加原生插件和扩展插件。使用原生插件时，须符合如下要求：第一个处理插件必须为正则解析插件、分隔符模式解析插件、...
- 产品推荐
- 这些文档可能帮助您