预处理规则管理
查看预处理规则详细信息 在预处理规则列表中，单击预处理规则名称链接，即可查看该预处理规则的详细信息，包括该预处理规则在各节点中的存储地址、预处理配置和关联的任务等信息。基本信息 在预处理规则的 基本信息 页签下，可以查看预处理...
新建通用模型
配置预处理组件（可选）可选，支持上传本地 GDP 预处理 组件。说明 您可以单击右侧的 样例下载，获取预处理组件的样例文件。离线特征 Schema 模型文件配置完成后单击 开始解析，进行离线特征 Schema 的解析。解析完毕后可获取 特征名称 ...
新增通用模型版本
配置预处理组件（可选）支持上传本地 GDP 预处理 组件。说明 您可以单击右侧的 样例下载，获取预处理组件的样例文件。离线特征 Schema 模型文件配置完成后单击 开始解析，进行离线特征 Schema 的解析。解析完毕后可获取 特征名称 列表及其...
数据编码与解码
表单配置方式 配置 处理器类型 为 BASE64（编码），相关参数说明如下表所示。参数 说明 原始字段 原始字段名。结果字段 编码后的结果字段名。原始字段缺失报错 选中该选项后，如果原始日志中无您所指定的原始字段，系统将报错。JSON配置...
丢弃字段
表单配置方式 参数说明 配置 处理器类型 为 丢弃字段，相关参数说明如下表所示。参数 说明 丢弃字段 指定待丢弃的字段，支持配置多个。配置示例 丢弃日志中的 aaa1 字段和 aaa2 字段，配置示例如下：原始日志"aaa1":"value1""aaa2":"value2...
添加字段
表单配置方式 参数说明 配置 处理器类型 为 添加字段，相关参数说明如下表所示。参数 说明 添加字段 待添加的字段名和字段值，支持添加多个。忽略重复字段 存在相同的字段名时，是否忽略重复的字段。配置示例 添加 aaa2 字段和aaa3字段，...
重命名字段
表单配置方式 参数配置 配置 处理器类型 为 重命名字段，相关参数说明如下表所示。参数 说明 原始字段 待重命名的原始字段。结果字段 重命名后的字段。原始字段缺失报错 选中该选项后，如果日志中无您所指定的原始字段，系统将报错。配置...
打包字段
表单配置方式 参数说明 配置 处理器类型 为 打包字段，相关参数说明如下表所示。参数 说明 原始字段 待打包的原始字段。结果字段 打包后的字段。保留原始字段 选中该选项后，解析后的日志中将保留原始字段。原始字段缺失报错 选中该选项后...
数据脱敏
表单配置方式 配置 处理器类型 为 数据脱敏，相关参数说明如下表所示。参数说明 参数 说明 原始字段 日志字段名称。脱敏方式 脱敏方式。可选值：字符串替换：将敏感内容替换为字符串。您可以通过 替换字符串 参数指定目标字符串。md5：将...
过滤日志
表单配置方式 参数说明 配置 处理器类型 为 正则过滤日志（匹配日志字段的值），相关参数说明如下表所示。说明 日志字段的值完全匹配 采集日志 中的正则表达式，且不匹配 丢弃日志 中的正则表达式时，日志才会被采集，否则直接丢弃。参数 ...
字段值映射处理
配置说明 表单配置方式 配置 处理器类型 为 字段值映射处理，相关参数说明如下表所示。参数 说明 原始字段 原始字段名。结果字段 映射后的结果字段名。映射字典 映射字典。设置键和值，将键映射到值上。映射字典较小时，可直接通过此参数...
字符串替换
表单配置方式 配置 处理器类型 为 字符串替换，相关参数说明如下表所示。参数 说明 原始字段 原始字段名。匹配方式 指定匹配方式。可选值：字符串匹配：通过字符串替换目标内容。正则匹配：通过正则表达式替换目标内容。去除转义符：去除...
Kafka实时入湖
数据预处理 Kafka实时入湖提供了数据预处理功能对Kafka数据在入湖前进行处理，目前需要用户自定义预处理算子实现。Kafka默认字段列表 在使用数据预处理功能之前，我们需要清楚Kafka入湖过程中目标schema包含哪些字段，字段列表如下。字段 ...
编辑脚本
脚本类型 输入配置 输出配置 创建联邦表 原始样本（多个）联邦表（一个或多个）预处理规则 联邦表（一个或多个）联邦表（一个或多个）预处理应用 联邦表（一个或多个）联邦预处理规则（一个）联邦表（一个或多个）模型开发 联邦表（一个或...
图文解释
单击选中 SAM分割预处理 后，在右侧 配置 区域配置具体参数。参数说明如下：参数 说明 标题 默认标题区域无需修改。数据集字段 在数据集字段中选择使用SAM分割的embedding字段，可以配置该字段来提升页面SAM分割工具的加载速度。如果不配置...
数据标注
并且我们可以通过预处理规则配置：去除url、去除emoji、大写转小写、繁体转简体，帮助我们处理文本里面的无用信息。在这里我们选择分类类型支持单选分类和多选分类，多选分类：每个题目，可以选择多个答案；单元分类：每个题目，只能选择...
联邦预处理
函数路径 fascia.biz.api.preprocessing.load_preprocessing_rule 函数定义 def load_preprocessing_rule(rule_desc)->List[PreprocessingRule]:请求参数 rule_desc：保存预处理信息后得到的预处理规则，对应输入配置里的预处理规则占位符...
矢量散点层（v3.x版本）
本文介绍矢量散点层各配置项的含义。图表样式 矢量散点层是基础平面地图 3.0的子组件，能够以矢量散点的形式表现地理位置上的点数据信息。矢量散点层支持独立的样式...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
自定义区域下钻层（v4.x版本）
本文介绍自定义区域下钻层各配置项的含义。图表样式 自定义区域下钻层是基础平面地图 4.0的子组件，可直接作为省或直辖市级、地市级自定义区域下钻层使用。...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
自定义区域下钻层（v3.x版本）
本文介绍自定义区域下钻层各配置项的含义。图表样式 自定义区域下钻层是基础平面地图 3.0的子组件，可直接作为省或直辖市级、地市级自定义区域下钻层使用。...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
符号聚合层（v3.x版本）
本文介绍符号聚合层各配置项的含义。图表样式 符号聚合层是基础平面地图 3.0的子组件，支持独立的样式和数据配置，包括符号的尺寸大小、颜色和标注等，能够以聚合...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
概述
全文索引允许文档被预处理并且保存一个索引用于以后快速的搜索。预处理包括：将文档解析成记号*。标识出多种类型的记号是有所帮助的，例如数字、词、复杂的词、电子邮件地址，这样它们可以被以不同的方式处理。原则上记号分类取决于相关的...
数据预处理
对于文本数据而言，通常文本数据里面会含有很多跟任务无关的噪音，这时应该进行文本的预处理。在NLP自学习平台内置了一些预处理规则，如果您觉得有必要进行预处理，可以选择这些规则。我们内置的规则包括：去除 URL 链接；去除 emoji 表情...
文本搜索配置最佳实践
文本搜索配置指定了将一个文档转换成一个 tsvector 所需的所有选项：用于把文本分解成记号的解析器，以及用于将每一个记号转换成词位的词典。每一次 to_tsvector 或 to_tsquery 的调用都需要一个文本搜索配置来执行其处理。配置参数 ...
读配置文件
组件截图 二、参数说明 参数名称 参数说明 选择配置文件 用户如果在本项目某个工作流中使用【数据预处理】或者【特征生成】类组件进行建模，运行成功之后，则可以在其他任务中选择配置文件。注意：建模文件的名称格式为${工作流名称}_${...
场景配置项说明
后期配置：三维城市构建器后期配置中 后处理 配置项内的参数样式。参数 说明 屏幕百分比 拖动滑块，调整后期屏幕百分比的值，取值范围为0.25~2。抗锯齿类型 后期样式中抗锯齿的类型，可选 taa 和 fxaa。taa抗锯齿 拖动滑块，调整taa抗锯齿...
模型加载器
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。更新数据 动态更新组件的数据配置，同时传入object类型的数据。组件销毁 销毁组件，不需要参数。显示组件 显示组件，不需要参数。隐藏组件 隐藏组件，不需要参数。...
萤石云播放器
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参考数据示例如下。return {...
锦鲤翻牌器列表
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参考数据示例如下。return {...
数字输入框
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参考数据示例如下。return {...
装饰条
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参考数据示例如下。return {...
导航菜单栏
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参考数据示例如下。return {...
RTMP视频流播放器
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参考数据示例如下。return {...
滑动范围选择器
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参考数据示例如下。return {...
单选框
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参见数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参见数据示例如下。return {...
地图容器
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"} 隐藏 隐藏组件，参考数据示例如下。return {...
单值百分比饼图
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return{"animationType":"","animationDuration":1000,"animationEasing":"linear"} 隐藏 隐藏组件，参考数据示例如下。return{...
双11气泡图
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return{"animationType":"","animationDuration":1000,"animationEasing":"linear"} 隐藏 隐藏组件，参考数据示例如下。return{...
阿里云流播放器
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return {"animationType":"","animationDuration":1000,"animationEasing":"linear"};隐藏 隐藏组件，参考数据示例如下。return {...
词云（v1.x版本）
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。显示 显示组件，参考数据示例如下。return{"animationType":"","animationDuration":1000,"animationEasing":"linear"} 隐藏 隐藏组件，参考数据示例如下。return{...
- 产品推荐
- 这些文档可能帮助您