从RDS MySQL数据库获取数据进行数据富化
time:1563436326 data:123 city:nanjing province:jiangsu 加工规则 根据指定的RDS MySQL数据库表中的字段值（例如 content 字段的值）去匹配日志字段，其中指定的RDS MySQL数据库表中的字段值为Key-Value形式，Key对应日志字段，Value为正...
名词解释
实例管理 名称 说明 实例 实例是用户的一套数据配置，包括数据源结构、索引结构及其它属性配置。一个实例即一个搜索服务。文档 文档是可搜索的结构化数据单元。文档包含一个或多个字段，但必须有主键字段，高性能检索版实例通过主键值来...
DMS分类分级扫描原理介绍
DMS分类分级扫描能够对数据库中的敏感数据进行检测，并自动为符合识别规则的字段打上相应的分类分级标签，还可以保护高敏感等级的字段，并将敏感字段直观地展示在识别结果中。本文介绍DMS敏感数据保护分类分级扫描功能的原理。原理介绍 DMS...
没有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段长度修改操作，MySQL 数据库...
名词解释
实例管理 名称 说明 实例 实例是用户的一套数据配置，包括数据源结构、索引结构及其它属性配置。一个实例即一个搜索服务。文档 文档是可搜索的结构化数据单元。文档包含一个或多个字段，但必须有主键字段，OpenSearch通过主键值来确定唯一...
CSV格式
无效字段内容 当 CSV字段 中指定的Key不存在时，投递此参数配置的内容。投递字段名称 打开 投递字段名称 开关后，将字段名称写入到CSV文件。OSS文件地址 投递到OSS后，OSS文件地址样例如下所示。压缩类型 文件后缀 OSS文件地址举例 说明 无...
数据源插件说明
OpenSearch中的数据，既支持通过API/SDK/上传界面的方式导入，也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据，可以参照API手册直接上传，不支持本文中的插件配置。如果选择同步云端数据的方式，则需要将数据源的...
数据表管理
更新从数据库导入的数据表 字段同步 当数据库中新增或删除有关列的字段后，通过 同步字段 功能，系统会自动检测数据库中的字段变更内容，并可根据实际业务需求选择是否对有关元数据做字段变更同步。具体操作如下：选择 知识中心>数据问答>...
错误码说明
单个文档过长，超出系统限制，推送失败 7503 json 插件对应的字段内容不是json.json插件字段内容不是JSON格式，推送失败，请检查后重试 7504 json插件字段内容对应的key不存在，推送失败 7505 TairLDB插件出错，TairLDBExtractor内容转换...
错误码说明
JSON插件字段内容不是JSON格式，推送失败，请检查后重试 7504 JSON插件字段内容对应的key不存在，推送失败 7505 TairLDB插件出错，TairLDBExtractor内容转换配置错误：Tair连接失败，请检查configId或namespace是否有效 7510 keyvalue插件...
没有约束的列修改长度
本文为您介绍 Oracle 数据库和 OceanBase 数据库 Oracle 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY DDL 对该列进行字段长度的修改操作，Oracle 数据库和 ...
活动对比控件
前提条件 创建活动数据集，活动数据集可以根据实际准备不同的字段内容。包括基础活动数据集以及高阶活动数据集两种。本文使用示例数据集字段如下（具体字段名称可自行定义）：基础活动数据集 字段名称 字段解释/业务场景 填写说明 camp_id ...
没有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段类型的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段类型修改操作，MySQL 数据库...
数据源插件说明
OpenSearch中的数据，既支持通过API/SDK/上传界面的方式导入，也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据，可以参照API手册直接上传，不支持本文中的插件配置。如果选择同步云端数据的方式，则需要将数据源的...
漏斗图
type+value：当 标注字段 选择 type+value 时，可自定义配置标注字段为 type+value 两个字段内容的前缀和后缀、可选择设置 value格式 样式为具体数值或占比样式以及数值或占比对应的格式样式。说明 当展示两个标签值时，可以打开 是否折行 ...
脱敏处理
脱敏方式 脱敏方式，包括：const：将敏感内容替换成您所修改的字符串。md5：将敏感内容替换为其对应的MD5值。替换字符串 选择 脱敏方式 为 const，需输入字符串，用于替换敏感内容。被替换内容前的内容表达式 敏感内容前的内容表达式，用于...
开启和使用冷数据分层存储
写入大对象数据，此时写入的text字段内容存储在OSS上 INSERT INTO test_large_object(val)VALUES((SELECT string_agg(random():text,':')FROM generate_series(1,10000)));说明 需要提前设置大对象字段的存储为OSS，之后写入的数据才会存入...
没有约束的列修改类型
本文为您介绍 Oracle 数据库和 OceanBase 数据库 Oracle 租户对于修改没有约束的列的字段类型的不兼容场景。说明 本文表格中，OceanBase 数据库 Oracle 租户允许执行修改一列是经过类型映射后的结果。本文表格中，短横线（-）表示没有、all...
多轮对话搜索
基于不同的数据来源和使用场景,数据字段内容会有差异，但索引构建的流程相似，下面以阿里云 OSS数据源为例介绍索引构建流程。字段名 字段名称,对采用OSS文件格式作为数据源的实例，字段名称跟离线数据解析结果字段对应，离线解析结果默认的...
结果编辑与导出
说明 如为大字段，默认按文本展示大字段内容，可切换至十六进制查看同时支持下载打字段内容至本地。BLOB 大对象 结果页签中：Oracle 模式下，CLOB，BLOB，RAW 支持直接编辑文本内容、编辑十六进制数据和上传文件（大小限制：文本 2 MB 内、...
配置FTP输入组件
选择 导出 则新增一个导出字段，字段内容为该行数据的来源sheet名称。文件编码 选择文件编码。系统支持的 文件编码 包括 UTF-8 和 GBK。压缩格式 如果文件有压缩，请选择对应的压缩格式，以便Dataphin进行解压处理。输出字段 为您展示输出...
配置FTP输入组件
选择 导出 则新增一个导出字段，字段内容为该行数据的来源sheet名称。文件编码 选择文件编码。系统支持的 文件编码 包括 UTF-8 和 GBK。压缩格式 如果文件有压缩，请选择对应的压缩格式，以便Dataphin进行解压处理。输出字段 为您展示输出...
数据消费格式
fields：递归说明当前字段包含的子字段内容。optional：该字段是否可选。数据消费示例 在Lindorm数据库中创建如下schema。CREATE TABLE customers(id varchar,first_name varchar,last_name varchar,constraint pk primary key(id))插入...
长文档信息抽取
提示建议：您需要校验「测试集」和「训练集」字段，各数据集字段内容需要保持一致。模型训练」配置环节支持选择字段对应的字段类型，或根据业务需求删除字段，以提高训练精准度。建议数据量越大，标注越精确，模型训练和评测的效果越好。...
长文档信息抽取
提示建议：您需要校验「测试集」和「训练集」字段，各数据集字段内容需要保持一致。模型训练」配置环节支持选择字段对应的字段类型，或根据业务需求删除字段，以提高训练精准度。建议数据量越大，标注越精确，模型训练和评测的效果越好。...
漏斗图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
单据票证信息抽取
提示建议：您需要校验「测试集」和「训练集」字段，各数据集字段内容需要保持一致。模型训练」配置环节支持选择字段对应的字段类型，或根据业务需求删除字段，以提高训练精准度。数据量越大，标注越精确，模型训练和评测的效果越好。配置...
单据票证信息抽取
提示建议：您需要校验「测试集」和「训练集」字段，各数据集字段内容需要保持一致。模型训练」配置环节支持选择字段对应的字段类型，或根据业务需求删除字段，以提高训练精准度。数据量越大，标注越精确，模型训练和评测的效果越好。配置...
离线同步读取MongoDB数据
本实践使用阿里云云数据库MongoDB作为示例。以下为准备MongoDB数据集合的主要代码示例。创建一个名称为 di_mongodb_conf_test 的数据集合。db.createCollection('di_mongodb_conf_test')向数据集合中插入本实践的示例数据。db.di_mongodb_...
向量索引最佳实践
配置数据源（目前支持的数据源有 MaxCompute数据源 和 API推送数据源）这里以MaxCompute数据源为例：点击“添加数据源”，数据源类型选择“MaxCompute”，设置project、accesskeyID、accesskeyId、accesskeySecret、Table、分组键partition...
宜搭创建大屏实操
本文主要介绍如何使用企业经营管理...返回配置页面，打开 数据 面板，您需要新增几个自定义列标签，并将 数据响应结果 中返回的多个字段内容复制粘贴到自定义列中对应标签的字段中。至此企业经营数据大屏的看板全部配置完成，效果展示如下图。
信息标签层（v3.x版本）
参数 说明 标题字段 设置标签的标题字段内容，需要与地理数据中的字段名称相匹配，默认为name字段。文本样式 设置标签标题内的文本样式，包括文本的字体样式、字号大小、颜色和文本粗细值。标题背景 设置标签主标题内的背景样式。背景颜色...
信息标签层（v4.x版本）
参数 说明 标题字段 设置标签的标题字段内容，需要与地理数据中的字段名称相匹配，默认为name字段。文本样式 设置标签标题内的文本样式，包括文本的字体样式、字号大小、颜色和文本粗细值。标题背景 设置标签主标题内的背景样式。背景颜色...
DataSource
{"connector":"-","sources":"id,title"} 结构 字段 类型 描述 connector String 连接符 sources String 指定的多个字段 HTMLTagRemover 剔除来源字段中的HTML标签，剔除标签后的内容复制到当前字段，源字段配置为当前字段则做内容替换。...
CSV格式
无效字段内容 当 CSV字段 中指定的日志字段不存在时，投递此参数中配置的内容。投递字段名称 打开 投递字段名称 开关后，将字段名称写入到CSV文件中。OSS文件地址 投递到OSS后，OSS文件地址样例如下所示。说明 在创建OSS投递任务时，如果您...
表格信息抽取
提示建议：您需要校验「测试集」和「训练集」字段，各数据集字段内容需要保持一致。模型训练」配置环节支持选择字段对应的字段类型，或根据业务需求删除字段，以提高训练精准度。建议数据量越大，标注越精确，模型训练和评测的效果越好。...
DataSource
{"connector":"-","sources":"id,title"} 结构 字段 类型 描述 connector String 连接符 sources String 指定的多个字段 HTMLTagRemover 剔除来源字段中的HTML标签，剔除标签后的内容复制到当前字段，源字段配置为当前字段则做内容替换。...
表格信息抽取
提示建议：您需要校验「测试集」和「训练集」字段，各数据集字段内容需要保持一致。模型训练」配置环节支持选择字段对应的字段类型，或根据业务需求删除字段，以提高训练精准度。建议数据量越大，标注越精确，模型训练和评测的效果越好。...
事件操作函数
原始日志_topic_:db_name:db-01 db_version:5.6_topic_:db_name:db-02 db_version:5.7 加工规则 e_output(name="target1",hash_key_field="db_version")加工结果#假设存储目标target1一共有2个Shard。Shard 0的范围...
标签层（v3.x版本）
参数 说明 标题字段 设置标签的标题字段内容，需要与地理数据中的字段名称相匹配，默认为name字段。文本样式 设置标签标题内的文本样式，包括文本的字体样式、字号大小、颜色和文本粗细值。标题背景 设置标签主标题内的背景样式。背景颜色...
- 产品推荐
- 这些文档可能帮助您