数据脱敏
在数据集中设置需要脱敏的字段，系统将该字段中的敏感数据进行模糊化处理，使得该字段在仪表板、电子表格或自助取数中以脱敏的形式展示，保护数据安全。前提条件 已创建数据集，请参见 创建并管理数据集。脱敏规则及效果展示 说明 本文档仅...
图文解释
数据集字段 在数据集字段中选择需要标注的图片URL字段。（字段名可自定义）提示 默认提示区域无需修改。数据预处理 无需配置，不生效。接入方式 无需配置，不生效。卡片样式配置 无需配置，不生效。标注区（caption）（必选）标注区...
DataSource
示例 {"seperator":"|"} 结构 字段 类型 描述 seperator String 分隔符 KeyValueExtractor 从KV格式的来源字段中提取指定的键值，提取出来的键值作为目标表字段的内容，只能抽取某个key中的值。分隔符可以不填。示例 {"key":"my_field",...
SAP HANA数据源
splitPk HANA表中的某个字段作为同步的切分字段，切分字段有助于多并发同步HANA表。切分字段需要是数值整型的字段，如果没有该类型，则可以不填。Writer脚本Demo 脚本配置示例如下所示。{"type":"job","version":"2.0",/版本号。steps":[{...
DataSource
示例 {"seperator":"|"} 结构 字段 类型 描述 seperator String 分隔符 KeyValueExtractor 从KV格式的来源字段中提取指定的键值，提取出来的键值作为目标表字段的内容，只能抽取某个key中的值。分隔符可以不填。示例 {"key":"my_field",...
数组和嵌套类型
例如Long类型+数组后，即为数组长整型，该字段中可以包括多个长整型数字，查询数据时其中任何一个匹配都可以返回该行数据。多元索引的基本类型数组格式请参见下表。数组类型 说明 Long Array 长整型的数组形式，格式为“[1000,4,5555]”。...
新建离线物理表
从建表语句引入 在 从建表语句引入 对话框中，按照下图操作指引，输入建表语句后单击 解析SQL，在解析出的字段中勾选所需引入的字段，并单击 添加 进行引入。添加字段 添加字段方式支持添加 数据字段、分区字段、快捷添加日期分区 字段类型...
MongoDB数据导入
查询ObjectId字段 示例数据 在数据库 test_mongodb 中创建名为 test_objectid 的集合，示例如下：db.createCollection("test_objectid");向 test_objectid 集合中插入文档，示例如下：db.test_objectid.insert({ 'id':1,})查询 test_...
新建离线物理表
从建表语句引入 在 从建表语句引入 对话框中，按照下图操作指引，输入建表语句后单击 解析SQL，在解析出的字段中勾选所需引入的字段，并单击 添加 进行引入。添加字段 添加字段方式支持添加 数据字段、分区字段、快捷添加日期分区 字段类型...
数据标准概述
DataWorks数据建模支持在建模前规划制定数据标准，或在建模使用过程中根据业务情况沉淀企业业务的数据标准。通过规范约束标准代码、度量单位、字段标准、命名词典，来保障后续建模与应用过程中数据处理的一致性，从源头上保障数据的标准化...
filter子句
存到prices字段中。查询销售价小于1000的手机：query=default:'手机'&filter=multi_attr(price,2)示例 应用中有一个int32字段category，值分别为1（news），2（bbs）等，需要查询分类category为2（bbs）且包含"浙大"的文档：query=...
filter子句
存到prices字段中。查询销售价小于1000的手机：query=default:'手机'&filter=multi_attr(price,2)示例 应用中有一个int32字段category，值分别为1（news），2（bbs）等，需要查询分类category为2（bbs）且包含"浙大"的文档：query=...
结构设计
例如：某个结构设计工单发布到B数据库，则使用B实例的安全规则。基础配置项 结构设计有多个基础配置项：开启非对等发布：结构设计一直以来都只能对等发布，即A表的变更内容只能发布到另一个库的A表中。开启非对等发布后，允许用户打破表名...
创建索引或约束支持的字段类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于不同约束支持的字段类型不兼容的场景。主键（PRIMARY KEY）字段类型 通过 CREATE TABLE DDL 创建 PRIMARY KEY 时，MySQL 数据库和 OceanBase 数据库 MySQL 租户支持的字段类型...
过滤条件不下推
filter_not_pushdown_columns=[test01.table01:id|product]*/示例2：以3.1.4及以上的内核版本为例，当前查询，包含数据库 test01 的表 table01 中字段 id、product，数据库 test02 的表 table03 中字段 key 的过滤条件不会下推。...
宜搭创建大屏实操
本文主要介绍如何使用企业经营管理系统中客户库表及签约表表单数据，来创建并配置企业经营管理大屏。宜搭创建大屏实操视频，请参见：宜搭创建大屏实操视频。创建企业经营管理系统 操作步骤如下：登录宜搭系统，通过空白应用创建名称为 企业...
管理元数据
编辑元数据 重要 必填字段 中第一个必填字段不允许编辑。系统元数据不支持编辑操作。在 元数据注册 页面，单击需要编辑元数据所在行 操作 列下的 图标。在 编辑元数据 对话框提示，只支持字段的增删操作，其他参数不可编辑。添加元数据的...
CSV数据文件格式
本文介绍需要导入至图数据库GDB实例的CSV数据文件格式。背景信息 CSV数据文件遵循RFC 4180 CSV规范。更多信息，请参见 CSV文件的一般格式和MIME类型。重要 所有文件必须采用UTF-8格式编码。注意事项 必须将点和边分别放到单独的文件。说明 ...
管理元数据
编辑元数据 重要 必填字段 中第一个必填字段不允许编辑。系统元数据不支持编辑操作。在 元数据注册 页面，单击需要编辑元数据所在行 操作 列下的 图标。在 编辑元数据 对话框提示，只支持字段的增删操作，其他参数不可编辑。添加元数据的...
漏斗图
当某个数据项发生变化时抛出临时变量，默认抛出数据中的 type 和 value 字段。具体配置请参见 组件交互配置。当点击图例时 打开开关，开启组件交互功能。当单击某个图例时抛出临时变量，默认抛出数据中的 value 和 checked 字段。具体配置...
事件操作函数
原始日志_topic_:db_name:db-01 db_version:5.6_topic_:db_name:db-02 db_version:5.7 加工规则 e_output(name="target1",hash_key_field="db_version")加工结果#假设存储目标target1一共有2个Shard。Shard 0的范围...
数据源插件说明
OpenSearch中的数据，既支持通过API/SDK/上传界面的方式导入，也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据，可以参照API手册直接上传，不支持本文中的插件配置。如果选择同步云端数据的方式，则需要将数据源的...
数据源插件说明
OpenSearch中的数据，既支持通过API/SDK/上传界面的方式导入，也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据，可以参照API手册直接上传，不支持本文中的插件配置。如果选择同步云端数据的方式，则需要将数据源的...
有约束的列修改类型
主键（PRIMAEY KEY）约束下字段类型的修改 如果 主键 列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL，对该列进行字段类型修改操作，MySQL 数据库和 OceanBase 数据库 MySQL 租户的区别如下。MySQL 数据...
两表并集
快速合并 系统提供快速填充合并条件的辅助工具，点击快速合并按钮后，系统自动将两个输入节点相同的字段作为合并字段填写到合并字段中。输出字段 合并条件中的字段列表将自动作为当前节点的输出字段，输出到下游节点。去重合并 两表并集算...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置Teradata输入组件
使用限制 不支持读取Teradata数据库的视图。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Teradata数据源。具体操作，请参见 创建Tablestore数据源。进行Teradata输入组件属性配置的账号，需具备该数据源的同步读权限。如果...
飞线层
type 对应数据中的type字段，如果飞线类型的 type 与数据中type字段不一致时，飞线层会使用 默认颜色 进行渲染。数据源面板 字段 说明 from 飞线起始位置的经纬度，经纬度之间用半角逗号分隔。to 飞线终点位置的经纬度，经纬度之间用半角...
Dataphin表中存在字段，查询时报错没有该字段
问题描述 本文主要介绍如何解决Dataphin表中存在字段，查询时报错没有该字段。查询表字段存在使用的字段。查找该字段报错没有该字段。问题原因 该问题的原因是数据表在dataphin上元数据不同步导致。解决方案 在数据资产进行元数据的刷新。...
自定义表格模板
表格内参照字段以单元格为粒度 保证框选的参照字段中文字内容及单元格位置不变。仅支持中英文、数字、不可包含符号、图案。实在没有6个以上可框选的参照字段，怎么办？直接跳过框选参照字段步骤，底层算法模型将自行分析，但联合分类器使用...
自定义表格模板
表格内参照字段以单元格为粒度 保证框选的参照字段中文字内容及单元格位置不变。仅支持中英文、数字、不可包含符号、图案。实在没有6个以上可框选的参照字段，怎么办？直接跳过框选参照字段步骤，底层算法模型将自行分析，但联合分类器使用...
配置相邻消息计算
通过表达式或筛选器节点解析源节点数据后，可使用相邻消息计算节点，取当前消息的某个数值字段的值（仅支持BIGINT、DOUBLE类型）与前一条消息的相同数值字段的值，按照定义的表达式进行计算，将计算的结果输出到定义的输出字段上。...
配置MaxCompute输出组件
MaxCompute输出组件用于向MaxCompute数据源写入数据。同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后...例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成 MaxCompute 输出组件的属性配置。
配置MaxCompute输出组件
MaxCompute输出组件用于向MaxCompute数据源写入数据。同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后...例如，endpoint_type 字段对应的数据映射至 id 字段中。单击 确认，完成 MaxCompute 输出组件的属性配置。
配置Teradata输入组件
使用限制 不支持读取Teradata数据库的视图。操作步骤 请参见 配置离线单条管道，进入离线单条管道脚本的开发页面。按照下图指引，进入 Teradata输入配置 对话框。序号 说明 ① 单击 组件库。② 单击 输入。③ 拖动 Teradata 组件至左侧的...
配置ClickHouse输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时每条并发SQL语句...
QueryMatchRatio
计算查询词中在指定索引下所有字段上命中的词与总词组的比值 QueryMatchRatio create(OpsScorerInitParams params,CString indexName,CString fieldName)构造QueryMatchRatio，计算查询词中在指定索引下某个字段上命中的词与总词组的比值 ...
LOB大字段独立冷存
本文介绍如何将一张表中的某个LOB字段从基表中分离出来并转为冷存，同时访问透明，以达到单张表中按字段维度进行冷热分离。操作步骤 创建包含大字段的表。这里以text类型为例，其余类型大字段使用方法类似。db01=>CREATE TABLE blob_table...
有约束的列修改长度
主键（PRIMARY KEY）约束下字段长度的修改 如果 主键 列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段长度修改操作，MySQL 数据库和 OceanBase 数据库 MySQL 租户的区别如下。MySQL 数据...
- 产品推荐
- 这些文档可能帮助您