设置逻辑表质量规则
数据元类：适用于选择的字段已关联了数据元后的规则。维度类：适用于选择的字段已关联了维度后的规则，包括字段长度和字段值类型的校验。规则类型 字段的质量规则类型。包括：空值率 唯一率 重复率 空值数量 最大值 最小值 唯一值 和重复值...
设置逻辑表质量规则
数据元类：适用于选择的字段已关联了数据元后的规则。维度类：适用于选择的字段已关联了维度后的规则，包括字段长度和字段值类型的校验。规则类型 字段的质量规则类型。包括：空值率 唯一率 重复率 空值数量 最大值 最小值 唯一值 和重复值...
功能简介
数据建模支持ER（Entity-Relationship）模型和维度模型两种数据建模方法，帮助用户完成数据模型、逻辑表的设计和...一致性：支持当前逻辑表和已物化物理表的字段一致性对比，支持当前逻辑表与数据开发所引用的节点中模型的字段一致性对比。
功能简介
数据建模支持ER（Entity-Relationship）模型和维度模型两种数据建模方法，帮助用户完成数据模型、逻辑表的设计和...一致性：支持当前逻辑表和已物化物理表的字段一致性对比，支持当前逻辑表与数据开发所引用的节点中模型的字段一致性对比。
自定义血缘配置
Dataphin支持自动解析SQL类型计算任务和逻辑表任务的血缘信息，针对非SQL类型的计算任务，支持自定义配置血缘信息，以...查看血缘 任务提交发布完成后，您可以在数据表详情页面查看自定义配置的表级和字段级血缘关系，详情请参见 物理表详情。
自定义血缘配置
Dataphin支持自动解析SQL类型计算任务和逻辑表任务的血缘信息，针对非SQL类型的计算任务，支持自定义配置血缘信息，以...查看血缘 任务提交发布完成后，您可以在数据表详情页面查看自定义配置的表级和字段级血缘关系，详情请参见 物理表详情。
配置TiDB输入组件
同步TiDB数据源的数据至其他数据源的场景中，您需要先配置TiDB输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置TiDB输入组件。前提条件 已创建TiDB数据源，如何创建，请参见 创建TiDB数据源。进行TiDB输入组件属性...
配置Impala输入组件
同步Impala数据源的数据至其他数据源的场景中，您需要先配置Impala输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Impala输入组件。前提条件 已创建Impala数据源，如何创建，请参见 创建Impala数据源 进行Impala...
配置TiDB输入组件
同步TiDB数据源的数据至其他数据源的场景中，您需要先配置TiDB输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置TiDB输入组件。前提条件 已创建TiDB数据源，如何创建，请参见 创建TiDB数据源。进行TiDB输入组件属性...
配置OpenGauss输入组件
同步OpenGauss数据源的数据至其他数据源的场景中，您需要先配置OpenGauss输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置OpenGauss输入组件。前提条件 已创建OpenGauss数据源，如何创建，请参见 创建OpenGauss...
配置OpenGauss输入组件
同步OpenGauss数据源的数据至其他数据源的场景中，您需要先配置OpenGauss输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置OpenGauss输入组件。前提条件 已创建OpenGauss数据源，如何创建，请参见 创建OpenGauss...
配置KingbaseES输入组件
同步KingbaseES数据源的数据至其他数据源的场景中，您需要先配置KingbaseES输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置KingbaseES输入组件。前提条件 已创建KingbaseES数据源，如何创建，请参见 创建...
配置GBase 8a输入组件
同步GBase 8a数据源的数据至其他数据源的场景中，您需要先配置GBase 8a输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置GBase 8a输入组件。前提条件 已创建GBase 8a数据源，如何创建，请参见 创建GBase 8a数据源。...
配置GBase 8a输入组件
同步GBase 8a数据源的数据至其他数据源的场景中，您需要先配置GBase 8a输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置GBase 8a输入组件。前提条件 已创建GBase 8a数据源，如何创建，请参见 创建GBase 8a数据源。...
配置GoldenDB输入组件
同步GoldenDB数据源的数据至其他数据源的场景中，您需要先配置GoldenDB输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置GoldenDB输入组件。前提条件 已创建GoldenDB数据源，如何创建，请参见 创建GoldenDB数据源。...
配置KingbaseES输入组件
同步KingbaseES数据源的数据至其他数据源的场景中，您需要先配置KingbaseES输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置KingbaseES输入组件。前提条件 已创建KingbaseES数据源，如何创建，请参见 创建...
配置StarRocks输入组件
同步StarRocks数据源的数据至其他数据源的场景中，您需要先配置StarRocks输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置StarRocks输入组件。前提条件 已创建StarRocks数据源，如何创建，请参见 创建StarRocks...
配置StarRocks输入组件
同步StarRocks数据源的数据至其他数据源的场景中，您需要先配置StarRocks输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置StarRocks输入组件。前提条件 已创建StarRocks数据源，如何创建，请参见 创建StarRocks...
导入数据至维表
创建完成维表后，您可以在维表中直接写入数据，也可以导入电子表格、本地CSV文件和Excel文件的数据至维表，为后续数据分析做准备。前提条件 已创建完成一个维表，详情请参见 创建维表。操作步骤 在 维表 页面，单击 全部维表 下相应的 文件...
DataSource
示例 {"key":"my_field"} 结构 字段 类型 描述 key String 键名 MultiValueSpliter 将来源字段按照分隔符分割成多个值，分割后的内容作为目标表字段的内容，目标表字段必须是配置为ARRAY类型的字段（若分隔符为不可见字符，需要使用unicode...
DataSource
示例 {"key":"my_field"} 结构 字段 类型 描述 key String 键名 MultiValueSpliter 将来源字段按照分隔符分割成多个值，分割后的内容作为目标表字段的内容，目标表字段必须是配置为ARRAY类型的字段（若分隔符为不可见字符，需要使用unicode...
多表连接
主表 多表连接算子中的 主表 是输入节点中的其中一个节点，主表的作用主要是提供连接的字段与其它节点进行连接操作。系统默认指定第一个输入节点为主表，用户可以自由将其它节点设置为主表。重要 如果已经配置了连接条件，重新设置主表将会...
索引、属性、字段作用详解
与开源ES的名词解释对比 由于 开放搜索 是阿里巴巴自主研发的大规模分布式搜索引擎平台，虽然有些名词与开源的Es叫法相同，但其作用却差距较大，这里做出如下对比：Es：名词 Es解释 与关系型数据库对比 索引 索引（index）是Elasticsearch...
物化视图和字段资产详情
[REFRESH-refresh_moment[DEFERRED]-refresh_scheme[ASYNC|ASYNC(START)EVERY(interval n day/hour/minute/second)]]最高涉密等级：为您展示该数据表的字段的敏感程度，数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）及自定义的数据...
多选
多选为基础控件，选项菜单中可选择多个数据，用于数据 选项较多 且需要同时选择多个值的场景。应用场景 多选 控件常用于数据选项较多的场景。例如 满意度调研表。效果图 控件配置 基础配置 配置项 描述说明 ①显示标题：选择是否显示下拉多...
单选
③表字段名：基于该数据填报创建的表里面的对应字段名称。说明 字段名或表名必须以字母开头，支持字母、数字、下划线（_），最大长度为40个字符。④描述信息：自定义控件的描述信息。⑤描述信息位置：设置描述信息的位置。可选项包括 控件...
FieldSchema
重要 字段名称必须与数据表中的字段名称相同。field_type FieldType 是 字段类型。更多信息，请参见 数据类型映射。重要 多元索引的字段类型必须与数据表中字段类型相匹配。analyzer string 否 分词器类型。默认值为单字分词。当字段类型为...
关联数据
如果自定义规则需要对固定的数据库对象生效，您可以通过新增对象组，直接在自定义规则中使用新增对象组。以下步骤介绍如何新增对象组。登录数据库审计系统。具体操作，请参见 登录数据库审计系统。在左侧导航栏，选择 规则配置>关联数据。...
逻辑表表达式
通过多个表达式，将表平均分配到指定的分库中：test_[1,3,6,8,9],test_[2,4,5,7,10]test_[1-9:2,10-20:2]数据库及枚举 规则 举例说明 数据库下创建相同的规则 db_[00-31].test_[[00-31]]：在32个数据库下，各创建test_[00-31]的表。...
创建索引
如果default_tablespace参数值是空字符串，那么使用数据库的缺省表空间。描述 create index命令用于在指定的表上创建一个索引。索引主要是用来提高数据库的性能。索引的关键字字段可以是列名，也可以是写在括号中的表达式。您可以指定多个...
数据源插件说明
OpenSearch中的数据，既支持通过API/SDK/上传界面的方式导入，也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据，可以参照API手册直接上传，不支持本文中的插件配置。如果选择同步云端数据的方式，则需要将数据源的...
下拉单选
③表字段名：基于该数据填报创建的表里面的对应字段名称。说明 字段名或表名必须以字母开头，支持字母、数字、下划线（_），最大长度为40个字符。④填写提示：设置控件输入时的 提示信息。例如 请选择客户类型。⑤描述信息：自定义控件的...
数据源插件说明
OpenSearch中的数据，既支持通过API/SDK/上传界面的方式导入，也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据，可以参照API手册直接上传，不支持本文中的插件配置。如果选择同步云端数据的方式，则需要将数据源的...
标签平台设置
Dataphin标签平台设置为使用标签模块功能的前提条件，包含时间字段设置及提供标签在线服务的服务数据源设置，其中时间字段设置包含标签表时间分区字段设置以及实时事件时间戳字段设置。标签表时间分区字段设置包含一、二、三级分区字段设置...
资源角色
数据管理DMS提供了4种资源角色，包括实例DBA、实例Owner、数据库Owner、表Owner。本文介绍各资源角色具有的权限。资源角色名 说明 权限 实例DBA 每个实例只能有一个DBA。系统角色为DBA、管理员的用户可以编辑调整实例DBA。可查看实例上每个...
多表合并
用途 多表合并算子可以将多张数据表按照设置的对齐字段进行数据合并。多表合并 算子是 两表并集 算子的高级版本，满足多张数据表合并的需求。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是...
配置DataWorks平台GDB Reader
本文为您介绍GDB Reader支持的数据类型、字段映射和数据源等参数及配置示例。说明 GDB Reader仅支持使用 独享数据集成资源组 和 自定义资源组。开始配置GDB Reader插件前，请首先配置好数据源，详情请参见 配置Graph Database数据源。由于...
数据建模
字段类型准确性校验 取表字段的字段类型元数据与期望的类型进行比较，符合规则则通过。标准字典值校验 对应分区，字段值与对应数据字典的值编码进行比较，字段值全部存在于字典的值编码中的，则规则通过。自定义SQL规则：单表自定义SQL：...
分布式序列
数据访问代理上的逻辑表，示例如下：dbp_sequence 的分表规则，示例如下：物理数据库中的表和内容示例如下：说明 表中内容是客户端运行 SQL 后自动创建的，其中 SQL 是用来获取 sequence 的。获取 sequence 的 SQL 代码，示例如下：注意...
配置离线数据集成节点
功能特性 不限制来源表和目标表数据库类型。支持字段映射，包含修改源表和目标表字段的命名和类型映射。可配置并发迁移数据。支持通过WHERE语句，对迁移数据进行预过滤。支持前置及后置SQL语句，在导入数据前后实现数据处理。使用限制 系统...
- 产品推荐
- 这些文档可能帮助您