数据注册与字段配置
后面配置单维指标和衍生指标都依赖这个中间表。在具体讲 实验报表来源表之前，我们回顾一下实验的整体...字段配置 注册好的数据表会自动出现在列表中，您可以点击查看字段按钮查看数据表中的字段，对字段和相关信息进行核对或编辑。维度字段
创建多元索引
sourceFieldName（可选）：数据表中的字段名称，类型为String。当设置isVirtualField为true时，必须设置此参数。dateFormats（可选）：日期的格式，类型为String。当字段类型为Date时，必须设置此参数。更多信息，请参见 日期数据类型。...
MaxCompute表数据
主要包括：可根据业务需求在 切换字段 区域切换当前表中的字段，查看所选字段对应的字段血缘图。查看当前字段血缘关系中各节点的上下游节点个数。鼠标悬停至字段或任务类型，即可查看该字段或任务类型的基本信息、日志、代码等。在血缘图中...
创建多元索引
sourceFieldName（可选）：数据表中的字段名称，类型为String。当设置isVirtualField为true时，必须设置此参数。dateFormats（可选）：日期的格式，类型为String。当字段类型为Date时，必须设置此参数。更多信息，请参见 日期数据类型。...
OpenSearch数据源
例如，您需要导入的字段列表有b、c两个字段，但OpenSearch表中的字段有a、b、c三列，在列配置中可以写为"column":["c","b"]，表示会把Reader的第一列和第二列导入OpenSearch的c字段和b字段，而OpenSearch表中新插入的a字段会被置为默认值或...
数据类型映射
注意 表中的类型必须一一对应，否则数据会被当做脏数据丢弃，尤其是Geo-point和Nested拥有各自特定的格式。如果格式不匹配也会被当做脏数据丢弃，则会出现数据在表中能查询到，但是在多元索引中查询不到的情况。多元索引中字段数据类型 ...
空间关联
用途 空间关联算子可以将两张数据表中的几何字段根据指定的空间关系进行属性关联。适用场景 计算链路 计算引擎 是否支持 离线 PostgreSQL 是 Polar_PG 是 AnalyticDB PostgreSQL(ADB_PG)是 使用说明 来源节点 空间关联算子必须指定2个 来源...
新建事实逻辑表
缺联数据使用默认值代替：维表中的字段没有与事实逻辑表关联上，则使用默认值-110。编辑维度角色 角色英文名、角色名称 维度角色具有维度别名作用。多次引用同一维度时不可重名定义，起到角色扮演效果。您需要定义 角色英文名 和 角色名称...
新建事实逻辑表
缺联数据使用默认值代替：维表中的字段没有与事实逻辑表关联上，则使用默认值-110。编辑维度角色 角色英文名、角色名称 维度角色具有维度别名作用。多次引用同一维度时不可重名定义，起到角色扮演效果。您需要定义 角色英文名 和 角色名称...
虚拟服务（Virtual Service）CRD说明
当配置 HTTPMatchRequest 字段时，下表中的字段需至少配置一个。说明 如果根VirtualService已经通过正则表达式匹配了任何属性（路径、头部等），则委托的VirtualService不应在相同属性上有任何其他匹配项。如果委派的VirtualService已经...
新建普通维度逻辑表
缺联数据使用默认值代替：主表中的字段没有与维度逻辑表关联上，则使用默认值-110。编辑维度角色 角色英文名、角色名称 维度角色具有维度别名作用。多次引用同一维度时不可重名定义，起到角色扮演效果。您需要定义 角色英文名 和 角色名称...
新建普通维度逻辑表
缺联数据使用默认值代替：主表中的字段没有与维度逻辑表关联上，则使用默认值-110。编辑维度角色 角色英文名、角色名称 维度角色具有维度别名作用。多次引用同一维度时不可重名定义，起到角色扮演效果。您需要定义 角色英文名 和 角色名称...
新建离线物理表
使用限制 若您未购买 数据标准 模块，不支持设置表中的 数据标准 字段。若您未购买 资产安全 模块，不支持设置表中的 数据分级、数据分类 字段。若您未购买 资产质量 模块，不支持实现主键字段的 唯一 和 非空 校验。步骤一：离线物理表 在...
新建离线物理表
使用限制 若您未购买 数据标准 模块，不支持设置表中的 数据标准 字段。若您未购买 资产安全 模块，不支持设置表中的 数据分级、数据分类 字段。若您未购买 资产质量 模块，不支持实现主键字段的 唯一 和 非空 校验。步骤一：离线物理表 在...
配置Hologres输出组件
加载策略 向目标数据源（Hologres数据源）写入数据时，数据写入表中的策略。加载策略包括覆盖和忽略，适用场景说明如下：覆盖：写入的数据中有主键时新数据覆盖旧数据，无主键时追加数据。忽略：写入的数据中有主键时忽略新数据，无主键时...
配置逻辑表关联字段标准
说明 逻辑表对应字段关联数据标准中的值后，如果确认用标准字段的名称覆盖当前逻辑表字段的名称，则单击 确认 后，逻辑表中该字段的名称会自动更改为数据标准中对应的数据元、指标、或者维度的code值，例如：逻辑表中的手机号码原始字段...
配置逻辑表关联字段标准
说明 逻辑表对应字段关联数据标准中的值后，如果确认用标准字段的名称覆盖当前逻辑表字段的名称，则单击 确认 后，逻辑表中该字段的名称会自动更改为数据标准中对应的数据元、指标、或者维度的code值，例如：逻辑表中的手机号码原始字段...
配置Hologres输出组件
加载策略 向目标数据源（Hologres数据源）写入数据时，数据写入表中的策略。加载策略包括覆盖和忽略，适用场景说明如下：覆盖：写入的数据中有主键时新数据覆盖旧数据，无主键时追加数据。忽略：写入的数据中有主键时忽略新数据，无主键时...
配置SAP Table输入组件
如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：如果需要删除少量的字段，则可以单击 操作 列下的 图标，删除多余的字段。如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已...
配置SAP Table输入组件
如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：如果需要删除少量的字段，则可以单击 操作 列下的 图标，删除多余的字段。如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已...
配置ClickHouse输出组件
输入字段 展示从源表中读取的字段。输出字段 输出字段区域展示了已选中表及筛选条件命中的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：单个删除字段场景：按照下图操指引，删除单个字段。批量删除字段场景：...
数据准备快速入门
此时合并节点中的字段为数据输入1和数据输入2中，名称相同的字段。清洗加工 合并后的数据。从左侧的节点操作区，拖拽 清洗加工 至画布区。连接需要清洗加工的节点。在清洗加工节点配置区域，按照下图指引，配置字段筛选。按照下图指引，...
配置ClickHouse输出组件
输入字段 展示从源表中读取的字段。输出字段 输出字段区域展示了已选中表及筛选条件命中的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：单个删除字段场景：按照下图操指引，删除单个字段。批量删除字段场景：...
Kafka数据接入
record_value：表示以 Record Value 中的字段作为数据表的主键。kafka 主键列名配置 数据表的主键列名和对应的数据类型。支持string和Integer两种数据类型，表示从Record Key或Record Value中提取与配置的主键列名相同的字段作为数据表的...
配置Oracle输出组件
输入字段 展示从源表中读取的字段。输出字段 展示目标表的所有字段。如果不需要某些字段，则您可以删除对应的字段：如果需要删除少量的字段，则可以单击 操作 列下的 图标，删除多余的字段。如果需要删除大批量字段，则可以单击 字段管理，...
配置Oracle输出组件
输入字段 展示从源表中读取的字段。输出字段 展示目标表的所有字段。如果不需要某些字段，则您可以删除对应的字段：如果需要删除少量的字段，则可以单击 操作 列下的 图标，删除多余的字段。如果需要删除大批量字段，则可以单击 字段管理，...
Quick BI数据集的维度字段无法转换为度量
问题描述 Quick BI数据集的维度字段，在功能设置中，找不到“转换为度量”的功能选项。问题原因 通过新建计算字段生成的维度字段无法...直接使用数据源表中原始的字段即可直接使用转换为度量的功能将维度字段类型转换为度量。适用于 Quick BI
配置Hive输出组件
加载策略 向目标数据源（Hive数据源）写入数据时，数据写入表中的策略。加载策略包括 覆盖数据 和 追加数据，适用场景说明如下：覆盖数据：写入的数据中有主键时新数据覆盖旧数据，无主键时追加数据。追加数据：写入的数据中有主键时忽略新...
配置AnalyticDB for PostgreSQL输出组件
输入字段 展示从源表中读取的字段。输出字段 输出字段区域展示了已选中表及筛选条件命中的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：单个删除字段场景：按照下图操指引，删除单个字段。批量删除字段场景：...
创建多物理表服务单元
服务单元字段 配置业务数据的字段映射到服务单元中的字段名称，您可以根据业务情况自定义字段名称。命名规则如下：只能包含字母、数字和下划线（_）。以字母开头。长度在4~64个字符范围内。服务单元字段描述 填写对服务单元字段简单的描述...
配置目标节点
如果已选择自定义存储表已包含字段，输出字段必须是目标自定义存储表中存在的字段（字段定义一致），且包含目标自定义存储表中的主键。如果不满足以上要求，需返回目标节点之前的处理节点，修改输出字段符合目标自定义存储表中字段要求。...
配置AnalyticDB for PostgreSQL输出组件
输入字段 展示从源表中读取的字段。输出字段 输出字段区域展示了已选中表及筛选条件命中的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：单个删除字段场景：按照下图操指引，删除单个字段。批量删除字段场景：...
配置HDFS输出组件
加载策略 向目标数据源（HDFS数据源）写入数据时，数据写入表中的策略。加载策略包括覆盖数据和追加数据，适用场景说明如下：覆盖数据：覆盖数据策略下，先删除目标目录下的文件，再新增数据文件。追加数据：追加数据策略下，直接向目标...
配置数据识别规则
背景信息 DataWorks支持您按照数据的敏感级别和所属分类定义数据识别规则，帮助您识别组织内的敏感数据，对于识别结果不准确的数据，您可以 手动修正数据，并在 敏感数据概况 模块为您展示最近的通过数据识别规则命中的、按照项目细分的...
数据集成侧同步任务能力说明
说明 以业务数据库数据同步到MaxCompute数据仓库为例，当有大量的数据存储在数据库系统里，需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时，数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
查看并管理明细及汇总表实例
字段及批量操作 可对该明细及汇总表实例中的字段进行批量运维操作。更多信息，请参见 逻辑表字段及批量操作。查看生产链路 查看逻辑表实例中字段的物化链路及物化节点的字段组。更多信息，请参见 逻辑表字段及批量操作。查看消费链路 查看...
查看并管理明细及汇总表实例
字段及批量操作 可对该明细及汇总表实例中的字段进行批量运维操作。更多信息，请参见 逻辑表字段及批量操作。查看生产链路 查看逻辑表实例中字段的物化链路及物化节点的字段组。更多信息，请参见 逻辑表字段及批量操作。查看消费链路 查看...
数据规范
表中的记录和物品一一对应，主键 为物品的唯一标识，因此 主键 必须是唯一的。主键 的字段类型必须为 STRING。其他物品属性字段的字段类型按照数据需要定义即可。物品详情表应符合 数据表分区 规范，仅支持“依赖数据源产出新分区”调度...
自定义血缘配置
提示：血缘仅在配置任务提交和发布成功时更新，后续输入输出表结构变更不会自动触发血缘更新 根据业务需要选择对应表中的 指定字段。在 配置输出入表 页面，进行参数配置，操作完成后单击 确定。单击 确定，完成血缘的配置。输出表的配置和...
- 产品推荐
- 这些文档可能帮助您