批量创建质量规则
当需批量配置对比字段，不同的表，字段不同，则基准表可提供快捷选择。基准表适用场景：若有相似或者相同需求的情况下，推荐使用批量配置；若是完全不同的需求，使用基准表在第三步校验时一定会报错。规则配置 规则配置因选择不同的规则...
批量创建质量规则
当需批量配置对比字段，不同的表，字段不同，则基准表可提供快捷选择。基准表适用场景：若有相似或者相同需求的情况下，推荐使用批量配置；若是完全不同的需求，使用基准表在第三步校验时一定会报错。规则配置 规则配置因选择不同的规则...
新建及管理质量规则模板
一致性 包括 单字段业务逻辑一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较、单表字段统计值一致性比较、跨源两表字段统计值一致性比较。及时性 包括 单表时间字段比较、两表时间字段比较、时间函数比较。自定义SQL ...
新建镜像表
系统支持SQL导入字段、批量导入字段和单行导入字段的方式，新建主表字段：SQL语句导入字段。单击 SQL导入字段。在 SQL导入 对话框，单击 参考示例，查看代码示例，编写导入字段的代码，代码示例如下。create table dwi_pub_hbd_cate_mtr...
新建镜像表
系统支持SQL导入字段、批量导入字段和单行导入字段的方式，新建主表字段：SQL语句导入字段。单击 SQL导入字段。在 SQL导入 对话框，单击 参考示例，查看代码示例，编写导入字段的代码，代码示例如下。create table dwi_pub_hbd_cate_mtr...
新建事实逻辑表
④ 批量操作 您可以批量选择表字段，进行 删除、编辑 数据类型、字段类别 和 字段约束 操作。单击 保存并下一步。为事实逻辑表引入字段 从表引入 在上述创建的事实逻辑表的配置页面，单击 从表引入。在 从表引入 对话框，选择 来源表 后，...
新建事实逻辑表
④ 批量操作 您可以批量选择表字段，进行 删除、编辑 数据类型、字段类别 和 字段约束 操作。单击 保存并下一步。为事实逻辑表引入字段 从表引入 在上述创建的事实逻辑表的配置页面，单击 从表引入。在 从表引入 对话框，选择 来源表 后，...
新建元表
步骤二：添加字段 Dataphin元表支持以下三种添加字段方式：通过SQL导入的方式添加字段 在实时元表页面，鼠标悬停至 添加字段 上，选择 SQL导入。在 SQL导入 对话框中，编写SQL代码：说明 Dataphin 将根据您的数据源类型提示对应的参考示例...
新建元表
步骤二：添加字段 Dataphin元表支持以下三种添加字段方式：通过SQL导入的方式添加字段 在实时元表页面，鼠标悬停至 添加字段 上，选择 SQL导入。在 SQL导入 对话框中，编写SQL代码：说明 Dataphin 将根据您的数据源类型提示对应的参考示例...
新建普通维度逻辑表
步骤二：配置普通维度逻辑表字段信息 在 表结构 配置页面配置当前普通维度逻辑表的表字段、数据类型、字段类别等结构信息。说明 单击逻辑表名称后的 图标，可查看逻辑表的基本信息。区域 描述 ① 表字段定位 单击可定位字段列表的 基本配置...
新建普通维度逻辑表
步骤二：配置普通维度逻辑表字段信息 在 表结构 配置页面配置当前普通维度逻辑表的表字段、数据类型、字段类别等结构信息。说明 单击逻辑表名称后的 图标，可查看逻辑表的基本信息。区域 描述 ① 表字段定位 单击可定位字段列表的 基本配置...
创建全域数据表质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
创建全域数据表质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
创建数据表质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
创建数据表质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
创建和管理自定义存储表
管理自定义存储表 重要 自定义存储表可应用于数据服务的多个功能，需注意以下几点：SQL分析任务的结果存储到自定义存储表时，自定义存储表的表结构字段已添加并保存。无数据输出的自定义存储表，仅可作为一个数据解析或SQL分析任务的输出...
文档更新动态（2023年）
新增说明 通知设置 逻辑表字段和业务限定运算符优化 逻辑表字段配置优化，可设置资产治理相关属性，如可为字段匹配词根、标准、设置字段是否唯一、是否为空和字段的安全分类。业务限定逻辑运算符优化，通过 与、或、非 三种逻辑运算符，...
功能更新动态（2023年）
新建和管理数据标准 新建和管理落标映射规则 已映射关系管理 无效映射关系管理 查看落标评估明细 资产质量 支持按照全局、项目、个人视角进行查看质量规则、校验记录、治理工作台、整改流程，并支持按照个人的权限控制个人所能查看的数据...
项目级别Information Schema
COLUMNS 描述项目空间下的表字段信息。字段 类型 值 table_catalog STRING 固定值 odps。table_schema STRING 项目名称。table_name STRING 表名。column_name STRING 列名。ordinal_position BIGINT 列序号。column_default STRING 字段...
创建逻辑模型：应用表
设置表字段信息 完成上述操作后，模型所需字段即已被添加至该模型中，此时您可以根据业务需求设置模型各字段的 关联字段、冗余字段、关联粒度/指标。设置字段属性。字段属性默认展示 字段名称、类型、字段显示名、描述、主键、非空、度量...
通过整库迁移配置集成任务
名称转化配置：非必选，名称转换配置可将您来源表的表名、字段名进行替换或过滤数据后进行同步。单击 名称转换配置。在 名称转换配置 页面，配置转换规则。表名转换规则：单击 新建规则，在规则项中填写 来源表待替换字符串 和 目标表替换...
风险识别管理（新版）
输入表名称的说明如下：单个表名不超过30个字符，输入的表名整体不超过100字符。支持使用*通配符。例如，*name 表示识别所有名称为 name 后缀的表数据。否。不配置默认识别所选项目空间中所有表的风险数据。字段名 输入识别规则限定的目标...
通过整库迁移配置集成任务
名称转化配置：非必选，名称转换配置可将您来源表的表名、字段名进行替换或过滤数据后进行同步。单击 名称转换配置。在 名称转换配置 页面，配置转换规则。表名转换规则：单击 新建规则，在规则项中填写 来源表待替换字符串 和 目标表替换...
创建逻辑模型：汇总表
设置表字段信息 完成上述操作后，模型所需字段即已被添加至该模型中，此时您可以根据业务需求设置模型各字段的 关联字段、冗余字段、关联粒度/指标。设置字段属性。字段属性默认展示 字段名称、类型、字段显示名、描述、主键、非空、度量...
创建指标质量规则
质量负责人、普通用户需要额外具备逻辑表字段的读取权限，如需申请，请参见 申请、续期和交还表权限。校验规则说明 指标参与质量规则校验时，如果触发了质量弱监控规则，系统会给您发送告警消息，便于您及时发现并处理异常；如果触发了质量...
SQL Server数据源
该驱动支持的SQL Server版本如下所示：版本 支持性（是/否）SQL Server 2016 是 SQL Server 2014 是 SQL Server 2012 是 PDW 2008R2 AU34 是 SQL Server 2008 R2 是 SQL Server 2008 是 SQL Server 2019 否 SQL Server 2018 否 Azure SQL ...
创建指标质量规则
质量负责人、普通用户需要额外具备逻辑表字段的读取权限，如需申请，请参见 申请、续期和交还表权限。校验规则说明 指标参与质量规则校验时，如果触发了质量弱监控规则，系统会给您发送告警消息，便于您及时发现并处理异常；如果触发了质量...
QuickBI仪表板图表为什么一选择日期查询条件后就报错...
问题原因 通过分析创建数据集的SQL，发现字符串字段与日期字段进行了混用，SQL中将一个字符串类型的字段作为SQL参数的日期来使用，如此的混用导致查询时报错。下面进行场景复现：使用如下SQL创建数据集：SELECT*FROM ONLINE_ODPS_PARTSTR_...
功能发布记录（2022年）
在血缘信息详情页面，您可以执行如下操作：可查看表或表字段的上下游节点。查看表原始数据来源及表数据最终流向。进行不同层级血缘的影响分析。2022.10.21 全部地域 所有DataWorks用户 查看表详情 DataWorks数据治理中心新增支持4种研发维...
通过脚本模式生成API
数据服务支持通过脚本模式或向导模式生成API，相对于向导模式，您可以自行编写API的查询SQL，支持多表关联、复杂查询和聚合函数等功能，满足您个性化查询需求。本文为您介绍如何通过脚本模式生成API。前提条件 配置API前，请先在 工作空间...
Oracle数据源
执行上述语句时，请替换 'tablename' 为实际需要查看的表名称。您也可以执行 select*from 'tablename';查询目标表的所有信息，获取数据类型。数据同步任务开发：Oracle同步流程引导 Oracle数据同步任务的配置入口和通用配置流程指导可参见...
HybridDB for MySQL数据源
表字段可以依序指定全部列、部分列、调整列顺序、指定常量字段和配置HybridDB for MySQL的函数，如now()等。支持的字段类型 HybridDB for MySQL Reader和HybridDB for MySQL Writer针对HybridDB for MySQL类型的转换列表，如下所示。类型...
数据开发与运行
支持针对节点、资源、函数进行批量操作，批量修改完成后，您可以批量提交，并在任务发布界面批量发布，让节点变更操作生产环境生效。如何在数据开发页面批量修改业务流程下节点使用的调度资源组？您可以在数据开发页面指定的业务流程名处，...
附录：消息格式
fileType Long 文件的代码类型，常用的代码类型包括：6（Shell）10（ODPS SQL）11（ODPS MR）23（数据集成）24（ODPS Script）99（虚拟节点）221（PyODPS 2）225（ODPS Spark）227（EMR Hive）228（EMR Spark）229（EMR Spark SQL）230...
Vertica数据源
是 无 column 所配置的表中需要同步的列名集合，使用JSON的数组描述字段信息。默认使用所有列配置，例如[*]。支持列裁剪，即列可以挑选部分列进行导出。支持列换序，即列可以不按照表schema信息顺序进行导出。支持常量配置。column 必须...
PostgreSQL数据源
是 无 column 所配置的表中需要同步的列名集合，使用JSON的数组描述字段信息。默认使用所有列配置，例如[*]。支持列裁剪，即列可以挑选部分列进行导出。支持列换序，即列可以不按照表schema信息顺序进行导出。支持常量配置，您需要按照...
通过向导模式生成API
详情请参见 查看、删除、移动、克隆、批量操作、代码搜索API 转换向导模式为脚本模式 您可以转换向导模式生成的API为脚本模式：在 服务开发 页面，展开目标API所在的 业务流程>API。双击相应的API名称，打开该API的编辑页面。单击工具栏中...
MariaDB数据源
是 无 column 所配置的表中需要同步的列名集合，使用JSON的数组描述字段信息。默认使用所有列配置，例如[*]。支持列裁剪：列可以挑选部分列进行导出。支持列换序：列可以不按照表schema信息顺序进行导出。支持常量配置：您需要按照MariaDB ...
SAP HANA数据源
支持的字段类型 SAP HANA Reader针对SAP HANA类型的转换列表，如下所示。类型分类 数据源的数据类型 整数类 INT、TINYINT、SMALLINT、MEDIUMINT和BIGINT 浮点类 FLOAT、DOUBLE和DECIMAL 字符串类 VARCHAR、CHAR、TINYTEXT、TEXT、...
KingbaseES（人大金仓）数据源
支持的字段类型 KingbaseES Reader针对KingbaseES类型的转换列表，如下所示。类型分类 数据源的数据类型 整数类 INT、TINYINT、SMALLINT、MEDIUMINT和BIGINT 浮点类 FLOAT、DOUBLE和DECIMAL 字符串类 VARCHAR、CHAR、TINYTEXT、TEXT、...
- 产品推荐
- 这些文档可能帮助您