功能更新动态（2023年）
编辑器代码提效 新建离线物理表 数据源 针对 MySQL、PolarDB-x、PolarDB、AnalyticDB for MySQL、AnalyticDB for PostgreSQL、TiDB、GoldenDB、StarRocks、PostgreSQL、GreenPlum、SQL Server、Vertica、SAP Hana、DB2、OceanBase、...
元表和字段资产详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
元表和字段资产详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
ST_ImportOSGB
将基于对象存储的倾斜摄影项目（OSGB格式）导入到数据库中。语法 boolean ST_ImportOSGB(cstring table_name,cstring url,cstring options default '{}');参数 参数名称 描述 table_name osg表名及其瓦片表前缀。url 基于对象存储服务的...
ST_ImportOSGB
将基于对象存储的倾斜摄影项目（OSGB格式）导入到数据库中。语法 boolean ST_ImportOSGB(cstring table_name,cstring url,cstring options default '{}');参数 参数名称 描述 table_name osg表名及其瓦片表前缀。url 基于对象存储服务的...
新建普通维度逻辑表
详细说明，请参见 配置逻辑表数据延迟。调度属性 用于定义维度逻辑表在生产环境的调度方式。您可以通过调度属性，配置维度逻辑表的调度类型、调度周期、调度逻辑与执行等等。详情说明，请参见：配置逻辑表调度属性。上游依赖 用于定义逻辑...
镜像表和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
镜像表和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
新建普通维度逻辑表
详细说明，请参见 配置逻辑表数据延迟。调度属性 用于定义维度逻辑表在生产环境的调度方式。您可以通过调度属性，配置维度逻辑表的调度类型、调度周期、调度逻辑与执行等等。详情说明，请参见：配置逻辑表调度属性。上游依赖 用于定义逻辑...
功能发布记录（2022年）
查看表原始数据来源及表数据最终流向。进行不同层级血缘的影响分析。2022.10.21 全部地域 所有DataWorks用户 查看表详情 DataWorks数据治理中心新增支持4种研发维检查项 DataWorks数据治理中心新增4种检查项：JOIN关联条件类型一致性。部分...
ST_As3dTiles
[table_name]_tile：瓦片表，存储该项目所有的瓦片数据。[table_name]_tileset：tileset.json 表，存储该项目对应的 tileset.json 信息。[table_name]表结构如下：字段 类型 说明 备注 project_id uuid 项目ID。自动生成。project_name ...
ST_As3dTiles
[table_name]_tile：瓦片表，存储该项目所有的瓦片数据。[table_name]_tileset：tileset.json 表，存储该项目对应的 tileset.json 信息。[table_name]表结构如下：字段 类型 说明 备注 project_id uuid 项目ID。自动生成。project_name ...
新建事实逻辑表
详细说明，请参见 配置逻辑表数据延迟。调度属性 用于定义事实逻辑表在生产环境的调度方式。您可以通过调度属性，配置事实逻辑表的调度类型、调度周期、调度逻辑与执行等等。详情说明，请参见：配置逻辑表调度属性。上游依赖 用于定义逻辑...
新建事实逻辑表
详细说明，请参见 配置逻辑表数据延迟。调度属性 用于定义事实逻辑表在生产环境的调度方式。您可以通过调度属性，配置事实逻辑表的调度类型、调度周期、调度逻辑与执行等等。详情说明，请参见：配置逻辑表调度属性。上游依赖 用于定义逻辑...
2021年
2021-10-28 全部地域 增强：查询结果缓存机制 MaxCompute集成观远数据（GuanData）BI工具（商业化）发布 MaxCompute集成GuanData无缝对接，支持GuanData对MaxCompute直连场景下BI分析的查询加速，和抽数据场景下对MaxCompute全表数据读取。...
MaxCompute湖仓一体
创建MaxCompute计算源并绑定到Dataphin项目中后，规范建模可基于外部项目中的来源表创建逻辑表，MaxCompute SQL任务可用映射的内部项目的计算资源来执行，并支持读写外部项目中的表数据。查看湖仓一体的元数据信息及进行权限管控 支持查看...
MaxCompute湖仓一体
创建MaxCompute计算源并绑定到Dataphin项目中后，规范建模可基于外部项目中的来源表创建逻辑表，MaxCompute SQL任务可用映射的内部项目的计算资源来执行，并支持读写外部项目中的表数据。查看湖仓一体的元数据信息及进行权限管控 支持查看...
核心概念
本文为您介绍Dataphin中，业务板块、数据域、项目、维度、业务过程、维度逻辑表、事实逻辑表、原子指标等基本概念。数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时，您可以...
文档更新动态（2022年）
更新说明 管理动态脱敏规则、项目安全策略、脱敏算法、密钥管理 2022年10月25日 数据表质量规则和质量规则模块升级 支持多种数据源表的质量监控，支持数据源连通性及表结构异动性监控。内置丰富的质量规则模板。资产报告升级，可从资源粒度...
文档修订记录
最佳实践 新增DataWorks大数据安全治理实践新增指南，为您介绍数据安全治理的常见思路、DataWorks产品的安全能力，以及在DataWorks上基于“基础防护建设”、“数据安全防护措施”、“数据安全持续运营”三个阶段落地数据安全治理项目的最佳...
StarRocks物理视图和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
MaxCompute物理视图和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
资源分析
总表数：全局数据表总数，包括开发和生产两类项目中的逻辑表和物理表。项目数：全局项目总数，包括生产和开发两类项目。开发者数：Dataphin成员列表中成员数量的总和。数据回流表：以计算引擎源为数据来源，以物理数据源（业务）为目标的...
逻辑结构说明
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
Hologres外部表
表数据如下：已准备好待创建Hologres外部表的目标MaxCompute项目。创建MaxCompute项目信息，请参见 创建MaxCompute项目。已安装MaxCompute客户端。更多安装MaxCompute客户端操作，请参见 安装并配置MaxCompute客户端。使用限制 Hologres...
逻辑视图和字段资产详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
逻辑视图和字段资产详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
MaxCompute/Hadoop物理视图和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
配置 FL 项目
当您成功创建 FL 项目或者受邀参与 FL 项目后，可以进入项目配置阶段。您可以根据业务需求对项目中的节点、数据和成员进行配置，只有成功配置项目后，才可以进入项目开发阶段。本文介绍在管理控制台中，配置 FL 项目的操作步骤。前提条件 ...
跨阿里云账号同步RDS MySQL实例
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
数据表-数据概况
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小，分区文件数，分区最后更新时间等...
新增数据表
数据表是项目中的原始数据，可通过数据校验和数据授权后，被项目的控制台作为离线样本使用。当您新建表结构模板后，可基于新建的表结构模板新增数据表。本文介绍通过管理控制台新增数据表的方法。前置准备 在添加数据表前，需确保您已完成...
资源分析
总表数：全局数据表总数，包括开发和生产两类项目中的逻辑表和物理表。项目数：全局项目总数，包括生产和开发两类项目。开发者数：Dataphin成员列表中成员数量的总和。数据回流表：以计算引擎源为数据来源，以物理数据源（业务）为目标的...
MaxCompute+DLF+OSS湖仓一体的湖查询和湖数据入仓实践
返回结果：ALIYUN$@aliyun.com:nation_orcnation_orc ALIYUN$@aliyun.com:partsupp_orcpartsupp_orc ALIYUN$@aliyun.com:supplier_orcsupplier_orc 在DataWorks临时查询页面，查询External Project中的表数据。命令示例：SELECT ps_partkey...
用户角色和权限
质量管理员 拥有创建数据表、数据源等资源的质量规则的权限，查看生成的数据质量报告。板块角色 板块架构师 拥有业务板块信息设置，包括基本信息更新、业务信息更新等权限。业务负责人 当前没有实质性的操作权限。负责业务板块数据的业务...
用户角色和权限
质量管理员 拥有创建数据表、数据源等资源的质量规则的权限，查看生成的数据质量报告。板块角色 板块架构师 拥有业务板块信息设置，包括基本信息更新、业务信息更新等权限。业务负责人 当前没有实质性的操作权限。负责业务板块数据的业务...
数据膨胀诊断
该方式的优缺点如下：优点：重新整理表数据，让表变成更紧凑，能减小之前由于Dead Tuple造成的表磁盘大小膨胀，可以减小磁盘上表的大小。缺点：重新整理表的Page储存时，需要ACCESS EXCLUSIVE锁模式。该模式是排他模式，意味着其他任何对该...
功能更新动态（2024年）
上传资源及引用 离线研发和建模研发 开发环境下，逻辑表数据预览变量参数值优化，本地变量的参数值默认填充参数配置中已配置的值，日期时间全局变量取当前最新值。开发环境下运行计算任务以及对逻辑表进行数据预览时，参数运行值自动填充...
文档更新动态（2024年）
更新说明 上传资源及引用 数据开发-规范建模/编码研发 开发环境下，逻辑表数据预览变量参数值优化，本地变量的参数值默认填充参数配置中已配置的值，日期时间全局变量取当前最新值。开发环境下运行计算任务以及对逻辑表进行数据预览时，...
数据归档
数据归档OSS功能关闭时要求OSS中没有归档表数据，如果OSS中有归档表数据则不允许关闭，需要先通过DDL将归档表转为在线表或者将归档表DROP掉，再关闭数据归档OSS功能。相关参考 主要参数 RDS MySQL数据归档开放了以下参数，用户可结合实际...
- 产品推荐
- 这些文档可能帮助您