文档更新动态（2022年）
更新说明 项目安全策略 脱敏算法 2022年07月19日 资产质量新增全局角色定义 新增系统管理员、数据源管理员、安全管理员、资产质量负责人等。更新说明 添加、配置及管理Dataphin成员 2022年07月19日 新增发布管控功能 基于任务名称、任务...
身份认证及访问控制
当前支持的全局角色有：超级管理员、系统管理员、安全管理员、质量管理员、数据源管理员等。项目角色 项目角色用于管理项目内成员、数据、任务的查看和操作权限。当前支持的项目角色有：项目管理员、开发者、运维、分析师、访客。不同项目...
身份认证及访问控制
当前支持的全局角色有：超级管理员、系统管理员、安全管理员、质量管理员、数据源管理员等。项目角色 项目角色用于管理项目内成员、数据、任务的查看和操作权限。当前支持的项目角色有：项目管理员、开发者、运维、分析师、访客。不同项目...
添加Dataphin成员
质量管理员：拥有创建数据表、数据源等资源的质量规则的权限，查看生成的数据质量报告。跨租户发布使用人：拥有跨租户发布数据的操作权限。数据标准管理员：拥有所有数据标准的查看、操作及管理权限。标签业务员：拥有规划模块中标签架构的...
数据资产管理
本文介绍如何通过DMS的数据资产管理功能对 云原生数据仓库AnalyticDB MySQL版 集群中的元数据、数据血缘、数据质量进行统一管理。背景信息 AnalyticDB MySQL版 中包含了大量对内对外极具价值或核心的数据（这里不仅指数字，还包含业务逻辑...
数据资源平台
阿里云数据资源平台是构建数据智能的全流程平台，提供数据汇聚、规范设计、指标与标签体系构建、数据质量管控、数据资产管理、数据资产服务与共享、智能分析等核心功能，支持行业知识内容沉淀，帮助金融、政府及企业客户快速构建智能数据中...
告警事件
告警事件集中为您展示离线计算、实时计算、实时集成、基线监控、数据质量模块的告警事件。本文为您介绍如何查看并处理告警事件。查看告警事件 在Dataphin首页，单击页面右上角的 图标，进入 告警中心 页面。在 告警事件 页面，单击 离线...
数据表
在左侧导航栏，选择 系统资产 管理>数据表管理。单击 MaxCompute 页签，在 关键字 文本框中输入“dws_ren_kh_demo_di”，单击 查询。预期结果 在数据表资产管理中，可查看到已物理化的数据表“dws_ren_kh_demo_di。说明 除了上述通过物理化...
性能测试工具-图形工具
在集群管理系统，单击 数据管理>用户管理，可以为用户授权。详情请参见 登录集群管理系统 和 管理ACL权限。password 访问Lindorm实例的数据库密码。如果忘记数据库密码，可在宽表引擎的集群管理系统，单击 数据管理>用户管理，修改密码。...
表资产
在顶部菜单栏单击 资产管理，在左侧导航栏选择 系统资产管理＞数据表管理。在表资产管理页面，搜索到已编目的资产“dws_ren_kh_demo_di（银行客户信息）”，单击 公开。预期结果 表资产管理中，表资产“dws_ren_kh_demo_di”公开状态 显示...
数据表
在左侧导航栏，选择 系统资产管理＞数据表管理。在资产对象管理页面，选择表资产“dws_ren_kh_demo_di（银行客户信息）”，单击 操作 列的 修改目录。说明 没有编目的数据表资产不能被公开。在修改目录页面，单击+添加所属目录，选择“主题...
配置规则：按模板（批量）
数据质量提供系统内置的 表级规则 模板和 字段规则 模板，您可以单击对应模板后的 配置监控规则 来批量对表或字段配置监控规则。配置监控规则 选择需要进行规则配置的模板，单击操作列的 配置监控规则，进入该模板的 批量新增监控规则 页面...
公开与隐藏数据表资产
在左侧菜单栏，选择 系统资产管理>数据表管理，进入数据表资产管理页面。可选：可通过多种方式筛选资产，以便快速定位目标资产。关键字：在 关键字 输入框，输入数据表名称或数据表描述的关键字，单击 查询，展示符合该条件的资产。所属...
全局角色管理
前提条件 系统内置的全局角色中以下角色需开通对应的模块方可使用全局角色功能，包括 质量管理员（需购买资产质量或标签工厂任一功能）、数据标准管理员（需购买数据标准功能）、跨租户发布使用人（需购买跨租户发布功能）、标签业务员（需...
数据质量管理流程
数据质量管理的流程图如下。数据质量管理的流程说明如下：分析业务场景，对数据流转链路上的整个依赖关系，进行资产定级。详情请参见 数据资产定级。在业务系统的数据生成过程中进行卡点校验。详情请参见 离线数据加工卡点校验。对数据风险...
数据质量管理流程
数据质量管理的流程图如下。数据质量管理的流程说明如下：分析业务场景，对数据流转链路上的整个依赖关系，进行资产定级。详情请参见 数据资产定级。在业务系统的数据生成过程中进行卡点校验。详情请参见 离线数据加工卡点。对数据风险点...
配置数据质量规则去噪
当任务触发质量规则校验时，您可以使用去噪管理功能，对当前工作空间内，数据质量规则校验异常的数据不触发报警，且不阻塞任务运行（任务不会因为数据质量校验不通过而失败退出）。前提条件 已创建数据质量校验规则，详情请参见 配置规则：...
多租户管理使用说明
在系统租户下管理数据库 创建数据库 连接数据库，在系统租户下创建数据库。示例如下：CREATE database 'db1@tenant_1';删除数据库 连接数据库，在系统租户下删除数据库。示例如下：DROP database 'db1@tenant_1';在普通租户下管理数据库 ...
系统管理
方式二 进入 智能数据建模>数仓规划>系统管理，查看当前工作空间的建表策略。若当前工作空间被指定为其他建模空间的研发空间，您需进入建模空间，查看符合要求的建表策略。在智能数据建模中先建模再将其发布为物理表。如您需继续提交、发布...
创建快照
数据库文件系统快照基于云盘快照，它是一种便捷高效的数据容灾手段，用于对文件系统的数据进行备份。前提条件 进行快照创建时，数据库文件系统必须处于 已挂载 或 待挂载 状态。说明 如果文件系统处于 待挂载 的状态，则需要保证文件系统有...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
数据源管理
通过控制数据源执行质量规则的并发度，可以对数据源进行保护，防止影响正常的业务。本文为您介绍如何设置数据源执行质量规则的并发度。前提条件 已创建数据源，如需创建，详情请参见 Dataphin支持的数据源。操作步骤 在Dataphin首页，单击...
功能更新动态（2022年）
2022年10月25日 华北2（北京）管理动态脱敏规则、项目安全策略、资产安全概述、脱敏算法、管理密钥 2022年10月27日 华东1（杭州）2022年11月01日 华南1（深圳）2022年11月03日 华东2（上海）数据质量 支持多种数据源表的质量监控，支持数据...
有效映射关系管理
权限说明 超级管理员、数据标准管理员、映射关系中的标准负责人可将已确认的映射关系置为无效映射、解除映射关系、配置质量监控规则。超级管理员、数据标准管理员可针对所有手动添加的映射关系进行落标评估任务配置，并查看落标评估任务的...
有效映射关系管理
权限说明 超级管理员、数据标准管理员、映射关系中的标准负责人可将已确认的映射关系置为无效映射、解除映射关系、配置质量监控规则。超级管理员、数据标准管理员可针对所有手动添加的映射关系进行落标评估任务配置，并查看落标评估任务的...
数据管理
数据管理DMS是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。
消息模板
Dataphin支持配置租户级别的告警消息模板，您可根据不同的模块查看并编辑告警消息模板的内容，包括离线计算、实时计算、基线监控、数据质量、数据服务。本文为您介绍如何查看及修改消息模板。使用限制 支持超级管理员和系统管理员编辑消息...
资产全景及目录概述
资产全景及目录基于Dataphin平台，为数据资产提供系统化管理，使资产好找、好用、好管理。整体概述 Dataphin的数据资产功能，基于数据资产管理的规范及方法论，帮助您对数据资产进行盘点评估：支持自动化提取分析元数据，可视化构建数据...
功能简介
质量评估报告 支持根据系统数据质量监测运行结果以天的维度自动生成系统整体质量监控报告。支持根据数据唯一性、准确性、规范性、一致性、时效性和完整性进行多维度评估分析。物理表监控明细 支持以物理表为维度，查看物理表在数据开发-...
资产全景及目录概述
资产全景及目录基于Dataphin平台，为数据资产提供系统化管理，使资产好找、好用、好管理。整体概述 Dataphin的数据资产功能，基于数据资产管理的规范及方法论，帮助您对数据资产进行盘点评估：支持自动化提取分析元数据，可视化构建数据...
功能简介
质量评估报告 支持根据系统数据质量监测运行结果以天的维度自动生成系统整体质量监控报告。支持根据数据唯一性、准确性、规范性、一致性、时效性和完整性进行多维度评估分析。物理表监控明细 支持以物理表为维度，查看物理表在数据开发-...
数据质量：全流程的质量监控
同时，数据质量提供历史校验结果的管理，以便您对数据质量进行分析和定级。详情请参见 数据质量。数据质量为您解决以下问题：数据库频繁变更问题 业务频繁变化问题 数据定义问题 业务系统的脏数据问题 系统交互导致质量问题 数据订正引发的...
快速体验
数据治理 使用DataWorks的数据地图、数据质量、数据保护伞等功能，实现查看管理元数据、监控数据质量、敏感数据展示脱敏等。生成数据API 通过DataWorks的 数据服务 功能，将数据表快速生成API，并发布至网关统一管理，供第三方服务使用。...
质量评估
质量评估报告 支持根据系统数据质量监测运行结果以天的维度自动生成系统整体质量监控报告。支持根据数据唯一性、准确性、规范性、一致性、时效性和完整性进行多维度评估分析。物理表监控明细 支持以物理表为维度，查看物理表在数据开发和...
数据治理
任务开发上线之后，数据正在稳定生产中，您需要对对应的业务表通过可视化查看、自动的数据质量监控、敏感数据管理等多种不同方式进行治理，而以下这些模块就可以很好的帮助您对数据进行治理。可视化元数据管理 数据地图可以可视化的查看表...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
功能简介
依托企业数据智能平台，您可以设计高质量的标准化数据模型，减少重复开发工作，全面了解数据质量、数据使用情况和系统运行情况，并从业务视角更直观地使用并探索数据，更高效地从数据中获取业务价值。目前企业数据智能平台提供以下功能：...
管理问题数据
本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过的情况下，系统自动创建 问题数据表 存储质量规则校验过程中发现的问题数据。问题数据表名生成规则：{监控数据...
数据标准概述
数据标准化清晰定义 数据质量规则、数据的来源和去向、校验规则，提升数据质量。管理方面：通过数据的标准化定义，明确数据的责任主体，为数据安全、数据质量提供保障；统一、标准的数据指标体系为各主题的数据分析提供支持，提升数据处理...
- 产品推荐
- 这些文档可能帮助您