快速体验

DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...

什么是DataWorks

产品架构 DataWorks十多年沉淀数百项核心能力,通过 智能数据建模、全域数据集成、高效数据生产、主动数据治理、全面数据安全、数据分析服务六全链路数据治理的能力,帮助企业治理内部不断上涨的“数据悬河”,释放企业的数据生产力。...

客户案例

通过DataWorks进行全链路数据治理,提升数据质量与应用能力。价值体现 将EMR的元数据统一到DLF,底层使用OSS作统一存储,并通过湖仓一体打通EMR数据湖和MaxCompute数仓两套体系,让数据和计算在湖和仓之间自由流动。实现湖仓数据分层存储。...

DataWorks快速入门指引

DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎,为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台,为了便于新用户快速了解DataWorks的数据开发治理操作全流程,DataWorks为您提供了...

安全白皮书概述

Dataphin面向各行各业大数据建设、管理及应用诉求,一站提供从数据接入到数据消费全链路的智能数据建设与资产治理大数据能力,包括产品、技术和方法论等,可帮助企业一站构建生产经济、质量可靠、安全稳定、消费便捷的企业级数据资产...

快速体验

涉及产品 本案例涉及以下产品:一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、加工、质量监控,以及数据可视化展现,您需提前开通该服务。详情请参见 开通DataWorks服务。云原生大数据计算服务MaxCompute 实现底层加工...

功能发布记录 2022年之前

迁移助手 2021-07 功能名称 功能描述 发布时间 发布地域 相关文档 DataWorks数据治理模块新增审批中心,可自定义审批流程。DataWorks审批中心是一个用于管理数据授权、敏感行为管控流程的功能模块,包含审批范围定义、审批流程定义等核心...

大数据安全治理的难点

同时,大数据系统基于“存储、用户、入口、流转、交付”等多方面的特点,存在诸多安全治理难点。数据安全治理的关键问题 数据安全治理能否清楚、准确地回答如下问题,将从侧面反映安全治理项目是否能有效地落地。哪些资产需要被保护?您有...

数据治理能力解读

以下为您系列讲解阿里云数据治理能力解读。数据治理的产品介绍 主要产品:DataWorks 课程时长:25分钟 DataWorks数据治理能力的最佳实践 主要产品:DataWorks、MaxCompute 课程时长:19分钟

相关的云服务

DataWorks作为阿里云一站式大数据开发与治理平台,通常会与计算引擎产品联合使用,此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下,使用DataWorks时通常会使用到的其他云产品。计算...

配置治理

数据治理人员可通过 全局视角、个人视角 或 工作空间视角 查看对应项目的待治理项,快速发现并解决存在的问题,推进团队内的数据治理目标。本文为您介绍如何查看并配置治理项。前提条件 已使用治理方案模板,详情请参见 查看治理方案模板。...

知识库

DataWorks数据治理中心的知识库为您汇总了常见治理项问题及检查项事件的解决方案,您可以参考所给方案自主排查并处理相应待治理问题。本文为您介绍知识库的相关内容。背景信息 在数据治理中心的 治理工作台,您可以查看当前租户下存在的...

查看治理方案模板

背景信息 功能作用 治理方案模板是DataWorks的数据治理中心为您提供的排查当前登录账号下待治理问题的模板,该模板将常见的问题项进行了汇总、分类,并提供了相应的解决方案。您可以直接使用该模板快速发现当前账号中存在的待治理问题,并...

处理治理项问题

使用治理方案模板并配置治理项后,数据治理中心会根据配置的治理项检测目标租户下存在的治理项问题。您可以在DataWorks的治理工作台中查看可优化问题总数、可优化项排行、优化项类别及可优化的任务或表详情,及时发现并处理待治理问题。...

治理项管理流程

治理项的管理流程如下:元数据管理:配置和管理数据治理所需要的元数据指标。治理项管理:基于元数据指标,配置和管理数据治理所需的规则及判定策略(即治理项)。推送管理:对于单一或多个被治理项规则触发的待治理数据对象(表或任务节点...

治理项管理流程

治理项的管理流程如下:元数据管理:配置和管理数据治理所需要的元数据指标。治理项管理:基于元数据指标,配置和管理数据治理所需的规则及判定策略(即治理项)。推送管理:对于单一或多个被治理项规则触发的待治理数据对象(表或任务节点...

处理检查项事件

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据治理>数据治理中心,在下拉框中选择对应工作空间后单击 进入数据治理中心。单击顶部菜单栏的 治理工作台,在 治理工作台 页面的左侧导航栏单击 检查项事件,进入 检查项事件...

流程管控

启用内置检查项:数据治理中心 自定义校验逻辑:开放平台 启用内置检查项:数据治理中心 DataWorks的数据治理中心为您内置了多个检查项,您可以根据业务需要选择开启对应的检查项,开启后,后续在涉及到对应操作时即会触发DataWorks的内置...

查看治理结果

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据治理>数据治理中心,在下拉框中选择对应工作空间后单击 进入数据治理中心。单击顶部菜单栏的 治理评估,进入 治理评估 页面。在该页面,您可以通过治理评估报告或治理排行榜...

无效问题添加白名单

DataWorks的数据治理中心支持将无需处理的治理项问题添加至白名单,并将所有白名单集成至白名单管理页面统一管理。治理项问题被加入白名单后,该问题在白名单的有效期内不会被检测出来。本文为您介绍如何查看并管理白名单。前提条件 已使用...

全景视角

阿里云DataWorks为您提供数据生产、数据使用、数据管理视角下的主要数据治理情况。您可以根据需求选择合适的视角,高效的进行数据治理工作。背景信息 为提高不同使用场景下的数据治理效率和质量,DataWorks为您提供以下视角:数据管理视角...

操作指南

您可以在Dataphin工作台进行数据开发、数据治理等操作。功能 文档 Dataphin全托管 数仓规划概述 数据引入概述 数据开发概述 发布中心概述 运维中心概述 分析平台概述 标签工厂概述 资产全景及目录概述 数据标准概述 资产质量概述 资源治理...

全景查看表

进入表360页面 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据治理>数据治理中心,在下拉框中选择对应工作空间后单击 进入数据治理中心。单击顶部菜单栏的 治理工作台,在 治理工作台 页面的左侧导航栏单击 表360,进入 ...

数据服务审批策略

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据治理>数据治理中心,在下拉框中选择对应工作空间后单击 进入数据治理中心。单击左上角的 图标,选择 全部产品>数据治理>审批中心,进入审批中心页面。进入审批中心页面后,...

配置消息通知

单击顶部菜单栏左侧的 图标,选择 全部产品>数据治理>数据治理中心。单击顶部菜单栏的 配置管理,在 配置管理 页面的左侧导航栏单击 消息设置>通知设置,进入通知设置页面。您还可以进入 治理工作台>治理项问题,单击右上角的 图标,快速...

透视分析:按研发链路

登录 DataWorks控制台,单击左侧导航栏的 数据治理>数据治理中心,在下拉框中选择对应工作空间后单击 进入数据治理中心。单击顶部菜单栏的 使用分析,左侧导航栏 研发链路透视 类目下,按照研发链路进行透视分析。查看DataWorks消费数据及...

全景查看任务

进入任务360页面 登录 DataWorks控制台,单击左侧导航栏的 数据治理>数据治理中心,在下拉框中选择对应工作空间后单击 进入数据治理中心。单击顶部菜单栏的 治理工作台,在 治理工作台 页面的左侧导航栏单击 任务360,进入 任务360 页面。...

扩展程序审批策略

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据治理>数据治理中心,在下拉框中选择对应工作空间后单击 进入数据治理中心。单击左上角的 图标,选择 全部产品>更多>审批中心。在左侧导航栏选择 审批策略管理>扩展程序。...

数据集成审批策略

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据治理>数据治理中心,在下拉框中选择对应工作空间后单击 进入数据治理中心。单击左上角的 图标,选择 全部产品>数据治理>审批中心,进入审批中心页面。进入审批中心页面后,...

敏感数据概况

单击左上方的 图标,选择 全部产品>数据治理>数据保护伞,单击 立即体验,进入数据保护伞。单击左侧导航栏的 数据发现,进入数据发现页面。数据发现页面从工作空间、分级等不同的维度,为您提供可视化的数据资产展示。您可以在该页面查看...

优雅下线

对于数据治理过程中的无效任务或表,数据治理中心为您提供完整的下线方案,包含下线风险评估、下线通知推送、下线过程管理等全流程功能,为您解决人工识别下线风险、任务存在正常调度的下游任务时不能下线、因无法预知风险而不敢轻易下线等...

查看数据风险(旧版)

单击左上方的 图标,选择 全部产品>数据治理>数据保护伞,单击 立即体验,进入数据保护伞。说明 若阿里云主账号已授权,则直接进入数据保护伞的首页。若阿里云主账号未授权,则进入数据保护伞的授权页面。授权后才可使用保护伞的相关功能。...

开发管控:管理者

开放平台扩展程序 扩展程序概述 测试应用扩展程序 流程管控展示 数据治理检查项 数据治理中心概述 配置治理项 数据建模:数据建模系统管理 说明 标准模式工作空间的发布操作默认为同空间发布,若您存在跨空间、跨云发布场景,则可选择使用...

SQL增强操作

功能 是否支持 限制 云原生大数据计算服务MaxCompute-EXPLAIN 是 无 云原生大数据计算服务MaxCompute-CLONE TABLE 是 无 云原生大数据计算服务MaxCompute-参数化视图 是 创建参数化视图 不支持表值参数table。支持any以及MaxCompute的所有...

查看工作空间信息

进入工作空间 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据治理>数据地图,在右侧页面中单击 进入数据地图。在左侧导航栏单击 图标,选择 类型>工作空间,进入工作空间页面。查看工作空间列表 在工作空间页面,您可查看...

技术架构选型

本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

技术架构选型

本教程中使用阿里云大数据产品Dataphin配合MaxCompute,完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中,Dataphin的数据集成及同步负责完成源业务系统数据引入。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

敏感数据访问及导出情况

单击左上方的 图标,选择 全部产品>数据治理>数据保护伞,单击 立即体验,进入数据保护伞。说明 若阿里云主账号已授权,则直接进入数据保护伞的首页。若阿里云主账号未授权,则进入数据保护伞的授权页面。授权后才可使用保护伞的相关功能。...

数据脱敏能力概述

单击左上方的 图标,选择 全部产品>数据治理>数据保护伞,单击 立即体验,进入数据保护伞。说明 若阿里云主账号已授权,则直接进入数据保护伞的首页。若阿里云主账号未授权,则进入数据保护伞的授权页面。授权后才可使用保护伞的相关功能。...

数据使用诊断

进入数据使用诊断 登录 DataWorks控制台,单击左侧导航栏的 数据治理>安全中心,在右侧页面中单击 进入安全中心。单击顶部菜单栏的 数据使用安全,进入 数据使用诊断 页面。查看诊断结果 数据使用诊断 根据诊断相关安全问题的最佳实践,为...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 云数据库 Redis 版 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用