管理数据源权限
您可以在数据源管理页面，分享数据源权限给相应的工作空间，并进入被分享的工作空间查看该数据源。本文为您介绍如何管理数据源权限及查看分享的数据源。背景信息 通常数据源会承载数据的具体地址、账户和密码等敏感信息，但普通开发人员仅...
创建并配置发布环境
进入发布中心 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。单击顶部菜单栏的 图标，选择 全部产品>更多>发布中心，进入发布中心。说明 标准模式...
免费试用阿里云产品
实时数仓 Hologres 查询Hologres数据 大数据开发治理平台 DataWorks 大数据AI公共数据集分析 数据可视化分析平台 Quick BI 搭建仪表板报表 AI与机器学习 人工智能平台 PAI PAI-DSW免费试用：教程指南 EAS Freetier快速免费部署AI绘画...
元表和字段资产详情
数据预览：若有当前表的查询权限，可以使用数据预览功能，否则需先申请查询权限。如何申请，请参见 申请、续期和交还表权限。说明 数据预览为您展示20条抽样查询数据。当计算引擎为Impala时，不支持数据预览功能。③ 血缘 为您展示表之间的...
元表和字段资产详情
数据预览：若有当前表的查询权限，可以使用数据预览功能，否则需先申请查询权限。如何申请，请参见 申请、续期和交还表权限。说明 数据预览为您展示20条抽样查询数据。当计算引擎为Impala时，不支持数据预览功能。③ 血缘 为您展示表之间的...
MaxCompute表数据
包括数据检索、数据预览、查看元数据详情、查看数据血缘关系、分类分组管理数据表等操作。本文为您介绍如何在数据地图查看和管理MaxCompute表。前提条件 已绑定MaxCompute引擎至当前工作空间，绑定后DataWorks会面向引擎自动采集元数据，...
基本概念
本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
时间周期
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击 进入数据建模。在 数据建模 页面，单击顶部导航栏的 数据指标，默认进入 派生指标 页面。在 数据指标 页面的左侧导航栏，单击 时间...
权限管控与隔离
租户隔离 Dataphin支持租户的概念，不同租户之间的数据、任务、成员、权限是完全隔离的，只能通过跨租户发布进行数据和任务的流通。常见的情况有以下两种：两套独立部署的，物理隔离的Dataphin。如两家完全不同的企业之间的Dataphin，或者...
发布包总览概述
且（为 数据源管理员 或 数据源负责人）数据架构 业务对象、业务活动、主题域 跨租户发布使用人 且（为 超级管理员 或 系统管理员 或 数据板块架构师 负责的板块）研发对象 集成任务、建模研发、指标研发、文件管理、计算任务 跨租户发布...
权限管控与隔离
租户隔离 Dataphin支持租户的概念，不同租户之间的数据、任务、成员、权限是完全隔离的，只能通过跨租户发布进行数据和任务的流通。常见的情况有以下两种：两套独立部署的，物理隔离的Dataphin。如两家完全不同的企业之间的Dataphin，或者...
发布包总览概述
且（为 数据源管理员 或 数据源负责人）数据架构 业务对象、业务活动、主题域 跨租户发布使用人 且（为 超级管理员 或 系统管理员 或 数据板块架构师 负责的板块）研发对象 集成任务、建模研发、指标研发、文件管理、计算任务 跨租户发布...
DataWorks on EMR数据安全方案
在大数据领域，阿里云为企业用户提供了一整套数据安全方案，包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...
功能简介
依托企业数据智能平台，您可以设计高质量的标准化数据模型，减少重复开发工作，全面了解数据质量、数据使用情况和系统运行情况，并从业务视角更直观地使用并探索数据，更高效地从数据中获取业务价值。目前企业数据智能平台提供以下功能：...
通过单条管道创建集成任务
离线单条管道即处理离线集成任务的一条管道脚本，可以将一个或多个来源数据源的单表或多表同步到一个或多个目标数据源中。本文为您介绍如何通过离线单条管道配置集成任务。前提条件 已完成数据源配置。您需要在配置集成任务前，配置好您...
数据服务API
数据接口API的上游血缘支持的数据源类型包括：Hologres、MySQL、PostgreSQL、SQL Server、Oracle、AnalyticDB for MySQL 3.0、AnalyticDB for PostgreSQL。说明 生成API 是通过数据源或表封装的API，因此血缘链路将包括：数据表、API、APP...
复合指标
由于派生指标只是针对某业务活动某段时间的数据量统计，无法满足贴近用户实际使用的业务增长率、差值计算等数据的比对需求（例如，统计某业务活动的周环比增长率）。因此，DataWorks为您提供了由派生指标通过运算规则进行计算而形成的复合...
离线模式依赖关系配置
Dataphin通过各个节点的调度依赖配置结果，有序的运行业务流程中各个节点，保障业务数据有效、适时地产出。本文为您介绍如何配置流批一体任务的离线模式依赖关系。背景信息 调度依赖就是节点间的上下游依赖关系，在Dataphin中，上游任务...
通过单条管道创建集成任务
离线单条管道即处理离线集成任务的一条管道脚本，可以将一个或多个来源数据源的单表或多表同步到一个或多个目标数据源中。本文为您介绍如何通过离线单条管道配置集成任务。前提条件 已完成数据源配置。您需要在配置集成任务前，配置好您...
离线模式依赖关系配置
Dataphin通过各个节点的调度依赖配置结果，有序的运行业务流程中各个节点，保障业务数据有效、适时地产出。本文为您介绍如何配置流批一体任务的离线模式依赖关系。背景信息 调度依赖就是节点间的上下游依赖关系，在Dataphin中，上游任务...
概念建模概述
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
概念建模概述
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
查看并管理脚本任务
脚本任务DAG节点支持的操作 DAG图清晰地为您展示任务节点的上下游依赖关系，同时系统支持对上下游节点进行运维和管理。DAG图默认展示Main节点（选中节点）及上下游第一层节点。选中脚本任务节点，您可以对任务进行相关的运维操作。Dataphin...
创建逻辑模型：明细表
明细表用于存储大量能够体现业务活动状况的实际数据或详细数值，是数据聚合后依据某个维度生成的结果表。例如，分析产品销售情况，您可以创建销售明细表，用来存储产品维度（作为外键）、时间维度（作为外键）以及销售总量。本文为您介绍...
新建层级维度逻辑表
层级维度逻辑表是具有层级结构关系的维度表。例如时间层级维度逻辑表，包含日、周、月、季、年等日期数据。本文为您介绍如何新建并配置层级维度逻辑表。前提条件 已完成层级业务对象的创建，具体操作请参见 创建并管理业务实体。步骤一：...
场景：MaxCompute引擎在不同模式工作空间访问资源与...
标准模式下，支持开发环境和生产环境隔离，开发环境和生产环境的数据库表命名有所区别，如果需要在开发环境访问生产环境的数据库表，请根据以下命名规范严格区分数据库表名，避免误操作生产环境。环境类型 标准模式 示例 开发环境 项目名_...
数据地图概述
数据地图是在元数据基础上提供的企业数据目录管理模块，涵盖全局数据检索、元数据详情查看、数据预览、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用数据。元数据采集与接入 MaxCompute数据 如果您使用了...
实时同步能力说明
DataWorks为您提供的实时数据同步功能，方便您使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。使用限制 实时同步不支持在数据开发界面运行任务，您需要保存、...
镜像表和字段详情
② 明细信息 为您展示 表结构 信息，包括 字段 详情、描述、数据类型、关联标准（需购买数据标准模块）信息，同时您可以在 操作 列下单击 图标，查看指定字段的血缘关系。③ 血缘 您展示数据表之间的血缘关系，表级血缘 来源包括集成同步...
逻辑视图和字段资产详情
同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，单击 确定 立即转出，建议转交后及时同步接收人。您可在 查看转交记录 页面查看...
镜像表和字段详情
② 明细信息 为您展示 表结构 信息，包括 字段 详情、描述、数据类型、关联标准（需购买数据标准模块）信息，同时您可以在 操作 列下单击 图标，查看指定字段的血缘关系。③ 血缘 您展示数据表之间的血缘关系，表级血缘 来源包括集成同步...
逻辑视图和字段资产详情
同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，单击 确定 立即转出，建议转交后及时同步接收人。您可在 查看转交记录 页面查看...
运维中心概述
数据质量通过表配置的分区表达式来匹配节点产出的表分区，数据质量规则关联产出该表数据的调度节点，当节点运行后（运维中心中通过测试实例，补数据实例，周期实例的运行及重跑操作产出表数据），会触发该数据质量规则校验，您可以设置规则...
创建逻辑模型：维度表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏，单击 维度建模，进入 维度建模 页面。创建维度表。在 维度建模 页面，鼠标悬停至 ...
升级
数据服务 数据服务为您提供高效便捷的主题式查询功能及有效的全链路企业内API生命周期托管，真正实现0门槛API开发，帮助您更好地进行数据资产应用并实现数据的价值化。资源治理 支持您进行数据使用消耗分析，从全局视角把控计算和存储成本...
开发指南下载
云数据库 Memcache 版和云数据库 Redis 版通用一套开发指南。请参考 Redis 开发指南。
任务运维
任务开发完发布上线后，我们需要在运维中心对它进行运维管理。本文介绍如何对任务进行运维管理。运维管理 周期任务 下图为周期任务主要功能点，查看周期任务DAG图（节点依赖关系的有向无环图）是否符合预期，如下图所示的依赖关系就是符合...
数据标准概述
Dataphin支持创建并管理数据标准，以保障数据的标准化生产与管理，节约数据应用和处理的成本。背景信息 数据标准目标是为 业务、技术 和 管理 提供服务和支持。数据标准管理的过程就是对数据以及数据的属性信息的标准化定义和应用的过程。...
数据标准概述
Dataphin支持创建并管理数据标准，以保障数据的标准化生产与管理，节约数据应用和处理的成本。背景信息 数据标准目标是为 业务、技术 和 管理 提供服务和支持。数据标准管理的过程就是对数据以及数据的属性信息的标准化定义和应用的过程。...
设计阶段
设计工作包含数据探查和系分设计两部分：数据探查旨在了解来源数据的数据形态，例如数据质量、数据分布等。结合业务场景，帮助分析和判断需求实现的可行性以及找出潜在的数据问题和风险。系分设计则包括表设计、Mapping设计和调度设计等最...
- 产品推荐
- 这些文档可能帮助您