应用场景
使用StarRocks统一管理数据湖和数据仓库，将高并发和实时性要求很高的业务放在StarRocks中进行分析，也可以使用External Catalog和外部表进行数据湖上的分析。典型场景的解决方案 OLAP通用场景解决方案 业务背景：该方案适用于多种业务场景...
常见问题
购买相关问题 购买时没有选择OSS数据管理，后续还能开通该功能吗？可以。您可以在 工作台 页面，单击 立即升级 购买OSS数据管理容量。一个阿里云账号可以购买多个数据安全中心产品吗？不可以。一个阿里云账号只能购买一个数据安全中心版本...
功能特性
Spark访问湖仓一体外部数据源 基于External Volume处理非结构化数据 通过创建External Volume挂载OSS的路径，利用MaxCompute权限管理系统对用户访问External Volume做细粒度的权限控制，同时利用 MaxCompute引擎处理External Volume内部的...
文档更新动态（2024年）
更新说明 管理数据标准待发布对象 管理数仓规划待发布对象 管理编码研发待发布对象 管理标签待发布对象 2024年02月 更新时间：2024年02月27日 对应发布的版本：V3.13 文档节点 描述 更新、新增 相关文档 管理中心-系统设置-计算设置 未创建...
StarRocks概述
具体的业务场景如下所示：OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业的直播质量分析 物流行业的...
客户案例
相较之前客户基于python开源的airflow任务管理系统来说，DataWorks拥有以下优势：任务管理一目了然，任务出错定位以及即时跳转到相关任务代码修复。数据源一次性管理，不需要重复劳动，可被多种数据服务需求使用游戏业务拥有上百个数据源。...
配置跨库Spark SQL节点
操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据开发>任务编排。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>集成与开发（DTS）>数据开发>任务编排。单击目标任务流名称，...
数据域
管理数据域 您可以在 数据域 页面，对已创建的数据域进行如下管理操作：查看数据域概览。您可以在 数据域 页面，查看所有已创建数据域的基本信息，包括数据域的名称、功能描述、最新更新时间及对应负责人等。方便您快速筛选业务数据。修改...
创建数仓分层
数仓分层是结合对业务场景、实际数据、使用系统的综合分析，对数据模型进行的整体架构设计及层级划分。用于将不同用途的数据，归类划分至不同的分层，便于您更好地组织、管理、维护数据。本文为您介绍如何创建并管理数仓分层。背景信息 ...
DataWorks快速入门指引
DataWorks基于MaxCompute、Hologres、EMR、...60分钟 零售电商数据建模 DataWorks、MaxCompute 以电商场景为例，进行数据建模、分析。60分钟 DataWorks模块使用说明 为您汇总DataWorks核心子模块，便于您了解各个子模块的主要功能。15分钟
应用场景
数据标准：管理数据标准和构建数据模型，将数据标准贯彻到数据质量分析、保障及检查的全过程中，将散乱的多源异构数据加工成标准、干净的数据资产，确保数据的完整性、一致性、准确性和可用性。数据建模：通过数据建模模块提供的各种数据...
DataWorks On MaxCompute使用说明
DataWorks基于 云原生大数据计算服务MaxCompute 轻松构建离线数仓分析系统。MaxCompute可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发...
维度建模
英文缩写 主题域名称 所属数据集市 备注 ec360 电商360 电商集市-open_red 开门红 电商集市-rfd 退款 电商集市-lgt 物流 电商集市-flow 流量通道 电商集市-act 活动 电商集市-byr 买家 电商集市-brand 品牌 电商集市-cate 品类 电商集市-...
DataWorks On EMR使用说明
模块 说明 相关文档 数据地图 DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据对象的快速查找和深度理解的能力。数据地图概述 安全中心 数据保护伞 审批中心 安全...
DataWorks On Hologres使用说明
DataWorks基于 实时数仓Hologres 轻松构建实时数仓与即席分析系统。Hologres可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发Hologres任务...
DataWorks On CDP/CDH使用说明
模块 说明 相关文档 数据地图 DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据对象的快速查找和深度理解的能力。数据地图概述 安全中心 数据保护伞 审批中心 安全...
创建同步任务
本文为您介绍如何通过创建同步任务，导出MaxCompute中的数据至MySQL数据源中。前提条件 已通过RDS创建MySQL实例，获取RDS实例ID，并在RDS控制台添加白名单。详情请参见 快速创建RDS MySQL实例 和 添加白名单。说明 如果是通过自定义资源组...
版本发布记录
从SLS同步 2020年05月 功能名称 描述 相关文档 接入数据管理服务DMS 云数据库ClickHouse 接入数据管理服务DMS，支持在线库、表管理，在线数据查询，在线SQL任务编排调度。无 2020年02月 功能名称 描述 相关文档 增加新规格 在此前发布的C8...
核心概念
客户管理系统是另一个独立系统，也有独立产研团队，那么就可以分别设置订单主题域和客户主题域。例如，零售数据板块下，您可以划分出商品域、交易域和会员域三个主题域，用于存放不同意义的指标。业务对象 业务对象即参与业务的主体和客体...
内存型
企业级特性 企业级特性 说明 通过数据闪回按时间点恢复数据 开启Redis的数据闪回功能后，Redis最长可将AOF备份数据保留7天，在此期间您随时可以指定一个精确到秒的时间点，系统会基于所选时间点的备份数据创建一个新的实例，实现精确的数据...
概述
事实上，鉴于数据库研究在数据发现、数据管理、版本控制、数据清理和数据集成方面积累的专业知识，PolarDB for AI 可以为数据驱动的智能应用提供一站式的数据（包括：数据、特征和模型）服务来解决这种割裂状态，大大减少数据驱动的智能...
内存型
云原生内存数据库Tair 内存型（简称内存型）适合并发量大、读写热点多、高性能场景，内存型重点增强了多线程性能并集成多个自研扩展数据结构。购买方式 创建实例 主要优势 类别 说明 兼容性 100%兼容原生Redis，无需修改业务代码，提供 ...
概述
文本介绍 PolarDB-X 集中分布式一体化的相关概念。问题背景 选择集中式数据库还是分布式数据库一直是数据库选型讨论的热点。对于大部分中小企业来说，集中式数据库就能满足其日常...如何管理存储资源池与数据节点弹性规格详见 数据节点管理。
MaxCompute表数据
包括数据检索、数据预览、查看元数据详情、查看数据血缘关系、分类分组管理数据表等操作。本文为您介绍如何在数据地图查看和管理MaxCompute表。前提条件 已绑定MaxCompute引擎至当前工作空间，绑定后DataWorks会面向引擎自动采集元数据，...
计费逻辑说明
产品类型 功能介绍 计费项 计费说明 计费标准参考 智能数据建模 智能数据建模是DataWorks自研的建模产品，支持数仓规划设计、制定并沉淀企业数据标准、维度建模、数据指标定义，帮助您将建模设计产出的维度表、明细表、应用表、汇总表物化...
概述
阿里云DataWorks联合建模工具DDM（Datablau Data Modeler）为您提供一体化的数据建模解决方案（DATABLAU），将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力用户实现数据资产价值化输出，在数据全生命周期上夯实数据...
2023年
使用do-while节点实现复杂的数据分析 2023-09-20 新增通过跨项目数据访问实现不同地域MaxCompute项目数据迁移 新说明 本文为您介绍如何通过跨项目数据访问实现不同Region的MaxCompute项目数据迁移，包括两种使用场景：同云账号内不同Region...
新功能发布记录
通过标签管理数据迁移项目 通过标签管理数据同步项目 支持在预检查步骤提供移除不符合条件的对象能力，方便用户轻松创建项目，提升产品易用性 数据迁移模块文档 支持在选择增量同步（不包含全量迁移的场景）下选择增量同步位点 2023 年 5 ...
功能发布记录（2022年）
2022.7.29 华东1（杭州），华东2（上海），华北2（北京），华北3（张家口），华南1（深圳），西南1（成都），德国（法兰克福）所有DataWorks用户 系统管理 数据集成DataStudio智能 支持Postgres数据库，SSL认证时支持.crt 和.key 双文件...
产品计费
数据域管理 该功能支持将具有相同特征的数据资产划分到同一个数据域中，从而高效管理数据资产及资产中的敏感数据。安全审计 DSC 根据内置和自定义的审计规则审计您的资产，并支持展示审计到的会话信息、原始日志和异常告警。数据脱敏 DSC ...
流式ETL
数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...
落标监控概述
Dataphin的公共系统属性内置了常用的元数据监控，您可以在创建标准集时引用该系统属性，则该标准集下创建的数据标准默认继承系统属性的监控配置，详情请参见：新建和管理公共标准集属性。内容质量监控 基于标准对资产对象添加内容质量监控...
数据查询
Lindorm宽表引擎在集群管理系统中提供了SQL查询入口，您可以使用SQL语法来查询Lindorm宽表数据。本节介绍通过集群管理系统查询宽表数据。前提条件 已登录目标实例的集群管理系统，具体操作请参见 登录集群管理系统。使用限制 为确保数据...
灾备方案介绍
云数据库Redis作为高性能的Key-Value数据库，在业务场景中往往承载着大量的重要数据，为保障数据安全性，云数据库Redis提供了多种灾备方案供您选择。云数据库Redis容灾架构演进 当云数据库Redis实例因不可预料的原因（例如设备故障、机房...
方案概述
本文介绍了一键升级RDS MySQL至PolarDB-X 2.0标准版的方案简介、升级前提条件、使用限制、收费规则等。升级方案概述 将RDS MySQL一键升级至PolarDB-X 2.0标准版，整个过程中将自动为您创建目标端PolarDB-X 2.0标准版并同步数据。升级后的...
灾备方案
云原生内存数据库Tair 作为高性能的内存数据库，在业务场景中往往承载着大量的重要数据，为保障数据安全性，Tair 提供了多种灾备方案供您选择。Tair 容灾架构演进 当 Tair 实例因不可预料的原因（例如设备故障、机房断电等）发生故障，容灾...
系统管理
在该页面，您可进行如下功能的管控：建表策略管理 代码生成策略管理 发布策略管理 建表策略管理 配置并开启建表策略 在 建表策略管理 页签，您可通过可视化方式配置数据开发（DataStudio）建表的相关限制策略，步骤如下图。策略说明如下：...
什么是ETL
数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...
新建数据字典
数据字典管理支持创建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度的值域设置中引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...
新建数据字典
数据字典管理支持创建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度的值域设置中引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...
- 产品推荐
- 这些文档可能帮助您