文档修订记录
规则管理 2023.08.07 新增功能 数据分析 数据分析提供卡片和报告功能，您无需下载数据，即可快速完成数据可视化分析与报告创作，轻松打造个性化可视化作品，讲述数据故事、表达数据观点。增强分析（卡片和报告）2023.08.04 新增功能 数据...
汇总数据层（DWS）
DWS汇总数据层是面向分析对象的主题聚集建模。在本教程中，最终的分析目标为：最近一天某个类目（例如，厨具）商品在各省的销售总额、该类目销售额Top10的商品名称、各省用户购买力分布。因此，我们可以以最终交易成功的商品、类目、买家等...
DataWorks On EMR使用说明
数据建模与开发 5 DataWorks数据分析提供EMR数据分析与服务共享能力。数据分析 6 DataWorks提供EMR元数据管理与数据治理能力。数据治理 7 DataWorks提供数据服务能力，帮助您统一管理面向内外部的API服务。数据服务 8 DataWorks支持开放...
数仓分层
公共汇总粒度事实层（DWS）：以分析的主题对象作为建模驱动，基于上层的应用和产品的指标需求，构建公共粒度的汇总指标事实表，以宽表化手段物理化模型。构建命名规范、口径一致的统计指标，为上层提供公共指标，建立汇总宽表。公共汇总...
数仓分层
公共汇总粒度事实层（DWS）：以分析的主题对象作为建模驱动，基于上层的应用和产品的指标需求，构建公共粒度的汇总指标事实表，以宽表化手段物理化模型。构建命名规范、口径一致的统计指标，为上层提供公共指标，建立汇总宽表、明细事实表...
数据模型架构规范
它的主要作用是完成数据加工与整合、建立一致性的维度、构建可复用的面向分析和统计的明细事实表以及汇总公共粒度的指标。DWD：Data Warehouse Detail，明细数据层。DWS：Data Warehouse Summary，汇总数据层。ADS：Application Data ...
什么是MaxCompute
MaxCompute提供离线和实时的数据接入，支持大规模数据计算及查询加速能力，为您提供面向多种计算场景的数据仓库解决方案及分析建模服务。MaxCompute还为您提供完善的数据导入方案以及多种经典的分布式计算模型，您可以不必关心分布式计算和...
DataWorks On CDP/CDH使用说明
开始使用：数据分析 DataWorks数据分析提供CDP及CDH数据分析与服务共享能力。开始使用：数据治理 DataWorks提供 CDP及CDH 元数据管理与数据治理能力。开始使用：数据服务 DataWorks提供数据服务能力，帮助您统一管理面向内外部的API服务。...
迁移HBase至Hologres
从面向指标，面向宽表开发，转化为Hologres面向主题域建模，减少了数据模型在采集端、处理端、分析端的异构信息衰减，减少了数据加工的层次，提高了数据使用的灵活性。语法迁移 SQL语法和常见命令映射 Hologres支持HBase常见的基本语法，并...
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
创建数仓分层
数仓分层是结合对业务场景、实际数据、使用系统的综合分析，对数据模型进行的整体架构设计及层级划分。用于将不同用途的数据，归类划分至不同的分层，便于您更好地组织、管理、维护数据。本文为您介绍如何创建并管理数仓分层。背景信息 ...
什么是云原生应用组装平台BizWorks
提供了业务建模、微服务开发、轻应用组装、能力开放等平台功能，致力于帮助企业快速设计、构建、组装和运营可复用的业务能力组件和应用，提升业务与技术协同能力，助力企业高效数字化创新。本文介绍BizWorks的产品背景、核心优势、功能特性...
DataWorks On Hologres使用说明
开始使用：数据分析 DataWorks数据分析提供Hologres数据分析与服务共享能力。开始使用：数据治理 DataWorks提供 Hologres 元数据管理与数据治理能力。开始使用：数据服务 DataWorks提供数据服务能力，帮助您统一管理面向内外部的API服务。...
DataWorks On MaxCompute使用说明
开始使用：数据分析 DataWorks数据分析提供MaxCompute数据分析与服务共享能力。开始使用：数据治理 DataWorks提供 MaxCompute 元数据管理与数据治理能力。开始使用：数据服务 DataWorks提供数据服务能力，帮助您统一管理面向内外部的API...
零售电商数据建模
应用数据层ADS（Application Data Service）以分析的主题对象作为建模驱动，基于公共粒度的汇总指标表，构建 直接面向业务分析需求 的业务分析指标表。推荐表名规范：ads_{业务分类}_{数据集市}_{主题域}_{自定义内容}_{时间周期}。公共层...
DataWorks模块使用说明
使用流程概览：参考文档：数据集成概述 数据建模与开发 子模块：数据建模 功能说明：数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行...
功能发布记录（2022年）
2022.11.25 全部地域 所有DataWorks用户 发布模型至引擎 逆向建模：物理表反向建模 基于模型生成ETL代码 DataWorks智能数据建模支持对模型进行版本管理 DataWorks 智能数据建模>维度建模 新增如下两种功能：支持对模型进行版本管理，只有...
功能发布记录 2022年之前
该节点通常作为DataWorks调度系统与其他调度系统之间传递信号使用。2021.4.15 华北2（北京）、华东2（上海）、华东1（杭州）、华南1（深圳）、华北3（张家口）、西南1（成都）、亚太东南1（新加坡）。FTP Check节点 2021-03 功能名称 功能...
功能发布记录
无 优化运营平台 能力运营统计改版优化：新增应用视角能力沉淀与调用统计数据分析。支持更灵活的时间选择。支持从商业能力流程图直接跳转查看服务方法详情。查看运营统计信息 发布轻应用 新增轻应用功能，适用于基于共享的业务能力以及服务...
功能发布记录（2023年）
2023-12 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据开发（DataStudio）绑定数据源 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）...
阿里云存储服务
适用于各种社交、分享类的图片、音视频应用、大型网站、大数据分析等业务场景。低频访问存储 提供高持久性、较低存储成本的对象存储服务。有最小计量单位（64 KB）和最低存储时间（30天）要求。支持数据实时访问，访问数据时会产生数据取回...
核心概念
在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目，所以数据板块与项目的关系为1:N。例如，某企业的业务涉及零售和文娱，且业务数据相互独立，则零售和文娱就可以划分为两个数据板块。...
功能特性
数据管理 功能集 功能 功能描述 参考文档 存储类型 标准存储 提供高可靠、高可用、高性能的对象存储服务，面向温热数据，适合支持频繁的数据访问。标准存储 低频访问存储 提供高持久性、较低存储成本的对象存储服务。有最小计量单位（64 KB...
数据开发概述
数据开发包括编码研发和规范建模。编码研发用于构建计算任务，例如创建SQL代码任务、Shell任务、Python任务、MR任务和Spark任务；规范建模用于构建逻辑化的数据模型。前提条件 若需进行实时开发，需已购买实时研发增值服务。详情请参见 ...
Doris概述
比如面向网站主的站点分析、面向广告主的广告报表，并发通常要求成千上万的QPS，查询延时要求毫秒级响应。即席查询（Ad-hoc Query）：面向分析师的自助分析，查询模式不固定，要求较高的吞吐。统一数仓构建：一个平台满足统一的数据仓库...
内置时空数据引擎Ganos
PolarDB PostgreSQL版（兼容Oracle）Ganos当前版本提供了以下五类空间/时空数据库支持：几何对象数据库：GIS点、线、面、体空间几何对象建模与管理。移动对象数据库：移动对象时空轨迹、属性、事件综合建模与管理。遥感影像数据库：遥感...
数据开发概述
数据开发包括编码研发和规范建模。编码研发用于构建计算任务，例如创建SQL代码任务、Shell任务、Python任务、MR任务和Spark任务；规范建模用于构建逻辑化的数据模型。前提条件 若需进行实时开发，需已购买实时研发增值服务并且当前租户已...
应用场景
广告主报表分析 零售行业渠道人员分析 SaaS行业面向用户分析报表 Dashboard多页面分析 统一分析 通过使用一套系统解决多维分析、高并发查询、预计算、实时分析查询等场景，降低系统复杂度和多技术栈开发与维护成本。使用StarRocks统一管理...
简介
系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等，结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力，广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...
数仓分层
汇总数据层（DWS，Data Warehouse Summary）：以分析的主题对象作为建模驱动，基于上层的应用和产品的指标需求，构建公共粒度的汇总指标表。以宽表化手段物理化模型，构建命名规范、口径一致的统计指标，为上层提供公共指标，建立汇总宽表...
产品简介
DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如...
引擎简介
Lindorm文件引擎是面向海量非结构化数据的分布式文件存储服务，与多模引擎共享存储，LindormDFS支撑，充分利用了对象存储的低成本与高可靠、块存储的高性能等优势，并通过高低速分层存储、副本共享去重、智能冷热转存等技术，面向用户提供...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
概述
Web应用防火墙WAF（Web Application Firewall）日志服务帮助您采集并存储接入WAF防护的网站域名的Web访问和攻击的防护日志，基于阿里云日志服务，输出查询分析、统计图表、报警服务、下游计算对接与投递等功能，帮助您专注于分析，远离琐碎...
什么是Dataphin
创建资源 新建用户自定义函数 数据萃取 基于Dataphin数据建模研发沉淀的数据，萃取提供以目标对象为中心的数据打通和深度挖掘，并生成代码与调度任务，完成实体对象识别、连接及标签生产，可快速应用于各类业务。数据萃取 发布 生产开发...
规范定义最佳实践
基于Dataphin建模理论和业务需求，明确并规范定义统计指标，以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础，构建总线矩阵，划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
规范定义最佳实践
基于Dataphin建模理论和业务需求，明确并规范定义统计指标，以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础，构建总线矩阵，划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
概述
通过规范约束标准代码、度量单位、字段标准、命名词典，来保障后续建模与应用过程中数据处理的一致性。例如，现有注册表和登录表两张表，注册表中存储了会员ID，字段名为 user_id，登录表中也存储了会员ID，字段名为 userid，此时针对会员...
求解器用户手册
方式3：建模语言 MindOpt APL、AMPL、Pyomo、PuLP、JuMP 说明 采用建模语言的好处是用建模语言的API来建模，可以方便切换不同版本求解器。MindOpt支持一些常见的建模工具，当前支持以下几种：1.MindOpt APL 2022年开始支持MindOpt APL建模...
功能概览
当规则条件被触发时，系统将产生告警事件，例如为告警规则订阅通知对象，系统将为通知对象发送告警消息，以提醒用户采取必要的问题解决措施。告警 告警模版 支持批量创建告警，提高配置告警规则的效率。告警规则 支持灵活的为监控对象配置...
- 产品推荐
- 这些文档可能帮助您