数仓规划概述

数仓分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层,DataWorks为您默认创建业界通用的五层数仓分层:数据引入层 ODS(Operational Data Store)明细数据层 DWD(Data Warehouse Detail)汇总数据层 DWS(Data Warehouse ...

数仓分层

CDM层又细分为维度层(DIM)、明细数据层(DWD)和汇总数据层(DWS),采用维度模型方法作为理论基础,可以定义维度模型主键与事实模型中外键关系,减少数据冗余,也提高明细数据表的易用性。在汇总数据层同样可以关联复用统计粒度中的维度...

概述

数据分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层,DataWorks为您默认创建业界通用的五层数仓分层:数据引入层 ODS(Operational Data Store)明细数据层 DWD(Data Warehouse Detail)汇总数据层 DWS(Data Warehouse ...

解决方案与客户案例

数据层 数据层解决数据库跨地域的部署与同步问题,并在灾难发生时对流量切换动作提供相应的数据质量保护策略。针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略:UNIT类型:每个单元部署独立的数据库系统,单元之间通过DTS进行...

解决方案与客户案例

数据层数据层解决数据库跨地域的部署与同步问题,并在灾难发生时对流量切换动作提供相应的数据质量保护策略。针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略:UNIT类型:每个单元部署独立的数据库系统,单元之间通过DTS进行...

规划工作空间

资源倾斜:中晚期(例如5点~7点)的调度资源组、引擎计算资源、存储空间(应对数据膨胀)应用数据层(ADS):按业务划分,针对各专项业务,建立独立工作空间。任务节点:SQL任务、数据集成任务。数据表:以满足业务场景为优先。空间成员:...

作业开发入门概述

DWD:数据明细,对ODS层数据进行清洗、过滤等处理。本教程以过滤为例。ADS:数据应用,面向业务进行数据分析、生产报表等使用的数据。您可以选择Spark SQL和XIHE BSP SQL任意一种方式进行作业开发。选择不同方式进行作业开发时,需要...

数据传输费用(公网下载)

计费公式 价格 说明 一次下载费用=下载数据量×下载价格 计费单价如下:公共云:0.8元/GB 金融云:1.2元/GB 下载数据量:指一次下载请求的HTTP Body的大小。承载数据的HTTP Body使用ProtoBuffer编码,因此一般比数据原始容量要小,但是比...

表管理

通常,您可基于数仓分层将表层级划分为如下层级:数据引入层ODS(Operational Data Store)公共维度层DIM(Dimension)明细数据层DWD(Data Warehouse Detail)汇总数据层DWS(Data Warehouse Summary)应用数据层ADS(Application Data ...

计费方式

数据传输服务DTS(Data Transmission Service)不同实例支持的计费方式不同,本文详细介绍了DTS产品的计费方式。说明 DTS产品的计费项,请参见 计费项。计费方式 支持的实例 说明 包年包月 数据订阅实例 数据同步实例 也称为预付费,即在...

使用XIHE BSP SQL进行作业开发

本文介绍如何使用XIHE BSP SQL作业开发方式,将ODS数据通过DWD过滤后,写入ADS。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群,且集群至少有16 ACU的计算预留资源和24 ACU的存储预留资源。详情请参见 创建湖仓版集群。已...

查询账单

对于使用DAS企业版 V3的数据库实例:在 计费项 为 下载数据量 的消费明细中,查看数据导出的费用。在 计费项 为 洞察分析 的消费明细中,查看洞察分析的费用。在 计费项 为 实时搜索分析 的消费明细中,查看实时搜索分析的费用。在 计费项 ...

使用Spark SQL进行作业开发

本文介绍如何使用Spark SQL作业开发,将ODS数据通过DWD过滤后,写入ADS。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群,且集群至少有16 ACU的计算预留资源和24 ACU的存储预留资源。详情请参见 创建湖仓版集群。已创建Job型...

创建并使用MaxCompute表

层级用于定义和管理数据仓库分层,通常可划分为数据引入层ODS(Operational Data Store)、公共维度层DIM(Dimension)、明细数据层DWD(Data Warehouse Detail)、汇总数据层DWS(Data Warehouse Summary)、应用数据层ADS(Application ...

创建并使用MaxCompute表

层级用于定义和管理数据仓库分层,通常可划分为数据引入层ODS(Operational Data Store)、公共维度层DIM(Dimension)、明细数据层DWD(Data Warehouse Detail)、汇总数据层DWS(Data Warehouse Summary)、应用数据层ADS(Application ...

数据质量风险监控

数据质量风险监控主要针对数据的准确性、一致性和完整性。本教程使用DataWorks数据质量(DQC)功能,完成数仓各层次的数据质量监控。前提条件 首先您需要完成教程 搭建互联网在线运营分析平台,并保证您的DataWorks工作空间创建区域为华东2...

数仓分层

在阿里巴巴的数据体系中,我们建议将数据仓库分为三层,自下而上为:数据引入(ODS,Operation Data Store)、数据公共(CDM,Common Data Model)和数据应用(ADS,Application Data Service)。数据仓库的分层和各层级用途如下图所...

数据质量风险监控

数据质量风险监控主要针对数据的准确性、一致性和完整性。本教程使用DataWorks数据质量(DQC)功能,完成数仓各层次的数据质量监控。前提条件 首先您需要完成教程 搭建互联网在线运营分析平台,并保证您的DataWorks工作空间创建区域为华东2...

数仓分层

在阿里巴巴的数据体系中,我们建议将数据仓库分为三层,自下而上为:数据引入(ODS,Operation Data Store)、数据公共(CDM,Common Data Model)和数据应用(ADS,Application Data Service)。数据仓库的分层和各层级用途如下图所...

DataWorks按量计费概述

通过按量计费方式计费的各服务的计费详情可参见:公共调度资源组计费说明:按量付费 公网流量计费说明 公共数据服务资源组 数据质量计费说明 增强分析计费说明 基线实例计费说明 报警短信与报警电话计费 OpenAPI计费说明 说明 在开发环境...

计费

本文介绍云数据库RDS的计费项及各计费项的价格。实例规格 定义:RDS主实例和备实例规格的费用。各引擎的规格清单,请参见 主实例规格列表。计费方式:包年包月或按量付费。关于计费方式的说明,请参见 计费方式。价格:购买实例的价格与所...

区域热力(v3.x版本)

图表样式 区域热力是基础平面地图 3.0的子组件,支持独立的样式、数据和交互配置,包括区域的标注、颜色、边线、鼠标交互事件以及位置信息等,能够以热力区域的形式表现地理位置上的区域信息。样式面板 搜索配置:单击 样式 面板右上角的...

购买数据同步项目

本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步项目。背景信息 目前数据同步项目仅支持预付费模式,即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步项目后,再对项目进行具体配置和管理。数据同步项目...

产品定价

数据投 递(Connector)、写流量暂时不收取费用 价格和免费额度 资源计费项及其单价见下表。资源计费项 价格 免费额度 读流量 0.15 元/GB 1GB/月 存储空间 0.012 元/GB*天 1GB/月 其他计费项 活跃Shard租用 0.04 元/个*天 31 个*天/月(即...

数据开发

本实验中参考数据建模的分层划域,新建“ODS数据引入层、DIM维度层、DWD明细数据层、DWS汇总数据层、ADS应用数据层”。主题管理:按照分析视角对表进行划分。本实验中参考数据建模的分层划域,按照下表,新建八个一级主题和若干个二级主题...

项目分配与安全

在为企业级大数据平台创建项目时,建议您对ODS、DWD及DWS数据按照业务板块的粒度建立项目,对于ADS数据,按照应用的粒度建立项目。项目分配 在本教程中,建议参考下图建立您的MaxCompute项目,图中的每一个方块代表一个项目。...

项目分配与安全

在为企业级大数据平台创建项目时,建议您对ODS、DWD及DWS数据按照业务板块的粒度建立项目,对于ADS数据,按照应用的粒度建立项目。项目分配 在本教程中,建议参考下图建立您的MaxCompute项目,图中的每一个方块代表一个项目。...

功能特性

Datahub数据总线 功能集 功能 功能描述 参考文档 数据接入 API接入 使用REST API方式,将数据写入Datahub API参考 SDK接入 使用SDK将数据传入Datahub Java SDK C++ SDK Go SDK Python SDK 插件接入 使用插件将数据传入Datahub LogStash插件...

计费概述

按量付费价格(含Serverless):DTS按量付费价格 包年包月价格:DTS包年包月价格 计费项 DTS实例的计费项有链路配置费用、公网流量费用数据流量费,不同实例的计费项不同。计费项详情请参见 计费项。计费方式 DTS服务的计费方式有包年...

首页

说明 DataWorks智能数据建模计费时统计的模型对象数量以此处的 合计 数量为准。查看模型数据详情 单击 查看数据详情,即可查看当前租户下各工作空间已创建的模型数量。3 在该区域,您可以查看当前工作空间近三十天成功发布至生产环境的模型...

计费项与计费方式概述

数据传输费用(按时计费)MaxCompute按时计费规格以使用的数据传输并发数(Slots)和使用时长作为计量指标,并在并发数缩容后收取费用,从而满足业务高峰期资源供给。计费组成 MaxCompute的计费项组成如下图所示。计费方式选择 MaxCompute...

产品计费

V3计费方式简介 公共云 计费计费方式 中国内地、马来西亚(吉隆坡)和印度尼西亚(雅加达)定价 中国香港和新加坡定价 说明 数据引入 按量计费 0.24元/GB 0.36元/GB 数据引入到存储(包含采集、传输和写入整个过程)时收取该费用。...

按量付费标准版

MaxCompute会对数据进行压缩存储,按照压缩后的数据计费。通常,压缩后的数据量与上传数据之前您自己统计的数据量不同,会被压缩至原数据量的五分之一。详细计费规则请参见 存储费用。上传数据资源 数据上传至MaxCompute不产生费用。下载...

湖仓版(3.0)计费

计费公式:存储空间费用=热数据存储费用+冷数据存储费用数据存储空间费用=冷数据存储空间单价×冷数据存储量×时长 热数据存储空间费用=热数据存储空间单价×热数据存储量×时长 查询用量:您可以在 云原生数据仓库AnalyticDB MySQL控制...

数据服务概述

DataWorks数据服务模块是一个灵活轻量、安全稳定的数据API构建平台,作为数据库和数据应用之间的“桥梁”,DataWorks数据服务旨在为个人、团队和企业提供全面的数据服务和共享能力,帮助用户统一管理面向内外部的API服务。例如,您可以将...

定价公式及退费说明

总租户实例数据价格=目录单价*全量副本个数/3*时长 说明 集群实例总价=总计算节点价格+总数据价格+总日志盘价格 租户实例总价=总计算节点价格(预付费)+总租户实例数据价格(后付费)退费逻辑 根据计费方式不同,云数据库 OceanBase...

数据存储计费规则(可选)

本文介绍了开启冷数据归档功能后,在冷数据存储方面的计费规则。当 开启冷数据归档 后,PolarDB 企业版支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据归档的详细介绍,请参见 冷数据归档概述。...

数据分层存储计费规则

本文介绍开启冷数据分层存储后,在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后,PolarDB PostgreSQL版 支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据分层存储的详细介绍,请...

数据分层存储计费规则

本文介绍开启冷数据分层存储后,在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后,PolarDB PostgreSQL版(兼容Oracle)支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据分层存储...

数据分层存储计费规则

本文介绍开启冷数据分层存储后,在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后,PolarDB PostgreSQL版(兼容Oracle)支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据分层存储...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 Redis 版 数据库备份 DBS 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用