概述
HoloStudio基于Hologres构建，通过可视化、引导式方式为您提供标准化、无门槛的开发服务和一站式实时数仓构建服务以及高效、便捷的管理服务，从而提升研发效率。说明 HoloStudio会逐步升级迭代为DataStudio，更建议您使用DataStudio或者...
离线数仓构建流程概述
本教程将 从前期的资源准备、数仓规划，到后期的运维补数据、查看运行结果，指导您如何使用Dataphin完成基本的离线数仓构建。以帮助您快速了解Dataphin离线数仓建设的基础流程。使用Dataphin进行离线数仓建设的基本流程如下：主流程 描述 ...
离线数仓构建流程概述
本教程将 从前期的资源准备、数仓规划，到后期的运维补数据、查看运行结果，指导您如何使用Dataphin完成基本的离线数仓构建。以帮助您快速了解Dataphin离线数仓建设的基础流程。使用Dataphin进行离线数仓建设的基本流程如下：主流程 描述 ...
概述
本文为您介绍什么是DataWorks，以及...HoloStudio基于交互式分析（Hologres）构建，通过可视化、引导式方式为交互式分析（Hologres）用户提供标准化、无门槛的开发服务和一站式实时数仓构建服务以及高效、便捷的管理服务，从而提升研发效率。
逻辑数仓
应用场景 不同用户角色使用逻辑数仓支持的应用场景：数据库及数仓开发人员：跨库查询与开发，业务数据逻辑归档、数据准备与供应、轻量数仓、数仓构建模拟、敏捷建仓、入仓等。运营分析及BI人员：数据准备与分析、跨库查询、查询与分析加速...
确定需求
在基于Dataphin构建与管理企业数据中台之前，首先需要确定数仓构建的目标与需求，进行全面的业务调研。您需要了解真实的业务需求是什么，以及确定整个业务系统能解决什么问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，...
Doris概述
统一数仓构建：一个平台满足统一的数据仓库建设需求，简化繁琐的大数据软件栈。基于Doris构建的统一数仓，替换了原来由Spark、Hive、Kudu、Hbase、Phoenix组成的旧架构，架构大大简化。数据湖联邦查询：通过外表的方式联邦分析位于Hive、...
数仓构建流程
数仓构建流程 下图为使用Dataphin构建数据仓库的基本流程。基本概念 在正式学习本教程之前，您需要了解以下基本概念：数据板块：数据板块定义了数据仓库的多种命名空间，是一种系统级的概念对象，是比主题域更高维度的业务划分方法，适用于...
关系图
使用关系图 构建数仓模型架构图 在新建的关系图页面，可根据业务需求执行如下模型构建操作：从待添加页签将模型列表中所需模型拖拽至右侧编辑画布，通过连线方式构建数据仓库模型架构图。如需在本地使用，也可以在完成关系图构建后，将该...
基于Flink+Hologres搭建实时数仓
搭建实时数仓 构建ODS层：业务数据库实时入仓 基于Catalog的 CREATE DATABASE AS（CDAS）语句 功能，可以一次性把ODS层建出来。ODS层一般不直接做OLAP或SERVING（KV点查），主要作为流式作业的事件驱动，开启binlog即可满足需求。Binlog是...
新用户免费试用
计算巢 Hologres PAI RDS实时同步至Hologres 了解使用DataWorks数据集成+Hologres构建实时数仓的思路，学习实时数仓中Hologres的加速查询功能和大屏展示效果。Hologres DataWorks（可选）DataV Flink+Hologres实时数据大屏 了解搭建实时数...
创建数仓分层
数仓分层是结合对业务场景、实际数据、使用系统的综合分析，对数据模型进行的整体架构设计及层级划分。用于将不同用途的数据，归类划分至不同的分层，便于您更好地组织、管理、维护数据。本文为您介绍如何创建并管理数仓分层。背景信息 ...
应用场景
3.实时数据仓库 3.1 数据总线替换传统数据库，构建实时数仓 从Lambda架构到Kappa架构，通过数据总线搭建原始数据层，实时明细层和实时汇总层，打造实时数据仓库。3.2 收益 统一的Kappa架构 传统Lambda架构的两条链路缩减为一条，大大降低...
基于Flink+Hologres搭建实时数仓
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
2024-04-01版本
对于OceanBase支持了源表CDC读取能力，帮您在OceanBase上构建实时数仓。在SQL增强方面，本版本提供了CUMULATE对更新流 WindowAggregate 新聚合算子的支持。至此版本，VVR完成了TUMBLE、HOP、CUMULATE和SESSION对更新流的完整支持，开源...
Flink+Hologres实时数据大屏
本文以GitHub公开事件数据为例，为您介绍使用Flink、Hologres构建实时数仓，并通过Hologres对接BI分析工具（本文以DataV为例），实现海量数据实时分析的通用架构与核心步骤。示例架构 搭建实时数仓时，Flink可对待处理数据进行实时清洗，...
通过MySQL分析实例同步至数仓版
构建实时数仓成本太高，公司留给数据分析预算有限，只能默默忍受越来越长的卡顿时间，殊不知在无限的忍受中公司错过了很多机会。此时，您可以在RDS MySQL控制台上创建一个MySQL分析实例，MySQL分析实例的复杂分析性能约为MySQL的100倍，...
文档修订记录
新说明 本文以GitHub公开事件数据为例，为您介绍使用Hologres+DataWorks数据集成构建实时数仓，并通过Hologres对接BI分析工具（本文以DataV为例）的基本步骤，实现海量数据的实时分析。RDS实时同步至Hologres 2023.07.11 新增产品形态。新...
RDS实时同步至Hologres
本文以GitHub公开事件数据为例，为您介绍使用Hologres+DataWorks数据集成构建实时数仓，并通过Hologres对接BI分析工具（本文以DataV为例）的基本步骤，实现海量数据的实时分析。示例架构 其中：待处理数据：本实践使用GitHub公开事件作为...
基于AnalyticDB构建企业数仓
本文将为您介绍如何基于AnalyticDB构建企业数仓，并进行运维和元数据管理等操作。开始本文的操作前，请首先创建工作空间，详情请参见 创建工作空间。配置AnalyticDB for MySQL 2.0数据源 进入数据源页面。登录 DataWorks控制台，切换至目标...
Delta Lake CDC构建增量数仓
应用CDC，可以方便的构建增量数仓。使用限制 仅EMR-3.41.0及后续版本（Delta Lake 0.6.1）和EMR-5.9.0及后续版本（Delta Lake 2.0）的集群，支持使用Delta Lake CDC功能。相关参数 SparkConf参数 参数 说明 spark.sql....
新功能发布记录
无 2023年11月 数仓版 类别 名称 说明 相关文档 新增 一键诊断 数仓版（3.0）推出一键诊断功能，可对指定时间段的集群运行状况发起诊断，结合监控数据、日志数据以及库表状态等信息进行联合分析，从集群的资源水位、负载变化、查询SQL、算...
应用场景
智能构建云上数仓，提高战略决策效率 场景：某集团在全国经营多家连锁超市，线上线下零售渠道及形态众多。痛点：因为业务系统多、数据来源多，经营所需的数据需求高频且多样化。但数据体系复杂、数据不统一，数据分析速度和数据准确一致性...
查看并管理数仓分层
您可以在 数仓分层 页面，对已创建的数仓分层进行如下管理操作：查看数仓分层概览。您可以在 数仓分层 页面，查看所有已创建数仓分层的基本信息，包括数仓分层的层级归属、分层名称、功能描述、最新更新时间及对应负责人等。快速了解数据...
支持的数据源
数仓版（3.0）通过Logstash导入数仓版 日志服务 数仓版（3.0）通过日志服务导入至数仓版 本地数据 LOAD DATA 数仓版（3.0）通过LOAD DATA导入至数仓版 导入工具 数仓版（3.0）通过导入工具导入至数仓版 Kettle 数仓版（3.0）通过Kettle导入...
如何获取更多的在线支持？
开发者社区：实时数仓Hologres Hologres有阿里云开发者社区官方团队号—— 实时数仓Hologres，团队会定期发布关于产品的最新咨询、学习路径、技术交流等，详情请关注：实时数仓Hologres。钉钉交流群 使用钉钉扫描如下二维码加入实时数仓...
实时数仓Hologres服务等级协议（SLA）
实时数仓Hologres服务等级协议（SLA）的详情，请参见 实时数仓服务等级协议。
行业模型模版
完整版：完整版的行业模版，由经验丰富的行业数仓架构师同学构建，包含了该行业通用数仓模型对应的数仓规划、数据标准、概念模型、逻辑模型、原子指标、派生指标等内容。数据建模 dw.idm.medium 及更高规格的客户可付费购买后使用。如需...
数仓开发任务流
数仓开发的项目空间由入仓解决方案和业务场景两部分组成。每个项目空间内可以创建多个业务场景，每个业务场景下又可添加多个任务流，用于实现复杂的数据处理和任务调度。前提条件 已创建项目空间。具体操作，请参见 创建项目空间。创建数仓...
实时数仓 Hologres
Hologres是一站式实时数据仓库引擎，支持海量数据实时写入、实时更新、实时分析，支持标准SQL（兼容PostgreSQL协议），支持PB级数据多维分析（OLAP）与即席分析（Ad Hoc），支持高并发低延迟的在线数据...提供离在线一体化全栈数仓解决方案。
ADB数仓版实例到期检测
ADB数仓版实例的到期时间距离当前时间大于参数设定的时间范围，视为“合规”，默认值：30天；ADB数仓版实例开启自动续费的实例，视为“合规”；本规则只适用于预付费资源，后付费资源实例，视为“不适用”。应用场景 确保为预付费实例及时...
Data Warehouse的创建
专业版CDP支持使用数据服务Data Warehouse，本文为您介绍如何在Data Warehouse服务中创建虚拟数仓，以管理、分析和操作Base集群中的数据。前提条件 由于Data Service集群的Management Console部署在内网中，因此需要通过SSH隧道访问。隧道...
计费概述
数仓版弹性模式 详细计费规则，请参见 数仓版（3.0）计费项。数仓版预留模式 详细计费规则，请参见 预留模式集群版。资源包 存储资源包是云原生数据仓库AnalyticDB MySQL版推出的存储空间抵扣计划，用于抵扣包年包月的数仓版弹性模式集群版...
配置及使用数仓分层检查器
数仓分层检查器用于规范目标分层中模型及指标的命名，制定模型及指标的命名规范，在模型和指标创建时，系统会根据该规范自动生成表名，模型发布成表后，使用方也能通过表名快速了解表的业务信息。本文为您介绍如何配置及使用数仓分层检查器...
创建应用数据源DMS
本文为您介绍如何将DMS逻辑数仓添加为Quick BI应用数据源。前提条件 已创建DMS逻辑数仓，并开通一键JDBC功能。请参见 逻辑数仓一键JDBC。操作步骤 登录 Quick BI控制台。请按照下述步骤添加数据源。从 创建数据源入口 进入创建数据源界面。...
创建项目空间
数据管理DMS数仓开发通过项目空间、业务场景和任务流三级目录讲行项目管理，同时支持数仓分层管理，有利于清晰地管理某一情景下的数据仓库管理需求，充分满足各类复杂的数仓开发和管理需求。项目空间是数仓开发、管理和运维的基本单位，...
AnalyticDB MySQL 2.0数据导入
由于 数仓版（3.0）与 AnalyticDB for MySQL 2.0的架构不同，因此 AnalyticDB for MySQL 2.0不能升级到 数仓版（3.0）。您需要迁移数据和应用到 数仓版（3.0）。本文介绍数据和应用的迁移方法。背景信息 AnalyticDB for MySQL 2.0随后会...
实践教程
针对各种业务需求，E-MapReduce提供相关的实践教程，您可以根据本文查看适合您业务的实践教程文档。EMR on ECS 手工缩容节点组 更换集群损坏的本地盘 为集群配置弹性伸缩...即席查询 数仓场景：增量数据实时统计 数仓场景：分钟级准实时分析
数仓版变配湖仓版
湖仓版（3.0）在 数仓版（3.0）的能力基础上，从数据的采集、存储、计算和应用等方面做了全面升级。您可以将 数仓版（3.0）集群变配为 湖仓版（3.0），体验更多功能。变配方式有两种，包括：直接变配和克隆集群。本文主要介绍如何通过直接...
管理资源弹性计划
数仓版（3.0）DescribeElasticPlan-查询弹性计划 查询 AnalyticDB MySQL 数仓版（3.0）集群的弹性计划。ModifyElasticPlan-修改分时弹性计划 修改 AnalyticDB MySQL 数仓版（3.0）集群的弹性计划。DeleteElasticPlan-删除分时弹性计划 删除...
- 产品推荐
- 这些文档可能帮助您