集成与开发概览
您可以通过流批一体的数据集成对在线数据进行入仓、加工处理，通过数据开发模块对数仓数据进行分层开发，之后结合数据服务和可视化能力对外提供数据使用和分析服务。您也可以将这些功能作为基础能力集成到您自己的数据平台中使用，建设属于...
配置及使用数仓分层检查器
当开发者在该数仓分层中新建中文名称为 近1天_A门店_用户数量、近30天_北京市_B商品_销售金额、A门店_用户数量_近7天、A门店_用户数量 的派生指标时，保存指标将触发命名规则的检测，检测结果如下表所示。指标名称 是否符合数仓分层的命名...
功能特性
通过Hologres Binlog，实现数仓分层间的全链路实时开发，缩短数据端到端加工延迟，同时提升数据开发效率。订阅Hologres Binlog 实时物化视图 实时物化视图将对明细表的数据进行预先聚合，存储为物化视图，通过查询物化视图，减少计算量，...
作业开发入门概述
作业开发流程概述 AnalyticDB MySQL 数仓分层包含以下三层。ODS：数据运营层，对源数据进行ETL处理。在实际业务中，ODS层会从数据源抽取数据。为了确保新用户能够轻松完成入门教程，本教程中将向ODS层写入测试数据。DWD：数据明细层，对ODS...
概览
多团队协作与分层设计：针对多团队共同开发的项目，CDK可以通过版本控制工具促进协同工作，并支持基础设施的分层设计，使得不同的团队可以专注于各自负责的服务或组件。自动化部署与持续集成/持续部署（CI/CD）流水线：CDK可以无缝集成到...
Hologres推荐的数仓分层
为了满足业务场景的不同需求，建议您通过如下图所示三种方式进行数据分层和处理，以实现更加敏捷的开发需求。场景一（即席查询，写入即服务）：在Flink中进行DWD数据明细层预加工，加工完的数据直接写入Hologres，由Hologres提供OLAP查询和...
魔笔有什么方便的学习资料？
通过基础课程开始，到进阶课程、高级课程和认证课程，通过这些课程的学习，全面地了解低代码开发平台魔笔，提高您的魔笔搭建技巧。通过学习案例，可以对平台其中各类功能进行更细节的学习和了解。魔笔用户指南 应用管理 模块管理 物料市场 ...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
产品简介
智能搭建（Mobile Pages Building Service，简称 MBS）是一款互联网应用页面的快速搭建工具，无需研发投入开发，零代码快速搭建页面。MBS 实现了可视化、标准化、组件化的搭建方式，提供丰富的基础组件和多个预置业务组件，同时支持使用...
创建数仓分层
数仓分层是结合对业务场景、实际数据、使用系统的综合分析，对数据模型进行的整体架构设计及层级划分。用于将不同用途的数据，归类划分至不同的分层，便于您更好地组织、管理、维护数据。本文为您介绍如何创建并管理数仓分层。背景信息 ...
Hologres开发规范
本文将为您介绍，Hologres在开发过程中的相关规范，帮助您快速了解Hologres的开发要求，避免进行错误的操作。数据域规范 数仓分层 数据仓库以分层建设为主包含如下几类分层，其中CDM包含DWD、DWS、DIM。在Hologres中通过Schema隔离不同的...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
查看并管理数仓分层
本文将为您介绍如何查看并管理已创建成功的数仓分层及相关信息。您可以在 数仓分层 页面，对已创建的数仓分层进行如下管理操作：查看数仓分层概览。您可以在 数仓分层 页面，查看所有已创建数仓分层的基本信息，包括数仓分层的层级归属、...
建模空间
模型设计师设置好 数据模型设计空间 与 数据研发工作空间 的关系后，模型设计师在进行模型（汇总表、维度表、明细表、应用表）发布时，可以选择将模型物化到被关联的某一个研发空间，后续数据开发工程师即可在对应的工作空间进行数据开发...
首页
单击左上方的 图标，选择 全部产品>数据建模>数仓规划，默认进入 数仓分层 页面。单击顶部菜单栏右侧的 首页，进入智能数据建模的首页。查看模型概览 在DataWorks智能数据建模首页，您可以查看当前租户内创建的各类模型及派生指标数量、...
数仓规划概述
使用DataWorks进行数据建模时，数仓架构师或者模型小组成员可以在数仓规划页面对数据分层、业务分类、数据域、业务过程、数据集市、主题域进行设计。完成设计后，模型设计师在建模过程中可以依赖数仓规划中的数据分层、业务分类、数据域、...
业务过程
单击左上方的 图标，选择 全部产品>数据建模>数仓规划，默认进入 数仓分层 页面。在 数仓规划 页面的左侧导航栏，单击 公共层>业务过程，进入 业务过程 页面。创建业务过程。在 业务过程 页面，单击 新建业务过程。在 新建业务过程 对话框...
常见问题
如果误删除OSS-HDFS服务冷热分层对应的生命周期规则怎么办？开启冷热分层后，OSS会自动创建同时包含转换为低频、归档以及冷归档类型三种策略的生命周期规则。如果您误删除了其中一种或多种策略的生命周期规则，可能会造成数据无法执行冷热...
冷热数据分层存储
云数据库ClickHouse 提供了冷热数据分层存储的功能。您可以根据查询频率将数据存储在不同类型的磁盘中。本文介绍如何开启冷热数据分层存储功能和设置分层存储策略。前提条件 云数据库ClickHouse 集群 为社区兼容版且 版本为20.8及以上版本...
概述
支持冷热数据分层存储功能，使用OSS等更低成本的存储介质，将冷热数据进行分层存储。将访问频率和更新频率低的数据转存到OSS中，可以有效降低存储成本。本文介绍了冷数据分层存储的优势和技术原理。功能优势 当 开启冷数据分层存储 后，...
SLS日志库开启智能冷热分层存储
SLS日志库开启智能冷热分层存储功能，视为“合规”。应用场景 开启SLS日志库的智能冷热分层存储可以降低存储成本、提高访问性能、优化数据处理、并简化管理和维护。风险等级 默认风险等级：中风险。当您使用该规则时，可以按照实际需求变更...
概述
PolarDB PostgreSQL版（兼容Oracle）支持冷热数据分层存储功能，使用OSS等更低成本的存储介质，将冷热数据进行分层存储。将访问频率和更新频率低的数据转存到OSS中，可以有效降低存储成本。本文介绍了冷数据分层存储的优势和技术原理。功能...
使用Python SDK创建分层存储Logstore
本文介绍通过Python SDK创建分层存储Logstore的代码示例。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_SECRET。具体操作，请...
大规格分层存储
云数据库ClickHouse的云原生版集群不支持分层存储功能。云数据库ClickHouse 社区兼容版集群在扩容期间支持读写。添加云盘 登录 云数据库ClickHouse控制台。在页面左上角，选择目标集群所在的地域。在 集群列表 页面，选择 默认实例列表，...
开启智能存储分层
日志服务提供智能分层存储功能，降低您长周期存储的成本，并同时保证日志的查询、分析、可视化、告警、投递和加工等能力不受影响。分层存储数据的存储费用按照存储空间计费，数据转换不会产生费用。功能说明 日志服务提供热存储、低频存储...
分层采样
给定一个分组列，分层采样算法组件按照这些列的不同值，将输入数据分成不同的组，并在每组中分别进行随机采样。组件配置 您可以使用以下任意一种方式，配置分层采样组件参数。方式一：可视化方式 在 Designer 工作流页面配置组件参数。页签...
用户阶段标签
用户阶段标签是按照您需要的用户分层逻辑对用户进行筛选，类似于人群筛选，筛选出满足不同条件的用户，给他们打上不同的分层标签。例如：筛选出购买总金额≥1000且爱好美食的用户，打上“营销优先级”为“优先级1”的标签；筛选出购买总...
如何分配开发任务
在团队协同开发任务中，管理员创建好应用之后，可以将应用的开发任务分配给不同的团队成员。为应用分配开发成员 管理员在「应用列表」找到要进行开发任务分配的应用，点击进入「应用详情页」，在左侧菜单点击「开发者管理」，点击「添加...
关于开发小助手
在将开发工程接入 mPaaS 后或基于 mPaaS 插件创建工程后，即可将开发小助手接入开发工程（点击快速了解如何使用开发小助手），使用开发小助手进行调试、帮助开发。说明 开发小助手有以下使用限制：开发小助手仅支持组件化 Portal&Bundle 接...
使用Go SDK创建分层存储Logstore
本文介绍通过Go SDK创建分层存储Logstore的代码示例。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_SECRET。具体操作，请参见 ...
管理布局
本文为您介绍如何通过DDM管理布局。为了保持模型设计ER图的美观性，在模型设计时可以对模型进行布局，目前提供分层布局、正交布局两种布局算法。模型设计时，在 开始 页面，您可以单击 布局 对模型进行布局操作，默认为正交布局。
概述
IoT Studio提供了组件开发功能，便于开发者开发、发布和管理自己研发的组件，并将其发布到可视化工作台中用于可视化页面搭建。从而满足开发者的需求，提升组件丰富性，为可视化搭建提供无限可能。使用说明 组件开发功能升级中，暂停新用户...
发布与使用
个人组件开发验证完成后，为方便开发者使用个人组件开发可视化Web应用，需要完成个人组件的发布。本文介绍如何发布个人组件。背景信息 个人组件开发完成后：支持开发者在Web可视化编辑页面的个人开发组件列表预览未发布组件。支持开发者...
团队合作开发
云开发平台通过设计，使得您的应用在第一次被初始化，准备完环境之后，未来所有的开发者加入，都不需要额外去准备开发环境，任何一个新的开发者加入到任何一个新的应用，立即就可以开始进行业务逻辑的开发。云开发平台允许团队管理员去为每...
创建组件
开发组件前，需先创建组件来定义组件名称、类型和功能特性描述，便于组件发布后引导开发者使用。本文介绍如何在组件开发工作台创建组件。新增组件 登录 物联网应用开发控制台，在页面左上角选择对应实例后，在左侧导航栏单击 应用开发。在 ...
使用开发小助手
接入开发小助手 为保证功能的完整性和独立性，离线包中心（需先集成 H5 容器及离线包）功能需要以 离线包开发助手 的形式在 mPaaS 插件中单独接入，其余功能通过接入 开发小助手 完成接入。离线包小助手单向依赖开发小助手，离线包开发...
冷数据分层存储计费规则
本文介绍开启冷数据分层存储后，在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后，支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据分层存储的详细介绍，请参见 冷数据分层存储...
关于开发小助手
开发小助手 DevHelper 提供了常用的辅助开发工具和 mPaaS 专用辅助工具，该工具集通过 mPaaS 插件提供给开发者。在将开发小助手接入开发工程后，您就可以使用开发小助手进行调试、帮助开发。在应用中，开发小助手以悬浮窗的形式出现，在...
日志分层存储与分析
本视频介绍通过数据加工和数据投递功能实现日志分层存储、分析的解决方案。
冷数据分层存储计费规则
本文介绍开启冷数据分层存储后，在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后，PolarDB PostgreSQL版（兼容Oracle）支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据分层存储...
- 产品推荐
- 这些文档可能帮助您