变更管控
变更管控功能是指在变更环节（如提交、发布、运维操作等），通过配置...规则配置完成后，支持配置规则及策略生效灵活开关，以调整管控规则及策略配置，实现不同的管控效果，从而减少人工干预成本，也能进一步提升平台建设的规范性和稳定性。
变更管控
变更管控功能是指在变更环节（如提交、发布、运维操作等），通过配置...规则配置完成后，支持配置规则及策略生效灵活开关，以调整管控规则及策略配置，实现不同的管控效果，从而减少人工干预成本，也能进一步提升平台建设的规范性和稳定性。
离线数仓构建流程概述
以帮助您快速了解Dataphin离线数仓建设的基础流程。使用Dataphin进行离线数仓建设的基本流程如下：主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin...
离线数仓构建流程概述
以帮助您快速了解Dataphin离线数仓建设的基础流程。使用Dataphin进行离线数仓建设的基本流程如下：主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin...
确定需求
需求分析 在未考虑数据分析师、业务运营人员的数据需求的情况下，单纯根据业务调研建设的数据仓库，可能可用性较差。完成业务调研后，您需要进一步收集数据使用者的需求，进而对需求进行深度思考和分析，并改进数据仓库。需求分析的途径有...
明细数据层（DWD）
这四个业务过程不仅是交易过程中的重要时间节点，而且也是下游统计分析的重点，因此A公司的交易事务事实表设计着重从这四个业务过程进行展开。为了便于进行独立的分析研究，我们应该为每个业务过程建立一个事实表。本教程中，我们选择交易...
数仓构建流程
例如，您可以划分出商品域、交易域、会员域等，用于存放不同意义的指标。业务实体：业务实体包含业务对象和业务活动：业务对象：即参与业务的主体和客体，通常情况下业务对象是实际存在、不因事件发生而存在的对象。例如客户、员工、产品等...
创建数据板块
数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。在使用规范建模前，您需要完成数据板块的创建。本文为您介绍如何新建数据板块。前提条件 仅支持 智能研发版。若需使用，当前租户还需开通智能研发模块。在开始执行操作前...
创建数据板块
数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。在使用规范建模前，您需要完成数据板块的创建。本文为您介绍如何新建数据板块。前提条件 仅支持 智能研发版。若需使用，请升级当前版本。升级版本，请参见 升级。在开始...
使用限制
在使用Dataphin前，建议您先了解产品相关使用限制，确保业务可顺利开展。本文为您介绍使用Dataphin过程中的操作限制。浏览器限制 您需要使用Google Chrome浏览器90.x及...您也可以在执行时设置固定的值，提高代码在不同环境执行时的灵活性。
新建基线监控
数据业务产出的核心质量指标是及时性与准确性，您可以按照数据业务的重要程度，用质量规则监控来实现内容保障，用基线监控来实现时效保障。基线一旦建立后，会按照调度依赖关系自动识别圈定需要被纳入监控范围的任务，并按照设定的预警时间...
新建基线监控
数据业务产出的核心质量指标是及时性与准确性，您可以按照数据业务的重要程度，用质量规则监控来实现内容保障，用基线监控来实现时效保障。基线一旦建立后，会按照调度依赖关系自动识别圈定需要被纳入监控范围的任务，并按照设定的预警时间...
填写网站/App信息（备案多个网站/App）
网站建设方案书模板请参见 网站建设方案书需包含的内容。提供备案承诺书。单位 是 是 同一个ICP备案订单下，一次可以备案多个网站，每个网站对应一个域名，域名总数最多不超过30个。说明 如有特殊情况需备案更多域名，需提供以下材料并将...
数仓分层
可以结合企业的数据使用特点，将明细事实表的某些重要属性字段做适当冗余，也即宽表化处理。在Dataphin中，明细数据层的表通常也被称为事实逻辑表。汇总数据层（DWS，Data Warehouse Summary）：以分析的主题对象作为建模驱动，基于上层的...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
新建FusionInsight Flink计算源
重要 添加的资源队列个数最多支持 10个。若需删除多余的资源队列，您可单击 进行删除。删除后，可能会影响该资源队列上已有作业的正常运行。Flink任务资源队列 支持Kerberos认证和无认证方式。选择Kerberos认证方式，要填写Principal和上传...
创建服务项目
适用于使用范围广，影响面大的重要API，如果变更发布到线上会严重影响下游时可以拦截。被组合API引用时，拦截不允许发布：API被组合API引用时，不允许新版本发布到线上，保证组合API的正常调用，调用受影响的应用由开发人员线下通知对应...
逻辑结构说明
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
步骤五：规范建模
业务分析建模：行业中重要的以及常用的分析方法与分析视角。在逻辑模型基础上,将业务分析问题转换为Dataphin特有的派生指标,并进一步提炼出原子指标和业务限定。步骤一：新建主题域 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作...
步骤五：规范建模
业务分析建模：行业中重要的以及常用的分析方法与分析视角。在逻辑模型基础上,将业务分析问题转换为Dataphin特有的派生指标,并进一步提炼出原子指标和业务限定。步骤一：新建主题域 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作...
基线监控概述
将任务或明细汇总表字段添加到基线监控的保障对象后，基线监控 能够及时捕捉导致基线上的任务无法按时完成的异常情况并提前预警，保障复杂依赖场景下重要数据能在预期时间内顺利产出，帮助您降低运维成本、避免无效报警、自动监控所有重要...
基线监控概述
将任务或明细汇总表字段添加到基线监控的保障对象后，基线监控 能够及时捕捉导致基线上的任务无法按时完成的异常情况并提前预警，保障复杂依赖场景下重要数据能在预期时间内顺利产出，帮助您降低运维成本、避免无效报警、自动监控所有重要...
安全白皮书概述
Dataphin面向各行各业大数据建设、管理及应用诉求，一站式提供从数据接入到数据消费全链路的智能数据建设与资产治理的大数据能力，包括产品、技术和方法论等，可帮助企业一站式构建生产经济、质量可靠、安全稳定、消费便捷的企业级数据资产...
准备阿里云账号
重要 为保证AccessKey ID和AccessKey Secret的安全性，请勿借给他人使用，一旦有泄漏的风险，请及时禁用或更新AccessKey。AccessKey只在创建时显示AccessKey ID和AccessKey Secret，不提供查询功能，请妥善保管。禁用AccessKey后，使用该...
创建RocketMQ数据源
本文为您介绍如何创建RocketMQ数据源。背景信息 RocketMQ即阿里云消息队列RocketMQ...重要 创建RocketMQ数据源时不支持测试数据源是否可以和Dataphin进行正常的连通，因此需要您确保连接信息的正确性。单击 确定，完成RocketMQ数据源的创建。
创建Redis数据源
通过创建Redis数据源能够实现Dataphin向Redis写入业务数据。...重要 创建Redis数据源时不支持测试数据源是否可以和Dataphin进行正常的连通，因此需要您确保连接信息的正确性。您可根据 附录：网络连通解决方案 自行排查。
新建Flink计算源
重要 通常情况下，未选择集群类型也能够测试连接通过；个别情况未选择可能导致测试连接失败，建议进行选择。Flink计算引擎配置信息 Flink任务资源队列 Flink任务提交到yarn的队列名称。命名规范及限制说明如下：长度限制：队列名称长度不能...
创建Hudi数据源
本文为您介绍如何创建Hudi数据源。背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据...重要 创建Hudi数据源时不支持测试数据源是否可以和Dataphin进行正常的连通，因此需要您确保连接信息的正确性。您可根据 网络连通解决方案 自行排查。
运行设置
为了节省调度资源，在确保不存在资源与状态冲突的前提下，您可以设置...重要 每次修改配置前已经生成的运行实例不受影响。后续步骤 开启共享资源开关后，您就可以创建、配置及提交离线计算。具体操作，请参见 创建、配置并提交离线计算模板。
开通Dataphin
增值功能包 智能运维（选购）智能运维包含 基线监控 及 限流配置 功能，为业务数据产出时效性及系统稳定性提供保障，同时能降低人工运维成本，提升运维效率。系统默认赠送 3条基线+1条限流（免费），如果您希望开通更高规格，可选择：10条...
创建达梦（DM）数据源
达梦（DM）数据库吸收借鉴当前先进新技术思想与主流数据库产品的优点，融合了分布式、弹性计算与云计算的优势，具有灵活性、易用性、可靠性、高安全性等特点。如果您使用的是达梦（DM），在导出Dataphin数据至达梦（DM），您需要先完成达梦...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
创建StarRocks数据源
StarRocks具有高度可扩展性、可用性且易于维护。它在OLAP场景提供多种支持，例如实时分析、即席查询、数据湖分析等。更多详情可参考 StarRocks官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建...
管理明细及汇总表任务字段
重要 单字段补数据模式下，Dataphin系统不会自动识别并选中数据一致性或同物化节点原则下的相关字段进行操作，可能影响下游数据正确性。补数据：在指定的历史业务日期内对字段（指标）进行数据回刷。更多信息，请参见 周期任务补数据。修改...
管理明细及汇总表任务字段
重要 单字段补数据模式下，Dataphin系统不会自动识别并选中数据一致性或同物化节点原则下的相关字段进行操作，可能影响下游数据正确性。补数据：在指定的历史业务日期内对字段（指标）进行数据回刷。更多信息，请参见 附录：周期任务补数据...
重庆备案规则
网站建设方案书（非必选）：域名前缀超过5个时（含5个），需提供每个域名的网站建设方案书和情况说明书。需要提供的资料请根据审核员给的地址邮寄至阿里云。网站负责人人脸核验。更多详情请参见 ICP备案主体为企业或组织。ICP备案流程概述 ...
网站建设方案书
下表列出了备案主体为个人和企业时，需要提供网站建设方案书的场景：备案主体 前缀不一致的域名数量 要求 企业 大于31个（不包含31个）需提供每个域名的网站建设方案书，以及加盖备案专用章的阿里云保证书。相同前缀域名可以不用提供。个人...
新建实时计算模板
在该要求下实时任务的稳定性、低延迟及高容灾变得尤为重要。为解决如上需求，通常在生产环境中通过双链路及以上实现实时任务的主备容灾处理。相对的，链路数量的增加将会导致维护成本和难度的提高。如在变更任务时，需手动进行变更，非常...
新建实时计算模板
在该要求下实时任务的稳定性、低延迟及高容灾变得尤为重要。为解决如上需求，通常在生产环境中通过双链路及以上实现实时任务的主备容灾处理。相对的，链路数量的增加将会导致维护成本和难度的提高。如在变更任务时，需手动进行变更，非常...
数据服务概述
数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。前提条件 已购买 数据服务 增值服务，开通Dataphin ...
- 产品推荐
- 这些文档可能帮助您