变更管控
支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。当前 Dataphin支持发布管控功能。发布管控功能是支持基于用户已经设定好的管控规则及生效策略，在任务发布前执行对应的检查，以判断任务是否符合发布条件。针对校验不...
变更管控
支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。当前 Dataphin支持发布管控功能。发布管控功能是支持基于用户已经设定好的管控规则及生效策略，在任务发布前执行对应的检查，以判断任务是否符合发布条件。针对校验不...
标签工厂新手指引
行为关系：行为关系指通过具体的行为定义实体之间的关系，如“用户购买商品”通过“购买”这个行为描述了“用户”行为主体和“商品”行为对象这两个实体之间的关系，定义好的行为关系可以用于开发行为统计、行为偏好以及规则组合类型的标签...
Dataphin智能数据建设与治理服务等级协议（半托管）
版本生效日期：2024年03月26日 本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的智能数据建设与治理（简称“Dataphin”）的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于...
实时模式依赖关系配置
输入 virtual 搜索虚拟节点（每个租户或企业在初始化时都会有一个根节点）。说明 节点的输出名称是全局唯一的，且不区分大小写。单击 确定新增。同时您还可以单击 操作 列下的 图标，删除已添加的依赖节点。当前节点 通过执行如下操作，...
实时模式依赖关系配置
输入 virtual 搜索虚拟节点（每个租户或企业在初始化时都会有一个根节点）。说明 节点的输出名称是全局唯一的，且不区分大小写。单击 确定新增。同时您还可以单击 操作 列下的 图标，删除已添加的依赖节点。当前节点 通过执行如下操作，...
去设计（可视化编辑）
本文介绍了云·原生建站的栏目管理-编辑流程。选择一个栏目，点击【去设计】，进入可视化编辑页面。1.【导航】：将鼠标移至通用导航处，双击，系统弹出导航窗口，可以对导航进行编辑修改，删除、排序等操作，注意：栏目和导航不是一一对应...
核心概念
真实的数据是存储在计算引擎的物理表中，这些物理表就是逻辑表的物化表，一个逻辑表可能有多个物化表（只有有主键的逻辑表才能有多个物化表，每个物化表都包含主键字段）。相关参考 关于部分基本概念的理解，您可以参考规范定义最佳实践，...
测试环境
DLA Spark+OSS配置如下：配置名称 规格要求 数量 Driver medium（2核8 GB）1个 Executor medium（2核8 GB）39个 自建Hadoop+Spark集群配置如下：配置名称 规格要求 数量 Master 4核8 GB 2个 Slave 8核32 GB，4个500 GB的高效云盘 5个 说明 ...
图片管理
本文介绍了云·原生建站的图片管理流程。1.【资源库】->【图片列表】->【添加图片】登录系统后台管理页面，依次点击【资源库】、【图片管理】、【图片列表】，点击【添加图片】，可以上传图片。2.【资源库】->【图片列表】->【新增分类】...
视频管理
本文介绍了云·原生建站的视频管理流程。1.【资源库】->【视频列表】->【添加视频】登录系统后台管理页面，依次点击【资源库】、【视频管理】、【视频列表】，点击【添加视频】，可以上传视频。2.【资源库】->【视频列表】->【新增分类】...
数仓构建流程
本文为您介绍如何基于阿里巴巴OneData方法论最佳实践，使用Dataphin助力企业数据中台的建设与管理，快速构建标准、规范的数据仓库。数仓构建流程 下图为使用Dataphin构建数据仓库的基本流程。基本概念 在正式学习本教程之前，您需要了解...
配置PostgreSQL输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。表 选择来源表：如果 来源表量 选择了 单表，则单击 图标，选择输入的 表。如果 来源表 选择了 多表，则执行以下操作，添加表：...
配置PostgreSQL输入组件
多表：适用于将多个表的业务数据同步至同一个目标表的场景。多个表的数据写入同一个数据表时，使用union算法。更多union说明，请参见 交集（INTERSECT）、并集（UNION）和补集（EXCEPT）。表 选择来源表：如果 来源表量 选择了 单表，则...
概念建模概述
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
自建数据库与RDS性能对比的注意事项
您可以采用以下其中一种部署架构：应用、自建数据库和RDS实例的主节点位于同一个可用区。自建数据库与RDS实例的主节点位于同一个可用区。应用位于同一地域下的另一个可用区。性能规格 自建数据库所在ECS实例和RDS拥有相同的CPU核数与内存。...
自建数据库与RDS性能对比的注意事项
您可以采用以下其中一种部署架构：应用、自建数据库和RDS实例的主节点位于同一个可用区。自建数据库与RDS实例的主节点位于同一个可用区。应用位于同一地域下的另一个可用区。性能规格 自建数据库所在ECS实例和RDS拥有相同的CPU核数与内存。...
概念建模概述
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
自建数据库与RDS性能对比的注意事项
您可以采用以下其中一种部署架构：应用、自建数据库和RDS实例的主节点位于同一个可用区。自建数据库与RDS实例的主节点位于同一个可用区。应用位于同一地域下的另一个可用区。性能规格 自建数据库所在ECS实例和RDS拥有相同的CPU核数与内存。...
创建PostgreSQL数据源
不得超过128个字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类打标，...
知识付费
视频、图文、音频均支持设置付费，还可对多个视频、音频或图文内容打包成一个专栏，进行售卖。手机版效果如下图：二、功能教程 1.开启知识付费功能 1.1 在管理后台【产品-功能设置-知识付费产品】中将知识付费功能开启。选择需要开启的内容...
创建Oracle数据源
背景信息 Oracle是一款可移植好、可靠性好、适应高、功能强大的关系型数据库。如果您使用的是Oracle，在对接Dataphin进行数据开发时，您需要先完成Oracle数据源的创建。更多Oracle信息，请参见 Oracle官网。权限说明 仅支持具备新建数据源...
创建Hologres数据源
背景信息 Hologres即阿里云交互式分析Hologres，是阿里巴巴自主研发的一款交互式分析产品。如果您使用的是Hologres，在对接Dataphin进行数据开发时，您需要先完成Hologres数据源的创建。更多Hologres信息，请参见 什么是实时数仓。使用限制...
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
创建ClickHouse数据源
不得超过128个字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类打标，...
创建Microsoft SQL Server数据源
不得超过128个字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类打标，...
使用限制
不建议将同一个物理数据库（配置完全相同）配为两个数据源。项目管理 项目名称 建议当配置数据源为MaxCompute类型时，项目英文名必须与MaxCompute的Project英文名一致。项目名不可以 LD_/ld_开始，以免与业务板块名冲突，导致查询功能不...
确定需求
业务流程通常与业务板块紧密耦合，对应一个或多个表及其所属数据源，可以作为构建数仓的原始数据来源。下表展现的是一个营销业务板块的业务流程模块。业务流程 A公司电商营销管理 商品管理 Y 用户管理 Y 购买流程 Y 交易订单 Y 用户反馈 Y ...
新建ArgoDB数据源
通过创新建ArgoDB数据源能够实现Dataphin读取ArgoDB的业务数据或向ArgoDB写入数据。本文为您介绍如何新建ArgoDB数据源。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
如何在百度站长平台获取密钥？
一、教程介绍 百度站长平台需完善个人信息，验证网站后才可获取密钥。本文指引验证与获取密钥相关步骤。二、操作步骤 1.完善个人信息 登录“百度站长平台”点击登录，根据网站提示完善账户信息。2.验证网站 2.1 填写网站域名信息 注：协议...
逻辑结构说明
业务模型层按照不同的业务形态，划分出业务板块，一种业务形态对应一个业务板块。同一种业务形态（业务板块）内，根据实际业务情况，将业务实体（维度和业务过程）划分到不同的数据域。基于维度和业务过程创建明细逻辑表（包括维度逻辑表和...
创建PolarDB数据源
不得超过128个字符。数据库类型 基于PolarDB底层的引擎类型，选择对应的数据库类型：如果PolarDB底层的引擎为MySQL，则选择 MYSQL。如果PolarDB底层的引擎为PostgreSQL，则选择 POSTGRE_SQL。数据源配置 基于业务数据源是否区分生产数据源...
创建MySQL数据源
常用于网站、应用程序和商业产品，是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的...
升级
请您仔细核对购买信息并阅读 智能数据建设与治理服务协议，确认无误后选中 智能数据建设与治理服务协议。单击 去支付，支付成功后即可开始升级开通增值功能包。正在通过升级开通增值功能包的Dataphin实例，在Dataphin管理控制台页面，显示 ...
配置Microsoft SQL Server输入组件
切分建 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置Microsoft SQL Server输入组件
切分建 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。...
配置AnalyticDB for MySQL 3.0输入组件
切分建 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 配置数据同步过程中每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤适用于以下两种场景：固定...
网络连通解决方案
第三方云自建数据源 网络连通的常见问题 数据源网络连接测试不通时，建议您从以下几个方面排查：数据源是否已正常启动。以MySQL数据源为例，您可以在本地PC上 telnet 127.0.0.1 3306，查看数据库端口是否已开启。Dataphin无法访问数据源...
设置Dataphin实例的计算引擎
校验成功后，单击 确认并开始数据建设，即可开始数据建设。后续步骤 完成设置Dataphin实例的计算引擎后，您就可以准备后续数据研发过程中用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作，请参见 准备数据源和计算源。
- 产品推荐
- 这些文档可能帮助您