配置Hologres输出组件
写入模式包括SDK模式和SQL模式，适用场景说明如下：Hologres 0.8版本推荐选择SDK模式。Hologres 0.9及之后版本推荐选择SQL模式。加载策略 向目标数据源（Hologres数据源）写入数据时，数据写入表中的策略。加载策略包括覆盖和忽略，适用...
配置IBM DB2输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或 有索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
配置IBM DB2输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或 有索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
创建业务限定
英文名称 输入英文名称时，Dataphin将根据输入数据实时匹配数据标准中已配置的词根，您可以选择推荐的词根作为业务实体的英文名称。更多信息，请参见 新建和管理词根。英文名称需要满足以下命名规则：仅支持字母、数字或下划线（_）。不能...
创建业务限定
英文名称 输入英文名称时，Dataphin将根据输入数据实时匹配数据标准中已配置的词根，您可以选择推荐的词根作为业务实体的英文名称。更多信息，请参见 新建和管理词根。英文名称需要满足以下命名规则：仅支持字母、数字或下划线（_）。不能...
Dataphin免费试用申请
申请信息填写完后，勾选 我已阅读并同意《Dataphin智能数据建设与治理试用服务协议》，单击 免费试用，体验Dataphin功能。相关文档 试用开通成功后，您可按照 Dataphin新手引导 一步步体验Dataphin的研发流程，也可按照 导入模型 来导入...
配置Vertica输入组件
切分建 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或 有索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 每个并发SQL语句读取数据的条数。...
步骤一：准备工作
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
配置Vertica输入组件
切分建 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或 有索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 每个并发SQL语句读取数据的条数。...
步骤一：准备工作
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
配置Hologres输出组件
写入模式包括SDK模式和SQL模式，适用场景说明如下：Hologres 0.8版本推荐选择SDK模式。Hologres 0.9及之后版本推荐选择SQL模式。加载策略 向目标数据源（Hologres数据源）写入数据时，数据写入表中的策略。加载策略包括覆盖和忽略，适用...
Ververica Flink实时任务资源自定义
图中当前的资源配置就是系统默认为您推荐的资源配置。单击需要配置资源的Group右上角的 后，在 自定义配置Group执行参数 和 自定义配置StreamExecCalc执行参数 对话框中配置参数。自定义配置Group执行参数。参数 描述 CPU 定义当前节点运行...
Ververica Flink实时任务资源自定义
图中当前的资源配置就是系统默认为您推荐的资源配置。单击需要配置资源的Group右上角的 后，在 自定义配置Group执行参数 和 自定义配置StreamExecCalc执行参数 对话框中配置参数。自定义配置Group执行参数。参数 描述 CPU 定义当前节点运行...
元数据仓库共享模型概述
业务租户：统称为 开发租户，进行数据中台建设的租户，即进行数据开发和治理的核心使用租户。一个Dataphin实例可以创建多个开发租户，由元仓租户在租户设置页面创建并分配可用资源（数据处理单元数、质量规则数等）。元仓共享模型数据说明 ...
开通Dataphin
注意事项 开通Dataphin前，请您了解以下几点：购买前建议您先联系阿里云 售前咨询 并提供企业数据建设需求及背景信息。待阿里云售前咨询帮您确认Dataphin当前版本及功能是否符合您的需求后，会为您开通购买权限。Dataphin不支持无条件退款...
引入预制模型
使用自有的MaxCompute项目：若您希望使用完整的Dataphin功能，推荐您选择使用自有的MaxCompute项目。说明 使用自有的MaxCompute项目，请先 创建MaxCompute项目，并在 管理->基础属性 中开启Decimal2.0。导入模型时将在您创建的MaxCompute...
配置Teradata输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
创建元数据
如果业务数据的字段类型不在上述字段类型范围内，推荐 您选择String。Rowkey描述：填写对Rowkey字段的简单描述。列字段配置 新建列字段 列簇名称：配置为HBase业务数据源中实际的列簇名称。列字段名称：配置为HBase业务数据源中实际的列...
配置Alibaba Blink实时模式资源
资源配置类型 系统推荐配置 即实时计算Flink配置细粒度资源的智能模式（BETA），智能模式为专家模式的升级版。在智能模式下，作业将启用专家模式的资源配置，同时开启AutoPilot自动调优功能。在智能配置模式下，您无需配置相关资源，...
配置Alibaba Blink实时模式资源
资源配置类型 系统推荐配置 即实时计算Flink配置细粒度资源的智能模式（BETA），智能模式为专家模式的升级版。在智能模式下，作业将启用专家模式的资源配置，同时开启AutoPilot自动调优功能。在智能配置模式下，您无需配置相关资源，...
创建Aliyun HBase数据源
zkQuorum 配置阿里云HBase实例的链接地址，推荐您使用专有云网络的链接地址。您可以在 阿里云Hbase控制台 的数据库连接页面，查看链接地址。单击 测试连接，测试数据源是否可以和Dataphin进行正常的连通。测试成功后，单击 确定，完成...
配置OceanBase输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或 有索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
配置OceanBase输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或 有索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
什么是Dataphin
管理中心 全局规划 基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义业务板块、数据域、项目、数据源、计算源和统计周期。数仓规划 数据引入 基于...
规范定义最佳实践
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
配置Teradata输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
创建原子指标
英文名称 输入英文名称时，Dataphin将根据输入数据实时匹配数据标准中已配置的词根，您可以选择推荐的词根作为业务实体的英文名称。更多信息，请参见 新建和管理词根。英文名称需要满足以下命名规则：仅支持字母、数字或下划线（_）。不能...
规范定义最佳实践
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
创建原子指标
英文名称 输入英文名称时，Dataphin将根据输入数据实时匹配数据标准中已配置的词根，您可以选择推荐的词根作为业务实体的英文名称。更多信息，请参见 新建和管理词根。英文名称需要满足以下命名规则：仅支持字母、数字或下划线（_）。不能...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
数据服务概述
数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。前提条件 已购买 数据服务 增值服务，开通Dataphin ...
资产安全概述
场景2：开发环境数仓建设 敏感数据从生产环境写入开发环境过程中，您可以使用资产安全内置的敏感数据识别规则和脱敏规则，自动实现敏感数据的脱敏，确保敏感数据始终保留在高权限的生产环境，不会泄露到开发环境。场景3：脱敏白名单的灵活...
创建数据板块
如果您管理诉求较强，数据研发人员较多且能力及分工明确，数据计算存储预算较高，推荐 此模式。创建Dev-Prod模式数据板块，请参见 创建Dev-Prod模式数据板块。Basic模式 生成独立的Basic数据板块，数据生产过程稳定且便捷。如果您关注数据...
创建Tablestore数据源
推荐您使用VPC网络对应的实例访问地址。您可以在 Tablestore控制台 的 实例管理 页面的 实例详情 页签，查看实例访问地址。Access Id、Access Key Tablestore数据源所在账号的AccessKey ID和AccessKey Secret。如何获取，请参见 创建...
核心概念
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目，所以...
配置ClickHouse输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时每条并发SQL语句...
创建Elasticsearch数据源
参数 描述 ES URL Elasticsearch的连接地址，推荐您使用私网连接地址。格式为 http://host:port 。例如：http://192.168.*.212/9200。用户名、密码 访问Elasticsearch实例的用户名和密码。单击 测试连接，测试数据源是否可以和Dataphin进行...
创建MySQL数据源
常用于网站、应用程序和商业产品，是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的...
- 产品推荐
- 这些文档可能帮助您