步骤三：引入数据
完成数据仓库的规划和数据源信息的配置后，您还需将您的源数据product表、customer表、orders表引入到项目中。本文将指导您如何将数据源的数据集成到您的创建的项目空间。背景信息 product表、customer表、orders表的集成步骤相同，仅管道...
新建MaxCompute计算源
操作步骤 请参见 数仓规划入口，进入数仓 规划 页面。在数仓 规划 页面，按照下图操作指引，进入创建计算源页面。在 新建计算源 页面，配置参数。参数 描述 计算源类型 选择为MaxCompute。Endpoint 默认为计算引擎的Endpoint，不支持修改。...
SQL使用限制
SQL执行计划长度 1 MB 长度限制 MaxCompute SQL生成的执行计划不能超过1 MB，否则会触发 FAILED:ODPS-0010000:System internal error-The Size of Plan is too large 报错。单作业最大执行时间 24小时 运行时长限制 默认情况下，SQL单个...
配置MongoDB输入组件
同时您可以单击 数据源 后的 新建，进入规划模块添加数据源，详情请参见 创建MongoDB数据源。表 选择来源表。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。参数过滤。输出字段...
新建MaxCompute计算源
更多信息，请参见 数仓规划权限列表。操作步骤 请参见 入口介绍，进入数仓 规划 页面。在数仓 规划 页面，按照下图操作指引，进入创建计算源页面。在 新建计算源 页面，配置参数。参数 描述 计算源类型 选择为MaxCompute。Endpoint 默认为...
实时研发基本流程概述
步骤二：实时项目规划 实时元表 元表是通过数据管理的跨存储类型表，开发过程中所用到的输入表、输出表、维表可以通过创建元表进行创建和管理。步骤三：创建实时计算表 实时任务 通过创建Flink_SQL流任务，读取或写入元表映射的数据源中的...
实时研发基本流程概述
步骤二：实时项目规划 实时元表 元表是通过数据管理的跨存储类型表，开发过程中所用到的输入表、输出表、维表可以通过创建元表进行创建和管理。步骤三：创建实时计算表 实时任务 通过创建Flink_SQL流任务，读取或写入元表映射的数据源中的...
增量导出发布包
支持 规划、数据架构、研发、标签架构、标签、数据标准、数据质量、数据安全 对象类型。规划：包括公共定义、数据板块、计算源、项目、数据源。数据架构：包括主题域、业务对象、业务活动。研发：包括离线管道、事实逻辑表、维度逻辑表、...
增量导出发布包
支持 规划、数据架构、研发、标签架构、标签、数据标准、数据质量、数据安全 对象类型。规划：包括公共定义、数据板块、计算源、项目、数据源。数据架构：包括主题域、业务对象、业务活动。研发：包括离线管道、事实逻辑表、维度逻辑表、...
配置Kudu输入组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。具体操作，请参见 创建Kudu数据源。表 选择需要作为输出的表。批量字节数 批量读取数据的字节数，默认1MB。需大于0（小数点保留1位）。输入过滤 输入过滤条件支持=、>、<、>=、...
配置MongoDB输入组件
同时您可以单击 数据源 后的 新建，进入规划模块添加数据源，详情请参见 创建MongoDB数据源。表 选择来源表。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：固定的某一部分数据。参数过滤。输出字段...
修改日期类型
操作步骤 在Dataphin首页，单击顶部菜单栏 规划。按照下图操作指引，进入 公共日历 页面。在 公共日历 页面，单击所需修改类型的日期，并在弹出的对话框中单击 修改日期类型。说明 若您需以周期形式批量修改日期类型，您可单击任意日期并在...
配置DataHub输入组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。后续操作，详情请参见 创建DataHub数据源。说明 进行属性配置的账号需具备该数据源的同步读权限，如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限...
修改日期类型
操作步骤 在Dataphin首页，单击顶部菜单栏 规划。按照下图操作指引，进入 公共日历 页面。在 公共日历 页面，单击所需修改类型的日期，并在弹出的对话框中单击 修改日期类型。说明 若您需以周期形式批量修改日期类型，您可单击任意日期并在...
配置DataHub输入组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。后续操作，详情请参见 创建DataHub数据源。说明 进行属性配置的账号需具备该数据源的同步读权限，如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限...
配置ArgoDB输入组件
同时您可以单击 数据源 后的 新建，进入规划模块添加数据源。具体操作，请参见 创建GreenPlum数据源。表 根据实际场景需要，选择需要进行集成的数据表。分区 如果所选的来源表是分区表，那么需要填写分区信息，如 state_date=‘20190101’,...
标签工厂新手指引
在进行标签开发前，您需要完成标签项目和标签架构的规划工作。创建标签项目：标签项目为标签开发工作台，通过项目可以绑定计算源，配置项目成员角色，为标签开发做准备。具体操作，请参见 创建标签项目。说明 创建标签项目前，请先创建用于...
管理HBase输入组件
同时您可以单击 数据源 后的 图标，进入规划模块添加数据源，详情请参见 创建HBase数据源。表 选择数据输入的表。输出方式 选择输出方式。包括 Normal模式 和 多版本模式。maxversion 输出方式选择 多版本模式（竖表）需填写 maxversion。...
标签工厂权限列表
标签项目规划权限列表 说明 标签业务员 仅能查看和操作已加入项目。权限点 超级管理员 系统管理员 标签业务员 普通成员 标签-资产市场 新增资产市场 Y Y N N 编辑资产市场 Y Y（我管理的）N Y（我管理的）删除资产市场 Y Y（我管理的）N Y...
创建标签项目
步骤一：选择项目类型 在Dataphin首页，单击顶部菜单栏的 规划。在 数仓规划 页面，按照下图操作指引，进入新建 标签项目 对话框。步骤二：配置项目的归属板块和基本信息 在 新建项目 对话框中配置标签项目的 归属板块、基本信息 及 业务...
创建数据板块
创建Dev-Prod模式数据板块 在Dataphin首页，单击顶部菜单栏的 规划。进入 Dataphin规划 页面后，默认进入 数据架构 页面。在 数据架构 页面，单击 新建数据板块。在 新建数据板块 配置向导页面，完成以下操作。在 生产开发类型 页面，选择 ...
配置ArgoDB输出组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。具体操作，请参见 新建ArgoDB数据源。进行属性配置的账号需具备该数据源的同步写权限，如果没有权限，则需要申请数据源权限，详情请参见 申请数据源权限。表 根据实际场景需求，...
创建数据板块
创建Dev-Prod模式数据板块 在Dataphin首页，单击顶部菜单栏的 规划。进入 Dataphin规划 页面后，默认进入 数据架构 页面。在 数据架构 页面，单击 新建数据板块。在 新建数据板块 配置向导页面，完成以下操作。在 生产开发类型 页面，选择 ...
引入预制模型
您可以点击 下载介绍文档 按钮，下载您所需的模型介绍文档，帮助您学习了解相关行业的数仓规划和模型构建。在 导入模型 页面进行 初始化设置 和 导入模型。初始化设置。参数 描述 导入方式 初始化设置支持使用Dataphin提供MaxCompute项目或...
配置DataHub输出组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。后续操作，详情请参见 创建DataHub数据源。说明 进行属性配置的账号需具备该数据源的同步写权限，如果没有权限，则需要申请数据源权限，详情请参见 管理数据源权限。主题 根据...
配置DataHub输出组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。后续操作，详情请参见 创建DataHub数据源。说明 进行属性配置的账号需具备该数据源的同步写权限，如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限...
添加项目成员
操作步骤 请参见 数仓规划入口，进入 项目管理 页面。在 项目管理 页面，单击需要修改项目下的 成员管理。在 成员管理 对话框，单击 添加成员。在 添加成员 对话框，选择 成员名 和 角色。项目成员角色不同，权限范围不同。支持添加的项目...
添加项目成员
操作步骤 请参见 数仓规划入口，进入 项目管理 页面。在 项目管理 页面，单击需要修改项目下的 成员管理。在 成员管理 对话框，单击 添加成员。在 添加成员 对话框，选择 成员名 和 角色。项目成员角色不同，权限范围不同。支持添加的项目...
步骤五：规范建模
步骤一：新建主题域 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作指引，选择 dataphin_tutorial 数据板块并进入在 新建主题域 页面。在 新建主题域 页面，配置相关参数。参数 描述 主题域名称 输入 交易域。编码 输入 trade。英文...
步骤五：规范建模
步骤一：新建主题域 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作指引，选择 dataphin_tutorial 数据板块并进入在 新建主题域 页面。在 新建主题域 页面，配置相关参数。参数 描述 主题域名称 输入 交易域。编码 输入 trade。英文...
新建AnalyticDB For PostgreSQL计算源
操作步骤 请参见 数仓规划入口，进入数仓规划页面。在数仓 规划 页面，单击左侧导航栏的 计算源。在 计算源 页面，单击 新增计算源。在 新建计算源 对话框，配置参数。参数 描述 计算类型 选择为 AnalyticDB For PostgreSQL。计算源名称 ...
新建公共日历
操作步骤 在Dataphin首页，单击顶部菜单栏 规划。按照以下操作指引，进入 新建公共日历 对话框。依次单击 公共定义->公共日历->新建公共日历。在 新建公共日历 对话框中，配置日历相关信息。参数 描述 日历名称 命名规则如下：允许中文、...
新建公共日历
操作步骤 在Dataphin首页，单击顶部菜单栏 规划。按照以下操作指引，进入 新建公共日历 对话框。依次单击 公共定义->公共日历->新建公共日历。在 新建公共日历 对话框中，配置日历相关信息。参数 描述 日历名称 命名规则如下：允许中文、...
新建FusionInsight Flink计算源
操作步骤 在Dataphin首页，单击顶部菜单栏的 规划。进入数仓 规划 页面。按照下图操作指引，进入 新建计算源 页面。在 新建计算源 页面，配置参数。参数 描述 计算引擎源基本信息 计算源类型 选择为 FusionInsight Flink。计算源名称 填写...
准备RAM用户
例如，在使用Dataphin过程中，某企业规划不同的员工负责数据开发、数据运维、数据分析阶段的工作，并且企业管理者对员工间的权限控制和数据安全有要求。因此，您可以创建3个RAM用户，将RAM用户同步至Dataphin后，添加为项目空间的成员并...
新建Flink计算源
操作步骤 在Dataphin首页，单击顶部菜单栏的 规划。进入数仓 规划 页面。按照下图操作指引，进入 新建计算源 页面。在 新建计算源 页面，配置参数。参数 描述 计算引擎源基本信息 计算类型 选择为 Flink。计算源名称 填写计算源的名称。...
配置API输出组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。具体操作，请参见 创建API数据源。进行属性配置的账号需具备该数据源的同步写权限，如果没有权限，则需要申请数据源权限，详情请参见 申请数据源权限。请求方式 按API数据源配置...
配置API输出组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。具体操作，请参见 创建API数据源。进行属性配置的账号需具备该数据源的同步写权限，如果没有权限，则需要申请数据源权限，详情请参见 申请数据源权限。请求方式 按API数据源配置...
配置Greenplum输入组件
同时您可以单击 数据源 后的 新建，进入规划模块添加数据源。具体操作，请参见 创建GreenPlum数据源。Schema 支持跨Schema读表，需选择来源表所在的Schema。如在数据源链接中已包含schema信息，则默认为配置的schema，也可选择其他有权限的...
配置API输入组件
同时您可以单击 数据源 后的 新建，进入规划模块新建数据源。具体操作，请参见 创建API数据源。请求方式 按API数据源配置的请求方式显示。POST：可配置 Parameters、Headers、Body，允许为空。GET：可配置 Parameters、Headers，允许为空。...
- 产品推荐
- 这些文档可能帮助您