Dataphin免费试用申请
申请信息填写完后，勾选 我已阅读并同意《Dataphin智能数据建设与治理试用服务协议》，单击 免费试用，体验Dataphin功能。相关文档 试用开通成功后，您可按照 Dataphin新手引导 一步步体验Dataphin的研发流程，也可按照 导入模型 来导入...
配置GBase 8a输入组件
系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量...
配置GBase 8a输入组件
系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量...
步骤一：准备工作
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
新建用户自定义函数
类名 填写类名。针对计算类型中的资源，提取资源中类的内容，例如 test_udf.UDFGETSrcId。类型 选择类型，下拉列表中可供选择的类型包含 窗口、统计、数值、字符串、时间、ip地址相关函数、URL、编译码、业务、其他。注册函数 若您需定义...
步骤一：准备工作
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
新建BLINK_DATASTREAM任务
类名 使用资源的完整类名（全限定类名）。步骤二：预编译 BLINK_DATASTREAM 任务代码 单击页面左上方的 预编译，校验代码任务的语法及权限问题。说明 预编译成功，在页面上方出现 弹窗。预编译失败，在页面上方出现 弹窗，单击页面底部 ...
新建BLINK_DATASTREAM任务
类名 使用资源的完整类名（全限定类名）。步骤二：预编译 BLINK_DATASTREAM 任务代码 单击页面左上方的 预编译，校验代码任务的语法及权限问题。说明 预编译成功，在页面上方出现 弹窗。预编译失败，在页面上方出现 弹窗，单击页面底部 ...
资产全景
数据架构 包含 业务对象、业务活动、业务限定、原子指标、指标 五种指标数量，其中，指标 包括派生指标、衍生指标和自定义指标三类指标。数据模型 包含 维度逻辑表、事实逻辑表、汇总逻辑表 三种指标数量，而维度逻辑表数+事实逻辑表数+...
Java UDF最佳实践
类名 类名的格式为JAR包路径.class文件名。填写 org.alidata.odps.udf.examples.javaudf。类型 函数的类型。选择 字符串。命令格式 定义引用函数的格式。填写 to_char(string i)。使用文档 填写函数的使用描述，例如 javaudf。选择目录 ...
元数据仓库共享模型概述
业务租户：统称为 开发租户，进行数据中台建设的租户，即进行数据开发和治理的核心使用租户。一个Dataphin实例可以创建多个开发租户，由元仓租户在租户设置页面创建并分配可用资源（数据处理单元数、质量规则数等）。元仓共享模型数据说明 ...
配置Impala输入组件
系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量...
SQL使用限制
本文为您介绍基于Dataphin使用MaxCompute SQL的限制项。限制项 最大值/限制条件 分类 说明 表名长度 128字节 长度限制 表名、列名中不能有特殊字符，以字母开头，且只能用英文小写字母（a-z）、英文大写字母（A-Z）、数字和下划线（_）。...
创建API数据源
通过创建API数据源能够实现Dataphin向API请求业务数据或向API请求写入数据。本文为您介绍如何创建API数据源。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加...
Java UDF最佳实践
类名 类名的格式为 JAR包路径.class文件名。填写 org.alidata.odps.udf.examples.javaudf。类型 函数的类型。选择 字符串。命令格式 定义引用函数的格式。填写 to_char(string i)。使用文档 填写函数的使用描述，例如 javaudf。选择目录 ...
管理动态脱敏白名单
② 列表区 为您展示 白名单名称、数据分 类、生效账号、负责人、生效时段、生效状态、更新时间、生效状态 信息，同时您可以在 操作 列对动态脱敏白名单执行 编辑、复制、删除 操作。生效状态：决定当前脱敏白名单是否生效，关闭则不会进行...
创建API数据源
通过创建API数据源能够实现Dataphin向API请求业务数据或向API请求写入数据。本文为您介绍如何创建API数据源。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加...
资产全景
数据架构 包含 业务对象、业务活动、业务限定、原子指标、指标 五种指标数量，其中，指标 包括派生指标、衍生指标和自定义指标三类指标。数据模型 包含 维度逻辑表、事实逻辑表、汇总逻辑表 三种指标数量，而维度逻辑表数+事实逻辑表数+...
新建离线自定义源类型
读写插件 勾选所需上传的插件类型并填写ClassName（插件类名）及上传插件。仅支持.jar 类型的文件。文件不超过 50MB。读取插件与写入插件请至少选择一项进行配置。选择了读插件就会生成读的组件，选择了写插件就会生成写的组件。描述信息 ...
管理动态脱敏白名单
② 列表区 为您展示 白名单名称、数据分 类、生效账号、负责人、生效时段、生效状态、更新时间、生效状态 信息，同时您可以在 操作 列对动态脱敏白名单执行 编辑、复制、删除 操作。生效状态：决定当前脱敏白名单是否生效，关闭则不会进行...
新建离线自定义源类型
读写插件 勾选所需上传的插件类型并填写ClassName（插件类名）及上传插件。仅支持.jar 类型的文件。文件不超过 50MB。读取插件与写入插件请至少选择一项进行配置。选择了读插件就会生成读的组件，选择了写插件就会生成写的组件。描述信息 ...
新建和管理标准集目录
标准集目录用于从业务或组织架构视角出发，对标准集和标准进行分类、分层管理。本文为您介绍如何创建及管理标准集目录。前提条件 已具备超级管理员或数据标准管理员用户角色，如何添加角色，请参见 添加、配置及管理Dataphin成员。...
配置Impala输入组件
系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量...
SQL使用限制
本文为您介绍基于Dataphin使用MaxCompute SQL的限制项。限制项 最大值/限制条件 分类 说明 表名长度 128字节 长度限制 表名、列名中不能有特殊字符，必须以字母开头，且只能使用英文小写字母（a-z）、英文大写字母（A-Z）、数字和下划线（_...
配置Greenplum输入组件
支持 枚举形式、类正则形式 以及 两者混合形式，如 table_[001-100];table_102。切分键 配合并发度配置使用。您可以将源数据表中某一列作为切分键，该字段类型必须是整型数字，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL...
新建FLINK_DATASTREAM任务
类名 使用资源的完整类名（全限定类名）。描述 填写对FLINK_DATASTREAM任务的简单描述。单击 确定。步骤二：预编译 FLINK_DATASTREAM 任务代码 在FLINK_DATASTREAM任务代码页面，单击页面左上方的 预编译，校验代码任务的语法及权限问题。...
配置GoldenDB输入组件
系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量...
配置Greenplum输入组件
支持 枚举形式、类正则形式 以及 两者混合形式，如 table_[001-100];table_102。切分键 配合并发度配置使用。您可以将源数据表中某一列作为切分键，该字段类型必须是整型数字，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL...
配置DM（达梦）输入组件
系统支持枚举形式、类正则形式及两者混合形式，例如 table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
配置DM（达梦）输入组件
系统支持枚举形式、类正则形式及两者混合形式，例如 table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量...
新建FLINK_DATASTREAM任务
类名 使用资源的完整类名（全限定类名）。描述 填写对Flink DataStream任务的简单描述。单击 确定。步骤二：预编译FLINK_DATASTREAM任务代码 在FLINK_DATASTREAM任务代码页面，单击页面左上方的 预编译，校验代码任务的语法及权限问题。...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
新建FLINK_DATASTREAM任务
类名 使用资源的完整类名（全限定类名）。描述 填写对Flink DataStream任务的简单描述。单击 确定。步骤二：预编译FLINK_DATASTREAM任务代码 在FLINK_DATASTREAM任务代码页面，单击页面左上方的 预编译，校验代码任务的语法及权限问题。...
配置OpenGauss输入组件
系统支持 枚举形式、类正则形式 及 两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。...
调度依赖场景规则与示例
不同批次调度，同周期依赖，上游小时任务是每隔4个小时整点起调，下游小时任务是每个小时的15分开始起调，则下游0点15分、1点15分、2点15分、3点15分的实例，都依赖上游4点的实例，依次类推。天任务依赖小时任务 依赖规则 下游天任务和上游...
配置StarRocks输入组件
系统支持 枚举形式、类正则形式 及 两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。...
配置KingbaseES输入组件
系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的表。单击 确认。切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量...
增量导出发布包
增量导出发布包适用于需要将项目阶段性的结果导出。例如需导出特定时间段内的变更或指定业务板块/项目下对象时，可使用增量导出的方式。本文为您介绍在来源环境中如何增量导出发布包文件。前提条件 需在跨租户发布设置中配置发布凭证、发布...
新建及管理知识库
知识库能够帮助您针对具体的质量问题或某一类质量问题，沉淀相关解决方案，提高问题处理效率。本文为您介绍如何新建及管理知识库。权限说明 所有成员支持新建、查看知识库以及为知识库关联相关的质量规则；超级管理员、质量管理员支持编辑...
- 产品推荐
- 这些文档可能帮助您