创建StarRocks计算源
Dataphin支持使用StarRocks作为Dataphin的离线计算引擎，为Dataphin项目提供处理离线计算任务的能力。本文为您介绍如何创建StarRocks计算源。背景信息 StarRocks是一款高性能分析数据库，支持实时、多维和高度并发的数据分析。StarRocks...
汇总数据层（DWS）
数据公用性需要考虑汇总的聚集是否可以提供给第三方使用。您可以思考，基于某个维度的聚集是否经常用于数据分析中。如果答案是肯定的，就有必要把明细数据经过汇总沉淀到聚集表中。汇总表规范 公共汇总表命名规范：dws_统计粒度。举例如下...
API管理
单位时间 选择限流的单位，系统提供的 单位时间 包括：sec、min、hour、day。API流量限制 填写API限流的数据。例如，企业所购买的总流量为每秒查询率是500，如果 单位时间 选择 sec，则 API流量限制 填写的数据应该小于等于500。App流量...
查看内置审批模板
Dataphin提供了内置的角色审批模板，您可在数据下载审批设置及权限审批策略中引用这些角色模板，帮助您快速完成配置。查看系统模板 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 系统模板 页面。在 系统模板 页面，...
标签工厂新手指引
标签工厂概述 Dataphin标签工厂为您提供实体、实体ID定义，标签资产市场类目管理，行为、标签加工、管理、服务等功能。您可以通过Dataphin标签沉淀易开发、好找好用、高价值的核心标签资产。流程引导 使用标签工厂进行离线标签开发及应用的...
配置TiDB输出组件
是指数据输出前和输出完成的一些特殊处理方式，比如为了满足服务的持续可用性，当前步骤写数据执行前先创建目标表Target_A，执行写入到目标表Target_A，当前步骤写数据执行完成后，对数据库中持续提供服务的表Service_B重命名成Temp_C，...
配置DM（达梦）输出组件
数据输出前和输出完成的特殊处理方式，比如为了满足服务的持续可用性，当前步骤写数据执行前先创建目标表Target_A，执行写入到目标表Target_A，当前步骤写数据执行完成后，对数据库中持续提供服务的表Service_B重命名成Temp_C，然后将表...
配置TiDB输出组件
是指数据输出前和输出完成的一些特殊处理方式，比如为了满足服务的持续可用性，当前步骤写数据执行前先创建目标表Target_A，执行写入到目标表Target_A，当前步骤写数据执行完成后，对数据库中持续提供服务的表Service_B重命名成Temp_C，...
配置DM（达梦）输出组件
数据输出前和输出完成的特殊处理方式，比如为了满足服务的持续可用性，当前步骤写数据执行前先创建目标表Target_A，执行写入到目标表Target_A，当前步骤写数据执行完成后，对数据库中持续提供服务的表Service_B重命名成Temp_C，然后将表...
查看内置审批模板
Dataphin提供了内置的角色审批模板，您可在数据下载审批设置及权限审批策略中引用这些角色模板，帮助您快速完成配置。查看系统模板 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 系统模板 页面。在 系统模板 页面，...
个人数据中心
申请权限：提供表权限申请入口。如需申请，请单击 申请权限。详情请参见 申请、续期和交还表权限。修改资产标签：在 修改资产标签 对话框，输入标签值，128字符以内，单击 确定。每个资产对象最可多配置20个标签。说明 超级管理员可修改...
个人数据中心
申请权限：提供表权限申请入口。如需申请，请单击 申请权限。详情请参见 申请、续期和交还表权限。修改资产标签：在 修改资产标签 对话框，输入标签值，128字符以内，单击 确定。每个资产对象最可多配置20个标签。说明 超级管理员可修改...
离线标签概述
在您完成离线标签的创建或行为关系的定义后，您可为所创建的离线标签或行为关系创建对应的离线标签，以便后续的资产应用创建...③ 批量操作 您可通过批量操作区域提供的操作功能，对离线标签进行批量处理，提高操作效率。包括批量上架、下架。
计算设置概述
设置Dataphin实例的计算引擎后，系统支持为项目空间添加相应的计算源，为项目空间提供计算和存储的资源。本文为您介绍Dataphin系统的计算引擎说明。权限说明 仅支持 超级管理员 或 系统管理员 配置计算引擎。计费说明 设置实时计算引擎需...
元数据仓库共享模型概述
业务租户：统称为 开发租户，进行数据中台建设的租户，即进行数据开发和治理的核心使用租户。一个Dataphin实例可以创建多个开发租户，由元仓租户在租户设置页面创建并分配可用资源（数据处理单元数、质量规则数等）。元仓共享模型数据说明 ...
准备RAM用户
为保证项目数据安全，推荐您创建RAM用户并交由其他用户使用，实现对参与Dataphin项目的人员权限进行严格把控。本文为您介绍如何创建RAM用户。背景信息 在创建RAM用户前，请您了解阿里云账号和RAM用户及其在Dataphin中的用户角色及其权限，...
新建用户自定义函数
下拉列表中提供的是匹配当前项目的资源名称。说明 当前，仅支持选择PYTHON、JAR格式的文件进行定义函数。选择多个资源时，仅限选择同一种资源类型。如果您还没有资源，则需创建资源。具体操作，请参见 创建资源。类名 填写类名。针对计算...
新建实时计算模板
实时计算模板指进行实时数据研发过程中实时计算任务开发所提供的模板，可提高研发效率。本文为您介绍如何新建及管理实时计算模板。应用场景 基本场景下，实时计算任务需24小时不间断运行，以保证数据产出的实效性。在该要求下实时任务的...
新建实时计算模板
实时计算模板指进行实时数据研发过程中实时计算任务开发所提供的模板，可提高研发效率。本文为您介绍如何新建及管理实时计算模板。应用场景 基本场景下，实时计算任务需24小时不间断运行，以保证数据产出的实效性。在该要求下实时任务的...
Session集群管理概述
Session集群提供了Flink任务状态、日志和输出结果的实时查看功能，您可以通过观察任务的行为和输出来验证任务的正确性，进行迭代式地修改和调试Flink任务代码，以便快速定位和解决问题。权限说明 仅支持 超级管理员 或 系统管理员 创建...
新建MaxCompute计算源
MaxCompute计算源用于绑定Dataphin项目空间和MaxCompute项目，为Dataphin项目提供处理离线计算任务的计算源。如果Dataphin系统的计算引擎设置为MaxCompute，则只有项目空间添加了MaxCompute计算源，才支持规范建模、即席查询、MaxCompute ...
更新日志
实例和计费项账单按日汇总查询-2020-01-09(January 9,2020)QueryInstanceBill增加了查询日汇总账单的能力：输入参数中增加了granularty,表示查询月汇总账单，或者是日汇总账单 当查询日汇总账单时，需要指定具体的BillingDate 返回参数中...
创建Lindorm数据源
背景信息 Lindorm是阿里云推出的自研数据库，提供宽表、时序、文件、搜索等多种数据模型，支持毫秒级在线数据处理、海量数据低成本存储和分析。更多阿里云Lindorm信息，请参见 云原生多模数据库 Lindorm。权限说明 Dataphin仅支持 超级管理...
创建Lindorm数据源
背景信息 Lindorm是阿里云推出的自研数据库，提供宽表、时序、文件、搜索等多种数据模型，支持毫秒级在线数据处理、海量数据低成本存储和分析。更多阿里云Lindorm信息，请参见 云原生多模数据库 Lindorm。权限说明 Dataphin仅支持 超级管理...
查看并管理手动运行补数据任务
③ 批量操作区 您可以通过批量操作区域提供的批量操作功能，对补数据任务进行批量处理，提高操作效率。具体操作，请参见。手动运行补数据任务支持的批量操作。手动运行补数据任务列表支持的操作 操作 描述 手动运行 立即运行当前补数据任务...
新建公共日历
Dataphin提供租户级别的公共日历功能。公共日历支持自定义日历、自定义日期类型（工作日和假日）和灵活的自定义日历标签。以帮助您在配置调度任务时，结合公共日历中的定义信息配置条件调度参数，进行灵活的调度。或在创建任务时引用公共...
治理项管理
说明 根据选择的 治理对象，提供通用治理项的可选项。单击 确定。查看治理项 在 治理项管理 页面，单击需查看治理项所在行的 操作 列下的 图标，进入治理项详情页面。编辑治理项 在 治理项管理 页面，单击需编辑治理项所在行的 操作 列下的...
新建MaxCompute计算源
MaxCompute计算源用于绑定Dataphin项目空间和MaxCompute项目，为Dataphin项目提供处理离线计算任务的计算源。如果Dataphin系统的计算引擎设置为MaxCompute，则只有项目空间添加了MaxCompute计算源，才支持规范建模、即席查询、MaxCompute ...
治理项管理
说明 根据选择的 治理对象，提供通用治理项的可选项。单击 确定。查看治理项 在 治理项管理 页面，单击需查看治理项所在行的 操作 列下的 图标，进入治理项详情页面。编辑治理项 在 治理项管理 页面，单击需编辑治理项所在行的 操作 列下的...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
查看并管理手动运行补数据任务
③ 批量操作区 您可以通过批量操作区域提供的批量操作功能，对补数据任务进行批量处理，提高操作效率。具体操作，请参见 手动运行补数据任务支持的批量操作。手动运行补数据任务列表支持的操作 操作 描述 手动运行 立即运行当前补数据任务...
数据开发概述
同时您提供可视化、标准化、规范化和自动化定义数据，而非传统手动写SQL代码的方式，这样就避免了统计指标计算口径不一致的情况。可视化构建数据仓库的模型，逻辑表提交后即生成对应智能黑盒调度任务，自动化生产数据。说明 仅绑定数据板块...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
创建标签项目
Dataphin对接了 机器学习PAI，为您提供了机器学习PAI基础的算法调度能力。在机器学习平台中，创建可视化建模的工作空间时，资源选择为基于MaxCompute的计算资源组，详情请参见 资源管理概述。如果您开启了机器学习，需要配置以下参数。PAI...
账单查询
您可以在用户中心查看ECS实例相关的费用账单和消费明细，以了解消费情况。背景信息 阿里云提供延期免停权益，即当按量付费的资源发生欠费后，提供一定额度或时长继续使用云服务的权益，延停期间正常计费。具体使用说明和规则，请参见 延期...
核心概念
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目，所以...
治理效果
操作 操作 下为您提供查看数据趋势和健康分排行榜的入口：单击 操作 列下的 图标，查看该项目下计算和存储的 近7天 或 近30天 数据趋势：单击 存储，进入 存储 页面，将鼠标悬浮在数据趋势曲线上，查看某日的健康分和存储量。单击 计算，...
离线任务属性配置概述
Dataphin提供内置参数并支持自定义参数，可供任务在调度时实现参数动态赋值。说明 若您在编辑节点代码时，在代码中定义了变量，需在此处对该变量进行赋值。若未定义可无须进行定义。调度属性 用于定义任务在生产环境的周期调度方式。调度...
数据开发概述
同时您提供可视化、标准化、规范化和自动化定义数据，而非传统手动写SQL代码的方式，这样就避免了统计指标计算口径不一致的情况。可视化构建数据仓库的模型，逻辑表提交后即生成对应智能黑盒调度任务，自动化生产数据。说明 仅绑定数据板块...
管理控制台介绍
② 为您提供以下信息：您可以单击 进入Dataphin，进入所选地域（Region）的Dataphin首页，开始使用Dataphin。您可以查看当前地域实例的详情。您可以通过升级操作，购买更高规格的数据处理单元及开通未购买的增值功能包，详情请参见 升级。...
- 产品推荐
- 这些文档可能帮助您