维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效(离线T+1)且该逻辑表设置了 事件时间 字段,才可配置是否开启数据...
区域 描述 ①筛选与搜索区 您可根据推送记录对象名称的关键字进行搜索,也可根据推送接收人、推送时间、推送状态、告警原因、推送渠道(您可通过 配置渠道设置 管控是否开启该消息渠道)进行筛选。②列表区 为您展示推送记录的对象名称、...
为了节省调度资源,在确保不存在资源与状态冲突的前提下,您可以设置基于离线代码模板创建的模板任务是否共享运行调度资源。本文为您介绍如何开启全局共享资源开关。背景信息 为了避免不同任务运行之间产生资源或状态的冲突(如修改全局...
更多信息,请参见 变量分类与赋值。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不支持转换空间名称变量为其他类型。本地变量:最长支持258位字符或...
更多信息,请参见 变量分类与赋值。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不支持转换空间名称变量为其他类型。本地变量:最长支持258位字符或...
更多信息,请参见 变量分类与赋值。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不支持转换空间名称变量为其他类型。本地变量:最长支持258位字符或...
更多信息,请参见 变量分类与赋值。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不支持转换空间名称变量为其他类型。本地变量:最长支持258位字符或...
步骤四:执行安装命令 在目标集群导入下载的描述文件并解压后执行安装命令,完成应用的安装与授权。安装命令如下:重要 执行安装命令前,请联系Dataphin部署运维团队获取自定义资源组引用的镜像文件,并在目标集群的指定机器中导入镜像。每...
选择Dataphin系统已配置的数据源,且数据源需同时具备以下两个条件:数据源的类型与输出组件的类型一致。执行 属性配置 的账号具有该数据源的同步写权限,如果没有权限,则需要申请数据源权限,详情请参见 申请、续期和交还数据源权限。...
本文为您介绍逻辑表任务属性与调度的相关内容。逻辑表任务配置入口 在Dataphin首页,单击顶部菜单栏的 研发。按照下图操作指引,进入逻辑表任务配置页面。配置逻辑表任务 在逻辑表任务配置页面,支持配置逻辑表任务的基本信息与调度相关...
补数据操作与补数据实例关系如下:单次立即运行补数据任务:将立即生成补数据实例并调度运行。单次定时运行补数据任务:将产生待生成实例,到达定时运行时间时将生成补数据实例并调度运行。周期性定时运行补数据任务:将在定时运行时间的 ...
背景信息 在建设数据中台的流程中,一般的首要任务是对整个业务进行前置调研,如先盘点出参与业务的人员、事物和基本规则定义,并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后,产出业务的概念模型。...
补数据操作与补数据实例关系如下:单次立即运行补数据任务:将立即生成补数据实例并调度运行。单次定时运行补数据任务:将产生待生成实例,到达定时运行时间时将生成补数据实例并调度运行。周期性定时运行补数据任务:将在定时运行时间的 ...
校验成功后,单击 确认并开始数据建设,即可开始数据建设。后续步骤 完成设置Dataphin实例的计算引擎后,您就可以准备后续数据研发过程中用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作,请参见 准备数据源和计算源。
背景信息 在建设数据中台的流程中,一般的首要任务是对整个业务进行前置调研,如先盘点出参与业务的人员、事物和基本规则定义,并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后,产出业务的概念模型。...
选择Dataphin系统已配置的数据源,且数据源需同时具备以下两个条件:数据源的类型与输出组件的类型一致。执行 属性配置 的账号具有该数据源的同步写权限,如果没有权限,则需要申请数据源权限,详情请参见 申请、续期和交还数据源权限。...
在连通业务数据库与Dataphin间的网络时,您需要将不同网络环境下Dataphin的出网IP地址添加至业务数据库的白名单中。本文为您介绍不同网络环境下Dataphin的出网IP地址。VPC网络下Dataphin的出网IP地址 地域(推荐)通用IP地址 地域IP地址 ...
更多信息,请参见 变量分类与赋值。若需要批量修改参数类型,可以单击 修改参数类型 进行批量修改。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不...
更多信息,请参见 变量分类与赋值。若需要批量修改参数类型,可以单击 修改参数类型 进行批量修改。参数值 全局变量:默认为全局变量所定义的变量值,不支持设置。更多信息,请参见 新建全局变量。空间名称变量:参数值即为空间名称,不...
统计粒度 统计粒度的时效与汇总逻辑表的时效保持一致,不支持修改。您需要为统计粒度的主键字段选择来源表的字段进行映射。所属主题域与汇总表 主题域 选择上挂指标所属主题域。汇总表 汇总逻辑表默认为添加上挂指标的汇总表,不支持修改。...
在专题分组列表页面您可以统一管理已创建的专题分组,包括新建与编辑专题分组、快捷跳转查看专题分组下的专题详情、删除空的专题分组等,提高专题管理效率。本文为您介绍如何新建及管理专题分组。权限说明 超级管理员和运营管理员支持新建...
在专题分组列表页面您可以统一管理已创建的专题分组,包括新建与编辑专题分组、快捷跳转查看专题分组下的专题详情、删除空的专题分组等,提高专题管理效率。本文为您介绍如何新建及管理专题分组。权限说明 超级管理员和运营管理员支持新建...
统计粒度 统计粒度的时效与汇总逻辑表的时效保持一致,不支持修改。您需要为统计粒度的主键字段选择来源表的字段进行映射。所属主题域与汇总表 主题域 选择上挂指标所属主题域。汇总表 汇总逻辑表默认为添加上挂指标的汇总表,不支持修改。...
表示该角色与此功能权限无关。更多角色说明 自定义项目角色是Dataphin基于产品的功能,对数仓规划、数据集成、数据开发、项目资产权限、发布运维等多个模块的权限管理。管道任务目录权限列表 权限点 项目管理员 项目开发者 项目运维 项目...
本文为您介绍逻辑表任务属性与调度的相关内容。逻辑表任务配置入口 在Dataphin首页,单击顶部菜单栏的 研发。按照下图操作指引,进入逻辑表任务配置页面。配置逻辑表任务 在逻辑表任务配置页面,支持配置逻辑表任务的基本信息与调度相关...
说明 是否允许数据结果下载、是否开启下载审批、审批模版 配置项,仅适用于 分析平台专用计算源 和 数据库SQL,在其他项目中运行的结果依照该项目的下载与审批规则。参数 描述 分析平台专用计算源 计算源 用于分析平台的任务计算。若您为...
实体选择/实体ID选择 选择应用下的实体与实体ID字段。标签选择 选择所需查询的标签。若无可选标签,请参见 离线标签概述。调用代码 请求路径 API请求工具进行调用查询时的请求路径。如下图所示:调用代码 API请求工具进行调用查询时的调用...
单击 编辑,您可对 超时配置 与 重跑配置 进行配置。超时配置 若任务运行超时,即单次运行总时长超过设置阈值仍未完成时,运行任务将会自动终止并置为失败。支持对以下3类任务设置运行时长阈值:任务类型 说明 一次性运行 包括即席查询、...
单击 编辑,您可对 超时配置 与 重跑配置 进行配置。超时配置 若任务运行超时,即单次运行总时长超过设置阈值仍未完成时,运行任务将会自动终止并置为失败。支持对以下3类任务设置运行时长阈值:任务类型 说明 一次性运行 包括即席查询、...
表示该角色与此功能权限无关。更多角色说明 自定义项目角色是Dataphin基于产品的功能,对数仓规划、数据集成、数据开发、项目资产权限、发布运维等多个模块的权限管理。更多详情,请参见 项目权限说明。管道任务目录权限列表 权限点 项目...
选择Dataphin系统已配置的数据源,且数据源需同时具备以下两个条件:数据源的类型与输出组件的类型一致。执行 属性配置 的账号具有该数据源的同步写权限,如果没有权限,则需要申请数据源权限,详情请参见 申请数据源权限。同时您也可以...
若您需在Dataphin中创建基于阿里云产品的数据源,创建数据源前,需确保Dataphin的IP已添加至数据库白名单(或安全组)中,使数据源与Dataphin网络互通。下表为阿里云数据库IP白名单设置的操作指引,您可根据阿里云的产品名称查看对应操作...
区域 描述 ①搜索与筛选区 您可根据应用的名称模糊搜索,也可勾选与我有关的应用(包含我是负责人、我发起过申请的和我管理的)进行快捷筛选。②列表区 为您展示应用的名称、应用分组、负责人、绑定API个数、绑定数据源个数、AppKey、...
表示该角色与此功能权限无关。项目管理员可以在治理工作台中,管理整个项目的所有资源。资源的负责人可以在治理工作台中,管理自己负责的资源。权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 我...
计算引擎 说明 操作文档 离线计算引擎 MaxCompute 阿里原生的大数据计算平台,承载海量数据存储与计算能力,高效率与高稳定性。设置Dataphin实例的计算引擎为MaxCompute 实时计算引擎 阿里云实时计算Flink 阿里云新一代计算引擎Flink,支持...
表示该角色与此功能权限无关。项目管理员可以在治理工作台中,管理整个项目的所有资源。资源的负责人可以在治理工作台中,管理自己负责的资源。权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 我...
超级管理员创建了服务项目后,如果需要添加成员协助开发,您可以将 管理中心-成员列表...后续步骤 完成服务项目成员添加并设置成员后,您就可以配置应用访问数据服务的网络,以实现应用与数据服务之间的网络互通。具体操作,请参见 网络配置。
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障,所以Dataphin需要定义数据分析的质量,以满足资产质量的时效性、准确性、完整性、...
版本对比:使用该版本与其他版本进行对比,可查看其信息与对比版本的信息与差异,差异部分将以高亮形式展示。如下图所示:删除:删除版本状态为 编辑中 的版本。查看实例:查看版本状态为 已提交 所生成的实例。撤回:撤回版本状态为 已...
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障,所以Dataphin需要定义数据分析的质量,以满足资产质量的时效性、准确性、完整性、...