前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。在左侧导航栏,单击 图标,选择 数据...
通过物理化逻辑表,可以将您在 数据资源平台 中创建的逻辑表存储到对应的云计算资源中,成为云计算资源或者数据库中实际存在的表,方便实施后面的管理。本文介绍如何物理化逻辑表。前提条件 已生成待物理化逻辑表的DDL语句,具体操作,请...
本文介绍批量物理化数据模型中的多张逻辑表到指定的云计算资源下。完成从逻辑态模型的物化。前提条件 已配置MaxCompute云计算资源“data_odps_dev”。已配置RDS云计算资源“dataq_dws_rds_dev”。完成13个逻辑模型创建(保证每个模型已经...
通过物理化逻辑表,可以将您在 企业数据智能平台 中创建的逻辑表存储到对应的云计算资源中,成为云计算资源或者数据库中实际存在的表,方便实施后面的管理。本文介绍如何物理化逻辑表。前提条件 已生成待物理化逻辑表的DDL语句,具体操作,...
前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。在左侧导航栏,单击 图标,选择 数据资源...
本文介绍如何配置云盒计算资源,在满足业务需求的同时,有效降低成本,并提升硬件风险应对能力。背景信息 云盒的硬件设计中,各类硬件设备的保障如下:网络设备:采用双机冗余双上连设计,确保云盒内网络的高连续性,且不存在单点故障。...
数据查询为用户提供对云计算资源中物理表基本情况的概览能力,帮助用户直观了解物理表基础信息、字段内容分布等情况,建立对数据表的宏观理解,为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。数据导入 支持512 MB...
节点类型 对应的云计算资源类型 说明 MaxCompute SQL MaxCompute 离线节点,运行于MaxCompute类型的云计算资源之上,可通过输入SQL语句方式处理MaxCompute和Table Store类型的数据源。MaxCompute MR MaxCompute 离线节点,当算法脚本类型为...
可以通过DDL设置功能,一键设置逻辑表在各个云计算资源下的DDL语句,方便逻辑表物理化至各个云计算资源时使用。本文以MaxCompute云计算资源类型为例,介绍如何设置逻辑表的DDL语句。前提条件 已新建逻辑表,具体操作,请参见 通过Excel导入...
数据查询为用户提供对云计算资源中物理表基本情况的概览能力,帮助用户直观了解物理表基础信息、字段内容分布等情况,建立对数据表的宏观理解,为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。如果数据表格存储的是...
可以通过DDL设置功能,一键设置逻辑表在各个云计算资源下的DDL语句,方便逻辑表物理化至各个云计算资源时使用。本文以MaxCompute云计算资源类型为例,介绍如何设置逻辑表的DDL语句。前提条件 已新建逻辑表,具体操作,请参见 通过Excel导入...
通过物理化的方式,将创建的逻辑表存储到对应的云计算资源中,成为云计算资源或者数据库中实际存在的表,方便实施后面的管理,本文介绍如何物理化逻辑表。前提条件 已新建工作组“信息中心(xxzx)”,具体操作,请参见 新建工作组。已在工作...
通过物理化自定义函数,可以将您在数据资源平台中创建的自定义函数存储到对应的云计算资源中,成为云计算资源中实际存在的函数,便于被引用后检测质量或者在数据开发中处理数据。本文介绍如何物理化自定义函数。前提条件 已新建自定义函数...
通过物理化自定义函数,可以将您在数据资源平台中创建的自定义函数存储到对应的云计算资源中,成为云计算资源中实际存在的函数,便于被引用后检测质量或者在数据开发中处理数据。本文介绍如何物理化自定义函数。前提条件 已新建自定义函数...
前提条件 已在系统设置模块中添加云计算资源。背景信息 资产注册功能是 企业数据智能平台 资产管理的基础。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产注册。说明 若已在 资产注册 页面...
可对云计算资源中物理表进行查询,了解物理表基础信息、字段内容分布等情况。本文介绍如何进行物理表查询。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产...
前提条件 已在系统设置模块中添加云计算资源。背景信息 资产注册功能是 数据资源平台 资产管理的基础。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产注册。说明 若已在 资产注册 页面,...
通过云计算资源 将已存在数据库中的数据表,通过云计算资源扫描方式,导入 企业数据智能平台 系统,实现逆向创建逻辑表。具体操作,请参见 通过云计算资源导入逻辑表。通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联...
前提条件 已新建导入数据所需的云计算资源,具体操作,请参见 新建云计算资源。说明 支持进行数据导入的云计算资源有:RDS MySQL、MaxCompute、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、PostgreSQL。操作步骤 登录企业数据智能平台。...
通过云计算资源 将已存在数据库中的数据表,通过云计算资源扫描方式,导入 数据资源平台 系统,实现逆向创建逻辑表。具体操作,请参见 通过云计算资源导入逻辑表。通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联信息...
前提条件 已新建导入数据所需的云计算资源,具体操作,请参见 新建云计算资源。说明 支持进行数据导入的云计算资源有:RDS MySQL、MaxCompute、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、PostgreSQL、Hologres。操作步骤 登录 数据...
将数据字典和质量校验函数以及逻辑表物理化到数据库,帮助您在数据...在 物理化 面板,云计算资源类型 选择 AnalyticDB PostgreSQL,云计算资源 选择 adbpg_dev。单击 执行物理化。在 物理化 面板的 执行结果 区域,可以查看物理化执行结果。
数据查询为用户提供对云计算资源中物理表基本情况的概览能力,帮助用户直观了解物理表基础信息、字段内容分布等情况,建立对数据表的宏观理解,为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。如果数据表格存储的是...
数据服务API是一种API类型,由云计算资源中的数据通过参数配置生成,生成的API便于后续调用,减少资源操作成本。SQL模式创建数据服务API适用于多表关联、复杂筛选过滤的查询,通过编写SQL代码的方式完成API封装。本文介绍如何用SQL模式创建...
数据服务API是一种API类型,由云计算资源中的数据通过参数配置生成,生成的API便于后续调用,减少资源操作成本。SQL模式创建数据服务API适用于多表关联、复杂筛选过滤的查询,通过编写SQL代码的方式完成API封装。本文介绍如何用SQL模式创建...
说明 数据源的参数配置可参考系统设置中的新建云计算资源,更多信息,请参见 新建云计算资源。配置完成后,单击 确定。相关操作 在数据源添加成功后,在 数据源管理 页面,可对数据源进行以下操作:操作 说明 查看数据源详情 在数据源列表...
通过物理化数据字典,可以将数据字典物理化到云计算资源生成物理表,保证设置的数据质量规则在云计算资源中生效。本文介绍如何物理化数据字典。前提条件 已创建或者导入数据字典,具体操作,请参见 新建数据字典 和 导入数据字典。已创建...
数据服务API是一种API类型,由云计算资源中的数据通过参数配置生成,生成的API便于后续调用,可减少资源操作成本。向导模式适用于单表的简单查询,零代码通过界面化的设置完成API的封装。本文介绍如何使用向导模式创建数据API。前提条件 已...
Spark Batch节点是离线节点,运行于Spark类型的云计算资源之上,可通过输入SQL语句处理Spark类型的数据源。本文介绍如何新建Spark Batch类型的公共节点。前提条件 已创建Spark On Yarn或者Spark Cluster类型的云计算资源,具体信息,请参见...
数据服务API是一种API类型,由云计算资源中的数据通过参数配置生成,生成的API便于后续调用,可减少资源操作成本。向导模式适用于单表的简单查询,零代码通过界面化的设置完成API的封装。本文介绍如何使用向导模式创建数据API。前提条件 已...
运行配置 运行配置用于设置输入节点的云计算资源和源数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的数据源类型,可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...
运行属性 运行属性 用于设置数据检测节点的云计算资源和所要检测的数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的云计算资源类型。必须与下游节点的云计算资源类型相同。数据结构 数据模型指代您已经在云资源中创建的物理表。...
前提条件 您已创建用于进行节点运行、部署、上线的云计算资源,具体操作,请参见 新建云计算资源。背景信息 计算节点是用于定义不同数据类型处理逻辑的节点,而公共节点是可组成数据加工场景且能被多次复用的计算节点。公共场景支持计算...
开发、生产云计算资源隔离,权限隔离,对生产环境的数据读写权限、任务上线发布进行严格权限控制,更加安全可靠。如果创建工作组时选择了归属组织,那么成员管理中添加的成员就是该组织下的成员。设置完成后,单击 确定。相关操作 工作组...
运行配置 运行配置用于设置输入节点的云计算资源和源数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的数据源类型,可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...
运行属性 运行属性 用于设置数据检测节点的云计算资源和所要检测的数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的云计算资源类型。必须与下游节点的云计算资源类型相同。数据结构 数据模型指代您已经在云资源中创建的物理表。...
本文为您介绍 企业数据智能平台 服务关联角色(AliyunServiceRoleForDataQ)的应用场景以及如何删除服务关联角色。...删除云计算资源的具体操作,请参见 管理云计算资源-删除云计算资源。删除服务关联角色具体操作,请参见 删除服务关联角色。
云计算资源连通后,即可在工作组中开展数据同步、治理、开发、运维、质量评估等工作。租户全局角色 数据资源平台产品提供的全局角色及各角色的权限详情如下表所示。租户全局角色对数据资源平台各个组件的权限详情,请参见 权限列表。角色 ...
前提条件 已新建逻辑表,具体操作,请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑表。背景信息 如果逻辑表字段配置了 关联字段标准 的值,则在质量规则页面,PostgreSQL、RDS MySQL、AnalyticDB PostgreSQL、...
物理化自定义函数 将自定义函数存储到对应的云计算资源中,成为云计算资源中实际存在的函数,便于快速对数据进行ETL处理。具体操作,请参见 物理化自定义函数。数据标准中引用 将字段标准数据元、维度、指标值域设置中引用该函数。生成标准...