配置LogicalTable输入组件
LogicalTable输入组件用于读取Dataphin中逻辑表（事实逻辑表、维度逻辑表、汇总逻辑表）中的数据。同步Dataphin中逻辑表的数据至数据源的场景中，您需要先配置逻辑表信息。本文为您介绍如何配置LogicalTable输入组件。前提条件 在开始执行...
查看并编辑表规范及管控研发流程
开启后，维度逻辑表、事实逻辑表和汇总逻辑表的命名规范说明如下：维度逻辑表：新创建天时效的维度逻辑表，名称会额外增加后缀df，格式为<数据板块名称>.dim_<业务对象名称>_df，例如 ld_demo.dim_member_df。事实逻辑表：新创建的事实逻辑...
查看并编辑表规范及管控研发流程
开启后，维度逻辑表、事实逻辑表和汇总逻辑表的命名规范说明如下：维度逻辑表：新创建天时效的维度逻辑表，名称会额外增加后缀df，格式为<数据板块名称>.dim_<业务对象名称>_df，例如 ld_demo.dim_member_df。事实逻辑表：新创建的事实逻辑...
步骤一：开发维度逻辑表
本文为您介绍如何基于本教程完成 产品维度逻辑表 和 客户维度逻辑表 开发。背景信息 完成产品维度逻辑表开发并提交后，还需完成客户维度逻辑表的开发并提交。本教程的产品维度逻辑表开发与客户维度逻辑表开发操作步骤相同，本文以开发 产品...
步骤一：开发维度逻辑表
本文为您介绍如何基于本教程完成 产品维度逻辑表 和 客户维度逻辑表 开发。背景信息 完成产品维度逻辑表开发并提交后，还需完成客户维度逻辑表的开发并提交。本教程的产品维度逻辑表开发与客户维度逻辑表开发操作步骤相同，本文以开发 产品...
逻辑单元
逻辑单元是单元化架构的基础，一个单元被称为一个 Zone。根据业务特点不同，您可以将系统部署在不同类型的逻辑单元中。RZone（Region Zone）：部署按用户维度拆分的关键业务系统。核心业务和数据单元化拆分，拆分后分片均衡，单元内尽量自...
创建逻辑单元
使用 LHC 部署应用服务前，您需要先定义系统的逻辑单元。逻辑单元是单元化架构的基础，一个单元被称为一个 Zone。根据业务特点不同，您可以将系统部署在不同类型的逻辑单元中。RZone（Region Zone）：部署按用户维度拆分的关键业务系统。...
逻辑单元
在创建单元化工作空间或者工作空间组时，系统会自动进行逻辑单元和部署单元的规划。您可以根据实际需求，对逻辑单元进行修改或删除。本文介绍如何通过控制台为逻辑单元配置灾备及相关操作。背景信息 逻辑单元是单元化架构的基础，一个单元...
Quick BI数据集或仪表板图表是否...处理同环比数据逻辑
问题描述 Quick BI数据集或仪表板图表是否可以在新建字段中处理同环比数据逻辑？问题原因 不可以。数据集或仪表板图表的新建字段中只能处理表查询出来的字段，同环比数据不是表查询出来的，而是Quick BI根据表查询出来的数据加工计算而来。...
按逻辑表关联
根据逻辑表关联对应资源信息，手动选中逻辑表后，系统自动选中该逻辑表对应的场景节点、场景节点对应的场景、场景对应的依赖场景、场景包含的输出逻辑表和输入逻辑表、场景输出的物理表。说明 依赖场景 第一种情况：如果A场景任意场景节点...
扩容逻辑卷
如果您使用LVM（Logical Volume Manager）创建的逻辑卷使用空间不足时，您可以扩容逻辑卷。本文介绍了如何通过LVM扩容一个逻辑卷。前提条件 已创建一个逻辑卷。具体操作，请参见 创建逻辑卷。操作步骤 您可以通过以下两种方式来扩容逻辑卷...
创建部署单元
操作步骤 说明 在创建单元化工作空间时，系统会自动进行逻辑单元和部署单元的规划，参考 创建单元化工作空间。您可以根据实际需求，在发布应用服务前，对部署单元进行增删。登录控制台，在左侧导航栏单击 全局设置 进入工作空间卡片页。...
ECS实例宕机并产生“VFS:Unable to mount root fs on ...
如果您的ECS实例在启动过程中循环宕机，且产生了 VFS:Unable to mount root fs on unknown-block 日志信息，则可以参考本文提供的方案解决问题。问题现象 ECS实例在启动过程中出现循环宕机，无法正常进入系统，且产生类似于如下所示的调用...
新建解决方案
说明 全量创建时，逻辑表中包含了未物理化的逻辑表和已物理化的逻辑表。按范围关联创建：选择 按范围关联创建，系统会以确定的资产类型，进行其关联资产项的追溯查询。说明 目前包含范围以上线的内容进行选择。自定义创建：选择 自定义创建...
数据开发
事实逻辑表成功关联维度包括以下两个条件：系统仅支持普通维度和普通（层级）维度自动生成维度逻辑表。维度逻辑表处于已提交的状态。查询数据表报错 您通过以下两种方式，查询数据表：如果您需要查询逻辑表，则执行以下命令。SELECT*FROM ...
Dataphin给汇总逻辑表任务添加执行参数方法
概述 Dataphin给汇总逻辑表任务添加执行参数方法。汇总逻辑表执行失败，CDH因为数据量较大而报错。在CDH执行的任务都是根据默认参数执行，现在需要给汇总逻辑表任务执行时添加参数，避免CDH上执行的任务内存分配不足OOM。详细信息 在逻辑表...
开发模块
模块设计包括页面设计、数据设计、逻辑编排、工作流编排、资源管理、权限管理和自定义配置。模块开发页面介绍 标号 图中区域 说明 ① 顶部功能区 顶部功能区按钮依次为：模块/当前页：可单击右侧下拉菜单切换最近打开的tab页。提交：提交...
部署单元
部署单元（Cell）定义了一个服务通信的边界，用以规范通信的链路，为发布部署时切流做无损发布、高可用应用架构，以及容灾切换和恢复打下基础。部署单元（Cell）也是实现单元化的基础。双机房双活场景下，一个应用的应用服务可以跨部署单元...
Dataphin新手引导
创建维度逻辑表 维度逻辑表是一个业务对象的具体明细表实现，包含普通维度逻辑表、层级维度逻辑表、枚举维度逻辑表和虚拟维度逻辑表四种类型。如何创建，请参见 创建并配置普通维度逻辑表、创建并配置层级维度逻辑表、创建枚举维度逻辑表、...
逻辑表配置概述
对于逻辑表任务，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍逻辑表任务属性与调度的相关内容。逻辑表任务配置入口 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入逻辑表任务配置...
逻辑表配置概述
对于逻辑表任务，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍逻辑表任务属性与调度的相关内容。逻辑表任务配置入口 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入逻辑表任务配置...
步骤七：运维补数据
本文为您介绍如何为本教程的维度逻辑表、事实逻辑表、汇总逻辑表和管道任务补数据。背景信息 您需要为产品表、客户表、订单表集成任务和明细及汇总表 dim_customer、dim_products、fct_order_buy_di、dws_all 补数据。集成任务和明细及汇总...
步骤七：运维补数据
本文为您介绍如何为本教程的维度逻辑表、事实逻辑表、汇总逻辑表和管道任务补数据。背景信息 您需要为产品表、客户表、订单表集成任务和明细及汇总表 dim_customer、dim_products、fct_order_buy_di、dws_all 补数据。集成任务和明细及汇总...
如何集成第三方API服务
本文完整介绍如何集成第三方API服务的操作步骤。前提条件 已获取待集成的API接口地址，例如：今日星座运势的API接口地址。操作步骤 集成第三方API服务，可以...以上API集成已完成，后续可根据实际业务需求，设置相应的逻辑流和触发条件。
如何使用钉钉连接模块集成钉钉侧能力
前端逻辑流和后端逻辑流中都可使用 后端调用集成API 操作。本文以新建前端逻辑流为例说明。步骤四、使用集成API 本文以集成API 获取角色列表 为例说明如何集成钉钉API。在逻辑流中拖入 后端调用集成API，并设置其属性。节点标题：获取应用...
如何收集操作系统宕机后的内核转储信息?
背景信息 阿里云技术支持人员可以通过在转储文件中找到对应的信息，从而分析操作系统宕机的原因，并同步给用户。说明 您也可以通过Windows平台的 WinDbg 工具和Linux平台的 crash 工具来检查操作系统内核的转储文件。Linux实例 远程连接ECS...
查看并管理明细及汇总表实例
背景信息 周期明细及汇总表实例包括维度 逻辑表实例、事实逻辑表 实例和 汇总逻辑表 实例。逻辑表任务参与系统运维调度后对应生成一个逻辑表实例节点，您可以从表视角或字段视角对需要运维的逻辑表实例进行操作。使用说明 规范建模采用动态...
查看并管理明细及汇总表实例
背景信息 周期明细及汇总表实例包括维度 逻辑表实例、事实逻辑表 实例和 汇总逻辑表 实例。逻辑表任务参与系统运维调度后对应生成一个逻辑表实例节点，您可以从表视角或字段视角对需要运维的逻辑表实例进行操作。使用说明 规范建模采用动态...
Dataphin事实逻辑表提交失败，报Table Not Found的...
问题描述 Dataphin事实逻辑表提交失败，报Table not found事实逻辑表的物化表找不到的错误是什么原因？问题原因 事实逻辑表的名称修改了，但是旧的事实逻辑表没有下线，导致事实表的物化表校验失败。解决方案 先下线旧的事实逻辑表。再修改...
通过向导模式创建API（Dataphin表）
前提条件 MaxCompute计算引擎下支持逻辑表创建API，需完成以下步骤：基于逻辑表生成API的场景中，需要完成逻辑表（维度逻辑表、事实逻辑表和汇总逻辑表）的创建。具体操作，请参见 规范建模概述。基于创建好的逻辑表，在集成中配置同步任务...
Dataphin逻辑表任务运行时间超长
问题原因 该逻辑表任务存在多个物化节点或者所有上游任务没有正常调度导致的。解决方案 该逻辑表任务存在两个物化节点；且存在两个上游依赖。查看逻辑表任务的运行日志；两个物化节点中一个是7月3号运行结束的，另外一个是7月5号运行结束的...
如何选择备份方式
数据库备份DBS 支持逻辑备份和物理备份两种备份方式，为数据库提供连续数据保护、低成本的备份服务，您可以在评估业务后选择最符合您需求的备份方式。逻辑备份与物理备份的区别 参照项 逻辑备份 物理备份 概念 数据库对象级备份，备份内容...
通过SQL模式创建API（Dataphin表）
前提条件 MaxCompute计算引擎支持逻辑表创建API，需完成以下步骤：基于逻辑表生成API的场景中，需要完成逻辑表（维度逻辑表、事实逻辑表和汇总逻辑表）的创建。具体操作，请参见 规范建模概述。基于创建好的逻辑表，在集成中配置同步任务，...
库表级恢复
更多详情，请参见 逻辑备份和物理备份的区别、逻辑备份计划概览。PolarDB分布式版 的逻辑备份仅支持备份整个实例，因此不支持库表级恢复能力。操作步骤 登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在上方选择目标地域。找到目标...
库表级恢复
更多详情，请参见 逻辑备份和物理备份的区别、逻辑备份计划概览。PolarDB分布式版 的逻辑备份仅支持备份整个实例，因此不支持库表级恢复能力。操作步骤 登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在上方选择目标地域。找到目标...
数据处理
数据处理类节点包括串行数据处理节点。本文介绍在蓝图编辑器中，配置数据处理类节点的方法。串行数据处理节点 串行数据处理 节点，是使用串行方式来处理一个事件。使用场景：例如，小数0.835要转换成整数百分比83%，可经过：单位转换（83.5...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
配置汇总逻辑表属性
汇总逻辑表属性包括基本信息、主键信息和汇总逻辑表的自定义参数。本文为您介绍如何配置汇总逻辑表的表属性。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入汇总逻辑表 属性 配置页面。在...
配置汇总逻辑表属性
汇总逻辑表属性包括基本信息、主键信息和汇总逻辑表的自定义参数。本文为您介绍如何配置汇总逻辑表的表属性。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入汇总逻辑表 属性 配置页面。在...
- 产品推荐
- 这些文档可能帮助您