Dataphin中如何增加或修改事实逻辑表的生命周期
概述 本文描述了在Dataphin中如何增加或修改事实逻辑表的生命周期。详细信息 选择您需要修改生命周期的事实逻辑表，依次选择物理化配置，存储生命周期。适用于 Dataphin 事实逻辑表
Dataphin创建事实逻辑表指定事务型和周期快照型的区别
概述 本文主要描述了Dataphin创建事实逻辑表指定事务型和周期快照型的区别。详细信息 创建事实逻辑表的时候，表或字段命名尽量和业务系统保持一致，但是需要通过额外的标识来区分增量和全量表。在Dataphin中，di后缀的事实模型为增量表...
Dataphin事实逻辑表提交失败报错：“Not found ...
问题描述 Dataphin事实逻辑表提交失败报错：Not found physical table meta when renaming table null 问题原因 用户手工drop了事实逻辑表对应的物化表，导致提交报错。解决方案 下线逻辑表，然后再重新提交即可。适用于 Dataphin
Dataphin补数据后，查询表数据显示“Result row size=...
问题描述 为维度逻辑表、事实逻辑表、汇总逻辑表分别运行任务补数据后，发现维度逻辑表与事实逻辑表都可查出补数据内容，但汇总逻辑表中无内容，日志提示“Result row size=0”。问题原因 由于汇总逻辑表需要使用维度逻辑表和事实逻辑表中...
Dataphin事实逻辑表关联枚举维度，没有维度字段可以...
概述 本文主要描述了事实逻辑表关联枚举维度，没有维度字段可以关联时，数据默认值如何匹配到事实表需关联字段的解决方法。详细信息 事实逻辑表关联枚举维度，没有维度字段可以关联时，数据的值会取设定的默认值，如下图-110。如果想取事实...
表设计优化建议
选择合适的事实表和维度表 维度表和事实表的概念，请参见名称解释，事实表和维度表的指导原则如下：维度表的大小通常不超过1万行。事实表的大小通常比较大，比如千万、亿等。选择合适的一级分区键 一级分区键通过 DISTRIBUTE BY 来指定，...
配置逻辑表数据延迟
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效（离线T+1）且该逻辑表设置了 事件时间 字段，才可配置是否开启数据...
数据开发权限列表
Y Y N N N 删除维度逻辑表 Y Y N N N 下线维度逻辑表 Y Y N N N 提交维度逻辑表 Y Y N N N 事实逻辑表 查看事实逻辑表 Y Y Y Y N 新建事实逻辑表 Y Y N N N 编辑事实逻辑表 Y Y N N N 保存事实逻辑表 Y Y N N N 删除事实逻辑表 Y Y N N N ...
数据开发权限列表
Y Y N N N 删除维度逻辑表 Y Y N N N 下线维度逻辑表 Y Y N N N 提交维度逻辑表 Y Y N N N 事实逻辑表 查看事实逻辑表 Y Y Y Y N 新建事实逻辑表 Y Y N N N 编辑事实逻辑表 Y Y N N N 保存事实逻辑表 Y Y N N N 删除事实逻辑表 Y Y N N N ...
Dataphin事实逻辑表来源配置中关联主键字段是灰色无法...
问题描述 Dataphin事实逻辑表来源配置中关联主键字段是灰色无法选择的原因是什么？问题原因 是因为事实表主键字段数据类型与来源对象中对应字段的数据类型不一致。解决方案 修改事实表主键字段数据类型使其与来源对象中的字段类型保持一致...
数仓构建流程
度量：在维度建模中，将度量称为事实，将环境描述为维度，维度是用于分析事实所需要的多样环境。度量通常为数值型数据，作为事实逻辑表的事实。指标：指标分为原子指标和派生指标。原子指标是基于某一业务事件行为下的度量，是业务定义中不...
数仓构建流程
度量：在维度建模中，将度量称为事实，将环境描述为维度，维度是用于分析事实所需要的多样环境。度量通常为数值型数据，作为事实逻辑表的事实。指标：指标分为原子指标和派生指标。原子指标是基于某一业务事件行为下的度量，是业务定义中不...
Dataphin根据周期快照事实表生成的指标获取数据为空
问题描述 Dataphin根据周期快照事实表生成的指标获取数据为空。问题原因 原子指标配置的统计周期标识字段hh是系统生成的分区字段，在统计周期的SQL翻译中，TO_CHAR(TO_DATE(HH,'yyyymmddhhmiss'),'yyyymmddhhmiss')假设HH=06，则会将该数据...
明确统计指标
指标定义注意事项 原子指标是明确统计口径和计算逻辑，事实模型或维度模型定义完成，即可创建原子指标。派生指标即常见的统计指标，派生指标=统计周期+业务限定+原子指标+统计粒度。创建派生指标，注意事项如下：已完成原子指标的创建，且...
Dataphin修改业务快照类事实逻辑表的过滤条件，提交...
问题描述 Dataphin修改业务快照类事实逻辑表的过滤条件，提交发布之后，发现物化代码中之前版本的过滤条件依然存在。修改过滤条件如下：预览SQL或者在物化代码中查看SQL发现有之前版本的过滤条件：问题原因 该事实逻辑表为业务快照类事实...
查看及管理逻辑表相关对象
逻辑表类型：包括普通维度逻辑表、层级维度逻辑表、事件事实逻辑表、快照事实逻辑表、流程事实逻辑表、汇总逻辑表。开发状态：包括草稿、提交中、已提交、开发中。若当前未展示所需的相关逻辑表，您可尝试单击 刷新当前关联逻辑表列表。② ...
维度层（DIM）
数值型字段是作为事实还是维度属性，可以根据字段的常用用途区分。例如，若用于查询约束条件或分组统计，则是作为维度属性；若用于参与度量的计算，则是作为事实。尽量沉淀出通用的维度属性。通过逻辑处理得到维度属性。通过多表关联得到...
查看及管理逻辑表相关对象
逻辑表类型：包括普通维度逻辑表、层级维度逻辑表、事件事实逻辑表、快照事实逻辑表、流程事实逻辑表、汇总逻辑表。开发状态：包括草稿、提交中、已提交、开发中。若当前未展示所需的相关逻辑表，您可尝试单击 刷新当前关联逻辑表列表。② ...
离线数仓构建流程概述
步骤一：开发维度逻辑表 步骤二：开发事实逻辑表 步骤三：开发原子指标 步骤四：开发业务限定 步骤五：开发指标 运维补数据 对任务进行数据回刷，包括管道任务、维度逻辑表、事实逻辑表以及指标。步骤七：运维补数据 验证数据 您可以通过...
离线数仓构建流程概述
步骤一：开发维度逻辑表 步骤二：开发事实逻辑表 步骤三：开发原子指标 步骤四：开发业务限定 步骤五：开发指标 运维补数据 对任务进行数据回刷，包括管道任务、维度逻辑表、事实逻辑表以及指标。步骤七：运维补数据 验证数据 您可以通过...
管理明细及汇总表任务字段
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
管理明细及汇总表任务字段
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
汇总数据层（DWS）
为获取和查询与原始模型一致的结果，聚集的维度和度量必须与原始模型保持一致，因此聚集是不跨越事实的，所以原子指标只能基于一张事实表定义，但是支持原子指标组合为衍生原子指标。聚集会带来查询性能的提升，但聚集也会增加ETL维护的...
Dataphin事实逻辑表新建关联维度时找不到已经创建发布...
概述 本文主要解决Dataphin事实逻辑表新建关联维度时找不到已经创建发布的维度。详细信息 需要将维度和维度逻辑表都进行成功发布。适用于 Dataphin
CDM汇总层设计规范
数据存储及生命周期管理规范 CDM汇总层的表的类型为事实表，存储方式为按天分区。事务型事实表一般会永久保存。周期快照型事实表根据业务需求设置生命周期管理。您可依据3个月内的最大需要访问的跨度设置保留策略，具体计算方式如下：当3个...
Dataphin事件事实逻辑表预览SQL和物化代码时，发现...
问题描述 Dataphin事件事实逻辑表预览SQL和物化代码时，发现WHERE条件中除了过滤条件的限制条件之外，还有其他限制条件。事件事实逻辑表的过滤条件如下：预览SQL发现单字段SQL正常，但是单一SQl中多了两个条件，具体如下图展示：问题原因 ...
Dataphin登录之后找不到“规范建模”功能模块
问题描述 用户登录Dataphin之后，在“开发”模块找不到“规范建模”的功能，没有办法创建维度逻辑表、事实逻辑表、原子指标等：问题原因 创建项目的时候没有勾选创建“维度逻辑表”、“事实逻辑表”、“原子指标”等功能项导致。...
规范建模任务提交说明
维度/事实逻辑表 任务 提交详情说明 提交维度/事实逻辑表任务时，在 提交 对话框中，支持查看任务的提交内容、前置检查结果以及填写提交备注。下图以维度逻辑表提交对话框为例。说明 虚拟维度逻辑表和枚举维度逻辑表不支持提交详情。提交...
规范建模任务提交说明
维度/事实逻辑表 任务 提交详情说明 提交维度/事实逻辑表任务时，在 提交 对话框中，支持查看任务的提交内容、前置检查结果以及填写提交备注。下图以维度逻辑表提交对话框为例。说明 虚拟维度逻辑表和枚举维度逻辑表不支持提交详情。提交...
Dataphin事实逻辑表提交报错为Cause:org.postgresql....
问题描述 本文主要描述了Dataphin事实逻辑表提交报错的解决方法。Cause:org.postgresql.util.PSQLException:ERROR:duplicate key value violates unique constraint"od_model_biz_detail_attribute_attribute_name_model_id_idx"Detail:Key...
Dataphin规范建模的事实逻辑表关联维度的下游派生指标...
问题描述 Dataphin规范建模的事实逻辑表关联维度的下游派生指标已下线，还是无法更换关联维度，报错“存在依赖，不可操作派生指标：xxx”。解决方案 如果需要更换事实逻辑表的关联维度，需要将所有相关的派生指标和业务限定都下线并删除。...
Dataphin规范建模维度逻辑表或事实逻辑表修改运维负责...
问题描述 Dataphin规范建模维度逻辑表或事实逻辑表修改运维负责人报错“非项目的运维角色或管理员不能作为维度表的运维负责人”。解决方案 Dataphin规范建模维度逻辑表或事实逻辑表的运维负责人指的是Prod项目用户的权限角色，而不是Dev...
地址异常检测
地址异常检测是指对用户输入的地址进行检测，判断地址是否为合法地址，并且对地址书写规范性、完整性、是否存在事实错误等进行检查，并输出地址的异常类型，如行政区划错误、路网信息不存在、村/社区不存在等。测试 您可以在地址标准化产品...
配置LogicalTable输入组件
LogicalTable输入组件用于读取Dataphin中逻辑表（事实逻辑表、维度逻辑表、汇总逻辑表）中的数据。同步Dataphin中逻辑表的数据至数据源的场景中，您需要先配置逻辑表信息。本文为您介绍如何配置LogicalTable输入组件。前提条件 在开始执行...
配置LogicalTable输入组件
LogicalTable输入组件用于读取Dataphin中逻辑表（事实逻辑表、维度逻辑表、汇总逻辑表）中的数据。同步Dataphin中逻辑表的数据至数据源的场景中，您需要先配置逻辑表信息。本文为您介绍如何配置LogicalTable输入组件。前提条件 在开始执行...
Dataphin中新建派生指标统计粒度只能选择全表，无法...
解决方案 新建派生指标的时候，需要选择的原子指标、原子指标来源的事实逻辑表/维度逻辑表、事实逻辑表关联的维度逻辑表都已经提交。同时，如果原子指标是通过事实逻辑表的字段或者属性做计算的，需要事实逻辑表和维度逻辑表正常关联。该...
Dataphin中同一张事实表里面进行维度关联编辑，一个...
概述 本文描述Dataphin中同一张事实表里面进行维度关联编辑，一个维度是否可以出现多次？详细信息 可以出现多次，需要维度角色名称不同。适用于 Dataphin
Dataphin中汇总逻辑表补数据生成SQL中事实逻辑表筛选...
概述 Dataphin中汇总逻辑表补数据时，生成的SQL中事实逻辑表筛选日期是最大分区（20230516），而不是补数据输入的业务日期（20230505）。详细信息 汇总逻辑表补数据生成的SQL中，具体分区是由事实逻辑表的“分区与生命周期”中设置的。该...
操作指南
NLP自然语言处理 基础文本服务 电商行业能力 对话智能服务 通用行业能力 医疗文本分析 NLP自学习平台 实体抽取 文本分类 文本关系抽取 双句文本分类 商品评价解析 合同要素抽取 文本匹配 对话文本分类 司法裁判文书（事实认定）合同抽取 ...
应用场景
活动通知 目的是告诉用户某项活动或者重要的事情即将开始，希望用户参与，这类通知的文案比较重要，最大程度的吸引用户点击参与。...系统提示 显示产品用户曾经操作过的行为，例如支付成功、购买成功等，主要以描述事实、信息准确为最关键点。
- 产品推荐
- 这些文档可能帮助您