问题描述 Dataphin删除并下线派生指标报错:“*sql解析错误column not found*”。问题原因 该派生指标有所依赖的下游任务。解决方案 排查哪些任务依赖了该派生指标,解除依赖即可删除。适用于 Dataphin
概述 本文主要介绍Dataphin中如何对两个派生指标进行逻辑运算,生成新的指标。比如以下场景如何实现:目前有“最近7天男性支付数”、“历史至今男性注册人数”两个派生指标,需要统计“最近7天男性支付数”占“历史至今男性注册人数”该...
Y Y Y Y N 新建派生指标 Y Y N N N 编辑派生指标 Y Y N N N 保存派生指标 Y Y N N N 删除派生指标 Y Y N N N 下线派生指标 Y Y N N N 提交派生指标 Y Y N N N 数据处理权限列表 权限点 项目管理员 项目开发者 项目访客 项目分析师 普通成员...
统计时效 派生指标的计算频次,即派生指标产出的时间间隔。目前支持按天计算。汇总逻辑表 派生指标归属的表就是汇总逻辑表。汇总逻辑表有且仅有一个统计粒度,同一个统计时效下统计粒度相同的派生指标属于一个汇总逻辑表。汇总逻辑表的主键...
Y Y Y Y N 新建派生指标 Y Y N N N 编辑派生指标 Y Y N N N 保存派生指标 Y Y N N N 删除派生指标 Y Y N N N 下线派生指标 Y Y N N N 提交派生指标 Y Y N N N 数据处理权限列表 权限点 项目管理员 项目开发者 项目访客 项目分析师 普通成员...
汇总数据层的一个表通常会对应一个统计粒度(维度或维度组合)及该粒度下若干派生指标。汇总表设计原则 聚集是指针对原始明细粒度的数据进行汇总。DWS汇总数据层是面向分析对象的主题聚集建模。在本教程中,最终的分析目标为:最近一天某个...
表格存储支持使用V4签名算法实现对用户密钥的保护,在进行用户身份验证时使用的是由V4签名算法计算生成的派生密钥,而不是实际的用户密钥,从而降低用户密钥的泄露风险。背景信息 V4签名提供了一种新的身份认证方式,它是由阿里云账号或者...
DataWorks智能数据建模首页,为您展示了当前租户内创建的模型及派生指标数量,以及近三十天内当前工作空间成功发布至生产环境的模型列表,帮助您了解模型动态概况。本文为您介绍DataWorks智能数据建模首页信息概览。进入首页 进入数据开发...
问题描述 Dataphin规范建模的事实逻辑表关联维度的下游派生指标已下线,还是无法更换关联维度,报错“存在依赖,不可操作派生指标:xxx”。解决方案 如果需要更换事实逻辑表的关联维度,需要将所有相关的派生指标和业务限定都下线并删除。...
问题描述 Dataphin派生指标在逻辑汇总表补数据总是提示空跑,日志情况如下:问题原因 调度周期不是天调度,当天不在调度周期运行的日期则会直接空跑跳过。解决方案 修改调度周期。选择补数据日期可以向前或者向后选择调度运行的日期,比如...
问题描述 Dataphin公共定义中修改了统计周期的表达式,之前引用该统计周期的派生指标中看已经变更,但是任务执行还是按照之前统计周期执行查询。对应派生指标运行时统计周期值还是按照原来的表达式计算:问题原因 在公共定义中修改了统计...
本文为您介绍数据开发的相关...您需要重新构建派生指标,详情请参见 新建派生指标。系统是否支持维度逻辑表作为事实逻辑表的来源表?不支持。事实逻辑表的来源主表为物理表。icmsDocProps={'productMethod':'created','language':'zh-CN',};
计算公式为:对象数量=逻辑模型数量(维度表模型数量+明细表模型数量+汇总表模型数量+应用表模型数量)+【向上取整(派生指标数量/10)】+【向上取整(复合指标数量/10)】。仅在DataWorks智能数据建模产品中创建并提交的逻辑模型、派生...
业务日期(Bizdate):使用业务日期分区计算派生指标,可保障数据的强一致性,但需保留历史分区用于派生指标计算。生命周期:设置存储的生命周期,生命周期最大值为36500,大于等于该值将自动转为永久存储(显示为36500天)。系统支持快速...
数仓规划相关概念 业务分类:业务分类是某一大类的业务的指标和维度的集合。在后续模型设计过程中,可将模型归属到对应的业务分类,提升后续模型使用的便捷性。例如零售电子商务就是一个一级业务分类,如需进一步细分,可分为门店零售,...
业务日期(Bizdate):使用业务日期分区计算派生指标,可保障数据的强一致性,但需保留历史分区用于派生指标计算。生命周期:设置存储的生命周期,生命周期最大值为36500,大于等于该值将自动转为永久存储(显示为36500天)。系统支持快速...
问题描述 本文主要描述了Dataphin新建的派生指标发布失败,报错是对象在待发布列表中存在其依赖的对象的解决方法。问题原因 新建派生指标时关联的原子指标和汇总逻辑表没有和派生指标一起发布。解决方案 在发布时勾选派生指标,原子指标,...
问题描述 Dataphin中新建派生指标统计粒度只能选择全表,无法选择到其他维度字段。其中原子指标定义如下图:其中事实逻辑表和维度逻辑表已经关联,且都已经提交:问题原因 客户原子指标编辑之后没有提交导致。解决方案 新建派生指标的时候...
采用结构体嵌套的方式从基础结构派生出具体的硬件结构,注意基础结构之后应紧接 aos_gpioc_pin_t 类型数组。派生类型应包含具体硬件操作所需的各种变量。例如:#define GPIOC_ABC_NUM_PINS 32 typedef struct { aos_gpioc_t gpioc;aos_...
是否可累加 是否可累加是指在相同统计粒度下指标(派生指标)相加是否有业务含义或符合业务规则。一般来说,去重计数的指标是不可累加的。例如,用户粒度下的成交金额累加是有业务含义的,张三的成交金额100,李四的成交金额200,即两人共...
是否可累加 是否可累加是指在相同统计粒度下指标(派生指标)相加是否有业务含义或符合业务规则。一般来说,去重计数的指标是不可累加的。例如,用户粒度下的成交金额累加是有业务含义的,张三的成交金额100,李四的成交金额200,即两人共...
用户密钥安全 表格存储客户端支持使用V4签名算法对用户密钥(即阿里云账号或者RAM用户的AccessKey信息)进行计算生成派生密钥,并使用派生密钥发起请求,表格存储服务端在收到该请求时会使用派生密钥进行用户身份验证,避免在身份验证过程...
采用结构体嵌套的方式从基础结构派生出具体的硬件结构。派生类型应包含具体硬件操作所需的各种变量。例如:typedef struct { aos_i2c_t i2c;private data*/void*reg_base;int irq_num;} i2c_abc_t;使用宏 aos_container_of 实现从基础结构...
安全存储SST(Secure Storage)基于ID²设备主密钥派生出存储密钥,加密保护敏感数据。设备密码管理DPM(Device Password Management)基于ID²主密钥派生出共享密钥,提供基于时间戳的动态密码服务。设备端烧录Prov SDK,集成至设备烧录...
前提条件 完成派生指标的创建,详情请参见 创建派生指标。操作步骤 在Dataphin首页,单击顶部菜单栏的 研发。默认进入数据 开发 页面。在数据 开发 页面,按照下图操作指引,进入 新建注册上挂指标 配置向导页面。在 新建注册上挂指标 配置...
派生指标分区中两种方式说明如下:最大分区(MAX_PT):最大分区保留了最新的全量快照数据,选择最大分区中的数据用于派生指标的计算,可缩短生命周期,节约存储资源。业务日期(Bizdate):使用业务日期分区计算派生指标,可保障数据的强...
采用结构体嵌套的方式从基础结构派生出具体的硬件结构。派生类型应包含具体硬件操作所需的各种变量。例如:typedef struct { aos_tty_t tty;private data*/void*reg_base;int irq_num;} tty_abc_t;使用宏 aos_container_of 实现从基础结构...
修饰词:是对指标统计业务范围的限定,如限定“支付金额”的统计范围为“母婴类产品”。时间周期:用于明确指标统计的时间范围或者时间点,如指定统计“支付金额”的时间周期为“最近7天”。派生指标:由原子指标、修饰词、时间周期组合...
前提条件 完成派生指标的创建,详情请参见 创建派生指标。操作步骤 登录 Dataphin控制台。在Dataphin控制台页面,选择工作区地域后,单击 进入Dataphin>>。在Dataphin首页,单击顶部菜单栏的 研发。默认进入数据 开发 页面。在数据 开发 ...
创建派生指标 派生指标用于圈定原子指标统计业务的范围。如何创建,请参见 创建派生指标。发布与运维 开发环境补数据 在开发环境中对任务进行补数据以验证数据模型是否正确并符合预期,包括管道任务、维度逻辑表、事实逻辑表以及指标。详情...
说明 枚举维度指的是维度表的值可枚举,以便规范统一枚举的维度值,维度作为派生指标统计粒度时,实现数据归一汇总计算。虚拟维度与某个字段关联后,以维度的形式作为统计粒度,定义派生指标。例如URL。创建维度时,会自动生成维度逻辑表。...
采用结构体嵌套的方式从基础结构派生出具体的硬件结构。派生类型应包含具体硬件操作所需的各种变量。例如:typedef struct { aos_spi_t spi;private data*/void*reg_base;int irq_num;} spi_abc_t;使用宏 aos_container_of 实现从基础结构...
步骤三:引入数据 规范定义 基于Dataphin数据研发模块,明确统计指标口径并完成配置开发,相关的定义包括业务对象、业务活动、原子指标、业务限定和派生指标。步骤四:规范定义 规范建模 基于规范定义部分定义好的概念以及Dataphin的规范...
步骤三:引入数据 规范定义 基于Dataphin数据研发模块,明确统计指标口径并完成配置开发,相关的定义包括业务对象、业务活动、原子指标、业务限定和派生指标。步骤四:规范定义 规范建模 基于规范定义部分定义好的概念以及Dataphin的规范...
如上图所示,您可以对数据域下的业务规划具体的业务过程,创建业务过程后:后续为每个业务过程规划创建用于衡量业务过程的 原子指标 和 派生指标。后续业务过程中,实际业务的真实数据表(明细表)也可关联具体的业务过程。创建业务过程 ...
进行服务端身份认证 基于ID²的iTLS会话密钥协商:在Server Hello报文中,同时带有通过ID²服务端加密的PresharedKey(会话密钥派生因子),到设备端通过ID²接口解密 iTLS的设备端和服务端基于相同的PresharedKey派生出会话密钥,用于后续...
查询改写组件的主要功能是将用户输入的SQL语句,基于关系模型的等价变换,转换为执行效率...IN谓词转JOIN 子查询解关联 LEFT JOIN(左连接)消除 条件下推(HAVING to WHERE)条件下推(WHERE条件下推派生表)连接条件下推 基于代价的查询变换
INTERSECT:返回派生自两个查询表达式的行的集合运算。返回结果中将丢弃未同时由两个表达式返回的行。EXCEPT|MINUS:返回派生自两个查询表达式之一的行的集合运算。返回的结果行必须存在于第一个结果表而不存在于第二个结果表中。MINUS和...
API 目前 Page 提供如下成员方法以供派生:initOptions render initOptions function initOptions():VueOptions 返回值 返回结果要求是一个合法的 Vue 入参。一般来说,不建议在 Page 层引入过于复杂的配置,涉及到的逻辑都可以放到 ...
问题描述 Dataphin在即席查询中查询汇总逻辑表时提示“has no index”。问题原因 因为汇总逻辑表中没有创建派生指标。解决方案 创建派生指标后查询正常。适用于 Dataphin