核心概念
本文为您介绍Dataphin中，业务板块、数据域、项目、维度、业务过程、维度逻辑表、事实逻辑表、原子指标等基本概念。数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时，您可以...
ACID语义
对于单个表或分区的CREATE、OVERWRITE、DROP操作，可以保证其原子性。跨表操作时不支持原子性（例如MULTI-INSERT）。在极端情况下，以下操作可能不保证原子性：DYNAMIC INSERT OVERWRITE 多于一万个分区，不支持原子性。INTO类操作：这类...
Broker Load
Broker Load保证了单次导入的多张表之间原子性成功或失败。data_desc常见参数如下所示。data_desc:DATA INFILE('file_path',.)[NEGATIVE]INTO TABLE tbl_name[PARTITION(p1,p2)][COLUMNS TERMINATED BY column_separator][FORMAT AS file_...
基本概念
为便于您更好的理解视频点播产品，您可以在使用前了解视频格式、视频编码、视频转码等基本概念。文件格式 操作系统中的文件名都有后缀，即扩展名，例如1.doc，2.jpg，3.avi等。设置扩展名的目的是让系统中的应用程序来识别并关联这些文件，...
基本概念
通过阅读本文，您可以了解智能媒体服务常用名词的基本概念。音视频基本概念 视频转码 视频转码是指将已经压缩编码的视频码流转换成另一个视频码流，以适应不同的网络带宽、不同的终端处理能力和不同的用户需求。转码本质上是一个先解码、再...
同步调用
您可以用以下公式来估算并发的函数调用数：并发调用数=请求速率×函数执行时间 请求速率：函数被调用的速率，即每秒请求数或每秒事件数。函数执行时间：函数请求到达实例开始，到请求执行完毕的时长。单位为秒。例如，一个处理阿里云OSS...
基础排序函数
适用场景1：对price字段做归一化，但是不知道price的值域，可以使用如下公式进行归一化normalize(price)场景2：对price字段做归一化，但是只知道price的最大值为100，可以使用如下公式进行归一化normalize(price,100)场景3：对price字段做...
同步调用
您可以用以下公式来估算并发的函数调用数：并发调用数=请求速率×函数执行时间 请求速率：函数被调用的速率，即每秒请求数或每秒事件数。函数执行时间：函数请求到达实例开始，到请求执行完毕的时长。单位为秒。例如，一个处理阿里云OSS...
基础排序函数
适用场景1：对price字段做归一化，但是不知道price的值域，可以使用如下公式进行归一化normalize(price)场景2：对price字段做归一化，但是只知道price的最大值为100，可以使用如下公式进行归一化normalize(price,100)场景3：对price字段做...
Quick BI如何按月统计每年的数据
您需要数据集中添加计算字段，手动把“月份”信息提取出来，您可以参考如下操作过程：打开数据集编辑页，添加计算字段，您可以参考如下公式（如果数据库不支持month函数，也可以用substring函数，具体以数据库语法规则为准）将“月份”字段...
项目角色管理
查看（查看模型视图/列表视图/表属性/历史信息/版本详情/版本对比）编辑 维度逻辑表/事实逻辑表/原子指标/业务限定/指标/汇总逻辑表-新建类 维度逻辑表/事实逻辑表/原子指标/业务限定/指标/汇总逻辑表-编辑（编辑按钮、画布区操作、物化...
项目角色管理
查看（查看模型视图/列表视图/表属性/历史信息/版本详情/版本对比）编辑 维度逻辑表/事实逻辑表/原子指标/业务限定/指标/汇总逻辑表-新建类 维度逻辑表/事实逻辑表/原子指标/业务限定/指标/汇总逻辑表-编辑（编辑按钮、画布区操作、物化...
集群容量规划
因此，实际的存储空间可以通过下面公式估算：实际空间=源数据*1.9 不同的业务场景在写入和查询方面的复杂度、比重各有不同，建议先基于存储容量评估选择合适的资源，再进行业务测试确认计算资源是否足够。通常的建议如下：至少选择2个节点...
如何选择应用端连接池
PolarDB-X 兼容MySQL协议，请求在单个连接上串行执行，不同连接上的请求可以并行执行，由此得到以下公式：单个连接的QPS上限=1000/RT 说明 QPS为每秒查询请求数，RT的单位是毫秒，1000是1秒换算成毫秒的数。连接数=应用访问单个CN的QPS上限...
PolarDB-X 1.0实例中的连接
您可以参照以下公式来计算 PolarDB-X 1.0 实例中后端连接池的最大连接数。PolarDB-X 1.0实例后端连接池的最大连接数=向下取整（私有定制RDS实例最大连接数/私有定制RDS实例物理分库数/PolarDB-X 1.0实例节点数）例如，某用户搭配购买了以下...
成本数据模型介绍
示例一：已知计算资源单价 例如，在常见的通过计算资源估算Pod成本的场景下，您可以参见以下公式完成Pod成本的分摊：Pod成本占比=Pod模拟成本/Σ（集群下Node成本）Pod模拟成本=（CPU单价*CPU分配量+内存单价*内存分配量+GPU单价*GPU分配量...
动态资源超卖
ack-koordinator提供动态资源超卖功能，通过对节点负载数据的实时收集，可以充分挖掘集群中已分配但未使用的资源量，以实现对集群资源的动态超卖。本文主要介绍如何使用动态资源超卖功能。前提条件 仅支持ACK Pro版集群。具体操作，请参见 ...
健康检查最佳实践
因此，可以根据计算公式（节点最大可容忍故障时间/3），来确定Liveness的检查周期。例如，单个故障实例最大可容忍30秒内不重启，则检查周期设置为10秒。因此，Readiness检查周期可设置为1秒，Liveness检查周期根据实际情况设置，如果没有...
电子罗盘
对于部分器件，可能存在不同轴灵敏度不一致的情况，我们可以通过如下公式将三个轴缩放到同一个尺度。其中，x_min，x_max 等代表数据边界，x_offset 等代表修正的数据球心。\dfrac{x-x_{offset}}{x_{\max}-x_{\min }}=\dfrac{y-y_{offset}}{...
规格与定价（金融云）
计算公式：1000 GB x 0.00021元/GB/小时=0.21元/小时 日志备份 0.000315元/小时/GB 每小时费用=（日志备份总大小-100 GB）x每小时价格 示例：日志备份总大小为1000 GB，那么每小时费用为 0.189元。计算公式：（1000 GB-100 GB）x 0.00021元...
QueryPublicModelEngine
您可以在FML语句结尾增加offset num limit num语句，表示查询信息时的偏移量及每次返回的页数。目前偏移量取值仅支持为页数的倍数。每次调用该接口时，最多返回1000条数据。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名...
Util
适用于按照数值大小进行排序，并当数值在一定范围内无需在做区分，比如查找距离用户最近的酒店，按照距离由近到远排序，并且认为距离小于100m的酒店不用做区分，假设 distanceValue为距离，函数可以写为gauss_decay(0,distanceValue,5,0....
新建指标
通过时间修饰词、原子词和计算逻辑等，您可配置衍生指标，然后将新建的指标应用于再次衍生、分析数据报表等业务。本文介绍新建指标的操作步骤。前提条件 已完成导入原始定义指标和新增原子词。具体操作，请参见 导入原始定义指标、新增原子...
数仓构建流程
派生指标=时间周期+修饰词+原子指标，派生指标可以理解为对原子指标业务统计范围的圈定。业务限定：统计的业务范围，筛选出符合业务规则的记录（类似于SQL中 where 后的条件，不包括时间区间）。统计周期：统计的时间范围，例如最近一天，...
数仓构建流程
派生指标=时间周期+修饰词+原子指标，派生指标可以理解为对原子指标业务统计范围的圈定。业务限定：统计的业务范围，筛选出符合业务规则的记录（类似于SQL中 where 后的条件，不包括时间区间）。统计周期：统计的时间范围，例如最近一天，...
创建衍生原子指标
例如，一个已提交的原子指标为支付金额，另一个已提交的原子指标为支付人数，您可以通过新建衍生原子指标的方式统计人均支付金额。本文为您介绍如何创建衍生原子指标。操作步骤 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引...
创建衍生原子指标
例如，一个已提交的原子指标为支付金额，另一个已提交的原子指标为支付人数，您可以通过新建衍生原子指标的方式统计人均支付金额。本文为您介绍如何创建衍生原子指标。操作步骤 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引...
模式匹配
replacement 串可以包含 \``n，其中 \``n 是 1 到 9，表明源串里匹配模式里第 n 个圆括号子表达式的子串应该被插入，并且它可以包含 \&表示应该插入匹配整个模式的子串。如果你需要放一个文字形式的反斜线在替换文本里，那么写 \\。flags ...
计费概述
401~10,000 195 计费公式及案例 您可以根据实际应用规模购买需要的应用实例数。应用实例数按规格分为几个区间，例如专业版1~400为一个区间，401~10,000为一个区间。区间内的应用实例单价相同。使用的规格越大，区间内的实例单价越低。为了...
消费-通过消费组实现高可靠消费
如果A暂时离开或永久离开，其他柜员只要使用相同的规范：记录中已操作则处理下一个即可，如果没有则重复做，过程中需要保证原子性。CheckPoint可以将Shard中的元素位置（或时间）作为Key，放入一个可以持久化的对象中。代表当前元素已经被...
基本概念
步骤（Step）步骤是流程中的工作单元，可以是简单的原子步骤，如任务（task）、成功（succeed）、失败（fail）、等待（wait）和传递（pass）等；也可以是复杂的控制步骤，如选择（choice）、并行（parallel）和并行循环（foreach）等。步骤...
基本介绍
在FDL中，一个流程（Flow）通常包含若干步骤（Step），这些步骤可以是简单的原子步骤，如任务（task）、成功（succeed）、失败（fail）、等待（wait）和传递（pass）等；也可以是复杂的控制步骤，如选择（choice）、并行（parallel）和并行...
功能特性
一个流程通常包含若干状态（State），这些状态可以是简单的原子状态，例如集成任务（Task）、成功（Succeed）、失败（Fail）、等待（Wait）和传递（Pass）等；也可以是复杂的控制状态，例如选择（Choice）、并行（Parallel）和循环（Map）...
流程定义介绍
一个流程（Flow）通常包含若干状态（State），这些状态可以是简单的原子状态，例如集成任务（Task）、成功（Succeed）、失败（Fail）、等待（Wait）和传递（Pass）等；也可以是复杂的控制状态，例如选择（Choice）、并行（Parallel）和循环...
分析数据
您可以在编辑页面的单元格直接输入内容，也可以通过函数计算公式从其它单元格中计算获取结果。单元格的行标记从A开始由左向右递增、列标记从1开始由上向下递增。右键单击某一行的行数或某一列的列数，您可以 删除、隐藏 和 取消隐藏 该行或...
Broker Load
您可以根据 unselected.rows 的参数值判断where条件过滤了多少行，根据 dpp.norm.ALL 和 dpp.abnorm.ALL 两个指标可以验证当前导入任务的错误率是否超过max-filter-ratio。三个指标之和就是原始数据量的总行数。TaskInfo 主要显示当前导入...
典型客户案例
利用分布式事务 Saga 编排能力，行方通过对原子服务的编排，实现了低代码业务逻辑的开发，大幅度降低了业务研发时间及难度，并为中台积累了大量可以重复使用的原子服务。利用容器服务，发布速度从基于虚拟机的五分钟降低到十数秒。安全：在...
集群架构与读写分离架构的命令限制
但当使用 WATCH 命令或事务存在多Key命令（如 MSET、DEL 等）时，需严格要求事务所操作的Key均在同一Slot，则事务不会被拆分，此时可以保证事务的原子性。为便于日常管理和运维，集群架构代理模式实例支持多个自研的命令，更多信息请参见 ...
集群架构与读写分离架构实例的命令限制
但当使用 WATCH 命令或事务存在多Key命令（如 MSET、DEL 等）时，需严格要求事务所操作的Key均在同一Slot，则事务不会被拆分，此时可以保证事务的原子性。为便于日常管理和运维，集群架构代理模式实例支持多个自研的命令，更多信息请参见 ...
创建原子指标
原子指标是对指标统计口径、具体算法的抽象。Dataphin创新性地提出了设计即开发的理念，指标定义同时也明确了设计统计口径（即计算逻辑），提升了研发效率，并保证了统计结果的一致性。本文为您介绍如何创建原子指标。操作步骤 在Dataphin...
- 产品推荐
- 这些文档可能帮助您