任务常见问题
jstack|grep<任务实例id>-A 20 如何排查任务运行慢的原因？开启专业版，使用链路追踪。具体操作，请参见 如何接入链路追踪。任务运行实例达到上限怎么办？问题现象：在任务管理页面，单击 运行一次，收到 任务运行实例达到上限，请稍后重试...
任务常见问题
jstack|grep<任务实例id>-A 20 如何排查任务运行慢的原因？开启专业版，使用链路追踪。具体操作，请参见 如何接入链路追踪。任务运行实例达到上限怎么办？问题现象：在任务管理页面，单击 运行一次，收到 任务运行实例达到上限，请稍后重试...
查看并管理明细及汇总表实例
背景信息 周期明细及汇总表实例包括维度 逻辑表实例、事实逻辑表 实例和 汇总逻辑表 实例。逻辑表任务参与系统运维调度后对应生成一个逻辑表实例节点，您可以从表视角或字段视角对需要运维的逻辑表实例进行操作。使用说明 规范建模采用动态...
按线上场景关联
根据线上场景关联资源信息，手动选中场景后，系统自动选中场景的依赖场景、场景的场景节点、场景节点的逻辑表、场景的输出物理表。说明 依赖场景 第一种情况：如果A场景任意场景节点的输出表是B场景任意场景节点的输入表，那么A场景就是B...
查看并管理明细及汇总表实例
背景信息 周期明细及汇总表实例包括维度 逻辑表实例、事实逻辑表 实例和 汇总逻辑表 实例。逻辑表任务参与系统运维调度后对应生成一个逻辑表实例节点，您可以从表视角或字段视角对需要运维的逻辑表实例进行操作。使用说明 规范建模采用动态...
策略创建
配置计算逻辑 策略计算逻辑配置页面相关的名词和配置模块说明如下：条件名称：条件名称为非必填项，为方便可视化预览时直观展示策略逻辑，建议输入易于理解的内容。左变量：左变量可以选择事件字段、设备变量、自定义变量、系统变量和中间...
汇总数据层（DWS）
查询汇总逻辑表 逻辑表运维包括 逻辑表任务 和 逻辑表实例：逻辑表任务 用于从逻辑表视角切入，为您展现逻辑表内部任务关系，详情请参见 逻辑表任务。逻辑表实例 用于查看已运行的逻辑表任务包含的节点实例及其状态，详情请参见 逻辑表实例...
质检规则配置
例如下图，命中正则表达式：买.*(ssd盘|普通盘)，排除正则表达式：用不了|不能用|不生效，所以结合起来就是只匹配用户购买产品的场景，但是要排除掉故障报修的场景，示例语句：我想买一块ssd盘，应该怎么操作（可命中）/我前两天买了ssd盘...
新建工作流
本示例介绍了使用逻辑编排创建一个完整的工作流过程中的操作和通用的基本概念，比如添加触发器、添加操作、运行工作流等。在本示例中，我们通过一个实际案例，向您展示如何通过逻辑编排工作流自动化您的日常工作。在本示例中，构建一个...
归因配置
如果您对于行为归因方面没有准确的进行埋点，可以在此页面配置归因逻辑，交由AIRec来自动进行归因，因此在使用AIRec冷启动版服务前，需要对您上传的各个行为数据都进行归因配置。归因配置 在归因配置中，您可以针对每个行为进行归因方式...
Dataphin中DWS建的汇总逻辑表可以在ODS和ADS项目中...
概述 本文主要讲述了DWS建的汇总逻辑表可以在ODS和ADS项目中看到的原因。详细信息 Dataphin的汇总逻辑表不归属项目，归属业务板块，物理表归属于项目，所以同一个业务板块下面所有的项目都可以看到这张汇总逻辑表。适用于 Dataphin
配置逻辑表上游依赖
调度依赖用于配置逻辑表和事实逻辑表任务节点，Dataphin通过各个节点的调度依赖的配置结果，有序的运行业务流程中各个节点，保障业务数据有效、适时地产出。本文为您介绍如何配置逻辑表和事实逻辑表的调度依赖配置。操作步骤 请参见 数据...
使用限制
本文为您介绍逻辑编排的使用限制。规则 限制数量 注释 同一区域下的编排实例上限 500 个-单个工作流的操作数上限 200 个 如需添加更多操作节点，推荐使用编排实例连接器进行嵌套扩展（公测版暂不支持）操作嵌套层级上限 5 个 如需添加更多...
字段加工
用途 字段加工算子可以将节点的数据进行逻辑加工，然后作为输出字段在之后的节点使用。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 加工逻辑 对于需要加工的字段，需要输入字段...
08批量物理化逻辑模型
本文介绍批量物理化数据模型中的多张逻辑表到指定的云计算资源下。完成从逻辑态模型的物化。前提条件 已配置MaxCompute云计算资源“data_odps_dev”。已配置RDS云计算资源“dataq_dws_rds_dev”。完成13个逻辑模型创建（保证每个模型已经...
配置逻辑表上游依赖
调度依赖用于配置逻辑表和事实逻辑表任务节点，Dataphin通过各个节点的调度依赖的配置结果，有序的运行业务流程中各个节点，保障业务数据有效、适时地产出。本文为您介绍如何配置逻辑表和事实逻辑表的调度依赖配置。操作步骤 请参见 数据...
基本概念
哈希函数用于将Map端的输出数据按照哈希逻辑分配到不同的Reduce Worker上。归并 归并（Combiner）函数将Shuffle阶段相邻的Record进行归并。您可以根据不同的业务逻辑选择是否使用归并函数。归并函数是MapReduce计算框架的一种优化，通常...
数据建模
在数据模型管理模块对逻辑表进行层次结构设计、逻辑表定义，引用标准元素定义，保证不同的逻辑表设计人员按照统一口径进行操作，除此以外还支持：逻辑表质量配置、DDL设置、逻辑表物理化、表关系配置等功能。逻辑表层级管理：支持对逻辑...
新建普通维度逻辑表
普通维度逻辑表用于描述实体对象，包含对实体对象的各方面描述。例如会员普通维度逻辑表，包含会员名称、会员ID、会员邮件等数据。本文为您介绍如何创建并配置普通维度逻辑表。使用限制 若您未购买 数据标准 模块，不支持设置表中的 数据...
按逻辑表关联
根据逻辑表关联对应资源信息，手动选中逻辑表后，系统自动选中该逻辑表对应的场景节点、场景节点对应的场景、场景对应的依赖场景、场景包含的输出逻辑表和输入逻辑表、场景输出的物理表。说明 依赖场景 第一种情况：如果A场景任意场景节点...
新建普通维度逻辑表
普通维度逻辑表用于描述实体对象，包含对实体对象的各方面描述。例如会员普通维度逻辑表，包含会员名称、会员ID、会员邮件等数据。本文为您介绍如何创建并配置普通维度逻辑表。使用限制 若您未购买 数据标准 模块，不支持设置表中的 数据...
新建事实逻辑表
业务活动（过程）添加多个属性后生成事实逻辑表。事实逻辑表包含主键、度量和事实属性字段。主键用于定义事实逻辑表从来源表中的取数逻辑；度量是数值类型的字段，表示某个方面的大小、多少或者程度。本文为您介绍如何新建及配置事实逻辑表...
新建事实逻辑表
业务活动（过程）添加多个属性后生成事实逻辑表。事实逻辑表包含主键、度量和事实属性字段。主键用于定义事实逻辑表从来源表中的取数逻辑；度量是数值类型的字段，表示某个方面的大小、多少或者程度。本文为您介绍如何新建及配置事实逻辑表...
逻辑数仓
数据管理DMS提供的逻辑数仓具有强大的数据源管理能力，可以实现将企业的异构数据源进行逻辑聚合，形成物理分散、逻辑统一的虚拟数仓，然后快速地提供数据分析和访问服务，满足业务人员、BI分析师、运营人员等各种角色的需求。背景信息 企业...
创建与使用逻辑组
您可以在 数据库备份DBS 中添加多个逻辑组，可根据来源、项目、类型等维度将数据源添加至对应逻辑组中，以便更好地管理多个数据源。创建逻辑组 访问 逻辑组列表 页面，然后在上方选择目标地域。单击 添加逻辑组。每个地域的逻辑组上限为20...
教育行业模板-多路搜索
介绍 OpenSearch的 多路搜索功能 结合了文本搜索和向量搜索，做到了搜索延迟和计算消耗低于OR逻辑情况下更高的准确性，并在搜题场景已经得到有效验证。多路召回架构还可以使用到：图片向量召回、公式召回、个性化召回等场景中。纯文本查询...
功能简介
在数据模型管理模块对逻辑表进行层次结构设计、逻辑表定义，引用标准元素定义，保证不同的逻辑表设计人员按照统一口径进行操作，除此以外还支持：逻辑表质量配置、DDL设置、逻辑表物理化、表关系配置等功能。逻辑表层次管理：支持对逻辑表...
功能简介
在数据模型管理模块对逻辑表进行层次结构设计、逻辑表定义，引用标准元素定义，保证不同的逻辑表设计人员按照统一口径进行操作，除此以外还支持：逻辑表质量配置、DDL设置、逻辑表物理化、表关系配置等功能。逻辑表层次管理：支持对逻辑表...
如何写好提交，做一个有品位的开发者
git add-u$git commit 1.2 拆分当前提交（紧耦合）如果要拆分的提交，不同的实现逻辑耦合在一起，难以通过补丁块拣选（git add-p）的方式修改提交，怎么办？这时可以直接编辑文件，删除要剥离出此次提交的修改，然后执行：$git commit-...
触发逻辑流
使用逻辑流时有多种触发方式，包括页面触发、页面组件触发、逻辑流触发和工作流触发。本文分别介绍各种触发方式的详细操作。背景信息 触发逻辑流有以下四种方式：页面触发：在页面加载前调用逻辑流。页面组件触发：通过页面组件的事件触发...
基本介绍
一个工作流编排实例的逻辑定义至少包含一个触发器（Trigger）和需要执行的任务（Action）。目前定义只支持 JSON 语法。最外层的结构定义如下：{"schemaVersion":"${flow-schema-version}","triggers":{"${flow-trigger-definitions}"},...
查看并管理明细汇总表任务
明细汇总表任务是Dataphin针对规范建模创建的逻辑表（维度逻辑表、事实逻辑表、汇总逻辑表）任务提供的字段视角运维功能，本文为您介绍如何查看并管理明细汇总表任务。背景信息 明细汇总表任务包括维度逻辑表任务、事实逻辑表任务和汇总...
核心概念
本文为您介绍Dataphin中，业务板块、数据域、项目、维度、业务过程、维度逻辑表、事实逻辑表、原子指标等基本概念。数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时，您可以...
概述
引入函数的原因主要有：表达式可以实现+、-、*、/，以及=、!等比较符，但不能进行更为复杂的数学、时间、字符串运算。函数可以响应业务上对逻辑封装的诉求，例如从身份证中提取生日、性别等。跨引擎 由表达式、函数组成的算子具备跨引擎...
管理中心概述
同时您也可以配置计算和存储资源的规则，优化逻辑表任务、SQL查询任务及设置查询引擎，以提高数据构建效率。使用限制 仅支持超级管理员在管理中心管理成员、设置Dataphin计算引擎、配置智能引擎。功能介绍 管理中心支持的功能如下表所示。...
网络架构介绍
T1 MGW VMware NSX T1类别的逻辑路由器，名称为MGW的T1逻辑路由器连通专属VMware环境的管理网络至T0逻辑路由，并为管理网络提供管理网关的南北防火墙服务。T1 CGW VMware NSX T1类别的逻辑路由器，名称为CGW的T1逻辑路由器连通业务网络至T0...
DescribeLifecycleActions
接口说明 如果发生了和生命周期挂钩适用类型一致的伸缩活动，每个生命周期挂钩都会触发一次生命周期操作，生命周期操作有三种状态：Pending：挂起中。表示ECS实例仍处于挂起中状态。Timeout：已超时。表示已超过生命周期挂钩的超时时间，...
Dataphin申请逻辑表权限的审批人
概述 本文描述申请逻辑表权限的审批人。详细信息 在“任务中心-我发起-全部任务”中可以看到当前流程的审批者。如果是自己创建的逻辑表，审批者是自己，自动审批通过。如果是申请别人创建的逻辑表，审批者是超级管理员。因为现在逻辑表没有...
Dataphin中重跑下游是如何重跑的，逻辑是什么样的
详细信息 举例：有A任务，A任务下有两个下游依赖任务分别是物理任务B任务，逻辑表任务C任务，选择A任务的重跑下游选项后，依赖任务A的下游物理任务（B任务）和下游逻辑表C中依赖A的字段会重跑，也就是针对物理任务是有任务依赖就全部带起，...
任务管理
逻辑表表达式校验 仅当配置了逻辑库时生效，支持的选项：开启（默认）：校验逻辑表的表达式是否正确，更多信息，请参见 逻辑表。关闭（不推荐）说明 配置完成后，您可以单击 预览/转换SQL，预览格式化后的SQL内容。单击 提交任务。管理任务...
- 产品推荐
- 这些文档可能帮助您