pg_shdepend
目录 pg_shdepend 记录数据库对象和共享对象之间的依赖关系，例如角色。这些信息使得本数据库可以确保对象在被删除时没有被其他对象引用。与大部分其他系统目录不同，pg_shdepend 在整个集簇的所有数据库之间共享：在每一个集簇中只有一个 ...
DMS支持的数据库
关系型数据库 MySQL SQL Server PostgreSQL MariaDB OceanBase MySQL模式 OceanBase Oracle模式 OceanBase ODP Oracle DB2 达梦数据库 OpenGauss 数据仓库 ClickHouse SelectDB NoSQL数据库 Redis MongoDB 大数据 Hive 录入他云/自建数据库...
连接方式概述
Java 数据库连接器（Java Database Connectivity，JDBC）提供了 Java 连接关系数据库的接口，是一种 Java 标准。JDBC 标准由 Sun Microsystems 定义，通过标准 java.sql 接口实现，支持各个提供程序使用自己的 JDBC 驱动程序来实现和扩展...
概述
本节为不熟悉关系数据库管理系统的人介绍 SQL 语言。将讨论创建、填充、查询和更新表等基本操作以及示例。还将讨论视图、外键和事务等更高级的概念。PolarDB PostgreSQL版（兼容Oracle）是关系数据库管理系统（RDBMS）。这意味着它是用于...
DMS调度XIHE SQL
强依赖数据库内核：内核需要支持并开启事件调度器。受限单个数据库：只能针对单个数据库进行调度，无法与其他数据库或工具进行联动。难追踪：无法查看调度事件的执行状态、执行历史、运行时长等信息。难运维：无法对事件执行暂停、重跑等...
关系数据库全量入湖
本文为您介绍如何在数据湖构建（Data Lake Formation，简称DLF）中使用关系数据库全量入湖任务将RDS或...一库多表入湖 DLF支持关系数据库一库多表的入湖，目前需要在表路径中配置前缀匹配，例如test_db/order_*将测试库中订单相关表批量同步。
pg_depend
目录 pg_depend 记录数据库对象之间的依赖关系。这些信息允许 DROP 命令查找必须被 DROP CASCADE 删除的其他对象，或者在 DROP RESTRICT 情况下阻止删除。列名称 列类型 描述 classid oid 依赖对象所在的系统目录OID。objid oid 指定依赖...
依赖关系自动联动
在云效项目协作中，支持依赖关系模型。为了能够更好的让用户基于依赖关系进行需求的流转交付，我们在自动化规则中支持了依赖关系相关的模板。首先，我们支持在创建依赖关系时触发自动化规则执行（包含状态变更、字段变更、通知、webhook等...
预览依赖关系
调度依赖配置完成后，您可通过预览依赖查看周期任务的上下游依赖关系、查看周期任务在调度日内所生成周期实例的预计执行时间，检查任务的调度依赖配置是否符合预期，保障任务可按预期时间正常运行。若不符合预期请及时调整调度依赖配置，...
调度依赖配置指引
自定义依赖配置具体如下：依赖工作空间根节点 例如，同步任务中的上游数据来源于其他业务数据库，SQL类型任务对实时同步任务产出的表数据进行加工等场景，您可直接选择挂载依赖至工作空间根节点下。依赖虚拟节点 当工作空间中业务流程较多...
应用依赖
您可以在应用依赖页面查询当前工作环境中的应用依赖关系。操作步骤 登录 SOFAStack 控制台。在左侧导航栏，选择 中间件>微服务平台>微服务>应用依赖。在 应用依赖 页面，您可以执行以下操作：查看有依赖关系的所有应用，包括服务提供者和...
配置同周期调度依赖
修改自动解析的依赖关系 当自动解析的依赖关系不符合预期，或存在 不支持调度依赖的场景（非周期性调度产出数据的表）需手动删除依赖关系时，您可参考以下内容修改自动解析的依赖关系。场景及方式 描述 操作及结果示例 开启自动解析时，...
删除有约束的列
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型。删除主键（PRIMARY KEY）约束下的列 如果删除的 主键列 中包含下表中的字段类型...
实时模式依赖关系配置
配置实时任务的依赖关系，可帮助您排查调试时快速了解数据的上下游任务。本文将为您介绍如何配置实时模式的依赖关系。操作步骤 请参见 实时模式配置入口，进入实时任务的 实时模式 配置页面。在配置面板中 依赖关系 区域，配置任务实时模式...
实时模式依赖关系配置
配置实时任务的依赖关系，可帮助您排查调试时快速了解数据的上下游任务。本文将为您介绍如何配置实时模式的依赖关系。操作步骤 请参见 实时模式配置入口，进入实时任务的 实时模式 配置页面。在配置面板中 依赖关系 区域，配置任务实时模式...
依赖关系
如果下游节点对上游表没有强依赖关系，即下游节点取任何时候上游表数据都没有问题（即使上游节点最新表数据也未产出），这种情况下，可以不设置节点依赖关系。上游A是小时任务，下游B是日任务，任务每天在A任务全部执行完成后要汇总执行...
血缘关系
依赖关系图 依赖关系图根据节点的依赖关系，展示当前节点的依赖是否为自己预期的情况。如果不是，可以返回调度配置界面重新设置。内部血缘图 内部血缘图根据节点的代码进行解析，如下所示。INSERT OVERWRITE TABLE dw_user_info_all_d ...
依赖跟踪
简介 当我们创建一个涉及到很多具有外键约束、视图、触发器、函数等的表的复杂数据库结构时，我们隐式地创建了一张对象之间的依赖关系网。例如，具有一个外键约束的表依赖于它所引用的表。为了保证整个数据库结构的完整性，本数据库确保...
配置依赖上一周期（跨周期依赖）
发布任务 配置入口 进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 调度依赖>上一周期 区域配置节点的依赖关系。依赖形式 依赖上一周期支持的依赖形式如下表所示。依赖形式 节点依赖关系 业务场景 依赖上一周期：本节点（自...
应用强弱依赖治理
应用强弱依赖治理提供应用层面的强弱依赖关系分析。用户可以选择单个治理应用，查看其依赖分析，并根据依赖验证结果操作演练，完成依赖治理，治理周期为30天。本文介绍应用强弱依赖治理的操作步骤。前提条件 需要安装探针才能识别到应用，...
DataWorks作业调度
使用DataWorks可以使云原生数据仓库PostgreSQL版获得任务开发、任务依赖关系管理、任务调度、任务运维等全方位强大的能力，进一步增强分析型数据库PostgreSQL版的ETL能力。本文将介绍如何使用DataWorks来调度云原生数据仓库PostgreSQL版的...
应用调研
技术组件 数据库 数据库类型，版本，数据量，性能要求等；中间件 中间件类型，版本，集群规模及容量【可选】，如消息队列、缓存等；存储 使用存储设备的接口协议，及数据量；应用性能基线 应用的性能指标要求，用于测试验证阶段性能测试...
离线模式依赖关系配置
本文为您介绍如何配置流批一体任务的离线模式依赖关系。背景信息 调度依赖就是节点间的上下游依赖关系，在Dataphin中，上游任务节点运行完成且运行成功，下游任务节点才会开始运行。配置调度依赖后，可以保障调度任务在运行时能取到正确的...
离线模式依赖关系配置
本文为您介绍如何配置流批一体任务的离线模式依赖关系。背景信息 调度依赖就是节点间的上下游依赖关系，在Dataphin中，上游任务节点运行完成且运行成功，下游任务节点才会开始运行。配置调度依赖后，可以保障调度任务在运行时能取到正确的...
基本概念
运行权限 任务运行时权限，是以任务流的责任人所拥有的数据库表权限进行判断。重要 若 责任人 缺失某些库表的权限，即使当前触发运行的人员具备对应库表权限，仍会运行失败。可触发运行的人员有：责任人、相关人员。运行时间 任务实际的...
设置调度依赖最佳实践
配置调度依赖时，需要根据本节点输出名称作为关联项来给任务间设置依赖关系。本文将为您介绍如何配置任务调度依赖的输入输出。配置任务的本节点输入 您可以通过以下两种方式配置本节点输入：使用代码自动解析功能，解析出任务的依赖。手动...
强弱依赖治理最佳实践
本文以对一个部署在Kubernetes上的微...利用强弱依赖治理梳理出应用的依赖关系的强弱，能够提前发现风险、发现不合理的依赖关系，进而提升应用的高可用能力。演示操作 以下通过3个视频，演示下强弱依赖治理的整个过程。准备工作 操作步骤 总结
管理应用分组
在左侧的应用分组树中，单击要编辑依赖关系的分组，单击右侧的 编辑依赖关系，在弹出的对话框中选择组内各应用要依赖的其他应用，单击 确定。说明 对于跨组的依赖和被依赖关系，只显示一级。依赖关系图中的组内应用用蓝色图标表示，组外...
强弱依赖治理概述
强弱依赖治理就是通过科学的手段持续稳定地得到应用间依赖关系、流量、强弱等数据，提前发现因为依赖问题可能导致的故障，避免依赖故障影响用户体验，积累数据持续推进系统稳定性提升。什么是强弱依赖？异常发生时，不影响核心业务流程，不...
离线集成任务属性配置概述
通过依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。您可使用自动解析快速设置节点依赖，也可手动添加节点的依赖关系。运行配置 用于定义任务运行超时时间和任务运行失败时...
离线集成任务属性配置概述
通过依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。您可使用自动解析快速设置节点依赖，也可手动添加节点的依赖关系。运行配置 用于定义任务运行超时时间和任务运行失败时...
增强E-R
E-R图能较好的描述业务数据中的关联关系、数据库存储表和字段之间的依赖和关联关系，并通过此关系将业务或数据库存储的逻辑关系沉淀到数据库设计中。随着业务规模的增大和数据库外键性能的降低，越来越多的系统设计采用应用系统来保障业务...
场景3：如何配置跨业务流程、跨工作空间的调度依赖
说明 DataWorks的依赖关系是通过将上游节点的输出配置为下游节点的输入，以此形成节点依赖，您可以使用 鼠标拖拽、手动配置、自动解析 三种方式配置节点的依赖关系。本示例通过在下游节点 业务流程2_start_虚拟节点 的 依赖的上游节点 配置...
场景：如何配置业务流程定时时间
关于依赖关系对任务执行的影响，详情请参见 依赖关系对任务执行的影响。业务流程下所有任务定时时间要求不一致情况下，您需要单独为业务流程下存在定时时间差异的任务设置其定时时间。场景示例 业务流程下节点C依赖B，B依赖A，A为业务流程...
微服务强弱依赖治理
说明 根据上一步的依赖预判，系统自动生成验证用例（演练配置），您可以单击 去验证 触发验证执行，通过观察实际的监控数据、业务现象，判断真实业务的强弱依赖关系。当依赖预判与验证结果一致时为符合预期，否则为不符合业务预期。随着...
场景2：依赖上一周期的结果时，如何配置调度依赖
DataWorks支持以下三种跨周期依赖形式：一层子节点 节点依赖关系：依赖当前节点的下游。例如节点A存在B、C、D三个下游节点，依赖一层子节点是指节点A依赖B、C、D三个节点的上一周期，即本次节点是否运行取决于上一周期下游节点是否运行成功...
离线任务属性配置概述
通过依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。您可使用自动解析快速设置节点依赖，也可手动添加节点的依赖关系。运行配置 用于定义任务运行超时时间和任务运行失败时...
离线任务属性配置概述
通过依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。您可使用自动解析快速设置节点依赖，也可手动添加节点的依赖关系。计算任务运行配置 用于定义任务运行超时时间和任务...
下线节点
解决方案：确认待下线任务的下游依赖：您可前往开发环境运维中心和生产环境运维中心的周期任务界面，分别确认该任务开发环境和生产环境是否存在下游依赖关系。详情请参见 查看周期任务DAG图。移除待下线任务的下游依赖：进入下游依赖任务的...
跨项目克隆说明
通过 跨项目克隆 功能进行克隆任务后，系统为区分同租户（阿里云账号）下不同工作空间之间任务的输出名称，会自动对每个任务输出名称作出一系列命名更改，目的是为了平滑复制依赖关系或保持原有依赖关系不变。说明 跨项目克隆 不支持跨地域...
- 产品推荐
- 这些文档可能帮助您