逻辑数仓
为解决上述问题，数据管理DMS推出了逻辑数仓功能，用户可以在不搬迁原始数据的前提下将多种异构数据源进行逻辑上的融合，形成一个逻辑仓，然后通过DMS内置的跨库查询引擎（支持SQL）创建逻辑视图进行数据的融合分析。这种方式避免了繁琐的...
2022年
本文介绍了逻辑编排2022年的功能变更记录。2022年11月 功能名称 变更类型 功能描述 发布时间 相关文档 资源组 新增 工作流支持按资源组进行分类。该功能上线前的工作流都会归属到默认资源组中，可以在资源管理控制台中转移到自定义资源组。...
逻辑解码的同步复制支持
本文介绍了逻辑解码的同步复制支持。简介 逻辑解码可以被用来构建同步复制方案，该方案具有和流复制的同步复制相同的用户接口。要这样做，流复制接口必须被用来流式传出数据。正如流复制客户端所做的一样，逻辑解码的客户端必须发出 后备机...
手动新建逻辑表
如果在 数据标准>逻辑表命名规则 中为该目录设计了逻辑表命名规则，则归属到这个目录下的所有逻辑表按照规则命名；例如，所属目录选择 明细层模型-DWD 时，表名称自动切换到dwd_xx_xx。表名称：如果在 数据标准>逻辑表命名规则 中，对”...
手动新建逻辑表
如果在 数据标准>逻辑表命名规则 中为该目录设计了逻辑表命名规则，则归属到这个目录下的所有逻辑表按照规则命名；例如，所属目录选择 明细层模型-DWD 时，表名称自动切换到dwd_xx_xx。表名称：如果在 数据标准>逻辑表命名规则 中，对”...
Dataphin规范建表如何确定业务对象已经新建了逻辑维度...
问题描述 Dataphin规范建表如何确定业务对象已经新建了逻辑维度表。解决方案 业务对象列表中可以看到逻辑维度表是否已经新建过了。适用于 Dataphin 版本V3.4
设计数据模型
重要 若在 数据标准>模型标准设计>逻辑表命名规则 中为该目录设计了逻辑表命名规则，则归属到这个目录下的所有逻辑表需按照该规则命名。表名称 若对所属目录设置了表名称规则，则需要按照设置的规则填写表名称。关于逻辑表命名规则，请参见...
架构
本文介绍了逻辑复制的架构内容。简介 逻辑复制从拷贝发布者数据库上的数据库快照开始。拷贝一旦完成，发布者上的更改会在它们发生时实时传送给订阅者。订阅者按照数据在发布者上被提交的顺序应用数据，这样任意单一订阅中的发布的事务一致...
InnoDB Physiological Logging
在InnoDB存储引擎中，每种重做日志有固定的头部格式，如下图所示：可以看出 redo_log_type 定义了逻辑操作的类型，space 和 page_no 表示在哪个物理页产生的日志。因此，InnoDB存储引擎的所有重做日志都是物理逻辑日志。InnoDB重做日志类型...
冲突
本文介绍了逻辑复制的冲突内容。简介 逻辑复制的行为类似于正常的 DML 操作，即便数据在订阅者节点本地被修改，逻辑复制也会根据收到的更改来更新数据。如果流入的数据违背了任何约束，复制将停止。这种情况被称为一个 冲突。在复制 UPDATE...
监控
本文介绍了逻辑复制的监控内容。简介 因为逻辑复制是基于与物理流复制相似的架构的，一个发布节点上的监控也类似于对物理复制主节点的监控。有关订阅的监控信息在 pg_stat_subscription 中可以看到。每一个订阅工作者在这个视图都有一行。...
逻辑解码概念
本文介绍了逻辑加码的相关概念。逻辑解码 逻辑解码是一种将对数据库表的所有持久更改抽取到一种清晰、易于理解的格式的处理，这种技术允许在不了解数据库内部状态的详细知识的前提下解释该格式。在本数据库中，逻辑解码通过解码预写式日志...
边缘脚本监控
常见于您的脚本代码中出现了逻辑错误或超时，例如传入的参数错误、执行时间超过了50ms等。您可以在ES配置的 扩展项 中增加_es_dbg配置，并通过CDN控制台EdgeScript页面右上角的调试工具查看代码调试信息，具体定位异常代码。增加_es_dbg...
逻辑解码的SQL接口
本文介绍了逻辑解码的SQL接口。简介 与逻辑解码互动的SQL层API如下表所示。复制管理函数 下表展示的函数用于控制以及与复制特性交互。复制原点函数的使用仅限于超级用户，复制槽的函数只限于超级用户和拥有 REPLICATION 权限的用户。表 1 ...
逻辑渲染
本文介绍了逻辑渲染的种类和相应的指令。条件渲染 v-show v-show 指令用于条件性地渲染一个节点内容。不管 v-show 指令的结果是 true 还是 false，该节点都会进行渲染。当 v-show 结果为 true 时，相当于给该节点的 CSS 样式增加一个 ...
慢 SQL 监控
前置条件 使用 慢 SQL 监控 功能，您需要确保已满足以下条件：已购买了数据访问代理实例，并在该实例下创建了逻辑数据库。具体步骤，参见 购买数据访问代理实例 与 创建数据访问代理数据库。已开通了阿里云的 日志服务 SLS。数据访问代理...
逻辑复制（pglogical）
pglogical是一个完全作为PostgreSQL扩展实现的逻辑复制系统，为PostgreSQL数据库提供了逻辑流复制发布和订阅的功能。前提条件 RDS PostgreSQL实例大版本为10或以上。实例内核小版本为20230830或以上。重要 20230830内核小版本之前已支持此...
任务管理
逻辑表表达式校验 仅当配置了逻辑库时生效，支持的选项：开启（默认）：校验逻辑表的表达式是否正确，更多信息，请参见 逻辑表。关闭（不推荐）说明 配置完成后，您可以单击 预览/转换SQL，预览格式化后的SQL内容。单击 提交任务。管理任务...
限制
本文介绍了逻辑复制的限制内容。简介 逻辑复制当前有下列限制或者缺失的功能。这些可能在未来的发行中解决。数据库模式和 DDL 命令不会被复制。初始模式可以手工使用 pg_dump-schema-only 进行拷贝。后续的模式改变需要手工保持同步（不过...
通道服务概述
数据消费能力水平扩展 通道服务提供了逻辑分区的自动负载均衡功能，负载均衡增加了消费端数量，从而提高水平扩展数据消费速度。注意事项 由于Tunnel的增量日志最多会保留7天（具体的值和数据表的Stream的日志过期时间一致），因此在使用全...
Linux实例磁盘扩容后同步空间到逻辑卷分区
问题原因 系统分区做了逻辑分区，磁盘扩容成功后，没有进行相应的逻辑分区扩容。解决方案 说明 如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置...
预测学生考试成绩
Designer预置了逻辑回归算法模板，便于您基于中学生的家庭背景及在校行为，通过逻辑回归算法快速生成期末成绩预测模型，从而获得影响中学生学业的关键因素。本文为您介绍逻辑回归算法预置模板的具体使用方法。背景信息 通过本工作流获得...
逻辑解码的例子
本文介绍了逻辑解码的示例。示例 下面的例子演示了使用 SQL 接口控制逻辑解码。在你能使用逻辑解码之前，你必须设置 wal_level 为 logical，并且 max_replication_slots 必须至少被设置为 1。然后，你应该作为一个超级用户连接到目标数据库...
功能更新动态（2022年）
2022年10月25日 华北2（北京）创建并配置普通维度逻辑表、创建并配置层级维度逻辑表、创建虚拟维度逻辑表 2022年10月27日 华东1（杭州）2022年11月01日 华南1（深圳）2022年11月03日 华东2（上海）SQL任务支持cost、reload function、...
公网地址调用
EAS支持使用通用公网对服务进行公网地址调用，通用公网调用又包括使用官方的Python SDK、Java SDK及自行实现调用逻辑三种方式。本文介绍详细介绍每种调用方式的实现方法。通用公网调用 在PAI-EAS部署模型服务后，系统会自动生成一个公网...
VPC地址调用
EAS 支持通过Python官方SDK、Java官方SDK或自行实现调用逻辑的方式对服务进行VPC地址调用。本文详细介绍每种调用方式的实现方法。优势 避免了公网调用中的网络性能开销，可以提升调用速度。内网传输可以节省流量费用。使用限制 调用服务的...
AHAS多活容灾计费逻辑变更公告
计费逻辑变更说明 该计费变更仅对计费逻辑进行了优化，并没有调整计费标准。AHAS多活容灾的计费详情，请参见 MSHA产品计费说明。变更前 此次计费逻辑变更前，若需要开通AHAS多活容灾服务，您需要登录 MSHA控制台，然后在左侧导航栏选择 ...
消费者分类
PushConsumer消费消息时，若消息处理逻辑出现预期之外的阻塞导致消息处理一直无法执行成功，SDK会按照消费超时处理强制提交消费失败结果，并按照消费重试逻辑进行处理。消息超时，请参见 PushConsumer消费重试策略。说明 出现消费超时情况...
Dataphin修改了维度逻辑表的字段类型，为什么维度逻辑...
概述 本文主要介绍修改了维度逻辑表的字段类型，维度逻辑表的物化表变化的原因。详细信息 Dataphin修改了维度逻辑表的字段类型，为什么维度逻辑表的物化表变化了？解释如下：维度逻辑表的物化拆分，涉及产出时间、行为属性（字段来源）、主...
VPC高速直连调用
EAS 支持通过Python官方SDK或自行实现调用逻辑的方式对服务进行VPC高速直连调用。本文详细介绍这两种调用方式的实现方法。调用原理 VPC高速直连调用、公网调用及VPC地址调用的链路如下图所示。开启服务运行所在资源组的VPC高速直连功能后，...
新建工作流
本示例介绍了使用逻辑编排创建一个完整的工作流过程中的操作和通用的基本概念，比如添加触发器、添加操作、运行工作流等。在本示例中，我们通过一个实际案例，向您展示如何通过逻辑编排工作流自动化您的日常工作。在本示例中，构建一个...
基本概念
当脚本文件中的逻辑超出了安全配置的限制，引擎将拒绝执行 SQL 脚本文件，任务将会执行失败。表结构 表结构定义了数据表中指定的数据字段，以及每组数据字段的数据类型和字段描述。表结构模板 表结构模板是多个数据表共同遵循的表结构。...
Dataphin维度逻辑表如何补数据
概述 本文主要讲述了维度逻辑表补数据的具体操作。详细信息 点击运维界面选择周期任务，选择逻辑表任务，选择您要补数据的维度逻辑表，点击补数据选项，自定义实例名称，选择业务日期以后，点击确定，即可完成该维度逻辑表的补数据操作。...
与逻辑解码相关的系统目录
本文介绍了与逻辑解码相关的系统目录。与逻辑解码相关的系统目录 pg_replication_slots 视图和 pg_stat_replication 视图分别提供了有关复制槽和流复制连接的当前状态的信息。这些视图适用于物理和逻辑复制。
可用地域
目前逻辑编排开放了如下地域，请根据您业务所在地选择合适的地域创建您的业务工作流。地域 Region ID Endpoint 华东2（上海）cn-shanghai composer.cn-shanghai.aliyuncs.com 美国（弗吉尼亚）us-east-1 composer.us-east-1.aliyuncs.com ...
配置LogicalTable输入组件
LogicalTable输入组件用于读取Dataphin中逻辑表（事实逻辑表、维度逻辑表、汇总逻辑表）中的数据。同步Dataphin中逻辑表的数据至数据源的场景中，您需要先配置逻辑表信息。本文为您介绍如何配置LogicalTable输入组件。前提条件 在开始执行...
配置LogicalTable输入组件
LogicalTable输入组件用于读取Dataphin中逻辑表（事实逻辑表、维度逻辑表、汇总逻辑表）中的数据。同步Dataphin中逻辑表的数据至数据源的场景中，您需要先配置逻辑表信息。本文为您介绍如何配置LogicalTable输入组件。前提条件 在开始执行...
Dataphin维度逻辑表关联的时候找不到数据域中对应的...
问题描述 本文主要讲述了维度逻辑表关联的时候找不到数据域中对应的逻辑表的解决方法。问题原因 维度逻辑表未发布，是草稿状态。解决方案 将该维度逻辑表保存，并发布。适用于 Dataphin
Dataphin事实逻辑表如何依赖虚节点
概述 本文主要描述了事实逻辑表如何依赖虚节点的具体操作。详细信息 打开Dataphin开发界面，选择事实逻辑表，然后点击调度配置，在调度依赖点击新增上游节点，然后选择您需要依赖的节点，点击确定。适用于 Dataphin
Dataphin事实逻辑表提交失败报错：“Not found ...
问题描述 Dataphin事实逻辑表提交失败报错：Not found physical table meta when renaming table null 问题原因 用户手工drop了事实逻辑表对应的物化表，导致提交报错。解决方案 下线逻辑表，然后再重新提交即可。适用于 Dataphin
- 产品推荐
- 这些文档可能帮助您