配置完逻辑库后,系统会自动解析逻辑库中符合条件的物理表,生成逻辑表,您也可以手动更新逻辑表。本文介绍生成逻辑表的规则和手动更新逻辑表的方法。前提条件 已配置逻辑库。更多信息,请参见 逻辑库。逻辑库中有多张表结构相同且表名前缀...
表类型 默认连接数(Flink作业的每个并发)Binlog源表 0 批量源表 1 维表 3(可以通过 connectionSize 参数调整)结果表 3(可以通过 connectionSize 参数调整)连接数计算方法 默认情况 默认情况下,作业使用的最大连接数可以通过如下公式...
AnalyticDB PostgreSQL版 7.0版本增强了公用表表达式(Common Table Expression,简称CTE)功能,支持对CTE语句指定MATERIALIZED或NOT MATERIALIZED,可以更好地控制执行计划,能够有效提升SQL性能。功能简介 CTE可以在单个语句的执行范围...
不要求与父表一致:即对应的属性分区子表可以与父表不一致,如果子表没有显式指定属性,则会继承父表的属性,若是子表显式指定属性,则会保留子表的属性。索引列必须包含父表的索引列:即分区子表的索引列必须包含父表的索引列,还能显式再...
当发现节点故障时,ACK会根据故障原因触发对应恢复任务,并记录相应的事件。当恢复任务完成后,故障状态解除,节点恢复正常状态。当恢复任务完成后,故障状态依然存在,节点会被置为恢复失败状态。说明 如果集群中存在多个节点池,节点池...
本文介绍以太网接口频繁Up/Down的原因和处理方法。问题现象 以太网接口频繁Up/Down。可能原因 线缆没有连接好。双绞线过长、光纤超长或链路损耗太大。接口、接口模块或设备故障。解决方案 检查本端和对端设备线缆、模块是否插好。检查设备...
通过对分布式表的本地表进行直接写入的方式,可以显著提高写ClickHouse分布式表的吞吐量。ClickHouse结果表 优化作业诊断规则和界面 新增20多种诊断规则,全面分析作业的运行状态。根据作业的实际情况,给出高、中、低三种风险等级提示。...
本文为您介绍外部表的常见问题。问题类别 常见问题 OSS外部表 自定义Extractor在读取非结构化数据时,如果数据字段存在DATETIME类型,报错ODPS-0123131,如何解决?在MaxCompute上访问OSS外部表,编写UDF本地测试通过,上传后报错内存溢出...
此外,在数据库发生故障且无法定位原因时,可以利用克隆库复现故障场景,以便更好地定位故障原因。前提条件 源数据库支持:RDS MySQL PolarDB MySQL版 说明 不支持 PolarDB MySQL版 的 企业版 单节点 实例。PolarDB-X 2.0。目标数据库实例...
此外,在数据库发生故障且无法定位原因时,可以利用克隆库复现故障场景,以便更好地定位故障原因。前提条件 源数据库支持:RDS MySQL PolarDB MySQL版 说明 不支持 PolarDB MySQL版 的 企业版 单节点 实例。PolarDB-X 2.0。目标数据库实例...
单表和广播表支持随机物理表名。优化器支持Cascades搜索空间剪枝。支持AliSQL秒杀热点的语法。支持information_schema buffer相关的系统表:INNODB_BUFFER_POOL_STATS、INNODB_BUFFER_PAGE_LRU 和 INNODB_BUFFER_PAGE。新增GENERAL_DYNAMIC...
数据访问代理提供了生成分布式环境下的分布式唯一序列(Sequence)的能力,该序列有全局唯一、全局递增的特性,常用于分库分表下的主键、业务主键生成的场景。重要 数据访问代理分布式序列功能是基于数据库实现,如果需要使用该功能,需要...
解决方案 不同的问题原因对应的解决方案不同,请您先通过SQL洞察功能对故障发生时的所有SQL语句进行审计,检查是否存在上述几种情况。说明:更多有关SQL洞察的信息,例如如何开通SQL洞察以及如何使用SQL洞察,请参见 SQL洞察。如果存在上述...
普通表(内部表,包括单表和分区表)每隔1分钟巡检是否有表的最新动作(主要是INSERT、UPDATE、DELETE等DML操作,可能改变了数据量)。满足以下条件,系统后台触发表的Analyze,收集表的统计信息。表有DML执行完成且数据条数变化超过当前表...
故障场景等级定义 日常运营中,除用户方环境或自身操作引起的问题外,无论什么原因导致的服务中断、服务品质下降或用户服务体验下降的现象,都称为故障。对故障影响程度的划分就是故障等级定义。定义故障等级是为了指定故障等级定义作为各...
AnalyticDB PostgreSQL版 Multi-Master通过水平扩展Master节点突破了原架构单Master的限制,配合...对全局死锁处理、DDL支持以及分布式表锁支持等方面的算法进行创新和修改。重新设计了 AnalyticDB PostgreSQL版 的集群容错和高可用能力。
数据管理DMS提供的结构设计功能,可以实现对目标库表进行符合研发规范的表结构设计。您可按需自定义不同业务线的研发流程,保障多套环境(例如开发环境、测试环境、生产环境)之间结构的一致性。本文介绍逻辑表结构设计的方法。背景信息 分...
最终一致模式下,由于表的主备Partition都可以读写,当可用区A不可用、表读写出现毛刺和机器终止工作等故障时,超过一定的时间不会返回访问结果,无需等待和系统切换主可用区的过程,Lindorm会自动选择可用区B发送请求,达到高可用和降低...
分布式链路核心概念 下表介绍分布式链路核心概念,方便查看和索引。名词 说明 应用拓扑 拓扑是对应用间调用关系和依赖关系的可视化展示。链路拓扑图中,每个图标元素代表一个节点,具体图标说明可参考 拓扑图元素说明。Trace ID 代表唯一一...
2.故障应急场景群:事件升级故障后,群内推出 故障处理中 消息卡片,如果满足自动生成故障场景群的需求(下文详细介绍创建故障场景群逻辑),故障场景群内同时推出 故障处理中 消息卡片。本群故障消息卡片包含按钮:签到、签到记录、应急...
故障管理体系是围绕故障全生命周期采取的一系列控制流程,包括故障基础数据管理(故障等级定义、应急场景监控覆盖、服务组&值班表管理、故障订阅管理),故障发现(7*24监控值班、智能基线告警),故障应急协同(故障通告及更新、故障应急...
本文为您介绍如何在外部表建表语句中指定Hologres数据源、STS认证信息或打开双签名开关、映射目标表、JDBC驱动信息,来创建Hologres外部表。背景信息 Hologres 是兼容PostgreSQL协议的实时交互式分析数据仓库,在底层与MaxCompute无缝连接...
本文对Multi-Master架构的关键技术点进行介绍,包括分布式事务处理、全局死锁处理、DDL支持、分布式表锁支持、集群容错和高可用能力。分布式事务管理 AnalyticDB PostgreSQL版 分布式事务 AnalyticDB PostgreSQL版 通过二阶段提交协议(2PC...
说明 试跑错误的可能原因为:表或表分区不存在、表数据不符合质量校验规则。定义报警接收人:订阅管理 您可以单击 订阅管理,选择 订阅方式 及 接受对象,目前支持通过 邮件通知、邮件和短信通知、钉钉群机器人、钉钉群机器人@ALL、飞书群...
在SQL语句中,A表与B表进行了Join操作,并且Join的等值表达式与A表的数据分布列相吻合。Bucket Shuffle Join会根据A表的数据分布信息,将B表的数据发送到对应的A表的数据存储计算节点。Bucket Shuffle Join开销如下:网络开销:B表数据量。...
我们说在这种情况下,订单表是引用表而产品表是被引用表。相应地,也有引用和被引用列的说法。我们也可以把上述命令简写为:CREATE TABLE orders(order_id integer PRIMARY KEY,product_no integer REFERENCES products,quantity integer);...
CREATE TABLE 用于在当前数据库中创建一个新的、初始为空的表。简介 CREATE TABLE 将在当前数据库中创建一个新的、初始为空的表。该表将由发出该命令的用户所拥有。如果给定了一个模式名(例如 CREATE TABLE myschema.mytable.),那么该表...
原因在于底层已经将JSONB数据转成了列式存储,所以当需要查询出完整JSON数据的时候,就需要将那些已经列式存储的数据再重新拼装成原来的JSONB格式:这个步骤就会产生大量的IO以及转换开销,如果涉及到的数据量很大,列数又很多,甚至可能...
本文介绍了表表达式的相关内容。简介 表表达式计算一个表。该表表达式包含一个 FROM 子句,该子句后面可以根据需要选用 WHERE、GROUP BY 和 HAVING 子句。最简单的表表达式只是引用磁盘上的一个表,一个所谓的基本表,但是我们可以用更复杂...
DTS支持将源 PolarDB分布式版 实例同步或迁移至目标库。但是由于直接使用 PolarDB分布式版 作为源实例配置DTS任务,当该实例下挂载的RDS MySQL数量超过2个时,可能会产生性能瓶颈,稳定性风险,最终可能会对业务造成影响。为了更好保障任务...
DTS支持将源 PolarDB分布式版 实例同步或迁移至目标库。但是由于直接使用 PolarDB分布式版 作为源实例配置DTS任务,当该实例下挂载的RDS MySQL数量超过2个时,可能会产生性能瓶颈,稳定性风险,最终可能会对业务造成影响。为了更好保障任务...
表表达式 计算一个表。该表表达式包含一个 FROM 子句,该子句后面可以根据需要选用 WHERE、GROUP BY 和 HAVING 子句。最简单的表表达式只是引用磁盘上的一个表,一个所谓的基本表,但是我们可以用更复杂的表表达式以多种方法修改或组合基本...
容灾切换数据质量保障难 容灾切换过程中,可能因数据同步延迟导致读到旧数据,以及切换规则推送到分布式应用节点时间不一致等原因可能造成云上云下数据库同时读写而出现脏写的问题,整个切换过程数据质量保障是关键点及难点。无业务代码...
CONDITION="condition_string"#使用TABLE和CONDITION中的内容计算物理库表名称[,NODE="node_list"])#过滤通过CONDITION计算出的结果,仅保留指定物理库#将SQL语句下发到指定分库分表上执行,显式指定物理表名 SCAN([TABLE=]"table_name_...
CONDITION="condition_string"#使用TABLE和CONDITION中的内容计算物理表名称[,NODE="node_list"])#过滤通过CONDITION计算出的结果,仅保留指定物理库#将SQL语句下发到指定分库分表上执行,显式指定物理表名 SCAN([TABLE=]"table_name_list...
重构Auto Analyze能力,采用分布式Auto Analyze,支持外表Auto Analyze,支持湖仓加速集群Auto Analyze,支持分区表增量Auto Analyze,解决超大表,超宽列Analyze失败等问题,显著减少表缺少统计信息场景,执行计划更稳定,性能消耗更低,...
本文主要介绍在操作分布式事务过程中的常见问题。SOFAStack 是否可以部署在虚拟机、物理机上?可以,SOFAStack 部署支持物理机、虚机机 VM。SOFAStack 当前是否只支持阿里云飞天 ACK?SOFAStack 部署支持多云异构、目前支持华为云、开源 ...
StarRocks采用分布式架构:对数据表进行水平划分并以多副本存储。集群规模可以灵活伸缩,支持10 PB级别的数据分析。支持MPP框架,并行加速计算。支持多副本,具有弹性容错能力。说明 本文部分内容来源于开源StarRocks的 什么是StarRocks。...
以下原因可能导致Hash表占用较多内存:Build表本身较大:云原生数据仓库 AnalyticDB MySQL 版 会根据统计信息评估Join操作两边的表的大小,以较小的表作为Build表,但不排除Build表仍然较大。统计信息过期或者统计信息评估不准 当Join操作...
SDK 集成相关 错误码 错误消息 错误说明 解决方案 DTX-000 dtx component scanner init error.SDK 启动失败,分布式事务不可用。DTX-001 Bean[%s]can not have@DtxTransaction and@TccBusinessAction both.同一个 bean 不能既有@...