2021年8月24日 产品更新动态
新增【挂机原因】节点类型，支持根据IVR路径自定义挂机的原因标签。有如下逻辑：可配置多个挂机原因节点，但向后只能连挂机节点-【挂机原因】节点中，可配置共7种挂机原因-挂机原因节点非必须，各个节点可以直接连到挂机节点，此时会打上...
常见退信内容分析
因为拒掉的原因很多，所以要从对方返还的信息来判断原因。我方服务器IP地址被对方拒掉。因为拒掉的原因很多，所以要从对方返还的信息来判断原因。请将退信在线提交我们检查核实。确定原因后，我们将联系对方解除屏蔽。Connection timed out...
列存索引技术架构介绍
MySQL架构在AP场景的缺陷 MySQL架构在执行复杂查询时性能差有多个方面的原因。对比专用的OLAP系统，其性能瓶颈体现在以下方面：MySQL的SQL执行引擎基于流式迭代器模型（Volcano Iterator）实现。该架构在工程实现上依赖大量深层次的嵌套...
表分区
在运行 ATTACH PARTITION 命令之前，推荐在要被挂接的表上创建一个 CHECK 约束来匹配期望的分区约束。这样，系统将能够跳过扫描，否则需要验证隐式分区约束。没有 CHECK 约束，将扫描表以验证分区约束，同时对该分区持有 ACCESS EXCLUSIVE ...
基本概念
用户可以选择多个Mongos作为请求的入口，防止其中一个挂掉所有的MongoDB请求都无法操作。Shard MongoDB分片集群中的分片。单个Shard是由三节点的副本集组成，保证单个分片的高可用性，用户可以根据自己的应用性能及存储要求，购买多个Shard...
如何结束 AHAS Agent 进程？
这一功能保证了进程可用性，避免进程因异常挂掉或机器重启等原因，需要手动拉起的情况。所以，您在服务器进程中结束 AHAS Agent 无法永久结束该进程，AHAS 会在定时检查后或机器重启时，自动拉起该进程。如果您某段时间不需要使用 AHAS ...
Dataphin集成任务的日志中没有具体报错，最后任务执行...
问题描述 本文主要描述了Dataphin集成任务的日志中没有具体报错，最后任务执行失败“Dlink command exit with code:247”的原因和...问题原因 内存不足，导致任务挂掉了。解决方案 添加一下内存，然后重跑即可解决。适用于 Dataphin v2.9.7
基本概念
一般为一个唯一可读内容的哈希值。存证数据 英文名称Ledger data。区块链本身具有不可篡改的特性，写入区块链的数据都是可信任、不可篡改的，为了让数据具备公正力，写入区块链的数据可称为存证数据，存证数据可以为一个字符串、一个文件的...
范围类型
这样做最常见的原因是为了使用内建范围类型中没有提供的 subtype 上的范围。例如，要创建一个 subtype float8 的范围类型：CREATE TYPE floatrange AS RANGE(subtype=float8,subtype_diff=float8mi);SELECT '[1.234,5.678]':floatrange;...
PolarDB HTAP实时数据分析技术解密
MySQL的架构在AP场景的缺陷 MySQL的实现架构在执行复杂查询时，性能差存在诸多原因。对比专用的OLAP系统，其性能瓶颈体如下：MySQL的SQL执行引擎基于流式迭代器模型（Volcano Iterator），而这个模型在工程实现上依赖大量深层次的函数嵌套...
发布者最佳实践
默认情况下，云消息队列 Kafka 版 为了提升可用性，并不保证单个分区内绝对有序，在升级或者宕机时，会发生少量消息乱序（某个分区挂掉后把消息Failover到其它分区）。如果业务要求分区保证严格有序，请在创建Topic时选择使用Local存储。
ALTER TABLE
还有，它必须是一个带有默认排序顺序的 B-树索引。这些限制确保该索引等效于使用常规 ADD PRIMARY KEY 或者 ADD UNIQUE 命令时创建的索引。如果 PRIMARY KEY 被指定，并且该索引的列没有被标记 NOT NULL，那么这个命令将尝试对每一个这样的...
常见问题
迁移与同步 为什么OSS外表导入ORC、PARQUET等格式的数据，出现内存报错或OOM挂掉？如何处理导入数据报错：too many parts？为什么DataX导入速度慢？为什么Hive导入后其数据行数跟ClickHouse对不上？为什么Kafka导入后其数据行数跟...
构建TDX机密计算环境
例如是一个公钥的哈希，并可以用于后续的密钥协商流程。例如：sudo./app-d 1234567890abcdef1234567890abcdef1234567890abcdef1234567890abcdef sudo./app-d$(cat data.dat|xxd-p)回显类似如下所示时，表示远程证明报告（Quote）已生成。...
常见问题
为什么我的Worker节点挂掉了？如何查看Trino日志？为什么查询不到数据或查询失败？为什么查询Hudi或Delta表时列的顺序错了？为什么新增一个配置后，重启Trino失败？为什么使用Hive连接器查询Iceberg、Hudi或Delta Lake表时会报错Cannot ...
签名机制
注意：计算签名时，使用的 Key 就是您的 AccessKeySecret 加上一个&字符(ASCII:38)，使用的哈希算法是 SHA1。计算签名值。按照 Base64 编码规则，把步骤 3 得到的 HMAC 值编码成字符串，即得到签名值（Signature）。将得到的签名值作为 ...
CREATE INDEX
PolarDB提供了索引方法 B-树、哈希、GiST、SP-GiST、GIN 以及 BRIN。用户也可以定义自己的索引方法，但是相对较复杂。当 WHERE 子句存在时，会创建一个 部分索引。部分索引只包含表中一部分行的项，通常索引这一部分会比表的其他部分更有用...
数据库
所有临时文件都会被统计，忽略创建这些临时文件（例如排序或哈希）的原因，并且忽略 log_temp_files 的设置。temp_bytes bigint 在数据库中被查询写到临时文件中的数据总量。所有临时文件都会被统计，忽略创建这些临时文件的原因，并且忽略...
数据库
所有临时文件都会被统计，忽略创建这些临时文件（例如排序或哈希）的原因，并且忽略 log_temp_files 的设置。temp_bytes bigint 在数据库中被查询写到临时文件中的数据总量。所有临时文件都会被统计，忽略创建这些临时文件的原因，并且忽略...
使用EXPLAIN
独立地抓取行比顺序地读取它们的开销高很多，但是不是所有的表页面都被访问，这么做实际上仍然比一次顺序扫描开销要少（使用两层计划的原因是因为上层规划节点把索引标识出来的行位置在读取之前按照物理位置排序，这样可以最小化单独抓取的...
查询Profile
查看整体执行计划树。这一步主要用于从整体分析执行计划，并查看每个Fragment的执行耗时。例如查询Profile对应的QueryId。查询结果中每个节点都标注了自己所属的Fragment，并且在每个Fragment的Sender节点标注了该Fragment的执行耗时。这个...
分区表常见问题
分区表查询计划不准确主要的原因是统计信息不准确，在8.0.2版本中已经针对这个问题做了分区级别统计信息优化，建议您将版本升级到8.0.2。PolarDB MySQL版 的物理表如何分区？一般情况下，每个分区是一个Innodb表，Hybrid分区可以放在其他...
如何将一棵LSM-Tree塞进NVM
磁盘中的每层数据采用多个有序字符串表（SST，Sorted String Table）存储，每个SST相当于一颗B树。通常情况下同一层中的不同SST的键值对的范围不发生交叠。但实际的系统中为了加速内存表的刷盘操作，通常允许部分层的SST存在范围交叠，例如...
管理导入任务
max-filter-ratio：导入任务的最大容忍率，即导入任务能够容忍的因数据不规范等原因而过滤掉的数据行所占的最大比例。jobDetails 导入任务的详细信息，包括任务数量、文件数量和大小、数据量、行数等。errorMessage 导入任务的失败原因。当...
PolarDB MySQL版8.0.2版本发布日志
修复分区表的所有分区在分区剪枝阶段都被裁剪掉的情况下，使用RANGE INDEX访问分区表的全局二级索引时，触发ASSERT CRASH（断言错误）的问题。修复将冷数据归档为ORC格式时，因表中存在Blob类型的字段导致归档失败的问题。修复MRR等场景下...
运行失败
在seek阶段M-R1-R2的R1到R2的过程，会将这些数据交给同样的Reducer去执行，导致数据倾斜，造成某个Reduce Job挂掉。小类目检索准备阶段GetSmallCategoryDocNum为空 报错信息 解决方法 该问题的主要原因是表当中某些字段的值为空，比如 ...
强弱依赖治理概述
强弱依赖治理的应用 强弱依赖治理主要可以被应用到以下场景：系统改造验收：对于分布式系统，至少在运行态中，不会因为依赖的系统后台出现故障，引起当前应用出现系统级可用性的故障，例如进程挂掉、频繁FullGC、负载飙高等，何时何地都应...
Quick BI树形筛选器配置后无法筛选出数据，查看图表...
问题描述 Quick BI树形筛选器配置后无法筛选出数据，查看图表SQL也明显错误。问题原因 树形菜单绑定的字段绑定的是父级字段导致识别错误。解决方案 树形菜单和图表的绑定字段应该为最小子菜单，比如：适用于 Quick BI
INSERT、UPDATE和DELETE上的规则
没有条件，有 ALSO 或 INSTEAD 来自规则动作的查询树，在其上增加原始查询树的条件给出了条件，有 ALSO 来自规则动作的查询树，在其上加入规则条件和原始查询树的条件给出了条件，有 INSTEAD 来自规则动作的查询树，在其上加入规则条件和...
负载均衡调度算法介绍
一致性哈希算法 介绍 一致性哈希算法根据不同的哈希因子将访问请求均匀地分配到后端服务器，并在后端服务器个数发生变化时，依然保持均匀分配。相同哈希因子计算结果的请求，将会调度到相同的后端服务器。包括如下哈希因子：源IP哈希：根据...
管理服务流量规则
基于源IP：根据源地址中的内容获取哈希，将流量按照请求源IP地址的哈希值进行调度。基于请求参数：将以HTTP请求中的Query参数计算哈希，哈希相同的请求将会转发至同一个实例进行处理。请求参数：您需要输入Query参数。基于Header：将以HTTP...
管理服务流量规则
基于源IP：根据源地址中的内容获取哈希，将流量按照请求源IP地址的哈希值进行调度。基于Header：将以HTTP请求中的Header参数计算哈希，哈希相同的请求将会转发至同一个实例进行处理。请求头：您需要输入Header中对应的参数的Key的值。基于...
ST_IsRandomSampled
函数的返回值是基于参数tuple计算的哈希值和sample_rate计算得到。对一张表的所有数据调用该函数时，为使被采样的记录条数尽量接近sample_rate和表格记录总数的乘积，参数tuple的值应不重复。示例-一半的结果是true，另一半是false SELECT ...
ST_IsRandomSampled
函数的返回值是基于参数tuple计算的哈希值和sample_rate计算得到。对一张表的所有数据调用该函数时，为使被采样的记录条数尽量接近sample_rate和表格记录总数的乘积，参数tuple的值应不重复。示例-一半的结果是true，另一半是false SELECT ...
ST_IsRandomSampled
函数的返回值是基于参数tuple计算的哈希值和sample_rate计算得到。对一张表的所有数据调用该函数时，为使被采样的记录条数尽量接近sample_rate和表格记录总数的乘积，参数tuple的值应不重复。示例-一半的结果是true，另一半是false SELECT ...
后端路由
2.4 一致性哈希算法路由 一致性哈希算法根据不同的哈希因子将访问请求均匀地分配到后端服务。相同哈希因子计算结果的请求，将会调度到相同的后端服务。后端路由插件支持如下哈希因子：源IP哈希：根据请求的源IP地址进行哈希计算。相同源IP...
列存索引中GroupJoin算子的实现
因此在HASH JOIN+HASH GROUP BY的执行方式中，一张N行的哈希表可能会输出N×M×S行结果（S代表selectivity，0≤S≤1），然后在HASH GROUP BY的grouping操作中再被聚合成一张新的哈希表，这会造成资源浪费。即使是上面例子中“事实表”（大...
Quick BI怎样使趋势分析表的树形展示默认展开或关闭
概述 Quick BI怎样使趋势分析表的树形展示默认展开或关闭。详细信息 趋势分析表由趋势分析图和趋势分析明细表组成，您可以通过趋势分析图查看指标的宏观趋势，然后通过趋势分析表查看指标详情，帮助您更好的分析决策。用户可以根据自己需要...
Blink和Flink常见问题及诊断
CONNECTION CLOSED 可能是负载过大导致后端节点挂掉了，出现OOM（Out Of Memory）或者Coredump。解决方法：请先重试写入，如果不能恢复请找Hologres技术支持人员排查原因。报错：BackPresure Exceed Reject Limit 可能原因：通常是Hologres...
参数说明
哈希连接、基于哈希的聚集以及基于哈希的IN子查询处理中都要用到哈希表。maintenance_work_mem 指定在维护性操作（例如VACUUM、CREATE INDEX和ALTER TABLE ADD FOREIGN KEY）中使用的最大的内存量。因为在一个数据库会话中，一个时刻只有...
- 产品推荐
- 这些文档可能帮助您