错误响应
当您访问图片处理服务出现错误时，图片处理服务会将相应的错误码和错误信息返回给您，以帮助您定位与处理问题。图片处理服务错误的响应格式 错误响应的消息体例子：<Error><Code>BadRequest</Code><Message>Input is not base64 decoding....
错误响应
当您使用文件处理功能出现错误时，会返回相应的错误码和错误信息，帮助您定位与处理问题。错误响应 文件处理功能错误响应的消息体示例如下：<Error><Code>Imm Client</Code><Message>InvalidArgument,The parameter OctreeOption is ...
错误响应
当您使用文档处理功能出现错误时，会返回相应的错误码和错误信息，帮助您定位与处理问题。错误响应 文档处理功能错误响应的消息体示例如下：<Error><Code>Imm Client</Code><Message>InvalidArgument,[target]:is required.9D31D05E-FC1C-...
错误响应
当您使用媒体处理功能出现错误时，会返回相应的错误码和错误信息，帮助您定位与处理问题。错误响应 媒体处理功能错误响应的消息体示例如下：<Error><Code>Imm Client</Code><Message>InvalidArgument,[target]:is required.9D31D05E-FC1C-...
错误响应
当用户访问图片处理服务出现错误的时候，图片处理服务会返回给用户相应的错误码和错误信息，以帮助用户定位与处理问题。错误响应 图片处理服务错误响应的消息体示例如下：<Error><Code>BadRequest</Code><Message>Input is not base64 ...
数据加工延迟问题排查与处理
本视频介绍数据加工延迟问题的排查与处理方法。
常见问题
only问题的排查与处理方法 集群负载不均问题的分析方法及解决方案 通过手动迁移shard均匀分布热点数据的解决方案 指标含义与异常处理建议 fielddata内存使用率高问题的排查与处理方法 重启变更报错：集群状态不健康或存在close索引，不能...
流水线组件
问题处理 如果发生冲突导致合并失败，可尝试先合并一次目标分支，例如当从 source_branch 合并到 target_branch 时产生冲突，可尝试使用以下方法解决：git fetch#更新代码 git checkout source_branch#这里的 source_branch 指来源分支，...
历史版本常见问题
UNI_HASH/RANGE_HASH/STR_HASH/RIGHT_SHIFT在部分场景下分区路由不均衡 现象描述 PolarDB-X 1.0 使用UNI_HASH/RANGE_HASH/STR_HASH/RIGHT_HASH的哈希算法分库分表时，如果分库分表列是同一个列，有可能会出现个别物理分表没有数据的现象。...
Hive数据脱敏
例如，显示开始的4个字符、显示最后的4个字符或Hash处理等。配置Mask Policy时不支持通配符。例如Policy中Table或Column不能配置星号（*）。每个Policy只能配置一个列的Mask策略，多个列时需要配置各个列的Mask Policy。Hive组件配置Ranger...
CREATE TABLE（AUTO模式）
Hash类型 PolarDB-X 的Hash类型分区可细分为Hash分区与Key分区两种类型。Hash分区与Key分区是 原生MySQL的标准分区语法 之一，PolarDB-X 为提供灵活强大的分区管理能力（例如分裂、合并与迁移等）以及考虑支持向量分区键下热点散裂，...
选型介绍
集群评估 智能召回引擎BE采用分布式集群架构，主要由三部分组成：节点类型（即每个分片的规格）、副本数（即replica，每个备份都可独立承担线上流量，通过增加副本数可扩展集群的水平负载能力）、分片数（即partition，通过内部Hash处理，...
KEY
描述 KEY分区与HASH分区类似，也是按照HASH算法进行分区，采用与MySQL相同的HASH算法。KEY分区与HASH分区的区别在于：KEY分区可以没有分区字段，没有分区字段时，默认将主键字段作为分区键。如果没有主键字段时，则按照唯一键进行分区。KEY...
列存索引中HashMatch算子的实现
开始处理磁盘中的分区，由于磁盘中分区的数据已经按分区保存在不同临时文件中，为了避免锁同步，probe阶段仍采用一个磁盘分区由单独Worker独立完成，由于Partition数目往往远大于Worker数目，因此一般不会存在Worker处理不均问题。...
UNI_HASH
与HASH的比较 对比场景 UNI_HASH HASH 分库不分表。此时两个函数的路由方式一样，都是根据分库键的键值按分库数取余。使用同一个拆分键进行分库分表。同一个键值分到的分库的路由结果不会随着分表数的变化而改变。同一个键值分到的分库会...
UNI_HASH
与HASH的比较 对比场景 UNI_HASH HASH 分库不分表。此时两个函数的路由方式一样，都是根据分库键的键值按分库数取余。使用同一个拆分键进行分库分表。同一个键值分到的分库的路由结果不会随着分表数的变化而改变。同一个键值分到的分库会...
查看治理结果
治理项问题及检查项事件处理完成后，您可通过治理报告或治理排行榜，查看已执行的治理操作所取得的成效。通过分析治理结果，识别健康度较低的板块（例如，研发、存储）并推动治理工作解决落地。本文为您介绍如何查看并分析治理结果。前提...
新旧版本图片处理服务及使用说明
对比项 采用IMG域名访问 直接使用OSS域名访问 使用方式 存储与处理两套域名系统 上传、管理、处理、分发，一站式处理 是否支持新版API 支持 支持 是否支持旧版API 支持 默认不支持 是否支持HTTPS 不支持 支持 是否支持VPC网络 不支持 支持 ...
如何处理Tair集群数据倾斜
数据倾斜的原因与处理方法 请提前规划业务增长率，合理地拆分大Key，并保持规范的数据写入，才能解决数据倾斜的根源问题。产生倾斜原因 说明 处理方法 大Key 大Key通常以Key的大小和Key中成员的数量来综合判定。常见于在KKV（Key-key-value...
如何处理Redis集群数据倾斜
数据倾斜的原因与处理方法 请提前规划业务增长率，合理地拆分大Key，并保持规范的数据写入，才能解决数据倾斜的根源问题。产生倾斜原因 说明 处理方法 大Key 大Key通常以Key的大小和Key中成员的数量来综合判定。常见于在KKV（Key-key-value...
V5.3.x系列实例版本说明
性能优化 优化MysqlDump兼容性问题处理，支持MySQL可执行HINT。优化MysqlDump兼容性问题处理，支持MySQL单行注释“—”。修复问题 修复存在HINT时，没有正确设置ThreadLocal变量导致NPE的问题。修复特殊场景下子查询条件上拉失败，导致全表...
发现并处理大Key和热Key
在使用 云原生内存数据库Tair 的过程中，如果未能及时发现并处理Big keys（下文称为“大Key”）与Hotkeys（下文称为“热Key”），可能会导致服务性能下降、用户体验变差，甚至引发大面积故障。本文将介绍大Key与热Key产生的原因、其可能...
一级分区的规划和设计（2.0版）
HASH分区通过标准CRC算法计算出CRC值，并将CRC值与分区数作模计算，得出每条记录的分区号。空值的HASH值与字符串-1相同。以下按照优先级从高到底列出一级分区列的选择依据。选择值分布均匀的列作为分区列，请勿选择分布不均匀的列作为分区...
Range Clustering
Range Clustering作为一种新的数据切分方式，提供了一个全局有序的数据分布，一是可以避免Hash Clustering可能造成的数据倾斜问题；二是在数据有序分布的前提下，创建两级索引（Index），支持对Clustering Key的区域查询以及多键的组合查询...
列存索引中GroupJoin算子的实现
阅读本文前请先了解基础的HASH JOIN与HASH GROUP BY算法。背景 SELECT key1,SUM(sales)as total_sales FROM fact_table LEFT JOIN dimension_table ON fact_table.key1=dimension_table.key1 GROUP BY fact_table.key1 ORDER BY total_...
发现并处理Redis的大Key和热Key
在使用Redis的过程中，如果未能及时发现并处理Big keys（下文称为“大Key”）与Hotkeys（下文称为“热Key”），可能会导致服务性能下降、用户体验变差，甚至引发大面积故障。本文将介绍大Key与热Key产生的原因、其可能引发的问题及如何快速...
查询性能优化指导
连接算子：Hash Join、Nested Loop、Merge Join 聚集算子：Hash Aggregate、Group Aggregate 分布式算子：Redistribute Motion、Broadcast Motion、Gather Motion 其他算子：Hash、Sort、Limit、Append等 postgres=EXPLAIN SELECT*FROM t1,...
SPA页面上报
ARMS前端监控SDK提供了针对SPA页面的两种处理方式：开启SPA自动解析 完全手动上报 开启SPA自动解析 此方法适用于大部分以URL Hash作为路由的单页面应用场景。在初始化的配置项中，设置 enableSPA 为 true，即会开启页面的Hashchange事件...
为什么Redis内存报警与监控的内存使用率不一致
如果Redis内存使用率告警显示内存占用较高，或您的应用程序出现OOM异常，但性能监控显示的内存使用率并不高，可参考本文排查原因并解决问题。问题现象 现象一：您收到 Redis 内存告警，显示 内存使用率超过阈值（例如，连续满足3次平均值>=...
Tair开发运维规范
对于 集群架构 的实例，需要使用hash tag确保命令所要操作的Key都分布在1个Hash槽中，同时还需要避免hash tag带来的存储倾斜问题。避免在Lua脚本中封装事务命令，可能因编译加载消耗较多的计算资源。避免使用 Tair命令支持与限制 执行大量...
云数据库Redis开发运维规范
对于 集群架构 的实例，需要使用hash tag确保命令所要操作的Key都分布在1个Hash槽中，同时还需要避免hash tag带来的存储倾斜问题。避免在Lua脚本中封装事务命令，可能因编译加载消耗较多的计算资源。避免使用 Redis社区版命令支持 执行大量...
使用数据传输同步数据
如果预检查报错：您可以在排查并处理问题后，重新执行预检查，直至预检查成功。您也可以单击错误预检查项操作列中的 跳过，会弹出对话框提示您跳过本操作的具体影响，确认可以跳过后，请单击对话框中的 确定。预检查成功后，单击 启动项目...
PolarDB并行查询
Parallel Hash join hash join是社区8.0为加速分析型查询所引入的功能，并随着版本演进对 semi hash/anti hash a/left hash join 均做了支持，PolarDB 也引入了这些patch来实现完整的Hash join功能，并实现了多种并行执行策略。Parallel ...
深度解析PolarDB数据库并行查询技术
如果改为并行HASH JOIN，并行优化器会对串行执行的HASH JOIN进行并行化改造，使之成为并行HASH JOIN，并行化改造的方案可以有以下两种解决方案：方案一：是将2个表都按HASH key进行分区，相同HASH值的数据处于同一个分区内，由同一个线程...
列存索引如何实现高效数据过滤
它能够减少为了处理查询而必须扫描的数据量，因为它只需要处理与查询范围相关的数据块。另外，minmax索引有助于减少存储索引所需的空间，因为它只需要存储每个块的最小值和最大值，而不是所有数据的索引。Bloom filter Bloom filter是一种...
常见问题
Zookeeper读写数据问题，处理方法请参见 RM处于Standby状态，无法自动恢复Active状态，该如何处理？SUBMITTED：该状态极少遇到，可能原因为Node Update请求太多造成Capacity Scheduler内部抢锁堵塞，通常发生在大规模集群，需优化相关流程...
工单
客服无法立即解答用户问题，需要与其他相关人员协助及追踪处理问题。工单创建后，会自动分配至相应的处理人员。1.工单模板配置 工单模板，主要包含工单的流程、处理时间、处理人、工单组件等内容。可以根据业务需要，设置多个工单模板，供...
排查Redis实例内存使用率高的问题
当Redis内存不足时，可能导致Key频繁被逐出、响应时间上升、QPS（每秒访问次数）不稳定等问题，进而影响业务运行。如果发现Redis内存占满或收到内存告警，可参考本文判断内存占用是否长期过高、内存占用是否突然上升、是否发生内存倾斜，并...
开源对比
云消息队列 RabbitMQ 版 是一款基于高可用分布式存储架构实现的AMQP 0-9-1协议的消息产品，能够兼容开源RabbitMQ客户端，与开源RabbitMQ相比，能够解决各种稳定性痛点（例如消息堆积、脑裂等问题），同时具备高并发、分布式、灵活扩缩容等...
PolarDB处理TPC-H查询的挑战和机遇
这是MySQL比较薄弱的一方面，在其优化逻辑中，经常会插入更多的用于最终结果计算的额外表达式，但这些表达式可能与已有表达式重叠，但它没有精细的区分与处理。PolarDB 中之前还修复过一个Bug：对于已计算完成的标量子查询，会在后续执行中...
- 产品推荐
- 这些文档可能帮助您