缓冲区管理
Copy Buffer机制会将特定的、不满足刷脏条件的Buffer从Buffer Pool中拷贝至新增的Copy Buffer Pool中，Copy Buffer Pool中的Buffer不会再被修改，其对应的Latest LSN也不会更新，随着Oldest Apply LSN的推进，Copy Buffer会逐步满足刷脏...
EDAS监控报警功能升级说明（2020年02月13日）
如果您在应用监控页面上看到了需要重启应用的有关提示，则说明您的应用已经被迁移，请在业务允许的窗口时间内尽快重启您的应用程序。应用程序在重启之后才能启用新的监控功能。从应用重启的这个时间点开始，之前产生的监控数据需要在老的...
Page Cache限制功能
Alibaba Cloud Linux 3（内核版本 5.10.134-14 开始）增加了Page Cache（文件缓存）限制功能，用于解决因Page Cache无限制使用带来的系统稳定性问题，例如业务抖动、预期外的内存溢出OOM（Out Of Memory）等。背景信息 在内核系统中，系统...
JindoCube使用说明
JindoCube在E-MapReduce 3.24.0及之后版本...可能导致Cache数据不完整的情况包括：用户在Cache详情页主动删除查询需要的Cache Partition数据，构建、更新Cache时指定的过滤条件过滤掉了查询需要的数据，查询需要的数据还未及时更新到Cache等。
JindoCube使用说明
JindoCube在E-MapReduce 3.24.0及之后版本...可能导致Cache数据不完整的情况包括：用户在Cache详情页主动删除查询需要的Cache Partition数据，构建、更新Cache时指定的过滤条件过滤掉了查询需要的数据，查询需要的数据还未及时更新到Cache等。
JindoCube使用说明
JindoCube在E-MapReduce 3.24.0及之后版本...可能导致Cache数据不完整的情况包括：用户在Cache详情页主动删除查询需要的Cache Partition数据，构建、更新Cache时指定的过滤条件过滤掉了查询需要的数据，查询需要的数据还未及时更新到Cache等。
JindoCube使用说明
JindoCube在E-MapReduce 3.24.0及之后版本...可能导致Cache数据不完整的情况包括：用户在Cache详情页主动删除查询需要的Cache Partition数据，构建、更新Cache时指定的过滤条件过滤掉了查询需要的数据，查询需要的数据还未及时更新到Cache等。
JindoCube使用说明
JindoCube在E-MapReduce 3.24.0及之后版本...可能导致Cache数据不完整的情况包括：用户在Cache详情页主动删除查询需要的Cache Partition数据，构建、更新Cache时指定的过滤条件过滤掉了查询需要的数据，查询需要的数据还未及时更新到Cache等。
JindoCube使用说明
JindoCube在E-MapReduce 3.24.0及之后版本...可能导致Cache数据不完整的情况包括：用户在Cache详情页主动删除查询需要的Cache Partition数据，构建、更新Cache时指定的过滤条件过滤掉了查询需要的数据，查询需要的数据还未及时更新到Cache等。
JindoCube使用说明
JindoCube在E-MapReduce 3.24.0及之后版本...可能导致Cache数据不完整的情况包括：用户在Cache详情页主动删除查询需要的Cache Partition数据，构建、更新Cache时指定的过滤条件过滤掉了查询需要的数据，查询需要的数据还未及时更新到Cache等。
RDS MySQL活跃线程数高问题
解决方案 将参数 table_open_cache（不需要重启实例）和 table_open_cache_instances（需要重启实例）调大。排查元数据锁（MDL）问题 现象 出现MDL锁时，会导致大量SQL处于 Waiting for table metadata lock 的状态，在DDL prepare和commit...
Query Cache
AnalyticDB PostgreSQL版 V6.3.7.0版本引入了Query Cache特性，该特性可以缓存查询结果，对于重复的查询可以非常迅速地返回查询结果，因此对于读多写少，尤其是重复查询多的场景，可以有效提升数据库的查询性能。注意事项 AnalyticDB ...
MySQL 实际内存分配情况介绍
共享内存 执行如下命令，即可查询示例的共享内存分配情况：show variables where variable_name in('innodb_buffer_pool_size','innodb_log_buffer_size','innodb_additional_mem_pool_size','key_buffer_size','query_cache_size');...
使用操作系统Alibaba Cloud Linux 3
Alibaba Cloud Linux 3新增了page cache限制功能，支持以memcg为粒度（包括根组即整机）限制page cache的使用。您可以设置page cache的上限，对超过限制的page cache进行异步或者同步回收。这可以帮助控制page cache的使用量，防止其占用...
MySQL实际内存分配情况介绍
内存共享 执行如下命令，即可查询示例的共享内存分配情况：show variables where variable_name in('innodb_buffer_pool_size','innodb_log_buffer_size','innodb_additional_mem_pool_size','key_buffer_size','query_cache_size');...
使用须知
解决方法：重启queryserver或者重客户端，或者重新设置cache的过期时间。对于数据量较大的复杂查询（JOIN、ORDER BY、GROUP BY），您需要合理地控制资源，否则会影响集群稳定性。解决方法：如果需要使用SQL语句，您可以了解Lindorm SQL解决...
持久缓存池（Warm Buffer Pool）
背景信息 PolarDB MySQL版 支持持久缓存池功能，在主节点主动重启或者异常崩溃后重启的过程中，缓存池（Buffer Pool）中的数据依然存在，从而大幅度加快重启速度，并保持重启后性能无衰减。前提条件 PolarDB 集群版本需为 PolarDB MySQL版 ...
公共镜像已知问题
2022年01月补丁导致Windows域控服务器异常问题 问题描述：根据微软官方2022年01月13日的公告，Windows终端在安装微软官方2022年01月的安全补丁后，会出现域控服务器无法重启（或无限重启）问题、Hyper-V中的虚拟机（VM）可能无法启动、...
Fast Query Cache
针对原生MySQL Query Cache的不足，阿里云进行重新设计和全新实现，推出Fast Query Cache，能够有效提高数据库查询性能。前提条件 实例版本为MySQL 5.7（内核小版本20200331或以上）。实例未开启 数据库独享代理。背景信息 查询缓存（Query...
SmartData数据读取异常修复公告
缺陷发生现象：如果集群启用JindoFS Cache模式（即设置数据缓存参数 jfs.cache.data-cache.enable 为 true）或者使用了JindoFS Block模式（Block模式默认启用缓存），则数据缓存会出现小概率数据污染的情况，从而导致作业读取数据时报错。...
只读节点Online Promote
传统数据库支持Standby节点升级为主库节点的Promote操作，在不重启的情况下，提升备库节点为主库节点，可以继续提供读写服务，保证了集群高可用的同时，也有效降低了实例的恢复时间RTO。PolarDB PostgreSQL版 同样需要只读备库节点提升为主...
只读节点Online Promote
传统数据库支持Standby节点升级为主库节点的Promote操作，在不重启的情况下，提升备库节点为主库节点，可以继续提供读写服务，保证了集群高可用的同时，也有效降低了实例的恢复时间RTO。PolarDB PostgreSQL版（兼容Oracle）同样需要只读备...
启用Multi-Buffer实现TLS加速
annotations示例如下：proxy.istio.io/config:|privateKeyProvider:cryptomb:pollDelay:10ms 重启Pod使配置生效。FAQ 控制面启用了MultiBuffer功能，但数据面Kubernetes集群下的节点不是Intel Ice Lake的机型，有什么影响？Envoy会输出告警...
Global Cache
本文介绍了Global Cache的背景以及如何使用等内容。背景信息 Global Cache是一系列位于Shared Memory中供所有进程共享的元数据Cache统称，目前包括Global RelCache、Global CatCache，分别对应原生PostgreSQL中的RelCache和CatCache、...
分场景排错指引
作业Cache策略详情请参见各维表的Cache策略，例如 HBase维表Cache参数。确认函数使用方法是否不正确。如果您在作业中使用了to_timestamp_tz、date_format等函数，而函数的使用方法不对，导致数据转化出问题，数据被丢失。此时，您可以通过...
ECS DNS查询请求限速该如何缓解？
ECS主机开启nscd（Name Service Cache Daemon）服务进行缓存加速；说明 nscd服务开启情况下，会导致变更解析记录的生效时间更长。什么是nscd？nscd是一个系统缓存服务，用户缓存名称服务信息，例如passwd、group、hosts、services以及...
全局元数据缓存
本文介绍了全局元数据缓存（Global Cache）的背景以及如何使用等内容。背景信息 为提升对元数据的访问效率，PostgreSQL在各个进程中引入了多种元数据缓存：RelCache（Relation Descriptor Cache）：关系描述符缓存。CatCache/SysCache...
全局元数据缓存
本文介绍了全局元数据缓存（Global Cache）的背景以及如何使用。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.8.11.0及以上）。说明 您可通过如下语句查看 PolarDB PostgreSQL版 的内核小版本的版本号：...
全局元数据缓存
本文介绍了全局元数据缓存（Global Cache）的背景以及如何使用。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的版本如下：Oracle 2.0（内核小版本2.0.14.11.0及以上）说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle...
EMR-3.22.x版本说明
用户可以创建Relational Cache对数据进行预计算，在执行用户查询时，Spark Optimizer自动发现合适的Cache，并改写SQL执行计划，基于Cache的数据继续计算，从而提升查询速度，适用于报表、Dashboard、数据同步和多维分析等场景。通过DDL，...
PolarDB PostgreSQL版架构介绍
真正的回放被offload到了重启之后进来的session进程中。优化之后（回放500 MB日志量），如下图所示：Persistent BufferPool 上述方案优化了在recovery的重启速度，但是在重启之后，session进程通过读取WAL日志来回放想要的page。表示为在...
PolarDB PostgreSQL版架构介绍
真正的回放被offload到了重启之后进来的session进程中。优化之后（回放500 MB日志量），如下图所示：Persistent BufferPool 上述方案优化了在recovery的重启速度，但是在重启之后，session进程通过读取WAL日志来回放想要的page。表示为在...
Python 2 UDAF
def new_buffer(self):return[0,0]def iterate(self,buffer,number):if number is not None:buffer[0]+number buffer[1]+1 def merge(self,buffer,pbuffer):buffer[0]+pbuffer[0]buffer[1]+pbuffer[1]def terminate(self,buffer):if buffer...
实时存储引擎
AnalyticDB MySQL版 的Buffer Manager在文件系统之上，通过内存映射文件的方式（mmap）维护缓冲池，不同大小的Page都可以加载到Buffer Manager中。当一个Page被淘汰出Buffer Manager时，首先保证该Page成功写回磁盘，随后通过Madvise中的...
Python 3 UDAF
def new_buffer(self):return[0,0]def iterate(self,buffer,number):if number is not None:buffer[0]+number buffer[1]+1 def merge(self,buffer,pbuffer):buffer[0]+pbuffer[0]buffer[1]+pbuffer[1]def terminate(self,buffer):if buffer...
调整实例Buffer Pool大小
您可以根据业务情况调整MariaDB实例的innodb_buffer_pool_size大小，以提升实例性能。InnoDB Buffer Pool大小 RDS实例可以通过参数innodb_buffer_pool_size来调整InnoDB Buffer Pool的大小，当前仅支持通过公式进行修改。公式如下：{...
性能参数调优
gp_vmem_protect_segworker_cache_limit 千字节数 重启实例生效 无 查询执行器进程缓存的限制值。具有大量连接或空闲进程的系统可能希望减少这个值以释放segment上的更多内存。这是一个本地参数，必须为每个segment设置。gp_resqueue_...
调整实例Buffer Pool大小
您可以根据业务情况调整RDS MySQL实例的innodb_buffer_pool_size大小，以便提升实例性能。前提条件 实例系列如下：RDS MySQL高可用系列 RDS MySQL基础系列 RDS MySQL集群系列 应用限制 RDS MySQL Serverless实例不支持手动修改innodb_...
自研内核
Fast Query Cache 针对原生MySQL Query Cache的不足，阿里云进行重新设计和全新实现，推出Fast Query Cache，优化并发控制、内存管理和缓存机制，能够有效提高数据库查询性能。Binlog in Redo Binlog in Redo功能指在事务提交时将Binlog...
开启CNFS NAS计算端分布式缓存
kubectl get ds/cnfs-cache-ds-n kube-system-owide 预期输出：NAME DESIRED CURRENT READY UP-TO-DATE AVAILABLE NODE SELECTOR AGE CONTAINERS IMAGES SELECTOR cnfs-cache-ds 3 3 3 3 3<none>19d alinas-dadi-container registry-vpc....
- 产品推荐
- 这些文档可能帮助您