什么是RDS MariaDB
基本概念 实例：一个独立占用物理内存的数据库服务进程，用户可以设置不同的内存大小、磁盘空间和数据库类型。其中内存的规格会决定该实例的性能。实例创建后可以变更配置和删除实例。数据库：在一个实例下创建的逻辑单元，一个实例可以...
外部表常见问题
问题类别 常见问题 OSS外部表 自定义Extractor在读取非结构化数据时，如果数据字段存在DATETIME类型，报错ODPS-0123131，如何解决？在MaxCompute上访问OSS外部表，编写UDF本地测试通过，上传后报错内存溢出，如何解决？通过外部表处理OSS...
外部表概述
MaxCompute支持使用外部表功能查询和分析存储于OSS等外部存储系统的数据。该机制使得用户可以无需将数据导入到MaxCompute内部存储，直接对外部数据进行操作，从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据...
什么是备份数据量
本文介绍数据库备份DBS中备份数据量的概念。名词解释 备份数据量，是指通过DBS备份链路的数据量。常见概念 在数据库备份DBS业务场景下，含有常见以下几个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量等。概念 说明 数据库...
影响查询性能的因素
此外，如果 AnalyticDB MySQL版 中表存储的数据量较大，那么在执行索引过滤、明细数据读取等操作时也会出现相互争抢磁盘I/O资源的情况，导致查询变慢。查询并发度 由于集群规格和规模的限制，AnalyticDB MySQL版 能同时处理的查询数量也会...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
文件系统存储类型
大数据分析 低频存储可以为基因测序数据、GIS地理信息数据、票据影像数据和音频录音文件数据等海量非结构化的数据提供低成本、大容量的存储空间，同时还可以实时访问数据。备份存储 若您使用通用型NAS作为MySQL、Redis、MongoDB等数据库的...
限制发布订阅客户端的输出缓冲区大小
当某个客户端的缓冲区数据超过限制时，Tair 将断开与该客户端的连接，防止这些数据占用过多的内存而影响 Tair 服务的性能。Tair 的输出缓冲区限制 Tair 为每个客户端分配了输出缓冲区（output buffer）。当 Tair 处理完客户端的请求后，会...
Tair Clients
为帮助您更方便地使用Tair扩展数据结构，云原生内存数据库Tair 在部分Redis客户端的基础上开发了Tair客户端，您可以通过Tair客户端直接调用Tair扩展数据结构。Tair客户端 说明 TairJedis TairJedis是基于Jedis开发的Tair客户端。...
可观测性能力介绍
当某个Key含有较多数据成员或者占用较大内存时，可以将其称为大Key（Big keys），若未能及时处理大Key会导致执行命令的耗时增加，严重时甚至引发内存溢出（Out Of Memory）。您可以通过 云数据库Redis版 的 实时Top Key统计 功能，帮助定位...
数据合并
背景信息 OceanBase 数据库的存储引擎基于 LSM-Tree 架构，将数据分为静态基线数据（放在 SSTable 中）和动态增量数据（放在 MemTable 中）两部分，其中 SSTable 是只读的，一旦生成就不再被修改，存储于磁盘；MemTable 支持读写，存储于...
自动增加分片
当Redis数据库实例数据规模增大、读写流量暴增时，通过自动增加分片功能，可以快速弹性适配可用内存不足的情况，确保实例内存利用率处于安全水位，帮助您规避Redis内存溢出的风险，可有效保障线上业务稳定性。本文介绍开启Redis自动增加分...
持久内存型
云原生内存数据库Tair 持久内存型（简称持久内存型），基于持久内存技术，为您提供大容量、兼容Redis的内存数据库产品。单实例成本对比云数据库Redis社区版最高可降低30%，且数据持久化不依赖传统磁盘，保证每个操作持久化的同时提供近乎...
发起合并
背景信息 OceanBase 数据库的存储引擎基于 LSM-Tree 架构，将数据分为静态基线数据（放在 SSTable 中）和动态增量数据（放在 MemTable 中）两部分，其中 SSTable 是只读的，一旦生成就不再被修改，存储于磁盘；MemTable 支持读写，存储于...
数据导出到OSS概述
实现原理 DataWorks数据集成的离线同步功能将不同数据源的同步抽象为从来源数据源读取数据的Reader插件以及向目标数据源写入数据的Writer插件，方便您通过定义来源与去向数据源并结合DataWorks调度参数使用，将来源数据源中的全量或增量...
Tair助力雪球行情业务上云，实现数据库降本增效
中国知名在线财富管理平台雪球引入 云原生内存数据库Tair，加速行情业务系统上云进程，顺畅支持每天近千万级QPS峰值读写，并实现相关数据库成本降低50%以上。客户感言“在业务上云过程中，我们希望对系统架构进行优化改造，以达到简化架构...
数据治理
数据地图 为什么数据地图数据总览页存储量和存储趋势图相差较大？数据地图血缘展示延迟问题 数据地图新建表搜不到 当前表业务逻辑变更如何通知下游？哪些类型的Hive表支持在数据地图中预览？数据保护伞 数据保护伞为什么有时候查询脱敏有...
Query级别诊断结果
查询返回客户端的数据量较大 查询消耗的内存资源较大 查询生成的Stage个数较多 查询读取的数据量较大 查询返回客户端的数据量较大 问题 大量数据返回到客户端会导致慢查询，还会占用部分网络前端资源。说明 您可以在查询详情页面的 查询...
功能概述
表格存储 面向海量结构化数据提供Serverless表存储服务，适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 ...
IO加速
当您需要应对数据库磁盘IO性能瓶颈时，云数据库RDS PostgreSQL的通用云盘IO加速功能为您提供了一个高效的解决方案。本文档将详细介绍该技术的优势、适用场景和工作原理，帮助您在面临大规模或频繁数据读写需求时显著提升数据库性能。背景 ...
存储费用
MaxCompute会对存储的数据（例如表或资源）及备份的数据，按照数据容量大小进行计费。本文为您介绍存储费用的计费规则。背景信息 MaxCompute数据的压缩比一般在5倍左右，因此多数情况下，您上传的数据文件大小与实际存储在MaxCompute的大小...
什么是RDS MySQL
RDS MySQL 阿里云关系型数据库服务RDS（Relational Database Service）支持MySQL引擎，RDS MySQL是基于阿里巴巴MySQL源码分支的在线数据库服务，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据...
冷数据归档
如下所示：对于数据量最大的冷数据，时序引擎会自动根据用户设置的基于业务时间戳的冷热分界线自动将冷数据归档到冷存储中。当需要查询冷数据时，用户可以无感知地按正常查询的方式进行冷数据查询。开通冷存储 时序引擎实例创建后本身就...
同步时源库为Redis的注意事项及限制
如果同步的源数据库类型为Redis，如自建Redis、云数据库Redis，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为Redis的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：...
附录：数据探查典型场景说明
亚信DP5.3 内存溢出 Map端和Reduce端的内存溢出。set mapreduce.map.memory.mb=10150;set mapreduce.map.java.opts=-Xmx6144m;set mapreduce.reduce.memory.mb=10150;set mapreduce.reduce.java.opts=-Xmx8120m;E-MapReduce3.x、E-...
附录：数据探查典型场景说明
亚信DP5.3 内存溢出 Map端和Reduce端的内存溢出。set mapreduce.map.memory.mb=10150;set mapreduce.map.java.opts=-Xmx6144m;set mapreduce.reduce.memory.mb=10150;set mapreduce.reduce.java.opts=-Xmx8120m;E-MapReduce3.x、E-...
使用限制
本文介绍 云原生内存数据库Tair 各数据类型以及部分功能特性的使用限制。项目 说明 List数据类型 List及其包含的元素个数无限制，但单个元素的最大值为512 MB。推荐List的元素个数小于8192，整体Value不超过1 MB。Set数据类型 Set及其包含...
如何处理Tair集群数据倾斜
数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出（Key eviction）、内存溢出OOM（Out Of Memory）、实例响应时间上升等异常情况。为什么会产生数据倾斜 Tair 集群架构作为一个分布式系统，整个数据库空间会被分为...
PyODPS概述
如果后续操作的都是本地的DataFrame，则丧失了MaxCompute 的大规模并行计算能力，且数据量稍大时，单机内存就很容易产生OOM。提交到MaxCompute分布式执行（推荐）推荐您合理利用PyODPS提供的分布式DataFrame功能，将主要的计算提交到...
列存索引内存管理介绍
当内存使用量超过 lwm 或 hwm 时才会触发下一次的状态变化。虚拟内存 借助操作系统的虚拟内存概念来描述这个分配过程。当某个查询从本模块分配内存配额时，实际上当前查询还没有占用任何内存，且在整个查询过程中，内存基本上不会超过分配...
内置的安全审计规则
数据库探测 获取数据库版本（DB2语法）中 数据库探测 获取当前用户_SESSION用户（DB2语法）中 数据库探测 探测数据库版本 低 数据库探测 探测登录用户 低 数据库探测 探测数据库名称 低 数据库探测 探测系统版本 低 数据泄露 操作类别 操作...
什么是云原生内存数据库Tair
为什么选择云原生内存数据库Tair 丰富的产品形态 从访问延时、持久化需求、整体成本这三个核心维度考量，基于DRAM（Dynamic Random Access Memory）、NVM（Non-Volatile Memory）和ESSD云盘等存储介质，推出了 内存型、持久内存型、磁盘型 ...
Tair选型指南
重要 在确定 云原生内存数据库Tair 实例的内存容量时，首先要考虑存储的业务数据大小，其次，您还需额外考虑实例自身运行占用的必要内存开销（例如进程元数据、复制缓冲区、碎片等）。不同于开源Redis数据库，选用 Tair 时，您无需再额外...
容器内存QoS
节点内存限制：当容器内存超卖（Memory Limit>Request）导致整机内存不足，会触发内核的全局内存回收，这个过程对性能影响较大，极端情况甚至导致整机异常。为了提高应用运行时性能和节点的稳定性，ACK引入容器内存QoS能力，通过ack-...
通过OOS定期删除Tair或Redis过期Key
当数据过期后，Tair 不会立即删除已过期的数据，而是通过主动删除（后台定期扫描、删除部分过期Key）与被动删除（当用户访问到过期Key，则删除）的方式对过期Key进行逐步删除，因此过期数据仍然占据着内存空间。在极端情况下，当大量数据...
限制说明
数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景 当...
内存型
云原生内存数据库Tair 内存型（简称内存型）适合并发量大、读写热点多、高性能场景，内存型重点增强了多线程性能并集成多个自研扩展数据结构。购买方式 创建实例 主要优势 类别 说明 兼容性 100%兼容原生Redis，无需修改业务代码，提供 ...
释放公网连接地址
当您不再需要从公网连接 云原生内存数据库Tair 实例时，可以释放公网连接地址。前提条件 已申请公网连接地址，具体操作请参见 申请公网连接地址。操作步骤 警告 本操作会导致原有的公网地址不可用，客户端将无法继续通过原有的公网连接地址...
常见问题
本文汇总了使用 云原生内存数据库Tair 时的常用问题。功能特性 Tair实例兼容Redis哪个版本？Tair实例兼容哪些Redis命令和操作？Tair实例与Redis是什么关系？Tair实例是否有CPU处理能力、带宽和连接数等限制？
实例指标
实例相关）指标项 含义 procCpu 数据节点CPU使用率 procMemRss 数据节点内存使用大小 procMemUsedRatio 数据节点内存使用率 diskUse 数据节点磁盘使用大小 diskUsedRatio 数据节点磁盘使用率 partitionDocCount 数据节点存储的doc数 ...
- 产品推荐
- 这些文档可能帮助您