产品架构
云数据库SelectDB版 集群会将热数据缓存到本地，从而加速响应大量重复的SQL请求，遇到没命中缓存的SQL请求，云数据库SelectDB版 集群会从对象存储查询获取结果后再响应。存储 云数据库SelectDB版 存储，支持存算分离架构，多计算集群共享...
数据加速Fluid概述
数据弹性与调度：将数据缓存技术和弹性扩缩容、数据亲和性调度能力相结合，提高数据访问性能。运行时平台无关：支持原生、边缘、Serverless Kubernetes集群、Kubernetes多集群等多样化环境，适用于混合云场景。Fluid重要概念 Dataset：数据...
管理协议服务
缓存型相比通用型，提供热点数据缓存能力。在命中缓存的情况下，缓存型协议服务的带宽可超过CPFS文件系统的带宽，达到协议服务设定的最大带宽值。通用型：为CPFS提供NFS协议访问能力和 目录级挂载点，用户无需配置POSIX客户端管理集群。该...
缓存
my.clearStorageSync 清除本地数据缓存。说明 mPaaS 10.1.32 及以上版本支持该接口。这是同步接口。代码示例 my.clearStorageSync()其他信息 缓存数据本地加密存储，通过 API 读取时会自动解密返回。iOS 客户端支持 iTunes 备份。my....
网络资源
数据缓存：对于网络闪断导致的数据传输中断，可以使用数据缓存机制，将数据暂时缓存起来，并在网络恢复后进行重传，确保数据传输的完整性和准确性。重新建连：系统服务要具备重新建立连接的能力，网络闪断后可自动重新建立新连接，恢复通信...
RDS搭配异构数据库实现数据多样化存储
缓存数据持久化 RDS可以搭配云数据库缓存产品（Redis和Memcache），组成高吞吐、低延迟的存储解决方案。相对于RDS，云数据库缓存产品有两个特性：响应速度快。请求的时延通常在几毫秒以内。缓存区能够支持比RDS更高的QPS（每秒处理请求数）...
JindoFuse支持JindoFSx
JindoFuse透明缓存加速可以利用计算集群的闲置存储资源进行数据缓存来加速计算服务，避免计算集群或服务占用核心集群过多带宽。JindoFuse使用原来的地址（oss:/）可以将JindoFS服务上的文件挂载到本地文件系统中，让您能够像操作本地文件...
功能特性
监控告警 数仓和数据湖 功能集 功能 功能描述 参考文档 数据存储 数据缓存 云数据库SelectDB支持数据缓存功能，当您需要管理缓存数据并提升云数据库 SelectDB 版的访问速度时，可以根据该文档对缓存进行有效管理，并利用LRU和TTL管理策略，...
数据源常见问题
是否支持数据缓存？是否支持跨数据源关联表？数据源上传文件方式更新数据时的字段顺序是否必须和原上传时的顺序一致？探索空间的数据表可以关联其他数据源吗？添加自建MySQL数据源时，出现“数据源连通性异常，请检查参数是否正确”。是否...
概述
在数据库云盘中提供冷存对象的物化缓存，将频繁读取、频繁更新的部分数据缓存在云盘中，OSS介质中保留了数据的完整性，数据在物化缓存中的生命周期由访问频率决定，这样可以达到性能优良但存储成本更低的效果。具体可参考 冷数据物化缓存。
概述
在数据库云盘中提供冷存对象的物化缓存，将频繁读取、频繁更新的部分数据缓存在云盘中，OSS介质中保留了数据的完整性，数据在物化缓存中的生命周期由访问频率决定，这样可以达到性能优良但存储成本更低的效果。具体可参考 冷数据物化缓存。
概述
在数据库云盘中提供冷存对象的物化缓存，将频繁读取、频繁更新的部分数据缓存在云盘中，OSS介质中保留了数据的完整性，数据在物化缓存中的生命周期由访问频率决定，这样可以达到性能优良但存储成本更低的效果。具体可参考 冷数据物化缓存。
EMR-3.22.x版本说明
Cache模式则保留了原有OSS存储的语义，通过JindoFS在E-MapReduce集群内部实现了数据缓存加速，因此，E-MapReduce 集群外部可以直接通过OSS客户端访问数据，例如，OSS SDK或者E-MapReduce的OssFileSystem等。生态组件支持 JindoFS目前已经...
常见问题
文件网关FAQ 数据缓存：如何扩容云存储文件网关缓存？混合云存储网关数据下载功能是什么？云存储网关复制模式新玩法的部分复制是什么？云存储网关文件网关的缓存工作原理是什么？反向同步和极速同步：如何通过极速同步即时处理OSS上传对象...
操作指南FAQ
文件网关FAQ 数据缓存：如何扩容云存储文件网关缓存？混合云存储网关数据下载功能是什么？云存储网关复制模式新玩法的部分复制是什么？云存储网关文件网关的缓存工作原理是什么？反向同步和极速同步：如何通过极速同步即时处理OSS上传对象...
管理缓存
Alluxio利用E-MapReduce（简称EMR）集群的本地节点的内存和磁盘对数据进行分布式缓存。本文为您介绍缓存相关的内容。前提条件 已创建集群，并选择了Alluxio服务，详情请参见 创建集群。已登录集群，详情请参见 登录集群。背景信息 EMR默认...
JindoData概述
JindoFSx存储加速系统 JindoFSx（JindoData服务）是原JindoFS Cache模式的全新升级版本，是面向大数据和AI生态的云原生数据湖存储加速系统，为大数据和AI应用访问各种云存储提供访问加速，支持数据缓存、元数据缓存和P2P加速等功能。...
什么是云存储网关CSG
并且利用本地存储空间作为热数据缓存，使用户在享受OSS Bucket海量空间的同时，保障数据访问的高性能。文件网关还高度兼容POSIX和第三方备份软件。如果是小文件的备份和共享读写场景，推荐使用标准型或基础型文件网关；如果对性能有一定...
存储资源
常见的容错策略如下：数据缓存：将数据暂时存储在内存中，减少对磁盘IO的频繁访问。可以利用内存缓存系统或操作系统的文件缓存功能，提高数据的访问速度和磁盘IO的利用效率。分布式存储：将数据分布到多个计算节点的存储设备上，采用分布式...
EMR-3.24.x版本说明
Cache模式不仅支持原有用法，还兼容了原有OSS文件系统的使用方式，支持数据缓存和元数据缓存，并可以通过配置分别控制开关（默认均关闭）。优化Block模式和Cache模式读写性能。优化磁盘清理，对本地磁盘上缓存的热数据实现更精确的统计和更...
缓存数据持久化
python3 test.py 首次运行，由于Redis缓存中没有数据，从RDS MySQL中读取，返回结果示例：Redis中未查询到数据，从RDS MySQL查询到数据：((1,'Zhangsan'),(2,'Lisi'),(3,'Wangwu'))再次运行时，由于第一次查询后已将查询数据缓存至Redis中...
通过缓存优化性能
Delta缓存通过使用快速中间数据格式在节点的本地存储中创建远程文件的副本来加速数据读取。每当需要从远程位置获取文件时，数据都会自动缓存。然后在本地的连续读取上述数据，从而显著提高读取速度。说明 详细内容可参考Databricks官网文章...
SmartData 3.1.x版本简介
支持数据缓存自动触发功能，您可以通过设置需要跟踪的目标目录以及时间间隔，每隔相应的时间间隔，系统自动发现用户目录下的新增文件，并自动触发Cache操作。JindoTable计算优化 JindoTable Dump TF格式支持二维数组。Jindo mc dump支持...
SDK接口
TableTunnel.StreamRecordPack 数据缓存会话。StreamUploadSession public interface StreamUploadSession {/*设置P2P模式。param mode*/public void setP2pMode(boolean mode);获取Session ID。return Session ID*/public String getId();...
数据缓存
本文档为您介绍云数据库SelectDB的数据缓存功能，当您需要管理缓存数据并提升 云数据库 SelectDB 版 的访问速度时，可以根据该文档对缓存进行有效管理，并利用LRU和TTL管理策略，以及缓存预热技术，来充分发挥数据库性能。概述 云数据库 ...
UploadSession
本文为您介绍 UploadSession 接口，此接口用于上传数据到表中。...建议使用 openBufferedWriter 接口上传数据，该接口对您屏蔽了blockId的细节，并且内部带有数据缓存区，会自动进行失败重试，详情请参见 BufferedWriter上传示例。
JindoFS外部客户端
JindoFS外部客户端实现了Hadoop文件系统的接口，在用户程序跟E-MapReduce JindoFS Namespace服务网络相通的情况下，用户可以通过JindoFS外部客户端去访问JindoFS上存储的数据，但外部客户端不能利用E-MapReduce JindoFS的数据缓存能力，...
使用SDK示例代码消费PolarDB-X 1.0订阅数据
DStoreRecordQueue DTS服务器发送数据时，当前数据缓存队列的大小。inCounts DTS服务器发送数据总数。inRps DTS服务器发送数据时的每秒请求数。inBps DTS服务器发送数据时每秒传送的比特数。dt SDK客户端接收到数据的当前时间戳，单位为...
使用SDK示例代码消费PolarDB-X 1.0订阅数据
DStoreRecordQueue DTS服务器发送数据时，当前数据缓存队列的大小。inCounts DTS服务器发送数据总数。inRps DTS服务器发送数据时的每秒请求数。inBps DTS服务器发送数据时每秒传送的比特数。dt SDK客户端接收到数据的当前时间戳，单位为...
协议服务概述
缓存型相比通用型，提供热点数据缓存能力。在命中缓存的情况下，缓存型协议服务的带宽可超过CPFS文件系统的带宽，达到协议服务设定的最大带宽值。通用型：为CPFS提供NFS协议访问能力和 目录级挂载点，用户无需配置POSIX客户端管理集群。该...
使用Tunnel命令或Tunnel SDK
TableTunnel.StreamRecordPack 数据缓存会话 说明 不同版本的SDK在使用上有差别，详情请参见 SDK Java Doc。使用流式数据通道SDK上传数据的使用案例请参见：简单上传示例 多线程上传示例 异步化IO多线程上传示例 使用Streaming Tunnel SDK...
SmartData常见问题
缓存模式：当计算性能受限于IO和存储吞吐时，您可以使用此模式，在计算集群的Core节点上增加或扩容磁盘，以开启数据缓存。Block模式：特殊场景，例如对元数据操作性能和一致性要求高时，使用此模式。JindoFS SDK和缓存模式的区别是什么？...
限制说明
数据可靠性 云数据库 Memcache 版的数据存储在内存中，服务并不保证缓存数据不会丢失，有强一致性要求的数据不适合存储。数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不...
使用JindoFS加速OSS文件访问
spark.hadoop.fs.jindofsx.data.cache.enable 数据缓存开关。固定值为 true。spark.hadoop.fs.jindofsx.meta.cache.enable 元数据缓存开关：false（默认值）：禁用元数据缓存。true：启用元数据缓存。spark.hadoop.fs.jindofsx.client....
通过命令行工具快速使用云存储网关软件版
Linux操作系统：/mnt/test为挂载点路径，/root/cache为缓存路径，使用的Bucket名称为beijing，缓存大小设置为50 GB，数据缓存设置为40 GB（其余10 GB为元数据缓存），Bucket子目录设置为test，其命令行如下：sudo csgfsctl create-mp=mnt/...
Cache API
工作原理 通过ER内置的CacheAPI，您可以将ER处理后的结果或从源站获取的数据缓存到DCDN，供其他访问到同节点的请求复⽤，以减少重复的计算或⽹络请求。ER和DCDN缓存的关系示意图如下：API标准 Cache基本尽可能地遵循标准 Cache。但由于边缘...
Cache API
工作原理 通过ER内置的CacheAPI，您可以将ER处理后的结果或从源站获取的数据缓存到DCDN，供其他访问到同节点的请求复⽤，以减少重复的计算或⽹络请求。ER和DCDN缓存的关系示意图如下：API标准 Cache基本尽可能地遵循标准 Cache。但由于边缘...
Cache API
工作原理 通过ER内置的CacheAPI，您可以将ER处理后的结果或从源站获取的数据缓存到DCDN，供其他访问到同节点的请求复⽤，以减少重复的计算或⽹络请求。ER和DCDN缓存的关系示意图如下：API标准 Cache基本尽可能地遵循标准 Cache。但由于边缘...
将Excel的数据导入数据库
安全模式：预检查阶段会解析文件并将SQL或CSV数据缓存入库，执行时再从缓存库中读出来执行到指定的目标库。该模式安全性较好，但是执行时效相比极速模式要低。文件类型 选中导入数据的文件类型。此处选择 CSV。SQL脚本：安全协同模式下，...
云存储网关
同时，文件网关利用本地存储空间作为热数据缓存，在提供OSS Bucket海量空间的同时，保障了数据访问的高性能。文件网关还高度兼容POSIX和第三方备份软件。如果是小文件的备份和共享读写场景，推荐使用标准型或基础型文件网关；如果对性能有...
- 产品推荐
- 这些文档可能帮助您