存储类型简介

数据清理:创建自动维护容量的缓存目录、提供清理缓存的实现类。相关的公开类说明,如下表所示:类名 功能 APDataCenter 单例类,统一存储入口类。APSharedPreferences 对应一个数据库文件,提供 Key-Value 存储接口,同时容纳 DAO 建表。...

Partial Result Cache(PTRC)

当 hit_rate 高于 partial_result_cache_high_hit_rate 参数值时,命中率大于高水位,会将内存中的缓存数据转存至Disk存储,即便转储至Disk,依然会有可预期的性能提升;当 hit_rate 位于低水位和高水位之间时,则会触发LRU数据淘汰,将...

使用OSS缓存插件加速构建

缓存插件使用 Serverless-cd社区提供 缓存插件,并针对Serverless应用中心的特性进行优化,用户只需指定用于缓存存储的OSS Bucket,即可使用缓存插件。缓存插件会在指定或默认的OSS Bucket中,按照指定的Key检索读取并更新缓存内容。插件...

使用OSS缓存插件加速构建

缓存插件使用 Serverless-cd社区提供 缓存插件,并针对Serverless应用中心的特性进行优化,用户只需指定用于缓存存储的OSS Bucket,即可使用缓存插件。缓存插件会在指定或默认的OSS Bucket中,按照指定的Key检索读取并更新缓存内容。插件...

CopyDataCache-拷贝数据缓存

注意 拷贝数据缓存的过程相当于复制快照,费用涉及复制过程产生的流量费用以及最终生成的数据缓存的存储费用。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码...

通过CNFS可观测性定位NAS或CPFS客户端IO问题

存储监控 页签,单击 Container Storage IO Monitoring(Cluster Level),查看加速弹性客户端访问缓存的存储IO监控(集群维度)的大盘。在 存储监控 页签,单击 Pod IO Monitoring(Pod Level),查看加速弹性客户端访问缓存的容器组IO监控...

使用JindoFS加速OSS文件访问

JindoRuntime来源于阿里云EMR团队JindoFS,是基于C++实现的支撑Dataset数据管理和缓存的执行引擎,支持OSS对象存储。使用Fluid和JindoRuntime,可以加速EMR on ACK上的Spark作业读取OSS文件,达到节省带宽流量的效果。前提条件 已在EMR on ...

SmartData 3.2.x版本简介

SmartData组件是EMR Jindo引擎的存储部分,为EMR各个计算引擎提供统一的存储缓存、计算优化以及功能扩展。SmartData组件主要包括JindoFS、JindoTable和相关工具集。本文介绍SmartData(3.2.x)版本的更新内容。JindoFS OSS扩展和支持 ...

如何将冷存数据进行预热

场景描述 冷存中的数据首次查询时延迟会比较高,可以提前预热将其加载到持久化缓存(分层存储中的云盘层),可以起到查询加速的效果。PolarDB PostgreSQL版 提供了 polar_osfs_prewarm 函数,支持将冷存数据进行预热。创建扩展 CREATE ...

如何将冷存数据进行预热

场景描述 冷存中的数据首次查询时延迟会比较高,可以提前预热将其加载到持久化缓存(分层存储中的云盘层),可以起到查询加速的效果。PolarDB PostgreSQL版(兼容Oracle)提供了 polar_osfs_prewarm 函数,支持将冷存数据进行预热。创建...

SmartData 3.0.x版本简介

JindoManager系统管理 支持通过UI来查看JindoFS存储系统上的系统状态、文件统计和缓存系统上的缓存指标统计。JindoTools工具集 改进Jindo DistCp工具的分发机制,针对EMR集群内使用场景和非EMR集群环境使用场景,分别使用不同的发行包。...

存储缓存监控详情

在租户存储缓存监控详情页面,您可查看租户的存储使用,读写速率和缓存使用等监控数据信息。查看租户存储缓存监控数据 存储缓存页签中默认展示了 1 小时内 MEMStore 使用,存储读写速率,缓存使用等信息。您可以自定义筛选时间查看...

SmartData 3.7.x版本简介

SmartData组件是EMR Jindo引擎的存储部分,为EMR各个计算引擎提供统一的存储缓存、计算优化以及功能扩展。SmartData组件主要包括JindoFS、JindoTable和相关工具集。本文为您介绍SmartData(3.7.x)版本的新增内容。JindoFS 此版本中...

SmartData 3.6.x版本简介

JindoFS优化缓存预加载机制 优化了元数据和数据缓存的预加载机制,提升了执行效率。优化进度反馈。支持了针对超大目录的任务。JindoSDK 此版本中JindoSDK的新特性如下表所示。特性 描述 JindoSDK支持本地缓存(Local)策略 JindoSDK支持...

SmartData 3.1.x版本简介

JindoFS缓存优化 针对机器学习训练场景提供小文件缓存优化,大幅提升海量小文件的缓存效率和读取性能。提供小文件目录预加载 cache 命令,大幅提升预加载效率。支持数据缓存自动触发功能,您可以通过设置需要跟踪的目标目录以及时间间隔,...

如何扩容云存储文件网关缓存

关于扩容云存储文件网关缓存的具体操作,请参见 云存储文件网关缓存扩容。

管理镜像缓存

镜像缓存功能支持将公共云的自定义镜像缓存到云盒本地存储中,后续使用该自定义镜像在云盒中创建ECS实例时,系统会自动使用本地存储的镜像缓存,以加速创建ECS实例。本文介绍如何创建和删除镜像缓存。功能介绍 镜像包含了ECS实例的操作系统...

JindoCache加速OSS透明缓存

JindoCache存储加速系统提供了透明缓存的使用方式,因此作业在访问OSS时无需进行任何修改。一旦作业读取了OSS上的数据,该数据将自动缓存至JindoCache存储加速系统中。之后,访问相同的数据时能够命中缓存,从而提高读取性能。常见问题 ...

JindoCache加速OSS-HDFS透明缓存

JindoCache存储加速系统提供了透明缓存的使用方式,因此作业在访问OSS-HDFS时无需进行任何修改。一旦作业读取了OSS-HDFS上的数据,该数据将自动缓存至JindoCache存储加速系统中。之后,访问相同的数据时能够命中缓存,从而提高读取性能。...

数据服务系统配置

重要 请勿删除作为API缓存数据的Redis实例,否则缓存数据存储将失败且API开启的缓存将失效。单击 保存,完成API缓存数据存储位置的配置。运维监控配置 在 运维监控配置 区域,点击 修改 按钮,配置参数。统计数据存储周期最近:默认是31天...

通过缓存优化性能

每个节点为缓存的元数据保留的磁盘空间(以字节为单位)spark.databricks.io.cache.compression.enabled-缓存的数据是否应以压缩格式存储 INI spark.databricks.io.cache.maxDiskUsage 50g spark.databricks.io.cache.maxMetaDataCache 1g ...

加速PV存储卷数据访问

当使用MEM时,path 所指定的缓存数据存储目录需要设置为内存文件系统,例如,设置一个临时挂载目录,将该目录挂载为Tmpfs文件系统。path JindoFS缓存系统Worker的缓存数据存储目录。为达到最优的数据访问性能,建议使用/dev/shm 或其他挂载...

基本概念

例如,删除绑定存储的NFS文件系统,那么存储包解绑后可以重新绑定SMB文件系统。存储包与支持的文件系统的存储类型相关。例如,删除绑定存储包的容量型文件系统后,解绑的存储包无法绑定到性能型文件系统上。删除绑定存储包的性能型文件...

加速主机目录数据访问

JindoRuntime.spec.tieredstore.levels[*].path JindoFS缓存系统Worker的缓存数据存储目录。为达到最优的数据访问性能,建议使用/dev/shm 或其他挂载了内存文件系统的路径。JindoRuntime.spec.tieredstore.levels[*].quota 单个缓存Worker...

JindoFS介绍和使用

JindoFS提供兼容对象存储的纯客户端模式(SDK)和缓存模式(Cache),以支持与优化Hadoop和Spark生态大数据计算对OSS的访问;提供块存储模式(Block),以充分利用OSS的海量存储能力和优化文件系统元数据的操作。JindoFS纯客户端模式(SDK...

CDN加速和OSS传输加速的区别

对于访问量大的资源,命中率高,访问量小的资源命中率低,节点未缓存的情况下,还是需要回源访问,回源依赖实时的公网回源链路。CDN静态资源的访问,对于上传、删除等动态请求加速效果不明显。OSS传输加速 实现的是客户端到OSS服务端之间...

存储网关

存储网关,是一款可在用户IDC和阿里云上部署的软网关,以阿里云OSS为后端存储,通过低成本的虚拟机服务器,给云上和云下应用提供业界标准的NFS和CIFS文件存储服务。

加速管理概述

CDN加速 由CDN全球广泛分布的边缘节点缓存OSS存储的静态数据,实现客户端从边缘节点直接获取数据的方式来实现访问的加速。静态热点文件的下载加速 音视频点播 网站或应用中小文件 CDN边缘节点全球分布,数量较多。CDN节点提供的服务带宽量...

JindoData版本说明

在JindoFSx存储加速系统上,JindoData 4.4.x版本支持了客户端本地缓存(LocalCache),提供了纯客户端的缓存加速的能力,大幅改进和优化了在元数据缓存上的能力,完善了对阿里云NAS的缓存加速上的支持。在SDK与生态组件方面,大幅提升了多...

添加数据源

说明 在大多数情况下,文件存储 NAS 的NFS协议文件系统挂载后的根目录为/,而SMB协议文件系统挂载后的根目录为/myshare。然而,请注意,在实际操作中,挂载的目录可能会有所不同。因此,请根据您的实际挂载情况进行操作。协议类型 支持的...

RDS MySQL 5.6开放参数一览表

允许值分别为:0:traditional 1:consecutive 2:interleaved innodb_buffer_pool_dump_at_shutdown 5.6 1 OFF[ON|OFF]无限制 指定是否在MySQL服务器关闭时记录InnoDB缓冲池中缓存的页面,以缩短下次重启时的预热过程。通常与innodb_...

挂载NFS协议文件系统(通用型NAS)

在 服务器角色 选项卡下,选择 文件和存储服务>文件和iSCSI服务 下 NFS服务器。在 功能 页签,选择 NFS客户端。重启ECS实例。启动 命令提示符,执行 mount 命令。如果返回以下信息,说明NFS客户端安装成功。步骤二:挂载NFS协议的通用型...

备份本地NAS文件

说明 在大多数情况下,文件存储 NAS 的NFS协议文件系统挂载后的根目录为/,而SMB协议文件系统挂载后的根目录为/myshare。然而,请注意,在实际操作中,挂载的目录可能会有所不同。因此,请根据您的实际挂载情况进行操作。协议类型 支持NFS...

IO加速

RDS PostgreSQL数据库服务端收到用户的SQL查询后,由查询执行器对查询进行处理,其根据查询要访问的数据所在的表空间决定数据存储的位置。在未开启IO加速功能时,所有数据只能存储在云盘上。开启IO加速功能后:如访问的是非临时数据(正常...

文件网关的缓存有什么作用

本文介绍文件网关缓存的作用。本地客户端通过文件网关向OSS上传文件时,数据会先写入文件网关的缓存。当文件完全写入缓存并关闭后,文件网关会将缓存中的文件上传至OSS。如果在上传过程中有新的文件写入缓存,上传过程将会中断,等待文件...

缓存配置

为了提高您CDN节点的缓存命中率,您可以配置静态资源的缓存过期时间和优先级。当资源过期后,资源会自动从CDN节点删除,从源站重新缓存至CDN节点。通过阅读本文,您可以了解资源在CDN上的缓存策略,以及缓存过期时间的配置方法。功能说明 ...

缓存

缓存的机制是根据 appId 和 userId 进行本地缓存,因此在使用缓存前需要使用 MPLogger.setUserId(String userId);方法设置白名单 ID。my.setStorage 将数据存储在本地缓存中指定的 key 中,会覆盖原来该 key 对应的数据。说明 mPaaS 10.1....

管理缓存

警告 扩充缓存的容量时会重新启动云存储网关,请勿在网关上进行任何其他操作。在 缓存 页签中,找到目标缓存盘,单击+。在 扩展缓存 对话框中,设置缓存大小,单击 确定。说明 扩展缓存大小不能超过6 TB,如果您需要超过6 TB的缓存盘,请...

IO加速

功能优势 引入IO加速功能的缓存池拓展后,RDS MySQL的存储结构分为三个层次,能够针对不同的数据存储场景和诉求,充分利用阿里云底座的各种存储介质,实现实例的IO性能提升:提升读写性能,缩短SQL执行耗时 缓存池拓展通过缓存数据读取操作...

通用云盘IO加速功能

功能优势 引入IO加速功能的缓存池拓展后,RDS MySQL的存储结构分为三个层次,能够针对不同的数据存储场景和诉求,充分利用阿里云底座的各种存储介质,实现实例的IO性能提升:提升读写性能,缩短SQL执行耗时 缓存池拓展通过缓存数据读取操作...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储NAS 混合云存储 对象存储 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用