数据缓存概述

对于一些数据量较大的业务数据,例如训练模型等,ECI支持创建数据缓存(DataCache)来提前拉取数据,将数据缓存到本地,以便在创建ECI实例时可以直接挂载使用,从而减少实例启动耗时,避免数据重复下载,节约使用成本。本文为您介绍什么是...

数据缓存概述

对于一些数据量较大的业务数据,例如训练模型等,ECI支持创建数据缓存(DataCache)来提前拉取数据,将数据缓存到本地,以便在创建ECI实例时可以直接挂载使用,从而减少实例启动耗时,避免数据重复下载,节约使用成本。本文为您介绍什么是...

【功能发布】数据缓存

根据使用ECI方式的差异,相关文档参考如下:功能 ECI控制台或OpenAPI Kubernetes集群 创建数据缓存 创建和管理数据缓存 创建和管理DataCache 使用数据缓存 使用数据缓存创建实例 使用DataCache创建Pod 实践教程 数据缓存实践教程 DataCache...

数据缓存计费

本文介绍数据缓存的计费规则,并给出计费示例。计费说明 数据缓存用于提前拉取业务所需的大量数据(例如训练模型等),以便在创建ECI实例时可以直接挂载使用数据。一个数据缓存对应一个快照,创建和使用数据缓存涉及的计费项及其计费规则...

使用数据缓存创建实例

创建数据缓存后,您可以使用数据缓存创建ECI实例,将缓存好的数据直接挂载到ECI实例中,免去拉取数据的等待时间,加速业务启动。本文介绍如何使用数据缓存创建ECI实例。前提条件 已创建数据缓存。具体操作,请参见 创建数据缓存。配置说明 ...

创建和管理数据缓存

数据缓存可以提前拉取业务所需数据,以便在创建ECI实例时可以直接挂载使用。本文介绍数据缓存的配置参数以及如何创建、查询、更新、拷贝和删除数据缓存。创建数据缓存 创建方式如下:OpenAPI:调用CreateDataCache接口可以创建数据缓存。更...

通过Stable Diffusion扩展插件实现文字光影图

本文以部署Stable Diffusion和ControlNet扩展插件实现文字光影效果图为例,演示如何使用数据缓存。通过数据缓存提前拉取Stable Diffusion和ControlNet模型数据,然后在创建Stable Diffusion应用实例时直接挂载模型数据,可以免去在实例中...

JindoCache概述

JindoCache(原JindoFSx)是阿里云EMR提供的用于加速云原生数据湖的一个服务。他提供了数据缓存和元数据缓存等加速功能,并根据...缓存策略 JindoCache支持数据缓存(包括分布式数据缓存、一致性哈希数据缓存和本地缓存)和元数据缓存功能。

API概览

数据缓存 API 标题 API概述 CreateDataCache 创建数据缓存 创建一个数据缓存。DescribeDataCaches 查询数据缓存 查询数据缓存信息。UpdateDataCache 更新数据缓存 更新一个数据缓存。CopyDataCache 拷贝数据缓存数据缓存从一个地域拷贝...

部署通义千问应用

本文以部署ModelScope社区的通义千问-7B-Chat模型为例,演示如何使用数据缓存。通过数据缓存提前拉取通义千问-7B-Chat模型数据,然后在创建通义千问的应用实例时直接挂载模型数据,可以免去在实例中拉取模型数据的等待时间,加速应用部署。...

搭建类似妙鸭相机的应用

本文以部署ModelScope社区的人物AIGC基础模型(ly261666/cv_portrait_model)搭建类似妙鸭相机的应用为例,演示如何使用数据缓存。通过数据缓存提前拉取模型数据,然后在创建应用实例时直接挂载模型数据,可以免去在实例中拉取模型数据的...

CopyDataCache-拷贝数据缓存

数据缓存从一个地域拷贝到另一个地域。接口说明 数据缓存不支持直接跨地域使用,通过本接口可以将数据缓存从一个地域拷贝到另一个地域。该接口适用于以下场景:需要在多个地域使用数据缓存,在 A 地域已有数据缓存的情况,可以通过本接口...

Jindo CLI支持操作JindoFSx命令

Jindo CLI支持操作JindoFSx数据缓存、元数据缓存和统一命名空间等命令。前提条件 已在E-MapReduce上创建EMR-3.42.0及后续版本、EMR-5.6.0及后续版本的集群,具体操作请参见 创建集群。当数据源为OSS、OSS-HDFS、Apache HDFS、NAS时,请先...

搭建Alpaca-LoRa

本文以搭建Alpaca-LoRa为例,演示如何使用数据缓存。通过数据缓存提前拉取llama-7b-hf模型数据和alpaca-lora-7b权重数据,然后在创建Alpaca-LoRa应用实例时直接挂载模型和权重数据,可以免去在实例中拉取数据的等待时间,加速Apache-LoRa...

在边缘场景无缝运行使用InClusterConfig的业务Pod

开启edge-hub的数据缓存能力 说明 因为数据缓存在本地磁盘,所以不推荐为有大量list/watch请求的Pod开启数据缓存。开启edge-hub的数据缓存能力后,必须重启对应的业务Pod。获取User-Agent信息。User-Agent一般为业务容器的启动命令。api...

使用数据缓存加速部署Stable Diffusion应用

本文以部署HuggingFace上的Stable Diffusion为例,演示如何使用数据缓存。通过数据缓存提前拉取Stable Diffusion相关模型数据,然后在创建Stable Diffusion应用实例时直接挂载模型数据,可以免去在实例中拉取模型数据的等待时间,加速...

DescribeDataCaches-查询数据缓存

查询数据缓存信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,...

CreateDataCache-创建数据缓存

创建一个数据缓存。接口说明 创建镜像缓存涉及资源计费。建议您提前了解相关计费信息。更多信息,请参见 数据缓存计费。创建镜像缓存前,您需要评估待缓存数据的大小,如果数据大小超过设置的缓存大小,将会创建失败。创建数据缓存时,系统...

JindoCache CLI使用说明

示例:jindocache-refreshCacheSet/path/cacheset.xml load 数据缓存命令,包括元数据缓存命令和数据缓存命令。命令格式为 jindocache-load[-meta][-data][-s][-m][-R][-replica value]。元数据缓存:功能说明:元数据缓存命令可以备份远端...

DeleteDataCache-删除数据缓存

删除一个数据缓存。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,...

如何使用数据缓存加速文件备份?

云备份 本地文件备份客户端已经默认为您开启了利用数据缓存加速文件备份的功能。数据缓存用来加速文件备份并通过磁盘空间交换文件备份的内存开销,不影响本机或异机恢复。本文介绍优化数据缓存配置的操作方法。前提条件 已成功安装 云备份 ...

Quick BI仪表板查询条件多选默认值是缓存吗?

解决方案 查询条件多选默认值是从10000条后台缓存数据中取出的1000条数据,这个缓存是仪表板图表在打开时从数据库中查询的10000条数据,并将这10000条数据缓存在后台;每次打开查询条件的这个字段,都会从缓存中取出1000条数据默认展示在...

数据缓存亲和性调度优化

通过Fluid提供的数据缓存亲和性调度优化能力,您可以设置应用Pod上的亲和性配置,让应用Pod优先访问同节点、同可用区节点或同地域节点的缓存数据,从而提高应用Pod访问数据的效率。使用限制 数据缓存亲和性调度优化功能仅支持在 ACK集群Pro...

备份占用过多磁盘和内存空间解决方案

为了提高数据备份效率,防勒索服务备份数据时,默认会消耗服务器的内存并占用磁盘空间进行数据缓存备份。如果服务器中防勒索备份数据缓存的目录下的文件占用了较大的磁盘空间,或者服务器出现OOM(Out of Memory)问题,可能会导致备份任务...

缓存

缓存WVStorage的JS API提供数据缓存相关能力,例如添加缓存、删除缓存、清空缓存等。WVStorage.setItem 说明 该API只在Windvane Android 1.0.3.4以上版本有效 将数据存储在本地缓存中指定的key中。输入参数[string]key:缓存的key值。...

SmartData数据读取异常修复公告

缺陷发生现象:如果集群启用JindoFS Cache模式(即设置数据缓存参数 jfs.cache.data-cache.enable 为 true)或者使用了JindoFS Block模式(Block模式默认启用缓存),则数据缓存会出现小概率数据污染的情况,从而导致作业读取数据时报错。...

Apache HDFS透明缓存加速

Apache HDFS透明缓存加速可以利用计算集群的闲置存储资源对远端HDFS集群进行数据缓存,避免了计算集群或服务占用核心集群过多带宽。当HDFS集群和计算集群分离,HDFS集群访问性能不及预期时,您可以通过在计算集群或靠近计算集群的地方缓存...

UpdateDataCache-更新数据缓存

更新一个数据缓存。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...

配置流引擎的宽表连接器

时空参数 参数 默认值 是否必填 说明 cacheTTLMs-1 否 数据缓存(Cache)的过期时间。单位为毫秒,默认值为-1,表示不产生数据缓存数据缓存过期之后,执行下一次查询时会重建时空索引。geomHint 无 否 指定的时空Lookup Join查询,格式为...

典型慢查询

在使用Hash方式进行Join时,AnalyticDB MySQL 会把某张表的数据缓存到内存中。如果被缓存的表较大,就会占用较多内存。Stage中有SORT操作。在执行数据排序时,AnalyticDB MySQL 会把数据缓存到内存中。如果需要排序的数据量较大,就会占用...

数据缓存

本文介绍 云数据库 SelectDB 版 中湖仓一体相关的数据缓存功能(File Cache),帮助您对外部数据源进行高效的联邦分析。概述 File Cache通过缓存最近访问的远端存储系统(HDFS或对象存储)的数据文件,可加速后续访问相同数据的查询。在...

SmartData 3.6.x版本简介

特性 描述 JindoSDK支持本地缓存(Local)策略 JindoSDK支持本地缓存策略,使得在未部署SmartData服务的情况下,也能支持本地数据缓存,提高OSS数据的访问效率。JindoSDK支持和FileSystem平级的Object Store API JindoSDK在已有FileSystem...

功能概览

功能概览 1.产品优势 1.1 稳定性 脱胎于阿里内部实时传输系统,...2.3 数据缓存 灵活的缓存时间,下游可重复消费,自动多备份,保障数据高可靠性。2.4 多种接口 既有适合人交互的Web控制台,也有适合程序交互的API和SDK,满足各种使用需求。

配置流引擎的时空宽表连接器

参数 默认值 说明 cacheTTLMs-1 数据缓存(Cache)的过期时间。单位为毫秒,默认值为-1,表示不产生数据缓存数据缓存过期之后,执行下一次查询时会重建时空索引。geomHint 无 指定的时空Lookup Join查询,格式为<columnName>:,例如 ...

JindoFSx P2P分布式下载配置指南

fs.jindofsx.data.cache.enable 数据缓存开关:false(默认值):禁用数据缓存。true:启用数据缓存。保存配置。单击 服务配置 区域的 保存。在 确认修改 对话框中,输入执行原因,开启 自动更新配置,单击 确定。步骤三:使用方法 按上述...

Quick BI数据集和仪表板数据显示不一致

数据源执行脚本查看结果集和数据集显示的数据保持一致之后,如果使用的是PostgreSQL则还有可能由于在加速名单中数据缓存一天导致数据更新有延迟。(Quick BI后续会提供主动清理加速缓存,目前需要联系智能客服进行手动清理),如果是...

阿里云OSS/OSS-HDFS服务透明缓存加速

是 fs.jindofsx.data.cache.enable 数据缓存开关:false(默认值):禁用数据缓存。true:启用数据缓存。配置AccessKey 是 fs.oss.accessKeyId OSS/OSS-HDFS的AccessKey ID。fs.oss.accessKeySecret OSS/OSS-HDFS的AccessKey Secret。fs....

产品架构

云数据库SelectDB版 集群会将热数据缓存到本地,从而加速响应大量重复的SQL请求,遇到没命中缓存的SQL请求,云数据库SelectDB版 集群会从对象存储查询获取结果后再响应。存储 云数据库SelectDB版 存储,支持存算分离架构,多计算集群共享...

数据加速Fluid概述

数据弹性与调度:将数据缓存技术和弹性扩缩容、数据亲和性调度能力相结合,提高数据访问性能。运行时平台无关:支持原生、边缘、Serverless Kubernetes集群、Kubernetes多集群等多样化环境,适用于混合云场景。Fluid重要概念 Dataset:数据...

管理协议服务

缓存型相比通用型,提供热点数据缓存能力。在命中缓存的情况下,缓存型协议服务的带宽可超过CPFS文件系统的带宽,达到协议服务设定的最大带宽值。通用型:为CPFS提供NFS协议访问能力和 目录级挂载点,用户无需配置POSIX客户端管理集群。该...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 数据传输服务 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用