使用数据缓存加速部署Stable Diffusion应用
通过数据缓存提前拉取Stable Diffusion相关模型数据，然后在创建Stable Diffusion应用实例时直接挂载模型数据，可以免去在实例中拉取模型数据的等待时间，加速Stable Diffusion应用部署。背景信息 Stable Diffusion是一个可以根据文字描述...
数据缓存亲和性调度优化
通过Fluid提供的数据缓存亲和性调度优化能力，您可以设置应用Pod上的亲和性配置，让应用Pod优先访问同节点、同可用区节点或同地域节点的缓存数据，从而提高应用Pod访问数据的效率。使用限制 数据缓存亲和性调度优化功能仅支持在 ACK集群Pro...
搭建类似妙鸭相机的应用
主要优化点如下：将模型数据放入ECI数据缓存中，应用启动后无需从模型Hub下载模型。支持人脸记忆，训练流程支持给人脸打标签，推理时支持通过标签选择历史训练过的人脸进行生成。新增环境变量配置项（详见 env.py 文件），无需修改应用代码...
加速Job应用数据访问
本文介绍如何使用缓存模式加速Job应用数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及以上。具体操作，请参见 创建ACK Pro版集群。重要 ack-fluid组件暂不支持在ContainerOS操作系统上使用。已...
加速在线应用数据访问
本文介绍如何使用无缓存模式加速在线应用数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及以上。具体操作，请参见 创建ACK Pro版集群。重要 ack-fluid组件暂不支持在ContainerOS操作系统上使用。...
加速在线应用数据访问
本文介绍如何使用缓存模式加速在线应用数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及以上。具体操作，请参见 创建ACK Pro版集群。重要 ack-fluid组件暂不支持在ContainerOS操作系统上使用。已...
数据缓存概述
在创建业务应用前，您可以提前创建数据缓存，将业务应用所需的数据缓存到本地。在创建业务应用时，可以直接挂载使用缓存好的数据。通过数据缓存功能，您无需将数据打包进应用镜像，从而避免因数据变更而频繁更新镜像；也无需从远端的仓库...
数据缓存概述
在创建业务应用前，您可以提前创建数据缓存，将业务应用所需的数据缓存到本地。在创建业务应用时，可以直接挂载使用缓存好的数据。通过数据缓存功能，您无需将数据打包进应用镜像，从而避免因数据变更而频繁更新镜像；也无需从远端的仓库...
搭建Alpaca-LoRa
通过数据缓存提前拉取llama-7b-hf模型数据和alpaca-lora-7b权重数据，然后在创建Alpaca-LoRa应用实例时直接挂载模型和权重数据，可以免去在实例中拉取数据的等待时间，加速Apache-LoRa启动过程。背景信息 Alpaca-LoRa是一种使用Lora技术在...
加速PV存储卷数据访问
（可选）步骤三：创建DataLoad执行缓存预热 由于首次访问无法命中数据缓存，应用Pod的数据访问效率可能较低，Fluid提供了DataLoad缓存预热操作提升首次数据访问的效率。创建 dataload.yaml 文件，代码示例如下。apiVersion:data.fluid.io/v...
健康检查及自动恢复
这里通过一个case来描述平台具备的健康检查能力，假设我们有一个停车管理应用，他是由3个节点组成（tomcat节点提供Web服务及业务逻辑，mysql节点用于存储数据，redis节点用于缓存数据）应用配置的具体操作请参见 应用配置 将这份应用配置...
部署通义千问应用
通过数据缓存提前拉取通义千问-7B-Chat模型数据，然后在创建通义千问的应用实例时直接挂载模型数据，可以免去在实例中拉取模型数据的等待时间，加速应用部署。背景信息 通义千问-7B（Qwen-7B）是阿里云研发的通义千问大模型系列的70亿参数...
搭建类似妙鸭相机的应用
本文以部署ModelScope社区的人物AIGC基础模型（ly261666/cv_portrait_model）搭建类似妙鸭相机的应用为例，演示如何使用数据缓存。通过数据缓存提前拉取模型数据，然后在创建应用实例时直接挂载模型数据，可以免去在实例中拉取模型数据的...
部署通义千问应用
通过DataCache提前拉取通义千问-7B-Chat模型数据，然后在创建通义千问的应用Pod时直接挂载模型数据，可以免去在Pod中拉取模型数据的等待时间，加速应用部署。背景信息 通义千问-7B（Qwen-7B）是阿里云研发的通义千问大模型系列的70亿参数...
【功能发布】数据缓存
在创建业务应用前，您可以提前创建数据缓存，将业务应用所需的数据缓存到本地。在创建业务应用时，可以直接挂载使用缓存好的数据。通过数据缓存功能，您无需将数据打包进应用镜像，从而避免因数据变更而频繁更新镜像；也无需从远端的仓库...
数据服务系统配置
适用于个别API需要开启缓存且数据量很少的场景 说明 数据缓存时间将统一获取Dataphin应用部署时设置的内存数据缓存时间，创建API时定义的缓存时间将不生效。指定redis实例：将缓存数据存储到指定的Redis，适用于大量API开启缓存，缓存数据...
RDS MySQL修改字符集（平滑方案）
安全模式：预检查阶段会解析文件并将SQL或CSV数据缓存入库，执行时再从缓存库中读出来执行到指定的目标库。该模式安全性较好，但是执行时效相比极速模式要低。文件类型 选中导入数据的文件类型。SQL脚本：安全协同模式下，默认仅放开INSERT...
数据缓存计费
本文介绍数据缓存的计费规则，并给出计费示例。计费说明 数据缓存用于提前拉取业务所需的大量数据（例如训练模型等），以便在创建ECI实例时可以直接挂载使用数据。一个数据缓存对应一个快照，创建和使用数据缓存涉及的计费项及其计费规则...
使用数据缓存创建实例
创建数据缓存后，您可以使用数据缓存创建ECI实例，将缓存好的数据直接挂载到ECI实例中，免去拉取数据的等待时间，加速业务启动。本文介绍如何使用数据缓存创建ECI实例。前提条件 已创建数据缓存。具体操作，请参见 创建数据缓存。配置说明 ...
创建和管理数据缓存
数据缓存可以提前拉取业务所需数据，以便在创建ECI实例时可以直接挂载使用。本文介绍数据缓存的配置参数以及如何创建、查询、更新、拷贝和删除数据缓存。创建数据缓存 创建方式如下：OpenAPI：调用CreateDataCache接口可以创建数据缓存。更...
应用场景
数据传输服务DTS（Data Transmission Service）支持数据迁移、数据订阅和数据实时同步功能，帮助您实现多种典型应用场景。不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入...
API概览
数据缓存 API 标题 API概述 CreateDataCache 创建数据缓存 创建一个数据缓存。DescribeDataCaches 查询数据缓存 查询数据缓存信息。UpdateDataCache 更新数据缓存 更新一个数据缓存。CopyDataCache 拷贝数据缓存 将数据缓存从一个地域拷贝...
JindoCache概述
JindoCache（原JindoFSx）是阿里云EMR提供的用于加速云原生数据湖的一个服务。他提供了数据缓存和元数据缓存等加速功能，并根据...缓存策略 JindoCache支持数据缓存（包括分布式数据缓存、一致性哈希数据缓存和本地缓存）和元数据缓存功能。
准备工作概述
OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...
SDK简介
通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报...
CopyDataCache-拷贝数据缓存
将数据缓存从一个地域拷贝到另一个地域。接口说明 数据缓存不支持直接跨地域使用，通过本接口可以将数据缓存从一个地域拷贝到另一个地域。该接口适用于以下场景：需要在多个地域使用数据缓存，在 A 地域已有数据缓存的情况，可以通过本接口...
开始监控除Java之外的应用
通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报Node.js应用数据 通过SkyWalking上报Node.js应用数据 接入Node.js应用.NET应用 通过OpenTelemetry上报.NET应用数据 通过Jaeger上报.NET...
Jindo CLI支持操作JindoFSx命令
Jindo CLI支持操作JindoFSx数据缓存、元数据缓存和统一命名空间等命令。前提条件 已在E-MapReduce上创建EMR-3.42.0及后续版本、EMR-5.6.0及后续版本的集群，具体操作请参见 创建集群。当数据源为OSS、OSS-HDFS、Apache HDFS、NAS时，请先...
快速上手可观测链路 OpenTelemetry 版
OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...
DescribeDataCaches-查询数据缓存
查询数据缓存信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，...
CreateDataCache-创建数据缓存
创建一个数据缓存。接口说明 创建镜像缓存涉及资源计费。建议您提前了解相关计费信息。更多信息，请参见 数据缓存计费。创建镜像缓存前，您需要评估待缓存数据的大小，如果数据大小超过设置的缓存大小，将会创建失败。创建数据缓存时，系统...
JindoCache CLI使用说明
示例：jindocache-refreshCacheSet/path/cacheset.xml load 数据缓存命令，包括元数据缓存命令和数据缓存命令。命令格式为 jindocache-load[-meta][-data][-s][-m][-R][-replica value]。元数据缓存：功能说明：元数据缓存命令可以备份远端...
DeleteDataCache-删除数据缓存
删除一个数据缓存。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，...
接入指南
通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报...
如何使用数据缓存加速文件备份？
云备份 本地文件备份客户端已经默认为您开启了利用数据缓存加速文件备份的功能。数据缓存用来加速文件备份并通过磁盘空间交换文件备份的内存开销，不影响本机或异机恢复。本文介绍优化数据缓存配置的操作方法。前提条件 已成功安装 云备份 ...
NAS存储卷概述
并行计算场景加速数据读取 利用计算节点的内存构建分布式数据缓存池，缓存池可随计算规模自动扩缩容，实现对NAS存储卷中热数据的访问加速。在AI训练、生命计算等场景推荐开启。具体操作，请参见 开启CNFS NAS计算端分布式缓存。持久化应用...
Quick BI仪表板查询条件多选默认值是缓存吗？
解决方案 查询条件多选默认值是从10000条后台缓存数据中取出的1000条数据，这个缓存是仪表板图表在打开时从数据库中查询的10000条数据，并将这10000条数据缓存在后台；每次打开查询条件的这个字段，都会从缓存中取出1000条数据默认展示在...
备份占用过多磁盘和内存空间解决方案
为了提高数据备份效率，防勒索服务备份数据时，默认会消耗服务器的内存并占用磁盘空间进行数据缓存备份。如果服务器中防勒索备份数据缓存的目录下的文件占用了较大的磁盘空间，或者服务器出现OOM（Out of Memory）问题，可能会导致备份任务...
加速主机目录数据访问
（可选）步骤三：创建DataLoad执行缓存预热 由于首次访问无法命中数据缓存，可能导致应用Pod的数据访问效率较低。Fluid提供了DataLoad缓存预热操作提升首次数据访问的效率。创建 dataload.yaml 文件，代码示例如下。apiVersion:data.fluid....
SmartData数据读取异常修复公告
缺陷发生现象：如果集群启用JindoFS Cache模式（即设置数据缓存参数 jfs.cache.data-cache.enable 为 true）或者使用了JindoFS Block模式（Block模式默认启用缓存），则数据缓存会出现小概率数据污染的情况，从而导致作业读取数据时报错。...
- 产品推荐
- 这些文档可能帮助您