数据缓存概述
对于一些数据量较大的业务数据，例如训练模型等，ECI支持创建数据缓存（DataCache）来提前拉取数据，将数据缓存到本地，以便在创建ECI实例时可以直接挂载使用，从而减少实例启动耗时，避免数据重复下载，节约使用成本。本文为您介绍什么是...
数据缓存概述
对于一些数据量较大的业务数据，例如训练模型等，ECI支持创建数据缓存（DataCache）来提前拉取数据，将数据缓存到本地，以便在创建ECI实例时可以直接挂载使用，从而减少实例启动耗时，避免数据重复下载，节约使用成本。本文为您介绍什么是...
【功能发布】数据缓存
根据使用ECI方式的差异，相关文档参考如下：功能 ECI控制台或OpenAPI Kubernetes集群 创建数据缓存 创建和管理数据缓存 创建和管理DataCache 使用数据缓存 使用数据缓存创建实例 使用DataCache创建Pod 实践教程 数据缓存实践教程 DataCache...
使用数据缓存创建实例
创建数据缓存后，您可以使用数据缓存创建ECI实例，将缓存好的数据直接挂载到ECI实例中，免去拉取数据的等待时间，加速业务启动。本文介绍如何使用数据缓存创建ECI实例。前提条件 已创建数据缓存。具体操作，请参见 创建数据缓存。配置说明 ...
通过Stable Diffusion扩展插件实现文字光影图
本文以部署Stable Diffusion和ControlNet扩展插件实现文字光影效果图为例，演示如何使用数据缓存。通过数据缓存提前拉取Stable Diffusion和ControlNet模型数据，然后在创建Stable Diffusion应用实例时直接挂载模型数据，可以免去在实例中...
使用数据缓存加速部署Stable Diffusion应用
本文以部署HuggingFace上的Stable Diffusion为例，演示如何使用数据缓存。通过数据缓存提前拉取Stable Diffusion相关模型数据，然后在创建Stable Diffusion应用实例时直接挂载模型数据，可以免去在实例中拉取模型数据的等待时间，加速...
JindoFS实战演示
通过JindoFS，您可以完成数据迁移、OSS访问加速、缓存加速、AI训练加速和JindoTable计算加速。本文为您介绍JindoFS实战的详细文档和演示视频。注意 如果视频断链表明该视频已过时，且已被下线。由于产品在不断更新迭代，请以官方控制台操作...
数据缓存计费
本文介绍数据缓存的计费规则，并给出计费示例。计费说明 数据缓存用于提前拉取业务所需的大量数据（例如训练模型等），以便在创建ECI实例时可以直接挂载使用数据。一个数据缓存对应一个快照，创建和使用数据缓存涉及的计费项及其计费规则...
创建和管理数据缓存
数据缓存可以提前拉取业务所需数据，以便在创建ECI实例时可以直接挂载使用。本文介绍数据缓存的配置参数以及如何创建、查询、更新、拷贝和删除数据缓存。创建数据缓存 创建方式如下：OpenAPI：调用CreateDataCache接口可以创建数据缓存。更...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
文档更新动态（2024年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 数据引入-离线集成-离线单条管道-...
JindoCache概述
JindoCache（原JindoFSx）是阿里云EMR提供的用于加速云原生数据湖的一个服务。他提供了数据缓存和元数据缓存等加速功能，并根据...缓存策略 JindoCache支持数据缓存（包括分布式数据缓存、一致性哈希数据缓存和本地缓存）和元数据缓存功能。
数据重排
使用 DISTRIBUTE BY+SORT BY、CLUSTER BY 排序方法进行数据排序前请查看表中数值的分布情况，对列值占比大的列进行重排，存储优化效果会比较好。表数据越大，进行数据重排后，存储优化效果会更好。使用示例 本文将MaxCompute公共数据集TPC-...
CopyDataCache-拷贝数据缓存
将数据缓存从一个地域拷贝到另一个地域。接口说明 数据缓存不支持直接跨地域使用，通过本接口可以将数据缓存从一个地域拷贝到另一个地域。该接口适用于以下场景：需要在多个地域使用数据缓存，在 A 地域已有数据缓存的情况，可以通过本接口...
Jindo CLI支持操作JindoFSx命令
Jindo CLI支持操作JindoFSx数据缓存、元数据缓存和统一命名空间等命令。前提条件 已在E-MapReduce上创建EMR-3.42.0及后续版本、EMR-5.6.0及后续版本的集群，具体操作请参见 创建集群。当数据源为OSS、OSS-HDFS、Apache HDFS、NAS时，请先...
在边缘场景无缝运行使用InClusterConfig的业务Pod
开启edge-hub的数据缓存能力 说明 因为数据缓存在本地磁盘，所以不推荐为有大量list/watch请求的Pod开启数据缓存。开启edge-hub的数据缓存能力后，必须重启对应的业务Pod。获取User-Agent信息。User-Agent一般为业务容器的启动命令。api...
DescribeDataCaches-查询数据缓存
查询数据缓存信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，...
CreateDataCache-创建数据缓存
创建一个数据缓存。接口说明 创建镜像缓存涉及资源计费。建议您提前了解相关计费信息。更多信息，请参见 数据缓存计费。创建镜像缓存前，您需要评估待缓存数据的大小，如果数据大小超过设置的缓存大小，将会创建失败。创建数据缓存时，系统...
计费概述
镜像缓存计费 数据缓存 创建数据缓存：需支付临时资源费用和快照费用。使用数据缓存：需要额外支付云盘费用。数据缓存计费 临时存储空间 创建ECI实例时，如果增加了临时存储空间大小，需为其付费。临时存储空间计费 说明 查看账单时，ECI...
JindoCache CLI使用说明
示例：jindocache-refreshCacheSet/path/cacheset.xml load 数据缓存命令，包括元数据缓存命令和数据缓存命令。命令格式为 jindocache-load[-meta][-data][-s][-m][-R][-replica value]。元数据缓存：功能说明：元数据缓存命令可以备份远端...
DeleteDataCache-删除数据缓存
删除一个数据缓存。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，...
如何使用数据缓存加速文件备份？
云备份 本地文件备份客户端已经默认为您开启了利用数据缓存加速文件备份的功能。数据缓存用来加速文件备份并通过磁盘空间交换文件备份的内存开销，不影响本机或异机恢复。本文介绍优化数据缓存配置的操作方法。前提条件 已成功安装 云备份 ...
Quick BI仪表板查询条件多选默认值是缓存吗？
解决方案 查询条件多选默认值是从10000条后台缓存数据中取出的1000条数据，这个缓存是仪表板图表在打开时从数据库中查询的10000条数据，并将这10000条数据缓存在后台；每次打开查询条件的这个字段，都会从缓存中取出1000条数据默认展示在...
数据缓存亲和性调度优化
通过Fluid提供的数据缓存亲和性调度优化能力，您可以设置应用Pod上的亲和性配置，让应用Pod优先访问同节点、同可用区节点或同地域节点的缓存数据，从而提高应用Pod访问数据的效率。使用限制 数据缓存亲和性调度优化功能仅支持在 ACK集群Pro...
备份占用过多磁盘和内存空间解决方案
为了提高数据备份效率，防勒索服务备份数据时，默认会消耗服务器的内存并占用磁盘空间进行数据缓存备份。如果服务器中防勒索备份数据缓存的目录下的文件占用了较大的磁盘空间，或者服务器出现OOM（Out of Memory）问题，可能会导致备份任务...
缓存
缓存WVStorage的JS API提供数据缓存相关能力，例如添加缓存、删除缓存、清空缓存等。WVStorage.setItem 说明 该API只在Windvane Android 1.0.3.4以上版本有效 将数据存储在本地缓存中指定的key中。输入参数[string]key：缓存的key值。...
SmartData数据读取异常修复公告
缺陷发生现象：如果集群启用JindoFS Cache模式（即设置数据缓存参数 jfs.cache.data-cache.enable 为 true）或者使用了JindoFS Block模式（Block模式默认启用缓存），则数据缓存会出现小概率数据污染的情况，从而导致作业读取数据时报错。...
UpdateDataCache-更新数据缓存
更新一个数据缓存。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
配置流引擎的宽表连接器
时空参数 参数 默认值 是否必填 说明 cacheTTLMs-1 否 数据缓存（Cache）的过期时间。单位为毫秒，默认值为-1，表示不产生数据缓存。数据缓存过期之后，执行下一次查询时会重建时空索引。geomHint 无 否 指定的时空Lookup Join查询，格式为...
典型慢查询
在使用Hash方式进行Join时，AnalyticDB MySQL 会把某张表的数据缓存到内存中。如果被缓存的表较大，就会占用较多内存。Stage中有SORT操作。在执行数据排序时，AnalyticDB MySQL 会把数据缓存到内存中。如果需要排序的数据量较大，就会占用...
数据缓存
本文介绍 云数据库 SelectDB 版 中湖仓一体相关的数据缓存功能（File Cache），帮助您对外部数据源进行高效的联邦分析。概述 File Cache通过缓存最近访问的远端存储系统（HDFS或对象存储）的数据文件，可加速后续访问相同数据的查询。在...
SmartData 3.6.x版本简介
特性 描述 JindoSDK支持本地缓存（Local）策略 JindoSDK支持本地缓存策略，使得在未部署SmartData服务的情况下，也能支持本地数据缓存，提高OSS数据的访问效率。JindoSDK支持和FileSystem平级的Object Store API JindoSDK在已有FileSystem...
ECI自定义事件
数据缓存相关事件 事件名称（reason）事件类型 事件信息（message）事件说明 DataCacheProxyCreateFailed Warning The proxy of dataCache create failed for%s,please check it again 数据缓存创建失败。请检查配置。...
功能概览
功能概览 1.产品优势 1.1 稳定性 脱胎于阿里内部实时传输系统，...2.3 数据缓存 灵活的缓存时间，下游可重复消费，自动多备份，保障数据高可靠性。2.4 多种接口 既有适合人交互的Web控制台，也有适合程序交互的API和SDK，满足各种使用需求。
配置流引擎的时空宽表连接器
参数 默认值 说明 cacheTTLMs-1 数据缓存（Cache）的过期时间。单位为毫秒，默认值为-1，表示不产生数据缓存。数据缓存过期之后，执行下一次查询时会重建时空索引。geomHint 无 指定的时空Lookup Join查询，格式为<columnName>:，例如 ...
Quick BI数据集和仪表板数据显示不一致
在数据源执行脚本查看结果集和数据集显示的数据保持一致之后，如果使用的是PostgreSQL则还有可能由于在加速名单中数据会缓存一天导致数据更新有延迟。（Quick BI后续会提供主动清理加速缓存，目前需要联系智能客服进行手动清理）,如果是...
产品架构
云数据库SelectDB版 集群会将热数据缓存到本地，从而加速响应大量重复的SQL请求，遇到没命中缓存的SQL请求，云数据库SelectDB版 集群会从对象存储查询获取结果后再响应。存储 云数据库SelectDB版 存储，支持存算分离架构，多计算集群共享...
数据加速Fluid概述
数据弹性与调度：将数据缓存技术和弹性扩缩容、数据亲和性调度能力相结合，提高数据访问性能。运行时平台无关：支持原生、边缘、Serverless Kubernetes集群、Kubernetes多集群等多样化环境，适用于混合云场景。Fluid重要概念 Dataset：数据...
网络资源
数据缓存：对于网络闪断导致的数据传输中断，可以使用数据缓存机制，将数据暂时缓存起来，并在网络恢复后进行重传，确保数据传输的完整性和准确性。重新建连：系统服务要具备重新建立连接的能力，网络闪断后可自动重新建立新连接，恢复通信...
- 产品推荐
- 这些文档可能帮助您