OSS存储读写分离最佳实践
max_stat_cache_size 用于指定文件元数据的缓存空间可缓存多少个文件的元数据。单位为个，默认值为1000。如需禁止使用元数据缓存，可设置为0。在不需要实时访问最新内容的场景下，当目录下文件比较多时，可以根据实例规格增加支持的缓存...
在云控制台上使用文件网关
如果文件写入后长时间不会修改，可以考虑使用标准类型或者低频类型的存储桶，然后以生命周期的方式修改文件的存储类型到归档类型或者冷归档类型，减少不必要的解冻动作，这种方案从成本以及效率的角度来看都更优于其他方案。步骤一：创建...
主机间（不同账号）迁移网站
如果您的网站当前所在云虚拟主机不支持升级到目标云虚拟主机，且网站当前所在的云虚拟主机与目标云虚拟主机不归属于同一阿里云账号，请参考本文操作进行主机间的网站迁移。前提条件 原主机与目标主机都是阿里云云虚拟主机，且两个主机在...
SmartData常见问题
对比项 JindoFS Alluxio 相同点 JindoFS缓存模式在技术架构上与Alluxio类似，都提供对OSS的缓存加速能力，支持Master+Workers形式，Master维护缓存块的位置信息，Workers提供缓存块的管理和读写能力。不同点 JindoFS不需要挂载，可以直接...
JindoData版本说明
在JindoFSx存储加速系统上，JindoData 4.4.x版本支持了客户端本地缓存（LocalCache），提供了纯客户端的缓存加速的能力，大幅改进和优化了在元数据缓存上的能力，完善了对阿里云NAS的缓存加速上的支持。在SDK与生态组件方面，大幅提升了多...
配置Range回源
背景信息 Range回源是指客户端通知源站服务器只返回指定范围内的部分内容，有利于音视频等较大文件的内容分发。说明 配置Range回源之前，需要源站支持Range请求，即HTTP请求头中包含Range字段，并且源站能够响应正确的206文件分片。Range回...
由于日志文件过多导致集群存储空间被占满的解决办法
但由于存在Redo文件缓存池，通常Redo会占用2~11 GB左右的空间，最多时会占用11 GB，其中包括缓冲池中的8个Redo日志（8 GB）、正在写的Redo日志（1 GB）、提前创建的Redo日志（1 GB）以及最后一个Redo日志（1 GB）。您可以通过参数 loose_...
配置Range回源
例如，Range:bytes=0-100 表示回源请求该文件的前101个字节的数据内容。开启Range回源功能后，DCDN 收到用户的请求时，如果 DCDN 节点上未缓存该资源或资源已过期，DCDN 节点回源会采用Range请求，从源站分段获取用户需要的部分资源并缓存...
常见问题
553 could not create file 使用FTP下载文件时出现中断 脚本文件上传后无法执行 文件上传后的最近修改时间显示错误 使用FTP客户端传输文件到云虚拟主机速度缓慢的解决方法 不同的FTP客户端显示隐藏文件的方法 网站迁移异常 ThinkPHP程序...
Jindo CLI支持操作JindoFSx命令
R：递归缓存文件，当 path 是文件夹时需开启。m：加载数据到内存。path 数据缓存路径。建议使用以下组合命令。jindo fs-load-data-s-R元数据缓存命令 元数据缓存命令可以备份远端文件的元数据信息，从而后续无需从OSS等后端读取文件元数据...
搭建TensorFlow
创建镜像缓存的YAML文件。示例imagecache.yaml的内容如下：说明 如果您的集群属于华东1（杭州）地域，建议通过镜像私网地址拉取镜像，如果您的集群属于其他地域，可参考示例通过镜像公网地址拉取镜像，apiVersion:eci.alibabacloud....
进阶功能
示例如下：var map={"mMaxSizeMB":_mMaxSizeMBController.text,/缓存目录的最大占用空间"mMaxDurationS":_mMaxDurationSController.text,/设置能够缓存的单个文件的最大时长"mDir":_mDirController.text,/缓存目录"mEnable":...
DCDN边缘函数在降低流量成本场景下的网页优化实践
应用场景 对于网站的JavaScript、CSS文件，一旦开发完成，那么在下一个版本上线前，这些文件是不会随着访问设备、时间等因素的变化而变化的。在版本发布后，任意一次用户请求所需要访问的内容均相同，因此便可将这些静态资源部署在边缘存储...
使用ECI运行TensorFlow任务
创建镜像缓存的YAML文件。示例imagecache.yaml的内容如下：说明 如果您的集群属于华东1（杭州）地域，建议通过镜像私网地址拉取镜像，如果您的集群属于其他地域，可参考示例通过镜像公网地址拉取镜像，apiVersion:eci.alibabacloud....
配置状态码过期时间
典型场景 文件A在源站已被删除，但客户端仍持续访问，CDN节点没有缓存文件A，所有针对文件A的请求都将被转发回源，由源站响应4xx状态码，这将会大幅增加源站的压力。如果CDN节点上配置了缓存4xx状态码，那么CDN节点针对文件A的请求首次回源...
ECS实例挂载同一NFS文件系统出现数据不同步的情况
问题原因 该现象与mount的选项和 tail-f 命令的实现相关：挂载使用的mount命令为：mount-t nfs4/mnt/，对于在ECS B实例上以这一方式挂载的NFS文件系统，默认情况下Kernel对文件和目录的属性维护了一份metadata缓存，文件和目录属性（包括...
通过本地缓存或预加载降低卡顿
使用限制 仅支持MP4、MP3、FLV、HLS（单码率视频流）等单个媒体文件的预加载。预加载仅支持UrlSource播放方式播放视频，暂不支持VidAuth、VidSts方式播放视频。使用本地缓存提升播放体验 原理说明 阿里云播放器SDK提供的本地缓存的功能通过...
使用本地缓存或预加载提升播放体验
使用限制 仅支持MP4、MP3、FLV、HLS（单码率视频流）等单个媒体文件的预加载。预加载仅支持UrlSource播放方式播放视频，暂不支持VidAuth、VidSts方式播放视频。使用本地缓存提升播放体验 原理说明 阿里云播放器SDK提供的本地缓存的功能通过...
常见问题
show cache_stats 展示缓存信息，包含缓存文件路径、文件数量、缓存空间大小、保留天数、命中和不命中次数统计。show archive 展示数据库内部的TTL绑定情况，包含TTL表和归档表信息。show files from {table_name} 展示归档表下，所有表...
文件存储HDFS版
文件存储 HDFS 版（Apsara File Storage for HDFS）是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户，进行海量数据存储和离线计算的业务场景，充分满足以...
为什么文件签名URL过期后仍可以访问？
如果该URL已在本地浏览器打开，且在浏览器缓存的有效期内，可能会出现通过浏览器缓存可以继续访问已过期的文件URL的情况。如果您希望文件签名URL过期即失效，建议您将文件元数据的配置项Cache-Control设置为 no-cache 或将Expires设置为...
什么是缓存
当您访问该静态资源时，可直接从 CDN 的缓存节点上获取，而无需从源站重新获取，有效避免通过较长的链路回源，从而减少延迟和提高资源访问效率。当用户请求的内容在 CDN 节点上不存在或已过期时，CDN 节点会向源站发起回源请求以获取最新的...
性能优化最佳实践
避免使用小文件 处理小文件并非Hadoop的设计目标，Hadoop分析引擎处理大量小文件的速度远远小于处理同等数据量的大文件的速度。每一个小文件都会占用一个task，而task启动将耗费大量时间，造成作业的大部分时间都耗费在启动task和释放task...
推荐配置（可选）
成功添加加速域名后，建议您进行缓存过期时间、带宽封顶、页面优化等功能的配置，可有效提升CDN的缓存命中率、安全性和访问性能。提高缓存命中率与访问速度 访问速度慢通常与缓存命中率低有强关联性，推荐您配置缓存过期时间、过滤参数功能...
开启CNFS NAS计算端分布式缓存
CNFS文件存储计算端分布式缓存可提供多链接访问、元数据缓存、分布式数据缓存等加速能力，并提供端侧性能监控、QoS能力。本文介绍如何在ACK集群中开启CNFS NAS计算端分布式缓存，并通过分布式缓存功能加速读取数据。索引 前提条件 分布式...
通过CDN请求大文件自动断开
问题原因 这个是产品层面的一个限制，对于超过100MB的文件，如果源站响应了Cache-Control为 max-age=0、no-cache 等不缓存的策略，将导致CDN无法缓存，这类请求会被CDN的Swift缓存组件断开。这主要是因为如果大文件请求不执行缓存，那么...
集群吞吐性能测试
将500个大小为4 GB的文件按顺序写入到 文件存储 HDFS 版，读写数据的缓存大小为8 MB，并将统计数据写入/tmp/TestDFSIOwrite.log 中。hadoop jar./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.6-tests.jar TestDFSIO-...
Nginx缓存策略设置
概述 本文主要介绍Nginx服务器的缓存策略配置方法。详细信息 HTTP头处理模块 允许设置任意的HTTP头介绍如下。add_header 语法：add_header name value。默认值：none。使用字段：http、server、location。expires 语法：expires[time|epoch...
通过缓存优化性能
Delta缓存通过使用快速中间数据格式在节点的本地存储中创建远程文件的副本来加速数据读取。每当需要从远程位置获取文件时，数据都会自动缓存。然后在本地的连续读取上述数据，从而显著提高读取速度。说明 详细内容可参考Databricks官网文章...
在本地控制台上使用文件网关
步骤一：添加缓存 文件存储网关的每个共享目录都对应唯一一个缓存盘，创建多个共享目录则需要创建多个缓存盘。您可以将共享目录下的数据通过缓存盘传至阿里云OSS，也可以通过缓存盘将阿里云OSS数据同步到本地。在浏览器中，输入 https://<...
NFS协议
其中，尽快刷回NAS服务端，则涉及NAS所提供的如下多节点一致性模型：基于超时的最终一致性 NFS会缓存目录或者文件的属性（FileAttr），操作系统会根据FileAttr是否发生变化，来判断这个目录或者文件是否在其他ECS被修改过。同时，加载...
使用CNFS管理NAS存储卷
开启CNFS NAS计算端分布式缓存 CNFS文件存储计算端分布式缓存可提供多链接访问、元数据缓存、分布式数据缓存等加速能力，并提供端侧性能监控、QoS能力。本文介绍如何在ACK集群中开启CNFS NAS计算端分布式缓存，并通过分布式缓存功能加速...
OSS的文件更新后部分地区下载的文件仍是旧版本
如果绑定的域名同时使用了CDN服务并且没有开启自动刷新，在更新OSS文件后，CDN上仍然存在历史缓存资源，没有更新，您还需要刷新CDN的缓存，建议在域名设置页面开启自动刷新功能，开启自动刷新功能的具体操作如下：登录 OSS管理控制台，单击...
什么是缓存
当您访问该静态资源时，可直接从 DCDN 的缓存节点上获取，而无需从源站重新获取，有效避免通过较长的链路回源，从而减少延迟和提高资源访问效率。当用户请求的内容在 DCDN 节点上不存在或已过期时，DCDN 节点会向源站发起回源请求以获取...
包年包月（不支持新购）
包年包月是一种预付费的计费方式，只能抵扣已创建的包年包月类型的CPFS文件系统存储容量费用。本文介绍包年包月CPFS文件系统的计费规则。说明 CPFS文件系统支持购买 资源包 后，包年包月类型CPFS文件系统不再支持新购，但仍然支持续费及扩...
入门概述
文件系统适用场景 CPFS：HPC高性能计算、AI训练、自动驾驶、基因计算、影视渲染、EDA仿真、油气勘探、气象分析等高吞吐、高IOPS、海量文件的IO密集型业务。CPFS智算版：适用AIGC、自动驾驶等智算场景。目前，仅支持搭配PAI灵骏智算服务使用...
刷新和预热相关常见问题
如何刷新泛域名的缓存？刷新和预热任务需要多久生效？预热时能携带自定义请求头预热吗？如何提高刷新和预热的每日配额上限？是否支持自动化刷新或预热？如何查看CDN的预热任务是否执行完成？配置CDN后如何对文件进行同名更新？预热失败了...
CDN加速导致OSS配置的CORS失效
解决方案 建议在变更了CORS配置后，在CDN控制台中进行相关URL的缓存刷新工作，以便CORS配置能够及时生效。登录CDN控制台。选择 刷新预热>刷新缓存，填入待刷新URL，单击 刷新。确认HTTP头部参数配置正确，具体信息可参考 CDN如何配置跨域...
使用OSS缓存插件加速构建
可以将其与应用或Git版本等信息关联起来#也可以使用"cache-${{hashFile('./package.json')}}"#通过本地文件的散列值计算缓存的唯一标识符#缓存在Bucket中对应的文件路径是cache-home/${key}，例如本示例#在Bucket中缓存路径为cache-home/...
使用OSS缓存插件加速构建
可以将其与应用或Git版本等信息关联起来#也可以使用"cache-${{hashFile('./package.json')}}"#通过本地文件的散列值计算缓存的唯一标识符#缓存在Bucket中对应的文件路径是cache-home/${key}，例如本示例#在Bucket中缓存路径为cache-home/...
- 产品推荐
- 这些文档可能帮助您