数据存储目录结构说明
本章介绍文件引擎...目录 说明/${实例ID}-global/${实例ID}_xxx 宽表引擎数据存储目录/solr 搜索引擎数据存储目录/tsdb 时序引擎数据存储目录 说明${实例ID}：lindorm实例ID。xxx：实例所在的区域，如cn-shanghai则表示为上海的实例。
配置训练数据和代码
在作业运行过程中，ACK集群会将本地存储目录挂载到作业所在的容器中，使作业能够访问本地存储目录中的数据和模型。单击 提交。新增数据配置创建完成后，您可在 数据配置 页面的 数据 页签查看新建训练数据集的详细信息。配置训练代码 在AI...
安装目录
本文主要说明阿里云数据库存储服务DBFS创建后的安装目录。DBFS安装目录说明：DBFS服务申请成功后，将会在用户的ECS中创建“/opt/dbfs/”目录，请用户务必不要删除此目录：/opt/dbfs/app/：...opt/dbfs/config/：DBFS服务配置文件存放目录。
使用前须知
警告 当您为某个Bucket开通OSS-HDFS服务后，通过该服务写入的数据将保留在OSS-HDFS的数据存储目录.dlsdata/下。为避免影响OSS-HDFS服务的正常使用或者引发数据丢失的风险，禁止以非OSS-HDFS提供的方式对目录.dlsdata/及目录下的Object执行...
MySQL 5.7配置说明
log-bin：MySQL binary log的存放目录。在开启情况下，建议配置定期清理策略。InnoDB层参数 MySQL InnoDB的推荐参数配置如下：innodb_doublewrite：DBFS支持原子写，建议设置成“off”后获得更好的性能。innodb_use_native_aio：异步IO开关...
HDFS组件使用的本地磁盘目录
如果节点有两块盘，那么存储目录为/mnt/disk1/hdfs和/mnt/disk2/hdfs。高可用集群 组件 使用目录 描述 ZKFailoverController（ZKFC）无 ZFKC不使用本地磁盘目录。NameNode/mnt/disk1/hdfs/name/mnt/disk1/hdfs/edit/mnt/disk1/hdfs/name：...
Windows应用程序
Windows容器 Windows容器使用阿里云NAS SMB文件系统做持久化存储目录 阿里云ACK服务使用Windows容器挂载NAS SMB最佳实践 权限控制 阿里云SMB协议文件系统AD身份认证和ACL权限控制使用场景 使用AD域实现用户身份认证和文件级别的权限访问...
开通并授权访问OSS-HDFS服务
禁止以非OSS-HDFS提供的方式对OSS-HDFS的数据存储目录.dlsdata/及目录下的Object执行写入操作，例如重命名目录、删除目录或者删除Object等，否则会影响OSS-HDFS服务的正常使用或者引发数据丢失的风险。在删除已开通OSS-HDFS服务的Bucket...
自定义存储
您可以使用 APCustomStorage 创建一个自己的存储目录。在这个目录里，您可以使用统一存储提供的所有服务，类似 APDataCenter。例如：APCustomStorage*storage=[APCustomStorage storageInDocumentsWithName:@"Contact"];执行以上代码就会...
作业提交示例
Sorrows_of_Young_Werther.txt的文件/从oss地址读取文本文档 val text=sc.textFile("oss:/databricks-demo-hangzhou/demo/The_Sorrows_of_Young_Werther.txt")步骤一：上传示例到OSS 上传OSS目录：自定义OSS存储目录。步骤二：创建项目空间...
MySQL存储计算分离实践
文件系统 容量 已用 可用 已用%挂载点 devtmpfs 16G 0 16G 0%dev tmpfs 16G 288K 16G 1%dev/shm dbfs_server 100G 46M 100G 1%mnt/dbfs/hgsrb6i*/dbfs-ytr9rtr9*使用如下命令检查创建好的数据库文件存放目录 ls-lrt 结果如图所示 总用量 0 ...
使用NAS动态存储卷
如果需要删除文件系统中对应的存储目录，可在StorageClass中配置 archiveOnDelete 为 false。在StatefulSet中使用NAS动态存储卷。使用以下示例创建Service及StatefulSet应用：apiVersion:v1 kind:Service metadata:name:nginx labels:app:...
在文件存储 HDFS 版上使用Apache HBase
本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。...指定HBase存储目录,f-xxxxxxxxxxxxxxx.cn-xxxxxxx.dfs.aliyuncs.com为您的挂载点域名，根据实际情况修改-><name>hbase.rootdir</name><value>dfs:/f-xxxxxxxxxxxxxxx....
什么是OSS-HDFS服务
注意事项 警告 当您为某个Bucket开通OSS-HDFS服务后，通过该服务写入的数据将保留在OSS-HDFS的数据存储目录.dlsdata/下。为避免影响OSS-HDFS服务的正常使用或者引发数据丢失的风险，禁止以非OSS-HDFS提供的方式对目录.dlsdata/及目录下的...
块存储优化
使用块存储，您需要为预配置的容量付费，即使云盘未挂载或只有极少量的写入操作。因此，要优化块存储的性能和成本，请定期监控和识别未挂载的，以及未充分使用或过度使用的云盘，并调整配置以匹配实际的使用情况。删除未挂载和未使用的云盘...
协议服务FAQ
但是Fileset会提供普通目录没有的更多能力，例如：数据流动。配合协议服务，可以满足更多的业务场景需求。推荐创建新的Fileset后导出为数据访问点。协议服务是否支持协议服务规格变更？支持。您可以参见如下操作进行变更：通用型切换为缓存...
常见问题
表格存储 没有存储和扩展限制。表格存储 通过数据分片和负载均衡技术，实现了存储无缝扩展。随着表数据量的不断增大，表格存储 会自动进行数据分区的调整从而为该表配置更多的存储。如何设计 表格存储 的表？合理的表设计能够发挥出数据库...
转换存储类型
警告 对开通了OSS-HDFS服务的Bucket，建议不要修改OSS-HDFS的数据存储目录.dlsdata/下任意Object的存储类型。如果您将.dlsdata/下任意Object的存储类型修改为低频类型时，通过OSS-HDFS可正常访问数据。如果您将Object存储类型修改为归档、...
新功能发布记录
本文介绍对象存储OSS每次发布涉及的功能变更及对应的文档，帮助您了解OSS的发布动态。2024年04月 功能名称 功能概述 发布时间 支持地域 相关文档 文档智能处理 由智能媒体管理（IMM）提供的针对文档的AI处理功能，包括文档内容翻译、文档...
查看集群日报与分析
目录文件大小分布信息中会展示以下信息：层级目录空文件个数Top 层级目录极小文件个数Top 层级目录小文件个数Top 层级目录中等文件个数Top 层级目录大文件个数Top 每个表格会展示具体路径、存储大小、日环比和日增量等信息。目录冷热数据...
为什么存储类型转换后，源Object存储类型容量没有减少...
本文介绍为什么存储类型转换后，目标Object存储类型存储容量增加了，但是源Object存储类型容量没有减少的原因以及解决方法。问题描述 转换存储类型后，目标Object存储类型存储容量增加了，但是源Object存储类型存储容量没有减少。问题原因 ...
mkdir（创建目录）
当您希望按实际业务场景对上传至存储空间（Bucket）下的文件（Object）进行合理归类时，您需要先创建目录，然后将目标文件存放至指定目录。本文介绍如何使用 mkdir 命令创建目录。注意事项 要创建目录，您必须具有 oss:GetObject 和 oss:...
对象命名
命名示例 根据Object存储于Bucket内的不同位置，Key的表示方法也有所区别，具体说明如下：Object所在Bucket的位置 Key的表示方法 目标存储空间examplebucket根目录下存放了名为exampleobject.txt的Object exampleobject.txt 目标存储空间...
logging（日志转存）
ossutil64 logging-method put oss:/srcbucket oss:/destbucket 将源存储空间srcbucket产生的日志文件保存至目标存储空间destbucket的根目录下的子目录destdir。ossutil64 logging-method put oss:/srcbucket oss:/destbucket/destdir 以下...
如何选用NAS、OSS和EBS？
数GB/s 容量 GiB~PiB 无限制 GiB~TiB 文件级别的授权 支持 支持 不支持 数据存储方式 目录树的组织形式 扁平的文件组织形式 需拆分数据到任意划分且大小相同的卷中 协议 NFS和SMB协议 HTTP/HTTPS协议 标准虚拟块设备协议接口或NVMe协议接口...
日志转存
日志前缀：日志文件存储的目录。如果指定此项，则日志文件将保存在目标Bucket的指定目录下。如果不指定此项，则日志文件将保存在目标Bucket的根目录下。例如，日志前缀指定为 log/，则日志文件将被记录在 log/目录下。单击 保存。使用阿里...
计费案例
1500000次×0.1元/万次÷10000=15元 示例二 张先生于2022年03月01日在华东1（杭州）地域的Bucket存储了2500万个文件（假设所有文件的文件大小均大于64 KB），其存储总容量为2.5 TB，所有文件以低频访问（本地冗余）类型的方式存放在目录dir...
使用NAS静态存储卷
如果NAS根目录下没有此子目录，会默认创建后再挂载。您可以不填此项，默认挂载到NAS根目录。极速NAS需要以/share 开头。权限 设置挂载目录的访问权限，例如755、644、777等。说明 只有挂载到NAS子目录时才能设置权限，挂载到根目录时无法...
数据存储量
表格存储对单表数据存储量没有限制，用户可以根据自己的实际需求使用，按量付费。说明 表格存储会异步对各个数据分区过期的数据及超过最大版本号的版本数据进行清理操作，并在清理操作完成后统计该数据分区数据量。清理时长与总数据量相关...
冷热分层存储
为避免配置错误导致冷热分层无法正常工作，OSS会自动创建同时包含以下三种策略的生命周期规则：指定OSS-HDFS的数据存储目录.dlsdata/下携带Key为 transition-storage-class、Value为 IA 标签的数据在1天后转为低频访问存储。指定OSS-HDFS的...
日志转存
my-log填写日志文件存储的目录，如果指定此项，则日志文件将保存在指定目录下。如果不指定此项，则日志文件将保存在目标Bucket的根目录下。bucket.logging=Aliyun:OSS:BucketLogging.new(enable:true,target_bucket:'logging_bucket',...
通过NFS使用NAS静态存储卷
如果NAS根目录下没有此子目录，会默认创建后再挂载。您可以不填此项，默认挂载到NAS根目录。极速NAS需要以/share 为父目录。版本：所创建存储卷的版本。标签 为该存储卷添加标签。参数配置完成后，单击 创建。步骤二：创建PVC 在集群管理页...
使用NAS静态存储卷
如果NAS根目录下没有此子目录，会默认创建后再挂载。您可以不填此项，默认挂载到NAS根目录。极速NAS需要以/share 为父目录。版本：所创建存储卷的版本。标签 为该存储卷添加标签。参数配置完成后，单击 创建。步骤二：创建PVC 在集群管理页...
ZIP包解压
如果您不需要保留ZIP文件名，直接将解压后的文件存放在目标目录，则选中 直接解压到目标目录中。配置详情请参见以下配置示例。警告 为避免影响OSS-HDFS服务的正常使用或者引发数据污染、数据丢失的风险，在开通了OSS-HDFS服务的Bucket中...
日志转存
设置日志文件存放的目录。request.setTargetPrefix("<yourTargetPrefix>");OSSAsyncTask task=oss.asyncPutBucketLogging(request,new OSSCompletedCallback,PutBucketLoggingResult>(){@Override public void onSuccess...
OSS目录是否有层级限制？
阿里云OSS采用扁平化数据模型，实际上并没有传统文件系统意义上的目录层级结构。但是，您可以通过在对象（Object）的键（Key）中使用正斜线（/）来模拟文件夹结构，从而形成类似目录层级的效果。通过在Object Key中使用正斜线来模拟目录...
云存储网关
云存储网关 目前提供两种形态：文件网关 文件网关将OSS Bucket的对象结构与NAS文件系统的目录和文件建立映射关系，您通过标准的NFS和SMB协议即可读写指定OSS Bucket里的对象。同时，文件网关利用本地存储空间作为热数据缓存，在提供OSS ...
使用NAS静态存储卷
如果NAS根目录下没有此子目录，会默认创建后再挂载。您可以不填此项，默认挂载到NAS根目录。极速NAS需要以/share 开头。权限 设置挂载目录的访问权限，例如755、644、777等。说明 只有挂载到NAS子目录时才能设置权限，挂载到根目录时无法...
使用NAS静态存储卷
如果NAS根目录下没有此子目录，会默认创建后再挂载。您可以不填此项，默认挂载到NAS根目录。极速NAS需要以/share 开头。权限 设置挂载目录的访问权限，例如755、644、777等。说明 只有挂载到NAS子目录时才能设置权限，挂载到根目录时不能...
使用NAS静态存储卷
如果NAS根目录下没有此子目录，会默认创建后再挂载。您可以不填此项，默认挂载到NAS根目录。极速NAS需要以/share 为父目录。版本：所创建存储卷的版本。标签 为该存储卷添加标签。参数配置完成后，单击 创建。步骤二：创建PVC 在集群管理页...
- 产品推荐
- 这些文档可能帮助您