性能监控FAQ

优化该参数将提升频繁读取文件属性场景的文件系统性能。maxFileToCache 最大缓存的inode数量。优化该参数将提升反复访问海量小文件场景的文件系统性能。prefetchPct、prefetch及write-behind buffer 占用page pool的最大比例。优化该参数将...

基本概念

本文介绍了 文件存储 HDFS 使用的一些基本概念。术语 描述 文件系统实例 一个拥有全局命名空间,可用来存储数据文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问...

添加数据

建议值:2 数据源类型 为 Hadoop分布式文件系统HDFS)配置重要参数,描述如下:参数 描述 数据源类型 数据源来源类型,此处选择 Hadoop分布式文件系统HDFS)。数据源名称 用于表示HDFS的数据源名称。您可以根据情况自行定义合适的名称...

NFS协议

NFS概念 NFS(Network File System),即网络文件系统协议,是一种分布式文件系统协议,通过NFS协议,您可以像访问本地文件一样访问远端系统上的文件。Linux操作系统和容器建议使用NFS协议类型的文件系统。如果使用SMB协议类型的文件系统,...

DetachDbfs-卸载数据库文件系统

调用DetachDbfs从一台ECS实例上卸载一个按量付费的数据库文件系统。接口说明 调用该接口时,请注意:数据库文件系统必须已经挂载到实例上,状态为已挂载(Attached)。卸载数据库文件系统时,所挂载的 ECS 实例必须处于运行中(Running)...

按量付费

本文为您介绍阿里云数据库文件存储服务DBFS按量付费的计算详情。结算周期 数据库文件存储每一个小时整点结算一次费用,并从账户余额中扣除实际消费金额,结算完毕后进入新的结算周期。例如,当前时间是 10:30:00,结算的是 9:00:00~10:00:...

性能监控

前提条件 已创建 文件存储 HDFS 文件系统。具体操作,请参见 创建文件系统。已开通云监控服务。您可以登录 云监控产品详情页,根据页面提示开通服务。性能监控指标说明 指标 指标名称 单位 描述 read_iops 文件系统读请求频率 次/秒 该...

OSS-HDFS元数据管理费用

基于统一的元数据管理能力,在完全兼容HDFS文件系统接口的同时,提供充分的POSIX能力支持,能更好地满足大数据和AI等领域的数据湖计算场景。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情,请参见 OSS产品定价。计费项 计费...

UpdateDbfs-修改数据库文件系统

修改一个数据库文件系统的实例规格和使用场景。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...

集群容灾能力

数据容灾 在Hadoop分布式文件系统HDFS)中,每一个文件的数据均是分块存储的,每一个数据块保存有多个副本(默认为3),并且尽量保证这些数据块副本分布在不同的机架之上。一般情况下,HDFS的副本系数是3,存放策略是将一个副本存放在...

开发指南

创建目录 如果要在HDFS文件系统中创建目录,需要FileSystem实例的exists方法判断该目录是否已经存在:如果存在,则直接返回。如果不存在,则调用FileSystem实例的mkdirs方法创建该目录。创建目录代码样例如下。create directory path*@...

账单查询

您可以通过阿里云管理控制台查看 文件存储 HDFS 的费用账单。查看文件系统费用账单 登录 用户中心。在左侧导航栏,单击 账单管理>账单详情。在 明细账单 页签中,设置查询 账期,并在列表中筛选产品为 文件存储 HDFS 。您还可以通过 ...

RenameDbfs-重命名数据库文件系统

调用RenameDbfs重命名一个数据库文件系统。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句...

查看NAS性能监控

您可以使用FIO工具测试文件系统性能并在云监控控制台查看性能指标图表。具体操作,请参见 NAS性能测试。例如,您可以在挂载NAS的ECS实例上执行命令(挂载目录为/mnt):fio-numjobs=1-iodepth=128-direct=1-ioengine=libaio-sync=1-rw=...

管理挂载点

本文介绍如何在 文件存储 HDFS 控制台上管理挂载点,包括添加挂载点、查看挂载点信息、删除挂载点、修改挂载点权限组、禁用和激活挂载点等。前提条件 已创建文件系统。具体操作,请参见 创建文件系统。挂载点说明 一个阿里云账号最多...

文件元数据离线分析

批次信息:因为分布式文件系统的元数据会跟随用户的使用发生变化,所以我们每次对元数据进行分析是基于命令执行当时的元数据信息的快照进行的。每次运行Jindo命令进行上传会在目录下,根据上传时间生成对应批次号作为本次上传文件的根目录...

文件元数据离线分析

批次信息:因为分布式文件系统的元数据会跟随用户的使用发生变化,所以我们每次对元数据进行分析是基于命令执行当时的元数据信息的快照进行的。每次运行Jindo命令进行上传会在目录下,根据上传时间生成对应批次号作为本次上传文件的根目录...

文件元数据离线分析

批次信息:因为分布式文件系统的元数据会跟随用户的使用发生变化,所以我们每次对元数据进行分析是基于命令执行当时的元数据信息的快照进行的。每次运行Jindo命令进行上传会在目录下,根据上传时间生成对应批次号作为本次上传文件的根目录...

文件元数据离线分析

批次信息:因为分布式文件系统的元数据会跟随用户的使用发生变化,所以我们每次对元数据进行分析是基于命令执行当时的元数据信息的快照进行的。每次运行Jindo命令进行上传会在目录下,根据上传时间生成对应批次号作为本次上传文件的根目录...

文件元数据离线分析

批次信息:因为分布式文件系统的元数据会跟随用户的使用发生变化,所以我们每次对元数据进行分析是基于命令执行当时的元数据信息的快照进行的。每次运行Jindo命令进行上传会在目录下,根据上传时间生成对应批次号作为本次上传文件的根目录...

文件元数据离线分析

批次信息:因为分布式文件系统的元数据会跟随用户的使用发生变化,所以我们每次对元数据进行分析是基于命令执行当时的元数据信息的快照进行的。每次运行Jindo命令进行上传会在目录下,根据上传时间生成对应批次号作为本次上传文件的根目录...

文件元数据离线分析

批次信息:因为分布式文件系统的元数据会跟随用户的使用发生变化,所以我们每次对元数据进行分析是基于命令执行当时的元数据信息的快照进行的。每次运行Jindo命令进行上传会在目录下,根据上传时间生成对应批次号作为本次上传文件的根目录...

文件元数据离线分析

批次信息:因为分布式文件系统的元数据会跟随用户的使用发生变化,所以我们每次对元数据进行分析是基于命令执行当时的元数据信息的快照进行的。每次运行Jindo命令进行上传会在目录下,根据上传时间生成对应批次号作为本次上传文件的根目录...

CancelAutoSnapshotPolicy-取消自动快照策略

取消一个或多个数据库文件系统的自动快照策略。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...

ListDbfsAttachedEcsInstances-查询已挂载的ECS实例

调用ListDbfsAttachedEcsInstances查询数据库文件系统已挂载的ECS实例列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...

创建自动快照策略

本文描述了如何在数据库文件存储控制台创建一份自动快照策略。前提条件 您已经开通了云盘快照服务。具体操作,请参见 开通快照。操作步骤 登录 数据库文件存储控制台。在顶部菜单栏左上角处,选择地域。在左侧导航栏,选择 快照,然后单击 ...

使用NAS静态存储

NAS存储卷是一种可共享访问、弹性扩展、高可靠以及高性能分布式文件系统。本文介绍如何使用阿里云NAS静态存储卷,以及如何实现持久化存储与共享存储。前提条件 已创建 ACK Serverless集群。具体操作,请参见 创建ACK Serverless集群。已...

删除自动快照策略

删除后,已经设置了该自动快照策略的数据库文件系统将自动取消策略。前提条件 您已经创建了至少一份自动快照策略。具体操作,详见 创建自动快照策略。操作步骤 登录 数据库文件存储控制台。在顶部菜单栏左上角处,选择地域。在左侧导航栏,...

使用mount命令挂载ext4文件系统

文件系统性能的影响:自动更新每个文件的访问时间,以及读写数据时文件系统会自动记录元数据操作日志,这会导致文件系统自身产生大量的写操作。当数据从内存写入磁盘时才真正分配数据块,会有一次周期性的大块写操作,导致数据块分配延迟...

通过NFS使用NAS静态存储

NAS是一种可共享访问、弹性扩展、高可靠以及高性能分布式文件系统。本文介绍如何使用阿里云NAS静态存储卷,及如何实现持久化存储与共享存储。前提条件 已创建Kubernetes集群。具体操作,请参见 创建Kubernetes托管集群。已创建NAS文件...

快速入门-归档

您可以通过 云备份 控制台对本地NAS、HDFS文件系统、S3兼容存储进行归档、分析等操作。本文介绍该场景涉及的主要步骤。使用 云备份 控制台进行归档的流程如下所示:开通云备份 开通云备份服务不收取费用。云备份收取仓库租用费和存储容量费...

Hive连接器

背景信息 Hive数仓系统由以下三部分内容组成:不同格式的数据文件,通常存储在Hadoop分布式文件系统HDFS)或对象存储系统(例如,阿里云OSS)中。存储着数据文件到Schema和Table映射的元数据。该元数据存储数据库(例如,MySQL)中,并...

常见问题

本文介绍文件存储CPFS的用户咨询和关注的一些问题,帮助您快速了解CPFS。问题概览 产品咨询类 什么是文件存储CPFS?CPFS适用什么场景?CPFS的优势有哪些?如何开通服务,并创建文件存储CPFS文件系统?如何选择CPFS的性能规格?CPFS-POSIX...

CreateSnapshot-创建快照

调用CreateSnapshot给一个数据库文件系统创建快照。接口说明 以下场景中,您无法为指定的数据库文件系统创建快照:上一份快照还未完成创建。数据库文件系统实例未处于已挂载(Attached)或者待挂载(Unattached)状态。调试 您可以在Open...

新功能发布记录

功能名称 功能概述 发布时间 发布地域 相关文档 文件系统性能升级 CPFS对部分地域的100 MB/s/TiB基线、200 MB/s/TiB基线文件系统吞吐和IOPS进行了升级。升级后,吞吐能力最高可达45000 MBps,IOPS能力最高可达7200000。其他地域的吞吐和...

列出未设置自动快照策略的文件系统

查询您在某个地域下,所有已创建的符合查询条件的未设置自动快照策略的数据库文件系统。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表...

ListSnapshot-查询快照

调用ListSnapshot查询用户创建的数据库文件系统快照列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求...

TagDbfs-设置标签

调用TagDbfs为一个数据库文件系统设置标签。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 ...

ListSnapshotLinks-查询快照链

dbfs-kwziq4dpsle*FsIds string 否 数据库文件系统 ID。一次最多指定 100 个文件系统 ID。FsIds 参数取值格式为 JSON 数组,ID 之间用半角逗号(,)隔开。["dbfs-kwziq4dpsle*","dbfs-vuaqvfcjqsg*"]LinkIds string 否 快照链 ID。一次最多...

列出该自动快照策略已设置的文件系统

查询所有已设置该自动快照策略的数据库文件系统列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 云数据库 Redis 版 云数据库 MongoDB 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用