PTS在并发和RPS模式下读取多文件参数的方式
并发模式下某API文件读取示例 文件读取方式 若使用的参数来源于多个文件时，可以指定基准参数，PTS会先按照基准参数的行数进行组装。若为某参数设置轮询一次后，则以该参数为基准。若先设置了基准参数，还可设置是否轮询一次。您可以在 ...
简介
API 应用程序编程接口 用户开放API，在API网关录入API，以提供接口的方式对外提供服务或者数据。Group API Group API分组 一组API。用户开放API，首先需要创建API分组 每个API分组拥有一个二级域名，两个Stage 用户需要将已经备案且解析至...
基础术语
中文 释义 API 应用程序编程接口，是一些预先定义的函数，或指软件系统不同组成部分衔接的约定。API 分组 用于将 API 进行逻辑的分组，同个分组下的 API 使用相同的分组标识做隔离。分组标识 是网关全局的唯一标识，用于定位在访问的 API。...
集群吞吐性能测试
顺序读取 文件存储 HDFS 版 上面500个大小为4 GB的文件，读写数据的缓存大小为8 MB，并将统计数据写入/tmp/TestDFSIOread.log 中。hadoop jar./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.6-tests.jar TestDFSIO-read-...
性能监控FAQ
优化该参数将提升频繁读取文件属性场景的文件系统性能。maxFileToCache 最大缓存的inode数量。优化该参数将提升反复访问海量小文件场景的文件系统性能。prefetchPct、prefetch及write-behind buffer 占用page pool的最大比例。优化该参数将...
在文件存储 HDFS 版上使用Presto
说明 在本文中Presto是通过连接Hive的元数据服务来读取 文件存储 HDFS 版 上的数据，在 文件存储 HDFS 版 上使用Presto时需要额外配置一些依赖包。具体操作，请参见 步骤二：配置Presto。步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在...
FS-文件系统
mode String 否 读取文件内容返回格式不填此参数返回为String数组，填入 'b' 为字节数组。返回 返回值 说明 data Array类型，读取到的数据。fs.unlinkSync(String path)删除对应PATH的文件。入参 属性 类型 是否必填 描述 path String 是 ...
Windows客户端以AD域用户身份挂载并使用SMB文件系统
本文介绍在Windows操作系统中，如何以AD域身份挂载SMB文件系统。以及挂载成功后，如何以AD域身份访问SMB协议文件系统，查看和编辑文件或目录的ACL。前提条件 SMB文件系统挂载点已接入AD域。具体操作，请参见 将SMB文件系统挂载点接入AD域。...
生命周期管理概述
当您需要频繁访问低频存储或归档存储中的文件时，文件存储NAS支持文件或目录取回操作，避免频繁读写文件产生过多的读写费用。价格低廉，享受高品质无忧存储服务 例如，通用性能型NAS文件系统在开启低频存储后，相对于原通用性能型NAS文件...
元数据性能测试
如果为true,则读取文件并报告平均读取时间.默认为false.非必选项>create_write性能测试 使用20个Map，10个Reduce的MapReduce作业，创建1000个文件。hadoop jar./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.6-tests.jar...
FTP数据源
您必须保证读取文件为类CSV格式，并且提供给数据同步系统权限可读。如果Path指定的路径下没有符合匹配的文件抽取，同步任务将报错。是 无 column 读取字段列表，type指定源数据的类型，index指定当前列来自于文本第几列（以0开始），value...
远程文件系统
如果您的数据保存在远程文件系统（例如远程Windows文件系统、远程Linux文件系统、NAS服务器）中，您需要将远程文件系统挂载至闪电立方设备上进行数据迁移。本文介绍配置业务IP地址，及挂载远程文件系统至闪电立方设备的操作步骤。前提条件 ...
远程文件系统
如果您的数据保存在远程文件系统（例如远程Windows文件系统、远程Linux文件系统、NAS服务器）中，您需要将远程文件系统挂载至闪电立方设备上进行数据迁移。本文介绍配置业务IP地址，及挂载远程文件系统至闪电立方设备的操作步骤。前提条件 ...
最佳实践
容器与云原生 如何利用云存储网关作为Windows Docker存储访问OSS 在Linux Docker容器中挂载使用云存储网关 Windows应用 利用云存储网关搭建Windows文件共享服务器 利用云存储网关的SMB共享搭建windows FTP服务器访问对象存储OSS 如何基于云...
在文件存储 HDFS 版上使用Apache Spark
步骤四：验证Apache Spark配置 使用Spark读取 文件存储 HDFS 版 上面的文件进行WordCount计算，并将计算结果写入 文件存储 HDFS 版。执行以下命令，在 文件存储 HDFS 版 上生成测试数据。hadoop jar${HADOOP_HOME}/share/hadoop/mapreduce/...
通用型NAS计费
如果只读取文件的一部分，则按照读取的部分产生的流量收费。低频或归档读写流量不区分网络环境，只要发生读写就会产生读写流量费用。执行数据取回任务时，按照目标文件大小收取读流量费用。备份低频存储或归档存储中的文件时，按照目标文件...
计费常见问题
如果只读取文件的一部分，则按照读取的部分产生的流量收费。低频读写流量不区分网络环境，只要发生读写就会产生读写流量费用。执行数据取回任务时，按照目标文件大小收取读流量费用。备份低频存储中的文件时，按照目标文件大小收取读流量...
开启Windows权限控制
背景信息 在Windows文件系统中，即使用户没有权限对某个文件或文件夹进行操作，该文件或文件夹对用户依然默认可见。开启云存储网关的Windows权限控制功能后，挂载至客户端的共享目录可以启用基于访问权限的枚举，使用户只能看到自身有权限...
函数计算挂载文件系统
通过在函数计算配置NAS文件系统，函数能够以类似于访问本地文件系统的方式操作NAS文件，实现文件持久化存储。该方式不仅可以消除本地磁盘空间的限制，还允许不同的函数实例共享文件数据。本文介绍如何为函数配置NAS。前提条件 已创建NAS...
推荐的挂载方式
指标 测试场景 ① 未开启CNFS加速客户端 开启CNFS加速客户端 元数据性能 100万文件目录遍历耗时 18min 小于60s 创建写入4 KB文件耗时 3000μs 小于200μs 重复读取4 KB文件耗时 400μs 小于100μs 吞吐性能 单节点读写吞吐性能 ② 200~500 ...
重要组件
由于多个主机的数据库实例需要访问块存储上的同一份数据，常用的Ext4等文件系统不支持多点挂载，PolarDB数据库团队自行研发了专用的用户态文件系统，提供常见的文件读写查看接口，支持类似O_DIRECT的非缓存方式读写数据，还支持数据页原子...
导入导出 API
您可以在 API 网关控制台上以 JSON 文件的形式对 API 进行批量导入及导出。说明 为减少操作耗时，建议一次性导入/导出 API 的数量不超过 100 个。导入 API 的 JSON 格式请参见模板 API Json 文件格式。批量导出 API 在 API 发布>API 管理 ...
后端签名插件
API绑定后端签名插件后，API 网关向您后端服务请求时会使用这一对Key和Secret对请求内容进行加签处理，您后端服务可以对网关发送过来的请求做对称加签计算，对比网关的签名和服务器端计算的签名是否一致就可以对网关做身份验证。...
文件
本文介绍文件类WVFile相关的JSAPI，供您在通过跨平台DevOps创建H5端应用或者小程序时参考。文件类WVFile的JSAPI提供写入、读取文件内容、获取文件信息、文件下载、文件上传的相关能力。WVFile.write 将指定的文件内容写入磁盘。输入参数...
SDK示例
本文列出了使用Java代码通过Hadoop FileSystem API对 文件存储 HDFS 版 文件系统进行常用操作的示例，您可以参考这些示例代码开发您的应用。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储...
监控与日志
您可以通过OpenAPI直接调用云监控的 DescribeMetricList 接口查看文件系统容量的AlignedSize、SecondaryAlignedSize、FileCount等监控数据及文件系统性能的IopsRead、IopsWrite、LatencyRead、LatencyWrite等监控数据。通过云监控控制台为...
集成概览
OpenAPI集成 文件存储 NAS提供文件系统、权限组、挂载点、生命周期管理、快照等功能的OpenAPI，您可在业务系统中进行集成。关于如何使用阿里云OpenAPI，请参见 使用OpenAPI。版本说明 版本说明 说明 2017-06-26 推荐使用 服务接入点 文件...
获取Windows镜像文件
在虚拟机完成安装配置后，您可以按照本文操作获取制作好的Windows镜像文件。操作步骤 打开Oracle VM VirtualBox管理器，选择虚拟机，例如 Windows VM。单击 设置。依次选择 存储>Windows VM.vhd。在右侧 明细 列表中，查看磁盘文件的存储...
集成概览
OpenAPI集成 文件存储 CPFS提供文件系统、权限组、挂载点、数据流动、协议服务、Fileset等功能的OpenAPI，您可在业务系统中进行集成。关于如何使用阿里云OpenAPI，请参见 使用OpenAPI。版本说明 版本说明 说明 2017-06-26 推荐使用 说明 因...
API概览
本产品（文件存储（NAS/CPFS）/2017-06-26）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
API概览
本产品（文件存储（NAS/CPFS）/2017-06-26）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
API概览
本产品（小程序Serverless/2019-06-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求...
API概览
本产品（文件存储 HDFS 版/2018-06-20）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求...
导出标准OAS定义
概述 本文主要介绍了API网关可以将API资源导出为标准OAS定义，结合API网关的 导入标准OAS定义，您可以：跨平台跨地域迁移数据：借助API网关的导出和导入功能，您可以方便地从其他平台或API网关导出OAS规范的API数据，并在其他地域或账号下...
文件管理
Windows实例：上传或下载文件（Windows）。Linux实例 上传文件 在顶部菜单栏左上角处，选择 文件>打开新文件树。在文件树中，右键单击需要上传文件的位置，然后在菜单中单击 上传文件。选择待上传的目标文件。弹出如下上传成功提示框时，...
配置FTP输入组件
文件不存在时 忽略：当读取的文件不存在时，忽略该文件，并继续读取其他文件。置任务失败：当读取的文件不存在时，终止该任务并置失败。数据内容起始行 设置输入组件读取数据的起始行。默认为1，从第一行开始为数据内容。若需忽略前N行，则...
NFS协议
NFS概念 NFS（Network File System），即网络文件系统协议，是一种分布式文件系统协议，通过NFS协议，您可以像访问本地文件一样访问远端系统上的文件。Linux操作系统和容器建议使用NFS协议类型的文件系统。如果使用SMB协议类型的文件系统，...
安装virtio驱动
Windows实例某些操作依赖于镜像的virtio驱动版本，例如在线扩容云盘时virtio驱动版本需大于 58011，或查询云盘序列号时virtio驱动版本大于 58017，如果当前virtio驱动不满足要求，均需要先更新virtio驱动版本才能进行相关操作。更多信息，...
常见问题
更多产品定价常见问题 挂载访问FAQ Linux挂载NFS文件系统常见问题 Windows挂载SMB文件系统常见问题 Linux挂载SMB文件系统常见问题 Windows挂载NFS文件系统常见问题 为什么卸载旧NAS并重新挂载新NAS后，容器Pod仍将数据写入旧NAS？...
生命周期管理FAQ
以下操作会更新访问时间：读取文件 写入文件 以下操作不会更新访问时间：重命名一个文件 修改文件的用户（user）、用户组（group）、模式（mode）等文件属性 如果一个目录配置了多项生命周期管理策略，文件系统会执行哪一项策略？...
- 产品推荐
- 这些文档可能帮助您