迁移开源HDFS的数据到文件存储 HDFS 版

文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云上,并允许您在云上就像在Hadoop分布式文件系统中管理和访问数据。准备工作 开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。...

创建文件系统

可通过POSIX协议 或NFS协议 在多个计算节点(ECS、容器、云桌面、PAI)中实现文件系统的共享访问。本文介绍如何 创建CPFS文件系统或 创建CPFS智算版文件系统。前提条件 已开通文件存储CPFS服务。首次登录 NAS控制台 时,根据页面提示开通...

概述

更多信息,请参见 本地数据中心访问文件系统 迁移工具选择 迁移数据时,可用的迁移工具多种多样。本文提供如以下表格中的迁移工具教程示例以及各迁移工具的特点和应用场景,请根据实际业务选择合适的迁移工具。迁移工具 特点 应用场景 使用...

通过云企业网实现同地域跨VPC挂载NAS

步骤三:挂载文件系统 重要 挂载前,请确认文件系统的权限组配置规则中已开放了相应网段,否则,会导致无法访问文件系统。更多信息,请参见 管理权限组。配置云企业网实例完成后,可跨VPC挂载文件系统。通过挂载点挂载文件系统 如果您要...

使用云企业网跨VPC访问文件存储 HDFS 版

您也可以使用 文件存储 HDFS 版 的多挂载功能实现单文件系统实例同地域的多VPC访问。属性 VPC1 VPC2 VPC3 网络实例的网段规划 VPC网段:192.168.0.0/16 交换机网段:192.168.0.0/24 VPC网段:10.0.0.0/16 交换机网段:10.0.0.0/24 VPC网段...

管理权限组

您可以创建权限组和规则,允许指定的IP地址或网段访问文件系统,并给不同的IP地址或网段授予不同的访问权限。背景信息 初始情况下,每个阿里云账号会自动生成一个默认权限组,默认权限组允许任何IP地址以最高权限访问文件系统。默认权限组...

管理挂载点

本文介绍如何在 文件存储 HDFS 版 控制台上管理挂载点,包括添加挂载点、查看挂载点信息、删除挂载点、修改挂载点权限组、禁用和激活挂载点等。前提条件 已创建文件系统。具体操作,请参见 创建文件系统。挂载点说明 一个阿里云账号最多...

产品规格

文件系统实例性能 CPFS支持通过CPFS-POSIX客户端或CPFS-NFS客户端访问文件系统,以下列举了在相同文件系统容量下通过CPFS-POSIX客户端或CPFS-NFS客户端访问文件系统时,200 MB/s/TiB基线、100 MB/s/TiB基线和400 MB/s/TiB基线规格的CPFS...

一机一密概述

MQTT服务器 云消息队列 MQTT 版 权限认证和消息收发服务器,用来处理应用服务器发起的设备访问凭证相关的请求以及消息收发业务。计算方式 按照 鉴权概述 的描述,如果选择一机一密鉴权模式,MQTT客户端实际连接MQTT消息服务器时,connect ...

数据流动概述

按需加载 CPFS文件系统与OSS Bucket建立数据流动后,当您访问CPFS目录或文件时会按需从OSS上加载需要的元数据或数据。例如,执行 ls 命令列出与OSS Bucket链接的目录时,会按需从OSS加载目录项的元数据,在访问文件时会按需从OSS加载文件的...

快速入门

部署成功后,您就可以像在Hadoop分布式文件系统(Hadoop Distributed File System)中一样管理和访问数据。前提条件 已开通 文件存储 HDFS 版 服务。具体操作,请参见 开通文件存储HDFS版服务。已购买ECS实例。更多信息,请参见 选购ECS...

查看CPFS性能监控

如果您使用NFS协议服务访问文件系统,则该页面可查看到NFS的性能监控指标图。说明 当图表显示 无数据,说明目标文件系统未收到客户端的请求或者未开通对应的服务。如果要制造写吞吐监控数据,可以在挂载CPFS的客户端上执行 fio 命令(假设...

使用Fuse-DFS挂载文件存储 HDFS 版

挂载成功后,您可以在本地访问 文件存储 HDFS 版 文件系统,执行读取或写入操作。执行以下命令在已映射 文件存储 HDFS 版 文件系统的本地目录中创建文件,创建成功后,您可以在 文件存储 HDFS 版 文件系统上查看到该文件。cd/mnt/dfs_mount...

ListUserGroupsMappings-查看用户和组的映射关系

有关文件存储 HDFS 版文件系统目录和文件访问权限的信息,请参见 目录和文件访问权限。单个文件系统存在用户和组数量的限制,包括:单个文件系统最多添加 1000 个用户。单个文件系统最多添加 30 个组。每个用户最多属于 10 个组。调试 您...

文件存储NAS系统权限策略参考

本文描述文件存储NAS支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品...

CreateUserGroupsMapping-创建用户和组的映射关系

有关文件存储 HDFS 版文件系统目录和文件访问权限的信息,请参见 目录和文件访问权限。单个文件系统存在用户和组数量的限制,包括:单个文件系统最多添加 1000 个用户。单个文件系统最多添加 30 个组。每个用户最多属于 10 个组。调试 您...

在ECS实例上无法登录淘宝如何处理?

如果您需要使用服务端访问淘宝或淘宝开放平台API,建议您使用 聚石塔服务器 访问。如使用聚石塔服务器还是无法访问,请 提交聚石塔工单。问题二:无法访问手机淘宝 问题描述 在ECS实例上,无法通过浏览器访问 手机淘宝。问题原因 手机淘宝 ...

SDK示例

建议使用最新版SDK-><version>1.0.5</version></dependency>应用初始化 在使用Hadoop FileSystem API访问 文件存储 HDFS 版 文件系统之前,需要先确保已加载 文件存储 HDFS 版 相关的配置,然后再实例化FileSystem。初始化代码样例如下。已...

服务关联角色

轻量应用服务器使用服务关联角色获取其他云服务或云资源的访问权限。通常情况下,服务关联角色是在您执行某项操作时,由系统自动创建。在自动创建服务关联角色失败或轻量应用服务器不支持自动创建时,您需要手动创建服务关联角色。阿里云...

使用rsync工具迁移数据

本文介绍如何使用rsync工具实现阿里云文件存储NAS NFS协议文件系统之间的数据迁移。前提条件 已拥有一个存有数据的NFS协议文件系统,并且拥有一个专有网络类型挂载点。费用说明 NAS与NAS之间的迁移,会涉及如下费用:使用ECS作为数据传输的...

Token鉴权概述

应用服务器需要做本地容灾,避免因MQTT服务器访问短暂不可用而导致业务阻塞的情况。相关API Token鉴权流程通过相关的API来完成。应用服务器负责Token的申请和吊销管理,和 云消息队列 MQTT 版 服务器之间通过HTTPS的OpenAPI进行交互。每个...

Token鉴权概述

应用服务器需要做本地容灾,避免因MQTT服务器访问短暂不可用而导致业务阻塞的情况。相关API Token鉴权流程通过相关的API来完成。应用服务器负责Token的申请和吊销管理,和 云消息队列 MQTT 版 服务器之间通过HTTPS的OpenAPI进行交互。每个...

CreateDataFlow-创建数据流动

自动更新 配置自动更新(AutoRefresh)后,当源端存储数据发生变化时,变化的元数据会自动同步到 CPFS 文件系统,变化的数据会在用户访问文件时按需加载,或者启动数据流动任务加载数据。自动更新依赖 EventBridge 收集源端 OSS 存储的对象...

挂载访问FAQ

并发访问同一文件时,服务器端出现无响应35s现象,该如何处理?为什么SMB文件系统挂载点无响应?为什么无法创建符号链接文件?拷贝大文件时报"cp:error writing 'o/file>':Bad file descriptor",该如何处理?当文件系统无法结束进程时,...

CLB状态码说明

CLB向后端服务器建立连接时,后端服务器建立连接超时,一般后端服务器响应超时时间默认设置为5秒,您可以查看访问日志中的upstream_connect_time字段是否为5秒或者大约为5秒。建议抓包排查后端服务器响应超时的原因。后端服务器负载增大,...

DeleteUserGroupsMapping-删除用户和组的映射关系

有关文件存储 HDFS 文件系统目录和文件访问权限的信息,请参见文件和目录权限。文件系统不允许删除用户和组,只能删除用户和组的映射关系。即一旦一个用户或组以任何方式添加到了文件系统中,则其不会被删除。调试 您可以在OpenAPI ...

读写访问文件类问题

当您访问文件系统中的文件时,文件系统中的文件会受到某些限制影响,导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...

COPY

运行在 Microsoft Windows 上的服务器则会输出回车/新行(“\r”),不过只对 COPY 到一个服务器文件这样做。为了做到跨平台一致,COPY TO STDOUT 总是发送“”而不管服务器平台是什么。COPY FROM 能够处理以新行、回车或者回车/新行结尾的...

入门概述

在云桌面内挂载CPFS文件系统 通过NFSv3协议访问CPFS文件系统 协议服务 在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 ...

手动搭建FTP站点(CentOS 8)

etc/vsftpd/ftpusers 是黑名单文件,此文件中的用户不允许访问FTP服务器。etc/vsftpd/user_list 是白名单文件,此文件中的用户允许访问FTP服务器。vsftpd.conf 配置文件参数说明如下:用户登录控制参数说明如下表所示。参数 说明 anonymous...

本地验证转发配置生效

添加网站配置后,您可以通过修改本地hosts文件或者使用高防CNAME地址访问服务器的方式验证转发配置生效。有的四层业务(例如游戏业务)可能不需要域名,直接通过IP进行交互。在为该类型业务接入DDoS高防时,您需要添加端口转发规则。添加...

搭建FTP站点(CentOS 7)

etc/vsftpd/ftpusers 是黑名单文件,此文件中的用户不允许访问FTP服务器。etc/vsftpd/user_list 是白名单文件,此文件中的用户允许访问FTP服务器。vsftpd.conf 配置文件参数说明如下:用户登录控制参数说明如下表所示。参数 说明 anonymous...

搭建FTP站点(Alibaba Cloud Linux 3)

本示例创建测试文件为 testfile.txt,该测试文件用于FTP客户端访问FTP服务器时使用。touch/var/ftp/test/testfile.txt 运行以下命令,更改/var/ftp/test 目录的拥有者为 ftptest。chown-R ftptest:ftptest/var/ftp/test 修改 vsftpd.conf ...

搭建FTP服务器(Linux)

etc/vsftpd/ftpusers 是黑名单文件,此文件中的用户不允许访问FTP服务器。etc/vsftpd/user_list 是白名单文件,此文件中的用户允许访问FTP服务器。vsftpd.conf 配置文件参数说明如下:用户登录控制参数说明如下表所示。参数 说明 anonymous...

管理NFS共享

在NFS应用中,本地NFS客户端应用可以透明地读写位于远端NFS服务器上的文件,就像访问本地文件一样。云存储网关作为NFS的服务器端提供文件共享服务。在使用时,您需要先在云存储网关上创建共享目录,并设置允许访问共享目录的客户端以及访问...

域名所有权验证相关问题

情况二:如果您已上传验证文件服务器对应目录,且访问URL地址(HTTPS地址 和 HTTP地址),能够访问到验证文件内容,但是控制台仍提示 未检测到文件,可能是由于控制台 验证文件会有延迟,请您耐心等待。文件内容不正确 您可以参考以下...

Web服务端漏洞类型

文件遍历:可以浏览服务器Web目录下的文件列表,可能会泄露重要文件。源码泄露:可以查到的Web程序的源代码。配置文件泄露:Web服务器及程序代码的配置文件泄露等。防御措施 检查所有可能存在安全配置问题的点,在满足业务需求的情况下,...

复核时录音无法播放

文件复核时,可能会出现录音无法播放的问题,如下图:此类问题会有多种原因导致,例如:录音文件的格式是浏览器无法播放的 您所提供的录音文件URL无法访问 您所提供的录音文件URL不支持HTTPS协议访问 可按下面的方式来排查:1.录音文件...

网站耗资源(客户程序故障)常见问题

本文汇总了使用云虚拟主机出现网站耗资源(客户程序故障)时的常见问题。什么是网站耗资源(客户程序故障)?...如果响应请求时间超过3秒,也可能会导致并发访问量过大,请检查和优化访问文件或网站程序以减少服务器的响应请求时间。

高级管理FAQ

以下操作会更新访问时间:读取文件 写入文件 以下操作不会更新访问时间:重命名一个文件 修改文件的用户(user)、用户组(group)、模式(mode)等文件属性 如果一个目录配置了多项生命周期管理策略,文件系统会执行哪一项策略?...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
轻量应用服务器 云服务器 ECS 文件存储NAS Web应用防火墙 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用