迁移开源HDFS的数据到文件存储 HDFS 版
本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心，而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...
ECS实例挂载同一NFS文件系统出现数据不同步的情况
问题描述 当您使用两个ECS实例挂载同一个NFS文件系统，在ECS A实例上追加写文件，在ECS B实例上使用 tail-f 命令查看文件内容的变化时，在ECS A实例上写完之后，在ECS B实例上查看文件内容变化会有10~30秒的延时。然而相同的场景下，如果...
函数列表
size()获取Map数据中键值对数量。containKey(String)判断Map数据中是否包含指定的键。keySet()获取Map数据中键的集合，返回类型为Array。remove(Object)移除Map数据中指定键对应的键值对。put(Object,Object)在Map数据中添加键值对。putAll...
Logtail机器组问题排查思路（主机场景）
info.json Windows（32位操作系统）Logtail（32位程序）C:\Program Files\Alibaba\Logtail\app_info.json 获取app_info.json文件中的 ip 字段值。{"UUID":"","hostname":"iZ8vbdlzf*azuhZ","instance_id":"E9633380-*-00163E1AA597_172.16....
回收站
为避免误删除通用型NAS文件系统中的文件导致业务受阻或数据永久丢失，建议您开启回收站功能。开启后，被删除的文件或目录将暂存在回收站中，并在规定的保留时间之后彻底删除。您可以在保留时间期间恢复这些文件及其UID、GID和ACL等元数据...
iOS 加固配置文件信息获取方式
App ID、Workspace ID、Tenant ID 获取方式 登录 mPaaS 控制台，并选择目标应用。单击左侧导航栏中的 总览，进入 总览 页面。单击 下载 iOS 代码配置，在右侧弹框中可以获取到 App ID、Workspace ID、Tenant ID。AccessKeyId、...
获取文件元数据
从环境变量中获取访问凭证。运行本代码示例之前，请确保已设置环境变量OSS_ACCESS_KEY_ID和OSS_ACCESS_KEY_SECRET。var accessKeyId=Environment.GetEnvironmentVariable("OSS_ACCESS_KEY_ID");var accessKeySecret=Environment....
删除文件系统
警告 删除文件系统后，存储在文件系统中的数据将被删除且无法恢复，请在删除前确认数据已不再使用。如果需要继续使用文件系统中的数据，请提前迁移数据。关于迁移数据的更多信息，请参见 迁移说明。前提条件 如果为RAM用户，请确认RAM用户...
快照
如果您需要将某一时刻快照中的数据恢复至同可用区或跨可用区的现有文件系统中，建议您使用该时刻的快照创建新的文件系统，然后再将新文件系统中的数据拷贝至现有文件系统中。前提条件 文件系统必须处于 运行中 状态，否则无法创建快照。...
获取文件元数据
示例代码 以下代码用于获取文件元数据：#-*-coding:utf-8-*-import oss2 from oss2.credentials import EnvironmentVariableCredentialsProvider#从环境变量中获取访问凭证。运行本代码示例之前，请确保已设置环境变量OSS_ACCESS_KEY_ID和...
入门概述
监测文件的使用量 数据监控 限制文件的目录或文件数 目录配额 备份文件系统中的数据 备份和恢复文件 回收站 快照 将文件系统中的冷数据转存储 低频介质 设置生命周期策略 对文件系统中的数据加密访问 服务器端加密 NFS文件系统传输加密 SMB...
管理Fileset
Fileset是在CPFS文件系统中的一个小型文件系统，拥有独立的inode空间和管理能力。在执行数据流动任务前，需要在CPFS文件系统中指定目录作为数据流动的Fileset。同时，Fileset可用于导出数据，创建NFS挂载点挂载CPFS文件系统。相比普通目录...
通用型NAS备份
为避免存储在NAS文件系统中的数据丢失或受损影响业务，建议您通过云备份服务定期备份通用型NAS中的所有目录及文件。云备份服务支持配置灵活备份策略，将数据备份至云端，您可以随时查看和恢复数据。本文介绍如何通过云备份服务备份通用型...
入门概述
在云桌面内挂载CPFS文件系统 通过NFSv3协议访问CPFS文件系统 协议服务 在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 ...
基本概念
本文介绍了 文件存储 HDFS 版 使用的一些基本概念。术语 描述 文件系统实例 一个拥有全局命名空间，可用来存储数据的文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问...
删除文件系统
警告 删除文件系统后，存储在文件系统中的数据将被删除且无法恢复，请在删除前确认数据已不再使用。登录 文件存储控制台。在左侧导航栏，选择 文件系统>文件系统列表。在顶部菜单栏，选择地域。找到目标文件系统，单击操作列的 图标>删除。...
功能特性
DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件存储上的所有数据（包括静态存储和动态传输中的...
功能特性
管理Fileset 目录配额 管理文件系统中某个目录所能包含的文件数量或者文件大小或者某个用户所能使用的资源 目录配额 生命周期管理 阿里云文件存储通用型 NAS 推出的生命周期管理功能，可以帮助您将低频访问的冷文件数据从标准存储转换到...
SubQuery
获取SubQuery.AggregatorBuilder实例 String getAggregator()获取Aggregator Aggregator getAggregatorType()获取Aggregator类型 String getDownsample()获取降低精度字符 List<Filter>getFilters()获取所有Filter条件 String getMetric()...
获取文件元数据
从环境变量中获取访问凭证。运行本代码示例之前，请确保已设置环境变量OSS_ACCESS_KEY_ID和OSS_ACCESS_KEY_SECRET。provider=new EnvironmentVariableCredentialsProvider();yourEndpoint填写Bucket所在地域对应的Endpoint。以华东1（杭州...
获取文件元数据
默认情况下，在受版本控制的存储空间（Bucket）中调用HeadObject接口仅获取文件（Object）当前版本的元数据。如果您需要返回指定版本Object的元数据，您可以在请求参数中指定版本ID。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您...
基本概念
本文介绍了文件存储NAS相关基本概念，以便于您更好的理解和使用NAS。文件存储NAS使用架构 文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。可支持上千台弹性计算ECS、容器服务ACK等计算节点共享访问，您无需修改...
数据安全
文件存储NAS提供服务器端加密和客户端加密，可有效防止数据在云端的潜在安全风险。数据加密 数据传输加密 文件存储NAS支持TLS传输链路加密，开启TLS功能后，NAS客户端和服务端之间的通信会进行TLS数据传输加密。开启TLS功能的介绍，请参见 ...
服务器端加密
文件存储NAS支持服务器端加密功能。当您对文件存储有高安全性或者合规性要求时，建议您开启服务器端加密功能。开启该功能后，NAS会对存储在文件系统中的数据进行加密，访问数据时，NAS自动将加密数据解密后返回给用户。本文介绍服务器端...
通过云企业网实现同地域跨VPC挂载NAS
步骤三：挂载文件系统 重要 挂载前，请确认文件系统的权限组配置规则中已开放了相应网段，否则，会导致无法访问文件系统。更多信息，请参见 管理权限组。配置云企业网实例完成后，可跨VPC挂载文件系统。通过挂载点挂载文件系统 如果您要...
查看快照容量
根据快照链查看快照容量 快照链是一个数据库文件系统中所有快照组成的关系链，一个文件系统对应一条快照链。快照链的更多信息，请参见 快照链。说明 快照链的容量计算有几分钟延迟，因此该数据仅供参考，实际发生费用请以云盘快照账单为准...
快照链
快照链是一个数据库文件系统中所有快照组成的关系链。一个数据库文件系统（以下简称文件系统）对应一条快照链，快照链有以下信息：快照容量：快照链中所有快照占用的存储空间。快照个数：文件系统当前快照数量。每个文件系统最多只能创建...
获取文件元数据
从环境变量中获取访问凭证。运行本代码示例之前，请确保已设置环境变量OSS_ACCESS_KEY_ID和OSS_ACCESS_KEY_SECRET。auto credentialsProvider=std:make_shared();OssClient client(Endpoint,credentialsProvider,conf);获取文件的部分...
快速入门（CPFS-NFS）（推荐）
（可选）步骤二：创建Fileset Fileset是在CPFS文件系统中的一个小型文件系统，拥有独立的inode空间和管理能力，在文件系统目录结构中表现为一个目录。建议您创建Fileset用于导出数据，创建NFS挂载点。Fileset相比普通目录具备更强的功能，...
概述
本文简要说明非阿里云数据迁移至阿里云文件存储NAS的费用说明、操作流程及迁移工具选择。费用说明 非阿里云数据迁移至阿里云NAS时，会涉及如下费用：文件存储NAS存储费用，推荐购买资源包抵扣。关于NAS的计费详情，请参见 计费概述。如果您...
转码常见问题
如果源文件中部分切片时间戳不连续，会导致无法获取视频流的媒体信息，影响对于转码时长的估计，产生时长偏差的问题。转码时转码模板设置的音/视频码率未生效？请检查转码模板中是否配置了码率检查机制（即点播控制台普通转码模板中 条件...
文件上传
isComplete Boolean 仅当设备请求上传文件中 fileSize 为-1，即文件大小未知时，该参数有效，表示当前分片是否是文件的最后一个分片。true：是。此时，物联网平台的云端会校验已上传文件大小是否超过16 MB：未超过：若文件大小大于0，则...
ALTER PROFILE
DEFAULT：DEFAULT 配置文件中指定的 FAILED_LOGIN_ATTEMPTS 的值。UNLIMITED：正在连接的用户可以进行无限次数的失败登录尝试。PASSWORD_LOCK_TIME 指定在服务器解锁因 FAILED_LOGIN_ATTEMPTS 而被锁定的帐户之前必须经过的时间长度。支持...
获取文件元数据
从环境变量中获取访问凭证。运行本代码示例之前，请确保已设置环境变量OSS_ACCESS_KEY_ID和OSS_ACCESS_KEY_SECRET。EnvironmentVariableCredentialsProvider credentialsProvider=CredentialsProviderFactory....
创建新配置文件
DEFAULT-DEFAULT 配置文件中指定的 FAILED_LOGIN_ATTEMPTS 的值。UNLIMITED – 正在连接的用户可以进行无限次数的失败登录尝试。PASSWORD_LOCK_TIME 指定在服务器解锁因 FAILED_LOGIN_ATTEMPTS 而被锁定的帐户之前必须经过的时间长度。支持...
在文件存储 HDFS 版上使用TensorFlow
本文介绍如何在 文件存储 HDFS 版 上使用TensorFlow。前提条件 已开通 文件存储 HDFS 版 服务并。具体操作，请参见 开通文件存储HDFS版服务。已完成创建文件系统、添加挂载点和挂载文件系统。具体操作，请参见 快速入门。已为Hadoop集群...
监控与日志
监控与日志可有效保障您文件存储NAS资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力，持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务，例如云监控、配置审计等，帮助您实时监控云资源的使用情况和业务运行...
用户和组映射
本文介绍如何管理用户和组的映射关系及使用限制。通过API管理用户和组的映射关系 您可以通过以下API接口管理用户和组的映射关系。CreateUserGroupsMapping：创建用户和组...即一旦一个用户或组以任何方式添加到了文件系统中，则不允许被删除。
Map映射函数和运算符
示例 日志服务数据加工日志中 etl_context 字段值为map类型，您可以使用下标运算符获取 etl_context 字段值中 project 的值。字段样例 etl_context:{ project:"datalab-148*6461-...
什么是CPFS智算版（邀测）
CPFS智算版是阿里云文件存储CPFS推出的一款超高性能的文件存储服务，支持端到端RDMA网络，应用于AIGC、自动驾驶等智算场景。本文介绍CPFS智算版的使用限制、费用说明及操作指引。关于CPFS智算版的性能指标，请参见 产品规格。使用限制 仅...
- 产品推荐
- 这些文档可能帮助您