创建及管理数据集

参数 描述 属性 支持以下取值:文件:选择一个具体的文件,用于 iTAG 的数据集建议选择为文件创建好的数据集会对应该具体文件的路径。文件夹:选取一个文件夹路径,用于DSW、DLC或EAS的数据集建议选择为文件夹,可被挂载在容器中。可见...

基础管理FAQ

本文介绍创建或删除NAS文件系统、添加或删除挂载点等的常见问题。每个账号可以创建多少个文件系统、文件系统有什么限制?每个账号在单个地域内最多支持创建20个通用型NAS文件系统和200个极速型NAS文件系统。单个文件系统容量上限:通用容量...

初始化大于2 TiB数据盘

步骤三:为分区创建文件系统 在新分区上创建一个文件系统。不同文件系统支持的分区大小不同,请您根据实际需求创建文件系统。运行以下命令,创建文件系统。以下示例命令介绍如何创建ext4和xfs文件系统。创建一个ext4文件系统 sudo mkfs-t ...

创建部署物

资源组对您拥有的云资源用途、权限、归属等维度进行分组,实现企业内部多用户、多项目的资源分级管理。更多信息,请参见 计算巢资源组管理。标签配置:选择或填写完整的标签键和标签值,为部署物定标签。每个资源最多可绑定20条标签。...

功能特性

对象标签 上传文件 创建存储空间后,您可以通过多种上传方式将任意类型文件上传到该存储空间。上传文件 下载文件 文件上传至存储空间后,您可以通过多种下载方式将文件下载至浏览器默认路径或本地指定路径。下载文件 列举文件 Bucket内的...

将NAS数据迁移至本地

通过Robocopy工具迁移数据 方案优势:Robocopy是Windows系统自带的目录复制命令,该功能可以创建两个文件结构相同的镜像副本且不复制任何不需要的重复文件,同时还允许您保留所有相关的文件信息,包括日期、时间戳等等。同时您也可以通过在...

数据节点

本文为您介绍如何创建数据节点。完成创建后,您可以在 数据节点 页面,查看当前租户下的所有数据节点。节点列表支持按照数据节点名称进行筛选(支持模糊匹配),还支持按类型(文件、DB、离线)进行筛选。创建数据节点 登录资金安全监控...

配置HDFS输出组件

合并策略 选择输出数据的线程:合并:则所有数据会合并成一个文件,采用单线程输出,大文件输出速度会受影响。重要 合并不支持追加数据。不合并:采用多线程输出,会生成多个文件。导出压缩文件 支持是否将文件以压缩文件格式导入目标库,...

使用Fluid加速Lindorm S3协议兼容的数据访问

您需要在Lindorm S3中写入数据,如下示例使用write.yaml文件创建Job任务,利用elbencho镜像建立容器来写数据。示例中写入总数据量为15.625 GB。为了保证数据能及时写入到Lindorm S3,请确保runtime.yaml文件中 properties 的写模式设置为 ...

受众基本功能

在 受众管理 页面,您可以创建受众文件夹,通过上传文件、读取数据源中的表、受众交并的方式新建受众,对 我的受众 页签中的受众进行编辑、更新、下载、移除、快照等操作,以及对 公共受众 页签中的受众进行复制、下载。说明 对于管理员,...

基本概念

本文介绍了文件存储NAS相关基本概念,以便于您更好的理解和使用NAS。文件存储NAS使用架构 文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。可支持千台弹性计算ECS、容器服务ACK等计算节点共享访问,您无需修改...

数据流动概述

按需加载 CPFS文件系统与OSS Bucket建立数据流动后,当您访问CPFS目录或文件时会按需OSS加载需要的元数据或数据。例如,执行 ls 命令列出与OSS Bucket链接的目录时,会按需OSS加载目录项的元数据,在访问文件时会按需OSS加载文件的...

初始化小于等于2 TiB数据盘(Linux)

步骤三:为分区创建文件系统 在新分区上创建一个文件系统。不同文件系统支持的分区大小不同,请您根据实际需求创建文件系统。运行以下命令,安装e2fsprogs工具。sudo yum install-y e2fsprogs 说明 此步骤中yum命令适用于CentOS等Linux发行...

配置NAS文件系统

文件存储NAS 创建NAS文件系统 添加挂载点 配置NAS 函数计算 的NAS配置为服务级别,为一个服务配置NAS挂载点后,此服务下的所有函数都可以访问指定NAS文件系统文件。登录 函数计算控制台,在左侧导航栏,单击 服务及函数。在顶部菜单栏...

数据集概述

在数据源模块中配置好所需数据源后,基于产品内置的消费者运营模型,您可以完成企业一方用户标签数据集、行为数据集等的创建,为后续的洞察圈选、营销投放功能提供数据基础。支持创建以下数据集:用户标签数据集:基于用户标签宽表构建...

备份本地NAS文件

为了避免本地NAS(用户自建文件系统)数据丢失或受损,建议您通过 云备份 对自建文件系统NAS中的所有目录及文件进行备份。云备份 支持配置灵活备份策略,将数据备份至云端,您可以随时查看和恢复数据。本文介绍如何使用 云备份 备份本地NAS...

API概览

文件管理 文件管理 CreateCdsFile 创建文件夹或创建文件上传任务 在网盘中创建文件夹或者创建文件上传任务。CompleteCdsFile 完成文件上传 创建文件上传任务后,调用本接口完成上传动作。CopyCdsFile 复制文件文件夹 为网盘中的文件或...

使用Robocopy工具迁移数据

切换应用到新的文件系统 在数据迁移完成后,如果您需要将现有业务旧的文件系统切换到新的文件系统,请在所有ECS和容器卸载旧的文件系统,然后挂载新的文件系统。使用ECS直接挂载NAS文件系统。执行 net use 记录现有NAS挂载信息,注意...

使用NAS动态存储卷

虚拟交换机 表示创建通用型NAS文件系统所使用的虚拟交换机,下拉菜单任意选择一项即可。总量 固定为10Pi,表示通用型NAS文件系统的最大容量。访问模式 默认为 ReadWriteOnce,也可选择 ReadWriteMany。单击 创建创建成功后,在 存储...

在云控制台使用文件网关

在需要创建上文件网关的地域,已有可用的云服务器ECS,作为客户端机器,并将此云服务器ECS归属到已创建的专有网络VPC下,更多信息,请参见 创建ECS实例。说明 如果您的本地主机已通过专线和阿里云专有网络连通,您也可以使用本地主机进行...

EFC加速NAS或CPFS文件访问

文件创建出来后,就可以立即让所有的其他客户端同步访问到,便于您在多节点间管理数据。端单机读写缓存能力:优化了FUSE的缓存逻辑,利用计算节点的少量内存,提供了更好的小文件读写性能。相比于传统的NFS客户端,性能提升了50%以上...

创建同步计划

当同步数据量极文件数据极多,同步任务存在性能问题需要调优时,建议调整。单个子任务最大文件数:根据调优情况修改即可。单个子任务最大数据量:根据调优情况修改即可。创建计划完成后,您可以在 同步计划 页签看到已创建同步计划。...

管理配置项

单击 从文件导入,本地选择配置项映射文件。EDAS会自动解析配置项映射文件,以键值对形式展示。EDAS会对配置项映射文件进行格式检验,目前支持JSON、YAML和Properties三种类型文件。说明 请跟据您的文件类型,设置配置项映射信息。此处仅...

通过事件通知实时处理OSS文件变动

CopyObject 通过拷贝文件创建或覆盖文件。InitiateMultipartUpload 初始化一个分片上传任务。UploadPart 通过上传分片创建或覆盖文件。UploadPartCopy 通过分片拷贝创建或覆盖文件。CompleteMultipartUpload 完成分片上传。...

数据流动概述

数据的导入与导出 您可以创建数据流动任务实现CPFS智算版文件系统与OSS之间的数据导入和导出,以便在计算任务开始前将数据同步至高性能的CPFS智算版文件系统。如果任务执行失败,您可以通过任务报告检查失败原因。重要 CPFS智算版会将...

批量创建设备

创建设备成功后,单击 下载设备证书,下载本批次设备的设备证书,用于在产线统一烧录。说明 如果创建产品时,选择认证方式为 X.509证书,批量创建设备成功后,返回的X.509证书下载URL(CertUrl)有效期为180日,请及时下载。下载包中,...

部署高可用及共享存储Web服务

如果对于写有可用性要求,那么在Master NAS故障恢复后,不应该立即将 ECS 应用的操作文件目录切换到Master NAS的挂载点目录,应该先将故障期间,Backup NAS产生的新文件,同步到Master NAS之后,再做切换,并且要确保切切换期间,...

管理数据流动任务

删除(Evict)将释放CPFS上文件的数据,删除后文件在CPFS只保留元数据,您仍能看到该文件,但文件的数据块已清除,不占用CPFS的存储空间,访问该文件数据时,再源端存储(例如OSS)按需加载。说明 删除前,请务必确认对应文件在OSS...

后续操作

本文介绍迁移任务创建后的一些后续操作。查看迁移任务状态 迁移任务创建后,有以下多种状态:已创建:迁移任务已创建。用户可手动点启动或者等待到达指定的起始时间,系统启动任务。启动:任务创建成功且已启动,等待调度。准备:数据预...

挂载访问FAQ

拷贝大文件时报"cp:error writing 'o/file>':Bad file descriptor",该如何处理?当文件系统无法结束进程时,如何清理客户端泄露的句柄?Windows挂载NFS文件系统 如何检查并解决Windows NFS soft挂载问题?如何解决Windows挂载NFS文件系统...

OSS数据源

元数据发现任务可以在单次运行中自动为OSS上面的数据文件创建和更新数据湖元数据(一张或多张表),具有自动探索文件数据字段及类型、自动映射目录和分区、自动感知新增列及分区、自动对文件进行分组建表的能力。OSS数据源配置模式 OSS数据...

迁移开源HDFS的数据到文件存储 HDFS 版

文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云,并允许您在云就像在Hadoop分布式文件系统中管理和访问数据。准备工作 开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。...

mb(创建存储空间)

StorageClass>IA</StorageClass><DataRedundancyType>LRS</DataRedundancyType></CreateBucketConfiguration>ossutil先本地文件路径读取Bucket配置,然后将读取到Bucket配置添加到待创建的Bucket。...

通过DaemonSet方式采集Kubernetes容器文本日志

但是,容器内的文件系统都是由宿主机的文件系统挂载形成,通过将宿主机根目录所在的文件系统挂载到Logtail容器,就可以访问宿主机的任意文件,从而间接采集业务容器文件系统的文件。容器内文件路径与宿主机文件路径之间的关系被称为文件...

采集主机文本日志

前提条件 已创建Logtail机器组并添加相应服务器,创建机器组的步骤,请参见 创建用户自定义标识机器组(推荐)或 创建IP地址机器组。安装Logtail的主机需开放80(HTTP)端口和443(HTTPS)端口。ECS实例的端口由安全组规则控制,添加安全组...

导入镜像

如果无影云电脑提供的镜像无法满足业务要求,您可以制作自定义镜像并将其导入无影云电脑控制台,然后在创建云电脑时使用该自定义镜像。本文介绍如何制作自定义镜像并将自定义镜像导入无影云电脑。前提条件 如果您是RAM用户,需先联系阿里云...

简介

文件的NFSv4 ACL权限表 权限位 功能介绍 注意事项 r 读文件 无 w 写文件/创建文件 需要wa同时存在才起效,单独w无效。a 追加写文件 需要wa同时存在才起效,单独a无效。x 执行文件 需要rx同时存在才起效,单独x无效。d 删除文件 d权限无效。...

使用Packer创建自定义镜像

Packer工具包含 Builders(生成器)、Provisioners(配置器)、Post-Processors(后处理器)等组件,通过HCL(HashiCorp Configuration Language)或者JSON格式的模板文件地降低了创建自定义镜像的难度,并且将创建镜像的过程人工的...

计费常见问题

据统计分析,部分用户文件系统中80%的数据均为冷数据,按80/20定律进行成本估算,使用低频存储后,原性能型NAS文件系统的有效存储成本可降低至0.49元/月/GiB,原容量型NAS文件系统的有效存储成本可降低至0.19元/GiB/月。购买了资源包什么...

配置OSS文件系统

例如,OSS本身不支持随机写,当您需要使用文件系统API变更OSS挂载点现有的文件时,函数计算 会将源文件从OSS全量下载并改写后重新上传到OSS。当文件系统API与OSS API功能对应时,例如顺序的文件读写,通常操作执行的性能较好。而需要组合...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 云数据库 RDS 无影云电脑 云备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用