CDH6数据迁移

cp aliyun-sdk-dfs-x.y.z.jar/opt/cloudera/parcels/CDH/lib/hadoop-hdfs/说明 集群中的每台机器都需要在相同位置添加 文件存储 HDFS 版 Java SDK。部署客户端配置。返回 主页 页面,选择 状态 页签。在左侧集群组件中,单击 HDFS 右侧的 ...

文件存储

本文为您介绍 PolarDB PostgreSQL版(兼容Oracle)的文件存储。主节点和只读节点的数据和WAL日志保存在共享存储中。配置文件、Log文件和临时文件在每个节点都会单独保存。主节点的CLOG文件存储在共享存储中;只读节点的CLOG文件会在各自...

应用场景

文件存储 HDFS 版 适用于对吞吐要求较高的大数据分析与机器...将Hadoop或其他机器学习应用部署在多个计算资源上,这样应用可以直接通过HadoopFS接口访问数据进行离线或在线计算,也可以直接将计算结果输出到 文件存储 HDFS 版 做永久保存

配置CDH6使用文件存储 HDFS 版

集群中的每台机器都需要在相同位置添加 文件存储 HDFS 版 Java SDK。cp aliyun-sdk-dfs-x.y.z.jar/opt/cloudera/cm/lib/cdh6/其中,x.y.z 为 文件存储 HDFS 版 Java SDK版本号,请根据实际值填写。重启服务。登录CDH6的Cloudera Manager...

文件存储HDFS版

文件存储HDFS版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。您可以像在Hadoop分布式文件系统(Hadoop Distributed File System)中管理和访问数据那样使用文件存储HDFS版。您无需对现有大...

CPFS并行文件存储

CPFS并行文件存储 提供高性能计算文件存储,支持标准的POSIX和MPI-IO协议,自带的高性能计算程序无需任何接口适配和性能优化即可高效执行,满足高性能文件存储需求。产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件...

监控与日志

监控与日志可有效保障您文件存储NAS资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力,持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务,例如云监控、配置审计等,帮助您实时监控云资源的使用情况和业务运行...

专属KMS应用部署

操作步骤 将证书文件保存Docker镜像的工作目录中。说明 如果您部署应用使用的非Java语言,则无需拆分CA证书,只需将CA证书保存到应用指定配置目录即可。将CA证书文件拆分为2个证书文件。CA证书文件内容有两部分,均以-BEGIN CERTIFICATE-...

文件存储 HDFS 版和对象存储OSS双向数据迁移

本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS,也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...

账单和用量查询

您可以通过查询文件存储NAS的账单,及时了解其收费明细,更好地从费用分配角度进行业务决策。本文为您介绍查询费用账单和用量明细的操作方法。查看文件系统费用账单 登录 用户中心。在左侧导航栏,选择 账单管理>账单详情。在 明细账单 页...

生命周期管理概述

阿里云文件存储NAS推出的生命周期管理功能,可以帮助您将低频访问的冷文件数据从标准存储转换到低频存储或归档存储中,并采用低频存储或归档存储计费方式,从而减少文件系统的存储费用。本文主要介绍生命周期的策略、使用限制、应用场景、...

生命周期管理FAQ

为了方便您选择生命周期管理策略和需配置的目录,阿里云文件存储NAS提供了NAS分层策略分析工具。您可以使用该工具设置的生命周期管理策略,对指定目录及该目录下的子目录进行扫描并按照冷数据量降序排序,将指定目录中冷数据量最高的几个子...

阿里云存储服务

文件存储 阿里云文件存储NAS(Apsara File Storage)是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统,支持NFS和SMB协议。NAS提供极速型、通用性能型、...

创建文件系统

前提条件 已开通文件存储NAS服务。首次登录 文件存储NAS产品详情页 时,按照页面引导开通服务。重要 在开通页面购买的产品为NAS资源包,并不是NAS文件系统。NAS资源包仅用于抵扣NAS文件系统存储容量费用。更多信息,请参见 资源包概述。...

配置E-MapReduce服务使用文件存储 HDFS 版

本文介绍如何配置E-MapReduce上的HDFS服务、HIVE服务、SPARK服务、HBase服务来使用 文件存储 HDFS 版。前提条件 已完成数据迁移。具体操作,请参见 E-MapReduce数据迁移。配置HDFS服务 登录 阿里云E-MapReduce控制台。在 集群管理 页面,...

高级管理FAQ

当您使用安全服务(例如云安全中心的防勒索服务)扫描通用型NAS低频存储或归档存储中的文件时,安全服务会读取目标文件中的数据,文件存储NAS将收取低频存储或归档存储访问流量费用。更多信息,请参见 通用型NAS计费。创建经典网络挂载点时...

新购ECS时挂载NAS文件系统

挂载多个文件系统 如果要在新购买的ECS实例上同时挂载多个NAS文件系统,请您继续单击 添加文件存储 进行配置。并注意以下几点配置事项:挂载地址:所有的挂载地址必须属于同一个专有网络VPC。如果没有同属于一个VPC的挂载地址,可以为NAS...

身份管理

推荐的做法是使用RAM身份(即RAM用户和RAM角色)来访问文件存储NAS。RAM用户 RAM用户需要由阿里云账号(即主账号)或拥有管理员权限的RAM用户、RAM角色来创建,且必须在获得授权后才能登录控制台或使用API访问阿里云账号下的资源。对于RAM...

logging(日志转存)

prefix 日志文件存储的目录。如果指定此项,则日志文件将保存在目标Bucket的指定目录下。如果不指定此项,则日志文件将保存在目标Bucket的根目录下。重要 生成日志的源Bucket和存储日志的目标Bucket可以相同也可以不同,但是必须位于同一...

存储空间占用情况

OSS-HDFS服务使用OSS Bucket存储HDFS数据及其辅助数据,这些数据均存储于Bucket中的.dlsdata/路径下,并产生相应的OSS存储容量的计量和计费。OSS-HDFS文件数据块block OSS-HDFS文件的所有数据块block均占用OSS Bucket的存储空间。OSS-HDFS...

断点续传上传

同步的方式 以下代码以同步的方式断点续传上传examplefile.txt文件到目标存储空间examplebucket中exampledir目录下的exampleobject.txt文件,并将断点记录文件保存到本地。填写Bucket名称,例如examplebucket。String bucketName=...

日志服务采集数据常见的错误类型

DOCKER_FILE_MAPPING_ALARM 执行Logtail命令添加Docker文件映射失败。单击错误查看详细报错,根据其中的命令以及具体的错误信息进行进一步排查。DOCKER_FILE_MATCH_ALARM 无法在Docker容器中查找到指定文件。单击错误查看详细报错,根据...

数据流动概述

文件存储CPFS与对象存储OSS之间已实现数据流动。您可以通过创建数据流动任务实现不同源端的数据同步。背景信息 当CPFS Fileset 与OSS Bucket创建数据流动后,CPFS文件系统会自动同步OSS Bucket中的对象元数据。同步完成后您能通过高性能且...

CreateSnapshot-创建快照

接口说明 该功能免费公测中,公测期间不保障 文件存储 NAS 服务等级协议(SLA)。仅极速型 NAS 高级型支持创建快照。一个文件系统最多支持创建 128 份快照。文件系统挂载的实例必须处于正常状态,否则无法创建快照。如果创建快照还未完成,...

使用NAS实现共享存储和持久化存储-Flexvolume

已在文件存储控制台创建一个文件系统,请参见 Linux系统挂载NFS协议文件系统。创建的文件系统需要与您的Kubernetes集群在同一可用区。已在创建好的文件系统中添加容器服务Kubernetes集群的挂载点,请参见 管理挂载点。文件系统挂载时的VPC...

在本地控制台上使用文件网关

步骤一:添加缓存 文件存储网关的每个共享目录都对应唯一一个缓存盘,创建多个共享目录则需要创建多个缓存盘。您可以将共享目录下的数据通过缓存盘传至阿里云OSS,也可以通过缓存盘将阿里云OSS数据同步到本地。在浏览器中,输入 https://<...

Linux系统挂载SMB协议文件系统

云服务器ECS(Linux)WebServer共享访问场景 在多个云服务器ECS(Linux)上安装WebServer(如apache),且SMB文件系统作为共享文件存储。说明 SMB文件系统主要特点是共享访问、横向扩展、高可用,由于和本地硬盘实现机理不同,某些场景的小...

基础管理FAQ

文件存储服务默认使用AliyunNASManageENIRole角色来访问您在其他云产品中的资源。解决方案:登录 NAS控制台。在 概览 页面的 常用入口 区域,单击 授权管理。在 极速型和CPFS默认服务授权 卡片,单击 前往授权。在 云资源访问授权 页面,...

媒体处理概述

工作原理 离线转码:将视频文件上传到OSS存储空间,创建媒体处理任务,任务执行成功后,转码后的文件存储在OSS中。边转边播:将视频文件上传到OSS存储空间,创建边转边播播放列表,立即播放,对视频实时按需转码并存储在OSS中。处理参数 ...

管理数据流动任务

本文介绍如何在文件存储控制台创建、管理CPFS数据流动任务及查看任务报告。前提条件 已创建CPFS Fileset。具体操作,请参见 创建Fileset。已创建数据流动。具体操作,请参见 创建数据流动。任务说明 任务类型 按任务对数据的操作,可分为...

功能特性

数据索引 通过云存储网关挂载OSS 通过云存储网关挂载OSS,您可以将OSS映射为一个共享的文件存储系统,实现多个用户在不同地点和设备上共享访问OSS数据。挂载完成后,您可以像使用本地文件夹和磁盘一样操作OSS资源。通过云存储网关挂载OSS ...

cp(拷贝文件

examplebucket2/desfolder/-include"*abc*"-exclude"*.jpg"-exclude"*.txt"-r 修改文件存储类型 您可以在 覆写 文件时,添加-meta 选项来修改文件存储类型。存储类型可选值为:Standard:标准存储 说明 在OSS ON云盒使用场景中,仅支持...

快照

目前,快照功能免费公测中,公测期间不保障 文件存储NAS服务等级协议(SLA)。注意事项 一个文件系统最多支持手动创建128个快照实例和自动创建128个快照实例。如果文件系统存在创建中的快照,您无法为该文件系统再次创建快照。如果创建快照...

DescribeSnapshots-查询快照列表

接口说明 该功能免费公测中,公测期间不保障 文件存储 NAS 服务等级协议(SLA)。仅极速型 NAS 高级型支持该功能。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK...

定时备份

为了避免因误删除、误修改、误覆盖操作等情况引起的数据丢失或受损,您可以通过 云备份 对存储空间(Bucket)内的文件(Object)进行定期备份。当您的Object意外丢失时,可通过云备份进行恢复。云备份 对支持配置灵活备份策略,将数据备份...

CreateAutoSnapshotPolicy-创建一条自动快照策略

接口说明 该功能免费公测中,公测期间不保障 文件存储 NAS 服务等级协议(SLA)。仅极速型 NAS 高级型支持该功能。一个阿里云账号在一个地域最多能创建 100 条自动快照策略。如果文件系统数据较多,单次创建自动快照的时长超过两个时间点...

Linux客户端以AD域用户身份挂载并使用SMB文件系统

您可以在文件存储控制台 文件系统列表 页面,单击目标文件系统前的 图标,在挂载点列表的 挂载点地址 列,将鼠标置于 图标,获取挂载点地址。重启autofs服务。systemctl restart autofs.service 确认自动挂载配置结果。假设创建了/205dee4*...

CPFS-POSIX客户端挂载文件系统(Alibaba Cloud Linux...

文件存储CPFS兼容POSIX接口,通过安装CPFS-POSIX客户端、挂载文件系统使用。文件存储CPFS-POSIX客户端提供定制化服务,支持在Alibaba Cloud Linux 2操作系统中安装使用。如果您希望通过NFS协议访问CPFS文件系统,请参见 CPFS-NFS客户端挂载...

如何在本地数据中心部署云存储网关

选择存储已部署模板的文件位置,单击 下一步。为源网络选择目标网络,单击 下一步。配置模板的部署属性,单击 下一步。单击 完成,启动部署任务。部署完成后,可登录命令行控制台,其默认用户名为root,默认密码为Alibaba#sgw#1030。安装...

截图

输出位置 原存储位置:当文件来源为媒资管理时,处理后文件默认保存至原存储位置。自定义:自定义输出位置。输出地址 当输出位置为 自定义 时,选择输出地址。输出文件名称 输入截图文件的名称。创建动图任务 参数 描述 任务名称 输入截取...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 数据库文件存储 文件存储HDFS版 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用