文件存储 HDFS 版上使用Apache Spark

source/etc/profile 配置 文件存储 HDFS 版 的Java SDK。您可以 下载最新的文件存储 HDFS 版的Java SDK,将其部署在Hadoop生态系统组件的CLASSPATH上,具体操作,请参见 挂载文件存储 HDFS 版文件系统。cp aliyun-sdk-dfs-x.y.z.jar/usr/...

使用Fuse-DFS挂载文件存储 HDFS 版

步骤一:Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作,请参见 挂载文件存储 HDFS 版文件系统。步骤二:配置Fuse-DFS 在Hadoop客户端上安装依赖并载入FUSE模块。执行以下命令,安装依赖。yum...

文件存储 HDFS 版上使用Apache Flink

source/etc/profile 配置 文件存储 HDFS 版 的Java SDK。您可以 下载最新的文件存储HDFS版的Java SDK,将其部署在Hadoop生态系统组件的CLASSPATH上,具体操作,请参见 挂载文件存储 HDFS 版文件系统。cp aliyun-sdk-dfs-x.y.z.jar/usr/...

核心文件监控

核心文件监控功能可以实时监控服务器上核心文件的访问情况,对文件的访问、修改、删除、重命名等操作进行实时监控和告警,可监控核心文件是否被盗取或篡改。本文介绍如何实现对服务器核心文件访问的监控。使用限制 仅云安全中心的企业版和...

迁移开源HDFS的数据到文件存储 HDFS 版

在迁移集群中配置 文件存储 HDFS 版 实例。具体操作,请参见 挂载文件存储HDFS版文件系统。验证迁移集群和 文件存储 HDFS 版 实例之间的连通性。执行以下命令,在 文件存储 HDFS 版 上创建目录(例如/dfs_links)。hadoop fs-mkdir/dfs_...

CDH6数据迁移

步骤二:配置 文件存储 HDFS 版 登录CDH6的Cloudera Manager管理页面。配置 文件存储 HDFS 版 实现类及Java SDK。在 主页 页面,选择 配置>高级配置代码段,进入 高级配置代码段 页面。在搜索框中输入 core-site.xml 进行搜索,在搜索结果...

文件存储 HDFS 版上使用Apache HBase

步骤一:Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作,请参见 挂载文件存储 HDFS 版文件系统。步骤二:配置Apache HBase 将Hadoop中配置的core-site.xml复制到${HBASE_HOME}/conf目录下。cp...

文件存储 HDFS 版和对象存储OSS双向数据迁移

步骤一:Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作,请参见 挂载文件存储 HDFS 版文件系统。步骤二:Hadoop集群部署JindoSDK 下载最新的 JindoSDK安装包。本文以jindosdk-4.5.0为例。执行...

文件存储 HDFS 版上使用Presto

步骤一:Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作,请参见 挂载文件存储 HDFS 版文件系统。步骤二:配置Presto 执行以下命令,解压Presto安装包。tar-zxf presto-server-0.265.1.tar.gz ...

文件存储 HDFS 版和数据库MySQL双向数据迁移

步骤一:Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作,请参见 挂载文件系统。步骤二:安装Sqoop 目前Sqoop分为Sqoop1和Sqoop2两个版本,且两个版本并不兼容。本文以Sqoop1的稳定版本Sqoop 1...

文件存储 HDFS 版上使用Apache Tez

步骤一:Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作,请参见 挂载文件系统。步骤二:安装Tez到Hadoop集群 安装Tez共有三种安装方式,差异点如下。安装方式 说明(推荐)方式一:安装Tez时...

配置CDH6使用文件存储 HDFS 版

数据迁移完成后,您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务,才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令,将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...

关于NAS和CPFS计费项名称调整的公告

通用型存储容量(容量型/性能型)低频存储容量 低频介质存储容量 二级存储读流量 低频存储读流量 二级存储写流量 低频存储写流量 极速型NAS 存储容量 极速型配置容量 文件存储CPFS 存储容量 CPFS配置容量 调整影响 仅对按量计费的计费项...

OSS配置文件生命周期后未生效的原因分析

阿里云对象存储OSS配置文件生命周期或者修改生命周期后,生命周期规则未生效。本文主要介绍生命周期规则未生效的原因。详细信息 生命周期规则创建后的24小时内,OSS会加载规则。规则加载完成后,OSS会在每天的北京时间 8:00 开始执行规则,...

搭建FTP服务器(Linux)

listen=YES 在行首添加#注释掉以下参数,关闭监听IPv6 sockets:#listen_ipv6=YES 在配置文件的末尾添加下列参数,其中 pasv_address 参数需要替换为轻量应用服务器的公网IP地址:#设置本地用户登录后所在目录。local_root=var/ftp/test#...

入门概述

本文介绍从创建到使用CPFS文件系统的全流程,帮助您快速...配置文件系统的ACL权限 基于NFSv4协议的访问控制 常见问题 什么是文件存储CPFS?CPFS的使用场景有哪些?文件存储CPFS支持哪些访问协议?文件系统用于计费的存储容量是如何计算的?

监控存储资源

E-HPC提供了存储资源监控功能,方便您在控制台查看存储资源的性能和容量数据,了解存储资源的使用情况。前提条件 如果使用RAM用户操作,请确保RAM用户具有通过控制台查看共享存储监控指标的权限。展开查看权限内容 {"Version":"1",...

使用rsync工具迁移数据

本文介绍如何使用rsync工具实现阿里云文件存储NAS NFS协议文件系统之间的数据迁移。前提条件 已拥有一个存有数据的NFS协议文件系统,并且拥有一个专有网络类型挂载点。费用说明 NAS与NAS之间的迁移,会涉及如下费用:使用ECS作为数据传输的...

入门概述

配置文件系统容灾方案 手把手教您配置通用型NAS容灾 配置文件系统的ACL权限 NAS SMB ACL NAS NFS ACL 常见问题 开通NAS服务后,就开始计费吗?NAS是否支持在非阿里云计算节点中挂载?NAS的存储类型、存储规格支持相互转换吗?多个计算节点...

ossutil概述

config 创建配置文件存储OSS访问信息。cors 添加、修改、查询、删除Bucket的CORS配置。cors-options 用于测试Bucket是否允许指定的跨域访问请求。cp 用于上传、下载、拷贝文件。create-symlink 创建符号链接(软链接)。du 用于获取指定...

服务器监测

本文主要介绍如何从零开始配置服务器各项监控指标的操作步骤。操作步骤 步骤一:创建监控项,请参见 监控项管理。登录 云网管控制台。在控制台左侧菜单栏单击 网络监控>监控项管理。单击列表上方的 创建自定义监控项 按钮,选择 创建服务器...

文件存储CPFS监控概述

通过查看文件存储CPFS文件系统的容量监控和性能信息,您可以了解文件系统的存储容量使用情况和读写吞吐、读写IOPS等情况。通过为文件系统的重要监控指标设置报警规则,您可以及时获知指标异常并快速处理异常。本文介绍文件存储CPFS支持的...

最佳实践

容器与云原生 如何利用云存储网关作为Windows Docker存储访问OSS 在Linux Docker容器中挂载使用云存储网关 Windows应用 利用云存储网关搭建Windows文件共享服务器 利用云存储网关的SMB共享搭建windows FTP服务器访问对象存储OSS 如何基于云...

配置基础告警规则

配置示例 例如:配置文件系统数据量连续3个周期大于或等于4,155,796,933,836字节时,触发紧急级别的报警。说明 当文件系统进行扩容操作后,由于总存储空间发生了变化,您需要修改报警规则,重新设置阈值。如果需要监控文件系统的多个性能...

能够ping通Linux服务器但是无法远程连接

本文主要介绍能够ping通Linux服务器但是无法远程连接的问题描述、问题原因及其解决方案。问题描述 无法远程连接Linux系统的阿里云轻量应用服务器,但是可以ping通该Linux服务器。报错信息如下图所示。问题原因 可能原因如下:服务器密码...

卸载并释放CDH6 HDFS服务使用的云盘

配置CDH使用 文件存储 HDFS 版 文件系统。具体操作,请参见 配置CDH6使用文件存储HDFS版。背景信息 当CDH已经成功运行在阿里云 文件存储 HDFS 版 上时,ECS挂载的云盘只用来存储运算中的临时Shuffle文件,可以选择卸载原来用于构建CDH ...

基本概念

每个挂载点都对应一个域名,您需要修改 core-site.xml 中的配置来访问 文件存储 HDFS 版 中的文件。权限组 权限组是若干访问文件系统的权限规则的集合。包括授权地址、读写权限、用户权限等。说明 每个挂载点都必须与一个权限组绑定。权限...

高级管理FAQ

文件系统中包含每月访问频率或每季度访问频率低于2次的文件时,可以开启通用型NAS生命周期管理功能,符合生命周期管理策略的文件将自动转储至低频存储或归档存储,采用低频存储计费方式,从而降低存储成本。为什么我的文件系统不支持生命...

CPFS-NFS客户端挂载文件系统(推荐)

CPFS-NFS客户端配置 配置文件 如果您需要修改CPFS-NFS客户端配置,请联系CPFS技术支持团队,并在团队指导下修改配置文件,否则可能会影响IO访问。配置文件路径:/etc/aliyun/cpfs/cpfs-utils.conf。配置示例如下:[DEFAULT]logging_level=...

查看NAS容量监控

文件存储NAS已与云监控无缝集成。通过容量监控功能,您可以实时查看通用型NAS存储空间中通用型NAS数据量和低频介质数据量以及低频读写数据流量和文件数。本文介绍如何查看通用型NAS的容量监控数据。前提条件 已创建NAS文件系统。具体操作,...

单笔数据 Top

配置自定义监控主要包括如下的步骤:选择监控产品 填写基本信息 配置日志筛选 设置列值分组 选择统计方式 配置报警 配置诊断 一、选择监控产品 进入控制台,单击左侧导航栏中的 自定义监控。在 自定义监控 页面,单击 新增。在 常用 页签下...

功能特性

数据管理 功能集 功能 功能描述 参考文档 存储类型 标准存储 提供高可靠、高可用、高性能的对象存储服务,面向温热数据,适合支持频繁的数据访问。标准存储 低频访问存储 提供高持久性、较低存储成本的对象存储服务。有最小计量单位(64 KB...

新功能发布记录

2023-02-14 全部 NAS监控概述 查看NAS容量监控 配置基础报警规则 历史年份 表 1.2022年 功能名称 功能概述 发布时间 发布地域 相关文档 通用型NAS容量监控 通用型NAS支持容量监控,通过云监控服务可实时监控文件系统实例的存储概况,包括...

创建文件系统

在 创建 面板,配置文件系统相关信息。参数 说明 地域 选择要创建文件系统的地域。说明 不同地域的文件系统与云服务器ECS不能直接连通,建议文件系统与待挂载的云服务器ECS实例在同一地域。您还可以通过云企业网实现跨地域挂载,但跨地域...

应用托管概述

在 SAE 上,您可以低门槛拥抱容器技术,无需管理和维护集群与服务器,专注于设计和构建应用程序,最大化利用资源完成应用的生命周期管理,以及监控、运维等服务。本文介绍 SAE 支持的应用类型、部署方式和托管功能。应用部署方式 当应用...

管理时间同步服务

配置文件中找到 server服务器>minpoll 4 maxpoll 10 iburst 的信息后,按 i 键编辑文件,在您暂时不需要的NTP服务器句首前添加符号#进行隐藏。添加新的NTP服务器。您可以在配置文件中添加新的NTP服务器,格式为:server服务器>minpoll 4 ...

配置自定义业务监控

本指南以添加分钟统计/无 Key 监控产品为例,介绍如何快速配置自定义监控。关于此任务 分钟统计/无 Key 监控产品是通过对日志固定位置的关键字筛选,统计单个指标数据,如统计某个接口被调用的总量等。了解该监控产品的应用场景及细节,...

分钟统计/无 Key

配置自定义监控主要包括如下的步骤:选择监控产品 填写基本信息 采集筛选 配置日志筛选 选择统计方式 配置告警 配置诊断 一、选择监控产品 进入控制台,单击左侧导航栏中的 自定义监控。在 自定义监控 页面,单击 新增。在 常用 标签页下,...

什么是应用实时监控服务ARMS?

应用实时监控服务(Application Real-Time Monitoring Service)作为一款云原生可观测产品平台,包含应用监控、前端监控、Prometheus监控、云拨测、Grafana服务、告警管理等一系列子产品。其覆盖浏览器、小程序、APP、分布式应用、容器等...

存储空间概述

✓ ✓ 服务器端加密 当您在设置了服务器端加密的存储空间(Bucket)中上传文件(Object)时,OSS对收到的文件进行加密,再将得到的加密文件持久化保存。当您通过GetObject请求下载文件时,OSS自动将加密文件解密后返回给用户,并在响应头中...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 云服务器 ECS 轻量应用服务器 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用