SELECT INTO OUTFILE
如果Hadoop集群开启高可用，示例如下。HA fileSystem_port默认值为8020 SELECT*FROM tbl INTO OUTFILE"hdfs:/path/to/result_"FORMAT AS CSV PROPERTIES('fs.defaultFS'='hdfs:/hacluster/','dfs.nameservices'='hacluster','dfs.ha....
将EIP绑定至高可用虚拟IP
您可以将 弹性公网 IP EIP（Elastic IP Address）绑定到高可用虚拟IP上，使高可用虚拟IP具备公网通信的能力。前提条件 您已经创建了高可用虚拟IP，且高可用虚拟IP满足以下条件：高可用虚拟IP实例的地域必须和 EIP 的地域相同。高可用虚拟IP...
镜像介绍
WordPress 4.8.1：该镜像基于CentOS 7.3 64位操作系统。WordPress 5.6.2：该镜像基于CentOS 8.2 64位操作系统。WordPress 6.0.0：该镜像基于Alibaba Cloud Linux 3 64位操作系统。Docker 19.03 Docker是当前流行的开源容器引擎，可以让开发...
常见问题
hadoop jar<hadoop_home>/share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-*-tests.jar sleep-m 1-mt 1000-r 0 您可以在 sleep-m 之间新增配置项以指定Queue，新增的参数为-Dmapreduce.job.queuename，参数值为default。...
测试环境
实例镜像为CentOS 7.4 64位。说明 ECS实例的规格较高是为了保证测试时性能瓶颈不在ECS端。测试的RDS实例信息如下：存储类型为本地SSD盘。实例规格为通用型的各类规格。参数模板为 MySQL_InnoDB_高可用系列_默认参数模板。
使用CreateCluster API创建集群
高可用HA集群应用填写 选择安装应用 必须安装的依赖应用 不可同时安装的互斥应用 HDFS Hadoop-Common、ZooKeeper OSS-HDFS OSS-HDFS Hadoop-Common HDFS Hive Hadoop-Common、YARN、ZooKeeper、HDFS或者OSS-HDFS任选其一 无 Spark2 Hadoop-...
源站获取客户端IP
支持的Linux版本 RPM包下载 CentOS 6.5 CentOS 6.5 RPM CentOS 6.9 CentOS 6.9 RPM CentOS 7.0 CentOS 7.0 RPM CentOS 7.2 CentOS 7.2 RPM CentOS 7.3 CentOS 7.3 RPM CentOS 7.4 CentOS 7.4 RPM CentOS 7.5 CentOS 7.5 RPM alicdn.alios7 ...
CentOS7系统如何修改hostname
概述 与CentOS6相比CentOS7有了巨大变化，直接影响使用的变化时不少命令在CentOS7下已经无法使用或者存在其它替代命令。此文旨在说明如何在CentOS7下修改hostname。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必...
Hadoop集群迁移至DataLake集群
本文将详细阐述如何将您已有的旧版数据湖集群（Hadoop），高效地迁移至数据湖集群（DataLake），以下分别简称“旧集群”和“新集群”。迁移过程将充分考虑旧集群的版本、元数据类型以及存储方式，并针对这些因素，提供适应新集群的迁移策略...
高可用版
云时序数据库InfluxDB®的产品系列包括基础版和高可用版，本文介绍高可用版的相关信息。高可用版是适用性较广的云数据库系列。采用Raft三节点的高可用架构，适合80%以上的用户场景，包括互联网基础资源监控，容器监控，业务运营监控分析，...
如何在CentOS7系统中使用iptables
概述 CentOS7系统默认的防火墙是Filewalld。但是，仍有大量用户习惯于在CentOS7系统中使用iptables。本文以CentOS7.4为例，说明在CentOS7系统中如何安装并使用iptables。详细信息 本文主要介绍如下几点内容。禁止Filewalld开机启动 安装...
PrivateZone&VPN网关联动实现云上访问云下资源
自建IDC和阿里云VPC分别属于两套网络环境，但部署在自建IDC和阿里云VPC内的业务都需要通过DNS解析进行业务间调用，并且分别管理两套数据不仅给运维工程师带来重复性工作的增加，同时也会产生数据一致性管理的风险，给业务带来很高的不确定...
Hadoop
本文主要介绍如何使用DLA Spark访问用户VPC中的HADOOP集群（开启kerberos认证的集群暂不支持）。前提条件 您已开通数据湖分析DLA（Data Lake Analytics）服务。如何开通，请参见 开通云原生数据湖分析服务。您已登录云原生数据库分析DLA...
添加数据源
NFS-CentOS:sudo yum install nfs-utils-Ubuntu:sudo apt-get install nfs-common SMB-Centos:sudo yum install cifs-utils-Ubuntu:sudo apt-get install cifs-utils-openSUSE:sudo zypper install cifs-utils GlusterFS-CentOS:sudo yum ...
基于Hadoop集群支持Delta Lake或Hudi存储机制
涉及模块 对应阿里云产品 说明 开源Hadoop 本地机房搭建Hadoop集群 云上虚拟机搭建Hadoop集群 阿里云E-MapReduce 原始数据存储在Hadoop集群中。基于Hadoop集群支持Delta Lake或Hudi湖仓一体架构 前提条件 已创建MaxCompute项目（非External...
最佳实践概览
轻量应用服务器提供了部分最佳实践，包括搭建环境、搭建网站、数据传输、迁移服务器以及高可用架构等。您可以根据实际需求，参考相应文档完成服务器的搭建。搭建环境 阿里云轻量应用服务器提供了多种镜像，您可以通过应用镜像快速部署应用...
Kubernetes集群使用CentOS 7.6系统时kubelet日志含有...
问题描述 Kubernetes集群使用CentOS 7.6版本的系统时，kubelet日志中可能存在以下告警信息。Reason:KubeletNotReady Message:PLEG is not healthy:问题原因 CentOS 7.6系统使用的systemd-219-62.el7_6.6.x86_64软件包存在缺陷，引发异常...
高可用版
图数据库GDB支持高可用版和单节点版两个系列。高可用版采用一主一备的经典高可用架构（主备节点均为独立的图数据库节点），计算与存储分离，较单节点版具有更高的可用性。优势 可用性 采用经典高可用架构，主备之间通过复制（默认半同步）...
在CentOS 7系统的ECS实例中，执行cloud-init-versions...
本文介绍在CentOS 7系统的ECS实例中，执行 cloud-init-versions 命令提示“No module named 'requests.packages.urllib3'”错误的解决方案。问题现象 在CentOS 7系统的ECS实例中，执行 cloud-init-versions 命令提示“No module named '...
CentOS 7系统中如何查看并设置开机启动项
概述 本文主要介绍CentOS 7系统如何查看并设置开机启动项。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，...
CentOS 7实例设置的DNS被重置
问题描述 CentOS 7实例设置的DNS被重置。编辑/etc/resolv.conf 文件，修改DNS为非阿里云DNS。重启服务器后，DNS被还原为之前默认的DNS配置。问题原因 CentOS 7公共镜像中，DNS的 etc/resolv.conf 文件是通过执行/usr/sbin/dhclient-script ...
开通AHAS
本文介绍如何开通应用高可用服务AHAS（Application High Availability Service）。前提条件 您已登录阿里云账号，并完成账号的实名认证。个人实名认证 企业实名认证 操作步骤 打开 AHAS开通 页面。在应用高可用服务的多活容灾模块页面，...
操作系统迁移
操作系统迁移可将阿里云ECS云服务器操作系统从CentOS 7/8平滑迁移到Alibaba Cloud Linux和Anolis操作系统，提高您更换CentOS操作系统的效率。本视频指导您如何迁移阿里云ECS实例的操作系统。
【通知】故障演练功能模块退市公告
由于业务及技术架构调整，阿里云将于2024年05月01日起停止应用高可用服务AHAS下的故障演练功能模块的技术支持，并于2024年11月01日正式下线该模块，但飞天企业版的应用高可用服务AHAS的故障演练CHAOS模块将持续发展。此外，应用高可用服务...
配置服务器防火墙
CentOS 7 连接自建PostgreSQL所在服务器。查看已开放端口。firewall-cmd-list-ports 设置PostgreSQL数据库端口允许被访问。firewall-cmd-zone=public-add-port=5432/tcp-permanent 重启防火墙。firewall-cmd-reload CentOS 6及以下 连接自...
管理探针
应用高可用服务AHAS会通过探针从您的系统中采集所需的信息。本文介绍了如何安装、升级、停止和卸载探针。什么是探针？应用高可用服务AHAS包括以下两种探针：应用高可用探针（即AHAS探针）：这是安装在操作系统上的独立进程，用来采集架构...
迁移开源HDFS的数据到文件存储 HDFS 版
基于阿里云ECS搭建Hadoop集群（下称"迁移集群"），用于访问 文件存储 HDFS 版 实例和迁移数据，并满足以下条件：迁移集群与 文件存储 HDFS 版 实例在相同区域、相同可用区。迁移集群与 文件存储 HDFS 版 实例的挂载点使用相同阿里云VPC网络...
YARN概述
非HA集群部署在EMR的Master节点上，HA集群部署在EMR的多个Master节点上，保证了高可用性。NodeMananger 负责节点的资源管理、监控和作业运行。部署在EMR的Core或Task节点上。MRHistoryServer（MapReduce History Server）解析MapReduce作业...
CentOS 7系统重启后网络无法启动
问题描述 CentOS 7系统重启后网络无法启动，在系统内部启动Network服务报“Job for network.service failed because the control process exited with error code”错误。执行 ifup eth1 和 ifconfig eth1 命令，出现如下错误。说明 本文以...
Nginx接入Sidecar根据文档操作还是提示不兼容怎么办？
问题现象 按照 接入Nginx 文档中的步骤 4 操作，在CentOS 7操作系统下，Nginx版本为nginx-1.16.1，使用对应动态模块路径的 lib/centos7-nginx-1.16.1/ngx_sentinel_module.so，但系统还是提示Nginx不兼容。如下图所示。可能原因 Nginx自身...
基于SCC实例规格族的RDMA驱动安装说明
如果您是基于CentOS 7.9或CentOS 8.4版本的自定义镜像创建的ecs.sccc7或ecs.sccg7规格族的超级计算集群SCC（Super Computing Cluster）实例，且需要实现多台实例之间使用RoCE RDMA通信，则需要参考本文在实例内手动安装RDMA驱动，来保证您...
集群概述
公共镜像 支持的调度器 支持的域账号服务 支持的共享存储 CentOS 7.2 64位 CentOS 7.3 64位 CentOS 7.4 64位 CentOS 7.5 64位 CentOS 7.6 64位 CentOS 7.8 64位 CentOS 7.9 64位 CentOS 7.9 64位 UEFI版 PBS Pro18 PBS Pro19 Slurm 17 ...
开启或关闭Linux实例中的系统防火墙
iptables-F 更多信息 关于在CentOS 7系统中如何使用iptables服务，请参见 如何在CentOS7系统中使用iptables。Ubuntu系统中没有iptables服务，因此Ubuntu系统中也没有/etc/sysconfig/iptables 规则文件，关于在Ubuntu系统中如何备份iptables...
计费概述
应用高可用服务产品的计费规则、价格说明、欠费说明等信息请前往 产品价格页面 查看。
HBase集群配置为高可用
HBase集群的配置为高可用，视为“合规”。应用场景 推荐您使用配置为高可用的集群，提升系统的稳定性，减少业务中断风险。风险等级 默认风险等级：中风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 HBase集群的配置为高...
ECS部分操作系统即将停止支持
发行版本 GA EOM EOS 使用的ECS操作系统 1.x.x系列 2015年~2017年 2024-09-30 2025-09-30 CentOS 7.4 64位 2.x.x系列 2016年~2018年 2024-09-30 2025-09-30 CentOS 7.4 64位 3.0.x~3.29.x系列 早于2021-04-21 2024-09-30 2025-09-30 CentOS...
高可用和容灾设计
云数据库RDS提供多种灾备方案，确保您的数据不会丢失。数据备份与恢复 RDS默认提供备份功能，支持自动备份和手动备份。您可以设置自动备份的周期，还可以根据自身业务...开始使用RDS 快速入门 学习路径图 相关文档 RDS产品选型 搭建高可用架构
Hive
spark.hadoop.dfs.ha.namenodes.${nameservices} 对应hdfs-site.xml中的dfs.ha.namenodes.${nameservices} 无 spark.hadoop.dfs.namenode.rpc-address.${nameservices}.${nn1/nn2} 对应hdfs-site.xml中的dfs.namenode.rpc-address.${...
安装CPP动态库
前提条件 在开始做准备工作前，请确保您的操作系统满足以下条件：Linux：CentOS 6.8、CentOS 7.2、RHEL 6.x、RHEL 7.x Darwin：macOS Mojave 10.14.x Debian：Ubuntu 18.04 说明 本文不提供gcc环境的安装指导，请确保机器的gcc/g+环境版本...
Iceberg数据源
如果使用HDFS存储数据，并开启了高可用模式，还需在Catalog中增加HDFS高可用配置：CREATE CATALOG iceberg PROPERTIES('type'='iceberg','iceberg.catalog.type'='rest','uri'='http://172.21.0.1:8181','dfs.nameservices'='your-...
- 产品推荐
- 这些文档可能帮助您