修改 Windows 实例分区盘符
此文档指导用户如何修改 Windows 服务器的磁盘分区盘符。以下操作以 Windows 2008 为例，其他版本的 Windows 操作类似。具体操作步骤如下：启动左下角任务栏中的服务器管理器，选择存储>磁盘管理。右击要修改分区盘符的系统分区，在弹出的...
搭建FTP服务器（Linux）
vsftpd（very secure FTP daemon）是Linux操作系统下的一款小巧轻快、安全易用的FTP服务器软件。本文介绍如何在Linux服务器中安装、配置vsftpd，并测试连接FTP服务器。前提条件 已创建Linux轻量应用服务器。具体操作，请参见 创建轻量应用...
挂载文件存储 HDFS 版文件系统
vim${HADOOP_HOME}/etc/hadoop/core-site.xml 如果您尚未配置${HADOOP_HOME}，可以使用下面命令将您的Hadoop安装目录配置到该环境变量。export HADOOP_HOME=your/hadoop/installation/directory 在 core-site.xml 文件中，配置如下信息。...
共享自定义镜像
当轻量应用服务器的配置不能再满足您的业务需要、或者您期望使用云服务器ECS部署业务时，您可以通过共享镜像将业务从轻量应用服务器转移至云服务器ECS。前提条件 已创建自定义镜像。具体操作，请参见 创建自定义镜像。计费 自定义镜像支持...
没有公网的Windows服务器如何配置Windows更新
概述 本文主要介绍没有公网的Windows服务器如何配置Windows更新。详细信息 Windows服务器没有VPC网络的公网地址，需要配置内网的更新地址。VPC网络环境下国内所有地域默认使用 http://update.cloud.aliyuncs.com 地址。经典网络环境下使用...
Spark计算引擎
0运维 用户只需通过 AnalyticDB MySQL Serverless Spark接口管理Spark作业，无需关心服务器配置以及Hadoop集群配置，无需处理扩缩容等运维操作。作业级弹性 Serverless Spark按照Driver和Executor粒度申请创建资源，支持秒级拉起，可以快速...
CreateInstances-创建实例
接口说明 在调用该接口前，建议您了解轻量应用服务器的计费信息。更多信息，请参见 计费项。同一个阿里云账号内，最多同时存在 20 台轻量应用服务器。调用该接口创建服务器时，您需要确保您的阿里云账户余额充足，否则会创建失败。QPS 限制...
配置OSS/OSS-HDFS Credential Provider
基本配置方式 您可以将OSS或OSS-HDFS的AccessKey ID、AccessKey Secret、Endpoint预先配置在Hadoop的core-site.xml中。EMR集群配置具体步骤为：在Hadoop-Common服务配置页面，单击 core-site.xml 页签。单击 新增配置项，新增配置项 fs.oss...
配置OSS/OSS-HDFS Credential Provider
基本配置方式 您可以将OSS或OSS-HDFS的AccessKey ID、AccessKey Secret、Endpoint预先配置在Hadoop的core-site.xml中。EMR集群配置具体步骤为：在Hadoop-Common服务配置页面，单击 core-site.xml 页签。单击 新增配置项，新增配置项 fs.oss...
快速搭建LNMP环境（通过宝塔面板）
宝塔面板是一款使用方便、功能强大且终身免费的服务器管理软件，支持Linux与Windows系统。一键配置LAMP、LNMP、网站、数据库、FTP、SSL，通过Web端轻松管理服务器。本文主要介绍了如何使用应用镜像BT-Panel在轻量应用服务器上搭建宝塔面板...
MapReduce开发手册
javac-classpath<HADOOP_HOME>/share/hadoop/common/hadoop-common-X.X.X.jar:<HADOOP_HOME>/share/hadoop/mapreduce/hadoop-mapreduce-client-core-X.X.X.jar:<HADOOP_HOME>/share/hadoop/common/lib/commons-cli-1.2.jar-d wordcount_...
在文件存储 HDFS 版上使用Apache Tez
./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/lib/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/lib/*:./...
设置Dataphin实例的计算引擎为Hadoop
参数 描述 集群存储 计算引擎类型为E-MapReduce 5.x Hadoop时，支持配置集群存储类型。包括HDFS和OSS-HDFS。更多信息，请参见 OSS/OSS-HDFS概述。同时可以通过以下方式查看集群存储类型。未创建集群：可以通过E-MapReduce 5.x Hadoop集群...
ResetSystem-重置系统
为指定的轻量应用服务器重置系统。接口说明 重置系统可以重新安装服务器的应用或者操作系统，达到重新初始化服务器的目的。重置系统有两种选择，重置当前系统和重置为其他镜像。重置系统包括以下两种方式：重置当前系统：不改变当前镜像，...
在文件存储 HDFS 版上使用Presto
mv presto-server-0.265.1/plugin/hive-hadoop2/hadoop-apache2-2.7.4-9.jar presto-server-0.265.1/plugin/hive-hadoop2/hadoop-apache2-2.7.4-9.jar.bak 将编译后的hadoop-apache2-2.7.4-9.jar依赖包拷贝到对应目录下。cp presto-hadoop-...
增量迁移源服务器
配置SMC客户端，排除动态数据目录。具体操作，请参见 常见问题。步骤二：创建并启动增量迁移任务 在源服务器系统业务不暂停的情况下，通过SMC控制台创建并启动增量迁移任务。具体步骤如下：登录 SMC控制台。在左侧导航栏，单击 迁移源。在...
各源环境迁移至阿里云
配置项说明如下：目标地域：目标地域指的是您的源服务器要迁入阿里云的地域。该参数为必填项。关于地域的更多信息，请参见 地域和可用区。目标实例：选择一个轻量应用服务器作为目标实例。创建轻量应用服务器的具体操作，请参见 创建轻量...
轻量应用服务器
轻量应用服务器是面向单机应用场景的新一代计算服务，提供精品应用一键部署，支持一站式的域名、网站、安全、运维、应用管理等服务，极大优化搭建简单应用的体验，降低了入门级用户使用云计算产品的门槛。
创建服务器迁移任务
配置项说明如下：目标地域：目标地域指的是您的源服务器要迁入阿里云的地域。该参数为必填项。关于地域的更多信息，请参见 地域和可用区。目标实例：选择一个轻量应用服务器作为目标实例。创建轻量应用服务器的具体操作，请参见 创建轻量...
新建命令
命令助手可以在轻量应用服务器实例中快速完成运行自动化运维脚本、轮询进程、重置用户密码、安装或卸载软件、更新应用以及安装补丁等一些日常任务。命令类型可以是Windows PowerShell脚本、Bat批处理命令和Linux Shell脚本，命令中支持...
自定义镜像概述
您可以通过已配置好的自定义镜像创建更多包含相同配置的轻量应用服务器，也可以将自定义镜像共享至云服务器ECS，进而通过共享镜像创建ECS实例或更换操作系统。自定义镜像生命周期 当您通过服务器快照创建完成自定义镜像后，可以将镜像共享...
Hadoop DistCp介绍
Hadoop DistCp（分布式复制）是一个用于大型集群间或集群内数据复制的工具，通过MapReduce实现复制过程中数据的分发、错误处理、恢复及报告。本文为您介绍Hadoop DistCp与Jindo DistCp的区别、Hadoop DistCp使用方法以及常见问题。说明 ...
远程连接轻量应用服务器提示“出现身份验证错误，要求...
本文介绍远程连接轻量应用服务器提示“出现身份验证错误，要求的函数不受支持”的问题描述、问题原因及其解决方案。问题描述 本地电脑使用远程桌面连接工具连接Windows系统的轻量应用服务器时，提示“出现身份验证错误，要求的函数不受支持...
搭建与管理（基于Hadoop）
通过MaxCompute与Hadoop构建湖仓一体方案旨在实现对海量数据的统一管理、存储和分析，提供了一个既能处理结构化、半结构化数据，又能满足高并发分析需求的一体化数据平台。本文为您介绍如何通过MaxCompute与Hadoop构建湖仓一体，以及管理湖...
使用Windows实例搭建AD域
本文以将AD域服务和DNS服务部署在同一台服务器上为例，操作步骤如下：重要 除额外说明的配置外，部分配置步骤已省略，配置时保持默认配置，单击 下一步 即可。单击 添加角色和功能。选择安装类型。选择要安装角色和功能的服务器。选中要...
IIS Web网站访问故障
本文介绍的IIS Web网站访问故障相关问题如下：访问部署在Windows实例上的基于IIS搭建的Web网站时，提示“500-内部服务器错误”，如何处理？如何在Windows实例的IIS网站中设置禁止通过IP地址直接访问？基于IIS配置的网站因服务端口被占用...
开启权限认证
drwxr-x-x-emrtest hadoop 0 2022-10-21 14:08/tmp/emrtest drwxr-x-x-hadoop hadoop 0 2022-10-21 10:06/tmp/hadoop-yarn drwx-wx-wx-hive hadoop 0 2022-10-21 10:13/tmp/hive drwxr-x-x-hadoop hadoop 0 2022-10-21 10:23/tmp/kyuubi-...
轻量应用服务器网速较慢与预期带宽不符
本文介绍轻量应用服务器网速较慢与预期带宽不符的问题描述、问题原因及其解决方案。问题描述 访问阿里云轻量应用服务器中的网站或应用，出现网络访问过慢的情况，与设置的预期带宽不符。问题原因 服务器的地域为中国香港。中国内地访问中国...
常见问题排查
例如：执行 hadoop 命令或者任务出现如下错误时，表明 org/apache/hadoop/fs/PathFilter 相关的类不在Hadoop的运行环境中，该类所属的Jar包为 hadoop-common-x.x.x.jar，需要您下载该Jar包的正确版本，并将其置于所有Hadoop环境下的...
使用URL实现应用实例分组的流量分发
在ECS集群中，为应用绑定负载均衡实例后，可以为不同的应用实例分组配置不同的URL转发策略。负载均衡实例可以根据配置的转发策略将不同路径的请求转发到应用的不同实例分组中。本文介绍使用URL转发策略，实现单应用内不同实例分组的流量...
WordPress环境上安装SSL证书
步骤二：配置SSL证书 证书签发后，证书状态将变更为 已签发，您需要部署SSL证书至服务器并配置证书。关于证书部署和安装的更多信息，请参见 SSL证书安装指南。上传部署SSL证书。在左侧导航栏，选择 部署和资源管理>云服务器部署。在 云服务...
文件存储 HDFS 版和对象存储OSS双向数据迁移
{HADOOP_HOME}/bin/hadoop jar \${HADOOP_HOME}/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.8.5.jar \ randomtextwriter \-D mapreduce.randomtextwriter.totalbytes=107374182400 \-D mapreduce.randomtextwriter.bytespermap=...
Hadoop Streaming
hadoop jar/usr/lib/hadoop-current/share/hadoop/tools/lib/hadoop-streaming-X.X.X.jar-file/home/hadoop/mapper.py-mapper mapper.py-file/home/hadoop/reducer.py-reducer reducer.py-input/tmp/hosts-output/tmp/output 参数 描述 ...
集群存储根路径没有权限，导致集群服务启动失败的问题
dir)hadoop fs-mkdir-p$STAGING_DIR hadoop fs-chmod 777$STAGING_DIR hadoop fs-chown hadoop:hadoop$STAGING_DIR hadoop fs-mkdir-p$STAGING_DIR/history hadoop fs-chmod 775$STAGING_DIR/history hadoop fs-chown hadoop:hadoop$...
在ECI中访问HDFS数据
usr/local/hadoop-2.7.2/share/hadoop/hdfs:/usr/local/hadoop-2.7.2/share/hadoop/hdfs/lib/*:/usr/local/hadoop-2.7.2/share/hadoop/hdfs/*:/usr/local/hadoop-2.7.2/share/hadoop/yarn/lib/*:/usr/local/hadoop-2.7.2/share/hadoop/...
管理Hadoop回收站
Hadoop回收站是Hadoop文件系统的重要功能，可以恢复误删除的文件和目录。本文为您介绍Hadoop回收站的使用方法。背景信息 回收站是Hadoop Shell或部分应用（Hive等）对Hadoop FileSystem API在客户端的封装，当客户端配置或者服务端配置打开...
管理Hadoop回收站
Hadoop回收站是Hadoop文件系统的重要功能，可以恢复误删除的文件和目录。本文为您介绍Hadoop回收站的使用方法。背景信息 回收站是Hadoop Shell或部分应用（Hive等）对Hadoop FileSystem API在客户端的封装，当客户端配置或者服务端配置打开...
UDF（地理空间）
更多安装MaxCompute客户端信息，请参见 安装并配置MaxCompute客户端。背景信息 Apache Hive有一套开源的地理空间UDF，详情请参见 Github。MaxCompute原生支持直接使用Hive UDF，因此也支持在MaxCompute中使用Hive地理空间函数。MaxCompute...
管理Hadoop回收站
Hadoop回收站是Hadoop文件系统的重要功能，可以恢复误删除的文件和目录。本文为您介绍Hadoop回收站的使用方法。背景信息 回收站是Hadoop Shell或部分应用（Hive等）对Hadoop FileSystem API在客户端的封装，当客户端配置或者服务端配置打开...
HDFS常见命令介绍
您可以在已经创建好的E-MapReduce（简称EMR）集群中，直接使用hadoop fs命令来对HDFS中的文件进行操作。本文为您介绍HDFS的常见命令。背景信息 HDFS常见命令如下表所示。命令 功能 mkdir 在HDFS文件系统中创建目录。touchz 在HDFS文件系统...
- 产品推荐
- 这些文档可能帮助您