通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
操作流程 准备工作 创建同一专有网络下的阿里云Elasticsearch和E-MapReduce（以下简称EMR）实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。步骤一：上传ES-Hadoop...
挂载文件存储 HDFS 版文件系统
vim${HADOOP_HOME}/etc/hadoop/core-site.xml 如果您尚未配置${HADOOP_HOME}，可以使用下面命令将您的Hadoop安装目录配置到该环境变量。export HADOOP_HOME=your/hadoop/installation/directory 在 core-site.xml 文件中，配置如下信息。...
通过开源HDFS客户端连接并使用文件引擎
export HADOOP_HOME=${Hadoop安装目录}/hadoop-2.7.3 执行以下命令进入 hadoop 目录。cd$HADOOP_HOME 将Java环境变量 JAVA_HOME 添加至 etc/hadoop/目录下的 hadoop-env.sh 文件中，假设Java安装在/opt/install/java。set to the root of ...
元数据性能测试
NNbench的jar包位于${HADOOP_HOME}/share/hadoop/mapreduce目录下，${HADOOP_HOME}为测试机器中的Hadoop 安装目录，NNbench的jar包名为hadoop-mapreduce-client-jobclient-x.x.x-tests.jar，使用方法如下。本文所有命令均在${HADOOP_HOME}/...
通过ES-Hadoop将HDFS中的数据写入Elasticsearch
步骤一：上传ES-Hadoop JAR包至HDFS 下载ES-Hadoop安装包，并上传至EMR Master节点的HDFS目录下。步骤二：配置pom依赖 创建Java Maven工程，并配置pom依赖。步骤三：编写并运行MapReduce任务 编写MapReduce写数据到Elasticsearch的Java代码...
集群吞吐性能测试
TestDFSIO的jar包位于开源Hadoop版本的${HADOOP_HOME}/share/hadoop/mapreduce目录下，其中${HADOOP_HOME}为测试机器中的Hadoop安装目录，jar包名为hadoop-mapreduce-client-jobclient-x.x.x-tests.jar，您可通过执行以下命令，查看...
Linux安装和快速使用教程
Linux安装和快速使用教程 包含求解器服务的购买、安装、配置授权、和命令行/C/C++/Python/Java的使用方式、API快速查询，云上建模求解平台的使用。
快速入门
vim${HADOOP_HOME}/etc/hadoop/core-site.xml 如果您尚未配置${HADOOP_HOME}，可以使用下面命令将您的Hadoop安装目录配置到该环境变量。export HADOOP_HOME=your/hadoop/installation/directory 在 core-site.xml 文件中，配置如下信息。...
C++ 合约编译工具
Linux 安装示例 macOS 安装示例 Linux 安装示例 下载对应的 mychain.mycdt 安装包，解压之后放到$HOME 目录下。cd$HOME$tar xf MYCDT-2.24.2-Linux-x86_64.tar.gz 执行以下命令，导出相关环境变量。export PATH="$HOME/MYCDT-2.24.2-Linux-...
使用教程
Hive访问示例 HADOOP_HOME及HADOOP_CLASSPATH可以添加到/etc/profile 中，示例如下：export HADOOP_HOME=${您的Hadoop安装目录} export HADOOP_CLASSPATH=emr-tablestore-1.4.2.jar:tablestore-4.3.1-jar-with-dependencies.jar:joda-time-...
安装和使用GitLab
安装GitLab 本文介绍以下两种方式，安装方式差异说明如下，您可以根据需要选择其中一种方式：差异 Linux安装包 Docker Engine 安装方式 可以在Linux系统的ECS实例中直接运行安装包进行安装。通过在Docker Engine上运行GitLab容器来实现安装...
异构数据源访问
自建Hadoop集群xml文件一般位于以下两个位置之一：conf目录：在早期版本的Hadoop中，这些配置文件通常放在Hadoop安装目录下的conf子目录中。etc/hadoop目录：在较新版本的Hadoop中，配置文件通常放在 etc/hadoop目录下。这个目录位于 ...
安装Agent
下载Agent手动安装 Linux服务器安装Agent 登录数据库审计系统。具体操作，请参见 登录数据库审计系统。在左侧导航栏，选择 系统配置>Agent管理，并单击 安装Agent 页签。在 下载Agent手动安装 区域，单击 Linux版本。下载完成后，Agent安装...
Linux系统安装宝塔面板
本文介绍在ECS服务器Linux系统中如何安装宝塔面板。重要 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，建议提前...
安装 Agent
Linux 内核版本系统千差万别，每个设备厂商都有自己客制化的地方，需要用户按照如下步骤进行安装。确认芯片架构#首先确认芯片架构 uname-m x86_64 例如这里获取到的架构是 x86_64（后面都以该架构举例），这里需要将该架构所对应的固件拷贝...
基于Docker使用Inclavare Containers机密容器
Inclavare Containers是工业界首个面向...不同发行版的Alibaba Cloud Linux安装命令也不同，具体说明如下：如果您使用的是Alibaba Cloud Linux 2.1903 LTS 64位 UEFI版操作系统，需运行以下命令安装rune：sudo yum-config-manager-add-repo ...
安装 Agent
`-batch_deploy_tool/后装部署工具，在后装场景下可能会用到|-install_security_agent_linux.sh/IoT 安全运营中心 Agent 安装脚本 `-uninstall_security_agent_linux.sh/IoT 安全运营中心 Agent 卸载脚本 3.获取授权文件 如果您需要新创建...
GPU云服务器常见问题
如果您需要安装Linux操作系统的GRID驱动，具体操作，请参见 在GPU虚拟化型实例中安装GRID驱动（Linux）。为什么创建GPU实例时选择的CUDA版本与安装完成后查看到的CUDA版本不一致？您执行命令 nvidia-smi 查询到的CUDA版本代表您的GPU实例...
创建虚拟机并安装操作系统
本文介绍如何基于VirtualBox创建虚拟机并安装Linux操作系统。前提条件 已安装VirtualBox工具。VirtualBox官方下载地址，请参见 VirtualBox官网。已准备好ISO镜像文件，例如 CentOS-7-x86_64-Minimal-2009.iso。您可以访问 阿里云官方镜像站...
JindoData版本说明
例如，如果要在主流Linux上部署Hadoop集群，则需要将jindo-core-4.6.4.jar和jindo-sdk-4.6.4.jar添加到指定的classpath中。如果要在macOS上运行和调试，则需要jindo-core-4.6.4.jar和jindo-sdk-4.6.4.jar，并且还需要引入jindo-core-macos-...
Linux UI 桌面安装
警告 安装前请务必做好服务器数据备份（ECS如何创建快照），避免安装失败、服务器异常或数据覆盖后无法恢复。Linux系统安装图形化桌面服务，请点击下方链接，按照文档操作。Linux系统的ECS实例中安装图形界面
常见问题
Linux系统安装gcc指令：yum-y install gcc 使用Linux系统进行安装执行“./bootstrap”指令时，自启动过程找不到OpenSSL 报错信息：CMake Error at Utilities/cmcurl/CMakeLists.txt:525(message):Could not find OpenSSL.Install an ...
安装Git
在 Linux 上安装 最快捷的安装方法，是以二进制包的方式安装 Git。不同的 Linux 发行版有不同的包管理器。例如 RedHat 系使用如下命令安装：$sudo yum install git Git 官方网站 上列出了各种 Unix 发行版的安装步骤。在 Mac 上安装 一般 ...
步骤四：安装阿里云复制服务
本文介绍如何在Windows及Linux系统中安装阿里云复制服务AReS（Aliyun Replication Service）。背景信息 CDR网关激活完成后，您需要在做容灾保护的服务器上安装AReS，将服务器容灾复制到阿里云。下载AReS安装包 在Windows或Linux系统中安装...
在Linux上安装阿里云CLI
您可以在Linux平台上使用安装包来安装阿里云CLI。操作步骤 下载Linux终端安装包。下载地址如下：官网：您可以通过此链接直接下载最新版本的阿里云CLI。GitHub：在GitHub上下载您所需版本的阿里云CLI。假设已经下载 aliyun-cli-linux-3.0.16...
迁移Linux服务器后生成的镜像创建的实例为何不能启动...
本文主要介绍使用SMC迁移Linux服务器后，生成的镜像创建的实例不能启动的问题描述、问题原因及其解决方案。问题描述 使用SMC迁移Linux服务器后，生成的镜像创建的实例不能启动。问题原因 创建I/O优化的实例时，源服务器未安装virtio驱动。...
YARN缺陷修复公告
mv$HADOOP_HOME/share/hadoop/yarn/hadoop-yarn-server-resourcemanager-3.2.1.jar/tmp/cp hadoop-yarn-server-resourcemanager-3.2.1.jar$HADOOP_HOME/share/hadoop/yarn/命令中的$HADOOP_HOME 为Hadoop的安装目录。本文示例中Hadoop的...
搭建Linux开发环境
前提条件 搭建Spark开发环境前，请确保您已经在Linux操作系统中安装如下软件：说明 本文采用的软件版本号及软件安装路径仅供参考，请根据您的操作系统下载合适的软件版本进行安装。JDK 安装命令示例如下。JDK名称请以实际为准。具体的JDK...
查看云助手状态及异常状态处理
具体操作，请参见 卸载云助手Agent（Linux实例）和 Linux实例安装云助手Agent。当云助手状态为 active(running)，说明云助手服务正常运行中，请继续执行步骤 4。Ubuntu14及更低版本的Linux系统，通常使用UpStart 查询您的ECS实例是否使用...
ODBC
PolarDB PostgreSQL版（兼容Oracle）提供了Unix、Linux系统版本和Windows系统版本的ODBC驱动，本文将介绍在不同系统中如何使用ODBC驱动。前提条件 已经在 PolarDB 集群创建用户，如何创建用户请参见 创建数据库账号。已经将需要访问 ...
安装CLI
docopt aliyun-log-python-sdk jmespath aliyun-python-sdk-core aliyun-python-sdk-sts requests 在Linux系统安装CLI 登录Linux服务器。执行如下命令安装CLI。pip3 install aliyun-log-python-sdk aliyun-log-cli-U-no-cache 验证安装结果...
从OSS迁移数据
建议您使用的Hadoop版本不低于2.7.3，本文档中使用的Hadoop版本为Apache Hadoop 2.7.3，修改Hadoop 配置信息，详情参见 使用开源HDFS客户端访问。在Hadoop集群所有节点上安装JDK，本操作要求JDK版本不低于1.8。在Hadoop集群安装OSS客户端...
使用限制
本文介绍服务器迁移相关的使用限制，以便您...安装GRUB的步骤，请参见 如何为Linux服务器安装GRUB？说明 对于CentOS 5、Red Hat Enterprise Linux 5、Debian 7、Amazon Linux或Oracle Linux等低版本操作系统，需要更新GRUB至2.02及以上版本。
C++ 合约编译工具
Linux 安装示例 macOS 安装示例 Linux 安装示例 下载对应的 mychain.mycdt 安装包，解压之后放到$HOME 目录下。cd$HOME$tar xf MYCDT-2.19.3-Linux-x86_64.tar.gz 执行以下命令，导出相关环境变量。export PATH="$HOME/MYCDT-2.19.3-Linux-...
自助生成桌面端
Linux 版安装和启动 注意：Linux版仅支持桌面版系统（有用户界面的）。Linux 由于发行版本较多，目前自助build支持 deb，rpm 2种安装包。deb deb 适用于 Debian 系的Linux系统，如：Ubuntu，LinuxMint，DeepIn等。一般的桌面系统，双击安装...
在文件存储 HDFS 版上使用Apache Tez
./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/lib/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/lib/*:./...
搭建Hadoop环境
步骤二：安装Hadoop 执行以下命令，下载Hadoop安装包。wget https://mirrors.bfsu.edu.cn/apache/hadoop/common/hadoop-3.2.4/hadoop-3.2.4.tar.gz执行以下命令，将Hadoop安装包解压至/opt/hadoop。sudo tar-zxvf hadoop-3.2.4.tar.gz-C/...
MapReduce开发手册
common-X.X.X.jar:<HADOOP_HOME>/share/hadoop/mapreduce/hadoop-mapreduce-client-core-X.X.X.jar:<HADOOP_HOME>/share/hadoop/common/lib/commons-cli-1.2.jar-d wordcount_classes EmrWordCount.java HADOOP_HOME：Hadoop的安装目录，...
如何在Linux系统的ECS实例中安装图形界面
阿里云云服务器ECS实例提供的公共Linux系统镜像，基于性能及通用性等因素的考虑，默认不安装图形化桌面组件。若您需要为Linux实例安装图形化界面，可参考本文进行操作。操作前准备 请在安装之前，为ECS实例创建快照，做好数据备份，请参见 ...
安装云助手Agent
Linux（其他）Linux实例安装云助手Agent binary安装方式 源代码安装方式 通过阿里云CLI安装云助手Agent（Windows或Linux实例）Windows实例安装 云助手Agent 以管理员账号远程连接ECS实例。具体操作，请参见 连接方式概述。下载 云助手Agent...
- 产品推荐
- 这些文档可能帮助您