版本功能对比
ARMS应用监控是一款面向应用性能管理的监控工具，结合了业界先进的分布式应用监控和链路追踪理论模型与阿里巴巴集团内部实践，为您提供更加全面的面向应用的实时监控服务。各版本的计费详情，请参见 ARMS定价详情。产品功能 基础版 专家版 ...
如何通过阿里云注册集群和Prometheus...多云容器集群监控
集成事件后管理更高效 告警管理默认支持一键化集成阿里云常见的监控工具，并支持更多的监控工具手动接入，方便统一维护。事件接入模块稳定，能提供7×24小时的无间断事件处理服务。处理海量事件数据时可以保证低延时。及时准确地将告警通知...
如何通过阿里云注册集群和Prometheus...多云容器集群监控
集成事件后管理更高效 告警管理默认支持一键化集成阿里云常见的监控工具，并支持更多的监控工具手动接入，方便统一维护。事件接入模块稳定，能提供7×24小时的无间断事件处理服务。处理海量事件数据时可以保证低延时。及时准确地将告警通知...
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearch和Hadoop之间双向移动，无缝衔接Elasticsearch与Hadoop服务，充分使用Elasticsearch的快速搜索及Hadoop批处理能力，实现交互式数据处理。...
通过ES-Hadoop将HDFS中的数据写入Elasticsearch
ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearch和Hadoop之间双向移动，无缝衔接Elasticsearch与Hadoop服务，充分使用Elasticsearch的快速搜索及Hadoop批处理能力，实现交互式数据处理。...
Hadoop DistCp介绍
Hadoop DistCp（分布式复制）是一个用于大型集群间或集群内数据复制的工具，通过MapReduce实现复制过程中数据的分发、错误处理、恢复及报告。本文为您介绍Hadoop DistCp与Jindo DistCp的区别、Hadoop DistCp使用方法以及常见问题。说明 ...
Hudi
说明 从Hudi 0.12.0开始支持，针对跨集群提交执行的需求，可以通过DDL指定per-job级别的hadoop配置。数据写入 Hudi支持丰富的写入方式，包括离线批量写入、流式写入等场景。支持丰富的数据类型，包括changelog以及log数据。同时支持不同的...
E-MapReduce数据迁移
但是如果要迁移的数据量大，请开启YARN服务，以便使用hadoop的数据迁移工具hadoop distcp进行快速地数据迁移。迁移数据。建议将/user、/hbase、/spark-history、/apps等服务目录和相关的数据目录全量迁移至 文件存储 HDFS 版。如果涉及将云...
迁移HDFS数据到OSS
parallelism 20-tmp 指定在使用DistCp工具的过程中，用于存放临时文件的目录。tmp/tmp-hadoopConf 指定拥有访问OSS权限的AccessKey及Endpoint。hadoopConf fs.oss.accessKeyId=yourkey-hadoopConf fs.oss.accessKeySecret=yoursecret-...
从自建HDFS迁移数据
准备迁移工具 您可以通过Hadoop社区标准的Distcp工具实现全量或增量的HDFS数据迁移，详细的Distcp工具使用说明请参见 Hadoop Distcp 工具官方说明文档。自建Hadoop集群数据迁移 阿里云ECS自建Hadoop集群和文件引擎处于相同VPC网络环境时，...
迁移开源HDFS的数据到文件存储 HDFS 版
迁移集群上安装的Hadoop版本不低于2.7.2。说明 如果原集群满足上述条件且计算资源充足，可以直接将原集群当作迁移集群使用，不必额外创建新集群。在迁移集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储HDFS版文件系统。...
将监控数据导出到自建Prometheus
部分客户在云下已有完善的企业IT管理系统，希望能够将云上数据实时导出到线下进行统一监控。基于该场景，云监控推出了监控数据实时导出...关于云监控实时数据导出工具的配置方法，请参见文件 ReadMe.pdf 中的“配置文件中的各项配置说明”。
迁移HDFS数据到OSS-HDFS
update-parallelism 10 相关文档 如果您不希望在每一次执行迁移命令时都要手动添加Endpoint和AccessKey，您可以在Hadoop的配置文件 core-site.xml 中预先配置Endpoint和AccessKey。具体操作，请参见 非EMR集群接入OSS-HDFS服务快速入门。...
创建Hive数据源
背景信息 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供SQL查询功能。Hive用于转化HQL或SQL语句为MapReduce、Tez等程序。Hive处理的数据存储在HDFS中。Hive分析数据底层的实现是MapReduce、Tez等...
网络监控
云监控通过安装在阿里云主机（ECS实例）和非阿里云主机上的云监控插件，采集网络监控的网卡带宽、网卡流入包数、网卡错误包数和网络连接数等监控指标的监控数据，您还可以为这些监控指标设置报警规则。当某个监控指标达到报警条件时，会给...
企业云监控的监控指标名称的构成规则
企业云监控的监控指标名称在基础云监控的监控指标名称的基础上进行了相应变更。本文为您介绍企业云监控的监控指标名称的适用范围、构成规则和构成示例。适用范围 仅适用于企业云监控中的阿里云产品的监控指标。监控指标名称的构成规则 企业...
云产品监控
您可以查看各云产品的监控图表，了解资源的运行状况。您也可以通过设置报警规则，帮助您监控资源的运行状况。当符合报警规则时，云监控自动发送报警通知，便于您及时获悉资源的运行状况。背景信息 在每个云产品监控页面，您可以查看的监控...
云盘
云监控通过安装在阿里云主机（ECS实例）上的云监控插件，采集云盘的IOPS读取、IOPS写入、BPS读取和BPS写入等监控指标的监控数据，您还可以为这些监控指标设置报警规则。当某个监控指标达到报警条件时，会给您发送报警通知，以便您及时关注...
实例类型
E-MapReduce集群由多个不同类型的实例...当集群计算能力不足时，您可以随时通过计算实例节点快速给集群增加额外的计算能力，例如Hadoop的MapReduce任务和Spark Executors等。计算实例节点可以随时新增和减少，并且不会影响现有集群的运行。
迁移Hadoop文件系统数据至JindoFS
迁移数据 Hadoop FsShell 对于文件较少或者数据量较小的场景，可以直接使用Hadoop的FsShell进行同步：hadoop dfs-cp hdfs:/emr-cluster/README.md jfs:/emr-jfs/hadoop dfs-cp oss:/oss_bucket/README.md jfs:/emr-jfs/DistCp 对于文件较多...
查看监控数据
当您创建日志监控的监控项后，可以查看其监控图表。操作步骤 登录 云监控控制台。在左侧导航栏，选择 接入中心>日志监控。在 日志监控 页面，单击目标监控项对应 操作 列的 图表 图标。您可以查看目标监控项的监控图表，及其同比昨天和同比...
E-MapReduce数据迁移方案
HDFS数据迁移 Distcp工具同步数据 HDFS数据迁移可以通过Hadoop社区标准的 DistCp工具 迁移，可以实现全量和增量的数据迁移。为减轻现有集群资源压力，建议在新旧集群网络连通后在新集群执行 distcp 命令。全量数据同步 hadoop distcp-...
开启秒级监控
秒级监控功能应用于对云产品的监控指标有高精度要求的监控场景。您可以一键开启目标云产品中指定监控指标的秒级监控功能。操作步骤 登录 云监控控制台。在左侧导航栏，选择 企业云监控>秒级监控。在 秒级监控 页面，打开目标云产品的 秒级...
查看监控数据
当您创建日志监控的监控项后，可以查看其监控图表。操作步骤 登录 云监控控制台。在左侧导航栏，选择 云资源监控>应用分组。在 应用分组 页签，单击目标应用分组名称链接。在目标应用分组的左侧导航栏，单击 日志监控。单击目标监控项对应 ...
概览
企业云监控针对企业级应用场景为用户提供一站式的监控解决方案。目前企业云监控包括监控大盘、秒级监控、智能水位分析和实时数据导出。开通企业云监控 当您首次使用企业云监控时，需要单独开通。具体操作，请参见 开通企业云监控。应用场景...
如何通过云监控查看指定日期的监控数据？
本文为您介绍如何通过云监控控制台查看指定日期的监控数据。操作步骤 登录 云监控控制台。在左侧导航栏，单击 主机监控。在 主机监控 页面，单击目标主机对应 操作 列的 监控图表。您可以选择指定日期查看监控数据。说明 目前云监控只支持...
查看云产品监控大盘
您可以查看当前阿里云账号下云产品的监控大盘，以及该监控大盘下资源的监控图表，并为其设置报警规则，帮助您监控资源的运行状况。操作步骤 登录 云监控控制台。在左侧导航栏，选择 可视化（Dashboard）>云产品大盘。在 云产品监控大盘 页...
概览
借助该SDK，Apache Hadoop的计算分析应用（如MapReduce、Hive、Spark等）可以使用 文件存储 HDFS 版 作为defaultFS，从而获得 文件存储 HDFS 版 带来的超越原始HDFS的功能和性能优势。更多信息，请参见 安装文件系统SDK、SDK示例。
GPU监控
云监控通过安装在阿里云主机（ECS实例）上的云监控插件，采集GPU的监控数据，您还可以为这些监控项设置报警规则。当某个监控项达到报警条件时，会给您发送报警通知，以便您及时关注其动态。前提条件 请确保您已在云服务器ECS上创建GPU计算...
【产品变更】ARMS关于自定义监控下线公告
ARMS将计划分阶段下线自定义监控，从2022年01月01日起，自定义监控不再支持创建新的监控任务，同时停止自定义监控收费。对于已有的监控任务，自定义监控将免费维护至2022年03月31日，到期后将不再维护。建议您在2022年03月31日之前完成监控...
概览
步骤三 创建监控大盘，具体操作如下：创建业务大盘 创建系统预置大盘 创建自定义大盘 线下IDC、阿里云产品和其他云厂商服务的监控数据接入云监控后，您可以为监控数据创建监控大盘，通过监控大盘查看指定监控指标的监控图表。您可以通过...
查看秒级监控
您可以查看当前阿里云账号下指定云产品的所有秒级监控指标的监控大盘。前提条件 请确保您已开通企业云监控。具体操作，请参见 开通企业云监控。...说明 您只能查询最近30天内的监控数据。查看目标云产品的所有秒级监控指标的监控大盘。
产品优势
统一的监控体验和丰富的监控指标 云监控默认为您提供上百款常用云产品的监控指标和重要事件。您可以通过云监控统一查询这些云产品的监控数据和系统事件，并为其设置报警。完善的OpenAPI和SDK 云监控为您提供功能完善的OpenAPI和多语言SDK，...
通过企业监控大盘跨账号监控阿里云产品
之后您还可以通过企业云监控提供的监控大盘（简称企业监控大盘）创建多样化的监控图表，并设置Prometheus报警，接收报警通知。前提条件 您必须使用管理账号或委派管理员账号登录。关于如何为云监控添加委派管理员账号，请参见 为云监控添加...
基础监控
基础监控仅限于阿里云主机（ECS实例），监控数据由云服务器ECS上报，您无需安装云监控插件，即可查看基础监控指标的监控数据，并为其设置报警规则。当某个监控指标达到报警条件时，会给您发送报警通知，以便您及时关注其动态。监控指标说明...
什么是云监控
云监控涵盖IT设施基础监控和外网网络质量拨测监控，是基于事件、自定义指标和日志的业务监控，为您全方位提供更高效、全面、省钱的监控服务。使用云监控，不但可以帮助您提升系统服务可用时长，还可以降低企业IT运维监控成本。云监控通过...
查看网络监控大盘
您可以查看云服务器ECS公网IP地址和绑定在ECS上弹性公网IP（EIP）的监控数据。云监控默认为您提供公网流出带宽、公网流入带宽和公网流出带宽使用率（经典网络）的监控大盘。背景信息 网络监控大盘中的数据包括同地域公网IP地址和跨地域公网...
常见问题
例如，在优化TimelineServer组件以关闭jersey依赖库的日志生成时，操作步骤如下：通过以下命令，监控YARN日志路径中与 hadoop-timelineserver-相关的.out 日志文件。DataLake集群的日志路径为/var/log/emr/yarn/，Hadoop集群日志路径为/mnt...
查看自定义监控数据
您可以通过自定义监控功能将采集到的监控数据上报至云监控，在云监控中查看其监控数据。操作步骤 登录 云监控控制台。在左侧导航栏，选择 接入中心>自定义监控。在 自定义监控 的 时间序列 页签，选择应用分组和时间序列，单击 维度。在 ...
概览
展示多个实例的监控数据走势 例如：您的一个应用部署在多台ECS实例上，可以将部署了相同应用的多台ECS实例监控信息添加在同一张监控图表中，查看相关多台机器的监控数据变化趋势。例如在一张图表中同时展示ECS多个实例各自的CPU使用率的...
- 产品推荐
- 这些文档可能帮助您