运行中实例发生重启怎么办？
三次Liveness失败会引起实例重启。如果存在Liveness失败，排查如下信息。查看基础监控，确认是否因CPU、Load过高而引起。结合自身业务日志，排查相应时间点是否有业务异常。是否存在进程退出 Container Exit Code，例如Exit Code 137表示被...
通过告警触发自动重启CPU使用率高的ECS实例
使用OOS告警触发功能，自动重启CPU使用率高的ECS实例。背景 当ECS实例因已知或未知的原因CPU使用率过高时，往往会影响实例上应用的运行状态，造成应用运行缓慢甚至卡死。此时通过重启实例能够快速恢复CPU使用率到较低水平，能够避免对应用...
自动定时重启ECS云服务器
然而，在实际运行中，我们可能会遇到这样一些场景：系统更新：一些操作系统或者软件的更新可能需要重启服务器才能生效。通过定时重启能够保证这些更新的正常应用。内存泄漏：有的程序可能存在内存泄漏的问题，长时间运行后可能会消耗大量的...
工作负载推荐配置
在ACK集群中配置工作负载（Deployment、StatefulSet、DaemonSet、Job、CronJob等）时，您需考虑多种因素，以确保应用可以稳定、可靠地运行。...如果您的应用Pod运行出现问题，请先参见 Pod异常问题排查、应用FAQ 进行自排查。
三网合一卡2.0使用入门
三网合一卡2.0设备插卡如何快速使用，无需移植SDK，如何通过结合设备检测和重启进行网络切换，实现网络选择和灾备。常见问题 重要 温馨提示：如测试期间遇到任何问题，可拨打售前技术支持电话4009032599。测试卡规格？每个客户在正式采购前...
本地盘实例运维场景和系统事件
不希望在计划的时间段内重启实例，自行修改预约重启时间。具体操作，请参见 修改预约重启时间。在用户操作窗口期内自行重启实例。具体操作，请参见 重启实例。说明 必须在ECS控制台重启实例或调用API RebootInstance，在实例内部重启无效。...
OSS存储卷FAQ
问题原因：升级集群重启kubelet时，由于容器网络会重启，导致OSSFS进程重启，主机与容器目录映射失效。解决方法：需要重启容器，或重建Pod。您可以通过配置健康检查实现容器或Pod的自动重启。关于使用OSS存储的更多信息，请参见 OSS存储卷...
ECI Pod生命周期
Running 是 重启中（Restarting）ECI Pod正在重启。Pending 是 更新中（Updating）ECI Pod正在更新。Pending 是 终止中（Terminating）ECI Pod正在终止。对于运行中的ECI Pod，如果配置了preStop，则在删除Pod时，Pod将进入Terminating状态...
ECI实例生命周期介绍
是 重启中（Restarting）实例正在重启。是 更新中（Updating）实例正在更新。是 终止中（Terminating）实例正在终止。对于运行中的实例，如果配置了preStop，则在删除实例时，实例将进入Terminating状态。执行完preStop后，实例将自动删除...
ECI Pod生命周期
Running 是 重启中（Restarting）ECI Pod正在重启。Pending 是 更新中（Updating）ECI Pod正在更新。Pending 是 终止中（Terminating）ECI Pod正在终止。对于运行中的ECI Pod，如果配置了preStop，则在删除Pod时，Pod将进入Terminating状态...
升级节点配置
滚动重启 不开启（默认）：表示同时重启当前节点组内所有ECS实例。开启：表示当前节点组内一个ECS实例重启完成且该实例上的大数据服务全部恢复后再启动下一个ECS实例。单击 确定。生成订单需要等待一定时间。支付订单。支付完成后，控制台...
ListInstanceHistoryEvents
eventType Array of String Query 否 Instance:InstanceFailure.Reboot:Executed 事件类型，可选值如下，多个类型使用英文逗号（,）隔开：ECS:AUTO_RESTART：ECS节点自动重启。Instance:InstanceFailure.Reboot:Executed：ECS实例重启结束...
使用E-Mapreduce访问
E-MapReduce HDFS文件系统上的数据，需要使用数据迁移工具hadoop distcp进行数据迁移，详情请参见 从自建HDFS迁移数据。执行下面的指令将E-MapReduce HDFS全部数据迁移到文件引擎，实例ID为文件引擎的实例ID，根据实际情况修改。hadoop ...
升级版本
重启方式 原理 风险和建议 适用的版本升级方案 蓝绿变更重启 在集群中先增加高版本节点，再将低版本节点的数据迁移到高版本节点，最后删除低版本节点的方式进行重启。升级操作无法取消，升级期间可以继续向集群写入数据或从集群读取数据，...
设置定时任务
任务类型 主要用途 定时开机、关机、重启 在云电脑使用时间段比较确定的情况下，可以使用定时开机、关机、重启任务来实现自动化。对于后付费云电脑，定时关机也可以节省成本。定时重置 可定期让云电脑的系统盘数据恢复初始状态，常用于教育...
ECS系统事件汇总
Scheduled：因系统维护实例重启计划中 Instance:SystemMaintenance.Reboot:Executing：因系统维护实例重启执行中 Instance:SystemMaintenance.Reboot:Executed：因系统维护实例重启已完成 Instance:SystemMaintenance.Reboot:Avoided：因...
数据迁移
本文为您介绍如何迁移自建Kudu集群的数据到E-MapReduce上的Hadoop集群。前提条件 您已自建Kudu集群。已创建E-MapReduce的Hadoop集群，并选择了Kudu服务，详情请参见 创建集群。背景信息 EMR Kudu支持社区1.10以及1.11版本，可以使用社区...
通过云助手命令停止或重启实例
本文介绍如何通过云助手命令停止或重启实例。前提条件 实例的状态必须为 运行中（Running）。目标实例已安装 云助手Agent。具体操作，请参见 安装云助手Agent。（推荐）通过指定特殊退出码停止或重启实例 通过云助手执行命令来停止或重启...
DLF统一元数据
切换为MySQL（包括集群内置MySQL、统一meta数据库和自建RDS）：设置 hive.imetastoreclient.factory.class 的值为 org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClientFactory。切换为DLF统一元数据：设置 hive....
迁移HDFS数据到OSS
如果您使用的是自建ECS集群，需要具备Hadoop2.7+或Hadoop3.x环境以及进行MapReduce作业的能力。步骤一：下载JAR包 登录EMR集群。登录 EMR on ECS控制台。单击创建的EMR集群。单击 节点管理 页签，然后单击节点组左侧的。单击ECS ID。在ECS...
Hive服务异常排查及处理
问题原因2：可能是客户端与HiveMetastore之间网络不通，常见于自建ECS客户端场景。解决方案：先查看两台机器能否连通，如果不能则需要解决机器网络互通的问题。HiveServer2问题 常见异常一：HiveServer2突然重启，一段时间内恢复正常 问题...
EMR HBase版本
本文为您介绍HBase版本的兼容性、选择建议以及发布记录。EMR HBase版本 EMR HBase随EMR版本一起发布，EMR主版本分为3.x系列和5.x系列，其中EMR 3.x系列...如果没有自建集群，可根据依赖的Hadoop版本，选择EMR 3.x或EMR 5.x系列的HBase版本。
概览
支持 从自建数据库同步数据 文档 简介 是否支持Serverless版本 从ECS上的自建MySQL同步至AnalyticDB PostgreSQL版 数据传输服务DTS（Data Transmission Service）支持将ECS上的自建MySQL数据同步至 AnalyticDB PostgreSQL版，帮助您轻松...
SmartData常见问题
在无EMR管控支持情况下，想使用自建的IDC集群，又不想在集群节点上配置AccessKey，该如何处理？JindoFS支持Auditlog吗？JindoFS支持Ranger集成吗？使用问题汇总 JindoFS如何手动下线节点？什么是JindoFS？JindoFS是阿里云开源大数据E-...
Hive作业异常排查及处理
在自建ECS上提交Hive作业异常 在自建ECS上提交Hive作业（不在EMR产品范围内），会出现不可预期报错。请使用EMR Gateway集群或者使用EMR-CLI自定义部署Gateway环境。更多信息，请参见 使用EMR-CLI自定义部署Gateway环境。数据倾斜导致的作业...
ZooKeeper的使用场景和MSE ZooKeeper的优势
优势二：免运维且控制台功能丰富 自建ZooKeeper和MSE ZooKeeper专业版对比如下：对比项 MSE ZooKeeper专业版 自建ZooKeeper 系统搭建及运维成本 资源全托管免运维，内置SLB，自动绑定域名，故障节点自动摘除。需自行购买各种资源搭建系统，...
迁移HDFS数据到OSS-HDFS
如果您使用的是自建ECS集群，需确保集群具备Hadoop2.7+或Hadoop3.x环境以及进行MapReduce作业的能力。通过自建ECS集群完成迁移任务前，您需要自行部署 JindoData（JindoData包含JindoSDK以及JindoFSx）。建议跟随版本迭代，下载最新版本。...
Hive访问Iceberg数据
如果创建集群时，元数据选择 设置为 内置MySQL 或 自建RDS，则可以按照以下步骤操作。使用默认Catalog时，执行以下命令，创建表。CREATE TABLE iceberg_db.sample_tbl(id BIGINT,name STRING)STORED BY 'org.apache.iceberg.mr.hive....
一键上云
本文介绍如何通过RDS PostgreSQL的一键上云功能将ECS或IDC自建PostgreSQL数据库迁移到RDS PostgreSQL。该功能采用物理流复制方式，具有速度快、操作简单、稳定性好、场景覆盖全等特点，能够有效提高迁移效率。前提条件 RDS PostgreSQL实例...
如何使用Prometheus监控Kafka
本文介绍如何使用Prometheus监控阿里云kafka及自建Kafka。自建Prometheus观测Kafka的痛点 使用自建Prometheus观测Kafka，可能面临的典型问题有以下几点：由于安全、组织管理等因素，您的业务通常部署在多个相互隔离的VPC，因此这需要您在多...
集群管理常见问题
如果您想在DataLake集群使用Hue，请参见 在DataLake集群自建Hue组件。EMR支持Oozie服务吗？如果不支持是否有替代方案？EMR DataLake集群（EMR-5.8.0和EMR-3.42.0及以上版本）不再包含Oozie组件。如果您需要使用工作流调度服务，可以通过EMR...
迁移OSS-HDFS服务不同Bucket之间的数据
如果您使用的是自建ECS集群，需确保集群具备Hadoop2.7+或Hadoop3.x环境以及进行MapReduce作业的能力。通过自建ECS集群完成迁移任务前，您需要自行部署 JindoData（JindoData包含JindoSDK以及JindoFSx）。建议跟随版本迭代，下载最新版本。...
配置服务器防火墙
RDS PostgreSQL的一键上云功能支持将ECS或IDC自建PostgreSQL迁移到RDS PostgreSQL。本文介绍上云前，自建PostgreSQL配置服务器防火墙，设置数据库端口允许被访问。操作步骤 说明 本文以CentOS系统为例进行配置，其他系统请参见对应官方文档...
访问Hive数据源
E-MapReduce集群业务场景为 新增数据湖，需具有Hadoop-Common、HDFS、YARN和Hive服务，且元数据为 自建 RDS 或 内置 MySQL。具体操作，请参见 创建集群。或已自建与AnalyticDB MySQL湖仓版（3.0）集群同地域的Hive集群。重要 元数据类型为 ...
最佳实践概览
ES-Hadoop使用 通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据 通过ES-Hadoop将HDFS中的数据写入Elasticsearch 通过ES-Hadoop实现Spark读写阿里云Elasticsearch数据 日志采集与分析 日志同步分析概述 通过自建Filebeat收集MySQL日志 ...
数据导入常见问题
例如，定长字符串超过建表时设置的长度，或INT类型的字段超过4个字节。actual column number is less than schema column number.待导入数据文件中某一行按照指定的分隔符切分后，列数小于指定的列数。可能原因是分隔符不正确。actual ...
使用独立的Trino集群
重要 如果待查询的数据全部保存在OSS上，或者建表语句时指定了Location，则可以不用配置host。Hive的部分表在创建时，会默认指定路径，因此在查询保存在数据集群上的数据时，为了查询时能够读取到这些表，Trino集群的每一台主机都需要配置...
HDFS云原生上云方案
低成本：相比自建，TCO最低可下降50%以上。弹性：存储计算资源解耦，独立伸缩，并大幅提升弹性能力，轻松实现云原生架构。稳定：免运维，无需关心硬件故障，由十年技术积累的专家团队保障服务稳定性。更多内容，请参见 Lindorm VS HDFS。...
为Spark集群设置元数据
添加Key为 spark.hadoop.hive.metastore.uris，Value为 thrift:/<自建Hive的IP地址>:9083 的配置项。该参数表示Hive Metastore使用Thrift协议连接的URI。参数值请根据您实际情况修改。单击 确定。在弹出的对话框中，输入执行原因，单击 ...
上下游存储
本文为您介绍实时计算Flink版上下游存储方面的常见问题。Kafka源表 Flink如何获取JSON数据？Flink和Kafka网络连通，但Flink无法消费或者写入数据？为什么Kafka源表数据基于Event Time的窗口后，不能输出数据？Flink中的Commit Offset有什么...
- 产品推荐
- 这些文档可能帮助您