修改预约重启时间
在 计划内运维事件 列表中，在 云服务器 页签下，找到已经设置了重启计划的ECS实例，在 操作 列，单击 预约重启。在 预约重启时间 页面，选择 预约日期 和 预约时间。说明 预约重启时间不能超过 最晚可预约时间。其中，最晚可预约时间 比 ...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
包年包月实例升配规格
如果选择了预约重启并设置了重启时间，您可以在ECS控制台的 事件>待处理事件>变配重启事件 中查看或修改预约时间。警告 重启实例会造成您的实例停止工作，可能导致业务中断，建议您在非业务高峰期时执行该操作。阅读升配须知，如无问题，...
EMR-5.5.x版本说明
Hive 优化了Hive Jindo批量删除的问题。优化了HiveServer2 OOM问题。优化了Hive on Spark。适配JindoSDK。Presto 升级Presto至社区358版本。默认增加MySQL、Iceberg、Hudi、Phoenix、Kudu和Delta连接器，并更新默认配置。支持数据湖分析。...
EDAS旧版本监控报警功能下线通知
EDAS于2020年2月13日对监控报警功能进行了升级，经过4个月的迁移过渡期，绝大部分用户已经对应用进行了重启，并完成迁移。EDAS项目组决定于2020年8月31日将老版本的监控报警系统下线。下线影响 旧版监控报警功能下线以后，将会对EDAS产品...
Hive访问EMR HBase数据
在阿里云E-MapReduce（EMR）中，Hive支持通过内部表和外部表两种方式来访问和处理存储在HBase中的数据。本文通过示例为您介绍，如何使用EMR上的Hive处理EMR HBase数据。前提条件 已创建选择了Hive、HBase和Zookeeper服务的自定义集群...
Hive访问EMR HBase数据
在阿里云E-MapReduce（EMR）中，Hive支持通过内部表和外部表两种方式来访问和处理存储在HBase中的数据。本文通过示例为您介绍，如何使用EMR上的Hive处理EMR HBase数据。前提条件 已创建选择了Hive、HBase和Zookeeper服务的自定义集群...
Hive访问EMR Phoenix数据
在阿里云E-MapReduce（EMR）中，Hive支持通过配置外部表来访问和处理存储在Phoenix系统中的数据。本文通过示例为您介绍，如何使用EMR上的Hive处理EMR Phoenix数据。前提条件 已创建选择了Hive、HBase、Zookeeper和Phoenix服务的自定义集群...
Tez
重启Hive。在 集群服务 页面，选择右上角的 更多操作>重启。在弹出的对话框中，输入 执行原因，单击 确定。在 确认 对话框中，单击 确定。访问Tez Web UI 在E-MapReduce控制台的 访问链接与端口 页面，单击 TEZ UI 所在行的链接，即可访问...
续费降配
是否需要重启实例 降低实例规格：需要 若设置了重启时间，实例将在您设置的时间自动重启使规格配置生效。若未设置重启时间，必须在新的计费周期内手动重启实例，否则降配操作不会生效。变更公网带宽：不需要 转换数据盘计费方式：不需要 新...
续费降配
是否需要重启实例 降低实例规格：需要 若设置了重启时间，实例将在您设置的时间自动重启使规格配置生效。若未设置重启时间，必须在新的计费周期内手动重启实例，否则降配操作不会生效。变更公网带宽：不需要 转换数据盘计费方式：不需要 新...
Hive访问Iceberg数据
重启Hive服务，详情请参见 重启服务。进入Hive命令行。使用SSH方式登录到集群主节点，详情请参见 登录集群。执行以下命令，进入Hive命令行。hive 返回信息如下所示时，表示进入Hive命令行。Logging initialized using configuration in ...
从统一元数据库迁出到用户自建的RDS实例
重启Hive所有组件 进入Hive服务页面。登录 阿里云E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击上方的 集群管理 页签。在 集群管理 页面，单击相应集群所在行的 详情。在左侧导航栏，选择 集群服务>Hive。单击 ...
调整YARN队列
重启Hive的HiveServer2组件。在左侧导航栏中，选择 集群服务>Hive。在 组件列表 区域，单击 HiveServer2 所在行的 重启。在 执行集群操作 对话框，输入 执行原因，单击 确定。在 确认 对话框中，单击 确定。重启Spark的ThriftServer组件。...
管理Hive Catalog
本文将从以下方面为您介绍如何管理Hive Catalog：配置Hive元数据 创建Hive Catalog 使用Hive Catalog 查看Hive Catalog 删除Hive Catalog 前提条件 在使用Hive MetaStore或阿里云DLF作为Hive Catalog元数据中心前，需要完成以下配置：使用...
开启native查询加速
true，来开启查询加速并重启Hive，此方式适用于Hive on MR和Hive on Tez。代码示例如下。set hive.jindotable.native.enabled=true;说明 目前使用Hive查询加速功能时，暂不支持复杂数据类型，例如Map、Struct或Array。全局设置Spark 进入...
Hive使用JindoSDK处理OSS-HDFS服务中的数据
方式二：在配置文件中指定OSS-HDFS服务路径 您可以在Hive Metastore的 hive-site.xml 配置文件中设置 hive.metastore.warehouse.dir 到OSS-HDFS服务路径，然后重启Hive Metastore，后续创建的数据库和数据库下的表均默认存储于OSS-HDFS服务...
Hive作业配置
E-MapReduce默认提供了Hive环境，您可以直接使用Hive来创建和操作创建的表和数据。前提条件 已创建好项目，详情请参见 项目管理。已准备好Hive SQL的脚本，并上传到OSS的某个目录中（例如 oss:/path/to/uservisits_aggre_hdfs.hive）。...
Hive Metastore使用加密文件访问RDS
DataLake或Custom集群类型 sudo mv/tmp/hive.jceks$HIVE_CONF_DIR sudo chown hive$HIVE_CONF_DIR/hive.jceks Hadoop集群类型 sudo mv/tmp/hive.jceks$HIVE_CONF_DIR sudo chown hadoop$HIVE_CONF_DIR/hive.jceks 在EMR控制台目标集群Hive...
Hive基础操作
本文介绍如何通过Hive在E-MapReduce集群上创建库和表等操作。前提条件 已创建集群，且选择了Hive服务，详情请参见 创建集群。进入Hive命令行 使用SSH方式登录集群，详情请参见 登录集群。执行以下命令，切换为hadoop用户。su-hadoop 执行...
配置Presto开启Ranger权限控制
hive.ranger.policy.hive-servicename emr-hive 上一步开启的Hive Service的名称，EMR集群中默认为emr-hive。hive.ranger.service.basic-auth-username admin Ranger UI的用户名。hive.ranger.service.basic-auth-password Admin1234 ...
常见问题
本文汇总了Hive使用时的常见问题。说明 对于Hive作业报错或其他异常问题请参见 Hive作业异常排查及处理。对于Hive Metastore和HiveServer等服务相关的异常请参见 Hive服务异常排查及处理。作业长时间处于等待状态，如何处理？Map端是否读取...
Hive以EMR集群的方式处理OSS-HDFS服务中的数据
方式二：在配置文件中指定OSS-HDFS服务路径 您可以在Hive Metastore的 hive-site.xml 配置文件中设置 hive.metastore.warehouse.dir 到OSS-HDFS服务路径，然后重启Hive Metastore，后续创建的数据库和数据库下的表均默认存储于OSS-HDFS服务...
Hive连接方式
本文为您介绍在E-MapReduce集群提交Hive SQL的三种方式。前提条件 已创建集群，且选择了Hive服务，详情请参见 创建集群。注意事项 本文示例中需替换的参数：<主节点的节点名称>：您可以在EMR控制台目标集群的 节点管理 页面获取，具体操作...
查看集群日报与分析
Hive使用量分析 在Hive使用分析中，您可以获取以下图表：Hive库存储量使用量分布图 Hive用户总存储量分布 Hive表文件大小分布比例 Hive表热冷数据分布 Hive表存储格式分布 Hive详细信息 在Hive信息中会展示Hive库和Hive表的详细信息。Hive...
Spark/Hive/HDFS使用JindoSDK访问OSS-HDFS服务
本文介绍如何通过在CDP集群中部署JindoSDK（4.5.0），访问OSS-HDFS服务相关操作...property><name>fs.AbstractFileSystem.oss.impl</name><value>...accessKeySecret</name><value>KZo149BD9GLPNiDIEmdQ7d*</value></property>重启Hive/Hive...
AIMaster：弹性自动容错引擎
配置容错消息通知 任务开启容错监控后，如果您希望容错发生时可以进行通知，比如任务发生了重启，那么您可以在 工作空间详情，选择 事件中心，点击 新建事件规则，事件类型选择 DLC任务>任务自动容错。具体操作，请参见 工作空间事件中心。...
EMR集群JindoSDK升级流程（旧版控制台）
如果是新建集群，则需要重启Hive、Presto、Impala、Druid、Flink、Solr、Ranger、Storm、Oozie、Spark和Zeppelin等组件。如果是扩容新节点，则需要重启对应节点上的Hive、Presto、Impala、Druid、Flink、Solr、Ranger、Storm、Oozie、Spark...
EMR集群JindoSDK升级流程（新版控制台）
如果是新建集群，则需要重启Hive、Presto、Impala、Druid、Flink、Solr、Ranger、Storm、Oozie、Spark和Zeppelin等组件。如果是扩容新节点，则需要重启对应节点上的Hive、Presto、Impala、Druid、Flink、Solr、Ranger、Storm、Oozie、Spark...
元数据管理常见问题
解决方法：登录集群的Master节点，在$HIVE_CONF_DIR/hivemetastore-site.xml 中，找到对应数据库的访问地址和用户名密码信息。javax.jdo.option.ConnectionUserName/对应数据库用户名;javax.jdo.option.ConnectionPassword/对应数据库访问...
ODPS-0123031
错误码：ODPS-0123031:ODPS partition exception 错误1：maximum 60000 partitions allowed 错误信息示例 ODPS-0123031:ODPS partition exception-maximum ...解决方案 执行以下命令打开Hive兼容模式：SET odps.sql.hive.compatible=true;
流式入库
例如，Hive和Delta Lake。Kudu也支持流式入库，但是Kudu的存储是自己设计的，不属于基于大数据存储系统之上的解决方案。本文以Kafka数据源为例介绍，其余数据源根据控制台提示操作即可。流式入库演变 阶段 详细情况 以前 以前针对流式入库...
EMR-4.5.x版本说明
EMR-4.5.1 发布日期 2020年12月13日 更新内容 该版本修复了Hive和Presto查询分区表的问题。该版本目前只支持部分地域，包括华东1（杭州）、华东2（上海）和华北2（北京）。EMR-4.5.0 发布日期 2020年12月7日 新增内容 服务 变更点 ESS（EMR...
Serverless Presto概述
Serverless Presto是云原生数据湖团队基于Presto打造的交互式分析引擎，Presto开发的初衷就是为了解决使用Hive来进行在线分析速度太慢的问题，因此它采用全内存流水线化的执行引擎，相较于其它引擎会把中间数据落盘的执行方式，Presto在...
EMR-5.15.x版本说明
发行版本信息 DataLake集群 服务 版本 Hadoop-Common 3.2.1 HDFS 3.2.1 OSS-HDFS 1.0.0 Hive 3.1.3 Spark2 2.4.8 Spark3 3.3.1 Tez 0.10.2 Trino 422 DeltaLake 2.2.0 Hudi 0.13.1 Iceberg 1.1.0 Flume 1.9.0 Kyuubi 1.7.1 YARN 3.2.1 ...
EMR-3.49.x版本说明
发行版本信息 DataLake集群 服务 版本 Hadoop-Common 2.8.5 HDFS 2.8.5 OSS-HDFS 1.0.0 Hive 2.3.9 Spark2 2.4.8 Spark3 3.3.1 YARN 2.8.5 Trino 422 DeltaLake 2.2.0 Hudi 0.13.1 Iceberg 1.1.0 Flume 1.9.0 Kyuubi 1.7.1 Tez 0.10.2 ...
使用私有池保障节省停机模式ECS实例的重启成功率
但是节省停机模式重启成功率依赖于实例库存，当业务峰值到来时，开启了节省停机模式的实例可能会因为库存不足导致重启失败，对业务带来更大的影响。本文介绍如何通过私有池保障节省停机模式实例的重启成功率。操作步骤 假设已有一台按量...
ECS系统事件汇总
Scheduled：因系统维护实例重启计划中 Instance:SystemMaintenance.Reboot:Executing：因系统维护实例重启执行中 Instance:SystemMaintenance.Reboot:Executed：因系统维护实例重启已完成 Instance:SystemMaintenance.Reboot:Avoided：因...
- 产品推荐
- 这些文档可能帮助您