Ranger概述
Apache Ranger提供集中式的权限管理框架，可以对Hadoop生态中的HDFS、Hive和YARN等组件进行细粒度的权限访问控制，并且提供了Web UI方便管理员操作。Ranger组件介绍 Ranger主要由三个组件组成：Ranger Admin 您可以创建和更新安全访问策略...
手动执行脚本
在解决异常问题后，您可以单独指定失败的节点再次运行。当集群扩容后，您也可以指定扩容的节点单独运行集群脚本。操作步骤 进入脚本操作页面。登录EMR on ECS控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。在 集群管理 页面，...
Zeppelin常见问题
本文汇总了Zeppelin使用时的常见问题。EMR Studio上的Zeppelin与开源版本一致吗？如何设置Zeppelin Note的权限？Zeppelin执行时无法正常启动Interpreter EMR Studio上的Zeppelin与开源版本一致吗？EMR Studio上的Zeppelin是增强版的...
Sqoop常见问题
本文汇总了Sqoop使用时的常见问题。导入RDS数据至EMR时，时间字段显示延迟8小时如何处理？问题描述：例如，在云数据库RDS数据源中，数据表 Test_Table 中包含时间戳（TIMESTAMP）字段。您可以执行以下命令，导入 Test_Table 中的数据至HDFS...
镜像介绍
Anolis 8.2 Anolis OS 8是OpenAnolis社区发行的开源Linux发行版，与CentOS 8 100%兼容，支持多计算架构，提供稳定、高性能、安全可靠的操作系统。CentOS Stream 9 CentOS Stream是CentOS 8之后一个滚动发布的Linux发行版。Rocky Linux 8.6 ...
开源对比
云消息队列 RabbitMQ 版 是一款基于高可用分布式存储架构实现的AMQP 0-9-1协议的消息产品，能够兼容开源RabbitMQ客户端，与开源RabbitMQ相比，能够解决各种稳定性痛点（例如消息堆积、脑裂等问题），同时具备高并发、分布式、灵活扩缩容等...
元数据管理常见问题
本文汇总了使用E-MapReduce的元数据管理时的常见问题。报错提示“oss:/yourbucket/*/*/*”或“hdfs:/yourhost:9000/*/*/*”路径不存在，该如何处理？删除Hive Database时提示“java.lang.IllegalArgumentException:java....
Hadoop DistCp介绍
本文为您介绍Hadoop DistCp与Jindo DistCp的区别、Hadoop DistCp使用方法以及常见问题。说明 Hadoop DistCp的功能和使用方法等详细信息，请参见 Hadoop社区的DistCp使用文档。Hadoop DistCp和Jindo DistCp的区别 DistCp类型 功能 使用场景 ...
常见问题
本文介绍通过产品使用过程中的一些常见问题，便于帮助您快速定位问题。SOFAStack 常见基础问题 SOFAStack 是否可以部署在虚拟机、物理机上？可以，SOFA 部署支持物理机、虚机 VM。SOFAStack 当前是否只支持阿里云容器服务 ACK？SOFA 部署...
开源自建对比
您可以通过不同场景，对比 SAE 与开源自建产品在系统搭建、成本、功能管理、弹性效率和监控诊断等方面的优势。基础场景 对比项 开源自建SC/Dubbo+IaaS集群 开源自建SC/Dubbo+自建K8s集群 SAE IaaS购买和系统搭建 需要。需要。不需要。SAE ...
微服务引擎的线上流量治理
本文介绍微服务引擎的线上流量治理的场景描述、解决问题、架构图及操作参考链接。场景描述 随着业务不断创新，微服务架构及数字化转型不断落地，在这个过程中大量企业采用了开源的组件构建微服务，例如Spring Cloud体系或Apache Dubbo等。...
Superset（仅对存量用户开放）
常见问题 问题现象：EMR-4.6和EMR-3.33之前版本的集群，使用admin用户第一次登录Superset的Web UI时，报错invalid login。解决方法：使用SSH方式登录到集群主节点，详情请参见 登录集群。重要 请使用root用户进行以下操作。执行以下命令，...
制品中心
制品特点 内容安全可信 容器镜像均以Anolis OS（Anolis OS由龙蜥开源社区发布的龙蜥操作系统，兼容RHEL/CentOS Linux的社区发行版）、Alibaba Cloud Linux（Alibaba Cloud Linux简称Alinux，是由阿里云操作系统团队以Anolis OS为基础构建的...
常见问题
本文汇总了使用Impala时的常见问题。Impala 3.4使用JDBC查询Impala 10秒提示会话超时，该怎么办？Impala无法找到Hive新增的表，该怎么办？Impala写入Hive表数据的时候，是否可以修改写入文件的owner？如何调整Impalad可使用的节点内存总量...
DataWorks数据集成常见问题
本文将会为您介绍通过DataWorks同步数据至Hologres时，常见的问题以及对应的排查手段，以帮助您能在同步遇见问题时能快速的解决。开源DataX如何将数据同步至Hologres？报错：Holohub does not binary type of Hologres for now?报错：...
计费常见问题
本文汇总了E-MapReduce（简称EMR）计费的常见问题。E-MapReduce是否支持自动续费？如何查看EMR集群和所属的ECS实例的到期时间？EMR集群已到期但是集群的ECS实例未到期时，会产生计费吗？如何解决？EMR计费模式是否可以转换？我确认订单后未...
常见问题
本文汇总了Kudu使用时的常见问题。在哪里查看Kudu的日志文件？Kudu支持的分区方式有哪些？如何访问Kudu WebUI？Kudu客户端连接报错NonRecoverableException 如何查看社区FAQ？报错Bad status:Network error:Could not obtain a remote ...
WATERMARK语句
语法 SELECT watermark(projectItem,durationSpec)as watermarkItem,projectItem[,projectItem]*FROM tableExpression WATERMARK主要是为了解决数据流场景中常见的数据延迟问题。Spark在Aggregate和Join计算过程中，计算引擎会维护中间...
常见问题
本文汇总了Hive使用时的常见问题。说明 对于Hive作业报错或其他异常问题请参见 Hive作业异常排查及处理。对于Hive Metastore和HiveServer等服务相关的异常请参见 Hive服务异常排查及处理。作业长时间处于等待状态，如何处理？Map端是否读取...
Alibaba Cloud Linux常见问题
本文介绍Alibaba Cloud Linux镜像的常见问题和常见操作指导。功能咨询 在阿里云ECS中运行Alibaba Cloud Linux是否收费？Alibaba Cloud Linux镜像本身是免费的，但是您需要为ECS实例等其他资源的支付费用。Alibaba Cloud Linux支持哪些阿里...
Alibaba Cloud Linux常见问题
本文介绍Alibaba Cloud Linux镜像的常见问题和常见操作指导。功能咨询 在阿里云ECS中运行Alibaba Cloud Linux是否收费？Alibaba Cloud Linux镜像本身是免费的，但是您需要为ECS实例等其他资源的支付费用。Alibaba Cloud Linux支持哪些阿里...
常见问题
本文汇总了DeltaLake使用时的常见问题。为什么建表失败？流式写入Delta时产生了很多的小文件怎么办？Optimize执行时间很长是什么原因？为什么Optimize失败了？应该如何处理？执行了Optimize，为什么还有很多小文件？执行了Vacuum，为什么...
登录集群
常见问题 如何获取主节点公网IP地址和节点名称？进入节点管理页面。登录 E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击目标集群操作列的 节点管理。在 节点管理 页面，单击主实例组所在行的 图标。公网IP：可以...
HMaster服务异常提示Cannot seek after EOF
影响范围 受影响的HBase版本为2.3.4，对应的EMR集群版本：EMR-5.6.0之前版本 EMR-4.8.0至EMR-4.10.0版本（均包含）解决方法 说明 替换前请备份好JAR文件。下载 hbase-server-2.3.4.jar，并替换HBase集群header节点上对应的JAR文件。JAR文件...
实例启动异常常见错误与对应解决方案
针对实例启动过程中因操作系统内配置异常、异常关机等问题导致操作系统无法正常启动的情况，您可以通过VNC登录实例发现的启动异常或者实例健康诊断工具返回的异常字段，在本文查看此类问题的解决方案。Windows 1662001135：Windows系统因...
EMR数据开发（旧版）停止全面支持公告
2023年9月30日0点起，EMR数据开发（旧版）功能将停止全面支持，不再支持用户答疑、问题解决、SLA保障赔付等服务。2024年12月30日0点起，EMR数据开发（旧版）功能将按地域逐步下线。如果您还在使用数据开发（旧版）功能，请尽快将作业及工作...
TSDB开源生态概述
时间序列数据库TSDB以其强大的功能和兼容性，对于当前的一些开源解决方案实现了较好的适配。以下是TSDB与一些开源组件或开源项目对接的方法。Grafana如何对接TSDB Quick BI如何接入TSDB
产品优势
阿里云 可观测监控 Prometheus 版 全面对接开源Prometheus生态，支持类型丰富的组件监控，覆盖绝大部分开源基础设施软件指标采集能力。提供多种开箱即用的预置监控大盘，并集成丰富的Kubernetes基础监控以及常用服务预设看板，且提供全面...
产品优势
阿里云 可观测监控 Prometheus 版 全面对接开源Prometheus生态，支持类型丰富的组件监控，覆盖绝大部分开源基础设施软件指标采集能力。提供多种开箱即用的预置监控大盘，并集成丰富的Kubernetes基础监控以及常用服务预设看板，且提供全面...
常见问题
本文汇总了使用EMR Workflow时的常见问题。报错“The bucket you access does not belong to you”问题 如何在仅部分worker节点安装了依赖环境的集群中执行PySpark？报错“The bucket you access does not belong to you”问题 问题详情 当...
管理日志
常见问题 Q：已开通SLS服务，并授权相关角色，为什么控制台还是提示“该资源暂未开启服务日志采集，请到EMR控制台对应集群的日志管理页面开启服务日志采集”？A：当前集群并未设置投递日志的服务，请单击右侧的 设置日志投递范围，完成日志...
扩容集群
当E-MapReduce集群计算资源或存储资源不足时，您可以通过水平扩展Core节点和Task节点来满足需求。前提条件 已创建集群，详情请参见 创建集群。...扩容集群相关的问题，详情请参见 集群管理常见问题。API方式，详情请参见 IncreaseNodes-扩容。
EMR集群不支持跨区域访问OSS问题
解决方法：建议您使用相同区域的OSS Bucket。创建集群时所有节点都打开 挂载公网 开关或集群创建后在ECS控制台开通公网IP地址，且使用OSS的外网Endpoint进行访问。如需打开 挂载公网 开关，请参见 创建集群。如需在ECS上申请开通公网IP地址...
HDFS Web UI介绍
访问HDFS Web UI 您可以通过SSH隧道和控制台两种方式访问HDFS Web UI，具体操作请参见 通过SSH隧道方式访问开源组件Web UI 和 访问链接与端口。NameNode服务地址 版本 访问地址 说明 hadoop 3.x http://${namenode_hostname}:9870${...
迁移方案
本文为您介绍从原有集群（线下IDC自建集群或ECS自建）迁移Flink作业到DataFlow集群的整体流程，包括准备工作，如何迁移作业，以及常见问题等。背景信息 EMR集群的基础信息，请参见 集群规划。准备工作 集群规划 创建DataFlow集群时，集群...
添加开源Elastic Search数据源
本文介绍在DataV中添加并使用开源Elastic Search数据源的方法。前提条件 已准备好待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 DataV控制台。在 工作台 页面，单击 数据准备>数据源，进入 数据源 页面，单击 新建...
写入文件提示无法满足最小写入副本要求
本文介绍写入文件提示无法满足最小写入副本要求问题的原因和解决方案。具体报错 报错信息如下所示。其中，【X】是当前正在运行的DataNode数量，【Y】是被排除在此操作之外的DataNode数量。org.apache.hadoop.ipc.RemoteException(java.io....
快速使用EMR Workflow
常见问题 报错“The bucket you access does not belong to you”问题 相关文档 EMR Workflow的更多介绍，请参见 什么是EMR Workflow。更多任务类型的详细信息，请参见 任务类型。工作流相关的操作，请参见 管理工作流。
什么是图计算服务
Graph Compute 与其他开源图计算相比的优势 问题一：查询性能为什么能比开源好很多 图计算服务内核引擎iGraph在分区并发查询的基础上，通过自研的协程异步框架并发召回，将同步串行磁盘访问改造为异步并行，极大的提高了查询性能；...
UI和端口
本文为您介绍FE和BE的端口，以及如何访问端口。...18030 说明 EMR-5.9.0及以上版本、EMR-3.43.0及以上版本。...rpc_port 9020 BE->FE FE<-->FE FE上的Thrift Server端口。query_port 9030 FE用户 FE上的...常见问题 为什么8030、8040端口访问失败？
- 产品推荐
- 这些文档可能帮助您