删除共享带宽
您可以删除按量计费共享带宽实例。包年包月共享带宽实例，到期后自动释放。前提条件 要删除的共享带宽实例中未添加EIP，如有添加EIP，请先将EIP移出共享带宽实例。更多信息，请参见 移出共享带宽。使用限制 按增强95计费的按量付费共享带宽...
按量计费实例变配
按量计费实例变配 按量计费的共享带宽实例支持变配功能，您不仅可以修改共享带宽实例的带宽峰值，还可以转换共享带宽实例的计费方式。变配前，您需要了解以下信息：变配限制 生效时间 计费影响 适用场景 变配操作涉及转换公网计费方式时，...
管理日志
日志管理功能将EMR与日志服务SLS相结合，允许您在EMR控制台直接查询开源组件的日志。前提条件 已在EMR控制台上创建集群，具体操作请参见 创建集群。已开通SLS服务，具体操作请参见 快速入门。使用限制 本文操作仅适用于数据湖（DataLake）...
查看账单
操作步骤 登录 共享带宽管理控制台。选择以下任意一种方式，进入 账单详情 页面。方式一：通过共享带宽实例进入阿里云用户中心 说明 该操作仅适用于您的当前账号有共享带宽实例。在顶部菜单栏处，选择共享带宽实例的地域。在 共享带宽 页面...
转换计费方式
共享带宽 支持转换计费方式。本文为您介绍各计费方式间如何进行转换。转换说明 共享带宽 支持转换计费方式，各计费方式间转换情况如下所示。转换操作 转换说明 相关文档 包年包月转换为按量计费 包年包月转换为按量计费（按带宽计费）：...
添加EIP
创建共享带宽实例后，您可以将弹性公网IP（EIP）添加到共享带宽实例中，复用共享带宽中的带宽，节省公网带宽成本。前提条件 您已经创建了EIP，且EIP满足以下条件：EIP的计费方式为按量付费。EIP的地域与要加入的共享带宽的地域相同。EIP的...
创建共享带宽实例
创建共享带宽实例后，您可以将EIP添加到共享带宽实例中，使用共享带宽中的带宽，节省公网带宽使用成本。操作步骤 登录 共享带宽管理控制台。在 共享带宽 页面，单击 购买共享带宽。在购买页面，根据以下信息配置共享带宽实例，然后单击 ...
按增强型95计费
增强型95带宽计费是一种只需预先支付少量保底带宽费用，即可享受多倍弹性峰值带宽，并在月底按多次去峰后的带宽峰值和实际使用时长收费的计费模式。本文介绍按增强型95计费 共享带宽 的计费规则、费用组成和计费示例，以及如何导出按增强型...
管理资源队列
应用环境 开发：开发者编写、测试和调试代码的地方，通常包括IDE（集成开发环境）、版本控制系统和各类调试工具，用于开发者进行软件的构建与调试。生产：供用户使用的实际运行环境，提供稳定、高效和安全的服务。修改并发上限 在 队列管理...
统一ECS实例公网出口
创建 共享带宽 实例后，您可以将同地域下的 EIP 添加到 共享带宽 实例中，复用 共享带宽 中的带宽，统一管理公网出口，节省公网带宽使用成本。您可以将 EIP 绑定到专有网络 ECS、公网NAT网关、专有网络CLB等，绑定后这些产品也可以使用共享...
添加开源Elastic Search数据源
通过开源Elastic Search和DataV结合使用，可以实现数据分析和搜索结果的大屏展示。本文介绍在DataV中添加并使用开源Elastic Search数据源的方法。前提条件 已准备好待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 ...
添加开源Elastic Search数据源
通过开源Elastic Search和DataV结合使用，可以实现数据分析和搜索结果的大屏展示。本文介绍在DataV中添加并使用开源Elastic Search数据源的方法。前提条件 已准备好待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 ...
使用独立的Trino集群
背景信息 在使用开源大数据平台E-MapReduce控制台时，您可以在创建DataLake集群、自定义集群或Hadoop集群时选择Trino服务，或者创建独立的Trino集群使用Trino服务。Trino集群具备以下特点：Trino独享集群资源，受其他组件干扰少。支持弹性...
管理网络配置
在EMR Notebook的使用过程中，需要确保外部集群、数据源与工作空间机器的网络连通性。本文为您介绍如何添加、修改工作空间的网络配置。前提条件 已创建工作空间，详情请参见 管理工作空间。使用限制 在网络配置阶段，仅支持使用以下指定...
Spark对接HBase
Spark访问HBase示例 重要 计算集群需要和HBase集群处于一个安全组内，否则网络无法打通。在E-Mapreduce控制台创建计算集群时，请选择HBase集群所在的安全组。Java代码 JavaSparkContext jsc=new JavaSparkContext(sparkConf);try { List[]>...
Spark访问EMR HBase数据
Spark访问HBase示例 重要 计算集群需要和HBase集群处于一个安全组内，否则网络无法打通。在E-Mapreduce控制台创建计算集群时，请选择HBase集群所在的安全组。Java代码 JavaSparkContext jsc=new JavaSparkContext(sparkConf);try { List[]>...
开源自建对比
基础场景 对比项 开源自建SC/Dubbo+IaaS集群 开源自建SC/Dubbo+自建K8s集群 SAE IaaS购买和系统搭建 需要。需要。不需要。SAE 内置K8s集群底座和微服务框架。运维成本 需要。需要。不需要。SAE 免运维。硬件成本 按峰值固定保有包年IaaS，...
使用限制
重要 2020年04月01日00时00分起，新购共享带宽实例的起售带宽调整为1000 Mbps，但实际起售带宽请以控制台为准，给您带来不便，敬请谅解。配额限制 资源 默认限制 提升配额 每个账号每个地域最多可持有的按量计费共享带宽实例的数量 按带宽...
提交Flink作业
方式二：通过kubectl工具提交作业 通过kubectl连接Kubernetes集群，详情请参见 获取集群KubeConfig并通过kubectl工具连接集群。您也可以通过API等方式连接Kubernetes集群，详情请参见 使用Kubernetes API。新建 basic-emr-example.yaml ...
网络访问与安全设置
本文介绍网络访问的类型划分及设置方法，旨在指导您安全且高效地设置网络环境。网络访问类型 StarRocks支持阿里云VPC内网访问和公网访问方式。阿里云内网VPC访问：您可以在阿里云StarRocks实例所在网络VPC内或者其它VPC访问和使用StarRocks...
产品概述
什么是E-MapReduce 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
产品简介
开源大数据开发平台E-MapReduce（简称EMR）是运行在阿里云平台上的一种大数据处理系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还可以与阿里云...
什么是EMR Notebook
兼容开源 EMR Notebook兼容开源Jupyter Notebook，您可以通过文件导入、导出的方式实现开发工具的自由切换，从而降低了使用门槛。产品功能 交互式编程环境 支持逐步执行SQL和Python代码，并根据运行结果调整后续代码。多种数据源类型 支持...
为EIP设置最大可用带宽值
调用ModifyCommonBandwidthPackageIpBandwidth接口为已经加入到共享带宽的EIP设置最大可用带宽值。接口说明 通过调用 ModifyCommonBandwidthPackageIpBandwidth 接口，您可以灵活分配加入到共享带宽中的每个 EIP 的最大可用带宽值，避免...
使用限制
重要 在使用EMR时，所有操作都需要在EMR控制台上执行，通常不建议您在ECS控制台上进行操作，不合适的操作可能导致集群不稳定或异常。因此请您仔细阅读本文，如果遇到文档中的操作导致的问题或故障，需由您自行承担后果 或提前购买 专家服务...
网络访问与安全设置
本文介绍Serverless版本Milvus网络访问的类型划分及设置方法，旨在指导您安全且高效地设置网络环境。网络访问类型 Milvus提供阿里云VPC内网访问和公网访问方式。阿里云内网VPC访问：您可以在阿里云Milvus实例所在网络VPC内或者其它VPC访问...
Impala Web UI
访问Impala Web UI 您可以通过SSH隧道和控制台两种方式访问Impala Web UI，详情请参见 通过SSH隧道方式访问开源组件Web UI 和 访问链接与端口。说明 使用Knox访问UI的前提条件是，Master节点必须具备公网IP地址，并且只允许对Catalogd和...
什么是EMR on ECS
100%采用社区开源组件，适配并优化开源组件，性能远高于开源版本。基于时间的弹性伸缩能力，抢占式实例可进一步降低成本。解耦了计算与存储之间的绑定关系，实现了资源的弹性利用。分钟级别创建和扩容集群，无需手动部署和启动服务。产品...
AI开源项目
阿里云开源的AI及大数据相关开源项目，如用于全自动分布式深度学习系统TePDist、NLP 开发和应用工具包EasyNLP等，您可以根据需要选择AI及大数据开源项目。PAI相关的开源项目信息请前往 阿里云大数据&AI开源项目。
SmartData 3.1.x版本简介
功能变更 JindoFS存储优化 JindoFS缓存优化 JindoTable计算优化 JindoManager系统管理 JindoTools工具集 JindoFS生态支持 JindoFS存储优化 支持文件的checksum功能，对齐开源HDFS checksum相关接口，支持MD5MD5CRC和COMPOSITE_CRC两种算法...
开源对比
本文从稳定性、内核能力、治理能力以及使用习惯等方面，对比阿里云 云消息队列 Kafka 版 与开源Apache Kafka。稳定性 项目 云消息队列 Kafka 版 Apache Kafka 磁盘水位 磁盘写满删除旧数据。磁盘写满直接宕机。线程池隔离 读冷数据仍可以...
产品优势
阿里云E-MapReduce（简称EMR）为您提供相对方便可控的企业级开源大数据服务。您可以快速搭建开源大数据服务，例如Hadoop、Spark、Flink、Kafka和HBase服务。稳定可靠的开源组件 100%采用社区开源组件，随开源版本升级迭代，详情请参见 版本...
使用OpenAPI
本文为您介绍使用 共享带宽 OpenAPI的基本信息，包括版本说明、接入点说明、接口风格和调用方式支持情况。说明 共享带宽 和 专有网络 VPC 使用同一个服务地址（Endpoint）。版本说明 版本号 说明 2016-04-28 推荐使用。接入点说明 具体的...
什么是EMR on ACK
您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注大数据任务本身。形态对比 阿里云EMR提供on ECS和on ACK两种方式，以...
EMR Studio概述
EMR Studio是E-MapReduce提供的开源大数据开发套件，包含Apache Zeppelin、Jupyter Notebook和Apache Airflow等开源组件。能够无缝关联EMR集群（EMR on ECS和EMR on ACK）的计算引擎提交任务，并提供了交互式开发、任务调度和任务监控等...
HDFS Web UI介绍
访问HDFS Web UI 您可以通过SSH隧道和控制台两种方式访问HDFS Web UI，具体操作请参见 通过SSH隧道方式访问开源组件Web UI 和 访问链接与端口。NameNode服务地址 版本 访问地址 说明 hadoop 3.x http://${namenode_hostname}:9870${...
授权信息
访问控制（RAM）是阿里云提供的管理用户身份与资源访问权限的服务。使用RAM可以让您避免与其他用户共享阿里云账号密钥，并可按需为用户授予最小权限。RAM中使用权限策略描述授权的具体内容。本文为您介绍 开源大数据平台 E-MapReduce（EMR...
查看账单
操作步骤 登录 阿里云控制台。在顶部菜单栏单击 费用，进入用户中心。在左侧导航栏，选择 账单管理>账单详情。在 明细账单 页签中，设置查询 账期，并在列表中筛选产品为 开源大数据平台E-MapReduce，产品明细为 EMR StarRocks Serverless...
概述
工具集：提供相关的工具集，例如Jindo tool和迁移工具Jindo DistCp。各种Connectors：包括Hadoop connector、Flink connector和TensorFlow connector，支持Kite SDK、Apache Beams、Flume、Sqoop和Kafka。SmartData目前通过JindoFS和...
提交Spark作业
EMR支持CRD、spark-submit和控制台终端三种方式提交作业。本文为您介绍如何通过这三种方式提交Spark作业。前提条件 已在EMR on ACK控制台创建Spark集群，详情请参见 创建集群。注意事项 在本文的示例中，JAR包已经直接打包在了镜像中。如果...
- 产品推荐
- 这些文档可能帮助您