移除分布式实例
分布式实例不支持直接释放，若您需要释放闲置的 云原生内存数据库Tair 分布式实例资源，您可以移除或释放分布式实例下各子实例，以节省资源。操作步骤 登录 Tair管理控制台。在左侧导航栏，单击 全球多活。找到目标分布式实例，单击实例ID...
移除分布式实例
分布式实例不支持直接释放，若您需要释放闲置的 云原生内存数据库Tair 分布式实例资源，您可以移除或释放分布式实例下各子实例，以节省资源。操作步骤 登录 Redis管理控制台。在左侧导航栏，单击 全球多活。找到目标分布式实例，单击实例ID...
基于启动模板配置多个实例规格的伸缩组
更多信息，请参见 实例规格 中抢占式实例的配置说明。抢占式实例 伸缩组仅支持按量付费和抢占式实例两种实例来源模式，如果创建的启动模板为包年包月计费模式，弹性伸缩不支持通过包年包月计费模式的启动模板来创建伸缩组，系统会自动转换...
安装文件系统SDK
其中MapReduce以伪分布式方式运行。有关MapReduce的伪分布方式，请参见 Apache Hadoop。配置Hadoop 本节以Hadoop 2.7.2版本为例，介绍如何配置Hadoop。下载 Hadoop，建议版本不低于2.7.2。执行以下命令，解压Hadoop压缩包。tar-zxf hadoop-...
使用伸缩配置特性实现自动扩缩容
您也可以视情况选用已有的RAM角色，在伸缩配置中选择实例RAM角色时，请确保实例RAM角色的权限策略允许伸缩组内的实例扮演该RAM角色，否则伸缩配置无法弹出实例。例如，RAM角色 AliyunECSImageExportDefaultRole 用于授权导出镜像，允许当前...
通过弹性伸缩自动扩缩容ECI实例
创建伸缩配置 伸缩组自动扩张时，将根据伸缩配置中的实例配置来源来创建ECI实例，并将ECI实例加入到伸缩组中。更多信息，请参见 创建伸缩配置（ECI实例）。说明 由于容器镜像一般较大，拉取镜像会影响ECI实例的启动耗时，因此配置时建议...
概述
分布式事务 DTX（Distributed Transaction-eXtended）是蚂蚁集团自主研发的金融级分布式事务中间件，用来保障在大规模分布式环境下业务活动的最终一致性。在蚂蚁集团内部被广泛地应用于交易、转账、红包等核心资金链路，服务于亿级用户的...
基础术语
发起方 initiator 分布式事务的发起方负责启动分布式事务，通过调用参与者的服务，将参与者纳入到分布式事务当中，并决定整个分布式事务是提交还是回滚。一个分布式事务有且只能有一个发起方。参与者 participant 参与者提供分支事务服务。...
文件存储 HDFS 版和对象存储OSS双向数据迁移
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：Hadoop集群部署JindoSDK 下载最新的 JindoSDK安装包。本文以jindosdk-4.5.0为例。执行...
在文件存储 HDFS 版上使用Apache HBase
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：配置Apache HBase 将Hadoop中配置的core-site.xml复制到${HBASE_HOME}/conf目录下。cp...
安装Spark单机版
模板示例中使用的软件版本如下：Java JDK（Java Development Kit）：1.8.0 Hadoop（分布式系统基础架构）：2.7.7 Scala（编程语言）：2.12.1 Spark（计算引擎）：2.1.0 使用模板创建资源栈成功后即可获取SparkWebSiteURL，登录Spark管理...
安装Spark集群版
模板示例中使用的软件版本如下：Java JDK（Java Development Kit）：1.8.0 Hadoop（分布式系统基础架构）：2.7.7 Scala（编程语言）：2.12.1 Spark（计算引擎）：2.1.0 使用模板创建资源栈成功后即可获取SparkWebSiteURL，登录Spark管理...
源为PolarDB-X的任务配置方案
任务配置方案 方案 配置方式 特点总结 方案一 针对 PolarDB分布式版 下的多个RDS MySQL实例，配置多个同步或迁移至目标实例的DTS任务，并且在配置过程中，需将多个RDS MySQL的数据库表名都映射成目标实例的库表名。该方案相比于直接配置 ...
源为PolarDB-X的任务配置方案
任务配置方案 方案 配置方式 特点总结 方案一 针对 PolarDB分布式版 下的多个RDS MySQL实例，配置多个同步或迁移至目标实例的DTS任务，并且在配置过程中，需将多个RDS MySQL的数据库表名都映射成目标实例的库表名。该方案相比于直接配置 ...
自助建站方式汇总
环境类型 部署方式 说明 搭建Hadoop环境 手动搭建Hadoop环境 本教程介绍如何在Linux操作系统的ECS实例上快速搭建Hadoop伪分布式环境。更换镜像部署Windows环境 云市场镜像集成了操作系统和应用程序，您可以使用阿里云市场镜像快速部署ECS...
释放按量付费实例
实例为非分布式子实例，分布式子实例需要在 全球多活 页签进行释放操作，具体操作请参见 释放分布式实例。注意事项 仅运行状态为运行中的实例允许被释放。部分符合要求的实例在释放后会在回收站保留一段时间，您可在回收站中对实例进行解锁...
释放按量付费实例
实例为非分布式子实例，分布式子实例需要在 全球多活 页签进行释放操作，具体操作请参见 释放分布式实例。注意事项 仅运行状态为运行中的实例允许被释放。部分符合要求的实例在释放后会在回收站保留一段时间，您可在回收站中对实例进行解锁...
高主频型
本章节介绍高主频型实例规格族的特点并列出了具体的实例规格。推荐 高主频计算型实例规格族hfc8i 高主频计算型实例规格族hfc7 高主频计算型实例规格族hfc6 高主频通用型实例规格族hfg8i 高主频通用型实例规格族hfg7 高主频通用型实例规格族...
退订包年包月实例
具体操作，请参见 释放分布式实例。注意事项 仅运行状态为 运行中 的实例允许被退订。建议您在退订前先创建备份并下载备份集。更多信息，请参见 手动备份并下载备份集。操作步骤 访问 Redis实例列表，在上方选择地域。找到目标实例，在目标...
退订包年包月实例
具体操作，请参见 释放分布式实例。注意事项 仅运行状态为 运行中 的实例允许被退订。建议您在退订前先创建备份并下载备份集。更多信息，请参见 Tair持久化与备份恢复方案概览。操作步骤 访问 Tair实例列表，在上方选择地域。找到目标实例...
在文件存储 HDFS 版上使用Presto
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：配置Presto 执行以下命令，解压Presto安装包。tar-zxf presto-server-0.265.1.tar.gz ...
创建集群
通过阿里云E-MapReduce（简称EMR），您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。本文为您介绍在EMR on ECS上创建集群的操作步骤和相关配置，帮助您快速搭建和管理大数据集群。...
内存型
适用场景：数据分析与挖掘 Hadoop、Spark集群以及其他企业大内存需求应用 分布式内存缓存，比如Redis 网站和应用服务器 大型多人在线游戏（MMO）服务器 与操作系统的兼容性说明 更多信息，请参见 Intel实例规格与操作系统兼容性说明。...
在文件存储 HDFS 版上使用Apache Tez
./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/lib/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/lib/*:./...
快速访问与配置
在使用阿里云Elasticsearch实例完成相关业务前，您需要先访问该实例。同时您也可以配置实例，以提高查询效率和服务的安全性。本文介绍如何访问实例，以及阿里云Elasticsearch支持的配置。访问实例 您可以通过以下三种方式访问实例。访问...
Node Labels特性使用
主备切换后，新的Active节点无法读到本地存储的Node Labels信息，所以必须将 yarn.node-labels.fs-store.root-dir 配置为分布式存储路径，例如/tmp/node-labels 或者${fs.defaultFS}/tmp/node-labels（EMR Hadoop默认文件系统为分布式HDFS...
应用独享负载均衡实例
在ECS集群中，您为指定应用绑定一个负载均衡SLB实例，可以实现流量从SLB实例IP转发到该应用下的所有实例。前提条件 创建SLB实例。具体操作，请参见 创建实例。背景信息 在EDAS控制台中，允许为单个应用配置独享的负载均衡实例。如下图所示...
使用端口实现流量分发（共享负载均衡实例）
为了节省成本，有可能将多个应用共享（复用）一个负载均衡实例，使用同一个公网IP地址和域名对外暴露，但仍希望通过转发策略将请求转发到对应的应用。本文介绍多应用共享负载均衡实例时，如何使用端口实现流量的转发。背景信息 说明 在ECS...
搭建Hadoop环境
本文介绍如何在Linux操作系统的ECS实例上快速搭建Hadoop分布式环境。前提条件 搭建Hadoop环境时，已有的ECS实例必须满足以下条件：公网IP：实例已分配公网IP地址或绑定弹性公网IP（EIP）。操作系统：Linux操作系统。实例安全组的入方向规则...
产品功能
子任务失败自动重试 如果是分布式任务（分片模型或MapReduce模型），子任务也支持失败自动重试和重试间隔，同样支持通过任务管理的高级配置进行配置。多种流控手段 实例并发数 任务级别流控，表示一个任务同时最多运行多少个实例，默认为1...
功能发布记录
2024年 2024年2月 功能名称 功能描述 发布时间 发布地域 相关文档 支持负载均衡健康检查类型 伸缩组的健康检查方式支持选择 LOAD_BALANCER 选项，即根据负载均衡的（暂不包括负载均衡CLB类型）健康检查结果来判断伸缩组内的实例健康状态。...
使用域名或URL实现流量分发（共享负载均衡实例）
为了节省成本，有可能将多个应用共享（复用）一个负载均衡实例，使用同一个公网IP地址和端口对外暴露，但仍希望通过转发策略将请求转发到对应的应用。本文介绍多应用共享负载均衡实例和端口时，如何使用域名实现流量的转发。背景信息 说明 ...
快速入门
部署成功后，您就可以像在Hadoop分布式文件系统（Hadoop Distributed File System）中一样管理和访问数据。前提条件 已开通 文件存储 HDFS 版 服务。具体操作，请参见 开通文件存储HDFS版服务。已购买ECS实例。更多信息，请参见 选购ECS...
产品功能
子任务失败自动重试 如果是分布式任务（分片模型或MapReduce模型），子任务也支持失败自动重试和重试间隔，同样支持通过任务管理的高级配置进行配置。多种流控手段 实例并发数 任务级别流控，表示一个任务同时最多运行多少个实例，默认为1...
计算设置概述
设置Dataphin实例的计算引擎为Hadoop CDH5.x Hadoop CDH6.x Hadoop 全球应用较广的分布式系统基础架构，核心为HDFS和MapReduce，提供了海量数据存储与计算。全球应用较广的分布式系统基础架构，核心为HDFS和MapReduce，提供了海量数据存储...
产品功能
SchedulerX主要提供调度...子任务失败自动重试：如果是分布式任务（并行计算/内网网格/网格计算），子任务也支持失败自动重试和重试间隔，同样可以通过任务管理的高级配置进行配置。报警监控 失败报警 超时报警 无可用机器报警 报警方式：短信
Trino使用JindoSDK查询OSS-HDFS服务中的数据
Trino是一个开源的分布式SQL查询引擎，适用于交互式分析查询。本文介绍Trino如何使用JindoSDK查询OSS-HDFS服务中的数据。前提条件 已创建ECS实例。具体步骤，请参见 选购ECS实例。已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。...
历史记录
分布式模型子任务详情，运行中可以真实显示每台机器正在运行的子任务数。Master节点挂了，server会负责清理slave节点的资源，防止内存泄漏。1.0.0，2019-04-30 新特性 支持 crontab 和 fixed_rate 表达式进行周期性定时调度。支持工作流...
创建分布式实例
若未创建实例，您可以新购一个 经典 版 Tair 内存型 实例，系统将自动创建一个分布式实例，并将新创建的实例将作为这个分布式实例中的第一个子实例。转化已有普通实例 重要 该过程会发生秒级闪断，同时会引起实例VIP连接地址的变化，请确保...
创建分布式实例
若未创建实例，您可以新购一个 经典 版 Tair 内存型 实例，系统将自动创建一个分布式实例，并将新创建的实例将作为这个分布式实例中的第一个子实例。转化已有普通实例 重要 该过程会发生秒级闪断，同时会引起实例VIP连接地址的变化，请确保...
- 产品推荐
- 这些文档可能帮助您