管理队列
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>节点与队列。在 集群 列表中选择目标集群。在 节点类型 列表中选择计算节点。按照需要进行以下操作。创建新的队列 单击打开 队列 下拉列表，然后...
YARN缺陷修复公告
mv$HADOOP_HOME/share/hadoop/yarn/hadoop-yarn-server-resourcemanager-3.2.1.jar/tmp/cp hadoop-yarn-server-resourcemanager-3.2.1.jar$HADOOP_HOME/share/hadoop/yarn/命令中的$HADOOP_HOME 为Hadoop的安装目录。本文示例中Hadoop的...
更新ehpcutil版本
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，找到目标集群，单击 详情。在 集群详情 页面底部的 ehpcutil版本信息 区域，根据需要进行升级或者回退操作。如果当前...
修复集群
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，选择待修复集群，单击 更多>修复。在弹出的 集群修复 页面，重新指定待修复集群的 镜像类型、镜像、调度器 和 域账号服务。...
管理作业模板
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 作业 与性能 管理>作业。在 作业 页面，选择待创建作业模板的集群。单击页面左侧的 提交作业 页签。在 提交作业 区域，完成作业参数配置，单击 图标将当前...
监控作业
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 作业与性能管理>作业。在 作业 页面，选择目标集群，单击 作业监控 页签。设置筛选条件。支持设置的筛选条件如下：时间段：过滤某一时间段内的...
使用IMB软件和MPI通信库测试集群通信性能
MPI（Message Passing Interface）是支持多编程语言编程的并行计算通信库，具有高性能、大规模性、可移植性、可扩展性等特点。准备工作 创建一个E-HPC集群。具体操作，请参见 使用向导创建集群。配置集群时，软硬件参数配置如下：参数 说明...
测试结果
本次测试采用3种不同的测试场景，针对开源自建的Hadoop+Spark集群与阿里云云原生数据湖分析DLA Spark在执行Terasort基准测试的性能做了对比分析。本文档主要展示了开源自建Spark和DLA Spark在3种测试场景下的测试结果及性能对比分析。1 TB...
查看集群报表
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 作业与性能管理>报表。在顶部下拉列表中，选择目标集群。查看报表。查看集群节点数量。节点数量展示集群中节点数量的变化折线图，支持显示各队列...
玄武分析型存储
玄武分析存储引擎为用户提供高可靠、高可用、高性能、低成本的企业级数据存储能力，是AnalyticDB实现高吞吐实时写入、高性能实时查询的基础支撑。高吞吐实时写入 AnalyticDB通过三层并行架构实现了极强的吞吐能力，从接入层、到存储节点层...
创建带有插件的集群
使用控制台创建带有插件的集群 创建不同接入模式集群的操作如下：Image接入模式 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面右上角，单击 创建集群。根据自身业务场景进行设置，在...
企业版和标准版功能对比
PolarDB MySQL版 企业版和标准版在功能上有很多差异，可分为集群管理、弹性管理、高性能、备份与恢复、高可用性、高安全、连接管理、高性价比、监控与优化、DB for AI、数据迁移&同步等11个类别。本文为您介绍这两个版本的功能区别，帮助您...
登录集群
规则方向 授权策略 端口范围 优先级 授权对象 入方向 允许 SSH（22）1 0.0.0.0/0 通过控制台登录 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，找到要登录的集群，单击 远程连接。...
使用GROMACS进行分子动力学模拟
通过控制台 在 弹性高性能计算控制台 的左侧导航栏，单击 集群。在 集群 页面，找到目标集群，单击 更多>VNC。使用VNC远程连接可视化服务。具体操作，请参见 连接可视化服务。在VNC窗口中，选择 Application>System Tools>Terminal。运行/...
手动扩容集群
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，找到需要扩容的集群，单击 扩容。在 集群扩容 面板，完成节点配置。扩容时，支持添加新建节点、已有节点或线下节点，请根据需要选择...
创建作业
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在 集群 页面，找到gromacs-test集群，单击 远程连接。在 远程连接 页面，输入gmx.test的用户名、密码和节点端口，单击 ssh连接。下载并解压算例。说明 本算例为模拟...
Multi-Master关键技术介绍
模式 事务类型 事务策略 是否保证原子性（A）隔离级别（I）是否保证持久性（D）会话一致（更高性能）跨Segment 2PC，共享本地快照 是 RU/RC（会话内）是 单Segment 1PC，共享本地快照 是 RC 是 强一致（更完善的ACID保证）跨Segment 2PC，...
ECS选型最佳实践
场景分类 场景细分 推荐规格族 处理器与内存比 数据盘 关系型数据库 高性能，依赖应用层高可用 i系列 1:4 本地SSD存储、高效云盘、SSD云盘 中小型数据库 g系列，或其他内存占比为1:4的规格族 1:4 高效云盘、SSD云盘 高性能数据库 i、r系列 ...
管理共享存储
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>共享存储。在页面上方选择目标集群，然后单击 资源管理 页签。在 资源管理 页签下，单击 挂载存储资源。在弹出面板，完成参数配置，然后单击 ...
基于TairString实现高性能分布式锁
本文先介绍并分析常见的分布式锁实现方式，之后结合阿里巴巴集团在使用 云原生内存数据库Tair 和分布式锁方面的业务经验，介绍使用 Tair 实现高性能分布式锁的实践方案。分布式锁及其应用场景 应用开发时，如果需要在同进程内的不同线程...
Hadoop Yarn RPC 0 Day在野利用分析与传播手段披露
阿里云安全监测到Kinsing僵尸网络变种，该僵尸网络除了沿用之前的攻击手法，最新利用了Hadoop Yarn RPC未授权访问漏洞进行传播。概述 Hadoop Yarn是Hadoop的核心组件之一。Hadoop Yarn RPC未授权访问使得攻击者无需认证即可通过RPC通信执行...
快速入门
文件存储 HDFS 版 兼容了标准的HadoopFS协议接口，使您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、高可靠和高可用的分布式文件系统。相比自建HDFS存储，使用 文件存储 HDFS 版 服务可以大量节约...
pg_locks
在所有后端已经查询了快速路径锁后，普通锁管理器的剩余部分被作为一个单元锁住，并且所有剩余锁的一个一致快照被作为一个原子动作收集。在解锁普通锁管理器后，谓词锁管理器也被类似地锁住并且所有谓词锁被作为一个原子动作收集。因此，在...
pg_locks
在所有后端已经查询了快速路径锁后，普通锁管理器的剩余部分被作为一个单元锁住，并且所有剩余锁的一个一致快照被作为一个原子动作收集。在解锁普通锁管理器后，谓词锁管理器也被类似地锁住并且所有谓词锁被作为一个原子动作收集。因此，在...
事务隔离
但是如果第一个更新事务提交（并且实际更新或删除该行，而不是只锁住它），则可重复读事务将回滚并带有如下消息 ERROR:could not serialize access due to concurrent update 因为一个可重复读事务无法修改或者锁住被其他在可重复读事务...
JindoFS实战演示
Spark对OSS上的OCR数据进行查询加速 Spark对OSS上的OCR数据进行查询加速 2021-07-20 当前数据湖市场规模正在飞速增长，随着数据规模的增长，基于高性能的数据湖分析场景也在逐渐增加。当前很多数据湖架构基于对象存储，相对于本地存储，其...
设置调度器参数
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>调度器。在 集群 列表选择目标集群，在 调度器 列表选择调度器。设置调度器配置信息，然后在页面右上角，单击 提交。Slurm 如果是Slurm调度器，...
内存型
提供数据和应用的使用时保护 适用场景：人工智能场景，如深度学习与训练、AI推理等 HPC等高性能科学计算场景 大中型数据库系统、缓存、搜索集群 大型在线游戏服务器 其他对性能要求较高的通用类型的企业级应用 与操作系统的兼容性说明 更多...
使用Hadoop作为元仓计算引擎进行元仓初始化
各方式获取元数据优劣势对比详情如下：元数据获取方式 优势与劣势 直连元数据库 高性能：直接连接底层的元数据库，省去了中间的HMS服务环节，客户端在获取meta（元数据）时性能更好，同时能够减少网络传输上的耗时。更开放：通过HMS服务...
什么是云原生数据湖分析
DLA Serverless Presto是在开源Apache Presto基础上研发，完全由内存完成计算工作，具备高性能、交互式的分析体验，秒级可返回；DLA Serverless Spark是在开源Apache Spark基础上研发，兼容Apache Spark所有的API。以下场景推荐您使用DLA ...
数据库优化
数据库选型 阿里云拥有丰富的云数据库...利用 DAS 可以有效地发现并解决性能相关问题，其中的一键诊断、实时性能、锁分析、容量评估、性能洞察、性能趋势、慢SQL、SQL洞察和审计和自动SQL限流等功能可以帮助用户更好地洞察和优化数据库性能。
实例规格族
推荐 高性能计算优化型实例规格族hpc8ae 高性能计算优化型实例规格族hpc7ip 高性能计算优化型实例规格族hpc6id 通用型超级计算集群实例规格族sccg7 计算型超级计算集群实例规格族sccc7 高主频计算型超级计算集群实例规格族scchfc6 高主频...
产品规格
为更好地匹配E-HPC的高性能计算特点，下文推荐了几种规格，建议您根据应用场景选择使用。关于ECS实例规格的更多信息，请参见 实例规格族 和 选型最佳实践。弹性裸金属服务器和超级计算集群（SCC）实例 如下实例无虚拟化损耗，同时提供VPC...
弹性裸金属服务器概述
兼容多种专有云 弹性裸金属服务器可以进一步解决您对高性能计算的强需求，更好地帮助您搭建新型混合云。弹性裸金属服务器不仅具有虚拟机的灵活性和弹性，同时具备物理机的一切特性和优势，因此也具备再次虚拟化的能力，线下的私有云均可...
锁定和索引
Hash桶级锁比索引级的锁提供了更好的并发性，但可能产生死锁，因为锁持有的时间比一次索引操作的时间长。GIN索引：短期的页面级共享/排他锁被用于读/写访问。锁在索引行被插入/抓取后立即释放。但要注意的是一个GIN索引值的插入通常导致对...
产品优势
背景信息 云原生多模数据库 Lindorm 兼容HBase、Cassandra、S3、TSDB、HDFS、Solr等多种标准接口，支持宽表、时序、对象、文本、队列、空间等多种数据模型，适用于日志、账单、标签等多种数据的存储及分析，具有高性能、低成本等特点。...
B-tree并发控制优化
PolarDB MySQL版 优化了B-tree索引的并发控制机制，有效地提升了高并发读写场景下的性能。本文介绍了B-tree并发控制优化的使用方法和使用该机制的限制和前提条件等内容。背景信息 InnoDB引擎使用索引来组织表结构，每张表的数据均放在一个...
大数据型
同时，结合以Hadoop为代表的分布式计算业务的高可用架构，大数据型实例采用本地存储的设计，保证海量存储空间、高存储性能。大数据实例具有以下特点：基于企业级架构提供稳定计算能力，为高效处理计算作业提供保障。网络性能更高（包括单...
测试环境
本次测试采用3种不同的测试场景，针对开源自建的Hadoop+Spark集群与阿里云云原生数据湖分析DLA Spark在执行Terasort基准测试的性能做了对比分析。本文档主要介绍了3种不同测试场景下的测试环境配置要求。环境配置要求 测试环境总体要求：自...
文件存储HDFS版
您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布式文件系统。适用场景 文件存储HDFS版 适用于对吞吐要求较高的大数据分析与机器学习业务场景。文件存储HDFS版...
- 产品推荐
- 这些文档可能帮助您