管理队列
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>节点与队列。在 集群 列表中选择目标集群。在 节点类型 列表中选择计算节点。按照需要进行以下操作。创建新的队列 单击打开 队列 下拉列表，然后...
更新ehpcutil版本
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，找到目标集群，单击 详情。在 集群详情 页面底部的 ehpcutil版本信息 区域，根据需要进行升级或者回退操作。如果当前...
监控存储资源
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>共享存储。在 共享存储 页面，选择目标集群，单击 资源 监控 页签。在 资源监控 页签下，设置并查看存储资源的相关监控数据。配置项 说明 文件...
修复集群
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，选择待修复集群，单击 更多>修复。在弹出的 集群修复 页面，重新指定待修复集群的 镜像类型、镜像、调度器 和 域账号服务。...
查看E-HPC操作日志
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 运维与监控>操作日志。在 集群 列表中选择目标集群。根据需要设置查询条件，单击 图标。查询条件说明如下：查询条件 说明 时间范围 快速选择：可...
管理作业模板
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 作业 与性能 管理>作业。在 作业 页面，选择待创建作业模板的集群。单击页面左侧的 提交作业 页签。在 提交作业 区域，完成作业参数配置，单击 图标将当前...
使用HPL测试集群浮点性能
HPL通过对高性能计算集群采用高斯消元法求解一元N次稠密线性代数方程组的测试，评价高性能计算集群的浮点计算能力。浮点计算峰值是指计算机每秒可以完成的浮点计算次数，包括理论浮点峰值和实测浮点峰值。理论浮点峰值是该计算机理论上每秒...
监控作业
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 作业与性能管理>作业。在 作业 页面，选择目标集群，单击 作业监控 页签。设置筛选条件。支持设置的筛选条件如下：时间段：过滤某一时间段内的...
使用IMB软件和MPI通信库测试集群通信性能
MPI（Message Passing Interface）是支持多编程语言编程的并行计算通信库，具有高性能、大规模性、可移植性、可扩展性等特点。准备工作 创建一个E-HPC集群。具体操作，请参见 使用向导创建集群。配置集群时，软硬件参数配置如下：参数 说明...
查看集群报表
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 作业与性能管理>报表。在顶部下拉列表中，选择目标集群。查看报表。查看集群节点数量。节点数量展示集群中节点数量的变化折线图，支持显示各队列...
创建带有插件的集群
使用控制台创建带有插件的集群 创建不同接入模式集群的操作如下：Image接入模式 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面右上角，单击 创建集群。根据自身业务场景进行设置，在...
产品规格
为更好地匹配E-HPC的高性能计算特点，下文推荐了几种规格，建议您根据应用场景选择使用。关于ECS实例规格的更多信息，请参见 实例规格族 和 选型最佳实践。弹性裸金属服务器和超级计算集群（SCC）实例 如下实例无虚拟化损耗，同时提供VPC...
创建集群
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，单击 创建集群。说明 下文采用最简配置介绍如何快速创建一个集群。部分未提及的配置保持默认选项。更多信息，请参见 使用...
创建混合云集群
您可以利用本地的HPC集群在阿里云扩容计算节点资源，统一调度云上资源和您的本地资源进行高性能计算。本文介绍如何通过E-HPC管理控制台创建混合云集群。前提条件 已创建专有网络VPC和交换机。具体操作，请参见 创建专有网络 和 创建交换机...
登录集群
规则方向 授权策略 端口范围 优先级 授权对象 入方向 允许 SSH（22）1 0.0.0.0/0 通过控制台登录 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，找到要登录的集群，单击 远程连接。...
手动扩容集群
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，单击 集群。在 集群 页面，找到需要扩容的集群，单击 扩容。在 集群扩容 面板，完成节点配置。扩容时，支持添加新建节点、已有节点或线下节点，请根据需要选择...
创建作业
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在 集群 页面，找到gromacs-test集群，单击 远程连接。在 远程连接 页面，输入gmx.test的用户名、密码和节点端口，单击 ssh连接。下载并解压算例。说明 本算例为模拟...
通过控制台提交作业
作业指提交到E-HPC集群进行高性能计算的基本工作单元，包括Shell脚本、可执行文件等，具体作业执行顺序根据您设置的队列以及调度器决定。E-HPC管理控制台提供了作业相关的提交作业、停止作业、查看作业状态等功能，本文介绍如何使用E-HPC...
管理共享存储
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>共享存储。在页面上方选择目标集群，然后单击 资源管理 页签。在 资源管理 页签下，单击 挂载存储资源。在弹出面板，完成参数配置，然后单击 ...
客户端功能概述
作业操作员 负责提交作业到E-HPC集群进行高性能计算。E-HPC客户端主要面向作业操作员，支持作业提交、作业文件管理等功能。具体功能如下：功能模块 说明 作业查询 支持按多种条件查询作业数据，以便调整作业任务。作业提交 支持通过界面、...
设置调度器参数
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>调度器。在 集群 列表选择目标集群，在 调度器 列表选择调度器。设置调度器配置信息，然后在页面右上角，单击 提交。Slurm 如果是Slurm调度器，...
软件概述
E-HPC提供了业界主流的科学计算应用、编译器运行时...无 运行时库 MPI通信库 GPU加速库 Intel高性能库 Intel-MPI OpenMPI MPICH MVAPICH CUDA-Toolkit cuDNN Intel-ICC-RUNTIME Intel-IFORT-RUNTIME Intel-MKL Intel-DAAL Intel-IPPIntel-TBB
提交作业
作业是E-HPC集群进行高性能计算的基本工作单元，包括Shell脚本、可执行文件等。本文介绍如何使用E-HPC客户端提交作业。准备工作 提交作业前，您需要准备好作业文件，并上传到E-HPC集群中。E-HPC客户端支持以下两种方式上传作业文件：通过...
实践教程概览
HPL通过对高性能计算集群采用高斯消元法求解一元N次稠密线性代数方程组的测试，评价高性能计算集群的浮点计算能力。本教程介绍使用HPL测试E-HPC集群的浮点性能。使用IMB软件和MPI通信库测试E-HPC通信性能 IMB（Intel MPI Benchmarks）用于...
API概览
本产品（弹性高性能计算/2018-04-12）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
什么是实时数仓Hologres
在线高性能主键点查 基于行存表的主键索引和查询引擎的短路径优化，Hologres支持每秒数十万QPS高性能在线点查、前缀扫描，支持高吞吐实时更新，相比开源系统性能提升10倍以上，可用于实时加工链路的维表关联、ID-Mapping等场景。...
HDFS数据源
目前插件中Hive版本为1.1.1，Hadoop版本为2.7.1（Apache适配JDK1.6］，在Hadoop 2.5.0、Hadoop 2.6.0和Hive 1.2.0测试环境中写入正常。重要 HDFS Reader暂不支持单个File多线程并发读取，此处涉及到单个File内部切分算法。离线写 使用HDFS ...
产品对比
etcd 和 ZooKeeper 类似，etcd 是一个高可用的键值存储系统，主要用于配置共享和服务发现。ETCD 是由 CoreOS 开发并维护的，灵感来自于 ZooKeeper 和 Doozer。它使用 Go 语言编写，并通过 Raft 一致性算法处理日志复制以保证强一致性。etcd...
数据服务集群
特性介绍 Apache HBase是具有高可靠性、高性能、列存储、可伸缩、实时读写的开源NoSQL分布式系统。特别适用于需要实时读写随机访问超大规模数据集的场景。Apache HBase和Apache Hadoop生态系统无缝集成，并且可以和Apache Phoenix搭配使用...
应用场景
云服务器ECS具有广泛的应用场景，既可以...推荐使用 弹性高性能计算E-HPC，弹性高性能计算可以将计算能力积聚，用并行计算方式解决更大规模的科学、工程和商业问题。更多案例 更多关于云服务器ECS的应用场景，请参见 云服务器ECS客户案例。
迁移HBase至Hologres
背景信息 Hologres支持行存表模式，在该模式下，提供高性能基于主键的点查能力，广泛应用在Flink维度表、ID-Mapping、标签获取、订单明细查询等场景中。相比传统的HBase等技术，Hologres保留了横向扩展能力和高性能的主键点查能力，同时...
产品优势
背景信息 云原生多模数据库 Lindorm 兼容HBase、Cassandra、S3、TSDB、HDFS、Solr等多种标准接口，支持宽表、时序、对象、文本、队列、空间等多种数据模型，适用于日志、账单、标签等多种数据的存储及分析，具有高性能、低成本等特点。...
概述
同一份数据以不同的格式保存，数据所占用的...数据采用高性能的列存储格式，提升数据查询性能。支持嵌套的数据模型。自带性能友好的统计元信息。减少53.3%560MB ORC Hadoop生态格式的数据。自带性能友好的统计元信息。高压缩比 减少80.4%235MB
成本
外表存储 除内部存储外，AnalyticDB PostgreSQL版 支持通过外表方式访问OSS和Hadoop的存储数据。对象存储（OSS）是阿里云推出的存储服务，具备数据量大、成本低、安全性高、可靠性高的特点，能够满足多种场景的存储需求，存储成本低至 0.12...
Impala概述
Impala为存储在Apache Hadoop中的数据，提供了高性能和低延迟的SQL查询。使用Impala，您可以通过SELECT、JOIN和聚合函数实时查询存储在HDFS或HBase中的数据。背景信息 Impala使用与Apache Hive相同的元数据、SQL语法（Hive SQL）和ODBC驱动...
块存储概述
块存储是阿里云为云服务器ECS提供的块设备产品，具有高性能和低时延的特点，支持随机读写，满足大部分通用业务场景下的数据存储需求。您可以像使用物理硬盘一样，在云服务器ECS上进行格式化并建立文件系统来使用块存储。本文介绍块存储的...
快速入门
如果您是初次使用阿里云Elasticsearch，可参见产品使用系列文档，快速使用Elasticsearch、Logstash、Beats、高级监控报警功能和应用性能监控分析服务。同时您也可以参见数据迁移系列文档，将第三方Elasticsearch、云数据库和大数据云产品...
异构数据源访问
功能说明 外部数据源管理提供高性能的结构化和非结构化数据并行传输服务。其中，异构数据源访问支持通过 AnalyticDB PostgreSQL版 数据库以统一的SQL接口查询和分析存储在外部系统中的数据。提供以下功能：多种数据存储访问：支持多种数据...
数据导入性能优化
导入时需要避免一次性导入过多二级分区，多个二级分区同时导入可能引入外排序过程，影响导入性能。如何选择分区键，请参见 选择分区键。判断分区键合理性：导入前，根据业务数据需求及数据分布判断分区键是否合理。如Lineitem表按l_...
数据导入性能优化
导入时需要避免一次性导入过多二级分区，多个二级分区同时导入可能引入外排序过程，影响导入性能。如何选择分区键，请参见 选择分区键。判断分区键合理性：导入前，根据业务数据需求及数据分布判断分区键是否合理。如Lineitem表按l_...
- 产品推荐
- 这些文档可能帮助您