LLM on DLC-Megatron on DLC最佳实践
大语言模型（LLM）是指参数数量达到亿级别的神经网络语言模型，例如：GPT-3、GPT-4、PaLM、PaLM2等。Megatron-LM 是由NVIDIA的应用深度学习研究团队开发的Transformer模型训练框架，它可以高效利用算力、显存和通信带宽，大幅提升了大语言...
应用实践：Transformer模型训练加速
python preprocess_data.py \-input book_wiki_owtv2_small.json \-output-prefix gpt_small \-vocab gpt2-vocab.json \-dataset-impl mmap \-tokenizer-type GPT2BPETokenizer \-merge-file gpt2-merges.txt \-append-eod 将您的模型注册...
使用Megatron-Deepspeed训练GPT-2并生成文本
python3 tools/preprocess_data.py \-input oscar-1GB.jsonl \-output-prefix meg-gpt2 \-vocab gpt2-vocab.json \-dataset-impl mmap \-tokenizer-type GPT2BPETokenizer \-merge-file gpt2-merges.txt \-append-eod \-workers 8 如果回显...
什么是Deepytorch Inference（推理加速）
V3 1 x 3 x 640 x 640 3.87 15.70 75%yolov3 Bert-base-uncased 1 x 128,1 x 128 0.94 3.76 75%transformers Bert-large-uncased 1 x 128,1 x 128 1.33 7.11 81%transformers GPT2 1 x 128 1.49 3.82 71%transformers 易用性好 Deepytorch ...
AIACC-AGSpeed性能数据
性能数据 本示例数据以hf_GPT2、hf_Bert、resnet50，timm_efficientnet等50多个模型为例，通过FP32精度和AMP混合精度两种场景进行训练，不同场景下各模型训练后的性能数据如下所示：FP32精度训练场景 AMP混合精度场景 上述性能数据图中，横...
参数配置指导
type str 否 None BertWordPieceLowerCase BertWordPieceCase GPT2BPETokenizer 分词器的类型-split str 否 969,30,1 NA 预训练、验证、测试集的划分-data-impl str 否 mmap lazy cached mmap infer 预训练indexed数据集的实现方式-data-...
交互式翻译（IMT）
蓝色字：高亮确定性高的推荐 IMT：交互式翻译模型的推荐 GPT2:基于竞品文档的译文推荐 TM高利用率：相似度>40%的TM句子都会被模型利用，提供更好的翻译 在线学习：每一次confirm的结果，都会被学习，应用到后续句子翻译 支持含html等tag的...
扩容分区和文件系统（Linux）
Alibaba Cloud Linux 2/3版本、CentOS 6及以上版本 MBR分区 type growpart|sudo yum install-y cloud-utils-growpart sudo LC_ALL=en_US.UTF-8 growpart/dev/vdb 1 GPT分区（需安装gdisk工具）type growpart|sudo yum install-y cloud-...
应用场景
图像分割 Unet3D等模型 NLP自然语言处理 BERT、GPT2、T5等模型 AI推理 AIACC能够适用于所有AI推理场景。该工具进行AI推理的典型业务场景如下所示：场景 适用模型 配置信息 性能优化措施 视频超分推理 超分模型 T4 GPU 进行了如下性能优化，...
快速开始
例如：Yi-34B-Chat 模型在 AlpacaEval 排行榜上排名第二（仅次于 GPT-4 Turbo），超越了其他大型语言模型（如 GPT-4,Mixtral,Claude）（基于截至 2024 年 1 月的数据）。Yi-34B 模型在包括 Hugging Face Open LLM Leaderboard（预训练）和 ...
AIGC文本生成3D模型
背景信息 自多态模型GPT-4发布后，AIGC（AI Generated Content，AI生成内容）时代正扑面而来，从单一的文字文本，演化到更丰富的图片、视频、音频、3D模型等。本文将基于HRN人脸重建模型，以人脸头像作为输入，利用层次化表征实现快速人脸...
服务器迁移中心
服务器迁移中心（Server Migration Center，简称SMC）是阿里云提供给您的迁移平台。专注于提供能力普惠、体验一致、效率至上的迁移服务，满足您在阿里云的迁移需求。
轻量应用服务器
轻量应用服务器是面向单机应用场景的新一代计算服务，提供精品应用一键部署，支持一站式的域名、网站、安全、运维、应用管理等服务，极大优化搭建简单应用的体验，降低了入门级用户使用云计算产品的门槛。
云服务器 ECS
云服务器ECS免去了您采购IT硬件的前期准备，让您像使用水、电、天然气等公共资源一样便捷、高效地使用服务器，实现计算资源的即开即用和弹性伸缩。阿里云ECS持续提供创新型服务器，解决多种业务需求，助力您的业务发展。
常见问题
本文汇总了使用轻量应用服务器时的常见问题。远程连接和计费问题 远程连接FAQ 计费常见问题 服务器管理问题 轻量应用服务器在哪些地域部署？轻量应用服务器存在哪些状态？轻量应用服务器是否可以升级配置？轻量应用服务器是否支持过户？轻...
功能特性
轻量应用服务器 轻量应用服务器（Simple Application Server）是可以快速搭建且易于管理的轻量级云服务器，面向单台服务器提供了一键部署应用、一站式域名解析、安全管理以及运维监控等服务。轻量应用服务器操作简单便捷，能让您快速上手...
访问ECS实例异常时的问题排查和指引
如果所有服务器访问目标服务器均存在异常，则推断是目标服务器归属安全组或服务器内部自身存在异常所致，需要做进一步排查分析查看服务器内部访问是否正常，即通过 使用管理终端连接Linux实例 登录服务器，然后在服务器内部使用127.0.0.1做...
查看服务器信息
当您创建服务器后，可以通过管理控制台查看服务器的资源配置、到期时间、资源使用情况等详细信息。本文介绍如何通过管理控制台查看服务器的相关信息，并提供示例操作供您参考。背景信息 在管理控制台的不同界面，查看到的服务器信息也有所...
新手指引
什么是轻量应用服务器 轻量应用服务器的产品优势 轻量应用服务器的应用场景 轻量应用服务器支持的镜像 轻量应用服务器的使用限制 轻量应用服务器与云服务器ECS对比 快速使用流程 轻量应用服务器快速使用流程如下图所示。准备工作 您需注册...
最佳实践概览
轻量应用服务器提供了部分最佳实践，包括搭建环境、搭建网站、数据传输、迁移服务器以及高可用架构等。您可以根据实际需求，参考相应文档完成服务器的搭建。搭建环境 阿里云轻量应用服务器提供了多种镜像，您可以通过应用镜像快速部署应用...
远程连接Linux服务器
您可以通过轻量应用服务器管理控制台或者第三方客户端工具远程连接Linux服务器。本文主要介绍如何远程连接Linux服务器。前提条件 待连接的Linux轻量应用服务器的状态为 运行中。如果您需要使用密码的方式远程连接服务器，确保已设置服务器...
远程连接FAQ
本文介绍在远程连接轻量应用服务器过程中可能存在的问题、排查思路和相应的解决方案。排查思路 如果无法远程连接轻量应用服务器时，阿里云推荐您按照以下思路排查问题。以下排查思路根据原因的出现概率进行排序，建议您从高频率原因往低...
轻量应用服务器之间的数据迁移
服务器名称：轻量应用服务器B 地域：同地域下数据迁移：华北2（北京）跨地域下数据迁移：华东1（杭州）镜像：LAMP 7.4应用镜像 防火墙：已放行80、443、22端口 跨地域迁移轻量应用服务器 迁移前的准备工作与注意事项 在开始迁移之前，您...
创建轻量应用服务器
支持购买1个月、3个月、6个月、一年、两年以及三年时长的轻量应用服务器。如果您希望开启到期自动续费功能，请选中 到期自动续费 复选框。购买数量 1 购买服务器的台数。默认创建1台，最多可创建20台服务器。重要 控制台的页面上会提示您已...
远程连接Windows服务器
您可以通过轻量应用服务器管理控制台或本地Windows系统自带的远程桌面连接工具连接Windows轻量应用服务器，本文为您提供具体的操作指引。前提条件 待连接的Windows服务器的状态为 运行中。已设置服务器密码。具体操作，请参见 设置或重置...
部署高可用架构应用集群
步骤四：修改数据库服务器中数据库的权限 当前已成功创建两台应用服务器（服务器A 与 服务器B），为确保应用服务器与数据库服务器进行数据传输时的安全性，建议您将数据库服务器C中的MySQL访问权限，由 所有人 修改 指定IP，并指向两台应用...
新功能发布记录
14 管理内网互通 通过OSS内网地址访问OSS资源实现内网互通 2021年09月 功能名称 功能描述 发布时间 相关文档 镜像 轻量应用服务器新上线5款镜像：应用镜像：Tomcat 8 NextCloud 22.1.0 系统镜像：Alibaba Cloud Linux 3.21.04 Anolis 8.2 ...
修改服务器名称
轻量应用服务器支持手动修改服务器的名称，便于您区分和管理不同的服务器。本文介绍如何修改服务器名称。操作步骤 登录 轻量应用服务器管理控制台。在左侧导航栏，单击 服务器。将鼠标悬浮在服务器卡片中的服务器名称上，单击 图标。说明 ...
管理快照
快照是某一时间点磁盘数据状态的备份文件，常用于日常数据备份、服务器数据误操作恢复、网络攻击恢复、制作自定义镜像等场景。本文介绍如何通过管理控制台创建、删除快照以及使用快照回滚磁盘、创建自定义镜像。使用限制 说明 轻量应用...
源服务器迁移至轻量应用服务器
您可以根据需求选择导入迁移源的方式：方式一：通过控制台自动导入迁移源 方式二：通过命令行一键导入迁移源 方式三：通过SMC客户端导入迁移源 重要 SMC客户端2.7.1及以上版本支持迁移轻量服务器。迁移源为 在线 状态。如果迁移源为其他...
私网传输迁移
操作场景 场景一：源服务器迁移上云，但没有公网访问能力 您需要通过VPN网关、高速通道物理专线、智能接入网关将源服务器和云上VPC打通，并为源服务器设置代理服务器，然后通过代理服务器访问SMC实现私网迁移源服务器。场景二：源服务器...
查看服务器操作记录
您可以在操作记录页面查看轻量应用服务器的历史操作记录，包括启动服务器、停止服务器、重启服务器、修改服务器密码、重置系统等，便于您对历史操作进行分析和回溯。本文介绍如何查看轻量应用服务器的操作记录。操作步骤 登录 轻量应用...
源服务器迁移至轻量应用服务器
您可以根据需求选择导入迁移源的方式：方式一：通过控制台自动导入迁移源 方式二：通过命令行一键导入迁移源 方式三：通过SMC客户端导入迁移源 重要 SMC客户端2.7.1及以上版本支持迁移轻量服务器。迁移源为 在线 状态。如果迁移源为其他...
重置系统
重置系统可以重新安装轻量应用服务器的应用或者操作系统，达到重新初始化服务器的目的。重置系统有两种选择，重置当前系统和重置为其他镜像。前提条件 轻量应用服务器的状态为 运行中 或 已停机。背景信息 警告 重置或更换系统会清除轻量...
查看实例监控信息
通过查看轻量级应用服务器实例的流量、vCPU、内存和磁盘（系统盘）等监控信息，您可以及时了解服务器相关资源的使用情况，从而提高运维效率。操作步骤 您可以根据实际需求，选择通过轻量应用服务器控制台和云监控控制台查看实例监控信息。...
自定义镜像概述
自定义镜像是您通过轻量应用服务器的快照创建的镜像。您可以通过已配置好的自定义镜像创建更多包含相同配置的轻量应用服务器，也可以将自定义镜像共享至云服务器ECS，进而通过共享镜像创建ECS实例或更换操作系统。自定义镜像生命周期 当您...
第三方教程
一图帮你彻底区分 轻量应用服务器助力初创型建站服务企业降本提效 轻量应用服务器如何帮助大学生在大数据课程中高效学习 搭建网站 3步！完成WordPress博客迁移与重新部署 只需5步！在轻量应用服务器部署Hexo博客 使用轻量应用服务器搭建扫...
轻量应用服务器的状态为已禁用
问题描述 在轻量应用服务器控制台中，阿里云轻量应用服务器的状态显示为已禁用，无法启动该服务器。问题原因 轻量应用服务器已到期，轻量应用服务器到期后，服务器将会自动关机。从到期时间开始计算，15天内服务器的状态显示为 已禁用，该...
计费常见问题
本文汇总了轻量应用服务器计费的常见问题。轻量应用服务器的计费项有哪些？轻量应用服务器的计费项主要包括套餐配置费用、数据盘费用、超额流量费用。更多信息，请参见 计费项。创建快照和自定义镜像是否收费？在轻量应用服务器中创建快照...
API概览
本产品（轻量应用服务器/2020-06-01）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
- 产品推荐
- 这些文档可能帮助您