Word2Vec
Word2Vec算法组件利用神经网络，通过训练，将词映射为K维度空间向量，且支持对表示词的向量进行操作并和语义相对应。输入为单词列或词汇表，输出为词向量表和词汇表。使用说明 Word2Vec组件的上游需要接入 词频统计 组件。说明 词频统计的...
GPU计算型
网络：支持IPv6 实例网络性能与计算规格对应（规格越高网络性能越强）适用场景：深度学习，例如图像分类、无人驾驶、语音识别等人工智能算法的训练应用 高GPU负载的科学计算，例如计算流体动力学、计算金融学、分子动力学、环境分析等 gn7...
弹性裸金属服务器概述
弹性裸金属服务器是阿里云通过自研芯片、自研Hypervisor系统以及重新定义服务器硬件架构等软硬件技术打造的深度融合了物理机和虚拟机特性的创新型计算产品。弹性裸金属服务器开创了一种新型的云服务器形式，它能与阿里云产品家族中的其他...
安全联邦学习-任务模式FL
三、安全联邦学习已支持的能力 用途 算法分类 已支持算法 分类 决策树 XGBoostWithDp GBDTWithDp 逻辑回归 LogisticRegressionWithHe 神经网络 神经网络MLP 回归 线性回归 LinearRegressionWithHe 神经网络 神经网络MLP 四、如何进行安全...
安全联邦学习-工作流FL
三、安全联邦学习已支持的能力 用途 算法分类 已支持算法 分类 决策树 XGBoostWithDp GBDTWithDp 逻辑回归 LogisticRegressionWithHe 神经网络 神经网络MLP 回归 线性回归 LinearRegressionWithHe 神经网络 神经网络MLP 四、如何进行安全...
基本概念
要把这种解决问题的规律告诉机器就需要进行训练，而在真实业务场景中，单纯的根据已知数据训练出来的模型并不能真正满足用户的预期，所以自学习平台将已知数据寻找模型参数的训练过程，通过深度调参和候选模型评估比较最优模型，以供用户...
网络智能服务
网络智能服务NIS（Network Intelligence Service）是为您在云上建站提供规划、部署与运维能力的智能化自助服务平台，可以帮助您更方便地规划与使用...网络智能服务既可以为您规划网络时提供参考数据，也可以协助您发现并解决网络的异常问题。
MLP二分类/MLP多分类/MLP回归
多层感知机是一种前馈神经网络，通过多个神经元的组合对输入特征进行非线性变换和特征提取，最终输出一个连续的预测结果。在训练过程中，利用反向传播算法（Backpropagation）和梯度下降算法（Gradient Descent）来优化模型参数，以最小化...
快速提交MPIJob训练任务
DLC是一站式的云原生深度学习训练平台，为开发者和企业提供灵活、稳定、易用和高性能的机器学习训练环境。本文为您介绍如何在DLC中使用mpirun和Deepspeed方式来提交MPIJob类型的分布式训练任务。前提条件 已开通DLC后付费，并创建默认工作...
横向MLP二分类/MLP多分类/MLP回归
多层感知机是一种前馈神经网络，通过多个神经元的组合对输入特征进行非线性变换和特征提取，最终输出一个连续的预测结果。在训练过程中，利用反向传播算法（Backpropagation）和梯度下降算法（Gradient Descent）来优化模型参数，以最小化...
预置能力
FormUIE FormUIE是基于深度学习和任务预训练的信息抽取模型，支持用户在不训练模型的情况下，通过平台可视化引导，完成抽取字段的配置，实现对非结构化、多板式单页表格表单预标注功能。在图像质量较好，字段设置合理的条件下，预标注准确...
预置能力
FormUIE FormUIE是基于深度学习和任务预训练的信息抽取模型，支持用户在不训练模型的情况下，通过平台可视化引导，完成抽取字段的配置，实现对非结构化、多板式单页表格表单预标注功能。在图像质量较好，字段设置合理的条件下，预标注准确...
什么是计算优化编译器AIACC-AGSpeed
AIACC-AGSpeed介绍 AIACC-AGSpeed简称为AGSpeed，AGSpeed作为阿里云自研的AI训练计算优化编译器，对PyTorch深度学习框架训练过程中的计算性能进行深度优化，具有其显著的计算性能优势。AGSpeed的组件架构图如下所示：组件架构 说明 编译器...
物联网络管理平台
物联网络管理平台，是阿里云面向物联网领域开发人员推出的网络管理平台，旨在帮助开发者搭建无线空口数据通道，实现终端（如传感器等）数据通过无线技术上报云端。物联网络管理平台可与阿里云物联网平台搭配使用，确保参与物联网开发的每个...
GPU计算型和GPU虚拟化型实例概述
I/O优化实例 仅支持ESSD云盘和ESSD AutoPL云盘 网络：支持IPv6 实例网络性能与计算规格对应（规格越高网络性能越强）适用场景：中小规模的AI训练业务 使用CUDA进行加速的HPC业务 对GPU处理能力或显存容量需求较高的AI推理业务 深度学习，...
训练管理
发布服务 在训练任务管理页面，找到训练完成的训练任务，单击 操作 列表中的 发布服务，可以快速去发布服务。发布服务，详情请参见 服务管理。更新训练任务 在训练任务列表中单击目标任务 操作 列的 更新，可以修改训练任务的名称和描述。...
分布式训练产品DLC支持MPI训练框架
DLC支持MPI框架，用户可以提交MPI类型分布式任务。优化内容 PAI 支持 MPI 的分布式训练任务，支持用户通过 Horovod、DeepSpeed 等基于 MPI 封装的训练框架发起任务。
云数据库混访概述
在使用混访混挂方案将经典网络迁移至专有网络时，您需要将云数据库切换至混访模式（即同时保留经典网络和专有网络的访问地址），这样可避免迁移过程中业务中断。在进行网络类型切换时，您可指定经典网络访问地址的保留时间，过期后系统会...
模型调优
模型调优 模型调优是通过Fine-tuning训练模式提高模型效果的功能模块，作为重要的大模型效果优化方式，用户可以通过构建符合业务场景任务的训练集，调整参数训练模型，训练模型学习业务数据和业务逻辑，最终提高在业务场景中的模型效果。...
Z-Score归一化
在机器学习领域，Z-Score归一化经常用于数据处理，例如神经网络、聚类分析等应用。组件截图 二、参数说明 参数名称 参数说明 选择归一化字段 选择需要归一化的字段。可多选。三、有配置文件可读 在上游有配置文件可以选择的时候，可以使用...
提交训练作业
概要介绍 SDK提供了HighLevel的训练API pai.estimator.Estimator，支持您将训练作业提交到PAI：使用 pai.estimator.Estimator 配置使用的训练脚本、作业启动命令、超参、训练镜像以及训练资源等作业信息。通过 pai.estimator.Estimator.fit...
AI加速概述
Rapidformer是PAI推出的一款PyTorch版的针对Transformer系列模型的训练优化工具，其可以通过加速开关的方式来组合部分或全部的优化技术，以优化PyTorch版Transformer模型的训练过程，有效提高模型训练的速度和效率。更多关于PAI-Rapi...
使用ClassicLink
专有网络VPC（Virtual Private Cloud）提供ClassicLink功能，使经典网络的ECS实例可以和专有网络中的云资源通过内网互通。背景信息 ClassicLink可以实现经典网络的ECS实例访问已连接的VPC内的云资源，包括ECS实例、RDS实例、SLB实例等。VPC...
AutoML计费说明
在AutoML做模型训练操作时，会在DLC平台拉起相应的训练任务，并调度DLC通用资源和灵骏智算资源来完成任务。由此会产生与DLC相关的资源费用，计费详情请参见 DLC计费说明 和 灵骏智算资源Serverless版计费说明。在AutoML做模型训练操作时，...
云数据库Redis版网络切换
本文档介绍了如何通过控制台和API将云数据库Redis版的网络类型由经典网络切换至专有网络，同时保留经典网络的访问地址。经典网络的访问地址有保留时间限制，您可以根据需要指定保留期限。到期后，经典网络地址会自动被系统删除。前提条件 ...
开始模型训练
参数设置 在画布中单击指定的组件，画布右侧将展示当前组件的 参数设置 模块，您可以在该模块中调整模型训练的参数来优化模型。任务列表 该列表展示了当前模型训练流程中所有模型训练任务，您可以查看指定任务的详细信息。步骤三：创建训练...
LLM模型训练
0.00001 总的训练迭代epoch轮数 是 总的训练迭代epoch轮数。5 每个gpu训练batch_size 是 每个gpu训练batch_size。4 最大序列长度 是 最大序列长度。512 lora_rank 是 lora_rank。64 梯度累积步数 是 梯度累积步数。1 执行调优 GPU 否 选择...
训练加速（Pai-Megatron-Patch）概述
Pai-Megatron-Patch结合了多种优化技术，对PyTorch版Transformer模型的训练进行优化，从而达到最优的训练性能。本文为您介绍Pai-Megatron-Patch的工作原理和使用流程。背景信息 Pai-Megatron-Patch工具是阿里云机器学习平台PAI算法团队研发...
云数据库RDS版网络切换
您可以通过控制台和API将云数据库RDS版的网络类型由经典网络切换至专有网络，同时还可以修改经典网络内网使用期限并保留经典网络的访问地址。前提条件 切换网络类型前，请确保满足以下条件。实例的网络类型是经典网络。实例所在可用区已有...
管理模型任务
本文为您介绍如何在快速开始查看与管理已创建的训练任务和部署服务。前提条件 已创建训练任务或已部署服务，具体操作，请参见 模型部署及训练。操作步骤 进入快速开始页面。登录 PAI控制台。在左侧导航栏单击 工作空间列表，在工作空间列表...
模型部署及训练
您可以基于预训练模型快速上手并使用PAI的训练和部署功能。本文为您介绍如何在快速开始中查找适合您业务需求的模型、部署和调试模型、微调训练模型。前提条件 如果您需要对模型进行微调训练或增量训练，则需要创建OSS Bucket存储空间。具体...
图像关键点训练
170,200 训练batch_size 是 训练的批大小，即模型训练过程中，每次迭代（每一步）训练的样本数量。32 评估batch_size 是 评估（验证）的批大小，即模型验证过程中，每次迭代（每一步）加载的样本数量。32 总的训练迭代epoch轮数 是 所有...
云数据库MongoDB版网络切换
本文档介绍了如何通过控制台和API将云数据库MongoDB版的网络类型由经典网络切换至专有网络，同时保留经典网络的访问地址。经典网络的访问地址有保留时间限制，您可以根据需要指定保留期限。到期后，经典网络地址会自动被系统删除。前提条件...
图像检测训练（easycv）
图像检测训练（easycv）组件提供了主流的YOLOX和FCOS检测模型，用于目标检测的训练。若需在图像中标识并框选高风险实体，您可使用该组件构建目标检测模型，并进行推理分析。本文介绍图像检测训练（easycv）组件的配置方法和使用示例。前提...
数据标注
再比如您的训练数据中只有“正确”，“错误”两种标签，那么它对于模糊的数据输出也不会为“不确定”，因为在模型的认知里，它只见过“正确”，“错误”这两种类别，无论您输入什么文本，模型都只能从这两者之中二选一。
使用快速开始零代码部署微调Llama2系列大模型
如果您希望以零代码的方式在PAI上完成Llama2系列大语言模型的训练和推理，您可以使用快速开始的一键部署，快速启动Llama2系列模型的在线推理服务，并通过WebUI和API两种方式调用，或者使用自己的数据集对预训练模型进行微调训练，实现定制...
提交Tensorflow训练任务和定时任务
在 任务资源配置 区域，配置模型训练的 实例数量 和 镜像，以及训练任务需要的 CPU（核数）（默认值为4）、内存（GB）（默认值为8 GB）、GPU（卡数）（默认值为0）。在 高级配置 区域，配置K8s对象的元数据 label、annotation 和 ...
DLC使用案例汇总
案例名称 描述 快速提交单机PyTorch迁移学习任务 介绍如何利用 DLC 基于PyTorch进行离线迁移学习的训练。使用NAS提交单机PyTorch迁移学习任务 介绍如何使用 DLC 和NAS，基于PyTorch进行离线迁移训练。使用paiio读写MaxCompute表数据 PAI...
产品优势
性能深度优化 基于阿里云IaaS基础资源（GPU、CPU、网络以及I/O等基础设施）提供性能的深度优化。弹性伸缩 基于IaaS基础资源，支持一键构建、弹性伸缩。开源兼容 轻量便捷、开源兼容。您基于开源框架编写的算法代码或模型代码，几乎无需进行...
常见错误码
400 InvalidParameter.PreTrainTaskNotInWorkspace 训练任务所依赖的训练任务不在当前工作空间。400 InvalidParameter.PreTrainTaskIdNotExist 当前训练任务所依赖的训练任务不存在。400 InvalidParameter.PreTrainTaskMismatch 所依赖的...
- 产品推荐
- 这些文档可能帮助您