eRDMA概述
普惠的RDMA网络带来了应用场景的丰富化，相对于传统的线下RDMA的应用场景，eRDMA可以用在更加丰富的场景，例如缓存数据库（Redis）、大数据（Spark）、HPC（WRF）、AI训练等。并且在这些领域内，均取得了可观的性能收益。使用限制 在使用...
TensorFlow常见问题
建议您将OSS Bucket创建在与深度学习GPU集群相同的地域，从而使用阿里云经典网络进行数据传输，进而使算法运行免收流量费。创建OSS Bucket后，可以在OSS管理控制台创建文件夹、组织数据目录或上传数据。您可以通过API或SDK上传数据至OSS，...
Llama-3开源模型全托管灵骏最佳实践
阿里云PAI灵骏智算服务是面向大规模深度学习场景的智算产品，提供一站式的异构计算资源和AI工程化平台。本方案将为您介绍如何使用阿里云PAI灵骏智算服务，以及基于Meta-Llama-3-8B的开源模型和Megatron的训练流程，进行模型微调、离线推理...
应用场景
例如，在一个典型的社交网络中，常常会存在“谁认识谁，谁上过什么学校，谁常住什么地方，谁喜欢什么餐馆”等查询，传统关系型数据库对于超过3张表关联的查询往往会很低效甚至无法支持，但图数据库从基因层面提供了解决方案，轻松应对社交...
已停售的GPU实例规格
仅支持SSD云盘和高效云盘 网络：支持IPv6 实例网络性能与计算规格对应（规格越高网络性能越强）适用场景：云游戏的云端实时渲染 AR和VR的云端实时渲染 AI（DL和ML）推理，适合弹性部署含有AI推理计算应用的互联网业务 深度学习的教学练习...
2022年
2022-09-30 全部地域 服务分组 异步推理与队列服务 深度学习组件P100和M40卡型下线 因老款服务器过保下线，从2022年09月30日起，在华东2（上海）地域使用深度学习组件执行PAI命令或在 Designer 页面提交训练任务时，不再支持P100和M40卡型...
什么是推荐全链路深度定制开发平台PAI-REC
推荐全链路深度定制开发平台PAI-REC（PAI是Platform of AI的缩写，Rec即Recommendation的简称），是适用于企业开发者自主搭建、开发、迭代、运维的一整套推荐系统平台级服务。推荐系统是一个比较复杂的系统化工程，推荐系统分为离线、在线...
内容社区行业
行业增强版 淘宝只能视觉 淘宝只能视觉 淘宝智能视觉 mybatics代码生成 mybatics代码生成 mybatis代码生成 计算机网路 计算机网路 计算机网络 微行小程序 微型小程序 微信小程序 深度学西 深度学西 深度学习 针对内容行业的垂类行业数据...
换脸鉴别
打击互联网ID换脸诈骗：深度伪造技术高频使用，假视频与社交网络结合深深影响舆论走向和诱导诈骗。换脸鉴别可识别网上业务办理中的人脸伪造视频，减少网络诈骗。打击色情娱乐等黑灰产业：互联网的深度伪造合成的色情视频数量巨大，换脸鉴别...
EasyCkpt：AI大模型高性能状态保存恢复
通过采用异步化层次化保存、重叠模型拷贝和计算、网络感知异步存储的策略，EasyCkpt实现了近0开销的模型保存机制和大模型训练全过程精度无损的模型保存与恢复的能力。EasyCkpt已经支持当前流行的两种大模型训练框架Megatron和DeepSpeed，您...
应用场景
推荐搭配使用：云服务器 ECS+专有网络 VPC+高速通道（Express Connect）相关文档：通过image-syncer工具迁移容器镜像 备份中心概述 使用配置巡检功能检查注册集群Workload安全隐患 弹性伸缩架构 根据业务流量自动对业务扩容/缩容 容器服务...
FaceChain社区版服务实例部署文档
FaceChain是一个可以用来打造个人数字形象的深度学习模型工具。用户仅需要提供最低三张照片即可获得独属于自己的个人形象数字替身。本文介绍如何创建并使用服务实例。前言 都3202年了，再不拥有一套属于自己的个人数字形象就真的赶不上时代...
通用文字识别
技术前沿精深 基于阿里云 人工智能平台 PAI，应用阿里深度优化的深度学习框架PAI-Tensorflow，训练出业界领先的文本检测模型及文本识别模型。服务稳定 根据调用量提供弹性服务，扩展性好，算法持续的迭代优化对用户稳定性无影响。应用场景 ...
FeatureStore概述
FeatureStore作为PAI产品中心化的数据管理和共享平台，用于组织、存储和管理机器学习和AI训练中使用的特征数据。FeatureStore可以方便地向多人、多团队共享特征，保证离线在线特征数据的一致性，并提供高效的在线特征访问。什么是...
常见问题
而搜索增强则是一站式智能搜索PaaS服务，集成了query分析能力，多模型结构的预训练向量表示能力，混合召回和多因子排序能力（文本匹配、深度语义匹配）等AI算法模型，致力于提升搜索效果，让搜索结果更为准确和相关。配置常见问题 ...
什么是GPU云服务器
工具名称 说明 神龙AI训练加速引擎AIACC-Training（AIACC训练加速）阿里云自研的分布式训练任务AI加速器，可以显著提升训练性能。神龙AI推理加速引擎AIACC-Inference（AIACC推理加速）阿里云自研的推理AI加速器，可以显著提升推理性能。AI...
什么是MaxCompute
人工智能平台PAI 基于机器学习平台的算法组件实现对MaxCompute数据进行模型训练等操作。实时数仓Hologres 基于Hologres对MaxCompute数据进行外表查询加速，也可导出到Hologres进行交互式分析。Quick BI 基于Quick BI对MaxCompute数据进行...
最大连通子图
该算法常用于网络分析、图像处理等领域。它通过深度优先搜索（DFS）或广度优先搜索（BFS）来遍历图，识别所有连通组件，再从中找出包含节点最多的子图。配置组件 方法一：可视化方式 在Designer工作流页面添加 最大连通子图 组件，并在界面...
使用Megatron-Deepspeed训练GPT-2并生成文本
本文介绍如何使用GPU云服务器，使用Megatron-Deepspeed框架训练GPT-2模型并生成文本。背景信息 GPT-2模型是OpenAI于2018年在GPT模型的基础上发布的新的无监督NLP模型，当时被称为“史上最强通用NLP模型”。该模型可以生成连贯的文本段落，...
通义千问Qwen全托管灵骏最佳实践
本方案旨在帮助大模型开发者快速上手灵骏智算平台，实现大语言模型（Qwen-7B、Qwen-14B和Qwen-72B）的高效分布式训练、三阶段指令微调、模型离线推理和在线服务部署等完整的开发流程。以Qwen-7B模型为例，为您详细介绍该方案的开发流程。...
安装AIACC-Training
AIACC-Training支持基于主流人工智能（包括PyTorch、TensorFlow、MXNet、Caffe等）搭建的模型进行分布式训练。在接口层面上，目前AIACC-Training兼容了PyTorch DDP以及Horovod的API，对于原生使用上述分布式训练方法的训练代码，可以做到无...
预置能力
FormUIE FormUIE是基于深度学习和任务预训练的信息抽取模型，支持用户在不训练模型的情况下，通过平台可视化引导，完成抽取字段的配置，实现对非结构化、多板式单页表格表单预标注功能。在图像质量较好，字段设置合理的条件下，预标注准确...
预置能力
FormUIE FormUIE是基于深度学习和任务预训练的信息抽取模型，支持用户在不训练模型的情况下，通过平台可视化引导，完成抽取字段的配置，实现对非结构化、多板式单页表格表单预标注功能。在图像质量较好，字段设置合理的条件下，预标注准确...
基本概念
要把这种解决问题的规律告诉机器就需要进行训练，而在真实业务场景中，单纯的根据已知数据训练出来的模型并不能真正满足用户的预期，所以自学习平台将已知数据寻找模型参数的训练过程，通过深度调参和候选模型评估比较最优模型，以供用户...
灵骏智算资源配额
阿里云PAI为您提供灵骏智算资源，可用于AI开发和训练，如果您希望进行高性能AI训练、高性能计算，可以通过配置资源配额来使用灵骏智算资源。本文为您介绍如何新增、管理以及使用资源配额。前提条件 已创建灵骏智算资源专有资源组并购买了...
5分钟使用EAS一键部署Kohya SD模型微调应用
LoRA network weights LoRA网络权重，如果要接着训练则选用最后训练的LoRA。选填。Train batch size 训练批量大小。该值越大，对显存的要求越高。Epoch 训练轮数，将所有数据训练一次为一轮。需要自行计算。一般情况下：Kohya中总训练次数=...
配置 MPC 项目
因此，需要保证项目中训练节点和预测节点的网络互通。测试环境 选择一个节点作为测试环境的隐私计算节点，节点来源于 节点管理 模块中，在测试环境使用预测引擎的节点。生产环境 选择一个节点作为生产环境的隐私计算节点，节点来源于 节点...
应用场景
GPU云服务器适用于视频转码、图片渲染、AI训练、AI推理、云端图形工作站等场景，神行工具包（DeepGPU）为了配合GPU云服务器的计算服务增强能力，也适用于所有AI训练场景和AI推理场景。本文主要介绍GPU云服务器和神行工具包（DeepGPU）的...
医疗场景识别
技术前沿精深：基于阿里云 人工智能平台 PAI，应用阿里深度优化的深度学习框架PAI-Tensorflow，训练出业界领先的文本检测模型及文本识别模型。服务稳定：根据调用量提供弹性服务，扩展性好，算法持续的迭代优化对用户稳定性无影响。应用...
PS-SMART二分类训练
参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS-SMART支持百亿样本及几十万特征的训练...
个人证照识别
技术前沿精深：基于阿里云 人工智能平台 PAI，应用阿里深度优化的深度学习框架PAI-Tensorflow，训练出业界领先的文本检测模型及文本识别模型。服务稳定：根据调用量提供弹性服务，扩展性好，算法持续的迭代优化对用户稳定性无影响。应用...
功能特性
同时，通过大规模RDMA网络部署实践，阿里云自主研发了基于端网协同的RDMA高性能网络协议和HPCC拥塞控制算法，并通过智能网卡实现了协议硬件卸载，降低了端到端网络延时，提升了网络IO吞吐能力，并有效规避和弱化了网络故障、网络黑洞等传统...
PS-SMART多分类
参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS-SMART支持百亿样本及几十万特征的训练...
PS-SMART回归
参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS-SMART支持百亿样本及几十万特征的训练...
通用环境变量列表
提交DLC训练任务时，PAI会自动注入多个通用环境变量，便于您在代码中直接使用。本文为您介绍DLC系统中默认提供的环境变量列表。公共环境变量 基于灵骏智算的环境变量，关于环境变量的说明，请参见 配置高性能网络变量。PyTorch环境变量 在...
网络诊断
容器服务平台提供网络诊断功能，帮助您诊断网络常见问题，例如Pod之间不通、集群到公网访问不通、公网到LoadBalancer不通。本文介绍网络诊断的基本原理、使用方式、以及如何针对常见网络不通的场景定位网络问题和使用网络诊断。重要 使用...
小语种识别
技术前沿精深：基于阿里云 人工智能平台 PAI，应用阿里深度优化的深度学习框架PAI-Tensorflow，训练出业界领先的文本检测模型及文本识别模型。服务稳定：根据调用量提供弹性服务，扩展性好，算法持续的迭代优化对用户稳定性无影响。应用...
车辆物流识别
实时性高：依托于阿里自建的EAS在线服务集群，精益求精优化Inference技术，提供弹性伸缩的低延时服务 技术前沿精深：基于阿里云 人工智能平台 PAI，应用阿里深度优化的深度学习框架PAI-Tensorflow，训练出业界领先的文本检测模型及文本识别...
教育场景识别
技术前沿精深：基于阿里云 人工智能平台 PAI，应用阿里深度优化的深度学习框架PAI-Tensorflow，训练出业界领先的文本检测模型及文本识别模型。服务稳定：根据调用量提供弹性服务，扩展性好，算法持续的迭代优化对用户稳定性无影响。应用...
AI推理服务概述
部署Tensorflow模型推理服务 PyTorch模型推理服务 PyTorch是一种深度学习计算框架，可用来训练模型。您可以通过Triton或TorchServe方式部署PyTorch模型的推理服务。提交GPU共享模型推理任务 弹性推理 您可以基于ECI或ECS运行弹性推理服务，...
- 产品推荐
- 这些文档可能帮助您