人工智能使用-人工智能使用文档介绍内容-阿里云

Lasso回归训练

使用限制支持的计算引擎为MaxCompute、Flink或DLC。算法原理 Lasso回归算法通过构造一个惩罚函数，得到一个较为精炼的模型。使得它压缩一些回归系数，即强制系数绝对值之和小于某个固定值，同时设定一些回归系数为0。因此保留了子集收缩的...

通用模型导出

您可以使用通用模型导出组件，将在MaxCompute中训练得到的模型导出到指定的OSS路径。本文为您介绍如何使用通用模型导出组件。前提条件已完成OSS授权，具体操作请参见云产品依赖与授权：Designer。支持接入的上游组件常规机器学习组件 ...

使用EAS一键部署Llama3模型

资源配置选择推荐使用华北2（北京）地域，实例规格推荐使用 ml.gu7i.c8m30.1-gu30。说明如果上述资源库存不足，也可使用 ecs.gn6i-c24g1.12xlarge 规格。单击部署，持续时间大约为3分钟，即可完成模型部署。当服务状态为运行中时，...

海外门店上云最佳实践

配置项说明智能接入网关设备区域选择智能接入网关设备的使用区域。本示例选择亚太东南亚1（新加坡）。说明如果智能接入网关设备的使用区域并未罗列在页面中，建议您遵循就近原则选择区域。例如：您需要在泰国使用智能接入网关设备，...

AutoML使用案例汇总

本文是AutoML产品使用案例入口链接汇总。案例名称描述 MaxCompute K均值聚类最佳实践介绍如何通过提交一个使用MaxCompute计算资源的超参数调优实验，来运行K均值聚类和聚类模型评估组件，以获取K均值聚类组件算法的较优超参数组合。...

PMML

使用Sklearn、Xgboost等开源算法框架训练的算法模型，转换成PMML格式后，也可以使用PMML Processor部署到 EAS 中，详情请参见通用模型导出。更多关于PMML模型的介绍，详情请参见 PMML模型介绍。缺失值填充策略 PMML Processor提供默认的...

ListFreeNodes-获取未使用节点列表

查询未使用节点列表。调试您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试授权信息下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用...

使用PyODPS读写MaxCompute表

在DSW实例中，您可以通过SQL File方便地查询MaxCompute表数据，以及可视化展示查询结果，也可以使用PyODPS实现对MaxCompute表更多丰富的操作。本文介绍如何使用PyODPS和SQL File读MaxCompute表数据。前提条件在开始执行操作前，请确认您...

一键诊断

您可以使用 PAI灵骏智算服务提供的一键诊断功能，检查灵骏节点的网络和硬件状态，基于多种通信库和通信模型进行网络测试。本文为您介绍灵骏的一键诊断功能。自助诊断网络诊断网络诊断功能分为静态配置类检查和动态运行类检查，支持...

图片分类

在快速开始中，您可以选择直接部署开源的预训练图片分类模型，或针对定制化场景，使用自己的数据集对预训练模型进行微调训练，并使用微调训练模型将图片分类成定制化的类别。本文为您介绍如何使用快速开始执行图片分类任务。前提条件已...

使用C或C++开发自定义Processor

本文为您介绍如何使用C或C++开发自定义Processor。快速上手Demo 下载 EAS 预测服务示例，该项目包含两个自定义Processor，其中：echo：请求时将用户输入原样返回，同时返回模型中的文件列表。image_classification：mnist 文本分类，输入 ...

相似标签自动归类

使用K均值聚类算法，在已经产生的词向量基础上，计算词向量的距离，并按照意义将标签词自动归类。在画布中单击 K均值聚类-1 组件，在右侧字段设置页签，选择特征列为 f0，附加列为 word。说明该组件在运行时，其上游输入数据表的行数...

更新EasyRec配置文件

该组件的作用是使用EasyRec里的add_feature_info_to_config.py脚本，给推荐全链路深度定制开发平台PAIREC生成的临时文件template.config，添加特征信息。本文为您介绍该组件的配置方法。前提条件已开通OSS并完成授权，详情请参见开通OSS...

直连方式

为了解决使用ProxyClient客户端代理工具远程连接DSW实例时可能出现的影响使用体验的问题，例如频繁需要重连、速度低等，DSW提供了直连方式，旨在提供更稳定、更快速的连接体验。使用限制目前，仅以下类型的DSW实例支持使用直连方式：在...

PAI图像物体检测

您可以使用 SQL脚本组件进行PAI命令调用，也可以使用MaxCompute客户端或DataWorks的开发节点进行PAI命令调用，详情请参见使用本地客户端（odpscmd）连接或开发ODPS SQL任务。pai-name ev_predict_ext-Dmodel_path='您的模型路径'-...

准备工作

在开始使用之前，您需要下载客户端工具并完成用户认证。本文介绍下载客户端以及进行用户认证的命令详情。客户端使用注意事项如果运行时有证书问题相关的报错，请运行 sudo apt-get update&sudo apt-get install ca-certificates。下载客户...

使用闲时资源

本文为您介绍如何在使用预付费资源配额（Quota）提交DLC训练任务时，合理利用并配置闲时资源。功能介绍在PAI平台中，您可根据自身业务场景灵活划分和分配Quota，不同的业务团队提交的训练任务则会消耗被分配的Quota。但某些业务的Quota在...

AutoML使用限制及规格

AutoML的使用限制以及规格，包括当前支持的地域，支持的搜索算法TPE、GridSearch（网络搜索）、Random（随机搜索）、Evolution（演化算法）、GP（贝叶斯优化）、PBT（异步优化算法），以及对应的应用场景。支持地域（region）当前AutoML...

快速开始计费说明

本文为您介绍使用快速开始产生的费用说明。快速开始本身不收费，但在进行模型训练或部署操作时，会产生资源费用。在快速开始做模型训练操作时，会在DLC平台拉起相应的训练任务，并调度DLC公共资源组来完成任务。由此会产生与DLC相关的公共...

AI加速使用案例汇总

本文为您介绍AI加速使用案例相关文档入口链接汇总。数据集加速器使用案例案例名称描述在PAI平台使用数据集加速器介绍如何在创建DSW实例或提交训练任务时直接使用已开启加速的数据集。分布式训练加速使用案例案例名称描述 NLP：...

使用协同过滤实现商品推荐

本文为您介绍如何使用协同过滤算法实现商品推荐。背景信息数据挖掘的一个经典案例就是尿布与啤酒的案例。尿布与啤酒看似毫不相关的商品，当超市将其摆放至相邻货架时，会大幅度提高二者销量。您可以通过数据挖掘中的协同过滤算法挖掘商品...

推理加速（Blade）概述

PAI-Blade结合了多种优化技术，对训练完成的模型进行优化，从而达到最优的推理性能。同时，PAI-Blade提供的...部署模型推理，详情请参见使用SDK部署TensorFlow模型推理、使用SDK部署PyTorch模型推理和使用Blade EAS Plugin优化并部署模型。

云产品依赖与授权：Designer

使用Designer进行建模时，您需要授予操作账号使用Designer功能所需的操作权限，同时需要授予PAI访问相关云产品的权限，以保障功能安全顺利地使用。本文为您介绍使用Designer时所需的授权操作。背景信息使用Designer依赖OSS，同时可能会...

通用计算资源配额

调度策略选择合适的调度策略，提高算力资源的利用率，取值如下：智能策略均衡策略遍历策略 FIFO策略关于各个调度策略的原理介绍，请参见调度策略。关联工作空间选择所属的工作空间后，该资源配额将与该工作空间绑定。描述对资源配额...

镜像加速

PAI集成了DADI，您可以在DSW或DLC中使用DADI加速镜像，来提升模型训练速度。本文为您介绍如何在DSW或DLC上按需使用DADI加速镜像。前提条件已开通PAI（DSW、DLC）并创建了工作空间，详情请参见开通PAI并创建默认工作空间。开通阿里云容器...

使用专属资源组

专属资源组包括预付费资源组和后付费资源组，两种资源组的生命周期和计费方式均不相同，您需要根据使用场景，选择合适类型的资源组。本文为您介绍如何创建专属资源组、管理专属资源组、管理专属资源组中的机器实现扩缩容等功能。背景信息 ...

LLM大语言模型端到端链路：数据处理+模型训练+模型...

本文介绍如何使用PAI提供的LLM大语言模型数据处理组件、训练组件和推理组件，端到端完成大模型的开发和使用。前提条件已创建工作空间，详情请参见创建工作空间。已将MaxCompute资源和通用计算资源关联到工作空间，详情请参见管理工作...

条件随机场预测

本文为您介绍条件随机场预测算法组件的参数配置和使用示例。参数配置 Designer 支持通过可视化方式配置组件参数。参数描述请选择ID列样本以N元组的形式存储，ID列为一条样本的唯一ID。请选择特征列要进行标注的单词，以及该单词对应的...

使用公共资源组

开通EAS后，系统会默认为您创建公共资源组，您可以直接使用公共资源组来部署模型服务。本文为您介绍公共资源组的概要信息。适用场景公共资源组建议在任务量相对较少、对任务时效性要求不高的场景下使用。计费说明开始计费公共资源组支持...

RAM角色登录并使用PAI

本文为您介绍如何使用角色SSO的方式登录PAI。背景信息通常，企业用户通过常规登录方式登录阿里云来管理和使用云资源。即在阿里云控制台输入账号和密码后登录。随着企业安全监管要求的日益严格，部分企业更愿意通过角色登录（Role Base_SSO...

TableWriter API

您可以使用TableWriter API对MaxCompute表进行读写。警告公共云GPU服务器即将过保下线，您可以继续提交CPU版本的TensorFlow任务。如需使用GPU进行模型训练，请前往DLC提交任务，具体操作请参见创建训练任务。读写MaxCompute表的功能由 ...

MaxCompute资源配额

MaxCompute资源类型与对比选择在PAI产品中支持使用的MaxCompute资源分类如下：CPU资源和在MaxCompute产品中使用一样，支持以下两种付费方式：按量计费标准版（推荐使用）包年包月标准计算资源 GPU资源仅支持在PAI产品中使用，支持以下两...

多机多卡案例

本文为您提供使用TensorFlow实现多机多卡的相关代码下载地址。多机多卡案例代码下载

基于分箱组件实现连续特征离散化

首先使用分箱组件将连续特征离散化，再使用数据转换模块将原始数据从连续值转换为离散值。本文为您介绍如何使用Designer组件进行连续特征离散化。前提条件已创建工作空间，详情请参见创建工作空间。已将MaxCompute资源关联到工作空间，...

MTable展开

使用限制支持的计算引擎为MaxCompute、Flink和DLC。可视化配置组件参数输入桩输入桩（从左到右）数据类型建议上游组件是否必选数据无 MTable聚合 Prophet 是组件参数页签参数描述字段设置选中的列名计算列对应的列名，类型是...

队列服务订阅推送

介绍队列服务订阅推送功能的使用。在订阅推送可以持续地将就绪的数据立即推送到客户端手中，避免通过Get API进行轮询造成的时延和通过队列服务的内部机制进行查询，可以最大程度地降低处理时延和队列服务的负载。但是在使用上，由于有较多...

分布式训练框架StarServer

本文为您介绍如何使用分布式训练框架StarServer进行分布式训练。StarServer不仅将原生TensorFlow中的 Send/Recv 语义修改为 Pull/Push 语义，而且实现了图执行过程中的Lock-Free，大幅度提高了并发执行子图效率。PAI-TF支持更大的训练规模...

TensorFlow读写MaxCompute表

本文为您提供使用TensorFlow读写MaxCompute表的相关代码下载地址。读写MaxCompute表代码

分布式通信框架gRPC+

使用 DLC 进行深度学习训练时，您可以使用gRPC+分布式训练，从而加速模型训练。本文介绍如何开启分布式通信框架gRPC+。gRPC+通过Sharing Nothing架构、BusyPolling机制、用户态零拷贝及Send/Recv融合等多种优化技术，降低了E2E的通信延时，...

人工智能使用

新品推荐