配置规则：按表（单表）
多级分区表达式 1级分区名=分区值/2级分区名=分区值/N级分区名=分区值 分区值可以是固定值，也可以是内置参数表达式。参数必须使用中括号表示，例如，$[yyyymmdd-N]。分区表必须配置到最后一级分区。DataWorks为您提供了部分内置的业务日期...
使用EasyRec构建推荐模型
您可以直接使用处理后的样本表：训练表为 pai_online_project.easyrec_demo_taobao_train_data，评估表为 pai_online_project.easyrec_demo_taobao_test_data，即省略PAI Designer节点，直接从MaxCompute SQL节点开始。您也可以按照以下...
新建集群
取值说明：标准规格 大存储规格 重要 大存储规格的集群费用较高，当您的业务测试完后需要及时释放集群，具体操作请参见 删除集群。标准规格 规格 单个节点的CPU和内存。8核32 GB 节点数量 节点的数量。1 存储类型 存储的云盘类型，应用场景...
使用函数计算作为Transform
本文介绍使用函数计算作为Transform时的背景信息、注意事项及操作步骤。背景信息 当Transform选择阿里云的 函数计算 时，您可以通过编写函数代码对事件进行更复杂、更加定制化的处理。整体流程如图所示。源端（Source）拉取事件后，先经过...
图像度量学习训练（raw）
如果您的业务场景涉及度量学习，则可以通过图像度量学习训练（raw）组件构建度量学习模型，从而进行模型推理。本文为您介绍图像度量学习训练（raw）组件的配置方法和使用示例。前提条件 已开通OSS并完成授权，详情请参见 开通OSS服务 和 云...
ChatGLM开源双语对话语言模型
重要 模型定制API调用需"申请体验"并通过后才可使用，否则API调用将返回错误状态码。概述 ChatGLM2模型是由智谱AI出品的大规模语言模型。您可以通过灵积模型服务平台提供的模型定制功能对平台内置的ChatGLM2模型进行微调。当前在灵积平台...
LLaMa2 大语言模型
本文介绍LLaMa2 大语言模型的定制能力 重要 模型定制API调用需"申请体验"并通过后才可使用，否则API调用将返回错误状态码。概述 Llama 2系列是来自Meta开发并公开发布的大型语言模型（LLMs）。您可以通过灵积模型服务平台提供的模型定制...
百川开源大语言模型
重要 模型定制API调用需"申请体验"并通过后才可使用，否则API调用将返回错误状态码。概述 百川系列开源大语言模型是由百川智能开发的一个开源的大规模预训练模型。您可以通过灵积模型服务平台提供的模型定制功能对平台内置的百川系列模型...
人工神经网络
人工神经网络（Artificial Neural Network，缩写ANN），简称神经网络或类神经网络，是一种模仿生物神经网络（动物的中枢神经系统，特别是大脑）的结构和功能的数学模型或计算模型，用于对函数进行估计或近似。人工神经网络有多层和单层之分...
解密ADB高效基因检测系统
背景信息 病原体基因检测为医生诊断疑难杂症提供了诊断基础，病原体基因检测流程分为五个步骤，如 基因检测流程 所示：采集病人的样本，例如静脉血、痰液、肺泡灌洗液或者脑脊髓液等。对样本进行培养，然后提取样本中的核酸组织。通过...
部署及微调Qwen1.5系列模型
单击 训练，PAI-QuickStart自动跳转到模型训练页面，并开始进行训练，您可以查看训练任务状态和训练日志。如果需要将微调训练完的模型部署为在线服务，可以在同一页面的模型部署卡片中选择资源组，然后单击 部署 实现一键部署。模型调用...
长文档信息抽取
在图像质量较好情况下，通过100+训练样本标注，调优后模型识别准确率可超85%。功能优势 高精度，基于阿里云强大的预训练模型，经过调优训练的多版式模型识别准确率可达85%以上。少样本，仅需标注少量数据即可完成模型优化迭代，且模型具有...
长文档信息抽取
在图像质量较好情况下，通过100+训练样本标注，调优后模型识别准确率可超85%。功能优势 高精度，基于阿里云强大的预训练模型，经过调优训练的多版式模型识别准确率可达85%以上。少样本，仅需标注少量数据即可完成模型优化迭代，且模型具有...
单据票证信息抽取
在图像质量较好情况下，通过100+训练样本标注，调优后模型识别准确率可超95%。同时 工具箱 中还提供分类器管理工具与字段类型管理工具，支持用户通过同一接口完成不同版式数据的自动分类路由与高精度识别。功能优势 高精度，基于阿里云强大...
单据票证信息抽取
在图像质量较好情况下，通过100+训练样本标注，调优后模型识别准确率可超95%。同时 工具箱 中还提供分类器管理工具与字段类型管理工具，支持用户通过同一接口完成不同版式数据的自动分类路由与高精度识别。功能优势 高精度，基于阿里云强大...
Kohya使用方法与实践案例
做模型训练时，要选择放置数据集文件夹的数据集。设置训练参数。单击 Start training。在下方的日志里可以查看模型训练进度和模型训练完成的提示。Training Parameters 部分常用训练参数介绍说明 参数 功能 设置说明 LoRA Type 选择LoRA...
LLM on DLC-Megatron on DLC最佳实践
常见的大模型训练技术包括：数据并行技术、模型并行技术（包括张量并行技术和流水并行技术）、优化器状态并行技术、序列并行技术、激活重算技术等：数据并行技术（Data Parallel）：在多个GPU组上有相同的模型参数副本，但读取不同的样本。...
基本概念
自定义模型 自定义模型版本是基于您训练过的模型进行再次训练，从而调优模型效果，请注意，由于大模型的训练原理，多次训练模型时，后序训练易丢失前序训练已习得的能力，建议后序训练数据需要采样或保持前序训练数据。循环次数 循环次数...
产品优势
阿里云GPU云服务器具有广阔的覆盖范围、超强的计算能力、出色的网络性能和灵活的购买方式，神行工具包（DeepGPU）是专门为GPU云服务器搭配的具有GPU计算服务增强能力的免费工具集。本文主要介绍GPU云服务器和神行工具包（DeepGPU）的优势。...
创建数据脱敏规则
仅MaxCompute引擎层脱敏需要）如果您需要配置的脱敏场景为MaxCompute引擎层脱敏，即除DataWorks入口外，使用MaxCompute命令行/客户端（odpscmd）、Logview入口等查询数据时，对敏感数据根据脱敏规则进行脱敏，您需要申请MaxCompute的网络白...
组件参考：所有组件汇总
组件类型 组件 描述 自定义组件 自定义组件 支持在AI资产管理中创建自定义组件，自定义组件创建成功后，您可以在Designer中将该组件与官方组件串联使用进行模型训练。源/目标 读OSS数据 该组件用来读取对象存储OSS Bucket路径下的文件或...
通义千问
重要 通义千问模型定制API调用需申请体验并通过后才可使用，否则API调用将返回错误状态码。不同规模的千问系列模型申请链接不同，如有需求请分别进行申请。概述 通义千问是阿里云自主研发的超大规模语言模型，能够在用户自然语言输入的基础...
通义千问
重要 通义千问模型定制API调用需申请体验并通过后才可使用，否则API调用将返回错误状态码。不同规模的千问系列模型申请链接不同，如有需求请分别进行申请。概述 通义千问是阿里云自主研发的超大规模语言模型，能够在用户自然语言输入的基础...
模型仓库（FastNN）
PAI模型仓库FastNN（Fast Neural Networks）是一个基于PAISoar的分布式神经网络仓库。目前FastNN已经支持了Inception、Resnet、VGG等经典算法，后续会逐步开放更多的先进模型。目前FastNN已经内置于 Designer 平台中，并且可以直接在该平台...
DescribeDBInstanceAttribute-查询云数据库MongoDB...
dds-bp11483712c1*NetworkType string 网络类型，取值说明：Classic：经典网络。VPC：专有网络。VPC VPCId string 专有网络 ID。说明 当实例的网络类型为专有网络时，返回该参数。vpc-bp1jk5vwkcri27qme*ReplacateId string 全球多活实例的...
5分钟使用EAS一键部署Kohya SD模型微调应用
通过EAS，您可以一键部署开源Kohya_ss服务并训练LoRA模型。在AI绘画场景中，您可以将经过训练的LoRA模型应用于Stable Diffusion（SD）服务，作为辅助模型，以提升SD绘画的效果。前提条件 已开通 EAS 并创建默认工作空间，详情请参见 开通...
分箱
正例值 仅当 标签列 存在时才生效。选择分箱的参数来源 参数来源支持“参数设置”中的参数 和 手动分箱或自定义Json。是否保留没有在“特征列”中选择的字段 使用自定义分箱时，如果该参数选择 是，则未在 特征列 中选择的字段会原样保留，...
DescribeInstances-查询一台或多台ECS实例的详细信息
默认值：当不设置值或设置的值小于 10 时，默认值为 10。当设置的值大于 100 时，默认值为 100。10 InnerIpAddresses string 否 经典网络类型实例的内网 IP 列表。当 InstanceNetworkType=classic 时生效，取值可以由多个 IP 组成一个 JSON...
重排配置
重排配置 重排（Sort）阶段在精排之后进行，在这里可以进行排序以及打散、添加窗口规则等逻辑 如何配置 重排的配置对应配置总览中的 SortConfs，SortConfs 是一个[]object 结构，可以配置多个重排策略，目前 pairec 内置的有 ...
CreateScalingGroup-创建一个伸缩组
["rm-bp142f86de0t7*","rm-bp18l1z42ar4o*","rm-bp1lqr97h4aqk*"]RemovalPolicies array 否 指定实例移出策略的筛选策略。取值范围：OldestInstance：移出最早加入伸缩组的 ECS 实例。NewestInstance：移出最新加入伸缩组的 ECS 实例。...
DescribeScalingConfigurations
弹性伸缩在触发弹性扩张活动时，会按照伸缩组中生效的伸缩配置为模板自动创建ECS实例，您可以通过调用API CreateScalingConfiguration创建一个ECS类型的伸缩配置来作为ECS实例模板。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您...
创建训练任务
说明 当资源配额选择灵骏智算资源时，为了充分利用灵骏智算资源的高性能RDMA网络，当使用自定义镜像时，需手动安装RDMA，操作详情请参见 RDMA：使用高性能网络进行分布式训练。镜像地址：支持配置您的自定义镜像、社区镜像以及PAI平台镜像...
CreateCluster
说明 本参数与VswitchId参数同时为空时表示实例的网络类型为经典网络。VSwitchId String 是 vsw-bp191otqj1ssyl*专有网络下的虚拟交换机ID。MasterInstanceType String 是 hbase.sn1.medium Master节点规格，可调用 ...
CreateScalingGroup
LoadBalancerIds String 否["lb-bp1u7etiogg38yvwz*","lb-bp168cqrux9ai9l7f*","lb-bp1jv3m9zvj22ufxp*"]传统型负载均衡CLB（原SLB）实例ID。取值可以是由多台CLB实例ID组成一个JSON数组，ID之间用半角逗号（,）隔开。单个伸缩组可以关联的...
DescribeNetworkAcls-查看网络ACL列表
调用DescribeNetworkAcls接口查看网络ACL列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略...
快速扩缩容ECI实例
如果您想实现下表中所有的业务需求，请依次执行本文操作步骤即可。业务场景 业务需求描述 必选操作步骤 日常运行，且业务量无明显波动时，需要2台ECI实例。需求一：最少需要2台ECI实例（CPU为4 vCPU，内存为8 GiB），来满足日常需求。步骤...
DescribeScalingGroupDetail-查询指定伸缩组详情
查看指定伸缩组的基本信息、伸缩组内实例、伸缩配置等信息，您可以通过调用DescribeScalingGroupDetail查询该伸缩组。当ECI类型伸缩组指定OutputFormat参数为YAML时，可以输出K8s Deployment YAML格式内容。调试 您可以在OpenAPI Explorer...
CreateDBInstance-创建实例
说明 您可以调用 DescribeDBInstances 接口查看目标地域下所有的 AnalyticDB PostgreSQL 实例的详情，包括实例 ID。gp-bp*BackupId string 否 备份集 ID。说明 您可以调用 DescribeDataBackups 查看目标实例下所有备份集的备份集 ID。...
DescribeScalingGroups-查询伸缩组列表
如果您需要查看伸缩组的基本信息、伸缩组内实例、伸缩配置等信息，您可以通过调用DescribeScalingGroups查询该伸缩组。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成...
DescribeScalingGroups
如果您需要查看伸缩组的基本信息、伸缩组内实例、伸缩配置等信息，则您可以调用API DescribeScalingGroups查询该伸缩组。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成...
- 产品推荐
- 这些文档可能帮助您