模型说明
StructBERT 分类模型【推荐】阿里巴巴达摩院自研的alicemind模型体系，主要原理为使用 StructBERT模型 从大量无标注语料进行预训练，精度较高，推理速度较慢。StructBERT小样本分类：基于StructBert-base，在xnli数据集（将英文数据集重新...
模型说明
UIE小样本实体抽取模型 基于Deberta模型在千万级监督和远监督数据上预训练得到，支持重叠实体抽取；可以较好地处理零样本场景下推理（不需要训练数据，直接预测）和小样本场景下fine-tune（经过少量样本，如1，5，10，100条数据训练后再...
PAI图像检测训练
oss:/path/to/model 无 pretrained_model 否 预训练模型的OSS路径。如果指定该参数，则系统在此模型基础上Finetune。oss:/pai-vision-data-sh/pretrained_models/inception_v4.ckpt“”use_pretrained_model 否 是否使用预训练模型。BOOL ...
PAI端到端文字识别训练
oss:/path/to/model 无 pretrained_model 否 预训练模型的OSS路径。如果指定该参数值，则在此模型基础上Finetune。oss:/pai-vision-data-sh/pretrained_models/inception_v4.ckpt“”use_pretrained_model 否 是否使用预训练模型。BOOL ...
设置宕机自动迁移
为了降低物理故障对业务的影响，阿里云为您提供专有宿主机DDH宕机自动迁移的功能。本章节介绍在创建DDH后如何开启或者关闭宕机自动迁移。背景信息 宕机自动迁移开启后，当DDH因故障停机时，会自动迁移至健康的DDH。若您未开启宕机自动迁移...
AI写真计费说明
完整的使用AI写真涉及到AI写真训练、AI写真制作、图片质量检测和人脸属性分析（可选）服务。其中，图片质量检测免费使用，其他服务将根据您的服务点数进行收费。本文为您介绍AI写真相关服务的计费规则及计费方式。计费规则 计费项 计费方式...
DLC计费说明
无 ecs.r7.large 2 vCPU+16 GB内存 无 ecs.r7.xlarge 4 vCPU+32 GB内存 无 ecs.r7.2xlarge 8 vCPU+64 GB内存 无 ecs.r7.4xlarge 16 vCPU+128 GB内存 无 ecs.r7.6xlarge 24 vCPU+192 GB内存 无 ecs.r7.8xlarge 32 vCPU+256 GB内存 无 ecs.r7...
姜子牙通用大模型
Ziya-LLaMA通用大模型是由IDEA研究院出品的大...目前Ziya-LLaMA通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。开发者可以通过以下链接，了解如何通过大模型服务平台调用Ziya-LLaMA API。快速使用 API详情
PAI图像分类（多标签分类）训练
oss:/path/to/model 无 pretrained_model 否 预训练模型OSS路径。如果指定该路径，则在该模型基础上进行微调。oss:/pai-vision-data-sh/pretrained_models/inception_v4.ckpt“”use_pretrained_model 否 是否使用预训练模型。BOOL true ...
参考：性能基准评测
混合精度 实验环境：英文huggingface bert预训练 num-layers 12 hidden-size 768 num-attention-heads 12 num-params 110106428 local-rank 4 seq-length 512 micro-batch-size 16 global-batch-size 64 方案 吞吐（samples/s）Peak Memory...
姜子牙通用大模型
Ziya-LLaMA通用大模型是由IDEA研究院...目前Ziya-LLaMA通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。开发者可以通过以下链接，了解如何通过DashScope灵积模型服务调用Ziya-LLaMA API。快速使用 API详情
使用第八代Intel实例单机部署Qwen-72B-Chat
Qwen-72B的预训练数据类型多样、覆盖广泛，包括大量网络文本、专业书籍、代码等。而Qwen-72B-Chat是在Qwen-72B的基础上，使用对齐机制打造的基于大语言模型的AI助手，是通义千问对外开源的72B规模参数量的经过人类指令对齐的Chat模型。什么...
告警规则指标说明
JVM实例数 无 是 当前实时运行的Java虚拟机实例数量，常用于服务宕机告警配置。节点机发送的字节数 无 不是 节点机通过网络连接发送的数据量，其中包括应用程序发送的数据、系统消息和错误信息等。节点机发送的报文数 无 不是 节点机通过...
图像度量学习训练（raw）
ClsSourceImageList 预训练模型oss路径 否 如果您有自己的预训练模型，则将该参数配置为预训练模型的OSS路径。如果没有配置该参数，则使用PAI提供的默认预训练模型。无 参数设置 度量学习模型使用的backbone 是 选择使用的主流模型，支持...
OCR文档自学习概述
功能简介 OCR文档自学习，是面向“无算法基础”的企业与个人开发者用户，通过全流程可视化操作，支持用户完成模板配置、数据处理&标注、模型构建&训练、部署发布等操作的一站式工具平台。本平台采用少样本训练、智能预标注，视觉-语义联合...
图像分类训练（torch）
ClsSourceImageList 预训练模型oss路径 否 如果您有自己的预训练模型，则将该参数配置为预训练模型的OSS路径。如果没有配置该参数，则使用PAI提供的默认预训练模型。无 参数设置 图像分类模型使用的backbone 是 选择使用的骨干模型，支持...
图像检测训练（easycv）
无 预训练模型oss路径 否 如果有自己的预训练模型，则将该参数配置为自己预训练模型的OSS路径。如果没有配置该参数，则使用PAI提供的默认预训练模型。无 训练数据oss路径 是 仅当数据源格式为 COCO格式 时候，才会显示填写此单元格，此处...
MOSS开源对话语言模型
其中模型的演变路径如下：moss-moon-003-base:MOSS-003基座模型，在高质量中英文语料上自监督预训练得到，预训练语料包含约700B单词，计算量约6.67x10^22^次浮点数运算。moss-moon-003-sft:基座模型在约110万多轮对话数据上微调得到，具有...
使用AIACC-Training（AIACC训练加速）加速BERT Fine...
分为预训练模型（Pretrain）和精调模型（Finetune）。Pretrain模型为通用的语言模型。Finetune只需要在Pretrain的基础上增加一层适配层，即可服务于从问答到语言推理等各类任务，无需为具体任务修改整体模型架构。方案优势 使用GPU云服务器...
图像关键点训练
DetSourceCOCO 预训练模型oss路径 否 如果您有自己的预训练模型，则将该参数配置为预训练模型的OSS路径。如果没有配置该参数，则使用PAI提供的默认预训练模型。无 参数设置 关键点检测模型使用的backbone 是 选择使用的骨干模型，支持以下...
OCR文档自学习概述
功能简介 OCR文档自学习，是面向“无算法基础”的企业与个人开发者用户，通过全流程可视化操作，支持用户完成模板配置、数据处理&标注、模型构建&训练、部署发布等操作的一站式工具平台。本平台采用少样本训练、智能预标注，视觉-语义联合...
三方开源大语言模型
目前Ziya-LLaMA通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。3是ChatGLM 系列最新一代的开源模型，在保留了前两代模型对话流畅、部署门槛低等众多优秀特性的基础上，ChatGLM3-6B 引入了如下特性：...
Designer支持LLM数据预处理算子及常用模板
适用客户 适用于所有需要特定数据场景下进行LLM预训练及SFT的客户。新增功能/规格 高质量的数据预处理是LLM成功应用的关键步骤，PAI-Designer提供去重、标准化、敏感信息打码等等常用的高性能数据预处理算子，并基于MaxCompute提供大规模...
文本内容风控解决方案
pai-bert-base-zh 模型额外参数 用户自定义参数，可以配置预训练模型 pretrain_model_name_or_path，常用如下四种预训练模型：base-roberta base-bert tiny-roberta tiny-bert 模型精度排序：base-roberta>base-bert>tiny-roberta>tiny-...
视频分类训练
无 预训练模型oss路径 否 建议使用预训练模型，以提高训练模型的精度。无 参数设置 视频分类模型网络 是 选择使用的识别模型网络，支持以下取值：x3d_xs x3d_l x3d_m swin_t swin_s swin_b swin_t_bert x3d_xs 是否多标签 否 任务是否属于...
阿里云ES机器学习
ES ML应用 类型 解释 实战文档 异常检测 主要用于识别时间序列数据中的异常行为，属于无监督学习，如日志文件、金融交易等。ES使用统计模型来检测数据中的离群点和不寻常模式。创建推理机器学习任务 基于Data frame 的回归与分类 允许对...
智能文创解决方案
步骤二：构建文本摘要模型 在 Designer 可视化建模平台，使用文本摘要训练组件，基于海量大数据语料预训练获得的NLP预训练模型，构建文本摘要模型。步骤三：离线批量预测 在 Designer 可视化建模平台，使用文本摘要预测组件，基于海量文本...
PAI-TF概述
PAI-TF是人工智能平台PAI为了追求更极致的深度学习训练效率，优化原生Tensorflow的内核并开发周边工具，推出的一款产品。PAI-TF拥有服务化、分布式调度、全局计算调度、GPU卡映射及模型在线预测等特点。警告 公共云GPU服务器即将过保下线，...
机器阅读理解解决方案
步骤二：构建机器阅读理解模型 在 Designer 平台上，使用机器阅读理解训练组件，基于海量大数据语料预训练获得的NLP预训练模型，构建机器阅读理解模型。步骤三：离线批量预测 在 Designer 平台上，使用机器阅读理解预测组件，基于海量篇章...
基于AIACC加速器快速实现LLaMA-7B指令微调
背景信息 LLaMA（Large Language Model Meta AI）是Meta AI在2023年2月发布的开放使用预训练语言模型（Large Language Model，LLM），其参数量包含7B到65B的集合，并仅使用完全公开的数据集进行训练。LLaMA的训练原理是将一系列单词作为...
PLDA
LDA也是一种无监督学习算法，在训练时您无需手工标注的训练集，仅需要在文档集中指定主题的数量K即可（K即为PLDA参数topic）。LDA首先由David M.Blei、Andrew Y.Ng和Michael I.Jordan于2003年提出，在文本挖掘领域应用于文本主题识别、文本...
写真相机方案
写真相机方案实现了自动化训练用户专属的Lora模型，并利用Lora模型和模板图片生成用户个性化的写真照片。模型在线服务（EAS）是PAI提供的模型服务平台。该方案定义了一套算法流程，可以部署为EAS模型在线服务，并提供了相关的调用接口，...
快速使用
目前Ziya-LLaMA通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。当前在大模型服务平台部署服务时使用的ModelScope社区模型id：Fengshenbang/Ziya-LLaMA-13B-v1，模型版本：v1.0.3。更多信息可以参考...
快速使用
目前Ziya-LLaMA通用大模型已完成大规模预训练、多任务有监督微调和人类反馈学习三阶段的训练过程。当前在灵积平台部署服务时使用的ModelScope社区模型id：Fengshenbang/Ziya-LLaMA-13B-v1，模型版本：v1.0.3。更多信息可以参考ModelScope上...
基于ACCL优化套件进行多机训练
在BERT论文中，预训练分成了Phase-1与Phase-2两个阶段。二者的主要区别为 Sequence length 不同。虽然更长的序列有助于提高准确性，但会大幅增加计算耗时。为了控制整体的训练耗时，原文中Phase-1使用128的序列长度完成了36个Epoch的训练，...
API详情
相比如何做好大语言模型的预训练，BELLE更关注如何在开源预训练大语言模型的基础上，帮助每一个人都能够得到一个属于自己的、效果尽可能好的具有指令表现能力的语言模型，降低大语言模型、特别是中文大语言模型的研究和应用门槛。...
API详情
相比如何做好大语言模型的预训练，BELLE更关注如何在开源预训练大语言模型的基础上，帮助每一个人都能够得到一个属于自己的、效果尽可能好的具有指令表现能力的语言模型，降低大语言模型、特别是中文大语言模型的研究和应用门槛。...
异构计算产品最佳实践概览
神龙AI加速引擎AIACC 使用AIACC-Training（AIACC训练加速）加速BERT Finetune模型 适用于自然语言训练场景，使用GPU云服务器和极速型NAS进行BERT Finetune模型训练，使用AIACC-Training（AIACC训练加速）可以有效提升多机多卡的训练效率。...
DTS数据迁移过程中在预检查阶段源库权限检查失败
问题描述 阿里云数据传输服务DTS在进行数据迁移过程中，“源库权限检查”检查项预检查失败。问题原因 源数据库的数据库账号没有足够的权限进行数据迁移任务。解决方案 为保障数据迁移任务的顺利执行，DTS在预检查阶段会对数据迁移任务中...
使用EasyASR进行语音识别
背景信息 本文采用wav2letter-small模型作为预训练模型，除此之外，PAI还提供了wav2letter-base、transformer-small及transformer-base三个预训练的ASR模型，供您使用。您只需要下载对应的文件，并使用其替换操作流程中的相应输入即可。...
- 产品推荐
- 这些文档可能帮助您