人工神经网络
人工神经网络有多层和单层之分，每一层包含若干神经元，各神经元之间用带可变权重的有向弧连接，网络通过对已知信息的反复学习训练，通过逐步调整改变神经元连接权重的方法，达到处理信息、模拟输入输出之间关系的目的。计算逻辑原理 依据...
性能指标
LogisticRegressionWithHe 10万 100维*100维 训练 50分钟 神经网络MLP 100万 100维*100维 训练 30分钟 决策树-XGBoostWithDp 5亿 100维*100维 离线预测 50分钟 决策树-GBDTWithDp 5亿 100维*100维 离线预测 120分钟 线性回归-...
Word2Vec
Word2Vec算法组件利用神经网络，通过训练，将词映射为K维度空间向量，且支持对表示词的向量进行操作并和语义相对应。输入为单词列或词汇表，输出为词向量表和词汇表。使用说明 Word2Vec组件的上游需要接入 词频统计 组件。说明 词频统计的...
组件参考：所有组件汇总
组件类型 组件 描述 自定义组件 自定义组件 支持在AI资产管理中创建自定义组件，自定义组件创建成功后，您可以在Designer中将该组件与官方组件串联使用进行模型训练。源/目标 读OSS数据 该组件用来读取对象存储OSS Bucket路径下的文件或...
产品功能
模型训练 运行自动机器学习 GDB Automl提供运行自动机器学习功能，您可以配置实验基本参数（包括训练数据帧、验证数据帧和目标特征列，用于排行榜对模型排序的第一指标等）和训练参数（例如K折交叉验证折数，指定训练权重列、排序指标、...
基于eGPU优化套件的ResNet50模型训练和推理
本文以卷积神经网络模型ResNet50的训练和推理为例，为您介绍如何通过Docker或Kubernetes使用eGPU优化套件，进行GPU容器虚拟化和资源共享。本实践中的ResNet50模型基于NVIDIA官方开源代码DeepLearningExamples实现。步骤一：准备模型和数据...
5分钟使用EAS一键部署Kohya SD模型微调应用
LoRA network weights LoRA网络权重，如果要接着训练则选用最后训练的LoRA。选填。Train batch size 训练批量大小。该值越大，对显存的要求越高。Epoch 训练轮数，将所有数据训练一次为一轮。需要自行计算。一般情况下：Kohya中总训练次数=...
横向MLP二分类/MLP多分类/MLP回归
多层感知机是一种前馈神经网络，通过多个神经元的组合对输入特征进行非线性变换和特征提取，最终输出一个连续的预测结果。在训练过程中，利用反向传播算法（Backpropagation）和梯度下降算法（Gradient Descent）来优化模型参数，以最小化...
Kohya使用方法与实践案例
此时您可以选择借助神经网络，完成对所有图片批量生成文本描述的工作。您也可以在Kohya中选择使用一个叫做BLIP的图像打标模型。打标 数据集 在Kohya-SS页面，选择 Utilities>Captioning>BLIP Captioning。选择已创建的数据集里面上传的图片...
使用AMD CPU实例部署ChatGLM-6B
ZenDNN运行库包括为AMD CPU架构优化的基本神经网络构建块的API，使深度学习应用程序和框架开发人员能够提高AMD CPU上的深度学习推理性能。wget ...
模型仓库（FastNN）
PAI模型仓库FastNN（Fast Neural Networks）是一个基于PAISoar的分布式神经网络仓库。目前FastNN已经支持了Inception、Resnet、VGG等经典算法，后续会逐步开放更多的先进模型。目前FastNN已经内置于 Designer 平台中，并且可以直接在该平台...
视频分类训练
算法简介 视频分类模块提供主流的3D卷积神经网络和Transformer模型用于视频分类任务的训练，目前已经支持的模型包括X3D系列的X3D-XS、X3D-M及X3D-L和Transformer模型的swin-t、swin-s、swin-b、swin-t-bert，其中swin-t-bert支持视频加文本...
安全联邦学习-任务模式FL
三、安全联邦学习已支持的能力 用途 算法分类 已支持算法 分类 决策树 XGBoostWithDp GBDTWithDp 逻辑回归 LogisticRegressionWithHe 神经网络 神经网络MLP 回归 线性回归 LinearRegressionWithHe 神经网络 神经网络MLP 四、如何进行安全...
PAI-TF概述
背景 TensorFlow是Google最新的开源深度学习计算框架，支持CNN、RNN及LSTM等多种神经网络模型，对语音、图像及文本等领域的模型训练效率极佳。TensorFlow的功能丰富且强大，并拥有高度灵活的API，受到业界的高度关注。PAI-TF是人工智能平台...
安全联邦学习-工作流FL
三、安全联邦学习已支持的能力 用途 算法分类 已支持算法 分类 决策树 XGBoostWithDp GBDTWithDp 逻辑回归 LogisticRegressionWithHe 神经网络 神经网络MLP 回归 线性回归 LinearRegressionWithHe 神经网络 神经网络MLP 四、如何进行安全...
召回定制词权重
根据选择不同，下方展示的内容不同 训练字段：从当前应用的文本自动中选择 2、词权重模型创建成功后可点击 训练模型，则开始当前模型的训练 配置查询分析 1、创建查询分析规则时，如需使用词权重功能，需先选择模型使用，可选系统内置模型...
GBDT二分类V2
无 选择权重列 否 输入表中用于训练的权重列名。无 参数设置 树的数目 否 模型中树的棵数。1 最大叶节点数 否 训练每棵树时，最多包含的叶节点个数。32 学习速率 否 学习率。0.05 训练样本比例 否 训练每棵树时，样本的采样比例，范围为(0,...
教育搜题
1）基于用户行为生成训练数据：2）词权重模型训练：序列标注模型；预测标签（7,4,1）,分值越⾼表⽰term的重要性越⼤，召回结果更准确；示例：query 35 的 因数 有(),100 以内 24 的 倍数 有()对应权重分 4 1 7 1 1 1 1 1 1 4 1 7 1 1 1 此...
Stable Diffusion AIACC加速版部署文档
模型finetune 仅使用预训练的权重的模型，只能生成预训练数据集相似的物体。若希望生成自定义的物体，可以通过finetune自定义物体图片，使得模型生成所对应物体的图片。安装sd_dreambooth_extension。登录服务实例详情页，单击 资源 页签，...
创建及管理数据集加速槽
在使用数据集加速器（DatasetAccelerator）进行训练数据加速前，您需要创建数据集加速槽来绑定数据源的存储地址。系统会根据数据源类型、数据大小、训练的框架以及模型等因素，对关联的数据集数据进行预处理，以提高对数据集数据的访问速度...
MLP二分类/MLP多分类/MLP回归
多层感知机是一种前馈神经网络，通过多个神经元的组合对输入特征进行非线性变换和特征提取，最终输出一个连续的预测结果。在训练过程中，利用反向传播算法（Backpropagation）和梯度下降算法（Gradient Descent）来优化模型参数，以最小化...
灵骏常见问题
您使用神经网络进行的许多计算都可以很容易地分解成更小的计算，各个小计算不会相互依赖。智能计算灵骏与普通GPU托管服务有什么不同？智能计算灵骏集群采用专为大规模AI计算场景所设计的系统架构和多层性能优化技术，能充分利用整体的计算...
Z-Score归一化
在机器学习领域，Z-Score归一化经常用于数据处理，例如神经网络、聚类分析等应用。组件截图 二、参数说明 参数名称 参数说明 选择归一化字段 选择需要归一化的字段。可多选。三、有配置文件可读 在上游有配置文件可以选择的时候，可以使用...
创建安全联邦学习任务（任务模式）
适用特征维度特别多，特别是神经网络算法。数据集设置 配置使用方和加持方的数据信息，用于后续的数据处理。使用方：指需要数据的一方。加持方：指提供数据的一方。训练集：需训练的数据表。Label字段：指标签字段，用于后续训练学习。对齐...
基本概念
cuDNN NVIDIA推出的用于深度神经网络的GPU加速库。DeepGPU 阿里云专门为GPU云服务器搭配的具有GPU计算服务增强能力的免费工具集合。AIACC-Taining 阿里云自研的分布式训练任务AI加速器，可以显著提升训练性能。AIACC-Inference 阿里云自研...
LLM on DLC-Megatron on DLC最佳实践
大语言模型（LLM）是指参数数量达到亿级别的神经网络语言模型，例如：GPT-3、GPT-4、PaLM、PaLM2等。Megatron-LM 是由NVIDIA的应用深度学习研究团队开发的Transformer模型训练框架，它可以高效利用算力、显存和通信带宽，大幅提升了大语言...
基于AIACC加速器快速实现LLaMA-7B指令微调
conda activate llama_train 获取llama-7b-hf预训练权重。下载llama-7b权重。cd/root/LLaMA git lfs install git clone https://huggingface.co/decapoda-research/llama-7b-hf 修复官方代码Bug。sed-i"s/LLaMATokenizer/LlamaTokenizer/1...
搭建类似妙鸭相机的应用
虽然目前开源版本的facechain下载后即可配置使用，但存在以下问题：训练和推理的过程中会直接从模型Hub下载模型，整个应用涉及多个模型，大小约25 GB，导致整体耗时长，并且直接通过公网下载模型对带宽和网络稳定性要求很高，一旦无法下载...
搭建类似妙鸭相机的应用
虽然目前开源版本的facechain下载后即可配置使用，但存在以下问题：训练和推理的过程中会直接从模型Hub下载模型，整个应用涉及多个模型，大小约25 GB，导致整体耗时长，并且直接通过公网下载模型对带宽和网络稳定性要求很高，一旦无法下载...
模型创建
TFT TFT（Temporal Fusion Transformer）算法是基于Transformer机制的深度神经网络算法，详细信息，请参见 TFT论文。时序异常检测 esd 达摩院自研算法，适用于尖刺型异常（例如监控曲线出现尖刺的现象），对于数据点中有少量显著离群点的...
评分卡训练
评分卡是信用风险评估领域常用的建模工具，其原理是通过分箱输入将原始变量离散化后再使用线性模型（逻辑回归或线性回归等）进行模型训练，其中包含特征选择及分数转换等功能。同时也支持在训练过程中为变量添加约束条件。说明 如果未指定...
混访混挂迁移示例
本文档介绍了如何使用混挂和混访方案将经典网络迁移至专有网络。前提条件 在开始使用混挂和混访迁移方案前，请确保满足以下条件：您已经注册了阿里云账号。如还未注册，请先完成账号注册。更多信息，请参见 账号注册。您已了解该迁移方案的...
PageRank
在这种人际网络模型中，边的权重反映了用户之间关系的亲密程度，被视作关系强度的指标。带链接权重的PageRank公式为：W(i)：节点i的权重。C(Ai)：链接权重。d：阻尼系数。W(A)：算法迭代稳定后的节点权重，即每个用户的影响力指数。配置...
Lasso回归训练
Lasso回归训练组件基于该算法，支持稀疏、稠密两种数据格式，且支持带权重样本的训练。本文为您介绍Lasso回归训练组件的配置方法。使用限制 支持的计算引擎为MaxCompute、Flink或DLC。算法原理 Lasso回归算法通过构造一个惩罚函数，得到...
训练加速（Pai-Megatron-Patch）概述
此外，补丁支持huggingface模型权重与Megatron模型权重之间的双向转换，便于用户在Megatron环境下加载huggingface权重进行预训练或微调，或者将Megatron模型权重转换到huggingface环境下进行评估和推理。对于强化学习，Pai-Megatron-Patch...
岭回归训练
岭回归训练组件基于该算法，支持稀疏、稠密两种数据格式，且支持带权重样本的训练。本文为您介绍岭回归训练组件的配置方法。使用限制 支持的计算引擎为MaxCompute、Flink或DLC。算法原理 岭回归是一种专用于共线性数据分析的有偏估计回归...
语音识别FAQ
热词效果如果不佳是否可以自主调节权重？录音文件识别时间戳不准，如何解决？语音识别太灵敏、无效声音（噪音等）被识别出了文字怎么办？如何提高标点断句的效果？实时场景中，已经开启了标点断句，为什么效果还是不理想？录音文件识别存在...
视频个性化推荐（协同过滤）
节点说明：在实际训练前，需要定义视频浏览场景下各行为权重，将用户对某视频的不同行为，例如点赞、点击等进行量化，以此帮助算法准确评估用户对视频内容的兴趣强度。在 rec_test_etrec_behavior_weight_v1 节点编辑页面，输入如下示例...
基于etrec的U2I2I召回
数据集 pai_online_project.rec_sln_demo_behavior_table 字段名 类型 描述 request_id BIGINT 埋点ID/请求ID user_id BIGINT 用户唯一ID exp_id STRING 实验ID page STRING 页面 net_type STRING 网络类型 event_time BIGINT 行为时间 ...
CLB七层监听一键迁移ALB最佳实践
在 权重配置 页面，在 操作 列单击 开启权重，然后单击 设置权重。权重配置的启用条件是域名下存在相同的主机记录、相同解析线路的多条A记录、CNAME记录、AAAA记录。在 设置权重 面板，分别为 CLB 和 ALB 实例的解析记录设置权重。将 CLB ...
- 产品推荐
- 这些文档可能帮助您