训练加速（Pai-Megatron-Patch）概述
背景信息 Pai-Megatron-Patch工具是阿里云机器学习平台PAI算法团队研发，基于阿里云智算服务PAI-灵骏平台的大模型最佳实践解决方案配套工具，旨在帮助大模型开发者快速上手灵骏产品，完成大语言模型（LLM）的高效分布式训练，有监督指令...
组件参考：所有组件汇总
One-Class SVM异常检测 该组件与传统SVM不同，是一种非监督的学习算法。您可以使用One-Class SVM异常检测通过学习边界对异常点进行预测。自然语言处理 文本摘要预测 该组件旨在从冗长、重复的文本序列中抽取、精炼或总结出其中的要点信息，...
通过Elasticsearch机器学习实现业务数据的智能检测和...
背景信息 Elasticsearch机器学习分为无监督机器学习Unsupervised和监督机器学习Supervised两类：无监督机器学习包括Single metric和Populartion等场景，对数据进行异常检测。该模式不需要训练机器学习什么是异常，机器学习算法将自动检测...
安装说明
B类型（Box）边缘一体机 B类型边缘一体机根据型号不同，有如下两种安装方式，详细的安装步骤，请参见随机附带的安装说明书：机架式托盘安装：部分型号边缘一体机允许在机柜中使用托板安装。卡轨式安装：部分型号边缘一体机有卡轨卡扣，支持...
安装SAG-1000设备
SAG-1000设备支持安装到工作台和安装到机柜两种安装模式，本文介绍SAG-1000设备的详细安装步骤。安装前准备 如果您需要将SAG-1000设备安装到机柜，您需要准备以下工具：十字螺丝刀。防静电手腕。与设备和机柜匹配的螺丝。安装到工作台 如果...
机器学习
在机器学习方面，MADlib除提供数理统计通用函数/存储过程之外，还提供一系列比较经典的监督/非监督学习算法库。说明 AnalyticDB PostgreSQL版 MADlib机器学习的函数库版本为madlib 1.16，且暂不支持XGBoost、lightGBM、GBDT等函数。MADlib...
阿里云ES机器学习
Elasticsearch（简称ES）机器学习是一种利用机器学习技术对ES数据进行分析和预测的工具和框架。NLP在ES中的应用，使得ES具备了情感分析、实体识别、文本分类和QA问答等机器学习能力，可以提升ES搜索体验能力和降低ES使用难度。本文介绍机器...
支持向量机
支持向量机（SVM）是在分类分析中分析数据的监督式学习模型与相关的学习算法，也被拓展运用于回归问题。支持向量机在高维度或无穷维度空间中，构建一个超平面或者一系列的超平面，可以用于分类、回归或者别的任务。直观地看，借助超平面去...
机器学习（MADlib）
在机器学习方面，MADlib除提供数理统计通用函数、存储过程之外，还提供一系列比较经典的监督、非监督学习算法库。前提条件 RDS PostgreSQL实例版本满足以下要求：实例大版本为PostgreSQL 12、11。实例内核小版本为20230830或以上。重要 ...
安装CUDA
交互式安装方式 sudo chmod+x cuda_12.1.1_530.30.02_linux.run sudo./cuda_12.1.1_530.30.02_linux.run 根据提示输入 accept 后，请依据实际情况选择是否安装CUDA包中自带的驱动：如果您的实例为GPU计算型实例，并且该实例已安装了驱动，...
行为模型学习配置
分别从不同角度展示数据库审计的学习结果，并对非学习范围内的操作进行异常行为告警。添加行为模型学习任务 通过添加行为模型学习任务可以指定具体的学习对象。登录数据库审计系统。具体操作，请参见 登录数据库审计系统。在左侧导航栏，...
什么是人工智能平台PAI
阿里云人工智能平台PAI（Platform For AI），提供一站式的机器学习解决方案。本文为您介绍什么是人工智能平台PAI。什么是机器学习 机器学习是一门多学科交叉专业，涵盖概率论知识、统计学知识、近似理论知识和复杂算法知识，它使用计算机...
智能异常分析概述
有监督 有监督的学习是从标签化训练数据集中推断出函数或模型的机器学习任务。日志常量 日志往往由程序中的 logging 语句或者 print 语句产生。例如 connect mysql server,latency 212ms 日志可能是通过日志输出语句 logging.info("connect...
MapReduce
机器学习：监督学习、无监督学习和分类算法（例如决策树、SVM）。自然语言处理：基于大数据的训练和预测。基于语料库构建单词同现矩阵，频繁项集数据挖掘、重复文档检测等。广告推荐：用户单击（CTR）和购买行为（CVR）预测。MapReduce流程...
Shape
本文介绍与文字文档Shape相关的API。InlineShapes ...语法 表达式.ActiveDocument.Shapes.Item(Index).IncrementLeft(Increment)表达式：文档类型应用对象 参数 属性 数据类型 是否必填 描述 Increment Number 是 指定非嵌入式图形...
技术架构
架构演进理念 当前，分布式领域有3大技术方向：Sharding技术，NewSQL原生分布式技术，云原生DB技术。每种分布式都有其独特的优势和特点。PolarDB-X 的架构继承了DRDS和X-DB技术的稳定性，结合了PolarDB的云原生技术，融入了NewSQL对于分布...
简介
目前支持的四种凭证类型如下：验证方式 说明 交互式配置凭证（快速）非交互式配置凭证 AK 使用AccessKey ID/Secret访问。配置AccessKey凭证 配置AccessKey凭证 StsToken 使用STS Token访问。配置STS Token凭证 配置STS Token凭证 ...
图形
} 转换为非嵌入式图形对象 将嵌入式图形对象转换为非嵌入式图形对象。语法 表达式.ActiveDocument.InlineShapes.Item(Index).ConvertToShape()表达式：文档类型应用对象 示例 async function example(){ await instance.ready();const app=...
config（创建配置文件）
命令格式 该命令有交互式和非交互式两种用法。交互式用法允许您在使用命令前，通过配置文件完成相关配置项。命令使用过程中，ossutil将直接读取配置文件中的配置。而非交互式用法则需要您在使用命令时，通过选项来指定需要的配置项。相比非...
蓝牙BLE非交互式广播规范
比特序 说明 0 是否是交互式广播，0：非交互式，1：交互式。非交互式广播填0 2~1 蓝牙广播规范版本，目前为 0b00 7~3 保留将来使用，全部填0 Random 和 Digest 用于表示设备的身份。定义Random是3字节的随机字节，必须采用真随机算法，可以...
非交互式配置
非交互式配置凭证过程中，您需要指定配置名称和凭证类型之外，还需指定对应凭证所需的鉴权信息。该配置方式将直接更改配置文件内容，且不对凭证有效性进行校验。简介 非交互式配置使用 configure 命令下的 set 子命令来配置凭证，其命令...
开发流程
创建表 导入数据 通用数据开发 ② Designer 支持大规模分布式的传统机器学习、深度学习、强化学习训练，支持流批一体训练，该子模块封装了上百种机器学习算法，您可以拖拽式建模、自动调参，从而无编程玩转人工智能。Designer概述 ③ ...
安装Pai-Megatron-Patch镜像
操作步骤 在DLC中安装Pai-Megatron-Patch镜像 DLC 为开发者和企业提供了云原生一站式的深度学习训练平台，为您提供灵活、稳定、易用和高性能的机器学习训练环境。支持多种算法框架，超大规模分布式深度学习任务运行及自定义算法框架，为...
部署Node.js环境（Alibaba Cloud Linux 2）
背景信息 Node.js使用了一个事件驱动、非阻塞式I/O的模型，使其轻量又高效，非常适合运行在分布式设备的数据密集型的实时应用。Node.js的包管理器npm，是一个开源库生态系统。Node.js的典型应用场景包括：实时应用：如在线聊天，实时通知推...
基本概念
Istio Istio 是一个 Service Mesh 开源项目，是完整的非侵入式的微服务治理解决方案。Istio 提供一种简单的方式来为已部署的服务建立网络，该网络具有负载均衡、服务间认证、监控等功能，而不需要对服务的代码做任何改动。[回到顶部]J ...
部署Node.js环境（CentOS 7）
背景信息 Node.js使用了一个事件驱动、非阻塞式I/O的模型，使其轻量又高效，非常适合运行在分布式设备的数据密集型的实时应用。Node.js的包管理器npm，是一个开源库生态系统。Node.js的典型应用场景包括：实时应用：如在线聊天，实时通知推...
通用聚合函数
avg(c1)2.000000 bit_and(bigint)对BIGINT类型表达式中的非空值执行按位与运算。bit_and(c1)0 bit_and(int)对INT类型表达式中的非空值执行按位与运算。bit_and(c1)0 bit_or(bigint)对BIGINT类型表达式中的非空值执行按位或运算。bit_or(c1)...
开启CNFS NAS计算端分布式缓存
CNFS文件存储计算端分布式缓存可提供多链接访问、元数据缓存、分布式数据缓存等加速能力，并提供端侧性能监控、QoS能力。本文介绍如何在ACK集群中开启CNFS NAS计算端分布式缓存，并通过分布式缓存功能加速读取数据。索引 前提条件 分布式...
开启CNFS NAS计算端分布式缓存
CNFS文件存储计算端分布式缓存可提供多链接访问、元数据缓存、分布式数据缓存等加速能力，并提供端侧性能监控、QoS能力。本文介绍如何在ACK集群中开启CNFS NAS计算端分布式缓存，并通过分布式缓存功能加速读取数据。索引 前提条件 分布式...
配置示例：MaxCompute
配置分区表达式 数据质量通过分区表达式来确定需要配置的规则：如果您的检查对象为非分区表，可以配置分区表达式为 NOTAPARTITIONTABLE。如果您的检查对象为分区表，可以配置为业务日期的表达式（例如$[yyyymmdd-1]）。说明 数据质量规则中...
Paho-MQTT C（非嵌入式版）接入示例
本文介绍如何使用Paho提供的C语言MQTT开源工程（非嵌入式版），将设备接入阿里云物联网平台，并进行消息收发。使用前必读 本文操作步骤以普通用户权限为例。如果您在操作过程中涉及到管理员权限才能执行的操作，可尝试使用 sudo 命令执行。...
功能概述
功能简介 自学习模型生产平台，简称自学习，是基于阿里巴巴视觉智能技术实践经验，面向AI...自学习平台基于达摩院的图像算法积累，结合AutoML、自监督和迁移学习等技术，能够基于较少的数据构建高效的模型，获得出色的算法效果和运行性能。
设置主动防御
主动防御通过无监督学习的方式，对域名的访问流量进行深度学习，并根据机器学习算法模型为不同访问请求打分，标记正常分值。在请求分值的基础上，主动防御能够定义域名的正常访问流量基线，并基于此生成定制化的安全策略。通过将流量分层的...
Jupyter交互式作业开发
pip install aliyun-dla-livy-proxy-0.0.5.zip 说明 您需要使用root用户安装Aliyun DLA Livy Proxy，非root用户进行安装可能无法注册命令到可执行目录中。Aliyun DLA Livy Proxy安装完成后，您可以在命令行中找到 dlaproxy 命令。启动DLA ...
Databricks Runtime
Databricks Runtime ML集群包括最受欢迎的机器学习库，例如TensorFlow，PyTorch，Keras和XGBoost，还包括分布式培训所需的库，例如Horovod。使用Databricks Runtime ML可以加快集群的创建速度，并确保已安装的库版本兼容。用于机器学习的...
GBDT二分类V2
梯度提升决策树(Gradient Boosting Decision Trees)二分类，是经典的基于梯度提升（Gradient Boosting）的有监督学习模型，可以用来解决二分类问题。支持计算资源 支持的计算引擎为MaxCompute。算法简介 梯度提升决策树(Gradient Boosting ...
概述
强化学习成为补充传统监督学习的强大范式。然而，在目前的数据驱动的智能应用中，数据、特征和模型仍处于割裂状态。首先，数据工程师通过手工编写流程进行数据清洗和数据集成；然后，算法工程师通过自定义的特征工程流程、模型训练脚本以及...
功能特性
PAI支持丰富的机器学习算法、一站式的机器学习体验、主流的机器学习框架以及可视化的建模方式。本文为您介绍PAI的功能特性。丰富的机器学习算法 PAI的算法都经过阿里巴巴集团大规模业务的沉淀，不仅支持基础的聚类和回归类算法，同时也支持...
支持的云服务
基于MaxCompute的数据仓库能力，您可以与阿里云其他产品集成，实现可视化开发、数据存储、数据迁移、机器学习、业务决策等能力，构建满足实际业务需求的解决方案。本文为您介绍支持与MaxCompute集成的各阿里云产品信息。MaxCompute支持集成...
典型客户案例
量化收益 开发人员学习成本降低 92%应用开发效率提升 80%运维人力成本节省 90%非量化收益 对突发业务支撑能力带来的营业额提升 弹性扩容对资源的节省 保证合规性和系统高可用性 员工体验的提升 南京银行 业务挑战 在新兴互联网技术的冲击下...
- 产品推荐
- 这些文档可能帮助您