什么是人工智能平台PAI
阿里云人工智能平台PAI（Platform For AI），提供一站式的机器学习解决方案。本文为您介绍什么是人工智能平台PAI。什么是机器学习 机器学习是一门多学科交叉专业，涵盖概率论知识、统计学知识、近似理论知识和复杂算法知识，它使用计算机...
操作审计
服务名称：选择 人工智能平台PAI。事件源：配置为 pai-dlc.[region].aliyuncs.com ，其中[region]需要替换为实际的地域，例如华北6（乌兰察布）配置为 pai-dlc.cn-wulanchabu.aliyuncs.com 。单击 运行。在 原始日志 页签中，会显示按时间...
授权信息
具体信息，请参见 权限策略基本元素。Condition_key：条件关键字。Condition_value：条件关键字对应的值。操作（Action）下表是 人工智能平台 PAI（PAI）定义的操作，这些操作可以在RAM权限策略语句的 Action 元素中使用，用来授予执行该...
管理配额
目前仅灵骏网络资源（灵骏HUB、灵骏连接等）支持配额管理。在配额中心控制台管理配额 配额中心的更多信息，请参见 什么是配额中心。登录 配额中心。在左侧导航栏，选择 产品列表>通用配额。在 通用配额产品列表 页面，产品类目 下拉框里...
镜像加速
DADI的Overlaybd镜像格式实现了基于网络的按需读取功能，相比于传统的分层tar包文件格式，实现了容器的快速启动。PAI集成了DADI，您可以在DSW或DLC中使用DADI加速镜像，来提升模型训练速度。本文为您介绍如何在DSW或DLC上按需使用DADI加速...
媒体审核概述
视频点播提供了支持视频、音频、图片、文本等全方位的媒体审核服务，可帮助用户发现媒体资源中的暴恐、涉政、涉黄、广告、辱骂、不良场景等风险内容或元素，降低人工审核成本，提升内容质量，改善平台秩序和用户体验。本文为您介绍视频点播...
管理灵骏连接
灵骏计算节点通过灵骏连接实现与云企业网或用户VPC网络的连通。灵骏连接具有按需开通、多租户隔离、分钟级部署、原生高可靠、无级变速的特点。本文为您介绍如何购买和管理灵骏连接。管理已配置的灵骏连接实例 警告 每个灵骏连接实例创建...
管理DSW实例
在 基本信息 区域，修改实例名称。单击 公开实例，该DSW实例将会在工作空间下公开可见，该工作空间内的其他成员都可以访问。重要 实例一旦公开，将不可以再转为私有。请谨慎操作。在 实例配置 页签，单击 变更配置，您可以修改资源信息、...
使用灵骏集群服务
输入 kubectl-kubeconfig.kube/config get node，显示计算节点的名称、状态等基本信息。使用基础灵骏服务 对于基础灵骏服务，建议您使用Shell工具通过SSH方式连接主机使用。重要 您需要在ECS实例内连接、操作集群，购买的ECS实例需要和灵骏...
Tensorboard
重要 如果Tensorboard实例使用了需要配置专有网络的数据集（例如CPFS类型的数据集，或挂载点在专有网络内的NAS类型数据集等），则必须设置专有网络。前往Tensorboard页面查看分析报告。在工作空间页面的左侧导航栏选择 AI资产管理>任务。...
准备工作
阿里云账号是阿里云资源的归属及使用计量计费的基本主体，负责生成本企业组织下的RAM用户，并对RAM用户进行管理、授权等操作。RAM用户由阿里云账号在RAM中创建并进行管理，其本身不拥有资源，也没有独立的计量计费，RAM用户由所属阿里云...
创建及管理灵骏弹性网卡
灵骏弹性网卡（Lingjun Elastic Network Interface，简称LENI）是灵骏GPU实例接入专有网络VPC中的虚拟网络接口，用于连接灵骏节点和VPC，实现与VPC网络内其他云资源的互联互通。您可以为LENI申请单个或多个辅助私网IP，提高灵骏节点的利用...
创建及管理Tensorboard实例
重要 如果Tensorboard实例使用了需要配置专有网络的数据集（例如CPFS类型的数据集，或挂载点在专有网络内的NAS类型数据集等），则必须设置专有网络。当目标Tensorboard实例的 状态 为 运行中 时，单击 操作 列下的 查看Tensorboard。页面...
对话能力集合
转人工策略 转人工设置功能，用于设置：对话能力在满足特定条件时，将用户转交给人工客服接待。功能 说明 触发转人工条件 当用户问题满足如下条件时，触发转人工，您可以按需开启、设置。对话能力无回复，是指用户咨询若干次但是对话能力均...
DSW通过专有公网网关访问公网
本文为您介绍如何在DSW实例关联的专有网络（VPC）中创建公网NAT网关、绑定弹性IP（EIP）并配置SNAT，从而使DSW实例能够通过专有公网网关访问互联网，进而提升训练数据或代码的上传和下载速度。前提条件 已创建专有网络和交换机，为了避免与...
新建资源组并购买通用计算资源
相关文档 资源组创建成功并购买计算资源后，您可以进行以下操作：在资源组页面查看资源组基本信息，并对已购买的资源进行管理。具体操作，请参见 管理资源。通过配置资源配额，将这些资源分配给具体的训练任务。具体操作，请参见 通用计算...
AI助手使用说明
安装AI助手并开启PAI的作业监控和恢复功能后，当训练任务发生故障或异常时，能自动上报故障信息、隔离问题节点，无需人工干预即可快速恢复任务。本文为您介绍AI助手的具体配置方法。前提条件 已创建带有ACK灵骏托管版的集群。具体操作，请...
数据集加速器概述
基本概念 在使用数据集加速器之前，请您先了解以下基本概念。数据集加速实例（Instance）数据集加速产品的计费单位和管理单位。在数据集加速器创建预付费实例时，会预定对应的云上相关资源，所以在创建实例时即开始计费；在后付费场景中，...
创建及管理数据集加速槽
您可以选择已有的VPC网络，也可以单击 创建专有网络 和 创建交换机 来创建新的VPC网络。说明 数据集加速器只支持专有网络类型的挂载点。一个专有网络类型挂载点，可以被同VPC下不同交换机下的训练集群使用。添加挂载点时，文件系统会占用...
访问控制（RAM）身份管理
为确保您的阿里云账号及云资源使用安全，可以使用 访问控制 RAM（Resource Access Management）提供的身份，包括RAM用户和RAM角色来访问 PAI 及其存储、网络等关联产品。RAM用户 RAM用户需要由阿里云账号（即主账号）或拥有管理员权限的RAM...
LLM-文章相似度去重（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 配置组件 在Designer工作流页面添加 LLM-文章相似度去重（DLC）组件，并在界面...
LLM-MD5去重（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 对所有输入的文本数据使用 hashlib.md5 哈希算法计算哈希值。哈希值...
灵骏网络规划
灵骏网络包括灵骏网段、灵骏连接、灵骏HUB等基础组件。您可以根据业务需求创建灵骏网段及灵骏子网，在灵骏子网内部署灵骏节点，灵骏节点通过灵骏连接实现与云企业网或用户VPC网络的连通。不同灵骏网段之间、灵骏网段与灵骏连接之间可以通过...
LLM-敏感词过滤（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 识别文本中是否包含敏感词，过滤掉包含敏感词的样本。支持返回文本中...
LLM-文本标准化（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 LLM-文本标准化组件支持以下功能：将Unicode文本标准化，使用NFKC的...
GBDT二分类预测V2
算法原理 梯度提升决策树模型构建了一个由多棵决策树组成的组合模型。每一棵决策树对应一个弱学习器，将这些弱学习器组合在一起，可以达到比较好的分类或回归效果。梯度提升的基本递推结构为：其中，通常为一棵 CART 决策树，为决策树的...
LLM-长度过滤（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 配置组件 在Designer工作流页面添加 LLM-长度过滤（DLC）组件，并在界面右侧...
配置回调通知
背景信息 人工审核回调分为阿里云人工审核回调通知和复核人工审核回调通知：人工审核回调通知：内容安全人工审核团队完成人工审核后，服务端将识别的结果以POST请求的方式，发送到您设置的HTTP回调通知地址。复核人工审核回调通知：内容...
LLM-计数过滤（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 LLM-计数过滤组件支持以下功能：根据数字和字母字符个数或比例过滤 ...
PageRank
在用户构成的社交网络中，PageRank理念同样适用。用户的影响力不仅由其个人属性决定，也受到其社交联系的质量的影响。例如，在新浪微博中，一个用户对其粉丝群体的影响力会受到和粉丝之间关系密切程度的影响，与用户关系较亲近的家人、同学...
LLM-特殊内容移除（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 LLM-特殊内容移除组件支持以下功能：去除URL链接 删除文本中匹配正则...
使用ACCL测试工具
令节点A作为“主”节点，使用的管理网络IP地址为10.18.18.18，4221是该节点的可用空闲端口。于节点A运行：accl_perf-masterId 10.18.18.18:4221-nranks 2-rank 0-device 0-ngpus 8-lAllReduce 于节点B运行：accl_perf-masterId 10.18.18.18...
LLM-特殊字符占比过滤（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 遍历文本中的每个字符，并统计特殊字符个数占文本总长度的比例。默认...
LLM-删除LaTeX注释行（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 定义LaTeX格式文本注释行的正则表达式如下：注释类型 正则表达式 多行...
LLM-扩展LaTeX宏定义（DLC）
主要功能是内联扩展所有无参数的宏，宏如果由字母和数字组成且没有参数，则将宏的名称替换成宏的值。输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。...
LLM-删除LaTeX参考文献（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 定义LaTeX格式文本参考文献的正则表达式为：r'(\\appendix|\\begin\{...
文本人工审核
本文介绍了调用文本人工审核接口（/green/text/manual/asyncScan）进行人工审核的方法。内容安全除了提供机器识别服务外，还提供纯人工审核服务，如果您对识别结果的准确率和召回率要求非常高，请使用人工审核功能。说明 使用该服务前，请...
图片人工审核
本文介绍了调用图片人工审核接口（/green/image/manual/asyncScan）进行人工审核的方法。内容安全除了提供机器识别服务外，还提供纯人工审核服务，如果您对识别结果的准确率和召回率要求非常高，请使用人工审核功能。说明 使用该服务前，请...
LLM-Copyright信息移除（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 去除文本中的Copyright信息或者注释信息，分为以下两个步骤：首先检测...
LLM-N-Gram重复比率过滤（DLC）
输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 将文本中的内容按照字符或词语进行大小为N的滑动窗口操作，形成了长度...
- 产品推荐
- 这些文档可能帮助您