扩展MapReduce（MR2）
相比于传统的MapReudce，MaxCompute提供的扩展MapReduce模型（简称MR2）改变了底层的调度和IO模型，可...这样的优点是，您可以复用之前的Mapper业务逻辑，把一个Map或Reduce拆成多个Mapper阶段，同时本质上并没有改变底层的调度和I/O模型。
客户端断开连接，报错Invocation canceled by client...
I/O操作 I/O操作，尤其网络的I/O，是执行延时增大的主要原因。建议排查程序中所有访问外部服务的操作，可以在访问外部服务前后添加日志，确认耗时是否正常。计算操作 大量的计算操作也可能导致延时增加，建议调大CPU规格。
高I/O
逻辑I/O 由应用程序发给文件系统的I/O。物理I/O 由文件系统发给磁盘的I/O。顺序I/O 顺序的从磁盘进行读写操作。随机I/O 随机的访问磁盘进行读写操作。同步写 需要等数据完全写入磁盘才进行返回。异步写 无需等待数据写入磁盘进行返回，释放...
产品优势
性能深度优化 基于阿里云IaaS基础资源（GPU、CPU、网络以及I/O等基础设施）提供性能的深度优化。弹性伸缩 基于IaaS基础资源，支持一键构建、弹性伸缩。开源兼容 轻量便捷、开源兼容。您基于开源框架编写的算法代码或模型代码，几乎无需进行...
已停售的实例规格
实例存储I/O性能与计算规格对应（规格越高存储I/O性能越强）说明 全新一代企业级实例规格族的存储I/O性能表，请参见 存储I/O性能。网络：支持IPv6 适用场景：I/O密集型业务场景，例如中大型OLTP类核心数据库 中大型NoSQL数据库 搜索、实时...
内存型
小规格实例云盘IOPS和云盘带宽具备突发能力 实例存储I/O性能与计算规格对应（规格越高存储I/O性能越强）说明 全新一代企业级实例规格族的存储I/O性能表，请参见 存储I/O性能。网络：支持IPv4、IPv6 支持ERI（Elastic RDMA Interface）说明 ...
优化PyTorch模型
PAI-Blade提供了丰富的模型优化方法，您只需要在本地环境中安装Wheel包，即可通过调用Python API的方式进行模型优化。本文介绍如何使用PAI-Blade优化PyTorch模型，所有实验结果均在NVidia T4卡上测得。前提条件 已安装PyTorch及PAI-Blade的...
测试分析及调优
网络I/O 网络I/O主要考虑传输内容大小，不能超过硬件网络传输的最大值70%，可以通过压缩减少内容大小、在本地设置缓存以及分多次传输等操作提高网络I/O性能。内核参数 内核参数一般都有默认值，这些内核参数默认值对于一般系统没问题，但是...
已停售的GPU实例规格
2.5 GHz主频的Intel ® Xeon ® E5-2682 v4（Broadwell）存储：I/O优化实例 仅支持SSD云盘和高效云盘 网络：支持IPv6 实例网络性能与计算规格对应（规格越高网络性能越强）适用场景：云游戏的云端实时渲染 AR和VR的云端实时渲染 AI（DL和ML...
ESSD云盘
实例规格的存储I/O性能 部分全新一代实例规格族的存储I/O性能和实例规格成正比线性关系，以存储增强型实例规格族g7se为例，实例规格越高可获得的存储IOPS和吞吐量越高。更多信息，请参见 存储I/O性能。实例规格与ESSD云盘性能的关系规则...
API概览
CheckRankingModelReachable 测试模型网络联通性 测试模型网络联通性。规则 API 标题 API概述 CreateRule 创建规则 创建推荐策略运营规则。ModifyRule ModifyRule 修改规则。ListRules 获取规则列表 查询规则列表。DescribeRule 获取规则...
合约链错误码
ALREADY_IN_PROGRESS 20012 non-blocking and interrupt i/o:operation already in progress 非阻塞和中断 I/O：操作进行中 SDK_CONNECTION_REFUSED 20013 ipc/network operational errors:connection refused IPC/网络运行出错：连接被...
计算型
小规格实例云盘IOPS和云盘带宽具备突发能力 实例存储I/O性能与计算规格对应（规格越高存储I/O性能越强）说明 全新一代企业级实例规格族的存储I/O性能表，请参见 存储I/O性能。网络：支持IPv4、IPv6 支持ERI（Elastic RDMA Interface）说明 ...
通用型
小规格实例云盘IOPS和云盘带宽具备突发能力 实例存储I/O性能与计算规格对应（规格越高存储I/O性能越强）说明 全新一代企业级实例规格族的存储I/O性能表，请参见 存储I/O性能。网络：支持IPv4、IPv6 支持ERI（Elastic RDMA Interface）说明 ...
云模组HAAS210规格介绍
P表示电源引脚，I表示输入引脚，O表示输出引脚，I/O表示输入输出引脚。电气参数 绝对电气参数 参数 描述 最小值 最大值 单位 Ts 存储温度。30 85 ℃ VDD 供电电压。0.3 3.6 V 静电释放电压（人体模型）TAMB-25℃。不涉及 2 kV 静电释放电压...
GPU虚拟化型
计算：采用NVIDIA A10 GPU卡 创新的Ampere架构 支持vGPU、RTX、TensorRT等常用加速功能，提供多种业务支撑 处理器：2.9 GHz主频的Intel ® Xeon ® 可扩展处理器（Ice Lake），全核睿频3.5 GHz 存储：I/O优化实例 仅支持ESSD云盘和ESSD ...
RDS术语
逻辑I/O 由应用程序发给文件系统的读写操作。M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题...
RDS术语
逻辑I/O 由应用程序发给文件系统的读写操作。M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题...
RDS术语
逻辑I/O 由应用程序发给文件系统的读写操作。M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题...
GPU计算型和GPU虚拟化型实例概述
存储：I/O优化实例 仅支持ESSD云盘和ESSD AutoPL云盘 网络：支持IPv6 实例网络性能与计算规格对应（规格越高网络性能越强）适用场景：中小规模的AI训练业务 使用CUDA进行加速的HPC业务 对GPU处理能力或显存容量需求较高的AI推理业务 深度...
基本概念
逻辑I/O 由应用程序发给文件系统的读写操作。冷存储 一种存储介质，可以存储数据库中的冷数据，从而降低存储成本。更多信息，请参见 冷存储介绍。冷热分离 Lindorm宽表引擎实现了数据的冷热分离能力，系统会自动根据用户设置的冷热分界线...
优化TensorFlow模型
PAI-Blade提供了丰富的模型优化方法，您只需要在本地环境中安装Wheel包，即可通过调用Python API的方式进行模型优化。本文介绍如何使用PAI-Blade优化TensorFlow模型，所有实验结果均在NVidia T4卡上测得。前提条件 已安装TensorFlow及PAI-...
配置blk-iocost权重限速
它是一种I/O控制器，可以根据应用程序或进程的优先级为块设备上的I/O操作分配带宽，并且可以通过设置权重值来限制特定应用程序或进程对块设备的I/O带宽使用，以便帮助您更好地实现对磁盘I/O资源的控制和管理。说明 cgroup v1和cgroup v2是...
实例规格族
小规格实例云盘IOPS和云盘带宽具备突发能力 实例存储I/O性能与计算规格对应（规格越高存储I/O性能越强）说明 全新一代企业级实例规格族的存储I/O性能表，请参见 存储I/O性能。网络：支持IPv4、IPv6 支持ERI（Elastic RDMA Interface）说明 ...
GPU计算型
存储：I/O优化实例 仅支持ESSD云盘和ESSD AutoPL云盘 网络：支持IPv6 实例网络性能与计算规格对应（规格越高网络性能越强）适用场景：中小规模的AI训练业务 使用CUDA进行加速的HPC业务 对GPU处理能力或显存容量需求较高的AI推理业务 深度...
Linux实例负载高问题排查和异常处理
I/O使用率过高：一般来说，当前I/O读写≥该云盘I/O的80%时，定义为I/O使用率过高。I/O使用率过高，可能会出现文件读写变慢、应用性能下降或报错等问题。问题排查 您可以使用SAR工具或htop工具定位该实例的负载过高及各资源的使用情况。使用...
基于etrec的U2I2I召回
数据集 pai_online_project.rec_sln_demo_behavior_table 字段名 类型 描述 request_id BIGINT 埋点ID/请求ID user_id BIGINT 用户唯一ID exp_id STRING 实验ID page STRING 页面 net_type STRING 网络类型 event_time BIGINT 行为时间 ...
使用Blade优化RetinaNet（Detectron2）模型
RetinaNet是一种One-Stage RCNN类型的检测网络，基本结构由一个Backbone、多个子网及NMS后处理组成。许多训练框架中均实现了RetinaNet，典型的框架有Detectron2。本文以Detectron2的标准RetinaNet实现为例，介绍如何使用Blade优化RetinaNet...
服务网格落地
模型缺陷：协程数量与连接数量成正比，大链接场景下，协程数量过多，存在以下开销：Stack 内存开销 Read buffer 开销 Runtime 调度开销 RawEpoll 模型：也就是 Reactor 模式，即 I/O 多路复用（I/O multiplexing）+非阻塞 I/O（non-...
PAI-REC推荐算法定制的最佳实践文档
sln_demo_behavior_table_v1(request_id STRING COMMENT '埋点ID/请求ID',user_id STRING COMMENT '用户唯一ID',exp_id STRING COMMENT '实验ID',page STRING COMMENT '页面',net_type STRING COMMENT '网络型号',event_time BIGINT ...
性能测试技术指南
规范 操作系统：CPU（User、Sys、Wait、Idle）利用率、内存利用率（包括Swap）、磁盘I/O、网络I/O、内核参数等。中间件：线程池、JDBC连接池、JVM（GC/FULL GC/堆大小）。数据库：效率低下SQL、锁、缓存、会话、进程数等。应用：方法耗时、...
如何使用Prometheus监控Windows
除了分页文件之外，大量使用磁盘的应用程序（例如数据库）性能会受到长时间高I/O的严重影响。磁盘读/写操作的平均耗时（秒）Major WMI（AvgDisksecPerRead/AvgDisksecPerWrite）表示磁盘读/写操作所花费的平均时间。通常，大于约30毫秒的值...
如何使用Prometheus监控Windows
除了分页文件之外，大量使用磁盘的应用程序（例如数据库）性能会受到长时间高I/O的严重影响。磁盘读/写操作的平均耗时（秒）Major WMI（AvgDisksecPerRead/AvgDisksecPerWrite）表示磁盘读/写操作所花费的平均时间。通常，大于约30毫秒的值...
Android Things接入物联网平台
如需更多帮助，请参见NXP Pico i.MX7D I/O官网接口文档：开发者指南。说明 该硬件可以用树莓派替代。详细内容，请参见 远程控制树莓派服务器。DHT12 温湿度传感器 采用I2C数据通信方式。ZE08-CH2O 甲醛检测传感器 采用UART数据通信方式。...
步骤一：部署客户端
该功能由SGX SDK的一个名为保护文件系统库的组件提供，使开发人员能够安全地在Enclave内执行I/O操作。SGX SDK可以保证：用户数据保密：所有用户数据加密后写入磁盘，防止数据泄露。用户数据完整性：所有用户数据均从磁盘读取，然后通过MAC...
组件参考：所有组件汇总
x13_auto_arima 该组件包括自动ARIMA模型选择程序，主要基于TRMO（1996）及后续修订中实施的Gomez和Maravall（1998）的程序。Prophet 该组件对每一行的MTable数据，进行Prophet时间序列预测，给出下一时间段的预测结果。MTable聚合 该组件...
运行实验
在调试完毕确定实验功能性完好后，即开始正式运行实验。在实验运行过程中，您可以查看：流量走势：按照时间段显示...实验报告：不同方案的各指标数据。在实验运行够一定时间，所收集的数据足以得出结论时，您可选择 结束实验 或 方案推全。
自定义召回模型
模型服务同PAI-EAS功能，用户在模型训练平台完成模型训练并且将模型存储到OSS以后，可以进入模型服务完成模型部署相关操作。点击左侧的模型上传部署按钮，右侧会弹窗出现配置页。Processor选择TensorFlow1.12，资源类型按需选择，模型文件...
高主频型
存储：I/O优化实例 仅支持ESSD云盘、ESSD AutoPL云盘、SSD云盘和高效云盘 实例存储I/O性能与计算规格对应（规格越高存储I/O性能越强）说明 全新一代企业级实例规格族的存储I/O性能表，请参见 存储I/O性能。网络：支持IPv6 超高网络收发包...
结合Blade和Custom C++ Operator优化模型
为了使检测模型后处理部分更加高效，您可以采用TorchScript Custom C++ Operators将Python代码实现的逻辑替换成高效的C++实现，然后再导出TorchScript模型进行Blade优化。本文介绍如何使用Blade对TorchScript Custom C++ Operator实现的后...
- 产品推荐
- 这些文档可能帮助您