什么是AI通信加速库Deepnccl
例如，在通信量较大的Transformer-based模型的多机训练场景下，多机CPU-Reduce优化方案可将端到端性能提升20%以上。性能说明 Deepnccl通信加速库具有Allreduce单机优化、Allreduce多机优化、Reduce-scatter多机优化以及Allgather多机优化...
什么是Deepytorch Training（训练加速）
例如，在通信量较大的Transformer-based模型的多机训练场景下，多机CPU-Reduce优化方案可将端到端性能进一步提升20%以上。计算侧优化特性 Deepytorch Training针对Pytorch 2.x的编译优化组件进行了性能和鲁棒性方面的增强，其特性说明如下...
Query级别诊断结果
查询返回客户端的数据量较大 查询消耗的内存资源较大 查询生成的Stage个数较多 查询读取的数据量较大 查询返回客户端的数据量较大 问题 大量数据返回到客户端会导致慢查询，还会占用部分网络前端资源。说明 您可以在查询详情页面的 查询...
计费概述
适用于查询频率高、查询数据量较大的场景，同时也能够给您使用DLA的费用预算带来一定的确定性。说明 若您的业务量波动较大且频繁，每个月甚至每周都可能要变更集群配置，推荐您购买按量付费集群并搭配资源包使用。按计算资源付费（CU版计费...
如何在较大结果集中使用ORDER BY
本文介绍在数据量较大的结果集场景中Lindorm SQL ORDER BY的使用解决方案以及最佳案例。使用场景 常见Lindorm SQL的ORDER BY语法使用场景如下：在数据量较小（10万内的数据量）的结果集场景中，使用ORDER BY可以在内存中计算，没有任何使用...
模型说明
计算资源要求较低，适合训练数据量较大的情况。性能对比（仅供参考，不同数据集可能差异较大）模型 数据量 训练参数（默认参数）训练耗时（gpu）预测耗时（cpu）准确率 分类-高性能版-CNN 2.7w epoch=30 1小时 100ms 93%分类-高精度版-Bert...
避免下盘
算子下盘常见原因 在数据量较大的表上执行SORT、JOIN、HASH等操作时，可能由于内存不足导致临时结果落盘。您通过观察执行计划（explain analyze）可以辨认发生了算子下盘：上图是一个发生了算子落盘的查询计划例子，执行计划中Workfile这一...
扫描量版本与CU版本的差异
CU版本 适用于查询频率高、查询数据量较大的场景，同时也能够给您使用DLA的费用预算带来一定的确定性。当您使用CU版本时，您可以设置需要的CU个数的MIN（长期保有资源）和MAX（弹性资源）的值，MIN部分可以按量或者包年包月付费，超出MIN的...
查询监控图和SQL列表介绍
用户可以根据返回数据大小进行排序，找到返回数据量较大的查询。用户名 客户端建立连接时使用的用户名。在 诊断与优化 页面，单击 连接信息，查看用户名和用户连接数。资源组 执行SQL的资源组名称。无 峰值内存 查询消耗的峰值内存。...
表设计最佳实践
拉链表的设计 在数据仓库的数据模型设计过程中，经常会遇到如下需求：数据量较大。表中的部分字段被更新。例如，用户的地址、产品的描述信息、订单的状态和手机号码等。需要查看某一个时间点或时间段的历史快照信息。例如，查看某一个订单...
什么是DTS Serverless实例
在数据传输量波动较大的场景下，普通实例和Serverless实例资源使用和规格变化情况如下图所示：由上图可以看到，在业务波动较大的场景下：普通实例：在波谷期浪费的资源较多，在高峰期资源不足，业务受损。Serverless实例：实例的资源规格随...
典型慢查询
导致查询磁盘I/O消耗较大的原因通常有如下几种：过滤条件的数据筛选率较低，导致索引的使用效率不高，需要读取的索引量较大。过滤条件没有下推，导致对源表进行了全表扫描。过滤条件下推，但是过滤条件设置的范围较大，仍然有大量数据被...
购买方式2：按量付费
由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上），我们推荐配合存储包一起使用，能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。说明 存储包分为 中国内地通用 和 中国香港及海外通用 两...
购买方式2：按量付费
由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上），我们推荐配合存储包一起使用，能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。说明 存储包分为 中国内地通用 和 中国香港及海外通用 两...
表操作篇
前几个月的表由于不再写入新数据或者写入的新数据量较少，查询的请求较多，因此前几个月的消费记录表可以设置较小的预留写吞吐量，较大的预留读吞吐量。而历史超过一年的消费记录表，由于再被使用的可能性不大，可以设置较小的预留读/写...
业务连续性基线
治理基线 企业应根据实际业务性质决定采用的治理策略，尤其是对公网防护能力、备份恢复能力、弹性能力的选择，这些将带来较大的成本。以下提供较通用的基线策略，可以作为参考：根据IT所承载的实际业务，对IT资源进行关键性分级，对于承载...
第三方号码线路价格及可接业务介绍
特色资源（推荐）北京优音通信有限公司 1、4001外呼：有大并发量外呼需求的金融保险行业企业可申请，需要存缴月低消1万以上；2、12590语音通知：仅资源灾害提醒、风险预警场景、语音验证码，无营销性质的会员通知可申请，资费相比正常固话...
第三方线路申请
重要 注：第三方线路申请通过后，请通过钉钉入群（群号：44752480）联系云联络中心服务支持同学 二、特色资源（推荐☆）北京优音通信有限公司 1、4001外呼：有大并发量外呼需求的金融保险行业企业可申请，需要存缴月低消1万以上；...
排查PostgreSQL WAL日志堆积
如果查询得到的结果较大或与WAL日志堆积量匹配，请根据业务需求评估并删除相应的复制槽。错误的参数设置 wal_keep_segments、wal_keep_size 和 max_wal_size 参数设置过大都可能会导致实例保留大量WAL日志，请检查这些参数配置并根据业务...
性能调优
AnalyticDB MySQL 数仓版（3.0）集群才默认开启的，所以当集群内核版本从3.1.6以下版本升级到3.1.6及以上版本时，会触发一次全量数据的统计信息收集，导致集群内核版本完成升级后的一段时间内统计信息收集的工作量较大，CPU负载较高，完成...
集群版-双副本
集群版直连模式服务架构 使用场景 数据量较大 相比Redis标准版，集群版可以有效地扩展存储量，最大可达4096 GB，能有效的满足业务扩展的需求。QPS压力较大 标准版Redis无法支撑较大的QPS，需要采用多分片的部署方式来突破Redis单线程的性能...
集群架构
集群架构直连模式服务架构 使用场景 数据量较大 相比 Tair 标准架构，集群架构可以有效地扩展存储量，最大可达4,096 GB，能有效的满足业务扩展的需求。QPS压力较大 Tair 标准架构无法支撑较大的QPS，需要采用多分片的部署方式来突破 Tair ...
什么是IPv6网关
IPv6网络类型 是否开通IPv6公网带宽 是否设置仅主动访问规则 IPv6地址通信能力 私网 否 否 私网通信 公网 是 否 私网通信 公网通信 是 私网通信 仅可主动访问公网 应用场景 场景一：业务快速支持IPv6，构建云上隔离IPv6环境 为已有VPC开启...
加速管理概述
CDN节点提供的服务带宽量较大。对于访问量大的资源命中率高，访问量小的资源命中率低。在节点未缓存的情况下，需要回源访问，回源依赖实时的公网回源链路。对于上传、删除等动态请求加速效果不明显。OSS加速器 通过将数据存储在更高性能的...
导入Kafka数据
数据是否压缩 当数据量较大时，建议在写数据到Kafka时就进行压缩，这样可显著节省通过网络读取的数据量。网络传输阶段往往比解压数据阶段更耗时，特别是采用公网导入数据时。网络 如果是VPC环境下的阿里云Kafka集群，您可通过VPC网络读取...
立即生效容量预定概述
立即生效容量预定为按量付费实例保障资源供应确定性，预定成功后对应的容量立即被锁定，适用于资源使用量较高的弹性需求。简介 您可以随时购买立即生效容量预定，预订成功后立即生效，即容量被锁定。无论是否使用预定容量创建了实例，生效...
远图互联：自定义流程实现高效需求管理
由于多个产品线并行，很难跟踪每个人进行中的任务，排期难度较大；历史记录难以维护，不利于问题分析；需求、文档、任务管理是分离的，需求描述及交付相关文档不能统一管理。用表格管理的需求与任务：基于钉钉任务管理 采用钉钉任务对需求...
集群版-单副本
使用场景 数据量较大 集群版可以有效地扩展数据规模量大小，相比标准版可提供更大的存储量，例如64 GB、128 GB、256 GB集群版，可以有效的满足数据扩展需求。纯缓存应用 单副本集群版的分片服务器由单节点组成，分片服务器某节点出现故障时...
Android
切换视频为小流：小流有着与大流相同的宽高比，但是分辨率和码率相对较低，网络资源占用的需求较低。仅发布音频流：在极端网络环境下，可以选择只发送音频流，从而保证通信的持续。您可以通过 onNetworkQualityChanged（网络质量变化时回调...
导入OSS数据
当数据量较大时，建议增加目标Logstore的Shard数量。具体操作，请参见 管理Shard。归档文件的读取 如果待导入的文件是归档类型，则需要解冻后才能被读取。一般情况下，解冻一个文件大约需要1分钟。文件大小 相同数据总量的情况下，平均文件...
背景
如上图所示，表格存储提供了丰富、通用的功能，并具有如下优势：零运维，即开即用，按量付费 表格存储是阿里云上唯一一个Serverless的数据库，无需预定任何资源搭建服务，只需按使用量付费，简单易用，满足不同行业的大数据需求。...
PostgreSQL Serverless实例简介
在业务波动较大的场景下，普通实例和Serverless实例资源使用和规格变化情况如下图所示：由上图可以看到，在业务波动较大的场景下：普通实例：在波谷期浪费的资源较多，在高峰期资源不足，业务受损。Serverless实例：由于其计算资源随业务...
查询网络通信距离（NCD）
使用NCD的原因 存在的问题 在特定物理网络拓扑下，不同GPU节点之间的通信时延和可能产生的跨多跳交换机转发引发的哈希不均，都可能导致不同GPU节点之间的通信性能存在较大差异，进而进一步影响模型训练的吞吐差异。解决方法 如上图所示，...
跨项目场景，我们度量什么？
指标卡中数据含义：存量需求趋势：所选时间段内，各个项目的存量需求数随时间变化的趋势，并可在项目间进行对比，对于存量需求，在持续交付的场景下，我们希望看到存量需求量较少且相对稳定的；新增需求趋势：所选时间段内，各个项目的新增...
通用云盘
如果您的实例数据量较大时，通过数据归档功能，可以将对象存储（OSS）用作归档冷数据的存储介质，从而显著降低存储成本。更多信息，请参见 数据归档。购买通用云盘 RDS PostgreSQL支持通过如下方式购买通用云盘 已有实例 存量ESSD云盘实例...
Android
切换视频为小流：小流有着与大流相同的宽高比，但是分辨率和码率相对较低，网络资源占用的需求较低。仅发布音频流：在极端网络环境下，可以选择只发送音频流，从而保证通信的持续。您可以通过onNetworkQualityChanged（网络质量变化时回调...
迁移方案选取指南
迁移场景：阿里云Elasticsearch实例间数据迁移 迁移方案 适用场景 使用限制 场景示例 OSS快照 源端数据量较大（GB、TB、PB级别）的场景。同账号或跨账号下，同地域或跨地域快照数据迁移的场景。说明 对于跨地域的数据迁移场景，可以通过...
iOS
切换视频为小流：小流有着与大流相同的宽高比，但是分辨率和码率相对较低，网络资源占用的需求较低。仅发布音频流：在极端网络环境下，可以选择只发送音频流，从而保证通信的持续。您可以通过onNetworkQualityChanged（网络质量变化时回调...
调整迁移速率
数据传输服务DTS（Data Transmission Service）的同步和迁移实例在进行数据传输的过程中，您可以根据源和目标库的...可能是源库有其他业务，或者待同步、迁移的数据量较大。如何关闭限速？参考 操作步骤，将 是否限制全量迁移速率 选择为 否。
使用限制
Pod 全量list 1 1 过于频繁的全量拉取Pod核心数据会给管控带来较大压力，可通过优化代码增加selector或namespace过滤减少单次拉取量级。其他Create 300 50 当前超过50时默认会被拒绝收到429的状态码，如果当前支持的QPS无法满足您的需求，...
- 产品推荐
- 这些文档可能帮助您