ARMS告警精细管理最佳实践
本文介绍ARMS告警管理如何应对大规模系统的告警配置。背景知识 在告警管理中有一个非常重要的指标Mean Time To Contain（MTTC），MTTC描述了从检测到故障事件到控制和解决该事件所需的平均时间。它是一个关键指标，因为它衡量了一个组织对...
DataV读取数据源超时
问题描述 阿里云DataV数据可视化产品主要用于动态、实时数据展示场景，需要对数据高频实时查询，对数据访问性能有一定要求，您的数据源访问经常出现超时的情况。问题原因 查询超时的原因如下：使用SQL查询的业务数据表数量太大。API接口...
热点行优化
因此 PolarDB 在数据库内核层进行了创新性的优化，不但能够自动识别热点行更新请求，而且将一定时间间隔内对同一数据行的更新操作进行分组，不同分组采用流水线的方式并行处理，通过这些优化，极大地提升了系统的性能。具体方案如下：串行...
深度解析PolarDB数据库并行查询技术
传统的优化器只能生成串行的执行计划，为了实现并行读取数据，同时并行处理数据，首先必须对现有的优化器进行改造，让优化器可以生成需要的并行计划。例如，选择哪个表或哪些表可以并行读取，并且通过并行读取会带来足够的收益；或者哪些...
PyODPS概述
如tunnel下载操作、execute操作、to_pandas操作等，因此，很多初始使用PyODPS的用户会试图把数据拉取到本地，处理完成后再上传到 MaxCompute上，很多时候这种方式是十分低效的，拉取数据到本地彻底丧失了MaxCompute的大规模并行能力的优势...
云效常见问题
需求 代表所需要解决的问题 用户需要借助产品实现某个目标，但是产品尚未支持 缺陷 当系统没有按设计运行的时候，即产生了缺陷 产品出现故障和问题，运行方式和结果不符合设计期望 任务 代表一个小粒度的活动 研发实现某个需求和解决某个...
PAI灵骏智算服务概述
PAI灵骏 主要面向图形图像识别、自然语言处理、搜索广告推荐、通用大模型等大规模分布式的AI研发场景，适用于自动驾驶、金融风控、药物研发、科学智能、元宇宙、互联网和ISV等行业。您只需为AI训练所消耗的资源付费，无需建设、调优和运维...
数据导入常见问题
本文汇总了StarRocks数据导入的常见问题。通用问题 如何选择导入方式？影响导入性能的因素都有哪些？报错“close index channel failed“或“too many tablet versions”，该如何处理？报错“Label Already Exists”，该如何处理？报错...
整体架构
AnalyticDB MySQL 新推出的 湖仓版（3.0）新增了高吞吐离线处理能力，通过一体化的方式解决离线处理和在线分析两种场景的需求，恰好可以解决该问题。数仓版（3.0）AnalyticDB MySQL 数仓版（3.0）架构如下：接入层 接入层由Mulit-Master可...
技术类问题
同时，日常迭代中，每个版本均有专门的多维度性能测试报告，并在多个内外部客户中得到大规模验证与应用。如何解决屏幕黑屏问题？出现原因：常见是由于纹理ID错误或生成纹理错误所致，偶尔会出现个别客户对返回后的纹理ID使用不当或使用无效...
概述
弹性并行查询（Elastic Parallel Query）针对云上用户实例CPU资源利用率较低、使用不均衡的特征，充分挖掘集群中多核CPU的并行处理能力，以8核32 GB（独享规格）的 PolarDB MySQL版 集群版为例，示意图如下所示：前提条件 PolarDB 集群版本...
RDS SQL Server CPU使用率高问题排查
CPU使用率高的因素有很多，其中最常见的因素说明及解决方法如下：实例的并行度设置不合理 排查步骤 线程并行处理任务时，由于每个线程处理的数据量不一致，会出现CXPACKET等待情况，CXPACKET等待发生比较多的话，就会造成CPU使用率高。...
并行查询
PolarDB PostgreSQL版 支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版 对分区表的并行查询，和普通...
构建基于Serverless架构的弹性高可用音视频处理系统
并行和分布式视频处理 通过 Serverless 工作流 资源编排即可实现多个视频的并行处理和单个大视频的分布式处理，稳定性和监控交由云平台。需要很强的开发能力和完善的监控系统来保证稳定性。学习上手成本 会编写对应语言的函数代码和熟悉...
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版（兼容Oracle）...
并行查询
PolarDB PostgreSQL版（兼容Oracle）支持分区表的并行查询（Parallel Append）功能，可以更好地处理大规模数据的查询。概述 当代计算机往往有更多的核心可以使用，并行查询是现代数据库必不可少的能力。PolarDB PostgreSQL版（兼容Oracle）...
产品优势
难以支撑大规模高并发转码任务。专业的转码算法 强大的计算资源，先进的视频处理算法，业界独有的画质重生技术，将现存普通或受损的影视内容重制为超高清或画质修复的版本。视频质量依赖开源转码服务。功能丰富、高可定制 视频转码、截图、...
远程连接FAQ
本文介绍在远程连接轻量应用服务器过程中可能存在的问题、排查思路和相应的解决方案。排查思路 如果无法远程连接轻量应用服务器时，阿里云推荐您按照以下思路排查问题。以下排查思路根据原因的出现概率进行排序，建议您从高频率原因往低...
技术类问题
同时，日常迭代中，每个版本均有专门的多维度性能测试报告，并在多个内外部客户中得到大规模验证与应用。如何解决屏幕黑屏问题？出现原因：常见是由于纹理ID错误或生成纹理错误所致，偶尔会出现个别客户对返回后的纹理ID使用不当或使用无效...
基本概念
它是一种为图像和图形运算工作优化的微处理器，适用于大规模并行计算等场景。VM Virtual Machine，虚拟机，指通过软件模拟的具有完整硬件系统功能的、运行在一个完全隔离环境中的完整计算机系统。云边一体 云边一体，又叫云边协同，其中...
常见问题
SUBMITTED：该状态极少遇到，可能原因为Node Update请求太多造成Capacity Scheduler内部抢锁堵塞，通常发生在大规模集群，需优化相关流程。相关案例，请参见 YARN-9618。ACCEPTED：检查Diagnostics。请根据提示信息，选择相应的处理方式。...
什么是城市视觉智能引擎
完备的解决方案 针对各行各业中存在的痛点问题，为客户按需提供智能分析及完备的大规模视觉计算解决方案。全局直观的城市数字化感知 将真实信息投射到数字世界，得到虚拟的“真实世界”，通过全局沙盘推演和全局实时指挥，实现智慧城市的全...
控制面核心组件
Service Mesh 是蚂蚁集团下一代架构的核心，本文主要分享在蚂蚁集团当前的体量下，控制面平稳支撑大规模 Sidecar 的落地实践。主体部分将聚焦控制面核心组件 Pilot 和 Citadel，分享蚂蚁金服双十一控制面如何管理并服务好全站 Sidecar。...
实践教程概览
MPI（Message Passing Interface）是支持多编程语言的并行计算通信库，具有高性能、大规模性、可移植性、可扩展性等特点。本教程以IMB软件和MPI通信库为例介绍如何测试E-HPC集群的通信性能。测试SCC集群性能 超级计算集群SCC具有无虚拟化...
SQL优化技术
对于复杂的部署（如大规模的分库分表场景），如何选择灰度策略、变更窗口、安全稳妥地推进线上变更？如何持续的跟踪效果，做到万无一失？问题风险 考虑两个重要的时间点，如下图所示，一个简单的慢SQL趋势，T1代表我们发现数据库实例性能...
OOM常见问题排查指南
UnionALL 如下所示，当SQL中含有大量 union all subquery 时，执行器会并行处理每个 subquery，导致内存压力变大，从而出现OOM。subquery1 union all subquery2 union all subquery3.可以通过如下参数强制执行器串行，减少OOM情况，但查询...
计算资源优化
GPU的功能特性如下：拥有大量擅长处理大规模并发计算的算术逻辑单元（Arithmetic and Logic Unit，即ALU）、能够支持多线程并行的高吞吐量运算、逻辑控制单元相对简单。适用于视频转码、图片渲染、AI训练、AI推理、云端图形工作站等场景。...
8.0.1和8.0.2版功能对比
支持 支持 热点行优化 PolarDB 在数据库内核层进行了创新性的优化，不但能够自动识别热点行更新请求，而且将一定时间间隔内对同一数据行的更新操作进行分组，不同分组采用流水线的方式并行处理，通过这些优化，极大地提升了系统的性能。...
内置时空数据引擎Ganos
提供拓扑网络路径分析和大规模点云存储与查询支持 Ganos所包含的几何网络数据库引擎支持Node-Edge拓扑网络构建，支持Turn、U-Turn等概念，支持TSP（旅行商问题）、KSP（多条线路最短路径）、TRSP（转向限制的最短路径）等一系列路径规划...
常见问题
该情况通常伴随 invalid table name:xxx.yyy 报错，主要原因是输出表命名出现问题。对于Proxima CE的输入输出表，其命名需要符合MaxCompute的命名规定，注意名称中不能带点号.，该符号为MaxCompute的特殊字符，会导致后续流程错误。通常...
PolarDB MySQL版8.0.1版本发布日志
修复列存索引在处理超长字符串类型时出现的内存越界问题。修复在使用列存索引功能时，同时打开预读功能导致节点概率性崩溃的问题。修复XEngine的compaction后台任务因并发控制过于严格，对前台操作产生影响进而影响慢查询性能的问题。修复...
应用场景
在智能交通领域通过使用物联网、云计算、传感器、大数据、无线通信等技术对交通信息进行采集、存储、管理和分析，提供交通管理、指挥决策、交通信息服务等能力，能有效解决城市交通道路拥堵问题以及提高道路交通安全。车联网场景中涉及的...
网络优化
在专线回源场景中，广义上来讲阿里云提供了诸如GA加速IP和Anycast EIP这类产品，让用户及用户的终端能通过公网 IP 就近接入阿里云的POP点，通过阿里云的专线来进行源站回源，解决了跨国互联网线路可能出现的延迟和丢包问题。混合云网络优化...
PolarDB并行查询
并行查询（Parallel Query）是 PolarDB MySQL版 在一推出就配备的查询加速功能，本质上它解决的是一个最核心的问题：MySQL的查询执行是单线程的，无法充分利用现代多核大内存的硬件资源。通过多线程并行执行来降低包括IO以及CPU计算在内的...
监控分析平台对比
稳定性保障 依赖系统：数据在多套系统中流转，系统之间又存在依赖关系，当某系统出现问题时，对其他系统造成影响。例如下游ES系统写入变慢后，用于缓存数据的Kafka集群存储水位变高，可能导致集群写满。Burst问题：在互联网环境下，流量...
简介
批量计算服务（Batch Computing Service，简称BatchCompute）是一种适用于大规模并行批处理作业的分布式云服务。我们提供了丰富的API接口，您可以基于此API很方便使用BatchCompute的服务以及开发自己的应用程序。请确保在使用这些接口前，...
功能特性
混合分布式事务 在一个大规模的分布式应用环境下，除了常见的微服务、数据库资源之外，还会涉及到消息队列、缓存等系统资源的使用。同时，依然需要保证这些资源间访问的数据的一致性。分布式事务支持在同一个分布式事务中引入数据库、服务...
Logview诊断实践
解决思路：当出现性能问题时，可以按照下面这些方法进行排查和优化：检查UDF是否出错。有时候是由于某些特定的数据值引起的，比如出现某个值的时候会引起死循环。MaxCompute Studio支持下载表的部分Sample数据到本地运行，进行排查，详情请...
应用场景
下文先以用户注册为场景说明 云消息队列 RocketMQ 版 如何实现以下功能：异步解耦 分布式事务的数据一致性 消息的顺序收发 最后，再以电商的秒杀场景和价格同步场景分别说明 云消息队列 RocketMQ 版 所实现的削峰填谷和大规模机器的缓存...
创建SQL Server只读实例
解决方法：检查处理存在的大事务，一般存在大事务原因可能包括锁问题、慢SQL问题以及临时查询未提交问题等。原因：内核Bug导致的复制异常。解决方法：建议升级实例 大版本 或 内核小版本 解决。您可通过 SQL Server 自治服务 进行诊断查看...
- 产品推荐
- 这些文档可能帮助您