Impala概述

注意事项 如果使用Impala组件,请勿直接通过系统文件删除hive表分区目录,请使用Impala或者Hive命令删除,否则导致该表不可用。优点 为了避免延迟,Impala没有使用MapReduce,而是使用分布式查询引擎直接访问数据,该引擎与RDBMS中的查询...

配置备份计划

常见问题 备份计划显示异常了,如何处理?备份计划状态显示异常,表示该DBS备份计划下至少存在一个异常任务,通常可能是全量备份任务异常或增量备份任务异常,也可能是其他类型任务出现异常。修复方法,请参见 如何修复异常DBS备份计划。若...

pg_dump

如果恢复中途被停止,系统目录可能停留在一种错误状态。备份文件恢复后,可运行 ANALYZE 确保最佳性能。当备份逻辑复制订阅时,pg_dump将生成使用 connect=false 选项的 CREATE SUBSCRIPTION 命令。如果涉及的主机已更改,则可能需要更改...

离线同步并发和限流之间的关系

在一些数据同步场景,脏数据的出现会导致任务同步效率下降,以关系数据库写出为例,默认是执行batch批量写出模式,在遇到脏数据时退化为单条写出模式(以找出batch批次数据具体哪一条是脏数据,保障正常数据正常写出),但单条写出效率...

并行查询使用限制和兼容性问题

精度问题 并行查询的执行过程中,可能会出现比串行执行多出中间结果的存储,如果中间结果是浮点型,可能会导致浮点部分精度差别,导致最终结果有细微的差别。网络包或者中间结果长度超出 max_allowed_packet 允许的最大长度 并行查询的执行...

消息堆积和延迟问题

本文主要介绍 云消息队列 RocketMQ 版 TCP协议的Java客户端使用过程中,经常会出现的消息堆积和消息延迟的问题。通过了解 云消息队列 RocketMQ 版 客户端的消费原理和消息堆积的主要原因,帮助您可以在业务部署前更好的规划资源和配置,或...

减灾与应急时空解决方案与案例

可在表级和操作级充分利用时空并行处理能力加快大数据计算效率。系统原生部署在云端,支持直接使用SQL实现传统GIS服务软件提供的大部分功能,还支持性能及存储空间同时线性扩展。项目价值 领域专业数据一体化融合管理和处理能力,提供存储...

重启实例或节点

注意事项 重启实例期间会启停进程,系统会断开当前所有连接,请确保业务具有重连机制。Mongod和Mongos进程启动时间通常都在30秒以内。但是当集合数量较多(超过1万),Mongod的启动时间可能达到分钟级别。进程启动完成之前,将无法连接对应...

简介

同一任务的各个实例并行处理各自的输入数据。镜像 Image 镜像(Image)是集群资源创建或者作业运行环境的模板。它是一个标准的或者自定义的 ECS 镜像,需要安装 BatchCompute Agent,然后授权给 BatchCompute 服务使用

调用方式

NLP自学习平台API调用是通过向NLP自学习平台服务的服务端地址发送HTTP GET请求,并按照接口说明在请求中加入相应请求参数,调用后系统会返回处理结果。请求及返回结果都使用UTF-8字符集进行编码。请求结构 NLP自学习平台服务的API是RPC风格...

媒体处理系统权限策略参考

本文描述媒体处理支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品...

常见问题

如何解决后台上传补丁的时候出现找不到补丁的情况 移动热修复补丁发布错了该如何处理 移动热修复针对同一个方法可以多次发Patch吗 Android Q 10.0 系统过滤设置 点进热修复控制台,就报“请求失败,请稍后重试”控制台上传补丁失败 阿里云-...

挂载访问FAQ

POSIX挂载点 在创建POSIX挂载点时,提示“库存不足”该如何处理?在创建POSIX挂载点时,提示“交换机IP数量不足”该如何处理?为什么无法创建POSIX挂载点?POSIX挂载与卸载 一个ECS实例可挂载多少个CPFS文件系统?挂载CPFS文件系统时,返回...

参考:性能基准评测

batch-size 1 global-batch-size 4 使用Pytorch原生的分布式数据并行会导致出现OOM,导致OOM的关键原因是模型无法放在32G的显卡上,因为Adam优化器的状态参数就消耗16G显存。方案 吞吐(samples/s)Peak Memory(MB)无加速技术 OOM OOM ...

Linux实例中数据恢复

数据恢复方法 在Linux实例里,您重启系统后,可能会出现数据盘分区丢失或者数据丢失的问题。这可能是因为您未在/etc/fstab 文件里设置自动挂载。此时,您可以先手动挂载数据盘分区。如果手动挂载时报分区表丢失,您可以尝试如下三种办法...

深度解析PolarDB数据库并行查询技术

传统的优化器只能生成串行的执行计划,为了实现并行读取数据,同时并行处理数据,首先必须对现有的优化器进行改造,让优化器可以生成需要的并行计划。例如,选择哪个表或哪些表可以并行读取,并且通过并行读取带来足够的收益;或者哪些...

读写访问文件类问题

当您访问文件系统中的文件时,...问题现象 当您混用NFS和SMB协议文件系统,导致第一次通过 net use 命令挂载NFS协议文件系统连接失败后,挂载正确的SMB协议文件系统会出现问题。解决方案 检查确保挂载正确的文件系统后,暂时停止挂载,5分钟...

使用负载均衡SLB后出现500、502和504状态码

请确认是所有客户端访问出现问题,还是部分客户端有问题。如果仅是部分客户端问题,排查该客户端是否被云盾阻挡,负载均衡域名或者IP是否被ISP运营商拦截。查看500、502和504状态码页面,判断是负载均衡问题、高防配置问题还是后端ECS配置...

出现OOM Killer的原因及解决方案

如果内存回收机制不能处理系统内存不足的情况,则系统会触发OOM Killer(Out of Memory Killer)强制释放进程占用的内存,达到给系统解压的目的。本文介绍Alibaba Cloud Linux操作系统出现OOM Killer的可能原因及解决方案。问题现象 ...

如何解决备份客户端OOM问题

背景信息 使用 云备份 备份数据时,在极端大数据量以及系统资源不足的备份场景,备份客户端会占用较多的系统资源,可能会出现OOM问题,即备份进程触发OOM被系统终止而导致备份失败。重要 当遇到OOM问题时,您可以根据实际情况为备份客户端...

错误码说明

常见错误处理 错误码 处理方式 1000 一般为超时引起,重试后查看是否还会出现。如仍有报错,请提交工单,值班人员会尽快排查处理。3007 对于API推送系统是有频率限制,请控制好频率重试。4003 可以先按照文档样例,试下签名结果是否一致,...

ECS实例操作系统内部(GuestOS)常见问题与修复方案

本文介绍ECS实例操作系统内部(GuestOS)的常见问题,以及对应的修复方案。...检查磁盘容量 Windows系统有时会出现C盘的磁盘空间不断减小的情况,导致系统不能正常操作。具体操作,请参见 Windows系统临时文件占用过多磁盘空间。

耗资源用户处理流程

当您的站点出现因过度消耗资源导致运行速度下降或严重影响服务器性能时,系统会根据影响程度采取不同的处理方式以保证网站正常运行。耗资源即程序异常占用过多CPU及内存,导致资源浪费。例如您在使用云虚拟主机时,因为运行了编写不合理的...

概述

每次保存时,一级备份并没有真正复制数据,当数据块有修改时系统会将其中一个历史版本的数据块保留给快照,同时生成新的数据块被原数据引用(Redirect)。因此无论数据库容量多少,都可以做到秒级备份。PolarDB 集群备份和恢复功能均采用多...

并行查询性能

并行查询利用多核CPU的并行处理能力,以8核32 GB 独享规格 的集群为例,并行查询示意图如下所示。下文将介绍8.0.1和8.0.2版本并行查询参数取值分别设置为如下表所示时,PolarDB 集群负载 并行查询测试方法 与 执行结果。关于如何配置参数,...

GxP欧盟附录11标准合规包

业务背景 GxP欧盟附录11(GxP EU Annex 11)是欧盟对于计算机系统使用的规范性要求,主要针对在制药、生物技术和医疗器械领域中使用计算机系统的企业和组织。他要求涵盖了计算机系统的开发、验证、操作、维护和监测等方面,以确保...

访问上传到OSS的图片时报“The image file may be ...

问题描述 将图片上传到OSS后,使用OSS的图片处理功能访问图片出现以下报错。ImageDamage</Code><Message>The image file may be damaged.系统显示类似如下。问题原因 图片文件有部分信息丢失或损坏,导致无法正常识别或处理。解决...

ARMS告警精细管理最佳实践

如下图所示是一个典型的垂直业务系统应该配置的告警信息,在这个垂直系统中不同层次的组件所产生的告警它的处理方式和处理完全不同。当业务由多个垂直业务组成,并且部署在全球多个区域时,带来的告警规则配置复杂度=垂直业务*依赖组件...

强弱依赖治理概述

通过以上对比可以看出,当下游依赖出现问题时,当前系统会受到一些影响,严重影响用户体验的是强依赖,影响较小的则是弱依赖。强弱依赖治理 强弱依赖治理就是提前发现因为依赖问题可能导致的故障,避免依赖故障影响用户体验,积累数据持续...

挂载访问FAQ

目前仅支持Linux操作系统挂载NFS文件系统,Windows操作系统挂载SMB文件系统、Windows操作系统挂载NFS文件系统及Linux操作系统挂载SMB文件系统场景,请您登录ECS实例执行命令挂载。更多信息,请参见 Windows系统挂载SMB文件系统、Windows...

添加访问地址

将鼠标悬停在访问地址或直连地址卡片上,可以查看完整的私网地址,卡片右上角会出现设置和删除图标,单击设置图标可对访问地址或直连地址进行编辑,单击删除图标可以删除地址。单击私网地址处的编辑图标,可以修改私网地址。

常见问题

产品常见问题 EMAS崩溃保护机制导致SDK无法初始化且功能不可用 阿里百川账号如何在阿里云平台使用 覆盖patch需要重启App生效吗 热修复支持多进程吗 后台上传补丁的时候出现,找不到补丁的情况 补丁发错了怎么办,是否有相应办法补救 针对同...

技术原理

针对这类在线数据库上复杂SQL的处理,PolarDB-X 1.0 额外扩展了单机并行处理器(Symmetric Multi-Processingy,简称SMP)和多机并行处理器(DAG)。前者完全集成在 PolarDB-X 1.0 内核中;而对于后者,PolarDB-X 1.0 构建了一个计算集群,...

自助诊断系统

由于存在未支付订单时不能升级配置,因此会出现 错误提示,您可以利用自主诊断系统排查错误原因。有关如何正确升级实例配置,请参见 包年包月实例升级配置。步骤一:提交自动诊断 完成以下操作,提交自动诊断:登录 ECS管理控制台。在左侧...

测试分析及调优

内核参数 内核参数一般都有默认值,这些内核参数默认值对于一般系统没问题,但是对于压力测试来说,可能运行的参数将超过内核参数,导致系统出现问题,可以用Sysctl来查看及修改。JVM JVM主要分析GC/FULL GC是否频繁,以及垃圾回收的时间...

DataV读取数据源超时

问题描述 阿里云DataV数据可视化产品主要用于动态、实时数据展示场景,需要对数据高频实时查询,对数据访问性能有一定要求,您的数据源访问经常出现超时的情况。问题原因 查询超时的原因如下:使用SQL查询的业务数据表数量太大。API接口...

并行安全性

规划器把查询中涉及的操作分类成 并行安全、并行受限 或者 并行不安全。...在一些情况中,可以(甚至效率更高)把对表的扫描包括在查询的并行部分并且延迟对 WHERE 子句的计算,这样它会出现在 Gather 节点之上。不过,规划器不会这样做。

PolarDB MySQL版CPU使用率高

比较常见的问题会出现内存使用争抢。在MySQL体系中,内存主要作为数据缓存使用,也就意味着数据需要不断的迭代,最常用是 buffer pool 和 innodb_adaptive_hash_index 内存区域。整个数据库系统的缓存区域,是数据交换最为频繁的位置,如果...

概述

SQL语句处理时间比较长导致线上业务接口出现大量的慢调用,需要快速定位有问题的慢SQL。数据库治理常见场景 数据库治理中常见的一些场景与能力如下:MSE提供的SQL洞察具备完善的SQL执行审计能力,可以有效地评估系统的整体表现。具体详情,...

节点诊断

节点系统出现AUFS mount hung问题,请收集节点日志并 提交工单 处理。关于收集节点日志操作,请参见 一键采集节点的诊断日志。节点内核BufferIOError情况 检查节点内核是否出现BufferIOError。节点内核出现BufferIOError情况,请收集节点...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云安全中心 视频点播 对象存储 负载均衡 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用