应用场景
批处理系统 很多行业的批处理系统中通常会有大量批处理操作，包含多张大表关联的复杂计算，并且涉及到大量的数据更新。批处理意味着每一次处理的数据量很大，而且有很多张大表要做关联，经常要做一些比较复杂的查询，并且更新量也比较大，...
测试指标
标准 在数据量很大的情况下，批处理时间窗口时间越短越好。不能影响实时交易系统性能。可扩展性指标 定义及解释 指应用软件或操作系统以集群方式部署，增加的硬件资源与增加的处理能力之间的关系。计算公式为：（增加性能/原始性能）/...
查看和处理漏洞
漏洞的存在为攻击者开启了侵入系统的通道，及时修补漏洞能显著减少潜在的安全风险。云安全中心为您提供系统漏洞的详尽信息，并支持对部分漏洞进行一键修复，可以帮助您高效管理系统安全。本文介绍如何通过云安全中心检查并处理漏洞。操作...
产品概述
什么是批量计算 批量计算（BatchCompute）是一种适用于大规模并行批处理作业的分布式云服务。BatchCompute 可支持海量作业并发规模，系统自动完成资源管理、作业调度和数据加载，并按实际使用量计费。通俗的讲，就是您可以提交一个任意的...
应用防护规则常见问题
Warm Up：当流量突然增大的时候，希望系统从空闲状态到繁忙状态的切换的时间长一些，即如果系统在此之前长期处于空闲的状态，希望处理请求的速率缓慢增加，经过预期的时间以后，到达系统处理请求速率的设定值；默认会从配置QPS阈值的1/3...
迁移Batch批量计算到分布式工作流Argo集群
但主流的Batch批处理系统，需要通过Job ID指定Job依赖，由于Job ID需要在Job提交后才能获取，因此需要编写脚本实现Job间依赖（伪代码如下），Job较多时，依赖关系不够直观，维护成本较高。Batch批处理系统Job间依赖，JobB依赖JobA，在JobA...
产品相关问题
典型的应用场景包括金融行业结息处理、日切处理、余额缓冲记账、政务数据批处理等。任务调度支持哪些任务类型？任务调度支持的基本任务类型包括：简单任务、集群任务。此外，任务拓扑编排功能支持将多个任务按执行的顺序编排成一张拓扑图，...
部署数据库
Oracle是一个多用户系统，能够自动从批处理或在线环境的系统故障中恢复运行。系统提供了一个完整的软件开发工具Developer2000，包括交互式应用程序生成器、报表打印软件、字处理软件以及集中式数据字典，用户可以利用这些工具生成自己的...
构建基于Serverless架构的弹性高可用音视频处理系统
在音视频系统中，音视频转码是比较消耗计算力的一个子系统，您可以通过 函数计算 和 Serverless 工作流 构建弹性高可用的Serverless音视频处理系统。本文会从工程效率、运维、性能和成本方面介绍Serverless音视频处理系统和传统方案的差异...
灵骏常见问题
响应方式 需要将全部任务整合后，再进行批处理。实时响应，对单个任务的响应速度较快。适用场景 适用于计算密集、相似度高、多线程并行的高吞吐量运算场景。适用于对响应速度有要求，逻辑复杂的串行运算场景。最适合GPU的计算类型是可以...
消费者负载均衡
消费者从 云消息队列 RocketMQ 版 获取消息消费时，通过消费者负载均衡策略，可将主题内的消息分配给指定消费者分组中的多个消费者共同分担，提高消费并发能力和消费者的水平扩展能力。本文介绍 云消息队列 RocketMQ 版 消费者的负载均衡...
典型客户案例
解决方案 基于金融分布式架构 SOFAStack 和分布式数据库 OceanBase 研发的银行核心系统，让网商银行拥有处理高并发金融交易，海量大数据，弹性扩容和异地多活的能力。利用互联网和大数据的优势，给更多小微企业提供金融服务。客户收益 网商...
基本概念
本文介绍 云原生多模数据库 Lindorm 帮助文档中的相关名词和术语的解释。A 安全组 安全组是一种虚拟防火墙，用于控制安全组中的ECS实例的出入流量。在Lindorm实例的白名单中添加安全组后，该安全组中的ECS实例就可以访问Lindorm实例。更多...
顺序消息
应用场景 在有序事件处理、撮合交易、数据实时增量同步等场景下，异构系统间需要维持强一致的状态同步，上游的事件变更需要按照顺序传递到下游进行处理。在这类场景下使用 云消息队列 RocketMQ 版 的顺序消息可以有效保证数据传输的顺序性...
挂载访问FAQ
目前仅支持Linux操作系统挂载NFS文件系统，Windows操作系统挂载SMB文件系统、Windows操作系统挂载NFS文件系统及Linux操作系统挂载SMB文件系统场景，请您登录ECS实例执行命令挂载。更多信息，请参见 Windows系统挂载SMB文件系统、Windows...
常见问题
日志共享：多台ECS应用，需要将日志写到同一个存储空间，以方便做集中的日志数据处理与分析。企业办公文件共享：企业有公共的文件需要共享给多组业务使用，需要集中的共享存储来存放数据。关于NAS的更多应用场景，请参见 应用场景。NAS支持...
发布单对接说明
为什么多批发布失败会自动回滚 多批发布存在多个批次，如果一次发布成功了一部分，那么此时便有两个版本共存的实例了。如果此时发布单失败，但是仅中止不回滚的话，那么下次再发布的时候，可能会存在三个版本的实例，会出现预期外的情况。...
监控分析平台对比
不同组件面向不同的数据类型和处理需求，数据需要在其中流转，有时候同一份数据需要同时保存在多个系统中，增加系统复杂度和使用成本。当数据越来越多，使用需求越来越广时，保障这些组件的稳定性、满足多种业务性能需求、进行有效的成本...
批量消费
功能优势及场景示例 批量消费的功能优势和场景示例说明如下：优势一：提高消息的吞吐能力和处理效率 场景示例：上游订单系统和下游Elasticsearch系统间通过 云消息队列 RocketMQ 版 解耦，Elasticsearch消费订单系统的10条日志消息，每一条...
数据导入性能优化
单进程无法完全利用系统资源，且一般客户端需要处理数据、攒批等操作，难以跟上数据库的导入速度，通过多并发导入可以加快导入速度。导入并发受攒批、数据源、客户端机器负载等影响，没有最合适的数值，建议通过测试逐步计算合适的并发能力...
数据导入性能优化
单进程无法完全利用系统资源，且一般客户端需要处理数据、攒批等操作，难以跟上数据库的导入速度，通过多并发导入可以加快导入速度。导入并发受攒批、数据源、客户端机器负载等影响，没有最合适的数值，建议通过测试逐步计算合适的并发能力...
常见问题
为什么Fastjson类的应急漏洞多次扫描时每次检测结果可能不一致？漏洞扫描周期说明 漏洞扫描会扫描系统层面和应用层面的漏洞吗？基线检查问题 基线检查验证失败如何处理？基线和漏洞有什么区别？安全告警问题 Rootkit告警支持实时检测吗？为...
其他问题
目前仅支持Linux操作系统挂载NFS文件系统，Windows操作系统挂载SMB文件系统、Windows操作系统挂载NFS文件系统及Linux操作系统挂载SMB文件系统场景，请您登录ECS实例执行命令挂载。更多信息，请参见 Windows系统挂载SMB协议文件系统、...
使用限制
介绍产品使用过程中的限制。...如创建数量已达上限，请参考常见问题：创建过的应用数量已达上限 进行处理。SDK适配应用系统版本限制 ...此外，连续10分钟内允许最多全推10次通知（消息转通知按通知处理），连续10分钟内允许最多全推30次消息。
Transaction Table2.0概述
随着当前数据处理业务场景日趋复杂，很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储...
常见问题
在管理控制台查看服务器监控信息时，不显示内存以及系统盘的使用情况如何处理？服务器的状态为什么是已禁用状态？香港地域的轻量应用服务器什么时候有货？安全问题 轻量应用服务器如何提供数据安全保障？轻量应用服务器如何提供网络安全...
工作流常见问题
您可以通过媒体处理控制台或OSS官方提供的图形化管理工具进行文件上传工作，支持分片上传、断点续传、批量上传。详细信息参见 控制台上传、OSS图形化管理工具上传。音视频文件上传后转码操作是自动执行的么？文件后缀名在指定范围内的文件...
性能测试技术指南
测试环境调研 测试环境调研，需要调研如下内容：系统架构：系统如何组成的，每一层功能是做什么的，与生产环境有多大差异，主要为后面进行瓶颈分析服务和生产环境性能评估，这个很重要。操作系统平台：操作系统是哪种平台，进行工具监控。...
漏洞管理常见问题
参考以下内容将服务器系统的YUM/APT源配置到阿里云源：Ubuntu系统、CentOS系统、其他系统。将YUM源列表升级到最新版。在云安全中心控制台重新修复该漏洞。（Linux漏洞）RPM数据库损坏。RPM数据库损坏可能会导致更新软件包安装失败，从而...
实例创建失败事件
什么是创建失败 在调用 RunInstances 创建实例过程中，ECS库存和交换机（vSwitch）中私网IP的数量是动态变化的，当资源数量不足以完成当前实例创建时，系统会尽量重试将实例创建成功。但在极端情况下该实例无法创建成功，会等待系统自动...
X-Engine简介
为了提高事务处理吞吐，系统内会有大量事务并发执行，单个I/O操作比较昂贵，大部分存储引擎会倾向于聚集一批事务一起提交，称为Group Commit，能够合并I/O操作。但是一组事务提交的过程中，还是有大量等待过程的，例如写入日志到磁盘过程中...
常见问题
为什么系统表system.materialize_mysql中sync_failed_tables字段不为空？如何处理报错：“Too many partitions for single INSERT block(more than 100)”？数据写入与查询 如何处理insert into select XXX内存超限报错？如何查询CPU使用量...
性能调优
AnalyticDB MySQL版 做为分布式系统，其优势在于利用多机并行的能力，提升海量数据的处理速度，适合大数据量的分析。在某些场景中，查询计算量不是特别大，AnalyticDB MySQL具备分布式开销，反而查询较慢。也有某些场景下，AnalyticDB ...
挂载文件系统失败故障排查
通过自动检查脚本定位问题 Linux挂载NFS协议文件系统失败自动检查脚本 Windows挂载SMB协议文件系统失败自动检查脚本 交叉挂载失败排查思路 Linux挂载SMB协议文件系统失败排查思路 Windows系统挂载NFS协议的通用型NAS文件系统失败排查思路 ...
音视频转码
转码是媒体处理中重要的一步，本文为您介绍转码的简介、阿里云支持的转码技术及如何配置转码模板和发起转码。转码简介 什么是转码 视频转码（Video Transcoding）是指将已经压缩编码的视频码流转换成另一个视频码流，以适应不同的网络带宽...
快速玩转Tablestore入门与实战
现代IM系统中的消息系统架构-架构篇 现代IM系统中的消息系统架构-模型篇 现代IM系统中的消息系统架构-实现篇 Tablestore Timeline：轻松构建千万级IM和Feed流系统 Feed流系统设计-总纲 如何打造千万级Feed流系统 高并发IM系统架构优化实践 ...
机器阅读理解训练
如果使用多机多卡，则表示每个GPU上的批处理大小。篇章最大长度 表示系统可处理的篇章最大长度，INT类型，默认值为384。问句最大长度 表示系统可处理的问句最大长度，INT类型，默认值为64。滑动窗口大小 对篇章进行滑动窗口切分时，滑动...
普通消息
每条消息都是一段日志数据，云消息队列 RocketMQ 版 不做任何处理，只需要将日志数据可靠投递到下游的存储系统和分析系统即可，后续功能由后端应用完成。功能原理 什么是普通消息 定义：普通消息是 云消息队列 RocketMQ 版 基本消息功能，...
文档更新动态（2022年之前）
更新说明 计费说明 系统将依据您选择的数据处理单元规格分配不同的默认调度资源，选购的规格越高，分配的调度资源越多，可以支持的任务并发数越大，计算处理速度也相应提升。更新说明 2021年08月24日 数据源：可支持的数据源类型和版本拓展...
表流读写
Delta Lake克服了许多流式处理系统和文件相关的常见限制，例如：合并低延迟引入产生的小文件 保持多个流（或并发批处理作业）执行“仅一次”处理 使用文件作为流源时，可以有效地发现哪些文件是新文件 Delta表作为流源 当您将Delta表加载为...
- 产品推荐
- 这些文档可能帮助您