功能特性
媒体处理可以将一个音视频文件转换成另一个或多个音视频文件，以适应不同网络带宽、终端设备和用户的需求。对媒体的内容、文字、语音、场景进行多模态分析，实现智能审核、内容理解、智能编辑等多种处理功能。音视频转码 把音视频码流转换...
自适应扫描
ePQ提供的自适应扫描模式可以帮助您解决计算资源不足的问题。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 11（内核小版本1.1.17及以上）PostgreSQL 14（内核小版本14.6.6.0及以上）说明 您可通过如下语句查看 PolarDB ...
数据消费框架原理
背景信息 Tunnel Client可以解决全量和增量数据处理时的常见问题，例如负载均衡、故障恢复、Checkpoint、分区信息同步确保分区信息消费顺序等。使用Tunnel Client后，您只需要关心每条记录的处理逻辑。Tunnel Client的代码详情请参见 ...
消费重试
应用场景 云消息队列 RocketMQ 版 的消费重试主要解决的是业务处理逻辑失败导致的消费完整性问题，是一种为业务兜底的策略，不应该被用作业务流程控制。以下场景建议使用消息重试 业务处理失败，且失败原因跟当前的消息内容相关，比如该...
MaxFrame概述
MaxFrame可直接使用MaxCompute海量弹性计算资源，并支持自动分布式、并行处理，大幅缩短数据处理的时间。更便捷的开发体验 MaxFrame已与MaxCompute Notebook、DataWorks集成，无需配置环境即可直接使用；同时MaxFrame也支持在用户本地环境...
验证分析型查询请求能力
它适用于处理大规模、多维的数据集，能够帮助用户进行数据分析、数据挖掘、业务决策等。并行执行 OceanBase 数据库的并行执行指的是在分布式架构下进行的并发处理。OceanBase 数据库采用了分布式架构，将数据分片存储在不同的节点上，通过...
减灾与应急时空解决方案与案例
可在表级和操作级充分利用时空并行处理能力加快大数据计算效率。系统原生部署在云端，支持直接使用SQL实现传统GIS服务软件提供的大部分功能，还支持性能及存储空间同时线性扩展。项目价值 领域专业数据一体化融合管理和处理能力，提供存储...
调整实例WRITESET相关参数
WRITESET模式解决了这个问题，当该模式开启时，每个事务提交时，会将当前事务修改的数据行与其他事务修改的数据行比较，只要事务修改的数据行互相不冲突，就可以在备库并行回放，能够解决大部分的备库回放并发度不够的问题。开启条件 ...
并行查询使用限制和兼容性问题
本文为您介绍并行查询的使用限制以及与串行执行结果可能不兼容的地方，帮助您正确使用并行查询功能。并行查询的使用限制 PolarDB 会持续迭代并行查询的能力，目前以下情况在并行计划中会有一定的局限性：查询非Innodb表，查询无法并行。...
更换ECS实例的专有网络VPC时产生报错的处理方法
错误二的处理方法：删除自定义路由 ECS实例中使用的交换机绑定了自定义路由表，导致无法更换VPC，如何解绑自定义路由表，请执行以下操作：登录 专有网络管理控制台。在左侧导航栏，单击 交换机。在顶部状态栏处，选择交换机所属VPC的地域。...
查询流程和执行计划
Stage的数据来源可以是底层存储系统中的数据或者网络中传输的数据，一个Stage由分布在不同Executor节点上相同类型的Task组成，多个Task会并行处理数据。说明 AnalyticDB MySQL版 SQL诊断功能支持对Stage级别进行结果诊断。更多详情，请参见...
快速开始
设置阈值控制多机并行引擎的自适应弹性调度 PolarDB提供了两个阈值来控制是否选择多机并行，SQL语句只要满足如下任意一个条件，并行查询会考虑弹性扩展为多机并行。records_threshold_for_mpp 若查询语句中存在扫描记录超过该阈值的表，...
错误响应
当您访问图片处理服务出现错误时，图片处理服务会将相应的错误码和错误信息返回给您，以帮助您定位与处理问题。图片处理服务错误的响应格式 错误响应的消息体例子：<Error><Code>BadRequest</Code><Message>Input is not base64 decoding....
接入WAF后访问报401错误应如何处理
问题描述 接入WAF后访问网页报401错误 解决方案 状态码 401 Unauthorized 代表客户端错误，指的是由于缺乏目标资源要求的身份验证凭证，发送的请求未得到满足。原因一：需要用户身份验证信息尚未被提供 解决方案：提供相应的身份验证信息。...
创建项目
该值为 10 表示同一时间可以并行处理 10 个任务（如文档格式转换、图片标签检测等），查询类 API（如 GetImage 获取图片信息）也会占用该额度。如果您有更高的并行处理要求，请使用钉钉搜索钉钉群号31690030817加入钉钉群进行反馈。授权...
概述
高性能 通过分布式以及优化的底层架构、支持多层调度模式可进行无限拆分，多线程并行处理，显著提升大数据量的批任务处理的性能。可视化集中式管理 通过简易操作的可视化集中式管理平台可对上万个任务节点进行集中化管理，简化运维管理操作...
应用场景
灵骏主要面向图形图像识别、自然语言处理、搜索广告推荐、通用大模型等大规模分布式的AI研发场景，适用于自动驾驶、金融风控、药物研发、科学智能、元宇宙、互联网和ISV等行业。大规模分布式训练 高性能打造AI进化底座。超大规模GPU算力...
离线异步任务场景
充足的GPU资源供给 函数计算平台提供充足的GPU资源供给，当业务遭遇大规模离线任务时，函数计算将以秒级弹性供给海量GPU算力资源，避免因GPU算力供给不足、GPU算力弹性滞后导致的业务受损，适合忙闲流量分明（长时空闲、短时繁忙）、忙闲...
OSS SDK使用中常见问题的解决方法
概述 本文主要介绍OSS SDK使用中常见问题的解决方法。详细信息 本文档介绍使用OSS SDK时可能遇到的问题。如果您遇到相同的问题，可参考其对应的解决方案进行处理。Java 使用Java SDK时报“Connection to XXXX refused”错误 使用Java SDK...
影响查询性能的因素
但 AnalyticDB MySQL版 能否充分利用多节点来并行处理查询，还取决于数据在存储节点上的分布特征。如果数据能够均匀分布在存储节点上，那么 AnalyticDB MySQL版 中的多个子任务在处理数据时，就能几乎同时结束任务，实现理想的查询处理；...
并行（Parallel）
本文介绍了并行状态及其相关使用示例。基本概念 并行状态用来并行执行多个状态。它定义了多个分支（Branches），每个分支包含一系列状态。执行并行状态会并发执行所有分支包含的状态。当所有分支执行结束后，默认将输出一个包含所有分支...
SQL调优
并行度优化 并行度是衡量并行计算并行程度的一个指标，从执行计划上来看，例如ID为M1的任务，使用1000个Instance来执行，我们就说M1的并行度是 1000。需要注意的是：调整并行度不一定是越多越好，Instance数量过多会从如下两个方面影响执行...
并行查询性能
并行查询利用多核CPU的并行处理能力，以8核32 GB 独享规格 的集群为例，并行查询示意图如下所示。下文将介绍8.0.1和8.0.2版本并行查询参数取值分别设置为如下表所示时，PolarDB 集群负载 并行查询测试方法 与 执行结果。关于如何配置参数，...
RDS SQL Server CPU使用率高问题排查
CPU使用率高的因素有很多，其中最常见的因素说明及解决方法如下：实例的并行度设置不合理 排查步骤 线程并行处理任务时，由于每个线程处理的数据量不一致，会出现CXPACKET等待情况，CXPACKET等待发生比较多的话，就会造成CPU使用率高。...
错误处理
} 错误码 使用SDK时，只需要关心处理逻辑为“返回错误”的错误码，其余错误码会被SDK自动处理或重试，建议直接按相应处理逻辑处理错误码。HTTP状态码 错误码 描述 处理逻辑 400 OTSParameterInvalid API请求参数错误或数据表不存在。返回...
典型场景
ETL离线数据处理 面对复杂SQL优化和海量数据大规模聚合分析等挑战，云原生数据仓库AnalyticDB PostgreSQL版 具有如下技术优势：支持标准SQL、OLAP窗口函数和存储过程。ORCA分布式SQL优化器，复杂查询免调优。MPP多节点全并行计算，PB级数据...
对分区表使用跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）支持对分区表使用跨机并行查询的功能。通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询...
对分区表使用跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）支持对分区表使用跨机并行查询的功能。通过对分区表使用跨机并行查询，提升数据库的性能。功能介绍 当前对分区表使用跨机并行查询支持的功能如下所示：支持range分区的并行查询。支持list分区的并行查询...
概述
前提条件 内核小版本（V1.1.20）（发布时间：2022年1月）之前创建的集群，您在使用跨机并行查询功能前，请前往 配额中心，在配额名称 PolarDB PG 跨机并行查询 的 操作 列，单击 申请，申请为您的集群开启跨机并行查询功能。PolarDB ...
概述
前提条件 内核小版本（V1.1.20）（发布时间：2022年1月）之前创建的集群，您在使用跨机并行查询功能前，请前往 配额中心，在配额名称 PolarDB PG 跨机并行查询 的 操作 列，单击 申请，申请为您的集群开启跨机并行查询功能。PolarDB ...
创建倍速转码任务
针对带有视频流转码的任务，媒体处理MPS基于智能转码引擎和强大的云上资源调度能力，通过将视频源切分为多个较小的片段，使用多台转码机并行转码的方式提升视频流转码效率，显著缩短处理耗时。实现原理如下图：功能特性 类型 说明 加速倍数...
配置数据库代理
开启弹性并行查询（ePQ）能够有效利用多核CPU（集群内空闲计算资源）的并行处理能力，对复杂查询进行加速，详情请参见 弹性并行查询。说明 自2023年4月1日起，集群满足以下条件时会默认开启弹性并行查询，且默认的并行度为2：新创建的集群...
产品简介
这些功能旨在帮助加快应用程序开发和连接，通过流处理实现转换，简化大规模企业操作，并满足严格的体系结构要求。Confluent Platform 让您可以专注于从数据中获取业务价值，而不必担心底层机制 —— 例如，数据如何在不同的系统之间进行...
常见问题
错误码 203错误 400错误 403错误 404错误 405错误 409错误 411错误 412错误 416错误 424错误 500错误 503错误 售前常见问题 在购买和使用OSS之前，建议您查阅 售前常见问题 快速了解OSS服务。计量计费常见问题 购买了资源包为何仍会欠费？...
203错误
本文介绍OSS返回203错误的原因和解决方案。CallbackFailed Get image info failed 错误原因：OSS未能成功获取到图片信息，该图片可能上传失败或已被删除。解决方案：图片上传失败，请调用 PutObject 接口重新上传。检查请求的图片是否触发...
使用跨机并行查询进行分析型查询
PolarDB PostgreSQL版（兼容Oracle）支持使用跨机并行查询功能进行分析型查询，实现一定的HTAP能力。本文介绍如何使用跨机并行查询，提升分析型查询的性能。原理介绍 当一条查询请求在查询协调节点上被执行跨机并行查询时，该查询产生的...
使用跨机并行查询进行分析型查询
PolarDB PostgreSQL版（兼容Oracle）支持使用跨机并行查询功能进行分析型查询，实现一定的HTAP能力。本文介绍如何使用跨机并行查询，提升分析型查询的性能。原理介绍 当一条查询请求在查询协调节点上被执行跨机并行查询时，该查询产生的...
错误处理
本文介绍表格存储Node.js SDK的错误处理方式和重试策略。方式 表格存储Node.js SDK目前采用“异常”的方式处理错误。如果调用接口没有抛出异常，则说明操作成功，否则失败。说明 批量相关接口，例如BatchGetRow和BatchWriteRow不仅需要判断...
AI加速概述
EPL（大规模分布式训练框架）支持数据并行，算子拆分流水并行。支持自动并行策略，得到最优分布式训练性能。Rapidformer（Transformer训练加速）支持对PyTorch版Transformer模型的训练进行优化。融合了多种优化技术，可以无缝对接...
Semi-Join的并行加速
下文展示了在标准TPC-H中，SCALE为100 GB的数据量热数据场景下，开启并行后多阶段的并行处理能力。说明 本文的TPC-H的实现基于TPC-H的基准测试，并不能与已发布的TPC-H基准测试结果相比较，本文中的测试并不符合TPC-H基准测试的所有要求。...
- 产品推荐
- 这些文档可能帮助您