功能特性
单击在线体验 音 视 频增强 音频增强 视频云音频实验室有机结合传统信号处理与深度学习技术，提供全场景音频增强与修复方案。单击在线体验。重要 以下功能需要在 提交转码作业 时 配置相应参数 使用，音频部分按照输出的音频规格和时长，...
日志位点监控
本文介绍了日志位点的监控信息和延迟情况，以及延迟的处理方法。PolarDB 中存在以下几个比较重要的WAL日志位点：主节点当前日志写入位点，可以通过 pg_current_wal_insert_lsn()函数查询。所有备节点中最小的日志回放位点，可以通过 polar_...
2021年
开启时空并行查询 优化 栅格图像处理 ST_SubRaster函数支持栅格像元类型转换以及像元值拉伸。支持多波段遥感影像转三波段图像的AI识别场景。ST_SubRaster 缺陷修复 修复栅格解析无效的直方图信息可能会导致数据库崩溃的问题。修复进行投影...
PolarDB并行查询
两个阶段没有重叠，这样就实现了全阶段的并行，但Parallel Hash join也有自身的问题，例如：共享Hash Table过大导致spill to disk问题，并行插入虽然无锁，但仍有“同步”原语带来的cache invalidation。Partition Hash join Partition ...
PolarDB PostgreSQL版架构介绍
PolarDB PostgreSQL版 是一款阿里云自主研发的企业级数据库产品，采用计算存储分离架构，兼容PostgreSQL与Oracle。PolarDB PostgreSQL版 的存储与计算能力均可横向扩展，具有高可靠、高可用、弹性扩展等企业级数据库特性。同时，PolarDB ...
PolarDB MySQL版8.0.2版本发布日志
2023-08-23 问题修复 修复用户同时打开全局一致性（高性能模式）和弹性并行查询（ePQ）功能时，可能触发 Table definition has changed 错误的问题。修复Index condition pushdown场景下，SQL语句的扫描行数统计不准确的问题。修复在全文...
2021年
开启时空并行查询 2021年5月 优化 栅格图像处理 ST_SubRaster函数支持栅格像元类型转换以及像元值拉伸。支持多波段遥感影像转三波段图像的AI识别场景。ST_SubRaster 2021年5月 缺陷修复 修复栅格解析无效的直方图信息可能会导致数据库崩溃...
技术面临的挑战与革新
分布式事务与集中式事务的优劣 事务处理是数据库保证ACID语义的核心功能，因为数据库系统需要处理大量的并发事务，为了保证并发事务能够尽可能高效的并发执行而又互不干扰，发展出若干种技术，比如多版本并发处理(MVCC)，乐观并发处理(OCC)...
安装CUDA
背景信息 CUDA（Compute Unified Device Architecture，统一计算设备架构）是由NVIDIA推出的通用并行计算架构，该架构利用GPU（图形处理器）的处理能力可以解决复杂的计算问题。其包含了CUDA指令集架构（ISA）以及GPU内部的并行计算引擎。...
V5.3.x系列实例版本说明
性能优化 优化MysqlDump兼容性问题处理，支持MySQL可执行HINT。优化MysqlDump兼容性问题处理，支持MySQL单行注释“—”。修复问题 修复存在HINT时，没有正确设置ThreadLocal变量导致NPE的问题。修复特殊场景下子查询条件上拉失败，导致全表...
数据导入常见问题
问题描述 导入作业失败，通过查看错误详情URL发现返回“Value count does not match column count”错误，提示解析源数据得到的列数与目标表的列数不匹配。Error:Value count does not match column count.Expect 3,but got 1.Row:2023-01-...
历史版本常见问题
大批量KILL同时执行打满线程池导致PolarDB-X 1.0无响应 现象描述 大批量KILL请求在同一时间内并行执行，会有占满 PolarDB-X 1.0 线程池的风险,其表现为所有其它的SQL请求因线程资源耗尽而无响应。处理建议 业务侧要尽量避免短时间内大量...
PolarDB PostgreSQL版：ePQ架构详解
PolarDB PostgreSQL版 实现了弹性跨机并行查询（ePQ）特性，能够帮助您解决原先的 PolarDB PostgreSQL版 在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 11（内核小版本1.1.28及以上）...
倍速转码公测结束，正式版上线
公测结束时间 2023年3月29日 正式版上线时间 2023年3月30日 功能介绍 将视频源切分为多个较小的片段后并行转码，可将转码速度提升5~30倍，显著缩短处理耗时，适用于对首发、时效性要求较高的资讯、赛事、重要内容场景。类型 说明 加速倍数 ...
执行补数据并查看补数据实例（旧版）
具体写入的分区与执行的代码逻辑，与任务定义的代码有关。本文为您介绍旧版补数据如何执行补数据操作并管理补数据实例。背景信息 周期任务开发完成并提交发布后，任务会按照调度配置定时运行。如果您希望在指定时间段运行周期任务，可使用...
参数说明
当您通过数据库统计信息、慢SQL等信息了解数据库当前的状态以及存在的问题后，可以针对发现的问题，进行调整和优化。PolarDB PostgreSQL版（兼容Oracle）默认的参数模板适用于大多数通用的数据库场景，对于一些特殊的数据库场景，默认模板...
Hive作业调优
并行运行 并行运行表示同步执行Hive的多个阶段。Hive在执行过程中，将一个查询转化成一个或者多个阶段。某个特定的Job可能包含多个阶段，而这些阶段可能并非完全相互依赖的，也就是可以并行运行的，这样可以使得整个Job的运行时间缩短。您...
问题汇总
补数据 补数据功能说明 为什么小时分钟任务补数据选择了并行但实际不生效？为什么补数据选择业务时间后不运行，实例显示黄色，实例状态显示等待时间？为什么补数据报错调起的节点运行时间不在所选业务时间范围内？为什么有节点选择了补数据...
自适应扫描
QC进程在发起并行查询任务时，会启动自适应扫描线程，用于接收并处理来自PX Worker进程的请求消息。自适应扫描线程维护了当前查询扫描任务的进度，并根据每个PX Worker进程的工作进度，向PX Worker进程分派需要扫描的Disk Unit ID。对于...
灵骏常见问题
本文为您介绍智能计算灵骏的常见问题。如何创建、删除集群下的节点分组？您有两种方式为灵骏集群创建分组。创建集群时，为集群创建分组。更多信息，请参见 集群和分组配置。创建集群完成后，为已有的集群创建分组。在左侧导航栏，选择 资源...
资源组
并行查询的后台并行子进程都属于发起查询的后台进程所属资源组。进程 由用户主动发起的用户连接进程（会话进程）。后端子进程：例如某用户的会话进程发起的并行查询，由并行查询调用的后端进程。其他一些系统辅助进程：background writer、...
资源组
并行查询的后台并行子进程都属于发起查询的后台进程所属资源组。进程 由用户主动发起的用户连接进程（会话进程）。后端子进程：例如某用户的会话进程发起的并行查询，由并行查询调用的后端进程。其他一些系统辅助进程：background writer、...
基因数据文件
可由对方通过阿里云访问控制（RAM）授权你访问存储数据的bucket（见常见问题中“基因分析平台能否跨账号访问OSS资源”），然后基因分析平台即可使用。其他公有云厂商数据 如果用户的基因数据存储在其他公有云厂商中，可以通过阿里云的 在线...
使用OSS外表高速导出数据到OSS
云原生数据仓库AnalyticDB PostgreSQL版 支持通过OSS外部表（即gpossext功能），将数据并行导出到阿里云对象存储OSS，并支持通过GZIP进行OSS外部表文件压缩，大量节省存储空间及成本。功能介绍 目前gpossext支持读写TEXT、CSV格式的文件...
LLM on DLC-Megatron on DLC最佳实践
预训练大语言模型面对来自于模型规模和数据规模的多重挑战，为了解决这些问题，PAI提供了在 DLC 上使用Megatron-LM进行大语言模型预训练的最佳实践。该实践通过准备镜像环境与训练数据、调整训练策略、提交与管理任务等流程，帮助您在 DLC ...
兼容PostgreSQL 14版本公测结束，正式版上线
并行计算增强 PostgreSQL 14版本增加了许多并行查询功能，PL/pgSQL函数内的 RETURN QUERY 返回结果时支持QUERY的并行计算，REFRESH MATERIALIZED VIEW 命令也可以使用并行查询。并行顺序扫描支持chunk，提高大范围数据扫描的IO吞吐，接近块...
发布单对接说明
为什么同一应用的发布单不支持并行 弹性场景 在 SAE 应用的发布、扩缩容场景下需要禁用弹性规则，否则会出现一系列不可预期的问题。如果此时有多个发布单并行，就会出现A发布单禁用了弹性，在A发布单未完结之前，B发布单又启动了弹性的情况...
使用OSS外表高速导入OSS数据
云原生数据仓库AnalyticDB PostgreSQL版 支持通过OSS外部表（gpossext功能），将数据并行从阿里云对象存储OSS导入到 AnalyticDB PostgreSQL。功能介绍 目前gpossext支持读写TEXT、CSV格式的文件以及GZIP压缩格式的TEXT、CSV文件。gpossext...
X-Engine简介
例如多核（众核）CPU、新的处理器架构（Cache/NUMA）、各种异构计算设备（GPU/FPGA）等，而架构在这些硬件之上的数据库软件却没有太大的改变，例如使用B-Tree索引的固定大小的数据页（Page）、使用ARIES算法的事务处理与数据恢复机制、基于...
2017年功能发布记录
2017年12月 功能名称 变更类型 功能描述 相关文档 与IoT产品的对接 新增 函数计算打通和IoT产品对接，通过IoT产品控制台可以配置函数计算作为后端处理，可以解决物联网、智能家居存在的问题：数据不能即时处理 较重的技术架构 无法实时弹性...
计划内事件常见问题
若实例部署在双可用区，则会在首次切换后的120分钟内进行第二次切换，自动将主节点切换至原主可用区，避免实例与其他业务产生跨机房访问的情况。您无需进行任何操作。两次切换的时间间隔取决于首次切换后新备库的重建速度。
Presto FAQ
本文汇总了使用DLA Presto的常见问题及解决方案。高频问题 在哪些情况下，共享集群（Public）不计费？共享集群（Public）的算力是多大？在控制台执行SELECT语句为什么会有Limit 500的限制？能够突破这个限制吗？阿里云子账号可以在哪里执行...
2017年功能发布记录
2017年12月 功能名称 变更类型 功能描述 相关文档 与IoT产品的对接 新增 函数计算打通和IoT产品对接，通过IoT产品控制台可以配置函数计算作为后端处理，可以解决物联网、智能家居存在的问题：数据不能即时处理 较重的技术架构 无法实时弹性...
迁移方案
本文为您介绍阿里云实时计算Blink独享或共享集群（Blink计算引擎和Bayes开发平台）的业务迁移至实时计算Flink全托管（Flink计算引擎VVR和开发平台VVP）时的迁移限制、迁移方案和常见问题。迁移限制 由于Blink作业的State和Flink的State无法...
企业版和标准版功能对比
支持 支持 弹性并行查询（ePQ）弹性并行查询（Elastic Parallel Query，ePQ）目前支持单机并行和多机并行两种并行引擎，单机并行引擎等效于原有的并行查询，多机并行引擎支持集群内跨节点的自适应弹性调度。支持 支持 SQL引擎查询优化 ...
并行元数据锁同步
通过并行MDL同步功能，PolarDB 将MDL同步操作与Redo Log的解析操作解耦，实现了即使在等待MDL锁信息进行同步时，只读节点仍能继续解析并应用Redo Log。使用方法 该功能默认开启，无需额外操作。您可以在只读节点上使用如下SQL语句，获取...
修复节点池操作系统CVE漏洞
节点操作系统中的CVE漏洞可能带来集群数据泄露、服务中断等问题，对集群的稳定性、安全性、合规性造成威胁。您可以启用操作系统（OS）CVE漏洞修复功能，扫描节点上存在的安全漏洞，获得修复建议与方法，并在控制台上完成快速修复。前提条件...
应用场景
在秒杀或团队抢购活动中，由于用户请求量较大，导致流量暴增，秒杀的应用在处理如此大量的访问流量后，下游的通知系统无法承载海量的调用量，甚至会导致系统崩溃等问题而发生漏通知的情况。为解决这些问题，可在应用和下游通知系统之间加入...
应用场景
云服务器ECS具有广泛的应用场景，既可以作为Web服务器或者应用服务器单独使用，又可以与其他阿里云服务集成提供丰富的解决方案。说明 云服务器ECS的典型应用场景包括但不限于本文描述，您可以在使用云服务器ECS的同时发现云计算带来的技术...
什么是云工作流（CloudFlow）
在 云工作流 中，您可以用顺序、分支、并行等方式来编排分布式任务，云工作流 会按照设定好的步骤可靠地协调任务执行，跟踪每个任务的状态转换，并在必要时执行您定义的重试逻辑，以确保工作流顺利完成。云工作流 通过提供日志记录和审计来...
- 产品推荐
- 这些文档可能帮助您