关键词抽取
开发 基于 布拉 修斯 平板 解 阻力 估算 算法 设计 求解器 Fortran 语言 上 移 植 Python 和 Fortran 代码 混编 基于 OpenMP 和 CUDA 并行 加速 算法 设计 与 开发 实现 基于 面元法 求解器 三维 翼身融合 体 气动 参数 计算 算例 外形 ...
RDS MySQL通过专线接入金融云DBS
IPsec配置 加密算法 选择第二阶段协商的加密算法。本示例选择3des。认证算法 选择第二阶段协商的认证算法。本示例选择md5。DH分组 选择第二阶段协商的Diffie-Hellman密钥交换算法。本示例选择group2。disabled：表示不使用DH密钥交换算法。...
时间窗口MR脚本
例如在推荐算法定制场景中，并行执行过去30天的EasyRecFGMapper任务。使用限制 仅支持天级别的补数据循环。在使用时按照需要打开或关闭多日期循环执行开关，在整个工作流发布至周期性调度之前 切记关闭 多日期循环执行开关，避免生产环境下...
PolarDB MySQL版DDL操作指南
DDL执行算法 PolarDB MySQL版 支持以下三种DDL执行算法：INSTANT算法：使用INSTANT算法执行DDL操作时，只需要修改数据字典中的元数据，不需要修改或复制存量数据，也不需要重建表。因此其不受表的大小影响，整个DDL过程可以秒级完成。...
图像度量学习训练（raw）
支持以下取值：数据并行的度量学习 模型并行的度量学习 数据并行的度量学习 保存训练输出的oss目录 是 存储训练模型的OSS目录，比如：oss:/examplebucket/yun*/designer_test。无 训练数据标注结果文件路径 否 如果您没有通过输入桩配置...
内置时空数据引擎Ganos
Ganos高度兼容PostGIS语法，在几何空间索引、拓扑算法效率、矢量快显加速以及并行查询优化等方向优于PostGIS。引擎所提供的SQL接口符合ISO及OpenGIS标准规范，支持2D/3D/4D坐标空间(x,y,z,m)，支持创建2-D/n-D几何空间索引，并同时支持平面...
常见问题
通过VCS“全视频”，对视频数据进行汇聚并行计算，让机器看视频，一方面提升视频追踪的效率，另一方面提升视频追踪的能力 2 AI处于暴利阶段，整个行业停留在人脸、人体、机动车等成熟算法的工程化上，几乎没有算法创新和突破各AI玩家满足于...
高维向量检索（PASE）
本文介绍 PolarDB PostgreSQL版 如何通过PASE插件（基于IVFFlat或HNSW算法）实现高维向量检索。背景信息 近年来，深度学习领域内的表示学习技术，作为人工智能的代表性技术，取得了长足性进展，在工业界中已经被大量应用，例如广告投放、...
高维向量检索（PASE）
本文介绍 PolarDB PostgreSQL版（兼容Oracle）如何通过PASE插件（基于IVFFlat或HNSW算法）实现高维向量检索。背景信息 近年来，深度学习领域内的表示学习技术，作为人工智能的代表性技术，取得了长足性进展，在工业界中已经被大量应用，...
LightGBM
它可以说是分布式的，高效的，有以下优势：更快的训练效率 低内存使用 更高的准确率 支持并行化学习 可以处理大规模数据 与常见的机器学习算法对比，速度是非常快的。计算逻辑原理 LightGBM 通过叶分裂(Leaf-wise)策略来生长树。每次从当前...
PolarDB MySQL版8.0.1版本发布日志
支持使用INPLACE算法修改字段的字符集。列存索引功能新增动态过滤器，提升表与表之间的关联效率。在HINT语句中使用SET_VAR设置参数 loose_optimizer_switch 的值时，末尾不需要添加逗号。优化了列存索引（IMCI）中的事务掩码计算流程。调整...
ST_RPCRectify
指定dem，使用最邻近采样，输出srid为32635，并使用并行计算 INSERT INTO raster_result(id,rast)select 11,ST_RPCRectify(rast,（SELECT rast FROM raster_table WHERE id=2),'{"resample":"Near","outSrid":32635}','{"chunking":true,...
ST_RPCRectify
指定dem，使用最邻近采样，输出srid为32635，并使用并行计算 INSERT INTO raster_result(id,rast)select 11,ST_RPCRectify(rast,（SELECT rast FROM raster_table WHERE id=2),'{"resample":"Near","outSrid":32635}','{"chunking":true,...
ST_RPCRectify
指定dem，使用最邻近采样，输出srid为32635，并使用并行计算 INSERT INTO raster_result(id,rast)select 11,ST_RPCRectify(rast,（SELECT rast FROM raster_table WHERE id=2),'{"resample":"Near","outSrid":32635}','{"chunking":true,...
兼容PostgreSQL 14版本公测结束，正式版上线
并行计算增强 PostgreSQL 14版本增加了许多并行查询功能，PL/pgSQL函数内的 RETURN QUERY 返回结果时支持QUERY的并行计算，REFRESH MATERIALIZED VIEW 命令也可以使用并行查询。并行顺序扫描支持chunk，提高大范围数据扫描的IO吞吐，接近块...
开发流程
创建表 导入数据 通用数据开发 ② Designer 支持大规模分布式的传统机器学习、深度学习、强化学习训练，支持流批一体训练，该子模块封装了上百种机器学习算法，您可以拖拽式建模、自动调参，从而无编程玩转人工智能。Designer概述 ③ ...
2023年
ePQ支持并行写入及查询OSS外部表 2023年10月 oss_fdw插件支持ZSTD压缩算法，该压缩算法具备更好的压缩率与压缩速度。oss_fdw 2023年10月 缺陷修复 修复Auto VACUUM、存储管理、全局索引等稳定性问题。2023年10月 14.8.11.0 内核小版本 类别...
LightGBM算法
本文介绍了LightGBM算法相关内容。简介 LightGBM（Light Gradient Boosting Machine）是一个基于决策树算法的分布式梯度提升框架。设计初衷是提供一个快速、高效、低内存、高准确度、支持并行和大规模数据处理的工具。LightGBM可以减少数据...
弹性并行查询（Elastic Parallel Query）常见问题
本文档介绍了弹性并行查询（Elastic Parallel Query）的常见问题。PolarDB读写集群地址是否可以通过hint开启并行查询？优先推荐您在 PolarDB 控制台的 集群地址配置 页面开启并行查询。如果您希望在SQL语句级别生效，可以通过/*+PARALLEL(n...
并行资源控制策略配置
PolarDB 支持通过多种策略控制单个查询或全局的总并行度，以保证在资源负载允许的情况下选择合理的并行度。并行查询排队策略参数 max_parallel_workers 为单个节点内允许同时运行的最大并行worker线程数，超过 max_parallel_workers 后新的...
快速开始
本章节介绍了如何快速使用弹性并行查询。注意事项 只读节点和主节点都支持并行查询功能。主节点上并行查询默认关闭。开启并行查询 在控制台基本信息的集群地址区域，单击 编辑配置，打开 编辑地址配置 页面，设置并行度参数及并行引擎，...
并行操作
并行度参数 如果支持并行操作的函数未指定并行度或指定并行度为0，则使用GUC（Grand Unified Configuration）参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1，表示不支持并行执行。每个支持并行...
PolarDB并行查询
本文介绍 PolarDB MySQL版 在并行查询这一企业级查询加速特性上做的技术探索、形态演进和相关组件的实现原理。并行查询背景 PolarDB 亚马逊在2017年发表的关于Aurora的这篇paper[1]，引领了云原生关系型数据库的发展趋势，而作为国内最早...
并行操作
并行度参数 如果支持并行操作的函数未指定并行度或指定并行度为0，则使用GUC（Grand Unified Configuration）参数 ganos.parallel.degree 的值作为默认的并行度。ganos.parallel.degree 参数默认值为1，表示不支持并行执行。每个支持并行...
概述
功能简介 弹性并行查询（Elastic Parallel Query，ePQ）目前支持单机并行和多机并行两种并行引擎，单机并行引擎等效于原有的并行查询，多机并行引擎支持集群内跨节点的自适应弹性调度。PolarDB MySQL版 8.0.1版本支持单机并行查询，查询时...
并行操作
Ganos支持利用多个CPU提升查询或计算性能，这种特性被称为并行操作。Ganos支持并行执行SQL语句和并行操作raster对象。并行执行SQL语句 原理 PostgreSQL支持利用多个CPU生成并行的查询计划，并将执行任务分配到多个CPU上以提升性能。适用...
并行操作
Ganos支持利用多个CPU提升查询或计算性能，这种特性被称为并行操作。Ganos支持并行执行SQL语句和并行操作raster对象。并行执行SQL语句 原理 PostgreSQL支持利用多个CPU生成并行的查询计划，并将执行任务分配到多个CPU上以提升性能。适用...
并行计划
因为每个工作者只执行完成计划的并行部分，所以不可能简单地产生一个普通查询计划并使用多个工作者运行它。每个工作者都会产生输出结果集的一个完全拷贝，因而查询并不会比普通查询运行得更快甚至还会产生不正确的结果。相反，计划的并行...
并行操作
Ganos支持利用多个CPU提升查询或计算性能，这种特性被称为并行操作。Ganos支持并行执行SQL语句和并行操作raster对象。并行执行SQL语句 原理 PostgreSQL支持利用多个CPU生成并行的查询计划，并将执行任务分配到多个CPU上以提升性能。适用...
并行查询Hint语法
Parallel Hints可以指定优化器是否选择并行执行，还支持指定并行度以及需要并行的表，以及各个算子的并行执行方式。PolarDB MySQL版 8.0.1版本目前支持在并行查询中使用 PARALLEL 和 NO_PARALLEL 两种Hints。PolarDB MySQL版 8.0.2版本除了...
并行查询配置参数说明
本章节介绍了并行查询功能相关的参数和变量。并行查询相关参数 表 1.系统参数 参数名 级别 描述 max_parallel_degree Global、Session 单个查询的最大并行度，即并行执行的最大Worker数量。取值范围：[0-1024]；默认值：0，表示关闭并行...
并行安全性
规划器把查询中涉及的操作分类成 并行安全、并行受限 或者 并行不安全。并行安全的操作不会与并行查询的使用产生冲突。并行受限的操作不能在并行工作者中执行，但是能够在并行查询的领导者中执行。因此，并行受限的操作不能出现在 Gather ...
并行查询
混合并行 混合并行是指分区间和分区内都可以并行执行，以达到分区表整体的并行执行，这是并行度最高的一种并行查询。EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:8->Parallel Append->Parallel Seq Scan on prt...
并行查询
混合并行 混合并行是指分区间和分区内都可以并行执行，以达到分区表整体的并行执行，这是并行度最高的一种并行查询。EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:8->Parallel Append->Parallel Seq Scan on prt...
并行查询
混合并行 混合并行是指分区间和分区内都可以并行执行，以达到分区表整体的并行执行，这是并行度最高的一种并行查询。EXPLAIN(COSTS OFF)select*from prt1;QUERY PLAN-Gather Workers Planned:8->Parallel Append->Parallel Seq Scan on prt...
并行INSERT
本文介绍了的并行INSERT功能。简介 支持弹性跨机并行查询（ePQ）特性，通过利用集群中多个计算节点来提升查询性能。同时，ePQ也支持在读写节点上通过多进程并行写入，实现对 INSERT 语句的加速。ePQ的并行 INSERT 功能用于加速 INSERT INTO...
开启时空并行查询
并行查询原理 PG并行查询是表级的并行，其并行查询示意图如下。注意事项 并行查询的worker数量越大，查询时CPU负载越重，对于CPU负载本身较重的场景建议woker数量设置为2较合适，即max_parallel_workers_per_gather=2。对于服务器内存有限...
开启时空并行查询
并行查询原理 PG并行查询是表级的并行，其并行查询示意图如下。注意事项 并行查询的worker数量越大，查询时CPU负载越重，对于CPU负载本身较重的场景建议woker数量设置为2较合适，即max_parallel_workers_per_gather=2。对于服务器内存有限...
开启时空并行查询
并行查询原理 PG并行查询是表级的并行，其并行查询示意图如下。注意事项 并行查询的worker数量越大，查询时CPU负载越重，对于CPU负载本身较重的场景建议woker数量设置为2较合适，即max_parallel_workers_per_gather=2。对于服务器内存有限...
并行INSERT
本文介绍了 PolarDB PostgreSQL版 的并行INSERT功能。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 11（内核小版本1.1.17及以上）PostgreSQL 14（内核小版本14.8.12.0及以上）说明 您可通过如下语句查看 PolarDB ...
- 产品推荐
- 这些文档可能帮助您