免费体验弹性并行查询ePQ
单击 配置并行策略为LOCAL 按钮，自动执行如下命令，将数据库的并行策略设置为LOCAL，即 set parallel_workers_policy='LOCAL';单击 配置并行度为0 按钮，自动执行如下命令，将数据库的并行度设置为0。set max_parallel_degree=0;单击 查看...
通用性能
系统指标 指标详细 维度 能力 说明 系统部署 Agent自动注册 按规模可选择Agent集群式入网，高可用执行分钟级故障切换 系统性能 自动化峰值调用性能：100/分钟 自动化任务下发 并发调用性能：100台设备并行配置 系统稳定 系统动态扩容能力：...
LLM on DLC-Megatron on DLC最佳实践
也可以直接将llmacc作为工具算出可能的并行配置：python \-m llmacc.pretrain \-task-type llmacc.megatron.GPT \-world-size 64#64 GPUs in total \-local-world-size 8#8 GPUs for each node \-max-global-batch-size 16 \#megatron ...
配置Java启动参数
并行GC线程数：配置并行GC将使用的线程数。协程特性 当您想使用协程特性时，可以开启 协程特性 开关。说明 只有在选择Dragonwell作为JDK时才会出现 协程特性 配置项。工具 设置GC日志文件的 日志目录、文件个数 和 文件大小，以及内存溢出...
JVM参数配置说明
Xmx3800m-Xms3800m-Xmn2g-Xss128k-XX:+UseParallelGC-XX:ParallelGCThreads=20，-XX:ParallelGCThreads=20 表示配置并行收集器的线程数为20个。XX:+UseParallelOldGC 配置年老代垃圾收集方式为并行收集。说明 JDK 6.0支持对年老代并行收集...
查询加速
在明确使用场景的情况下，推荐采用Http FormValue形式针对特定查询场景配置并行计算的相关参数项。在聚合计算的场景中，Aggregation without()的用法在并发计算中的性能提升较小，例如，agg without()metric{}。此Query等同于对所有Label...
并行查询配置参数说明
parallel_degree_policy Global 设置单个查询的并行度配置策略，取值范围如下：TYPICAL：PolarDB 选择查询并行度时不会考虑数据库负载（如CPU使用率等），而尽可能与 max_parallel_degree 设置的并行度保持一致。AUTO：PolarDB 会根据数据...
配置Ververica Flink离线模式资源
Ververica Flink流批一体任务离线模式的资源配置支持配置任务的生产环境和开发的资源集群、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您如何配置流批一体任务实时模式的资源配置。操作...
配置Ververica Flink离线模式资源
Ververica Flink流批一体任务离线模式的资源配置支持配置任务的生产环境和开发的资源集群、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您如何配置流批一体任务实时模式的资源配置。操作...
并行资源控制策略配置
自适应调整并行度 支持根据查询代价以及当前资源负载选择合适的并行度，包含单机并行的并行度选择和多机并行的弹性调度策略，主要相关配置参数介绍如下：参数 级别 说明 parallel_degree_policy Global 设置单个查询的并行度配置策略，取值...
使用跨机并行查询进行分析型查询
具体Hint语法如下所示：/*+PARALLEL(DEFAULT)*/*+PARALLEL(integer)*/*+NO_PARALLEL(tablename)*/说明 PARALLEL(DEFAULT)表示指定使用跨机并行查询，采用系统默认 polar_px_dop_per_node 并行度配置。PARALLEL(integer)表示指定使用跨机...
使用跨机并行查询进行分析型查询
具体Hint语法如下所示：/*+PARALLEL(DEFAULT)*/*+PARALLEL(integer)*/*+NO_PARALLEL(tablename)*/说明 PARALLEL(DEFAULT)表示指定使用跨机并行查询，采用系统默认 polar_px_dop_per_node 并行度配置。PARALLEL(integer)表示指定使用跨机...
时间窗口MR脚本
在实际执行时，按照当前示例中的配置会并行启动3个任务，其他功能同普通MR脚本组件。使用示例 请参考推荐算法定制-向量召回 案例的节点 2_rec_sln_demo_dssm_recall_vector_recall_sample_fg_encoded_v1，该节点使用了时间窗口MR脚本组件。
时间窗口SQL脚本
例如：select*from${t1} where dt=${pai.system.cycledate}，则在实际执行时，按照当前示例中的配置会并行启动3个任务：select*from${t1} where dt=2022-02-07 select*from${t1} where dt=2022-02-08 select*from${t1} where dt=2022-02-10...
管理工作流定义
此方式下，还需配置 自定义并行度 参数，表示最多并行执行的实例数。每次补数的并行度上限为7。说明 创建工作流定义时，如果选择 并行 执行策略，则该工作流只能 并行执行 补数；如果选择 串行等待 执行策略，则该工作流只能进行 串行执行 ...
执行补数据并查看补数据实例（新版）
并行 若对多个业务日期执行补数据时，可指定若干个分组并发执行本次补数据任务。取值如下：是：平台将按照指定的分组数对业务日期进行拆分，根据分组结果生成多个补数据批次并发执行。否：按照业务日期顺序串行执行，前一个补数据实例运行...
工作流管理
工作流满足对音视频文件的多任务（媒体转码、智能媒资审核、智能媒资标签、智能媒资查重、视频截图和视频动图）处理场景，可并行或串行配置，均针对原片进行处理。本文为您介绍配置工作流的操作步骤。操作视频 操作步骤 登录 视频点播控制...
如何优化Batch Insert
场景一：batch size 参数配置：并行度：16 列：4 gsi：无 sequence：无 测试项 batch size 1 10 100 500 1000 2000 5000 10000 PolarDB-X【单表】性能（行每秒）5397 45653 153216 211976 210644 215103 221919 220529 场景二：并行度 参数...
PolarDB MySQL版8.0.1版本发布日志
SQL Trace支持对限定只读节点打开配置选项，即支持将参数 sql_trace_type 配置为 REPLICA_DEMAND、REPLICA_ALL 或 REPLICA_SLOW_QUERY。在使用自适应执行能力时，若冷数据读IO较多，会自动增加可切换的最大执行时间。2024-01-19 问题修复 ...
CreateJob-创建任务并返回任务ID
变更历史 变更时间 变更内容概要 操作 2023-03-30 API 内部配置变更，不影响调用 看变更集 变更项 变更内容 API 内部配置变更，不影响调用。2022-12-26 API 内部配置变更，不影响调用 看变更集 变更项 变更内容 API 内部配置变更，不影响...
配置开源Flink实时模式资源
开源Flink流批一体任务实时模式的资源配置支持配置任务的生产环境和开发的资源队列、引擎版本以及任务的并行读度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您介绍如何配置流批一体任务实时模式的资源配置。操作...
配置开源Flink离线模式资源
开源Flink流批一体任务离线模式的资源配置支持配置任务的生产环境和开发的资源队列、引擎版本以及任务的并行度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您如何配置流批一体任务离线模式的资源配置。操作步骤 ...
创建调度任务
并行执行索引块数量上限：配置集群最大并行索引块（chunk，单个执行步骤中对任务进行拆分的数据分片）数量。索引块在客户端平均分配。假设单台并行索引块数量上限为 x，集群并行执行索引块数量上限为 y，客户端数量为 m，则单台客户端实际...
PolarDB并行查询
单一配置参数（并行度）。实时性分析，PolarDB 原生的一部分，受惠于REDO物理复制的低延迟：统一底层事务型数据。提交即可见。极致性能，随着PQ的不断完善，对于分析型算子、复杂查询结构的支持能力不断提升：全算子并行。高效流水线。支持...
配置Ververica Flink实时模式资源
Ververica Flink流批一体任务实时模式的资源配置支持配置任务的生产环境和开发的集群、引擎版本以及并行度、Task Manager和Job Manager的CPU与Momory。本文为您介绍如何配置Ververica Flink流批一体任务实时模式的资源配置。操作步骤 请...
配置Ververica Flink实时模式资源
Ververica Flink流批一体任务实时模式的资源配置支持配置任务的生产环境和开发的集群、引擎版本以及并行度、Task Manager和Job Manager的CPU与Momory。本文为您介绍如何配置Ververica Flink流批一体任务实时模式的资源配置。操作步骤 请...
弹性并行查询（Elastic Parallel Query）常见问题
如需要开启并行，建议在控制台 基本信息 的 集群地址 区域，单击 编辑配置，打开 编辑地址配置 页面，设置并行度参数及并行引擎，开启并行查询。具体操作请参见 配置数据库代理 的并行查询说明。PolarDB集群group by/order by涉及的数据量...
UpdateJob-更新任务配置信息
100 TaskDispatchMode string 否 并行网格任务高级配置，推模型或者拉模型 枚举值：pull：pull。push：push。push ConsumerSize integer 否 并行网格任务高级配置，单机单次触发执行线程数，默认值为5。5 QueueSize integer 否 并行网格...
UpdateJob
ConsumerSize Integer 否 5 并行网格任务高级配置，单机单次触发执行线程数，默认值为5。QueueSize Integer 否 10000 并行网格任务高级配置，子任务队列缓存上限，默认值为10000。DispatcherSize Integer 否 5 并行网格任务高级配置，子...
电商压测场景示例
综合来看，在压测中，示例中的 浏览产品A 的API和 登录 的API，会同时发起压测流量。后续操作 业务会话编排完成后，您可以进行施压配置，为整个场景和每一个业务会话设置压测量级。具体操作请参见 压力模式与量级配置。
电商压测场景示例
性能压测最终的目标是模拟真实的业务场景，通常业务场景是复杂多变的。在使用PTS进行压测前，您需要对业务场景进行...后续操作 串联链路编排完成后，您可以进行施压配置，为整个场景和每一个串联链路设置压测量级。具体操作请参见 压力模型。
补数据
产生原因 从平台维度来看，业务时间昨天的数据，今天调度运行。补数据补对应业务时间的数据相当于重新执行了一次对应业务时间的周期实例。如果您需要过滤今天的周期实例，您需要在周期实例面板选择过滤业务时间昨天的实例，实例的定时时间...
CreateJob
ConsumerSize Integer 否 5 并行网格任务高级配置，单机单次触发执行线程数，默认值为5。QueueSize Integer 否 10000 并行网格任务高级配置，子任务队列缓存上限，默认值为10000。DispatcherSize Integer 否 5 并行网格任务高级配置，子...
快速开始
开启并行查询 在控制台基本信息的集群地址区域，单击 编辑配置，打开 编辑地址配置 页面，设置并行度参数及并行引擎，开启并行查询。具体操作请参见 配置数据库代理 的并行查询说明。并行查询推荐设置以及相关说明如下：多机并行引擎可以...
如何调节备份速度
操作步骤 配置备份计划时设置 在配置备份计划时，配置 全量备份并行线程数上限 和 备份网络限速 参数。更多信息，请参见 配置备份计划 或 各类数据库备份计划配置教程。修改备份计划时设置 在备份计划任务详情页，单击 备份时间及高级设置...
配置数据库代理
注意事项 仅 PolarDB MySQL版 8.0版本的集群在配置数据库代理时支持开启并行查询和设置并行度。操作步骤 登录 PolarDB控制台。在左上角，选择集群所在地域。找到目标集群，单击集群ID。在集群 基本信息 页的 数据库连接 区域，找到目标集群...
ossimport概述
该配置项会影响到任务执行的并行度，一般配置为总文件数/Worker总数/迁移线程数（workerTaskThreadNum），最大值不要超过50000，如果不知道总文件数，请使用默认值。taskObjectSizeLimit 每个Task最大数据量，整型，单位bytes，默认1GB。该...
备份数据库
类别 配置项 说明 基础配置 全量备份并行线程数上限 填写全量备份并行线程数上限。说明 不同备份计划规格并行线程数上限不同，具体以控制台为准。增量实时备份 选择是否开启增量备份。高级配置 无 无 说明 您也可以单击目标数据源右侧的 ...
CADT命令详解
必填参数为-f，指定一个配置文件，内容定义请参见 配置文件说明 中并行创建多个应用的配置文件。可以额外指定-o 参数，定义输出。y 可以跳过人为确认的步骤。按序创建并部署应用step-apply step-apply 命令支持按序创建多个应用，并执行...
Parallelism Hints
无论情况如何，并行度绝不会超过配置参数 max_parallel_workers_per_gather 的设置。示例 以下配置参数设置有效：SHOW max_worker_processes;max_worker_processes-8(1 row)SHOW max_parallel_workers_per_gather;max_parallel_workers_per...
- 产品推荐
- 这些文档可能帮助您