创建节点池
节点池是一组具有相同配置和用途的节点，例如节点规格、可用区、标签、污点等，便于对集群中的节点进行分组管理和运维。您可以在创建节点池时指定节点属性，也可以修改存量节点池的配置。前提条件 已创建Kubernetes集群。具体操作，请参见 ...
历史功能发布记录（2021年）
通过为节点池指定部署集，能够保证节点池弹出的ECS实例不会分布于同一物理机上，并通过亲和性配置，使您的应用对底层的节点拓扑进行感知，使其均匀地分布在不同节点上，保证应用的容灾能力和高可用性。全部 节点池部署集最佳实践 容器实例...
创建Kubernetes托管版集群
创建Kubernetes托管版集群时，您只需创建节点，无需维护控制面板。控制面板由阿里云容器服务创建并托管，降低了运维成本，帮助您聚焦业务应用。本文介绍如何通过容器服务控制台创建Kubernetes托管版集群。索引 前提条件 使用限制 计费相关 ...
数据节点管理
对于每个DN节点，由于数据分布的不同，实际对资源的需求也有区别。PolarDB-X 支持针对每个DN节点单独升降配，提升整体的资源利用率。注意事项 存储资源池功能需要 PolarDB-X 版本不低于V5.4.18-17066805。低版本实例升级到V5.4.18-17066805...
强一致分布式事务
PolarDB-X 存储节点（DN）在变更日志设计上也会保存分布式事务信息，通过 PolarDB-X 日志组件（CDC）收集分布式下多个存储节点（DN）的日志流，进行汇总、重组、排序、落盘等过程，提供满足分布式事务一致性语义的 二进制日志，并全面兼容...
术语表
全局二级索引（Global Secondary Index，简称GSI）全局的二级索引，索引中的数据按照指定的拆分方式分布在各个存储节点上。聚簇索引 一种特殊的全局二级索引，默认覆盖列包含主表的所有列，所有查询均不用回表，从而避免回表带来的额外开销...
基本概念
Elasticsearch可以把一个完整的索引分成多个分片，这样的好处是可以把一个大的索引拆分成多个，分布到不同的节点上，构成分布式搜索。主分片的数量只能在索引创建时指定，并且索引创建后不能更改。replicas是索引的备份，Elasticsearch可以...
PolarDB PostgreSQL版：ePQ架构详解
执行流程如下所示：在传统的mpp执行引擎中，数据被打散到不同的节点上，不同节点上的数据可能具有不同的分布属性，例如哈希分布、随机分布、复制分布等。传统的mpp执行引擎会针对不同表的数据分布特点，在执行计划中插入算子来保证上层算子...
概述
分布式系统将计算任务和数据分布在多个节点上以实现更高的性能、可靠性和可扩展性，当一个节点发生故障或错误时，其他节点可以继续工作，相比于单机系统，架构本身就有较高的节点容错性。但随着服务拆分，更多组件的引入，分布式系统的复杂...
调优集群性能
如下图所示，某张表是根据a字段进行分布，因为a字段本身比较均匀，所以数据均匀地分布在不同的存储节点上，当您使用了b字段进行分组（group by b），那么存储节点1会将b字段值为b1的数据行分发到计算节点1，为确保计算节点1具有所有b字段值...
ClickHouse
Boolean 否 false 参数取值如下：false（默认值）：如果是写ClickHouse分布式表，并且在参数url中只指定了一个节点，则不会尝试推测分布式表对应的本地表信息，而是依然会直接写入分布式表，再由分布式表写入对应的本地表。true：Flink将...
数据倾斜诊断
哈希（HASH）分布 该分布方式会根据分布键HASH值将数据分布到各个计算节点上，该方式的关键在于如何选择分布键，分布键选择不正确时，容易造成数据倾斜。可遵循如下规则选择分布键：有主键的表，建议选择主键作为分布键。无主键的表，建议...
部署网关Pod到指定的节点
步骤三：为ASM网关设置节点亲和性和容忍度 在ASM网关中配置 nodeAffinity 参数，使ASM网关的Pod分布到指定的节点上；配置 tolerations 参数与 步骤二 创建的污点相匹配，使网关的Pod能够被分配到指定的节点上。登录 ASM控制台，在左侧导航...
部署网关Pod到指定的节点
步骤三：为ASM网关设置节点亲和性和容忍度 在ASM网关中配置 nodeAffinity 参数，使ASM网关的Pod分布到指定的节点上；配置 tolerations 参数与 步骤二 创建的污点相匹配，使网关的Pod能够被分配到指定的节点上。登录 ASM控制台，在左侧导航...
查看监控报表
BE的Tablet数量 分布在各个BE节点上的Tablet总数。导入任务数 显示已提交的加载作业和已完成的加载作业的计数器。如果加载提交是常规操作，则两条记录的任务数量变化趋势将表现为大致平行的线条走势。表结构变更作业数 变更表结构作业数...
如何优化Batch Insert
通过BATCH_INSERT_POLICY=SPLIT的机制，在保障最佳性能的同时，减少 PolarDB-X 并行执行Batch Insert的代价，尽可能规避分布式下多节点的负载不均衡。相关参数说明：BATCH_INSERT_POLICY：可选SPLIT或NONE，默认值为SPLIT，代表默认启用...
基本概念
这些分片分布到若干个节点组（Worker Group）上。每个分片都由一个独立的Raft组管理。逻辑库（数据库）逻辑库，是数据库在逻辑上的组织结构，包括表、视图、索引等。CREATE DATABASE创建的就是逻辑数据库。一个 AnalyticDB for MySQL 集群...
使用ASM Serverless网关支撑弹性业务场景
步骤三：为ASM网关设置节点亲和性和容忍度 在ASM网关中配置 nodeAffinity 参数，使ASM网关的Pod分布到指定的节点上；配置 tolerations 参数与 步骤二 创建的污点相匹配，使网关的Pod能够被分配到指定的节点上。登录 ASM控制台，在左侧导航...
使用ASM Serverless网关支撑弹性业务场景
步骤三：为ASM网关设置节点亲和性和容忍度 在ASM网关中配置 nodeAffinity 参数，使ASM网关的Pod分布到指定的节点上；配置 tolerations 参数与 步骤二 创建的污点相匹配，使网关的Pod能够被分配到指定的节点上。登录 ASM控制台，在左侧导航...
操作手册
填入的起止帧会均匀的分布在各个计算节点被渲染。任务结束后可以在OSS上查看输出结果，如果开启自动下载（配置页面设置），渲管会在任务结束后将OSS上的输出结果下载到渲管部署的机器上。C)渲染日志 在节点列表页面，点击节点可以查看各种...
基本概念
说明 阿里云 DCDN 产品通过分布广泛的 DCDN 节点来为最终用户提供加速服务，不同区域或者不同运营商的用户访问到的 DCDN 节点IP地址是不同的，因此加速域名就无法通过DNS的A记录解析的方式唯一解析到某个IP地址，这个时候就引入了CNAME域名...
使用场景
阿里云边缘节点服务ENS的目标场景是通过业务、内容、服务的下沉和边缘节点就近处理，以此带来更高性能或更低成本的业务...AI计算分布式部署在边缘节点，AI计算需求就近处理，将大大降低数据中心的业务压力、减小处理时延、降低中心带宽消耗。
入门概述
创建实例：根据业务需求，您可以在控制台创建边缘实例，明确边缘算力配置、分布，ENS智能选择节点进行批量下发算力。您也可以根据需要随实例创建网络和存储。上线运营：业务测试通过后，正式上线运营。您可以通过ENS控制台管理边缘实例、...
高斯混合模型训练
高斯混合模型（Gaussian ...由于存在通信开销，随着节点数量的增加，分布式训练任务速度会先变快，后变慢。如果您观测到训练任务随着节点数量增加之后，速度变慢，则应该停止增加节点数量。该算法组件支持的数据量大小？建议向量维度小于200。
查看节点所属的可用区
云数据库MongoDB版提供了节点在可用区的分布信息的展示，您可以通过控制台查看节点所属的可用区。前提条件 实例为副本集实例或分片集群实例。部署建议 为进一步满足业务场景中高可靠性和数据安全需求，云数据库MongoDB版提供了同城容灾解决...
高斯混合模型预测
您可以使用高斯混合模型预测组件基于训练好的高斯混合模型进行聚类预测。...由于存在通信开销，随着节点数量的增加，分布式训练任务速度会先变快，后变慢。如果您观测到训练任务随着节点数量增加之后，速度变慢，则应该停止增加节点数量。
节点/数据库/表/分区/二级分区
通过Sharding技术，可以将用户数据打散到多个节点上，这样可以利用分布式的特性来进行并行计算，极大地提升性能。表 在HybridDB for MySQL中，表是一个逻辑概念。用户创建的表会根据分区key拆分到不同的分库中，每个分表就是通常我们所说的...
分布式线性扩展
数据物理分布 PolarDB-X 将数据表以水平分区的方式，分布在多个存储节点（DN）上。数据分区方式由分区函数决定，PolarDB-X 支持哈希（Hash）、范围（Range）等常用的分区函数。以下图为例，shop库中的orders表根据每行数据的ID属性进行哈希...
DBSCAN
由于存在通信开销，随着节点数量的增加，分布式训练任务速度会先变快，后变慢。如果您观测到训练任务随着节点数量增加之后，速度变慢，则应该停止增加节点数量。该算法可以支持多大的数据量？数据量小于100万条，维度小于200。说明 如果...
名称解释
维度表会被冗余存储到每个节点中，有利于分布式join的性能提升，也是OLAP的常用优化手段。二级分区 在HybridDB for MySQL中表按照分布键进行一级分区后（变为事实表），可以再按照比如时间维度进行二级分区。例如在历史交易分析的场景，...
使用说明
查询节点信息 执行以下命令可以查询某个RW节点上的数据库分布情况：ALTER SESSION POLARDB_WRITE_NODE master_id;SELECT*FROM INFORMATION_SCHEMA.INNODB_MASTER_GLOBAL_LOCK_INFO;示例：查询RW1节点上的数据库分布情况 ALTER SESSION ...
技术原理
分布式线性扩展 PolarDB-X将数据表以水平分区的方式，分布在多个存储节点（DN）中。数据分区方式由分区函数决定，PolarDB-X支持哈希（Hash）、范围（Range）等常用的分区函数。以下图为例，shop库中的orders表根据每行数据的ID属性的哈希，...
基础术语
分布式事务 distributed transaction 事务的发起者、资源及资源管理器和事务协调者分别位于不同的分布式系统的不同节点之上。分支事务 action 一个分布式事务可能包含多个数据库本地事务，在分布式事务框架下，分支事务可能是一个分库上...
边缘节点池管理概述
原生Kubernetes Service的后端端点扁平分布在集群中任意节点。因此，跨跃不同分组节点的Service流量，会大概率出现访问不可达、或者访问效率低下的问题。节点池管理方案 针对以上场景，容器服务 Edge 版 提出了如下图所示解决方案。节点池...
多终端节点组流量调配原理及应用场景
多加速地域对应多终端节点组 当客户端分布在多个地域，即有多个加速地域时，客户端的访问流量通过加速IP从就近接入点进入阿里云加速网络，再根据调度优先级调度至离接入点最近的终端节点组。各终端节点组流量调配均设置为100%序号 调度流程...
一键诊断
数据分布倾斜表详情 AnalyticDB MySQL版 分区表需要选择一个分布比较均匀的字段作为分布字段，在数据写入时会根据分布字段进行数据打散，写入到不同的Worker节点上。选择的分布字段不均匀时，会导致表倾斜。表倾斜检测功能会先定位数据量...
yurt-app-manager
原生Kubernetes Service的后端端点扁平分布在集群中任意节点。因此，跨跃不同分组节点的Service流量，会大概率出现访问不可达、或者访问效率低下的问题。针对以上场景，ACK@Edge提出了如下图所示解决方案。节点单元化：以节点池视角对不同...
节点池服务拓扑管理
原生Kubernetes Service的后端端点扁平分布在集群中任意节点。因此，跨越不同分组节点的Service流量，会大概率出现访问不可达、或者访问效率低下的问题。Service流量拓扑支持边缘节点应用只能由相同节点池的节点访问，或者只能由本节点访问...
规格容量评估
节点规格 最大节点数量 单节点最大存储空间 通用场景 搜索场景 日志分析场景 2核4 GiB 10 120 GiB 40 GiB 200 GiB 2核8 GiB 10 240 GiB 80 GiB 400 GiB 4核16 GiB 20 480 GiB 160 GiB 800 GiB 8核32 GiB 40 960 GiB 320 GiB 1.5 TiB 16核64...
计算资源
另外分布式系统中不同节点之间可能会竞争有限的计算资源，例如某个节点过度占用了计算资源，导致其他节点无法获得足够的资源，这会导致性能下降和任务延迟。计算资源分配不均可能会导致系统性能下降、任务延迟增加、资源浪费等。常见的容错...
- 产品推荐
- 这些文档可能帮助您