授权访问
您无需关心权限撤销问题，访问令牌过期后自动失效。通过STS临时授权访问OSS的步骤如下：获取临时访问凭证 临时访问凭证包括临时访问密钥（AccessKey ID和AccessKey Secret）和安全令牌（SecurityToken）。临时访问凭证有效时间单位为秒，...
RDS MySQL迁移至Elasticsearch
分片配置 根据目标 Elasticsearch 中索引的分片配置，设置索引的主分片和副本分片的数量。字符串Index 迁移至目标 Elasticsearch 实例中的字符串编入索引的方式。analyzed：先分析字符串，再编入索引。您还需要选择具体的分析器，分析器的...
上传视频
检查是否为 分片上传，如果使用了PutObject来上传分片，会导致多次触发工作流执行。为了避免重复触发，必须UploadPart来上传分片，并且在将所有数据Part都上传完成后，必须调用CompleteMultipartUpload接口来完成整个文件的分片上传，否则...
自建数据库MongoDB版（分片集群架构）迁移至云数据库...
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将本地MongoDB（分片集群架构）中的各个Shard节点，迁移至阿里云MongoDB（副本集架构或分片集群架构）实例来实现迁移上云。通过DTS的增量迁移功能，可以实现在本地应用不停...
自建数据库MongoDB版（分片集群架构）迁移至云数据库...
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将本地MongoDB（分片集群架构）中的各个Shard节点，迁移至阿里云MongoDB（副本集架构或分片集群架构）实例来实现迁移上云。通过DTS的增量迁移功能，可以实现在本地应用不停...
CREATE TABLE
维度表会在集群的每个分片存储一份数据，因此建议每个维度表中的数据量不宜太大，最好不超过2万行。DISTRIBUTED BY HASH(column_name,.)定义表的分布键。定义了分布键的表，又称普通表。AnalyticDB for MySQL 对分布键的值进行哈希计算，...
云数据库MongoDB版（副本集架构）...或分片集群架构）
数据传输服务DTS（Data Transmission Service）支持 MongoDB数据库（副本集架构）同步至 MongoDB数据库（副本集架构或分片集群架构）。支持的源和目标数据库 MongoDB版（副本集架构）同步至MongoDB版（副本集架构、分片集群架构），支持...
云数据库MongoDB版（副本集架构）...或分片集群架构）
数据传输服务DTS（Data Transmission Service）支持 MongoDB数据库（副本集架构）同步至 MongoDB数据库（副本集架构或分片集群架构）。支持的源和目标数据库 MongoDB版（副本集架构）同步至MongoDB版（副本集架构、分片集群架构），支持...
云数据库MongoDB版（副本集架构）...或分片集群架构）
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将云数据库MongoDB版（副本集架构）迁移至云数据库MongoDB版（副本集架构或分片集群架构）。支持的源和目标数据库 源数据库（副本集架构）目标数据库（副本集架构、分片...
云数据库MongoDB版（副本集架构）...或分片集群架构）
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将云数据库MongoDB版（副本集架构）迁移至云数据库MongoDB版（副本集架构或分片集群架构）。支持的源和目标数据库 源数据库（副本集架构）目标数据库（副本集架构、分片...
断点续传下载
在下载OSS大文件（超过5 GB）到本地的过程中，如果出现网络中断、程序异常退出等问题导致文件下载失败，甚至重试多次仍无法完成下载，您需要使用断点续传下载的方式下载大文件。断点续传下载将需要下载的大文件分成多个较小的分片并发下载...
基本概念
合理的shard规划能够防止因业务不明确，导致分片庞大消耗Elasticsearch本身性能的问题，详细信息请参见 规格容量评估。gateway gateway代表Elasticsearch索引快照的存储方式，Elasticsearch默认优先将索引存放到内存中，当内存满时再将这些...
历史版本常见问题
版本范围 5.4.1-*5.4.12-16444832（不包含）查询分片缺失及查询数据不正确问题 现象描述 在小于等于负整数的范围查询场景中，当分库分表列的类型是整数时，对于类似id的范围查询，分库分表路由结果会有概率出现个别分表缺失，导致数据扫描...
Range分片
例如，客户端向 全站加速 DCDN 节点发起的请求中含有 range:0-100，则 全站加速 DCDN 节点会按照512 KB分片大小向源站发起请求，源站响应了这个512 KB分片大小的内容后，全站加速 DCDN 节点会缓存该分片，并响应 range:0-100 的内容给客户...
云数据库MongoDB版（单节点架构）全量迁移至云数据库...
如目标 云数据库MongoDB版 为分片集群架构，您需要根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片...
开源Elasticsearch FAQ
当出现分片丢失、分片错误等分片问题时，您可以执行以下命令进行reroute操作。curl-XPOST 'localhost:9200/_cluster/reroute'-d '{"commands":[{"move":{"index":"test","shard":0,"from_node":"node1","to_node":"node2"} },{"allocate":{...
云数据库MongoDB版（单节点架构）全量迁移至云数据库...
如目标 云数据库MongoDB版 为分片集群架构，您需要根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片...
步骤1：创建实例
实例的分片数最少为2个，创建实例时的分片数上限为128个，如需更多分片，可在创建实例后增加分片，更多信息请参见 调整实例的分片数量。在不启用集群时，配置是否开启 读写分离。若不开启 读写分离，实例为 主从（master-replica）双副本...
分片上传
如果在文件小于100 MB的情况下使用分片上传，且partSize设置不合理的情况下，可能会出现无法完整显示上传进度的情况。对于小于100 MB的文件，建议使用简单上传的方式。以下代码以分片上传的方式将文件上传至examplebucket下的exampleobject...
分片上传
在上传大文件（超过5 GB）到OSS的过程中，如果出现网络中断、程序异常退出等问题导致文件上传失败，您需要使用分片上传的方式上传大文件。分片上传通过将待上传的大文件分成多个较小的碎片（Part），充分利用网络带宽和服务器资源并发上传...
文件上传
常见问题 文件分片的上传地址过期了 文件分片的上传地址是有时效的，目前有效期为 1 个小时，如果 1 个小时后再进行上传（比如用户暂停后，断点续传场景），则上传接口会返回 403。此时可以调用 ListUploadedParts-列举已上传分片，重新...
聚类分片
Proxima CE支持使用聚类分片方式检索任务，本文为您介绍聚类分片检索功能的使用方法及示例。前提条件 已安装Proxima CE包并准备输入表，详情请参见 安装Proxima CE包。基本原理 Proxima CE在检索时有两种划分数据分片的方式：哈希分片与聚...
计划内事件常见问题
重要 如果实例为集群或读写分离架构，涉及切换的每个分片均会出现连接闪断和30秒内的只读状态。会短暂影响 DMS 和 DTS 的使用，完成迁移后会自动恢复正常。完成迁移 实例对应的任务从计划内事件中被移除。无影响，实例的可用区、账号、网络...
计划内事件常见问题
重要 如果实例为集群或读写分离架构，涉及切换的每个分片均会出现连接闪断和30秒内的只读状态。会短暂影响 DMS 和 DTS 的使用，完成迁移后会自动恢复正常。完成迁移 实例对应的任务从计划内事件中被移除。无影响，实例的可用区、账号、网络...
如何高效使用IN查询
另外，PolarDB-X 内部针对跨分片的查询会有一个Parallel Query执行，例如涉及32个分片，针对每个用户查询，会有节点CPU内核数大小的并发度，例如分布式下单个节点规格为16core时，默认并发数就是16个，即32个分片会分成2批才能执行完成。...
同步时源库为MongoDB的注意事项及限制
MongoDB分片集群为源的单向同步不支持源端做分片的扩缩容，双向同步源和目标都不支持分片数量的扩缩容，否则会导致DTS任务失败。源MongoDB分片集群实例的Mongos节点的数量不能超过10个。暂不支持同步包含TTL（Time To Live）索引的集合。若...
步骤1：创建实例
实例的分片数最少为2个，创建实例时的分片数上限为128个，如需更多分片，可在创建实例后增加分片，更多信息请参见 调整实例的分片数量。分片规格 即实例的分片规格，标准版实例仅包含一个分片。每种规格都有对应的内存大小、连接数上限、...
在IN查询中如何选择Values个数
另外，PolarDB-X 1.0 内部针对跨分片的查询会有一个Parallel Query执行，例如涉及32个分片，针对每个用户查询，会有节点CPU内核数大小的并发度，例如分布式下单个节点规格为16core时，默认并发数就是16个，即32个分片会分成2批才能执行完成...
阿里云Elasticsearch实例FAQ
变更节点数后，集群会自动重新规划分片吗？ES支持变更云盘类型吗？ES支持将其他类型的节点变为冷数据节点吗？升级了实例规格后，可以降低配置吗，如何操作？业务量临时突增，如何变更集群配置，来保证业务正常进行？升配集群时，提示...
ES节点连接报错|ES集群状态异常
但在某些场景下，重启过程中可能会出现访问超时，例如强制重启并发度高、集群负载很高并且已经存在集群访问不可用的情况、没有副本分片、在重启或强制重启过程中存在大量的写入和查询等场景，建议重启前先在客户端设计好重试机制并且在业务...
库表数太多导致实例卡顿或异常
说明 库表数量多不一定会出现问题，是否出现问题与业务模型和负载等因素也有关系。例如以下两种业务场景，数据库规格相同且都有1万的库表数和10万的总文件数，但面临的问题完全不一样：会计软件系统：访问具备明显的聚集性特征，大多数库表...
TairRoaring性能白皮书
测试4个不同分片数的内存型集群版实例，每个分片均为4 GB，规格如下：8 GB集群版（2分片）16 GB集群版（4分片）32 GB集群版（8分片）64 GB集群版（16分片）为避免测试场景存在网络带宽干扰，将所有集群的带宽均升级至最大（2048 MB/s）。...
升级数据库大版本
升级过程中，分片集群实例的平衡器将被关闭，升级完成后会被重新打开。升级数据库大版本所用时间与数据库的数据量有关，请根据业务情况提前安排升级时间。升级数据库大版本后不支持降级数据库大版本。升级数据库大版本后，低版本的备份数据...
分片上传
OSS提供的分片上传（Multipart Upload）功能，将要上传的较大文件（Object）分成多个分片（Part）来分别上传，上传完成后再调用CompleteMultipartUpload接口将这些Part组合成一个Object来达到断点续传的效果。注意事项 本文以华东1（杭州）...
部署和使用跨可用区实例
配置说明 部署时，系统会自动为跨可用区实例配置与分片分配策略相关的集群配置。详细信息，请参见 Shard allocation awareness。例如，跨可用区实例部署在可用区cn-hangzhou-f和cn-hangzhou-g，则集群配置相关的参数说明如下。参数 说明 ...
云数据库MongoDB版（分片集群架构）同步至云数据库...
数据传输服务DTS（Data Transmission Service）支持将MongoDB（分片集群架构）的数据同步至MongoDB（副本集架构或分片集群架构）。本文以 云数据库MongoDB版 实例间的数据同步为例，为您介绍操作步骤。前提条件 已创建目标 云数据库MongoDB...
云数据库MongoDB版（分片集群架构）同步至云数据库...
数据传输服务DTS（Data Transmission Service）支持将MongoDB（分片集群架构）的数据同步至MongoDB（副本集架构或分片集群架构）。本文以 云数据库MongoDB版 实例间的数据同步为例，为您介绍操作步骤。前提条件 已创建目标 云数据库MongoDB...
集群负载不均问题的分析方法及解决方案
从结果可以看到查询请求都是普通的term查询，且主日志正常，可以排除ES集群本身出现问题以及存在消耗CPU的查询语句的情况。总结 通过以上分析，可以判断CPU负载不均主要是由于shard分布不均导致的。重新分配分片，确保主shard数与副shard数...
缩容集群数据节点
如果集群负载过高且索引没有副本，同时在缩容过程中存在大量写入或查询等情况，在缩容过程中可能会出现访问超时的问题。建议在缩容前，在客户端中配置好重试机制，减小对业务的影响。缩容数据节点 登录 阿里云Elasticsearch控制台。在左侧...
MongoDB 4.4
变更分片集群实例配置 变配过程中，可能会出现1~2次闪断现象，每次约30秒。您可以按需设置变更生效时间，避免影响业务运行。变更配置的完成时间与多种因素（如网络、任务队列、数量大小）有关，建议您在业务低峰期执行变配操作，并确保您的...
- 产品推荐
- 这些文档可能帮助您