读写分离版
例如规格为 读写分离1G版（1节点3只读）表示该实例具备1个数据分片，该数据分片中包含3个只读节点。规格 InstanceClass（API 使用）CPU核数 只读节点数 带宽（MB/s）每秒新建连接数上限 最大连接数 QPS参考值 读写分离1G版（1节点1只读）...
单链接限速
客户端访问OSS内的文件（Object）时会占用较大带宽，在某些不容易控制流控的客户端上可能会对其他应用造成影响。为避免此类问题，您可以通过OSS提供的单链接限速功能在上传、下载文件等操作中进行流量控制，以保证其他应用的网络带宽。...
上传文件
partInfo IUpPartInfo 是 当前完成的分片信息。state 状态说明 上传任务状态有 12 种：状态 说明 waiting 等待中。任务创建后的默认状态。调用 wait()方法触发。start 开始上传。调用 start()方法触发。created 创建 PDS 临时文件后触发。...
分片网关
在拓扑任务中，您可以添加分片网关并设定相应的分片维度。如此，拓扑任务在执行过程中，即可根据执行上下文获取的分片配置，动态生成需要执行的分片。本文将快速引导您如何在拓扑任务中使用分片网关。操作步骤 创建拓扑子任务。创建两个或...
cluster子句
一些例子：#查询hash字段内容为123，456对应的分片的内容 {"cluster":{"hash_field":["123","456"]} }#查询hash字段内容为abc对应的分片的内容 {"cluster":{"hash_field":["abc"]} } 指定分片ID查询 {"cluster":{"part_ids":[]} } 如果知道...
【通知】1月15日分片集群实例上线只读节点
如何使用 创建新的分片集群实例：您可以在创建新实例的过程中增加Shard节点中只读节点的个数。更多信息，请参见 创建分片集群实例。变更存量分片集群实例：您可以通过调用 CreateNode 或 ModifyNodeSpec 接口来增减包年包月分片集群实例的...
cluster子句
一些例子：#查询hash字段内容为123，456对应的分片的内容 {"cluster":{"hash_field":["123","456"]} }#查询hash字段内容为abc对应的分片的内容 {"cluster":{"hash_field":["abc"]} } 指定分片ID查询 {"cluster":{"part_ids":[]} } 如果知道...
内存型（读写分离架构）
说明 当代理模式使用PUBSUB类型订阅命令、BLOCK类型命令、事务命令时，代理模式会给客户端连接建立独享的后端连接，此时连接无法聚合，最大连接数会受到数据节点单个分片的最大连接数限制（30,000）。每秒新建连接数 每秒新建连接数上限即...
自动增加分片
当Redis数据库实例数据规模增大、读写流量暴增时，通过自动增加分片功能，可以快速弹性适配可用内存不足的情况，确保实例内存利用率处于...相关文档 当您需要减少Redis数据库实例的分片时，需要手动进行操作，详情请参见 调整实例的分片数量。
快速扩缩分片
时再进行扩列：完成配置后，提示成功，点击【查看变更历史】跳转至对应页面：查看变更历史：注意事项 快速扩缩分片之后会自动触发一次索引重建，这时候由于分片数量变化了，索引的变化阈值会超出限制，需要用户自己去变更历史里面点一下 ...
云数据库Redis变配提示“The direct custins trans ...
如需从2分片直接变配至8分片，可采用以下任一方法规避此限制：先将2分片的实例变配至4分片，变配完成后再其变配至8分片。先释放直连地址，然后再执行变配操作，可直接变配至8分片。如何释放直连地址，请参见 释放直连地址。适用于 云数据库...
排查Redis实例内存使用率高的问题
如果您的实例为标准版，扩容内存规格后仍无法解决内存使用率高的问题，可以考虑升级为集群版，将数据分布到多个数据分片节点上，减轻单个数据分片节点的内存压力。详情请参见 变更实例配置。排查是否创建大量新连接 排查方法：查看 Redis ...
【通知】分片集群DynamoDB协议兼容版实例停止新购
如果您有 云数据库 MongoDB 版 分片集群的使用需求，可以购买MongoDB协议版本的分片集群实例。停售时间 2024年01月02日 停售影响 您将无法在 云数据库 MongoDB 版 售卖页新购MongoDB 4.0版分片集群DynamoDB协议兼容版实例。不支持通过克隆...
下载文件
partInfo IDownPartInfo 是 当前完成的分片信息。state 状态说明 下载任务状态有 10 种：状态 说明 waiting 等待中。任务创建后的默认状态。调用 wait()方法触发。start 开始下载。调用 start()方法触发。created 创建本地临时文件后触发。...
下载文件
partInfo IDownPartInfo 是 当前完成的分片信息。state 状态说明 下载任务状态有 10 种：状态 说明 waiting 等待中。任务创建后的默认状态。调用 wait()方法触发。start 开始下载。调用 start()方法触发。created 创建本地临时文件后触发。...
查询文件
大文件分片查询 和 GetObject 提供的基于Byte的分片下载类似，SelectObject 也提供了分片查询的机制，包括以下两种分片方式：按行分片：常用的分片方式，然而对于稀疏数据来说，按行分片可能会导致分片时负载不均衡。按Split分片：Split是...
召回引擎版介绍
Searcher上的索引是可以分片的，分片的含义是对分片字段哈希到[0,65535]之间，将这个区间分成指定的片数（构建索引时指定）。这样对于数据量较大或者对查询性能有要求的集群，就可以通过分片提高单次请求的处理性能。如果想提高整个集群的...
0005-00000411
问题描述 客户端加密场景下CompleteMultipartUpload 时指定的分片数目不符合预期。问题原因 客户端加密场景下，在InitiateMultipartUpload时需要指定客户端预期的数据大小以及分片大小，服务端会根据设定的数据大小以及分片大小计算出预期...
断点续传上传时报错Too many parts,Please increase ...
问题原因 分片数量超出限制，分片数量要求不能超过10000。解决方法 您需要适当增加每个分片的大小，确保文件总大小除以每个分片大小的值小于10000。其中，每个分片大小的取值范围为100 KB~5 GB。更多信息，请参见 UploadPart。
分片上传
bucket.abort_multipart_upload(key,upload_id)列举已上传的分片信息 以下代码用于列举已上传的分片信息：#-*-coding:utf-8-*-import os import oss2 from oss2.credentials import EnvironmentVariableCredentialsProvider#从环境变量中...
选型介绍
集群评估 智能召回引擎BE采用分布式集群架构，主要由三部分组成：...分片数 智能召回引擎BE支持多分片，将海量数据索引进行hash分列，可以方便存储到固定存储的分片上。具体的分片计算公式，如下：分片数=存储量GB/每个分片规格的磁盘量/2；
何时开始对简单上传和分片上传进行数据计量？
对于简单上传方式，仅当文件成功上传...对于分片上传方式，大文件被切分为多个分片进行上传，只要分片被创建并成功上传，无论最终文件是否上传完成，都将对已上传的分片进行数据计量。如需查询OSS按小时计量的数据信息，请参见 OSS小时数据。
创建实例
智能召回引擎当前只在北京区域部署 分片规格，用户可根据自己的数据规模和服务查询量选择合适的分片规格，购买后不支持修改。2核8G CPU2 core，MEM 8G 4核16G CPU4 core，MEM 16G 8核32G CPU8 core，MEM 32G 16核64G CPU16 core，MEM 64G ...
修改表
或至少一个索引表分片数为1，其余索引表分片数一致 数据节点使用达到上限时，无法进行扩容分片操作，需要进行扩容数据节点，扩容完成后保证 表的分片个数数据节点个数 时才能进行扩分片操作。扩容操作可参考 扩缩容 校验数据源信息后，点击...
0042-00000213
CompleteMultipartUpload时会确认除最后一个Part以外所有Part的大小是否都大于或等于100 KB，您的请求中提交的XML中包含的Part分片信息存在不满足该要求的情况，即存在某个不是末尾Part的分片大小小于100 KB，导致校验不通过。问题示例 ...
分片上传
OSS提供的分片上传（Multipart Upload）功能，将要上传的较大文件（Object）分成多个分片（Part）来分别上传，上传完成后再调用CompleteMultipartUpload接口将这些Part组合成一个Object来达到断点续传的效果。注意事项 本文以华东1（杭州）...
使用Java SDK上传文件
可指定分片上传时每个分片的大小，默认为2M字节*/request.setPartSize(2*1024*1024L);可指定分片上传时的并发线程数，默认为1，（注：该配置会占用服务器CPU资源，需根据服务器情况指定）*/request.setTaskNum(1);是否开启断点续传,默认...
选型介绍
类型 目前阿里云图计算引擎支持三种独享分片规格购买：...分片数 目前图计算引擎iGraph默认支持多分片，将海量数据索引进行hash分列，可以方便存储到固定存储的分片上。具体的分片计算公式，如下：分片数=存储量GB/每个分片规格的磁盘量/2；
2023年
2023-03-31 申请Shard或ConfigServer节点连接地址 分片集群架构支持添加只读节点 新特性 云数据库MongoDB自2023年3月15日起，MongoDB 4.4及以上版本的分片集群架构的实例上线只读节点功能。您可以在创建分片集群实例或添加Shard节点时选择0...
0042-00000108
问题描述 请求参数中partNumber对应的分片已经存在且不能被覆盖。问题原因 您发起了UploadPart请求来上传分片，并在请求参数中通过partNumber指定了分片的序号，但是您提供的partNumber对应的Part已经存在了，不能重复上传。问题示例 比如...
释放公网连接地址
前提条件 实例为单节点实例、副本集实例、协议类型为MongoDB的分片集群实例或Serverless实例。注意事项 释放实例或节点的公网连接地址后，将无法继续通过原有的公网连接地址连接该实例或节点。释放公网连接地址后，为保障数据安全性，建议...
集群动态配置
参数 说明 cluster.routing.allocation.balance.index 在特定节点上分配的每个索引的分片数量权重因子，默认为0.55f。提高该参数值，会增加在集群中所有节点上均衡每个索引的分片数的趋势。搜索场景下提高该参数值，例如提高到0.8f，可以使...
使用ossfs进行数据拷贝时提示“Input/output error”...
问题描述 使用ossfs将阿里云对象存储OSS的存储空间...如果您想要将OSS文件下载到ECS实例中，或者从本地ECS实例上传文件到OSS中，可以通过ossutil的分片上传、下载进行操作，详情请参见 ossutil上传、下载、拷贝文件的方法。适用于 对象存储OSS
基本概念
Elasticsearch 7.0以下版本默认为一个索引创建5个主分片，并分别为每个主分片创建1个副本分片，7.0及以上版本默认为一个索引创建1个主分片和1个副本分片。两者区别如下：分片类型 支持处理的请求 数量是否可修改 其他说明 主分片 支持处理...
规格查询导航
读写分离架构：内存容量上限可达64 GB，支持约1,800,000 QPS 集群架构：内存容量上限可达16,384 GB（64 GB*256分片数），实例整体的性能=分片数*各分片的规格对应的性能。同时，内存型额外支持 经典 版实例：内存型（标准架构）：采用多...
管理索引表
numShards 索引表的分片个数，建议设置为节点个数的整数倍。例如，搜索引擎有2个节点，numShards 可以设置为2或4，同时请注意 MaxShardsPerNode 的限制。replicationFactor 每个索引表的分片副本个数，默认值为1。maxShardsPerNode 设置每...
2022年
2022-07-20 创建副本集实例 创建分片集群实例 创建多可用区副本集实例 创建多可用区分片集群实例 2022年06月 功能名称 功能描述 发布时间 相关文档 按量付费的分片集群实例支持配置只读节点 新特性 云数据库MongoDB支持在创建按量付费的分...
0042-00000313
问题描述 请求参数中partNumber对应的分片已经存在且不能被覆盖。问题原因 您发起了UploadPartCopy请求来从一个已存在的Object中拷贝数据来上传一个Part，其中UploadId参数指定了进行中的分片上传任务，请求参数partNumber指定了分片的序号...
指定大小计算分片
使用ComputeSplitsBySize接口可以将全表数据逻辑上划分成若干接近指定大小的分片，并返回这些分片之间的分割点以及分片所在机器的提示。一般用于计算引擎规划并发度等执行计划。说明 API说明请参见 ComputeSplitPointsBySize。前提条件 已...
任务拓扑相关问题
问题原因 拓扑分片网关中的分片规则不符合要求。分片规则只支持正整数或 Collection类型。解决方案 修改分片规则，使用正整数或在自定义参数中定义 Collection类型的参数。节点暂停失败 问题现象 出现 can not suspend job that is ...
- 产品推荐
- 这些文档可能帮助您