CreateElasticPlan-创建分时弹性计划
调用CreateElasticPlan创建分时弹性计划。该接口仅适用于ADB弹性模式集群版（新版）。接口说明 使用说明 该接口仅适用于 AnalyticDB MySQL 数仓版（3.0）弹性模式集群版（新版）32 核及以上规格的集群。调试 您可以在OpenAPI Explorer中...
单元化介绍
在当今的互联网业内，很多大型互联网系统，比如淘宝、支付宝、网商银行等，都已经实现了单元化架构，并从中获益匪浅，更多企业正加入其中。为什么要做单元化，单元化架构能给系统带来什么样的能力。本文结合蚂蚁集团支付宝系统的单元化架构...
基础术语
多个数据分片可以在多台机器上调度执行，也可以在一台机器的多个线程上调度执行，具体调度方式由调度中心根据负载进度进行调整。使用任务分片可以缩短任务执行时间，同时也可以解决单机计算能力上限的问题，并降低部分任务失败对整体系统的...
DescribeElasticDailyPlan-查询分时弹性计划日计划...
调用DescribeElasticDailyPlan接口查询分时弹性计划日计划执行信息。该接口仅适用于ADB弹性模式集群版（新版）。接口说明 使用说明 该接口仅适用于 AnalyticDB MySQL 数仓版（3.0）弹性模式集群版（新版）32 核及以上规格的集群。调试 您...
分片上传
OSS提供的分片上传（Multipart Upload）功能，将要上传的较大文件（Object）分成多个分片（Part）来分别上传，上传完成后再调用CompleteMultipartUpload接口将这些Part组合成一个Object来达到断点续传的效果。背景信息 当需要上传的文件较...
概念原理
多个数据分片可以在多台机器上调度执行，也可以在一台机器的多个线程上调度执行，具体调度方式由调度中心根据负载进度进行调整。使用任务分片可以缩短任务执行时间，同时也可以解决单机计算能力上限的问题，并降低部分任务失败对整体系统的...
基本概念
集群任务 Cluster task，支持在单个执行步骤中把数据拆分成多个数据分片（data chunk），把一个任务的数据分散到不同的机器上运行。适用于数据量很大的业务场景。调度过程分为拆分阶段和执行阶段。节点 节点（Node）表示一台装了 Docker 和...
分片上传
OSS提供的分片上传（MultipartUpload）功能，将要上传的较大文件（Object）分成多个分片（Part）来分别上传，上传完成后再调用CompleteMultipartUpload接口将这些Part组合成一个Object来达到断点续传的效果。注意事项 在分片上传之前，请...
GetVulStatistics-查询资产分组下的漏洞数量
查询一个或多个资产分组下的漏洞数量统计值。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略...
聚类分片全链路测试
测试结论 Proxima CE在不同的数据集上，针对不同的采样率、聚类中心点个数以及索引分片个数，观察聚类分片方式的召回情况与耗时情况，经测试验证Proxima CE聚类分片的正确性测试符合预期。以下是几条经验准则：聚类中心点个数与召回呈正...
通过_split API快速拆分主分片
当您使用Elasticsearch集群出现索引分片设置不合理（例如索引主分片设置不合理、每个分片存在大量数据等）引发集群性能问题时，可通过_split API在线扩大主分片数，将现有索引拆分为具有更多主分片的索引。本文介绍如何通过_split API快速...
CREATE DATABASE AS（CDAS）语句
示例二：分库合并同步 对于分库合并同步的场景，需要利用正则表达式的库名来匹配所要同步的多个分库。使用CDAS可以将上游多个分库下相同表名的数据合并同步到Hologres目标库对应表名的同一张表中，库名和表名会作为额外的两个字段写入到每...
应用场景
您可以依赖设定的目录关系对资源进行统一管控，解决以下场景中的问题：按照企业的多个分公司、部门的组织关系进行资源管控。例如：资源配置、访问权限以及操作追踪等企业安全生产管理。按照业务所需的项目来配置目录结构，实现企业对项目的...
基本概念
更多信息，请参见 分片上传。Appendable 通过追加上传生成的Object。追加上传可在视频数据产生之后即时将数据上传至同一个Object。追加上传适用于视频监控、视频直播等领域生成的实时视频流场景。更多信息，请参见 追加上传。重要 不支持在...
如何处理Tair集群数据倾斜
在 Tair 集群中，若个别数据分片节点（Data Node）的内存使用率或CPU使用率、带宽使用率、延时等性能指标远远高于其他数据分片，该 Tair 集群可能已产生数据倾斜。数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出...
如何处理Redis集群数据倾斜
在 Redis 集群中，若个别数据分片节点（Data Node）的内存使用率或CPU使用率、带宽使用率、延时等性能指标远远高于其他数据分片，该 Redis 集群可能已产生数据倾斜。数据倾斜严重时，会导致实例在整体内存使用率不高的情况下，发生内存逐出...
Sharding 功能介绍
Sharding 是把数据库横向扩展到多个物理节点上的一种有效的方式。如果将一个数据库当作一块大玻璃，将块玻璃打碎的过程就叫 Sharding（可以翻译为分片，也称为分库），每一小块都称为数据库的碎片（DatabaseShard）。分库分表规则 Hash 取...
定制排序模型特征配置规范
从map中匹配 combiner 否 string sum mean max min 存在多个相同key时，通过combiner组合多个查到的值，默认为sum overlap_feature（匹配重叠特征）用来输出一些字符串字词匹配信息的feature 参数名 是否必须 类型 示例值 取值范围 描述 ...
配置用户权限
RAM提供了一种长期有效的权限控制机制，通过分出不同权限的RAM用户，将不同的权限分给不同的用户，即使RAM用户的AccessKey泄露也不会造成全局的信息泄露。RAM用户一般情况也是长期有效的。因此RAM用户的AccessKey也不能泄露。相对于RAM提供...
GetSuspiciousStatistics-查询资产分组下的安全告警...
查询一个或多个资产分组下的安全告警数量统计值。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限...
召回引擎版介绍
扩备份不是只扩一个Searcher节点，而是扩承载所有数据的多个Searcher节点（多个分片要做成完整的[0,65535]区间）。 离线索引构建系统 OpenSearch-召回引擎版是一个读写分离的搜索引擎，数据的写入不影响在线检索服务，所以能够在支撑大批...
分片上传
OSS提供的分片上传（Multipart Upload）功能，将要上传的较大文件（Object）分成多个分片（Part）来分别上传，上传完成后再调用CompleteMultipartUpload接口将这些Part组合成一个Object来达到断点续传的效果。注意事项 使用本文示例前您...
集群容量规划
每个索引被分成多个分片，数据写入时会基于文档ID自动哈希打散到不同的分片中，在设置分片个数时，通常的建议如下：建议单个分片大小保持在20GB~50GB之间。建议分片数量为节点个数的整数倍，例如实例有2个节点，则创建的索引分片设置为2。...
基本概念
分区表 分区表，又称普通表，根据分布键将表的数据拆分为多个分片，分片分散在各个存储节点上。再根据分区键，将每个分片拆分为不同的分区。分区表能够利用分布式系统的查询优势，查询效率高。分区表可存储的数据量较大，通常可以存储千万...
PolarDB并行查询
在join的表集合中，寻找一个可以做逻辑分片的表做拆分，如果3个表都不足以拆分足够多的分片，那就选最多的表，比如这里选择了t2，它可能拆出12个分片，但仍然无法满足并行度16的要求，导致有4个worker读不到数据而idle。聚集操作先在worker...
配置报警规则
primary 分片的属性，取值如下：true：主分片 false：副本分片 空：主分片和副本分片 高级配置 参数 说明 指标聚合 如果 tags 中存在多个取值，系统将生成多条曲线。指标聚合 用来定义多个曲线合成一条曲线的算法。支持算法：sum()、avg()...
上传相关
支持，如果需要做分片上传，可以将一个文件分成多个分片，目前断点的最细粒度为一个分片，单个分片内部不支持断点。常见文件上传失败的原因？如果是托管模式，可能是浏览器跨域问题导致的，检查下 OSS Bucket 是否设置了正确的跨域规则。有...
使用Connection String URI连接分片集群实例
MongoDB分片集群实例提供各个mongos节点的连接地址，通过连接mongos节点，您可以连接至分片集群实例的数据库。需要注意的是，您需要使用正确的方法连接分片集群实例来实现负载均衡及高可用。背景信息 MongoDB分片集群（Sharded Cluster）...
文件上传
文件上传限制 单个文件分片最大限制 5GB 因服务端使用流式计算SHA1值，单个文件的分片需要串行上传，不支持多个分片并行上传 分片不允许覆盖 文件上传时限 文件从开始上传到最后完成上传，需要在 10 天内完成，超过10 天后本次上传流程会被...
如何上传大文件到OSS？
加速上传：要上传到OSS的本地文件很大的时候，可以并行上传多个分片以加快上传速度。更多信息，请参见：分片上传 和 断点续传上传。方式二：使用ossbrowser工具上传 ossbrowser工具的使用说明如下：ossbrowser支持临时授权码登录。当前登录...
表设计
多元索引在数据分布上本身会进行一次散列，分成多个分片，查询时自动从多个分片合并数据。其它主键设计建议 同一个分区键（分区键为第一列主键列）下数据不宜过多，例如10GB内（无硬性限制），因为相同分区键的行无法再进行分裂。这里相同...
入门概述
分片集群实例是基于多个副本集（每个副本集使用三节点主从模式+0~5个只读节点）组成，提供Mongos、Shard、ConfigServer三个组件，您可以自由地选择Mongos和Shard节点的个数和配置，无限扩展性能及存储空间，组建不同能力的分片集群实例。...
基本概念
本文介绍 云原生多模数据库 Lindorm 帮助文档中的相关名词和术语的解释。A 安全组 安全组是一种虚拟防火墙，用于控制安全组中的ECS实例的出入流量。在Lindorm实例的白名单中添加安全组后，该安全组中的ECS实例就可以访问Lindorm实例。更多...
应用配额与服务限制
分片 Elasticsearch分布式搜索会把一个完整的索引存储在多个分片中，并支持自动管理和组织分片，在必要的时候对分片数据进行再平衡分配。分片的数量只能在索引创建前指定，索引创建后不能更改。副本 Elasticsearch可以设置多个索引的副本分...
产品优势
云数据库MongoDB版（ApsaraDB for MongoDB）是阿里云基于飞天分布式系统和高可靠存储引擎研发的完全兼容MongoDB协议，并支持多节点高可用架构、弹性扩容、容灾、备份恢复、性能优化等功能的文档数据库服务。灵活的部署架构 云数据库MongoDB...
分片上传
OSS提供的分片上传（Multipart Upload）功能，将要上传的较大文件（Object）分成多个分片（Part）来分别上传，上传完成后再调用CompleteMultipartUpload接口将这些Part组合成一个Object来达到断点续传的效果。注意事项 本文以华东1（杭州）...
基本概念
这些ClickHouse Server根据购买规格的不同而可能包含1个或多个副本（Replica）、1个或多个分片（Shard）。在逻辑构成上，一个ClickHouse集群可以包含多个数据库（Database）对象。副本配置（Edition）ClickHouse集群包含如下副本。双副本版...
查看选项
分片模式上传时，最多的分片数为10000，默认值下，最大的支持文件为100 GB。如果需要支持更大的文件，需要根据需求调整这个值。url 指定存储空间的访问域名。mp_umask 用来设定挂载点的权限掩码，只有当 allow_other 选项设置后，该选项才...
数据埋点指南
如下图中每个tag页为一个不同场景：总结来说：召回用什么场景ID，回传行为的时候就回传什么ID TAGS埋点 什么是tags TAGS对应的是user表和item表中的tags字段，是指您对内容（item）提炼的特征的文本描述，多个tags之间直接以英文逗号分隔。...
扫描全部/部分分库分表
除了可以将SQL单独下发到一个或多个分库执行，PolarDB-X 还提供了扫描全部/部分分库与分表的 SCAN HINT。使用 SCAN HINT，您可以一次将SQL下发到每一个分库执行,比如查看某个分库上的所有分表，或者查看某个逻辑表的每张物理表中的数据量等...
- 产品推荐
- 这些文档可能帮助您