MongoDB 分片集群介绍
将未分片的集合转换为分片集合，如果集合容量太大，需要（数据量达到T级别才有可能遇到）调大chunk size才能转换成功。具体方法请参见 Sharding Existing Collection Data Size。关于负载均衡 MongoDB分片集群的自动负载均衡目前是由mongos...
备份费用
当您使用 数据库备份DBS 备份数据时，DBS会根据备份的数据量进行计费。备份费用支持按量付费与包年包月（预付费）两种计费方式。按量付费 仅在DMS中使用 数据归档 时，系统会创建按量付费的备份计划，DBS会根据实际备份的数据量进行收费。...
Query级别诊断结果
查询返回客户端的数据量较大 查询消耗的内存资源较大 查询生成的Stage个数较多 查询读取的数据量较大 查询返回客户端的数据量较大 问题 大量数据返回到客户端会导致慢查询，还会占用部分网络前端资源。说明 您可以在查询详情页面的 查询...
如何选择备份计划规格
计费公式如下：包年包月（预付费）计费=备份规格基本费用+（实际产生的数据量-免费额度数据量）x 对应收费标准 说明 各规格收费标准，请参见 规格计费标准。例如，A公司的数据库大小为150 GB，计划进行4次/月的全量备份，预计当月总备份量...
计费概述
计费方式 计费类别 说明 适用场景 相关文档 按计算资源付费 数据湖分析CU版根据购买的CU规格进行计费，费用跟运行查询扫描的数据量没有关系。计费模式如下。包年包月。按量付费。适用于查询频率高、查询数据量较大的场景，同时也能够给您...
按扫描量付费
当您通过DLA对本地或第三方数据源中的数据进行关联分析，DLA会根据扫描的数据量进行计费。本文主要介绍按扫描量付费DLA的计费规则 和计费示例。计费规则 计费时，DLA保证扫描的每条数据至少为32MB。DLA每小时生成一个收费订单，并从您的...
DescribeTableStatistics-查询表统计信息
说明 总数据量的计算，以下 2 个公式都成立。计算公式 1：总数据量=热数据量+冷数据量，计算公式 2：总数据量=表记录数据量+普通索引数据量+主键索引数据量+其他。1577 HotDataSize long 热数据量，单位：Byte。1048576 OtherSize long ...
购买方式2：按量付费
由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上），我们推荐配合存储包一起使用，能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。说明 存储包分为 中国内地通用 和 中国香港及海外通用 两...
购买方式2：按量付费
由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上），我们推荐配合存储包一起使用，能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。说明 存储包分为 中国内地通用 和 中国香港及海外通用 两...
扫描量版本与CU版本的差异
扫描量版本 DLA默认版本，适用于查询频率低、查询数据量较小的场景，使用扫描量版本您只需要为实际扫描的数据量付费，当您不使用时是不付费的。费用详情请参见 按扫描量付费。CU版本 适用于查询频率高、查询数据量较大的场景，同时也能够给...
Redis Proxy特性说明
当请求中包含以下命令时，Proxy会根据命令的处理需求在相应的数据分片上创建额外的连接，此时连接无法聚合，实例的最大连接数和每秒新建连接数都会受到数据节点单个分片的限制（单个分片的限制请参见具体的实例规格）。您需要合理使用下述...
Tair Proxy特性说明
当请求中包含以下命令时，Proxy会根据命令的处理需求在相应的数据分片上创建额外的连接，此时连接无法聚合，实例的最大连接数和每秒新建连接数都会受到数据节点单个分片的限制（单个分片的限制请参见具体的实例规格）。您需要合理使用下述...
ListDoctorHiveTables-批量获取Hive表分析结果
Day growth count of empty files HotDataDayGrowthSize object 热数据的数据量日增量大小。热数据指的是 7 日内有访问的数据。Name string 指标名称。hotDataDayGrowthSize Value long 指标值。203431 Unit string 指标单位。MB ...
同步Redis后出现数据不一致
info keyspace 的输出结果中：keys 表示所有keys的数据量。expires 表示带有过期keys的数据量，包含未过期和已过期的keys的数量。因此，通过 expires 来判断数据量时，逻辑上已经过期但未被Redis删除的keys也会被统计进来，从而出现了源端...
使用执行计划分析查询
诊断结果 单击执行计划树中某个Stage（如 Stage[1]），即可在右侧查看对应Stage的 诊断结果 详情，包括如下两类诊断：Stage诊断：这类诊断结果包含了对目标Stage诊断结果的详细说明，包括诊断出的问题（如存在较大的数据量被广播或数据倾斜...
性能测试
测试结果 本次性能测试的结果如下：时空轨迹数据的写入耗时 Lindorm Ganos引擎继承了Lindorm宽表引擎高效的数据写入能力，写入耗时约为开源GeoMesa（HBase）的1/2，约为云数据库MongoDB分片集群的1/5。以时空轨迹数据为7.6 GB为例，写入...
资产全景
机器学习PAI模型训练绑定的MaxCompute项目的数据量、外部项目计算源的数据量的不纳入计算。仅统计生产项目（包括 prod 和 basic 项目），T+1 更新。总数据表数：生产环境所有物理表和逻辑表总数，实时更新。总项目数：生产项目数（包括prod...
按量付费标准版
通常，压缩后的数据量与上传数据之前您自己统计的数据量不同，会被压缩至原数据量的五分之一。详细计费规则请参见 存储费用。上传数据资源 数据上传至MaxCompute不产生费用。下载数据资源 仅对通过公网下载的数据按量收费，详细计费规则请...
ListDoctorHDFSDirectories-批量获取HDFS目录分析结果
Day growth ratio of cold data size FreezeDataSizeDayGrowthRatio object 极冷数据的数据量大小日环比。极冷数据指的是 90 日以内都没有访问的数据。Name string 指标名称。freezeDataSizeDayGrowthRatio Value float 指标值。0.09 Unit ...
技术发展趋势
IDC在《Data Age 2025》的报告中预测，从2018年到2025年，全球数据将从33ZB急速增长到175ZB，比2016年产生的数据量增加了十倍。这表明注重数据价值的时代已经来临，并逐渐取代了从模拟数据向数字化转变的时期；产生、使用和管理对生活产生...
管理MongoDB均衡器Balancer
功能简介 均衡器Balancer用于均衡分片集群实例中各Shard节点中的数据，不同版本的MongoDB实例工作原理存在区别：MongoDB 5.0及以前版本：Balancer会监控分片集群实例中各个Shard节点上的Chunk（块）数量，当某个Shard节点上的Chunk数量达到...
快照备份
物理备份恢复速率受限于20 MB/s，最大仅支持4 TB大小的数据量。当数据量过大时，备份恢复时间无法控制。而快照备份功能基于微软的 VSS卷影复制服务，在云盘上对数据的快照进行定期备份，利用快照的特性可以快速地还原数据到某个时间点，...
算子级别诊断结果
过滤条件没有下推 Join存在数据膨胀 Join的右表过大 存在Cross Join 扫描算子读取字段个数较多 表扫描数据量倾斜 索引不高效 聚合算子聚合度低 问题 聚合算子的聚合度一般指GROUP BY分组聚合操作中的输入数据量和输出数据量的比值（即...
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
冷数据归档
基于冷温热数据的数据量以及查询频度的特点，Lindorm时序引擎实现了对时序数据冷温热分层存储。如下所示：对于数据量最大的冷数据，时序引擎会自动根据用户设置的基于业务时间戳的冷热分界线自动将冷数据归档到冷存储中。当需要查询冷数据...
ListDoctorHiveDatabases-批量获取 Hive 库信息
Day growth ratio of cold data size FreezeDataSizeDayGrowthRatio object 极冷数据的数据量大小日环比。极冷数据指的是 90 日以内都没有访问的数据。Name string 指标名称。freezeDataSizeDayGrowthRatio Value float 指标值。0.5 Unit ...
数据存储冷热分离
hot_to_cold_data_size 热到冷变更的数据量（单位：Byte）。cold_to_hot_data_size 冷到热变更的数据量（单位：Byte）。hot_data_size_before_change 变更前热数据量（单位：Byte）。cold_data_size_before_change 变更前冷数据量（单位：...
冷数据归档常见问题
归档为CSV格式的数据的数据量可能会比归档为ORC格式的数据的数据量更大。为什么归档后的冷数据及文件在主账号下面的OSS上看不到？PolarDB 的冷数据存储在系统默认的OSS上，不在客户的OSS里，所以客户无法看到。目前只支持在PolarDB控制台上...
配置DataHub输出组件
一次提交的数据量 为提高写出效率，数据集成会积累Buffer数据，待积累的数据大小达到一次提交的数据量大小（单位MB）时，批量提交到目的端。默认是1，即1 MB数据。高级配置 按需进行配置。支持以下参数：maxRetryCount：任务失败的最多重试...
配置DataHub输出组件
一次提交的数据量 为提高写出效率，数据集成会积累Buffer数据，待积累的数据大小达到一次提交的数据量大小（单位MB）时，批量提交到目的端。默认是1，即1 MB数据。高级配置 按需进行配置。支持以下参数：maxRetryCount：任务失败的最多重试...
数据缓存
SkipCacheBytes 创建缓存文件失败，或者缓存文件被删，需要再次从远程读取的数据量。WriteInFileCacheBytes 保存到缓存文件中的数据量。WriteInFileCacheNum 保存的Block数量，WriteInFileCacheBytes/WriteInFileCacheBytes为Block的平均...
选择分片数
一般情况下，建议分片数和分表数保持一致，根据业务 3 到 5 年内的数据量设置一个较大值（如设置为 128），这样在做数据库扩容与迁移的时候，无需修改路由规则，以表为单位做整体的数据迁移操作即可。场景分析 如果某用户分片数设置较小...
查看同步链路状态和性能
DTS到目标库的链路 BPS：DTS每秒写入到目标库的数据量，单位为MB/s。RPS：DTS每秒写入到目标库的行数。网络延迟：DTS与目标库间的网络延迟。全量同步性能 可查看全量同步流量、源和目标实例的RPS、读写响应时间以及网络延时等信息。说明 将...
敏感数据溯源
解决方案：使用 数据水印 功能生成的水印信息需要提供充足的数据量，才能保证通过溯源任务还原出可靠的水印信息，进而定位出可能的数据泄露责任人。建议您使用数据量大于500条，并且不包含重复数据的文件进行溯源。原因二：被泄漏的数据非...
监控任务性能
DTS到目标库的链路 BPS：DTS每秒写入到目标库的数据量，单位为MB/s。RPS：DTS每秒写入到目标库的行数。网络延迟：DTS与目标库间的网络延迟。全量同步性能 可查看全量同步流量、源和目标实例的RPS、读写响应时间以及网络延时等信息。说明 将...
表设计规范
表设计主要目标 降低存储成本 合理的表设计可以降低数据分层设计上的冗余存储，减少中间表的数据量大小。对表数据的生命周期进行正确的管理，也能够直接降低存储的数据量及存储成本。降低计算成本 规范化的表设计可以帮助您优化数据的读取...
创建DynamoDB协议兼容版实例
云数据库MongoDB分片集群实例兼容DynamoDB协议。本文介绍创建DynamoDB协议兼容版实例的方法。重要 DynamoDB协议兼容版实例已停止新购，如需使用分片集群实例，建议选择MongoDB协议。更多说明，请参见【通知】分片集群DynamoDB协议兼容版...
备份集查询功能概览
数据库备份服务DBS提供了云上备份数据查询功能，您只需要简单的SQL语句，即可查询到您的备份数据，且备份数据不会被修改，该功能只针对查询所涉及的数据量收费，成本低。同时，DBS还提供查询多个备份集的功能，您可以更好地分析历史备份...
01新建模型目录
与明细数据层相比，维度数据层有着相同的数据粒度，但是具有更小的数据量、更快的查询速度。操作步骤 登录 数据资源平台控制台。在页面左上角选择>协同。在顶部菜单栏，单击 图标，选择工作组。在左侧导航栏，单击 图标，选择 数据模型设计...
查看全量迁移链路状态和性能
DTS到目标库的链路 BPS：DTS每秒写入到目标库的数据量，单位为MB/s。RPS：DTS每秒写入到目标库的行数。网络延迟：DTS与目标库间的网络延迟。写RT：DTS写入到目标库的响应时间。全量迁移性能 可查看全量迁移流量、源和目标实例的RPS、读写...
- 产品推荐
- 这些文档可能帮助您