如何确定分区个数
您可以评估下数据量，每个分区大约500万至1000万条数据。假设每个租户最大数据量为100万，则建议多个租户共用一个LIST分区，如10个租户共用一个LIST分区。多尝试几个分区值。如果取整数不能满足数据分布均衡要求，您可以尝试取质数。如7和...
Serverless后付费
根据上文计费规则，每小时分区费用按照这一小时内实际使用的分区数量最大值所在的定价区间阶梯计费，1000在[1,1000]计费区间，单价为0.00037（元/小时），2000在(1000,10000]计费区间，单价为0.00019（元/小时），那么费用为：前2小时的...
如何计算应用监控与其他开源监控成本？
价格对比（单位：人民币）监控节点数 资源包年付费用 占按量付费费用比例 ¹ 占某APM产品费用比例 ² 占开源自建成本比例 ³ 100 66,838 13.6%9%92%300 174,000 11.8%8%70%500 238,710 9.7%7%59%占按量付费费用比例=在ARMS应用监控中使用...
计费规则
例如，您购买了分区数为50、流量规格为alikafka.hw.2xlarge、规格内赠送分区数为1000的实例，那么该实例总分区数=购买分区数+规格内赠送分区数=50+1000=1050，可用Topic数量与总分区数相等为1050，可用Group数量=总分区数×2=1050×2=2100...
计费规则
例如，您购买了分区数为50、流量规格为alikafka.hw.2xlarge、规格内赠送分区数为1000的实例，那么该实例总分区数=购买分区数+规格内赠送分区数=50+1000=1050，可用Topic数量与总分区数相等为1050，可用Group数量=总分区数×2=1050×2=2100...
分区剪裁合理性评估
使用数据时，如果指定了需要访问的分区名称，则只会读取相应的分区，避免全表扫描，提高处理效率，降低费用。分区剪裁是指对分区列指定过滤条件，使得SQL执行时只用读取表分区的部分数据，避免全表扫描引起的数据错误及资源浪费。但是分区...
分区表系统视图
PolarDB PostgreSQL版（兼容Oracle）提供了系统视图，您可以使用系统视图来查看分区表的结构信息。PolarDB PostgreSQL版（兼容Oracle）提供了以下几个系统视图和系统函数，供您查看数据库中分区表的相关信息。ALL_PART_TABLES 返回字段说明...
分层存储
长期存储 分层存储计费 存储类型 计费公式 价格 说明 标准存储 日存储费用=日存储量平均值×单价 一般情况下，计费单价如下：公共云：0.004元/GB/天。金融云：0.0076元/GB/天。当项目的实际数据存储量大于0 MB小于等于512 MB时，计费单价...
应用性能监控分析服务介绍
阿里云Elasticsearch应用性能监控分析服务APM（Application Performance Management）是阿里云基于开源Elastic Stack构建的云上一键托管实例性能监控服务，使用阿里云Elasticsearch作为其数据存储，能够实时监控数千个应用程序的性能，支持...
手动安装探针
应用安全的计费规则，请参见 计费说明。运行环境 步骤 Spring Boot或其他通过 java-jar 命令启动的Java应用 在启动命令后加上-javaagent 参数。请确保-javaagent 参数写在-jar 参数之前。java-javaagent:/{user.workspace}/ArmsAgent/...
按扫描量付费
按扫描量付费是一种先使用后付费的计费方式，即根据扫描的字节（Byte）数收费，不收取其他任何费用。当您通过DLA对本地或第三方数据源中的数据进行关联分析，DLA会根据扫描的数据量进行计费。本文主要介绍按扫描量付费DLA的计费规则 和计费...
按照Topic规格购买的实例，如何转换为按照分区规格...
转换规则如下：存量购买的Topic数，将转换为等价的分区数，但不会超过允许购买的分区最大值，转换后的总分区数计算公式如下：总分区数量=规格内预包含分区数+增购Topic数×转换倍数 计算结果向上取整。例如：您购买了Topic数量为60、流量...
计费模式
本文介绍数据湖构建中各资源的计费规格，包括入湖作业资源用量、数据存储对象和元数据请求三部分。计量计费项 重要 DLF产品目前所有功能为 0折扣活动阶段，即使超过免费阶梯限定后，目前也均不会产生实际计费。元数据对象的存储量 元数据...
分区
分区表是指拥有分区空间的表，即将表数据按照某个列或多个列进行划分，从而将表中的数据分散存储在不同的物理位置上。合理设计和使用分区，可以提高查询性能、简化数据管理，并支持更灵活的数据访问和操作。概述 分区可以理解为分类，通过...
表设计规范
分区设计与存储逻辑 一张表里有很多个一级分区，每个一级分区都会按时间存储二级分区，每个二级分区都会存储所有的列，如下图所示。分区设计需要注意：设置分区的数量上限。避免每个分区中只存少量数据。以方便数据查询和计算为前提设置...
动态分区管理
Hologres的动态分区功能无需预先设定所有分区信息，可依据创建分区表时配置的动态分区规则，自动创建并管理分区子表。同时，还支持将符合条件的分区数据迁移到低频存储设备，在保证查询性能的同时，有效降低存储费用。功能介绍 动态分区...
转换MBR分区为GPT分区
MBR分区格式不支持2 TiB以上的云盘。如果该云盘目前使用的是MBR分区类型，且希望将其扩容至2 TiB以上，需要先将分区类型从MBR转换为GPT。本文为您介绍如何将Linux和Windows数据盘的MBR分区转换为GPT分区。转换Linux数据盘的分区类型 您可以...
数据存储冷热分离
如图所示，当新增分区20201110之后，20201110为当前最大的分区，应该放在热分区中，但是当前热分区数已满5，数据存储冷热分离策略会从热分区中选一个最小的分区20201105迁移到冷分区，并把20201110放在热分区中。变更热分区数量对冷热分区...
创建APM Server实例
阿里云Elasitcsearch提供云上一键托管的应用性能监控Server实例，支持一键快速创建APM Server节点实例，并对实例进行灵活高效的扩缩及配置。单个Server节点通常可以处理来自数百个APM Agent代理的数据。本文介绍如何创建APM Server实例。...
存储成本优化
本文从数据分区、表生命周期和定期删除表3个方面为您介绍如何优化存储成本。对于存储优化而言，有三个关键点：合理地进行数据分区。设置合理的表生命周期。定期删除废表。合理设置数据分区 MaxCompute将分区列的每个值作为一个分区。您可以...
管理APM Server实例
本文为您介绍如何管理APM Server实例，包括修改配置文件、变更实例规格和启动、停止、删除。修改配置文件 登录 阿里云Elasticsearch控制台。在左侧导航栏，单击 APM应用性能监控。在 APM Server管理 页面，单击目标实例右侧 操作 列下的 ...
ALTER TABLE
alter table 只会影响分区表的新建分区（包括 insert overwrite 生成的），新分区将按新的聚簇属性存储，老数据分区的聚簇属性和存储保持不变。即在一张曾经做过聚簇属性设置的表上，关闭了聚簇属性，再增加聚簇设置，可以在新分区设置不同...
APM应用性能监控
通过阿里云托管的Elasticsearch应用性能监控APM（Application Performance Monitoring）服务，结合阿里云Elasticsearch，您可以搭建应用性能监控系统，实现系统的可观测性。本文介绍阿里云Elasticseasrch APM服务的概念、架构及功能，以及...
计费常见问题
MaxCompute以项目为计费单元，计费项包括存储、计算和数据下载，费用包含存储（按存储量计费）、计算（根据计费模式产生费用）和外网下载（按下载量计费）费用。更多MaxCompute计费方式信息，请参见 计费项与计费方式概述。如果按月购买...
通过自建APM Server将数据采集至阿里云Elasticsearch
通过Elasticsearch应用性能监控APM（Application Performance Monitoring）服务，结合阿里云Elasticsearch，您可以搭建应用性能监控系统，实现系统的可观测性。本文介绍如何通过自建APM Server将数据采集至阿里云Elasticsearch。背景信息 ...
使用ODPS Foreign Table访问MaxCompute数据
末级分区外表 相对于非分区外表，末级分区外表，映射的是MaxCompute的末级分区表，需要设置正确的 partition 属性，多级分区时，末级分区外表只支持末级分区表，即 partition 属性需要包含多级分区完整路径。举例说明：在MaxCompute上创建...
常见问题
分区索引主要由HASH分区、时间分区或HASH分区和时间分区的组合组成，您可以根据以下场景和建议合理设置分区索引：业务数据有明显的时间属性，例如查询语句携带一个时间字段作为过滤字段，建议设置时间分区属性。在业务查询场景中，多数情况...
读取以分区方式存储的OSS数据
MaxCompute支持创建OSS外部表为分区表，访问OSS上以分区方式存储的数据，通过该方式可降低读取数据量并提升数据处理效率。本文为您介绍MaxCompute支持的OSS标准分区路径格式和自定义分区路径格式。背景信息 创建OSS外部表后，MaxCompute会...
COST SQL
需要注意的是，如果UDF涉及分区裁剪，由于无法确定最终会扫描多少个分区，该场景下的费用无法预估。使用限制 目前外部表不支持Cost SQL功能。注意事项 该信息不能作为实际计费标准，仅供参考，实际费用请以账单为准。命令格式 cost sql;...
数据分层存储
会返回多行，每行代表一张分区子表 分区子表：分区子表名 hot_size 热存储的大小，单位Byte cold_size 冷存储的大小，单位Byte status 状态：hot：数据在热存中 cold：数据在冷存中 transferring：数据正在搬迁 示例如下：非分区父表 ...
多元索引最佳实践
主键设计对多元索引的同步速度有一定的影响，对数据表主键的要求是写入数据时要尽可能分散到数据表的不同分区，因此如果写入TPS较高时，需要尽可能分散在数据表的多个分区中，避免出现写单分区、写尾部分区等问题。目前仅支持从数据表中...
列存索引
分区表达式包括普通分区表达式和bucket分区表达式，且普通分区表达式和bucket分区表达式中的字段均为宽表主键字段。普通分区表达式 可以指定0个或多个普通分区表达式，多个表达式用英文逗号（,）分隔。普通分区表达式为宽表主键字段（例如...
费用优化
费用和两方面因素相关：数据量：用户的数据量是业务决定的，无法优化。配置：使用和数据量相匹配的配置，选择最优的解决方案，才能使成本最小化。优化配置 配置可以从以下两个方面进行优化：分区个数 一个分区最大可以处理5M/s的数据。只有...
MaxCompute+API 数据源
或至少一个索引表分片数为1，其余索引表分片数一致 数据更新资源数：数据更新所用资源数，每个索引默认免费提供2个4核8G的更新资源，超出免费额度的资源将产生费用，详情可参考 向量检索版计费概述 场景模板：向量检索版内置了3种模板可供...
宽表模型介绍
表格存储 按照分区键对数据表的数据进行分区，具有相同分区键的行会被划分到同一个分区，实现数据访问负载均衡。属性列（Attribute Column）一行中除主键列外，其余都是属性列。属性列会对应多个值，不同值对应不同的版本，每行的属性列...
新功能发布记录
新增 开服地域 计费规则（包年包月计费）计费规则（按量计费）服务接入点 2022-01-19 功能名称 功能描述 功能类型 相关文档 消息检索 支持按Topic分区、位点范围、时间范围以及消息Key和Value关键字检索消息。新增 消息检索 功能迭代历史...
生命周期管理介绍
功能说明 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则，可以基于数据最后访问时间、分区值、分区/表最后修改时间、分区/表创建时间四种规则类型，对数据定期进行存储类型转换，从而节省数据存储成本。同时，可以...
测试模型
表结构 主键名 类型 编码方式 长度 userid string 4-Byte-Hash+Long.toHexString 20 属性列 属性列名 类型 长度 field0 string 100 field1 string 100 field2 string 100 field3 string 100 field4 string 100 分区数量 表格存储的自动负载...
Hologres开发：周期性调度
因此，您可以将MaxCompute的分区表或非分区表导入Hologres的分区或非分区表，可以根据实际业务情况选择是否需要分区。前往DataWorks调度会产生一定的调度费用，详细收费情况，请参见 DataWorks资源组概述。如果需要实现写入更新，您需要...
INSERT INTO|OVERWRITE
MaxCompute支持通过 insert into 或 insert overwrite 操作向目标表或静态分区中插入、更新数据。前提条件 执行 insert into 和 insert overwrite 操作前需要具备目标表的修改权限（Alter）及源表的元信息读取权限（Describe）。授权操作请...
- 产品推荐
- 这些文档可能帮助您