快速入门
但是通过 ST_GeomFromText 函数构造数据的写入性能比 ST_MakePoint 函数低。有关时空函数 ST_GeomFromText，请参见 ST_GeomFromText。使用普通点坐标的方式。INSERT INTO gps_data_point(id,x,y,t,ship_name)VALUES(1,119.073544,25.3244,'...
使用Flink写入数据（Delta Table）
当前MaxCompute为您提供了新版的Flink Connector插件，新版插件支持将Flink数据写入至MaxCompute的普通表和Delta Table类型表，提高了Flink数据写入MaxCompute的便捷性。本文为您介绍新版Flink Connector写入MaxCompute的能力支持情况与...
深度解析Lindorm搜索索引（SearchIndex）特性
索引WAL的构建 快慢将直接影响到原始数据的写入性能。Lindorm宽表是一个KV数据库，天然支持更新部分列，但是搜索引擎Lucene只能整行更新，不能够局部更新。因此，在构建索引时需要回读原表获取历史数据，才能够拼接出完整的索引WAL。...
基于Delta Table构建近实时增全量一体化链路实践
由于MaxCompute进行了高效优化，若将Delta Table表属性 write bucket num 配置为Flink sink并发数的整数倍，其写入性能最佳。结合Flink内置的Checkpoint机制处理容错场景，确保数据处理过程遵循exactly_once语义。支持上千分区同时写入，...
读写一致性
在 读的一致性 上，HybridDB for MySQL提供两种数据可见性模式：最终一致性读 最终一致性读默认的读一致性模式，是高吞吐高性能写入模式，正常情况下可以做到毫秒级别的读延迟。强一致性读 日常不建议使用该读模式，除非对一致性有特殊要求...
导入与导出
当 AnalyticDB MySQL 集群的写入性能已达到瓶颈，需要升级 AnalyticDB MySQL 规格。DataWorks导入数据至AnalyticDB MySQL集群时，为什么写入TPS不满足预期？当客户端导入压力不足时，会导致集群CPU使用率、磁盘IO使用率及写入响应时间处于...
Hudi存储
异步Table Service 支持异步Table Service服务，与写入链路完全隔离，对写入链路无任何影响，同时通过异步Table Service如Clustering提升查询性能，典型场景下查询性能提升至原来的40%以上。元数据自动同步 借助 AnalyticDB MySQL 统一...
应用性能监控分析服务介绍
阿里云Elasticsearch应用性能监控分析服务APM（Application Performance Management）是阿里云基于开源Elastic Stack构建的云上一键托管实例性能监控服务，使用阿里云Elasticsearch作为其数据存储，能够实时监控数千个应用程序的性能，支持...
UPDATE
Hologres高性能写入更新原理详情请参见 Hologres高性能写入技术大揭秘。从更新的原理中，可以看到列存表总是会有一次标记表的记录和反查过程，所以更新效率：行存表>列存表。结果表有主键 如果为表设置了主键（PK），那么主键索引文件就...
概览
暂不支持 基于Client SDK数据写入 AnalyticDB PostgreSQL版 Client SDK通过 API 形式旨在为用户提供高性能写入数据到 AnalyticDB PostgreSQL版 的方式，支持用户定制化开发或对接写入程序。通过 SDK 开发写入程序，可简化在 AnalyticDB ...
使用时序Writer写入时序数据
表格存储支持通过时序Writer将时序数据写入时序表，时序Writer还支持多表写入、写入状态统计、行级别回调和自定义配置功能。本文介绍使用时序Writer写入时序数据的使用流程。背景信息 使用时序模型时，用户主要通过调用PutTimeseriesData...
基本概念
反之如果Table Group和Shard数制定不当，很容易出现性能不如预期的情况，且无法从根本上调优到最佳性能：一定范围内Shard数多的Table Group，其数据写入和查询分析处理可以得到更大的并行度。但Shard数也并非越多越好，更多的Shard数需要更...
数据写入、更新、点查场景压测最佳实践
测试流程 使用holo-e2e-performance-tool进行数据写入、更新与点查场景测试的步骤如下：进行数据写入测试，完成基本参数配置后测试一定行数下的写入性能。保留写入场景的测试数据表，沿用写入场景的参数配置再次进行写入测试，即可实现数据...
数据同步概述
实时数仓Hologres是一款兼容PostgreSQL 11协议的实时数仓，与大数据生态无缝连接，支持高并发地实时写入，数据写入即可查，同时也支持离线数据的加速查询、实时数据和离线数据联邦分析，助力快速搭建企业级实时数仓。Hologres数据同步说明 ...
实时数据消费概述
实时数据消费功能包含高速数据导入API和实时数据源消费两部分，可实现数据直接写入Segment（分片单元），避免通过COPY或INSERT方式造成的Master写入负载高的问题，也可实现使用 AnalyticDB PostgreSQL版 单产品直接消费Kafka数据。...
基于Indexing Service实现数据流管理
当面对海量时序数据和日志数据写入出现性能瓶颈时，您可以根据业务需求选择使用阿里云Elasticsearch 7.10内核增强版 Indexing Service系列，此功能基于读写分离架构以及写入按量付费的Serverless模式，实现了Elasticsearch集群的云端写入...
MySQL分区表写入最佳实践
为了在您使用MySQL处理庞大数据集时优化写入查询性能，本文详细介绍了DataWorks数据集成将数据写入MySQL分区表的最佳实践。前提条件 已具备MySQL数据库，并在DataWorks中添加为数据源。具体操作，请参见 MySQL数据源。准备工作 创建源表，...
Group Commit
本文介绍如何使用分组导入（Group Commit）模式在高并发小写入的场景下来提升导入性能。概述 Group Commit不是一种新的导入方式，而是对 INSERT INTO tbl VALUES(.)、Stream Load 的扩展，大幅提升了高并发小写入的性能。您的应用程序可以...
向量计算概述
Hologres支持向量计算，可以使用向量数据表示非结构化数据的特征，通过高性能向量检索实现对非结构化数据的快速查询。本文为您介绍Hologres中向量计算的特点及优势。背景信息 Proxima是一款来自于阿里达摩院的实现向量近邻搜索的高性能软件...
玄武分析型存储
玄武分析存储引擎为用户提供高可靠、高可用、高性能、低成本的企业级数据存储能力，是AnalyticDB实现高吞吐实时写入、高性能实时查询的基础支撑。高吞吐实时写入 AnalyticDB通过三层并行架构实现了极强的吞吐能力，从接入层、到存储节点层...
方案背景
本文以车联网场景中车辆轨迹数据为例介绍基于设备接入平台与表格存储Tablestore搭建车辆轨迹数据平台的场景需求以及方案架构。场景需求 在车联网场景中，车辆通过传感器上报时序数据到云端。...支持高并发写入和高性能分析能力。
INSERT ON CONFLICT(UPSERT)
根据UPDATE的原理，当表设置不同的存储格式时，不同UPDATE模式下的更新性能如下：列存表不同写入模式的性能排序如下。结果表无主键性能最高。结果表有主键时：InsertOrIgnore>InsertOrReplace>=InsertOrUpdate（整行）>InsertOrUpdate...
专业术语
例如，每秒写入10次包含5,000个点的batch，每个点有4个field，那么values per second=每个点有4个field，每个batch有5,000个点，每秒写入10次=每秒写入200,000个值。相关术语：batch，field，point，points per second。wal（Write Ahead ...
JDBC
使用JDBC连接Hologres后，如果您需要测试写入数据的性能，建议使用VPC网络。公共网络由于自身原因，无法达到性能测试的目标。Hologres当前不支持在一个事务中多次写入，因此需要设置 autoCommit 为 true（JDBC的autoCommit默认为true），...
测试环境
容量型实例的优势在于存储单价远远低于高性能实例，同时提供了不弱于高性能实例的写入能力，但缺点是读取磁盘上的数据时性能比较低。两种实例在读取缓存中的数据时性能类似。表格存储为后付费产品，会根据每个小时内用户实际的资源使用进行...
使用前须知
开通审计日志后，系统将记录写操作的审计信息，写入量或审计量可能会对云数据库MongoDB实例造成5%～15%的性能损失及一定的延时抖动。说明 如果您的业务对云数据库MongoDB实例的写入量非常大，建议仅在故障排查或安全审计时开通该功能，以免...
数据集成概述
数据集成为了提升性能采用批量写入目的端方式，当写入异常时，该批次数据是否能回滚取决于目的端是否支持事务机制。数据集成本身不支持事务机制。数据源 DataWorks所处理的数据的来源，可能是一个数据库或数据仓库。DataWorks支持各种类型...
列存索引配置参数说明
ForPerformance：优先考虑性能，每次写入时选择一个ExtentSize最合适的文件。IO性能最好，内部碎片率最大，空间浪费较多。Skip4K：数据切分逻辑类似ForCapacity。大于4 KB的数据在写入时完全不考虑4 KB Extent，每次写入最多产生1个16 KB的...
排查MongoDB CPU使用率高的问题
不合理的索引（关键字：IXSCAN、keysExamined）说明 索引不是越多越好，索引过多会影响写入、更新的性能。如果您的应用偏向于写操作，索引可能会影响性能。通过查看 keysExamined 字段，可以查看到一个使用了索引的查询，扫描了多少条索引...
通过程序代码连接MongoDB副本集实例
package main import("context""fmt""go.mongodb.org/mongo-driver/bson""go.mongodb.org/mongo-driver/mongo""go.mongodb.org/mongo-driver/mongo/options""log")func main(){/建议使用副本集高可用地址，确保高可用。确保执行代码的...
常见问题概览
备份与恢复方案概览 下载备份文件 性能、空间与内存 热点问题 其他常见问题 如何排查MongoDB实例负载过高的问题 MongoDB实例内存使用率高问题 MongoDB实例的CPU使用率高问题 MongoDB实例IOPS使用率高问题 MongoDB实例空间使用率高问题 为...
使用MongoShake实现MongoDB实例间的单向同步
tar zxvf mongoshake.tar.gz&mv mongo-shake-v2.4.16/test/mongoshake&cd/test/mongoshake/mongo-shake-v2.4.16 执行 vi collector.conf 命令，修改MongoShake的配置文件 collector.conf，涉及的主要参数说明如下表所示。参数 说明 示例值 ...
入门概述
本文介绍云数据库MongoDB实例从创建到连接使用的整体流程，指引您快速掌握...不同类型实例的创建方法如下：创建数据库和集合并写入数据（单节点实例）创建数据库和集合并写入数据（副本集实例）创建数据库和集合并写入数据（分片集群实例）
使用MongoShake将Serverless数据迁移至副本集或分片...
迁移过程中对源端进行读取或写入操作，可能会出现读取或写入不响应的现象。数据库账号的权限要求 实例 权限 源端MongoDB Serverless实例 readWrite权限。目标端MongoDB副本集实例或分片集群实例 readWrite权限。数据库账号创建及授权方法请...
使用MongoShake实现MongoDB实例间的延迟同步
准备工作 为达到最理想的同步性能，请确保源端MongoDB副本集实例的网络类型为专有网络VPC，如果是经典网络，请切换成专有网络VPC。更多信息，请参见 经典网络切换为专有网络。创建作为同步目标端的MongoDB副本集实例，在创建的时候请选择与...
设置数据分片以充分利用Shard性能
您可以对分片集群实例中的集合设置数据分片，以充分利用Shard节点的存储空间和计算性能。背景信息 如果没有对集合设置数据分片，数据将被集中存放在一个Shard节点中，这将导致其他Shard节点的存储空间和计算性能无法被充分利用。前提条件 ...
MongoDB 7.0
开通审计日志 开通审计日志后，系统将记录写操作的审计信息，写入量或审计量可能会对云数据库MongoDB实例造成5%～15%的性能损失及一定的延时抖动。说明 如果您的业务对云数据库MongoDB实例的写入量非常大，建议仅在故障排查或安全审计时...
MongoDB 6.0
开通审计日志 开通审计日志后，系统将记录写操作的审计信息，写入量或审计量可能会对云数据库MongoDB实例造成5%～15%的性能损失及一定的延时抖动。说明 如果您的业务对云数据库MongoDB实例的写入量非常大，建议仅在故障排查或安全审计时...
MongoDB 4.0
CloudDBA 功能 通用型云盘版 功能影响及建议 性能趋势 实时性能 实例会话 本操作不影响实例的运行。空间分析 慢日志 单节点实例不支持空间分析和慢日志功能。迁移数据 功能 通用型云盘版 功能影响及建议 使用DTS将自建数据库迁移至阿里云...
MongoDB 4.4
开通审计日志 开通审计日志后，系统将记录写操作的审计信息，写入量或审计量可能会对云数据库MongoDB实例造成5%～15%的性能损失及一定的延时抖动。说明 如果您的业务对云数据库MongoDB实例的写入量非常大，建议仅在故障排查或安全审计时...
- 产品推荐
- 这些文档可能帮助您