PolarDB MySQL版8.0.1版本性能（集群版）
本文介绍 PolarDB MySQL版 8.0.1版本 集群版 的OLTP负载性能测试结果。PolarDB MySQL版 8.0.1版本优化器支持CBO和RBO两种模式。CBO（Cost-Based Optimization）：根据统计信息或实时采样，结合代价模型评估出代价最小的执行方案。RBO（Rule...
产品架构
数据同步通常用于OLTP到OLAP的数据传输。数据同步包括以下两个阶段：同步初始化：DTS先开始收集增量数据，然后将源数据库的结构和存量数据加载到目标数据库。数据实时同步：DTS同步正在进行的数据变更，并保持源数据库和目标数据库的同步。...
迁移工具
使用DataWorks/DataX、表格存储的通道服务等迁移工具，在不影响业务的情况下您可以实现表格存储数据的全量迁移、增量迁移或者实时同步。本文介绍如何选择迁移工具。迁移工具选择 迁移数据时，请根据实际业务选择合适的迁移工具。表格存储...
Multi-Master基础架构
背景信息 Hybrid Transaction Analytical Processing（HTAP）是著名信息技术咨询与分析公司Gartner在2014年提出的一个新的数据库系统定义，特指兼具OLTP（事务能力）和OLAP（分析能力）的数据库系统。在传统场景中，承担OLTP任务和OLAP任务...
报 DPN-OLTP-ENGINE-013|Columns Auth Check Failed:{...
产品名称 Dataphin 产品模块 API 概述 描述API注册调用报错DPN-OLTP-ENGINE-013|Columns Auth Check Failed:{0}|如何解决。问题描述 用户注册了API，并且使用oneservice api调用SDK方式调用，刚开始正常调用，然后修改了API，重新调用，报...
逻辑数仓SQL语法介绍
逻辑数仓功能可以打通不同引擎，不同实例，跨区域，跨存储的OLAP、OLTP之间的壁垒，基于统一的SQL语法为用户提供跨库数据查询和数据同步的能力。本文介绍逻辑数仓支持的SQL语法。背景信息 逻辑数仓的查询语法和函数基本兼容MySQL，因此可以...
索引优化
避免在频繁更新的表上建Bitmap索引：Bitmap索引最适合用户只查询数据而不更新数据的数据仓库应用，不适合有大量并发事务修改数据的OLTP应用。合理使用表达式索引：索引列不必只是表的一列，而是可以是从表的一列或多列计算的函数或标量表达...
使用说明
集群规格为4核8 GB时的性能对比如下：db-ps-mode=disable oltp_read_only db-ps-mode=auto oltp_read_write 集群规格为8核32 GB时的性能对比如下：db-ps-mode=disable oltp_read_only db-ps-mode=auto oltp_read_write 结论 由以上的测试...
AUTO模式数据库与DRDS模式数据库
测试结果 分析以上测试结果，可以得出以下结论：分区表使用的一致性HASH路由算法虽然比原来分库分表中按HASH取模的路由算法更为复杂，但在oltp_point_select场景中吞吐并没有下降太多，基本与原来的持平。在oltp_read_only&oltp_read_write...
概述
本文简要介绍了事务系统PolarTrans的技术原理。PolarDB MySQL版 推出了全新的事务系统PolarTrans，它利用提交时间戳...在OLTP场景下，极大的提升了集群的整体吞吐能力。PolarTrans的核心技术如下：提交时间戳技术CTS 全局一致性（高性能模式）
概述
库仓一站式（Zero-ETL）传统数据仓库，会通过数据ETL方式同步数据，采用MPP/BSP等并行计算架构可以很好解决OLAP复杂查询，但面相高并发的数据在线查询（Serving场景）会有明显的资源并发瓶颈，会通过数据回流到OLTP数据库提供在线查询。...
配置行列手动分流
如果您的业务中，OLAP类型与OLTP类型的业务基于不同的应用程序访问数据库，则可分别为这些应用程序配置不同的集群地址，然后将行存节点和列存节点分别配置到不同集群地址（Endpoint）的服务节点中，从而实现行存和列存分流。手动分流方案...
技术面临的挑战与革新
可以说存储计算分离是云时代数据库产品的事实主流架构，无论是OLAP还是OLTP的系统，越来越多的系统地已经采用了此架构或者是正在向着此方向演进发展。分布式事务与集中式事务的优劣 事务处理是数据库保证ACID语义的核心功能，因为数据库...
持久缓存池（Warm Buffer Pool）
示例：如下是一个50 GB的缓存池在Sysbench oltp_read_only的负载下，主节点重启后的吞吐对比图。从上图可以看到：对于普通的缓存池（橙色线条），在节点重启后，其吞吐只有稳定值的2%。在之后的200多秒内，吞吐缓慢回升到重启前的100%。...
DBFS存储卷概述
您可以在容器服务ACK集群中使用阿里云数据库存储DBFS。本文介绍数据库存储DBFS的功能介绍、使用限制、适用场景及计费说明。索引 功能介绍 使用限制 适用场景 计费说明 功能 介绍 数据库文件存储（DBFS）是一款针对数据库场景的云原生共享...
配置行列自动分流
如果您的业务中，OLAP类型的查询与OLTP类型的查询是通过同一个应用程序访问数据库，此时如果要实现分流，您需要设置集群地址的读写模式，并开启自动分流功能。自动分流功能开启后，数据库代理基于业务流入的SQL语句的预估执行代价来实现...
测试方法
sysbench-db-driver=mysql-mysql-host=XXX-mysql-port=XXX-mysql-user=XXX-mysql-password=XXX-mysql-db=sbtest-table_size=25000-tables=250-events=0-time=600 oltp_read_write prepare 运行workload。sysbench-db-driver=mysql-mysql-...
PolarDB MySQL版8.0.2版本性能（集群版）
本文介绍 PolarDB MySQL版 8.0.2版本 集群版 的OLTP负载性能测试结果。PolarDB MySQL版 8.0.2版本优化增强了并行查询和Hash Join能力。并行查询：并行查询重磅升级到2.0版本，对复杂分析查询进行了更全面的支持。多阶段的执行框架，SQL语句...
多租户资源隔离使用示例
本文介绍了多租户资源隔离示例，您可以按照本文的内容自行测试，以快速了解和使用多租户资源隔离功能。测试环境 使用的ECS实例和 PolarDB MySQL版 集群均位于同一地域和同一可用区。网络类型均为VPC网络。说明 ECS实例和 PolarDB MySQL版 ...
实例规格
可以执行数据库、CPU、内存、线程、IO等方面的性能测试。目前支持的数据库有MySQL、Oracle和PostgreSQL。以下验证 PolarDB-X 1.0 在Sysbench OLTP和SELECT场景中的性能表现。测试设计 PolarDB-X 1.0 计算层（4种规格）：入门版8核32 GB、...
配置数据库代理
开启列存节点接受OLTP请求的能力后，列存节点将同时接受OLAP和OLTP请求，数据库代理会根据活跃请求数，将OLTP类读请求路由至列存节点，这可能会导致列存节点的负载上升。说明 仅当 行存/列存自动引流 为开启状态时支持该配置。安全防护 ...
概述
简介 当前主要面向OLTP场景，广泛应用于在线业务，日常产生大量的数据。但是，基于行存的查询性能并不能满足所有应用场景的需求。通常情况下，为了实现复杂分析型查询，需要将数据从 PolarDB MySQL版 导出，然后导入到外部专用的OLAP系统中...
基于RDS PostgreSQL构建由LLM驱动的专属ChatBot
作为先进的开源OLTP引擎，RDS PostgreSQL能够同时完成在线用户数据交互和数据存储的任务，例如，它可以用于处理对话的交互记录、历史记录、对话时间等功能。RDS PostgreSQL一专多长的特性使得私域业务的构建更加简单，架构也更加轻便。...
列存索引（IMCI）发布说明
简介 当前主要面向OLTP场景，广泛应用于在线业务，日常产生大量的数据。但是，基于行存的查询性能并不能满足所有应用场景的需求。通常情况下，为了实现复杂分析型查询，需要将数据从 PolarDB MySQL版 导出，然后导入到外部专用的OLAP系统中...
MySQL存储计算分离实践
password=sbtest \-mysql-db=sbtest/opt/sysbench/tests/include/oltp_legacy/oltp.lua prepare 执行如下命令，跑OLTP模型 sysbench-db-driver=mysql-report-interval=1-mysql-table-engine=innodb \-oltp-table-size=10000-oltp-tables-...
功能特性
混合事务和分析处理（Hybrid Transaction and Analytical Process，HTAP）OceanBase 数据库独创的分布式计算引擎，能够让系统中多个计算节点同时运行 OLTP 类型的应用和复杂的 OLAP 类型的应用，让数据库利用率最大化的同时利用多个节点的...
透明数据加密TDE测试报告
从整体上看，在写场景例如oltp_write_only、oltp_update_index下性能损失较为明显。测试环境 配置项 测试场景一 测试场景二 地域及可用区 cn-hangzhou 网络类型 专有网络 VPC 硬件架构 x86 64 存储类型 本地SSD盘 CPU 4 核 8 核 内存 16 GB...
使用非易失性存储提升读写性能
mysql-password=admin-mysql-db=sbtest-oltp-read-only=on-oltp-simple-ranges=0-oltp-sum-ranges=0-oltp-order-ranges=0-oltp-distinct-ranges=0-oltp-dist-type=uniform-warmup-time=300-max-time=30-max-requests=0-percentile=99-num-...
使用DTS同步
通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库数据（例如自建MySQL或RDS MySQL）同步到表格存储（Tablestore）实例，轻松实现数据的流转。前提条件 已创建RAM用户并为RAM用户授予AliyunOTSFullAccess权限（管理...
调整实例max_prepared_stmt_count参数
测试模型 Prepare Statement语句数 oltp_read_only 大于或等于线程数x表数量x5+线程数 oltp_write_only 大于或等于线程数x表数量x4+线程数 oltp_read_write 大于或等于线程数x表数量x9+线程数 oltp_insert 0（该场景没有Prepare Statement...
Sysbench测试
背景信息 Sysbench是一款开源的、模块化的、跨平台的多线程性能测试工具，可以执行数据库在CPU、内存、线程、IO等方面的性能测试。本文将验证 PolarDB-X 在Sysbench多种场景中的性能表现。测试设计 测试数据量 Sysbench数据包含16张表，每...
从RDS MySQL同步至Tablestore
多表归并 选择为 是：通常在OLTP场景中，为提高业务表响应速度，通常会做分库分表处理。此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至Tablestore实例的同一个表中。说明 DTS会在Tablestore实例的...
本地SSD型
网络：支持IPv6 实例网络性能与计算规格对应（规格越高网络性能越强）适用场景：OLTP、高性能关系型数据库 NoSQL数据库（例如Cassandra、MongoDB等）Elasticsearch等搜索场景 与操作系统的兼容性说明 更多信息，请参见 本地SSD型i4实例规格...
PolarDB MySQL版5.6版本性能（集群版）
本文介绍 PolarDB MySQL版 5.6版本 集群版 OLTP负载性能测试结果。说明 具体测试步骤请参见 性能测试方法（OLTP）。独享规格 主节点+单只读节点 各规格只读性能测试结果 各规格写入性能测试结果 各规格混合读写性能测试结果 主节点+多只读...
PolarDB MySQL版5.7版本性能（集群版）
本文介绍 PolarDB MySQL版 5.7版本 集群版 OLTP负载性能测试结果。说明 具体测试步骤请参见 性能测试方法（OLTP）。独享规格 主节点+单只读节点 各规格只读性能测试结果 各规格写入性能测试结果 各规格混合读写性能测试结果 主节点+多只读...
Sysbench测试（标准版）
也可以通过GitHub下载开源版本的Sysbench，请参见 下载链接。测试场景说明 数据量：不同规格采用不同数据量压测。压测场景：使用Sysbench oltp_read_write场景压测。压测时长：每个场景300秒。实例参数设置：全部采用开箱参数，不手动设置...
规范定义最佳实践
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
IO加速
如果您希望提升磁盘IO效率和系统的响应速度，可以使用RDS MySQL通用云盘的IO加速功能，该功能可以帮助扩展缓存池的大小，实现缓存加速，提升RDS实例的整体读写性能。本文介绍IO加速功能的技术原理、使用方法和性能测试详情等信息。背景 将...
规范定义最佳实践
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
创建集群
说明 专属集群MySQL、SQL Server引擎的主机提供操作系统（OS）权限，您可以登录主机进行上传、下载、安装软件等操作。开放OS权限 设置后无法修改，请谨慎选择。（可选）首次创建专属集群MyBase，页面底部会提示需要获取ECS网卡及安全组授权...
- 产品推荐
- 这些文档可能帮助您