控制台发布记录
2024-3-7 开启冷数据归档 数据与缓存一站式 PolarDB MySQL版 支持数据与缓存一站式功能，在保证数据强一致性的同时，面向在线业务场景构建一套完整的数据库+缓存的解决方案。2024-3-12 灰度发布中 PolarDB MySQL推出数据与缓存一站式功能 ...
高压缩引擎（X-Engine）介绍
200 TB的存储空间加上X-Engine数据压缩能力，可提供500 TB以上的原始数据存储容量，同时存储空间采用Serverless方式，购买时无需选择容量，随着数据增长而在线自动扩容，只按实际数据量大小收费。PolarDB 高压缩引擎（X-Engine）与官方...
X-Engine引擎常见问题
X-Engine是阿里巴巴自研的基于LSM-tree架构的存储引擎，提供了强大的数据压缩能力，满足了归档数据库低存储成本的要求。通过LSM-Tree（Log-Structured Merge-Tree）层次化架构和Zstandard（ZSTD）压缩算法实现了更高的数据压缩率，对比使用...
压缩测试
背景信息 Lindorm除多模超融合、开放兼容和云原生弹性等能力外，还具备了高效的数据压缩能力。Lindorm不仅支持深度优化的ZSTD压缩算法，还在此基础上对字典采样进行了优化，进一步减少存储成本。本文测试压缩能力所使用到的数据库版本及其...
企业版和标准版功能对比
支持 不支持 数据压缩 阿里巴巴自研的基于LSM-tree架构的存储引擎X-Engine提供了强大的数据压缩能力，满足了归档数据库低存储成本的要求。支持 不支持 OSS外表 若集群中某些库表的数据几乎没有更新、插入和修改操作，且读取频率非常低，...
数据压缩对性能的影响说明
因此如果您需要开启数据压缩，建议先评估影响后，在进行变更。相关建议：高频访问的索引、字段、属性，建议不开启压缩；热点字段，建议不开启压缩；开启压缩后，对查询性能有比较大的影响，建议通过测试集群灰度测试后，查看开启数据压缩后...
数据压缩对性能的影响说明
因此如果您需要开启数据压缩，建议先评估影响后，在进行变更。相关建议：高频访问的索引、字段、属性，建议不开启压缩；热点字段，建议不开启压缩；开启压缩后，对查询性能有比较大的影响，建议通过测试集群灰度测试后，查看开启数据压缩后...
概述
物联网平台的数据压缩，支持设备与物联网平台之间的传输压缩数据。通过对消息的压缩，达到节约设备流量和提高传输速度的效果。本文介绍数据压缩功能的使用。前提条件 已获取设备认证信息。具体操作，请参见 获取设备认证信息。已获取C Link...
数据压缩
数据压缩功能支持设备与物联网平台之间的消息传输，压缩数据，从而节约设备流量、提高传输速度。本文介绍数据压缩功能的使用。前提条件 已获取设备认证信息。已获取SDK。使用限制 数据压缩仅支持 尊享型企业版实例 和 标准型企业版实例。更...
2020年
ST_AsPNG 2020年12月 栅格数据 新增栅格数据类型JPEG2000压缩算法，支持16bit栅格数据压缩存储。无 2020年12月 优化 st_dwithin 优化st_dwithin距离查询，提升查询性能。无 2020年12月 缺陷修复 修复轨迹数据类型时间相交错误问题。2020年...
2020年
ST_AsPNG 栅格数据 新增栅格数据类型JPEG2000压缩算法，支持16bit栅格数据压缩存储。无 优化 st_dwithin 优化st_dwithin距离查询，提升查询性能。无 缺陷修复 修复轨迹数据类型时间相交错误问题。修复Ganos内存拓扑索引的缺陷。API 类别 ...
概述
特性介绍 低存储成本 数据压缩是降低海量数据存储空间的关键手段。OceanBase 通过 LSM-Tree 的存储架构和自适应压缩技术，解决了传统数据库无法平衡“性能”和“压缩比”的难题，同一业务的存储量仅为 Mysql/Oracle 的 1/4 到 1/3可降低...
云原生多模数据库Lindorm助力蚂蚁链IoT数据降本
Lindorm的自动冷热分离、数据压缩功能完美契合了我们需求，同时，工具链比较成熟，能够平滑完成数据迁移。在系统上线的过程中，Lindorm团队深厚的技术支持能力给了我们很深的印象。客户简介 蚂蚁链是蚂蚁集团代表性的科技品牌，致力于打造...
X-Engine性价比优势
背景信息 RDS MySQL提供阿里云自研存储引擎X-Engine，相比InnoDB，X-Engine在磁盘空间占用和数据库整体成本上有比较明显的优势，X-Engine使用了层次化的存储结构，并结合ZSTD压缩算法实现了更高的数据压缩率。下文将详细对比X-Engine、...
表变更管理
Lindorm宽表支持多种表属性，例如列值保留版本数、数据压缩方式、数据有效期、冷热分界线等。您可以通过集群管理系统，为已创建的宽表添加或修改表属性。操作 步骤 登录集群管理系统。在左侧导航栏中，选择 数据管理>表变更管理。在 变更...
SQL Server数据库出现“Data compression and ...
版本兼容性问题，SQL Server企业版或者SQL Server 2016以上的标准版才支持数据压缩功能。解决方案 以下是两种解决方法：使用支持压缩功能的数据库版本。取消压缩功能，关于如何取消数据库压缩功能，请参见 对表或索引禁用压缩功能。更多...
引擎简介
支持自研字典压缩，进一步提升数据压缩比，节省存储空间。易用开放 完全兼容开源Kafka协议，可通过开源Kafka客户端直接访问。可通过MySQL客户端直接访问Lindorm消息引擎，进行数据读写，查看消费组状态。高性能 通过VirtualLog IO合并、...
OSS存储
轨迹数据的数据量通常很大，并且在很多场景中...compress":"zstd"数据压缩方式。更多压缩方式，请参见 ST_ExportTo。导出到OSS后，查询的SQL指令和原来相同。但是效率会降低。另外，当需要建立索引时，应当先建立索引，再将数据导出到OSS中。
OSS存储
轨迹数据的数据量通常很大，并且在很多场景中...compress":"zstd"数据压缩方式。更多压缩方式，请参见 ST_ExportTo。导出到OSS后，查询的SQL指令和原来相同。但是效率会降低。另外，当需要建立索引时，应当先建立索引，再将数据导出到OSS中。
OSS存储
轨迹数据的数据量通常很大，并且在很多场景中...compress":"zstd"数据压缩方式。更多压缩方式，请参见 ST_ExportTo。导出到OSS后，查询的SQL指令和原来相同。但是效率会降低。另外，当需要建立索引时，应当先建立索引，再将数据导出到OSS中。
产品优势
无优化 成本 数据压缩 深度优化的ZSTD算法，JNA重写，可杜绝Core dump，并且基于字典采样优化，压缩率比snappy提高50%，数据压缩比可高达10:1。默认为Snappy，使用ZSTD需依赖Hadoop-3.0，存在Core Dump的概率。编码 IndexableDelta算法，...
概述
使用Java语言开发产品时，您可以使用物联网平台提供的Java SDK，简化开发过程，使设备快速接入物联网...数据压缩 监控运维 远程配置 在不用重启设备或中断设备运行的情况下，可以在线远程更新设备的系统参数、网络参数等配置信息。远程配置
产品功能
高效压缩存储 TSDB 使用高效的数据压缩技术，将单个数据点的平均使用存储空间降为1~2个字节，可以降低90%存储使用空间，同时加快数据写入的速度。时序数据计算能力 TSDB 提供专业全面的时序数据计算函数，支持降采样、数据插值和空间聚合...
实例选型和集群规划
列存储支持较高的数据压缩率，可以达到2~5倍的压缩比，即对于1 TB原始数据，入库后若采用了列存储压缩设置，数据在0.5 TB以内，那么可以按1 TB的用户数据存储空间来规划集群实例规格。云原生数据仓库PostgreSQL版也支持OSS外表的扩展，可...
PolarDB PostgreSQL（兼容Oracle）2.0版本商业化公告
支持LZ4压缩算法及安全特性增强 PolarDB PostgreSQL版（兼容Oracle）2.0版本 引入了多项新功能，包括支持用户选择LZ4算法进行数据列压缩，以提高压缩性能，同时仍保留对原来pglz压缩方式的支持。此外，用户还可以通过使用 pg_read_all_data...
术语
硬件压缩盘（Smart-SSD）Smart-SSD是存储物理硬盘层的一种高压缩技术，SSD硬盘内嵌专用FPGA/ASIC压缩计算芯片，在数据读写访问过程中由内嵌专用芯片实时对数据进行解压缩、压缩，大幅降低了数据存储成本。同时，面向 PolarDB 专用场景进行...
存储资源
数据压缩：对于需要长期存储的数据，可以采用数据压缩和存储优化技术。通过压缩数据文件、使用更高效的存储格式，减少数据的存储空间占用。日志异步写入：在磁盘满的情况下，如果服务应用日志同步写，会造成线程阻塞，从而造成服务无响应等...
名词解释
COMPACTION 〇 〇 Compaction（数据压缩）是一种数据管理技术，用于优化和减小数据库文件的大小，从而提高数据库性能。不同的存储引擎实现中存在不同的Compaction策略。INDEX 〇 ✖️ Index（索引）是一种数据结构，用于加快数据库中数据的...
备份恢复概览
备份内容 OceanBase 数据库的备份恢复功能支持对数据库的数据进行恢复操作，支持的数据包括用户权限、表定义、系统变量、用户信息、视图信息等逻辑数据以及其他数据。页面概览 进入集群实例工作台页面后，单击左侧导航栏的 备份恢复，进入...
通过Lindorm Shell访问宽表引擎
COMPRESSION HBase表的数据压缩方式。无默认压缩算法。可选的压缩算法共以下三种：ZSTD（推荐）SNAPPY LZ4 NUMREGIONS 分片的个数。一般按照每个分片使用6~8 GB的存储量来计算分片数量。如果实例规模较大，分片数量可以按需设置多个。...
RDS SQL Server空间不足问题
数据压缩会增加CPU开销，因此需要根据实际业务情况进行评估，建议只在大表上启用数据压缩。整理索引碎片 索引碎片率较高会导致实际占用的数据存储空间过大，因此对索引执行碎片整理可以降低数据空间大小。您可以在控制台的 自治服务>性能...
透明页压缩TPC
什么是透明页压缩 透明页压缩 TPC（Transparent Page Compression）中，页压缩指对Buffer Pool中的页执行实时的I/O压缩和解压缩，透明是指使用过程中无感知，数据在写入磁盘时自动压缩，数据在从磁盘读取时自动解压缩。透明页压缩的主要...
如何设计时序数据表
时序数据表可以为您提高查询和存储性能，本文介绍如何根据时序数据的来源和场景建立时序数据表。时序数据示例 时序数据建模至关重要，需要仔细分析数据...但出于数据压缩和查询计算的角度考虑，应尽量避免使用VARCHAR类型作为字段列的类型。
PSL4发布说明
通过FPGA/ASIC芯片进行数据压缩可以减少写入存储介质的数据量，从而节省更多的存储空间。更多的空闲空间可以有效降低SSD磁盘固有的写放大，从而实现了性能的显著提升。数据被压缩后，物理Flash的存储数据访问量减少，从而提升了数据的访问...
PSL4发布说明
通过FPGA/ASIC芯片进行数据压缩可以减少写入存储介质的数据量，从而节省更多的存储空间。更多的空闲空间可以有效降低SSD磁盘固有的写放大，从而实现了性能的显著提升。数据被压缩后，物理Flash的存储数据访问量减少，从而提升了数据的访问...
PSL4发布说明
通过FPGA/ASIC芯片进行数据压缩可以减少写入存储介质的数据量，从而节省更多的存储空间。更多的空闲空间可以有效降低SSD磁盘固有的写放大，从而实现了性能的显著提升。数据被压缩后，物理Flash的存储数据访问量减少，从而提升了数据的访问...
跨境SaaS:深圳市易仓科技有限公司
价值5：Smart-SSD+数据冷温热分层，大幅降低存储成本 PolarDB 存储节点引入Smart-SSD，实现在硬件层面对数据进行压缩，数据压缩比可达2.0~3.0。易仓所有PolarDB实例切换Smart-SSD后，不仅存储成本降低35％，而且性能没有出现下降。另外，...
InnoDB/TokuDB/Myrocks引擎转换为X-Engine引擎
RDS MySQL 8.0支持X-Engine引擎，X-Engine可以提供更好的数据压缩能力，降低磁盘空间成本。本文介绍如何将InnoDB/TokuDB/Myrocks引擎转换为X-Engine引擎。背景信息 X-Engine是阿里云自研的联机事务处理OLTP（On-Line Transaction ...
版本发布记录
2024年01月 功能名称 描述 相关文档 社区兼容版22.8 优化 从MaxCompute外表导入数据时，增加支持独享Tunnel和在网络传输过程中进行数据压缩功能。默认打开text_log日志，记录日志等级为Warning、Error和Fatal的日志，可通过system.text_log...
备份原理
全量备份采用了将集群全量数据快照压缩后存储在其它离线存储介质的方式。为了保证分布式集群元数据的一致性，在全量备份开始的约10分钟内，集群会短暂禁止DDL的执行。基于备份集的全量恢复采用集群克隆的方式，通过下载远程存储备份集的...
- 产品推荐
- 这些文档可能帮助您