OpenStore冷热共享/分离引擎介绍

本文主要介绍OpenStore自定义冷热存储引擎的适用场景、架构、优势以及性能指标。说明 OpenStore自定义冷热存储不再支持新购,如果您需要使用OpenStore存储,请开启Openstore智能混合存储。详细信息,请参见 OpenStore智能存储引擎介绍。...

OpenStore智能存储引擎介绍

本文主要介绍OpenStore智能混合存储引擎的适用场景、架构、优势以及性能指标。背景信息 在日志全观测场景下,通常因为业务场景或监管需求,需要长时间存储数据或归档审计。在使用开源Elasticsearch的过程中,需要进行集群冷热数据分离,将...

消息存储和清理机制

本文为您介绍 云消息队列 RocketMQ 版 中消息的存储机制,包括消息的存储粒度、判断依据及后续处理策略等。背景信息 参考 云消息队列 RocketMQ 版 中 队列 的定义,消息按照达到服务器的先后顺序被存储到队列中,理论上每个队列都支持无限...

高压缩引擎(X-Engine)介绍

解决方案:PolarDB 高压缩引擎(X-Engine)为应对如上历史数据归档存储方面的挑战和诉求,PolarDB 基于如下技术创新和突破,推出了 高压缩引擎(X-Engine)产品系列:阿里巴巴自研的基于LSM-tree架构的存储引擎X-Engine提供了强大的数据...

X-Engine最佳实践

详情请参见 淘宝万亿级交易订单背后的存储引擎。钉钉聊天记录信息库 钉钉作为中国领先的企业IM工具,在中国有超过亿级别的用户。不同于传统的微信等用户级IM工具。企业IM需要实现聊天记录的永久保存,并且提供多端漫游功能。在用户量持续...

为什么使用表格存储过程中会有少量的500错误

表格存储使用上述的自动负载均衡机制实现表数据规模和访问并发的自动扩展,全程无需人工介入,当然在数据表新建立时,只有一个数据分区,该表上能够提供的读写并发有限,自动负载均衡机制也有一定的延时性,所以可以直接联系到我们的工程师...

使用表格存储过程中返回503错误码

问题原因 表格存储使用共享存储机制,以数据分区为逻辑单位,因此在负载均衡的过程中不会有实际数据的迁移,只是数据表元信息的变更。在元信息变更的过程中,为了保证数据的一致性,涉及到的数据分区会有短暂的不可用时间,正常情况下...

现代IM系统中的消息系统—模型

Tablestore Timeline的底层是基于LSM存储引擎的分布式数据库,LSM的最大优势就是对写入非常友好,天然适合消息写扩散的模式。同时对查询也做了极大优化,例如热数据进缓存、bloom filter等等。数据表采用Range Partition的分区模式,能提供...

设置数据冷热存储策略

如果您想要以指定规则对文件引擎中存储的数据进行归档,将冷热数据...POLICY 文件引擎的存储类型。取值:HOT(默认值):文件存储在您创建实例时选择的存储介质中,例如标准型云存储、性能型云存储、本地SSD盘。COLD:文件存储在冷存储中。

索引简介

每个Document都是由多个field组成,每个field中包含一系列的词语,构建索引...由于summary过大,引擎存储summary时提供压缩的机制,在schema中配置summary压缩,那么引擎存储时会用zlib压缩后再存储,读取时引擎会先解压,再返回给用户。

X-Engine简介

为什么设计一个新的存储引擎 X-Engine的诞生是为了应对阿里内部业务的挑战,早在2010年,阿里内部就大规模部署了MySQL数据库,但是业务量的逐年爆炸式增长,数据库面临着极大的挑战:极高的并发事务处理能力(尤其是双十一的流量突发式暴增...

引擎类型

计算引擎是基于云原生架构提供的分布式计算服务,支持社区版计算模型以及编程接口,同时深度融合Lindorm存储引擎特性,利用底层数据存储特征以及索引能力,高效地完成分布式作业任务。流引擎 兼容SQL、Kafka接口 IoT数据处理、应用日志处理...

实例规格

HybridDB for MySQL提供两种实例规格族:高性能事务引擎:存储引擎为事务引擎TokuDB,更多内容请参见 事务引擎介绍。高性能分析引擎:存储引擎为分析引擎CStore。规格族 规格 描述 适用场景 高性能事务引擎 petadata.s2.xlarge(8核/32GB/...

释放引擎

本文介绍通过控制台释放引擎的方法及相关注意事项。前提条件 实例的 服务类型 为Lindorm。如何查看服务类型,请参见 产品系列。释放引擎前请完成以下操作:LTS:请先删除所有任务,再释放LTS。说明 如果LTS还存在备份、全文搜索同步或其他...

开通消息引擎

Lindorm消息引擎是Lindorm流引擎的底层存储,本文介绍如何开通消息引擎。说明 您可以通过Lindorm管理控制台创建Lindorm实例,购买消息引擎,或为已有的Lindorm实例开通消息引擎。创建实例时开通消息引擎 在 实例列表 中点击 创建。在...

Beam概述(公测)

相关文档 更多关于Beam存储引擎的使用,请参见 Beam使用(公测)。Beam支持多种压缩算法,其中字典编码功能可以将字符串类型的数据压缩为整型数据,提升存储效率,加速过滤、聚合等类型查询的性能。详情请参见 字典编码(公测)。如果您...

持续的存储优化

维护一个规模适中且价格合理的存储架构是一个持续的过程。为了更有效地利用存储支出,您每个月都应该进行存储优化工作。您可以通过以下方式简化这项工作:建立用于优化存储和设置存储策略的持续机制。通过监控服务和账单密切监控存储成本。...

步骤三:创建资源

Topic消息的存储引擎。云消息队列 Kafka 版 支持以下两种存储引擎。云存储:底层接入阿里云云盘,具有低时延、高性能、持久性、高可靠等特点,采用分布式3副本机制。实例的 规格类型 为 标准版(高写版)时,存储引擎只能为 云存储。Local ...

X-Engine引擎使用须知

作为自研数据库PolarDB的存储引擎之一,已经广泛应用在阿里集团内部诸多业务系统中,包括交易历史库、钉钉历史库等核心应用,大幅缩减了业务成本,同时也作为双十一大促的关键数据库技术,挺过了数百倍平时流量的冲击。X-Engine是适用于大...

Kafka数据接入

存储引擎:Topic的存储引擎可以为Local存储或云存储。connect-error-kafka-ots-sink 异常数据 Topic 用于存储Sink的异常数据的Topic。单击 配置运行环境 显示该参数。该Topic可以和 死信队列Topic 为同一个Topic,以节省Topic资源。Topic:...

PolarDB HTAP实时数据分析技术解密

其包含如下几个关键的技术创新点:在PolarDB的存储引擎(InnoDB)上,新增列式索引(Columnar Index)。用户可以选择通过DDL将一张表的全部列或者部分列创建为列索引,列索引采用列压缩存储,其存储空间消耗会远小于行存格式。默认列索引会...

如何基于LSM-tree架构实现一写多读

本文主要阐述如何基于LSM-tree结构的存储引擎实现数据库的一写多读能力。LSM-tree数据库引擎 LSM-Tree全称是Log Structured Merge Tree,是一种分层、有序,面向磁盘设计的数据结构,其核心思想是利用磁盘批量的顺序写要比随机写性能高的...

作为Input接入

Topic消息的存储引擎。云消息队列 Kafka 版 支持以下两种存储引擎。云存储:底层接入阿里云云盘,具有低时延、高性能、持久性、高可靠等特点,采用分布式3副本机制。实例的 规格类型 为 标准版(高写版)时,存储引擎只能为 云存储。Local ...

作为Input接入

Topic消息的存储引擎。云消息队列 Kafka 版 支持以下两种存储引擎。云存储:底层接入阿里云云盘,具有低时延、高性能、持久性、高可靠等特点,采用分布式3副本机制。实例的 规格类型 为 标准版(高写版)时,存储引擎只能为 云存储。Local ...

列存索引技术架构介绍

MySQL最常用的存储引擎都是按行存储,在按列进行海量数据分析时,按行从磁盘读取数据存在非常大的IO带宽浪费。其次,行式存储格式在处理大量数据时会大量拷贝不必要的列数据,对内存读写效率也存在冲击。PolarDB并行查询突破CPU瓶颈 并行...

时序分析存储概述

背景信息 分析存储是 表格存储 针对时序场景进行定制优化的低成本存储引擎。分析存储不仅支持高效的数据压缩存储,还具备强大的查询和分析功能,非常适合大规模的数据分析和查询任务。分析存储与时序表的数据存储相互独立,允许用户自定义...

功能发布记录

FE节点表锁机制升级为短锁,有效解决DDL卡住、以及FE节点元数据不一致出现异常报错等问题,提升FE节点元数据的稳定性和一致性。OpenAPI能力升级,新增计算组、数据湖加速、资源组等接口,提升实例运维管理能力。详情请参见 API概览。生态...

存储冗余概述

对象存储OSS提供本地冗余存储和同城冗余存储两种存储冗余类型,覆盖从单可用区到多可用区的数据冗余机制,以保证数据的持久性和可用性。...如何将本地冗余存储类型的Bucket转换为同城冗余存储类型的Bucket,请参见 转换Bucket的存储冗余类型。

实时存储引擎

本文介绍 云原生数据仓库AnalyticDB MySQL版 的实时存储引擎。背景 云原生数据仓库AnalyticDB MySQL版 作为一款实时数仓产品,为了支持低延迟的写入、更新场景,在传统数仓能力基础上,设计了实时存储引擎。数据写入和更新会以Append_only...

功能发布记录

本文介绍了表格存储每次发布涉及的功能变更及对应的文档,帮助您了解 表格存储 的发布动态。2023年 2023年12月 功能名称 功能描述 发布时间 发布地域 相关文档 时序分析存储商业化 使用分析存储(Analytical Store)功能,您可以低成本存储...

OSS访问日志会被定期清除吗?

OSS访问日志的存储和清理机制如下:日志转存的OSS访问日志:如果您使用了日志转存,则您的OSS访问日志会被转存储在OSS的Bucket中,OSS不会定期清除您的日志文件。如果您需要定期清除日志文件,您可以配置生命周期规则进行自动删除。如何...

存储引擎对比

在创建Topic时,您可以为 云消息队列 Kafka 版 选择云存储或Local存储引擎。云存储依托阿里云云盘算法、低延迟、低成本、弹性伸缩能力更好,适用于大多数场景;若有特殊需求,例如Compact、幂等、事务、分区顺序消息等,建议您选择Local...

存储类型概述

如您的业务需要更高的可用性保障,建议您使用同城冗余的存储类型来存储和使用数据。标准存储-同城冗余(ZRS)采用多可用区(AZ)内的数据冗余存储机制,将用户的数据冗余存储在同一地域(Region)的多个可用区。当某个可用区不可用时,仍然...

转换Bucket的存储冗余类型

随着您的业务对数据持久性和服务可用性要求的提高,采用单可用区的数据冗余存储机制的本地冗余存储已不再满足您的业务要求,您可以将Bucket的存储冗余类型从本地冗余存储转换为同城冗余存储,从而具备抵抗可用区级故障的能力。本文介绍如何...

基本概念

用户可以根据实际需求,创建不同类型的存储空间来存储不同的数据。同一个存储空间的内部是扁平的,没有文件系统的目录等概念,所有的对象都直接隶属于其对应的存储空间。每个用户可以拥有多个存储空间。存储空间的名称在OSS范围内必须是...

时序数据生命周期

当要实现自动清理时序表中的历史数据...} 常见问题 如何删除时序数据 相关文档 分析存储是针对时序场景进行定制优化的低成本存储引擎。您可以使用分析存储低成本存储时序数据以及快速查询和分析时序数据。更多信息,请参见 时序分析存储概述。

存储冗余

存储冗余类型 服务可用性 价格 本地冗余存储 99.9%存储空间-日志存储 0.0115元/GB/天 存储空间-日志低频存储 0.005元/GB/天 存储空间-日志归档存储 0.0017元/GB/天 同城冗余存储 99.99%存储空间-日志存储 0.0115元/GB/天 存储空间-日志低频...

开通指南

本章介绍如何开通文件引擎存储服务。说明 文件引擎LindormDFS是Lindorm底层存储,无需额外购买 即可开通使用。...设置白名单 请将需要访问文件引擎的节点加入Lindorm白名单。添加方法请参考 设置白名单。说明 文件引擎暂不支持公网访问。

PutBucket

请求元素 名称 类型 是否必选 示例值 描述 StorageClass 字符串 否 Standard 指定存储空间的存储类型。取值范围如下:Standard(默认):标准存储 说明 创建无地域属性Bucket时,仅支持Standard类型。在OSS ON云盒使用场景中,仅支持...

存储空间概述

✓ ✓ 服务器端加密 当您在设置了服务器端加密的存储空间(Bucket)中上传文件(Object)时,OSS对收到的文件进行加密,再将得到的加密文件持久化保存。当您通过GetObject请求下载文件时,OSS自动将加密文件解密后返回给用户,并在响应头中...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
对象存储 云存储网关 混合云存储 文件存储 CPFS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用