概述

为应对数据爆炸式增长的挑战,PolarDB分布式版本基于对象存储设计了一套列索引(Clustered Columnar Index,CCI)功能,支持将行数据实时同步到列存存储上,并支持以下功能:在线事务处理和实时数据分析的一体化能力,满足OLTP和OLAP...

PolarDB HTAP实时数据分析技术解密

In-Memory Column Index的技术架构 行列混合的优化 PolarDB原生有一套面向行的优化组件。在引擎层增加列功能后,此部分需要进行功能增强,优化需要能够判断一个查询应该被调度到行执行还是列执行。通过一套白名单机制和执行...

索引技术架构介绍

技术架构 行列混合优化 PolarDB 有一套面向行的优化组件,引擎层支持列功能之后,此部分需要进行功能增强。优化需要能够判断一个查询应该被调度到行执行还是列执行。基于此,列索引通过一套白名单机制和执行代价计算框架来...

使用OSS加速

算分离 加速可满足计算资源和存储资源分离。面对不同的计算任务,您无需再自建不同缓存进行匹配,满足多业务场景的吞吐加速。数据一致 加速提供了传统缓存方案不具备的数据一致性。当OSS上的文件被更新时,加速能自动识别并缓存...

PolarDB MySQL版8.0版本内核参数发布日志

2024.03.21 类型 参数 级别 说明 新增 loose_imci_build_max_pddl_threads Global 列索引执行并行DDL时的线程数量。取值范围:0~512。默认值为0。单位为个。loose_imci_max_pddl_threads_cpu_ratio Global 根据CPU数量调整列索引执行...

实时存储引擎

本文介绍 云原生数据仓库AnalyticDB MySQL版 的实时存储引擎。背景 云原生数据仓库AnalyticDB MySQL版 作为款实时数仓产品,为了支持低延迟的写入、更新场景,在传统数仓能力基础上,设计了实时存储引擎。数据写入和更新会以Append_only...

X-Engine简介

访问频度低的数据逐渐淘汰或是合并到持久化的存储层次中,并结合多层次的存储设备(NVM/SSD/HDD)进行存储。对性能影响比较大的Compaction过程做了大量优化:拆分数据存储粒度,利用数据更新热点较为集中的特征,尽可能的在合并过程中复用...

概述

技术原理 列索引特性在 PolarDB MySQL版 中的功能架构图如下:从以上架构图可以看到,PolarDB MySQL版 从存储引擎、执行算子、优化三个层面设计了列索引的特性:存储引擎:支持实时事务级别一致性的行列混合存储;执行算子:面向列...

高并发点查

开启行缓存 SelectDB中针对Page级别的内存缓存(Page Cache),每个Page中存储的是某列的数据,这意味着Page Cache是针对列的缓存。对于前面提到的行行里包括了多列数据,缓存可能被大查询给刷掉,为了增加行缓存命中率,...

CDN访问加速

支持海量存储 OSS的存储空间弹性无限扩展,您无需考虑存储架构升级。降低了存储费用和流量费用 使用该架构会产生OSS的存储费用、CDN的下行流量费用以及极少量的回源流量费用。其中OSS的存储费用仅为ECS云盘费用的一半,而CDN流量的单价约为...

MongoDB实例内存使用率高问题

返回信息示例如下:{."bytes belonging to page images in the cache":6511653424,"bytes belonging to the cache overflow table in the cache":65289,"bytes currently in the cache":8563140208,"bytes dirty in the cache cumulative":...

PutObject

IA:低频访问 Archive:归档存储 ColdArchive:冷归档存储 DeepColdArchive:深度冷归档存储 重要 如果要上传的文件数量较多,直接指定上传的文件类型为深度冷归档类型会造成较高的 PUT类请求费用。建议您先将文件的存储类型指定为标准存储...

常见问题

解决方案:通过-omax_stat_cache_size=xxx 参数增大stat cache 的 size,这样第次ls会较慢,但是后续的ls速度会提高,因为文件的元数据都在本地cache中。这个值默认是1000,约消耗4 MB内存,请根据您机器内存大小调整为合适的值。ossfs在...

现代IM系统中的消息系统—实现

本文主要以钉钉(DingTalk)的功能为参照,详细说明如何基于表格存储的Timeline模型实现钉钉的IM功能。以下内容按照聊天系统的消息存储、关系维护、即时感知、多端同步四个功能模块分块,分别介绍每部分的功能、方案介绍、表设计以及实现...

阿里云存储服务

存储类型分为标准存储、低频访问存储、归档存储、冷归档存储、深度冷归档多种存储类型,全面覆盖从热到冷的各种数据存储场景。就价格而言,数据越冷,存储成本越低,需要时的访问成本越高。您可以轻松地在这些存储类型之间转换以优化存储...

表格存储建表注意事项

表格存储支持半结构化的表,即建表时只需要指定主键列(1至4列),不需要在创建表的时候指定属性列。表格存储表中包含的属性列个数无限制,且每行数据可以拥有不同数量不同类型的属性列。在应用程序写入数据时,表格存储需要应用程序指定...

玄武分析型存储

行列混合存储 玄武存储引擎支持行列混和行存储格式,其中行列混种以列为基础兼顾行的模式,类似于Hadoop中的ORC/Parquet格式。不同的是玄武的行列混不仅兼顾分析类的列裁剪和大吞吐扫描性能,而且结合其行对齐的能力,...

计费常见问题

本文介绍文件存储NAS计费常见问题。如果您任何反馈或疑问,请单击下方按钮联系NAS技术支持进行咨询。NAS技术支持 计费 开通NAS服务后,就开始计费吗?创建文件系统实例后,就开始计费吗?NAS服务如何停止计费?删除存储数据后,为什么...

最佳实践

容器与云原生 如何利用云存储网关作为Windows Docker存储访问OSS 在Linux Docker容器中挂载使用云存储网关 Windows应用 利用云存储网关搭建Windows文件共享服务器 利用云存储网关的SMB共享搭建windows FTP服务器访问对象存储OSS 如何基于云...

数据分层存储

标准存储即全SSD热存储,是Hologres的默认存储,满足低延时、高性能访问数据需求,对于大多数使用场景而言,标准存储是最有效且最具成本效益的选择,文中简称为热。低频访问存储即全HDD冷,满足低频访问数据的低成本存储需求,适用于对...

开启和使用冷数据分层存储

分区表冷 分区表是种比较常见的冷对象,在冷功能使用上一些特殊的方式。全部分区表冷。方式:依次将已经存在的分区子表转为冷。prt1为分区表(父表)-prt1_p1为prt1的子表-prt2_p2为prt1的另一张子表-对所有的子表执行...

开启和使用冷数据分层存储

分区表冷 分区表是种比较常见的冷对象,在冷功能使用上一些特殊的方式。全部分区表冷。方式:依次将已经存在的分区子表转为冷。prt1为分区表(父表)-prt1_p1为prt1的子表-prt2_p2为prt1的另一张子表-对所有的子表执行...

存储

存储是阿里云为云服务ECS提供的块设备类型产品,具备高性能、低时延等特性。您可以像使用物理硬盘一样格式化并建立文件系统来使用块存储,可满足绝大部分通用业务场景下的数据存储需求。适用场景 阿里云为您的云服务ECS提供了丰富的 ...

在云控制台上使用块网关

本文介绍如何通过阿里云云存储网关控制台快速创建块网关及iSCSI卷。前提条件 已注册阿里云账号,并完成实名认证,详情请参见 注册阿里云账号。说明 建议您使用RAM账户登录云存储网关控制台进行相关操作,详情请参见 账号访问控制。已开通云...

管理块网关

本文介绍如何在阿里云云存储网关控制台上管理块网关,包括创建块网关、删除块网关、修改块网关名称等操作。前提条件 已注册阿里云账号,并完成实名认证,详情请参见 注册阿里云账号。说明 建议您使用RAM账户登录云存储网关控制台进行相关...

Partial Result Cache(PTRC)

您可以使用 PolarDB for MySQL 提供的Partial Result Cache(简称PTRC)功能来缓存查询语句中算子的中间结果集,来减少这些复杂算子的重复计算,以此来提升查询性能。本文介绍了PTRC的概念、工作原理、如何基于代价选择PTRC以及PTRC的动态...

通过命令行工具快速使用云存储网关软件版

具体操作如下:线上云存储网关软件版:在创建云存储网关软件版的地域,已可用的云服务ECS作为客户端机器。具体操作,请参见 创建ECS实例。说明 线上云存储网关软件版当前支持的地域:cn-hangzhou,cn-shanghai,cn-qingdao,cn-beijing...

通用型NAS计费

存储容量波动型(例如,有一小时的最大存储容量为100 GiB,其余每小时的最大存储容量均为90 GiB)王先生在华东1(杭州)创建了一个容量型的文件系统,假设在2021年6月份期间每小时的最大存储容量均为90 GiB,但其中有一小时的最大存储容量...

管理文件网关

本文介绍如何在云存储网关控制台上管理文件网关,包括创建文件网关、删除文件网关、修改文件网关名称等操作。前提条件 已注册阿里云账号,并完成实名认证,更多信息,请参见 注册阿里云账号。说明 建议您使用RAM账户登录云存储网关控制台...

产品架构

本文介绍 表格存储 的系统架构和典型应用架构。系统架构 表格存储 的架构如下图所示。业务场景 表格存储 适用于元数据、消息数据、时空数据、大数据等场景下的系统搭建。数据接入 表格存储 提供SDK、DataWorks、IoT规则引擎等多种数据接入...

什么是文件存储NAS

阿里云文件存储NAS(Apsara File Storage NAS)是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。产品概述 NAS基于POSIX文件接口,天然适配原生操作系统...

存储空间地域属性

OSS存储空间(Bucket)地域属性分为地域属性和无地域属性。地域属性Bucket 地域属性Bucket适用于OSS通用场景。您在创建Bucket时需选择地域属性,并指定Bucket所在的具体Region,例如华东1(杭州)。更多信息,请参见 访问域名和...

存储网关

存储网关CSG(Cloud Storage Gateway)是款可以部署在用户本地数据中心和阿里云上的网关产品。它以阿里云对象存储OSS为后端存储,为云上和云下应用提供业界标准的文件服务(NFS和SMB)和块存储服务(iSCSI)。云存储网关 目前提供两种...

内存管理

compaction_max_memory_limit_percent 100 disable_storage_page_cache true 是否禁用BE存储层page缓存,和storage_page_cache_limit配合使用,在内存资源充足和大数据量查询的场景中可以打开,能够加速查询性能。storage_page_cache_...

常见问题

本文介绍了文件存储NAS产品简介中的常见问题。什么是文件存储NAS?阿里云文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。NAS兼容了POSIX文件接口,可支持数千台计算节点共享访问,可以挂载到弹性计算ECS、神龙裸...

教程示例:使用RAM Policy控制OSS的访问权限

本教程示例详细演示了如何使用RAM Policy控制用户对OSS存储空间(Bucket)、文件夹以及文件夹下文件(Object)的访问权限。背景信息 RAM Policy是基于用户的授权策略。通过设置RAM Policy,您可以集中管理您的用户(例如员工、系统或应用...

功能支持情况

Bucket级别 操作 说明 OSS-HDFS服务功能支持情况 存储类型 OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型,全面覆盖从热到冷的各种数据存储场景。仅支持标准、低频访问存储类型的Bucket开通OSS-HDFS服务 查询Bucket级别的...

创建存储空间

在上传文件(Object)到OSS之前,您需要创建一个用于存储文件的存储空间(Bucket)。存储空间具有各种配置属性,包括访问权限、存储类型等。您可以根据实际需求,创建不同类型的存储空间来存储不同的数据。注意事项 创建存储空间本身不收取...

SA混合云存储阵列

阿里云混合云存储阵列作为软硬一体的存储设备,集成了阿里云存储服务,融合了公共云存储和传统存储阵列的优点:简单 客户无需更改原有的IT架构,就可以像使用本地存储设备一样使用阿里云混合云存储阵列,同时使用本地存储空间和云端存储...

测试模型

本章节为您介绍本次表格存储性能测试的测试模型。表结构 主键名 类型 编码方式 长度 userid string 4-Byte-Hash+Long.toHexString 20 属性列 属性列名 类型 长度 field0 string 100 field1 string 100 field2 string 100 field3 string 100...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 云存储网关 对象存储 混合云存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用