整体架构

对于其中部分操作,Storage Service会根据数据特征、时序等多个维度综合评估,自动执行数据优化任务,尽可能保持稳定高效的数据存储和计算状态。元数据管理 主要负责增量场景下 事务并发冲突管理、数据版本管理、Time travel管理、元数据...

产品简介

阿里云数据湖构建(Data Lake Formation,简称 DLF)是一款全托管的快速帮助用户构建云上数据湖及Lakehouse的服务,为客户提供了统一的元数据管理、统一的权限与安全管理、便捷的数据入湖能力以及一键式数据探索能力。DLF可以帮助用户快速...

迁移工具

将表格存储数据表中数据同步到另一个数据表 数据传输服务DTS 数据传输服务DTS(Data Transmission Service)是阿里云提供的实时数据流服务,支持关系型数据库(RDBMS)、非关系型数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据...

ActionTrail日志清洗

说明 根据业务需求,判断是否需要新建文件夹,将ActionTrail投递过来的数据存储在新建文件夹中。在DLA中完成以下操作:开通DLA服务,请参见 开通云原生数据湖分析服务。初始化DLA数据库主账号密码,请参见 重置数据库账号密码。步骤一:...

常见问题

请先执行 flush 操作将数据刷写至磁盘上,再执行 compaction 操作,即可将数据存储至冷存储中。compaction 操作说明如下:HBase Shell使用方式,请执行 major_compact 命令。Lindorm-cli连接使用方式,使用语法请参见 ALTER TABLE。Q:为...

引擎简介

产品架构 云原生多模数据库 Lindorm 流引擎的架构图如下:云原生多模数据库 Lindorm提供了一体化的数据存储、计算和查询能力。流引擎面向流式数据,实现了流存储和流计算的融合一体化,提供高效的实时数据处理能力。同时,在元数据、SQL...

数据格式

数据存储分桶 为了进一步优化读写效率,Transactional Table 2.0支持按照BucketIndex对数据进行切分存储,BucketIndex数据列默认复用PK列,bucket数量可通过配置表属性 write.bucket.num 指定,因此对同一张表或分区的数据,写入数据会按PK...

现代IM系统中的消息系统—模型

支撑海量数据存储:对于消息存储库来说,如果需要消息永久存储,则随着时间的积累,数据规模会越来越大,需要存储库能应对长时间积累的海量消息数据存储,需要能达到PB级容量。低存储成本:消息数据的冷热区分是很明显的,大部分查询都会...

低成本历史库

云原生多模数据库Lindorm提供海量数据的低成本存储能力(0.12元/GB/月)、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求,同时可以无缝对接spark、hive、flink、presto等开源分析生态满足用户对数据的复杂分析需求...

冷热分离

云数据库HBase增强版支持冷热分离功能,可以将冷热数据存储在不同的介质中,有效提升热数据的查询效率,同时降低数据存储成本。背景信息 在海量大数据场景下,一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低,同时这...

IO加速

RDS PostgreSQL数据库服务端收到用户的SQL查询后,由查询执行器对查询进行处理,其根据查询要访问的数据所在的表空间决定数据存储的位置。在未开启IO加速功能时,所有数据只能存储在云盘上。开启IO加速功能后:如访问的是非临时数据(正常...

基本概念

EIU EIU,全称为Elastic IO Unit,中文名称为弹性IO资源,是 AnalyticDB for MySQL 弹性模式集群版(新版)的存储节点,负责数据存储,还提供数据写入、数据查找和数据扫描等能力。一组EIU,也就是一个存储节点组,其中包含三个存储节点。...

SDS分布式存储

以PB级的数据存储容量为业务提供支撑(最高容量可达EB级)。融合混合云特性,数据无缝上云。稳定可靠,保障业务持续运行 全面的数据保护和可靠性设计保证数据安全。数据强一致性保障。软件定义存储特性,降低了运维的难度和支出。全程无忧...

使用流程

背景信息 使用表格存储前,您需要了解表格存储相关介绍,例如产品概述、基本概念等,然后根据业务场景确定使用的数据存储模型、实例模型和实例规格。表格存储 提供了宽表(WideColumn)模型、时序(TimeSeries)模型和消息(Timeline)模型...

入湖基础操作

数据湖存储位置:数据存储的OSS路径,入湖任务会自动创建此处填写的空文件夹来存储数据。分区信息:添加需要写入的分区信息。分区表达式:填写描述分区值的获取方式,比如 MySQL 中from_unixtime(gmt_create)。分区字段:填写分区字段名称...

管理实例

选择私有定制RDS实例 PolarDB-X 1.0计算资源只读实例 的数据存储在 PolarDB-X 1.0存储资源实例(包括 PolarDB-X 1.0存储资源主实例 和 PolarDB-X 1.0存储资源只读实例)上。在 存储节点信息 页面,您可以查看当前数据库下可供选择的所有 ...

RestAPI Reader最佳实践

2023-01-04 00:44:30"},{"axis":"series1","value":5625821,"createTime":"2023-01-04 00:52:06"}]} 其中data为返回的数据存储路径,读取到的数据有3个字段:axis、value、createTime。接口测试工具调用示例:准备工作:创建MaxCompute...

低成本RDS历史库

云原生多模数据库 Lindorm 提供海量数据的低成本存储能力(0.12元/GB/月)、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求,同时可以无缝对接Spark、Hive、Flink、Presto等开源分析生态满足用户对数据的复杂分析...

什么是云原生多模数据库Lindorm

本文介绍 云原生多模数据库 Lindorm 的...流引擎 云原生多模数据库 Lindorm 流引擎是 面向流式数据处理 的引擎,提供了流式数据的存储和轻计算功能,帮助您轻松实现流式数据存储至 云原生多模数据库 Lindorm,构建基于流式数据的处理和应用。

应用场景:低成本历史库

云原生多模数据库 Lindorm 提供海量数据的低成本存储能力(0.11元/GB/月)、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求,同时可以无缝对接spark、hive、flink、presto等开源分析生态满足用户对数据的复杂分析...

某新能源汽车造车新势力

客户感言 阿里 云原生多模数据库 Lindorm 相比于其他存储引擎和HBase开源版本,提供了更高效的压缩率和同规格下的更大吞吐量,能稳定的支撑高并发、海量数据存储的业务需求。同时提供了成熟的冷热分离方案,大大降低了存储和运维成本,对于...

配置数据库审计实例

购买并启用数据库审计实例后,您可以在云盾数据库审计管理控制台管理您的数据库审计实例。本文介绍如何为数据库实例配置白名单、管理存储容量、升级和续费。前提条件 已启用数据库审计实例。具体操作,请参见 启用数据库审计实例。操作步骤...

安全基线检查

数据存储安全 数据存储应采取加密等安全措施,保障数据的保密性和完整性。该策略检查数据库是否开启加密功能。数据传输加密 数据传输活动应采取加密等安全措施,保障数据传输过程的安全性。该策略检查数据库在传输过程中是否开启了加密传输...

OSS/OSS-HDFS概述

背景信息 阿里云对象存储OSS(Object Storage Service)是一款海量、安全、低成本、高可靠的云存储服务,可提供99.9999999999%(12个9)的数据持久性,99.995%的数据可用性。多种存储类型供选择,全面优化存储成本。更多信息,请参见 什么...

Napatech案例

云原生多模数据库 Lindorm 助力...客户价值 支持多个100G数据流量采集点的数据包元数据存储及快速索引。帮助用户实现全量数据的回溯分析。数据库架构简化、支持弹性扩容,运维难度及成本大幅减低。集成第三方大数据系统,助力业务分析。

X-Engine最佳实践

迁移到X-Engine之后,很多业务可以免除分库分表的需求,使用单库即可承载近10 TB的数据存储服务。作为中国领先的电子商务服务提供商,用户体量庞大,阿里内部有非常多的在线业务承受非常大的存储成本压力。接下来为您介绍阿里巴巴集团内部...

产品优势

云数据库MongoDB版的部署架构详情如下:单节点架构 适用于开发、测试、学习培训及其他非企业核心数据存储的场景。您可以根据各类场景的差异适配对应的规格配置,为企业降低更多的成本支出。详情请参见 单节点架构。副本集架构 适用于读多写...

表设计规范

数据存储规范 按数据层规划数据的生命周期:源表ODS层:每天从业务系统同步过来的数据,全部保留,生命周期定义永久保存。当下游数据受损时,可以从ODS恢复数据。若ODS每天同步过来的是全量表,则可以通过全表拉链的方式来压缩存储。数据...

使用冷存储

阿里云HBase针对冷数据存储的场景,提供一种新的冷存储介质,其存储成本仅为高效云盘的1/3,写入性能与云盘相当,并能保证数据随时可读。背景信息 用户可以在购买云HBase实例时选择冷存储作为一个附加的存储空间,并通过建表语句指定将冷...

AUTO模式核心特性及典型场景

热点分裂——有效解决数据热点 对于热点数据,PolarDB-X 支持两种处理方式:第一种方案是将热点数据所在的分区数据迁移到特定的数据节点,让热点数据以独享存储资源的方式服务业务,能够实现热点数据不影响非热点数据的业务。具体操作步骤...

成本

存储分层能力 很多分析场景的数据具有一定的时效性,时间越近的数据访问频率越高、越远的数据访问频率越低。AnalyticDB PostgreSQL版 能够根据需求,自动地将部分时效性较低的数据进行归档、使用OSS等成本更低、访问速度较慢的存储介质替换...

数据源概述

DataWorks的数据源用于连接不同的数据存储服务。在配置数据集成同步任务之前,您需要首先定义好同步任务的源端和目的端数据源信息,以便在配置同步任务时,能够通过选择数据源名称来确定数据的读取和写入数据库。本文将介绍配置数据源时您...

资产安全概述

静态脱敏 直接修改底层数据的存储,数据存储时就已经是加密或者脱敏过的,例如常见的pn_md5。典型应用场景:数据集成时对敏感数据加密、数仓分层建设时对应用层数据脱敏等。动态脱敏白名单 应用于特定的场景下,需要 暂时对一些用户开放...

资产安全概述

静态脱敏 直接修改底层数据的存储,数据存储时就已经是加密或者脱敏过的,例如常见的pn_md5。典型应用场景:数据集成时对敏感数据加密、数仓分层建设时对应用层数据脱敏等。动态脱敏白名单 应用于特定的场景下,需要 暂时对一些用户开放...

监控与日志

​表格存储的日志数据存储的最大保存时长默认为7天,您可以根据实际需要自行修改。相关操作,请参见 修改Logstore配置。查询与分析审计日志 对表格存储实例中的资源进行操作时,系统会自动采集审计日志并建立索引。您可以在审计日志页面对...

实例

不论当前实例规格,使用时序模型时,时间线数据的按量读写吞吐量均按照容量型读写计费,时间线元数据的按量读写吞吐量均按照高性能读写计费,且时间线元数据的数据存储均按照高性能存储计费。更多信息,请参见 时序模型计量计费。类型/对比...

PSL4发布说明

简介 PSL4是 PolarDB 全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,使单位数据容量价格更低。发布时间 2022年06月07日 存储价格 存储类型 中国内地 中国香港及海外 按...

PSL4发布说明

简介 PSL4是 PolarDB 全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,使单位数据容量价格更低。发布时间 2022年08月27日 存储价格 存储类型 中国内地 中国香港及海外 按...

PSL4发布说明

简介 PSL4是 PolarDB 全新推出的存储类型,采用阿里巴巴自研的 硬件压缩盘(Smart-SSD)技术,在物理SSD磁盘层面压缩、解压缩存储的数据,使单位数据容量价格更低。发布时间 2022年08月27日 存储价格 存储类型 中国内地 中国香港及海外 按...

什么是对象存储OSS

阿里云对象存储OSS(Object Storage Service)是一款海量、安全、低成本、高可靠的云存储服务,可提供99.9999999999%(12个9)的数据持久性,99.995%的数据可用性。多种存储类型供选择,全面优化存储成本。OSS具有与平台无关的RESTful API...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS 云数据库 Redis 版 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用