数据存储管理-数据存储管理文档介绍内容-阿里云

冷数据存储计费规则（可选）

本文介绍了开启冷数据归档功能后，在冷数据存储方面的计费规则。当开启冷数据归档后，PolarDB 企业版支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明更多关于冷数据归档的详细介绍，请参见冷数据归档概述。...

数据治理

EMR集群类型元数据存储类型 数据存储类型：OSS 数据存储类型：OSS-HDFS 数据存储类型：HDFS 新版数据湖集群（DataLake）数据湖构建（DLF）RDS实例 MySQL 自定义集群（Custom）数据湖构建（DLF）RDS实例 MySQL 其他集群-数据保护伞为什么有...

应用场景

可以将访问频度非常高的数据存储在云数据库 Memcache 版中，底层数据存储在 RDS 中。大型促销类业务大型促销秒杀系统，系统整体访问压力非常大。一般的数据库根本无法承载这样的读取压力，可选用云数据库 Memcache 版存储。带有计数器的...

数据引入层（ODS）

ODS（Operational Data Store）层存放您从业务系统获取的最原始的数据，是其他上层数据的源数据。业务数据系统中的数据通常为非常细节的数据，经过长...ODS层的表建议以统计日期及时间分区表的方式存储，便于管理数据的存储成本和策略控制。

数据引入层（ODS）

ODS（Operational Data Store）层存放您从业务系统获取的最原始的数据，是其他上层数据的源数据。业务数据系统中的数据通常为非常细节的数据，经过长...ODS层的表建议以统计日期及时间分区表的方式存储，便于管理数据的存储成本和策略控制。

应用场景

云数据库Redis版适用于多种场景，尤其是请求并发量大场景中的数据存储。游戏行业应用游戏行业通常将云数据库Redis版作为重要的部署架构组件，用于缓存或数据持久化。场景一：Redis作为缓存加速应用访问 Redis作为缓存层，加速应用访问。...

如何实现一键转冷存

参数参数名称描述 relname 对象（表\索引）名称说明如果是非分区表或子分区表，则会将表本身的数据转为OSS存储，索引数据存储位置不变。如果是分区表，请使用 polar_alter_partitioned_to_oss。如果是索引，则会将该索引本身的数据转为...

如何实现一键转冷存

参数参数名称描述 relname 对象（表\索引）名称说明如果是非分区表或子分区表，则会将表本身的数据转为OSS存储，索引数据存储位置不变。如果是分区表，请使用 polar_alter_partitioned_to_oss。如果是索引，则会将该索引本身的数据转为...

Transaction Table2.0概述

很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储、计算解决方案，本文为您介绍本方案...

什么是备份数据量

与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小在单次全量备份情况下，数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据量（DBS）>存储数据量（OSS）。综上所述，您可通过调整...

产品概述

专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。PolarDB-X 1.0 核心能力采用标准关系型数据库技术实现，配合完善的...

数据库管理

MySQL数据库管理数据库类型为MySQL系列、MariaDB系列或AnalyticDB MySQL版，详情请参见支持的数据库类型。登录数据管理DMS 5.0。在DMS左侧的实例列表中，右键单击目标实例，从弹出的列表中选择数据库管理。按需执行如下操作。创建数据...

功能概述

表格存储面向海量结构化数据提供Serverless表存储服务，适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念在使用 ...

流式数据通道概述

热数据存储量会出现增长情况：在开启异步处理的场景下（Merge或Zorder），MaxCompute流式数据通道服务会对最近一小时写入的数据保存两份，一份为原始数据，一份为异步聚合后的数据，数据的存储量会有一定程度的冗余。冗余数据的保存周期...

角色管理

本文档主要为您说明如何管理数据湖构建中的角色。说明子账号需要具备admin（数据湖管理员）或 super_administrator（超级管理员）的权限，才可以进行角色相关操作。查看角色信息 1.打开数据湖构建控制台，并打开数据权限管理-角色菜单。2...

应用场景

您可以将模式固定的结构化数据存储在 RDS（Relational Database Service）中，模式灵活的业务存储在MongoDB中，高热数据存储在云数据库Redis 或云数据库Memcache 中，实现对业务数据高效存取，降低存储数据的投入成本。移动应用云数据库...

简介

系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等，结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力，广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...

产品架构

数据运营与管理：数据资产与安全：对数据库、数据仓库和数据湖进行统一数据资产管理、数据安全管理和数据治理。数据库设计与开发：提供多种数据设计与开发工具，如无锁变更、数据导入、结构同步、表一致性修复、数据库分组、数据追踪等。...

开启智能存储分层

重要 存储保存时间配置存在相应限制，具体信息，请参见 数据存储生命周期管理。开启智能存储分层登录日志服务控制台。在Project列表区域，单击目标Project。在日志存储>日志库页签中，单击目标Logstore对应的图标，然后单击修改。在 ...

磁盘型

适用于兼容Redis、需要大容量且访问性能较高的温冷数据存储场景。背景信息传统Redis基于内存属于易失性存储介质，随着业务持续快速的发展，数据量飞速的增长，您可能会遇到如下挑战：沉淀的数据越来越多但访问量低，数据存储在内存中性价...

磁盘型

适用于兼容Redis、需要大容量且访问性能较高的温冷数据存储场景。背景信息传统Redis基于内存属于易失性存储介质，随着业务持续快速的发展，数据量飞速的增长，您可能会遇到如下挑战：沉淀的数据越来越多但访问量低，数据存储在内存中性价...

什么是数据管理DMS

DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。视频介绍功能特性详情信息，请参见功能概览。为什么选择数据管理DMS 全域数据...

整体架构

在周边生态上，提供数据迁移、数据同步、数据管理、数据集成、数据安全等配套工具，方便使用，使您能更加专注于业务发展。湖仓版（3.0）在数仓版（3.0）基础上，同时满足低成本离线处理和高性能在线分析的湖仓一体化版本，称为湖仓版（3....

应用场景

多云数据库统一管理数据管理 DMS 是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪于一体的数据管理服务。数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库（例如本地IDC自建、其他云...

新零售：杭州数云信息技术有限公司

PolarDB 采用共享存储架构，存储和计算分离，能够最大程度的提供单实例的存储能力，最大可达100 TB，对于历史数据存储，海量在线数据存储都有较好的适配能力，降低代码复杂度和维护成本。PolarDB 通过引擎的优化和超强的IOPS能力提供高并发...

数据归档概述

数据把控能力较强，数据归档并存储在DMS中，您无需关注数据存储的具体位置。较强，数据归档在用户开通的阿里云OSS上。较弱，数据归档在DBS内置OSS上。归档链路文档数据归档至专属存储数据归档至AnalyticDB MySQL 3.0 数据归档至Lindorm ...

存储引擎

数据压缩类型：压缩算法支持ZLIB、ZSTD和LZ4等，高压缩率可显著降低数据存储成本，并通过高带宽解压缩性能降低IO时间。外表OSS存储：数据可远端低成本存储于OSS上，查询和写入行为与本地表完全一致。数据分区：支持数据多级分区，且可按...

管理数据

通过将拥有共同属性的数据资产集中到同一个数据域中，管理员可以高效管理数据资产及资产中的敏感数据。本文介绍首次使用数据域功能的具体操作。应用场景企业中有较多的数据资产，分别属于不同的部门，需要按部门划分资产以便数据管理员...

分层存储命令使用说明

通过该功能您可以根据数据冷热程度选择不同的存储介质来存储数据，以减少数据存储成本，或者加速访问数据的速度。使用Jindo jfs 执行以下命令，获取帮助信息。jindo jfs-help archive JindoFS分层存储命令均为异步执行，分层存储命令只是...

分层存储命令使用说明

通过该功能您可以根据数据冷热程度选择不同的存储介质来存储数据，以减少数据存储成本，或者加速访问数据的速度。使用Jindo jfs 执行以下命令，获取帮助信息。jindo jfs-help archive JindoFS分层存储命令均为异步执行，分层存储命令只是...

存储说明

本文介绍E-MapReduce集群中数据存储相关的信息，包括磁盘角色、云盘与本地盘，以及OSS。背景信息关于存储的类型、性能和相关的限制信息，请参见什么是块存储。存储价格估算如下：本地盘实例存储为0.04 元/GB/月 OSS标准型存储为0.12 元/...

产品功能

数据管理数据时效设置您可以通过控制台或者 API 设置数据的有效期。数据时效开启并设置完成后，系统对于定义的过期数据将立即标记失效，并在特定时间进行自动化清理。数据清理您可以在控制台上根据度量（Metric）进行数据清理，或者通过...