文件存储 HDFS 版和数据库MySQL双向数据迁移
背景信息 Sqoop 是一款开源的工具，主要用于在Hadoop和结构化数据存储（例如关系数据库）之间高效传输批量数据。既可以将一个关系型数据库（MySQL、Oracle、Postgres等）中的数据导入 文件存储 HDFS 版 中，也可以将 文件存储 HDFS 版 的...
创建Kudu数据源
背景信息 Kudu提供接近于关系数据库管理系统（RDBMS）的功能和数据模型，提供类似于关系型数据库的存储结构来存储数据，允许用户以和关系型数据库相同的方式插入、更新、删除数据。Kudu仅仅是一个存储层，并不存储数据，因此需要依赖外部的...
方案背景
表格存储（Tablestore）是阿里云自研的多模型结构化数据存储，可提供海量结构化数据的存储和查询分析服务。表格存储的分布式存储和强大的索引引擎能够支持PB级存储、千万TPS以及毫秒级延迟的服务能力。更多信息，请参见 什么是表格存储。...
增强E-R
E-R图能较好的描述业务数据中的关联关系、数据库存储表和字段之间的依赖和关联关系，并通过此关系将业务或数据库存储的逻辑关系沉淀到数据库设计中。随着业务规模的增大和数据库外键性能的降低，越来越多的系统设计采用应用系统来保障业务...
产品架构
Tablestore 多模型数据存储 表格存储 针对不同业务类型的结构化数据提供了宽表（WideColumn）模型、时序（TimeSeries）模型和消息（Timeline）模型三种数据存储模型。模型 描述 宽表模型 类Bigtable/HBase模型，可应用于元数据、大数据等...
External Volume操作
External Volume是MaxCompute提供的分布式文件系统和非结构化数据存储方案，通过External Volume可以实现使用MaxCompute引擎查询及处理OSS上的文件数据，而无需将数据导入到MaxCompute的表中，从而减少数据的冗余和传输开销。本文为您介绍...
表格存储和传统关系型数据库（例如MySQL、SQL Server...
表格存储是阿里云自研的多模型结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务，与传统关系型数据库（RDBMS，例如MySQL、SQL Server）在数据模型和技术实现上都有较大的区别。表格存储和传统关系型数据库的主要区别如下：...
【通知】Redis混合存储型实例停止售卖
Redis企业版作为一个高可用、高性能的分布式NoSQL数据库，从访问延时、持久化需求、整体成本这三个核心维度考量，基于DRAM、NVM和 ESSD云盘 存储介质，推出了多种不同形态的产品，为您提供更强的性能、更多的数据结构和更灵活的存储方式，...
分区表命令列表
删除 ALTER TABLE…DROP PARTITION 删除分区结构和存储在这个分区上的数据。ALTER TABLE…DROP SUBPARTITION 删除子分区结构及存储在子分区内的数据。ALTER TABLE…TRUNCATE PARTITION 删除指定的分区中数据，保留完整的分区结构。ALTER ...
Tair（Redis企业版）简介
从访问延时、持久化需求、整体成本这三个核心维度考量，基于DRAM、NVM和ESSD云盘存储介质，推出了多种不同形态的产品，为您提供更强的性能、更多的数据结构和更灵活的存储方式，满足不同场景下的业务需求。存储介质 特性 内存（DRAM）型 ...
什么是云原生内存数据库Tair
从访问延时、持久化需求、整体成本这三个核心维度考量，基于DRAM、NVM和ESSD云盘存储介质，推出了多种不同形态的产品，为您提供更强的性能、更多的数据结构和更灵活的存储方式，满足不同场景下的业务需求。存储介质 特性 内存（DRAM）型 ...
表
MaxCompute的表类似于传统关系型数据库中的表，可以存储结构化数据，并且使用SQL进行查询和分析。MaxCompute中不同类型计算任务的操作对象（输入、输出）都是表。您可以 创建表、删除表以及向表中导入数据。说明 DataWorks的数据开发模块...
Tair选型指南
选择存储介质 云原生内存数据库Tair 从访问延时、持久化需求、整体成本这三个核心维度考量，推出了DRAM、NVM和ESSD云盘存储介质，为您提供更强的性能、更多的数据结构和更灵活的存储方式，满足不同场景下的业务需求。场景 推荐 特点 以性能...
时序分析存储概述
对于时序全量历史数据采用列存储，当对数据进行查询或者分析时只读取所需的列数据，从而提高查询效率和数据处理速度。低成本数据存储 冷热数据分层存储，采用不同的存储介质 对于时序的热数据采用 表格存储 行列混合的宽表存储，对于时序全...
产品整体介绍
关系型，数据库的对象通常包括：表、视图、函数、序列、索引、分区子表、外部表等，而对象-关系型则进一步支持用户自定义对象和它的属性，包括数据类型、函数、操作符，域和索引，甚至复杂的数据结构也可以被创建，存储和检索。这些对象将...
创建和管理结构对象映射
系统支持创建结构对象和领域对象，以及结构对象和数据对象的映射关系。后续生成代码时，系统会根据您配置的映射关系生成对应的双向converter。您可以通过配置字段映射，实现从接口到逻辑，以及到存储层的扩展，而不需要在中心应用中通过...
基本概念
结构体 结构体是将不同类型的数据组织在一起的树形数据结构，树形结构中的根节点、子节点和叶子之间存在父子关系；它适用于对关系紧密、逻辑相关、具有相同或不同类型的数据进行处理。逻辑流 基本概念 说明 逻辑流操作 指在逻辑流中执行的...
图扑案例
业务要求与挑战 5G、云计算、边缘计算等智能、互联技术的快速发展，推动了工业物联网IIoT场景下各种软件、硬件传感器数量激增，与之对应的采集数据量和数据类型快速增长，导致数据存储、检索难度更大。现有解决方案中，通常依赖自建单...
时序模型计量计费
使用时序模型时，时间线数据和时间线元数据会产生数据存储量。同时，对时间线数据和时间线元数据的读写操作会消耗读写吞吐量。本文介绍了时序模型的计费项以及计费示例。注意事项 时序模型中的分析存储功能将从2023年12月20日正式开始收费...
宽表模型设计
本文介绍如何设计车联网场景下的数据表结构和多元索引结构。数据表结构 假设存储车辆元数据的数据表名称为vehicles_metadata，表结构请参见下表。说明 关于表设计的更多信息，请参见 表设计。字段名称 类型 描述 vin_id（主键列）String ...
对象存储优化
优化存储和数据取回的成本 为了进一步优化存储和数据取回的成本，OSS还推出了 选取内容（SelectObject）功能。一般情况下，对象存储中的数据无论大小都必须作为一个整体进行访问。OSS SelectObject允许您使用简单的SQL语句检索对象，这意味...
通过控制台使用宽表模型
表格存储 提供了控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。通过控制台使用宽表模型（WideColumn）时，您需要开通表格存储服务，然后使用控制台进行创建实例、创建数据表、读写表中数据以及使用SQL查询数据的操作...
东软案例
对映可用性保障运维监控采集数据采集种类，以及需要存储的数据量同步激增，现有监控系统基于RRD数据库或关系数据库搭建的单模引擎的存储、检索能力和需求脱节。产品数字化导致应用结构愈加复杂，监控数据类型更加多样：技术方面，诸如混合...
表格存储
表格存储（Tablestore）是阿里云自研的结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。表格存储提供兼容HBase的WideColumn模型、消息模型Timeline以及时空模型Timestream，实现PB级存储、千万TPS以及毫秒级延迟的服务...
SQL概述
背景信息 表格存储（Tablestore）是阿里云自研的多模型结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。表格存储的分布式存储和强大的索引引擎能够支持PB级存储、千万TPS以及毫秒级延迟的服务能力。使用表格存储您可以...
整体架构
湖仓版中Spark计算层和存储层互相打通，您可以使用计算层资源来处理存储层数据，在创建和配置Spark资源组时更容易。访问层 访问层通过统一计费单位、统一元数据和权限、统一开发语言、统一传输链路，提升开发效率。AnalyticDB MySQL版 融合...
概述
表格存储 表格存储（Tablestore）是阿里云自研的结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务，具备PB级存储、千万TPS以及毫秒级延迟的服务能力。云存储网关 云存储网关（Cloud Storage Gateway）是一款可以部署在用户...
概述
使用Spark计算引擎访问表格存储时，您可以通过E-MapReduce SQL或者DataFrame编程方式对表格存储中数据进行复杂的计算和高效的分析。应用场景 功能特性 对于批计算，除了基础功能外，Tablestore On Spark提供了如下核心优化功能：索引选择：...
功能特性
SQL数据类型映射 DDL 表格存储支持的DDL操作，包括创建表的映射关系、创建多元索引的映射关系、更新映射表属性列、删除映射关系和查询表的描述信息的操作。DDL操作 DQL 表格存储支持的DQL操作，包括查询数据、聚合数据、全文检索、多元索引...
宽表模型介绍
如何理解主键、数据分区和数据分区键 表格存储中表、行、列、值和电子表格的类比 相关文档 您可以通过控制台、命令行工具快速体验宽表模型。具体操作，请参见 使用宽表模型。如果要实现实例数据的机房级容灾，您可以通过创建同城冗余类型的...
名词解释
术语 宽表引擎 时序引擎 说明 DATABASE 〇 〇 Database（数据库）是一个结构化的、用于存储和管理相关数据的集合。TABLE 〇 〇 Table（表）是一种结构化的数据对象，用于存储和组织相关的数据记录。构建表时需要定义表的Schema结构，包括表...
使用云数据库Redis版实现即时通信场景中的多端同步
这三个模块的作用如下：消息管理模块主要负责接收和存储消息。消息同步模块主要负责存储和推送下行消息数据及其状态。通知模块主要负责维护第三方通道和通知功能。消息管理模块的核心是消息存储模型，存储模型的选型直接影响着消息同步模块...
常见术语
数据湖 数据湖是一个集中式存储库，允许您以任意规模存储所有结构化和非结构化数据，数据湖支持存储EB级别的数据，阿里云数据湖存储以OSS为代表！数据湖分析 数据湖分析就是针对数据湖数据分析的方案。云原生数据湖分析（简称DLA）是新一代...
产品架构
最后，数据通道服务（LTS）负责引擎之间的数据流转和数据变更的实时捕获，以实现数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等能力。分布式文件系统 LDFS（Lindorm DFS，也称为Lindorm文件引擎）是面向云基础存储设施...
如何使用OSS更省钱？
以下案例仅覆盖常用的存储和数据请求的场景。如使用过程中涉及OSS其他功能，可能触发其他对应的计费项。更多信息，请参见 计费项。案例说明 用户A在OSS某个Bucket内以标准存储-本地冗余类型存储了100 TB的数据。当访问不同比例的数据时，该...
数据库对象的逻辑结构
数据库对象的逻辑结构指数据库中的各种数据对象之间的关系和组织方式。AnalyticDB PostgreSQL 数据库由许多数据库对象组成，包括表（table）、索引（index）、序列（sequence）、视图（view）、以及数据库（database），数据库对象在逻辑上...
RDS搭配异构数据库实现数据多样化存储
RDS可以搭配云数据库Redis、云数据库Memcache和对象存储OSS等产品使用，实现多样化存储扩展。缓存数据持久化 RDS可以搭配云数据库缓存产品（Redis和Memcache），组成高吞吐、低延迟的存储解决方案。相对于RDS，云数据库缓存产品有两个特性...
数据模型架构规范
数据模型定义了数据之间关系和结构，使得我们可以有规律地获取想要的数据。例如，在一个超市里，商品的布局都有特定的规范，商品摆放的位置是按照消费者的购买习惯以及人流走向进行摆放的。数据模型的作用 数据模型是在业务需求分析之后，...
资产全景
在 流动 页面，为您可视化展示 数据引入、物理表数 和 逻辑表数，为您提供数据输出后的数据查询及应用功能：将鼠标悬停在 数据引入 模块上，为您展示的 数据源 个数、数据表接入量Top5 和 数据表接入量Least5。数据源：统计昨天有数据同步...
快速入门
文件存储 HDFS 版 适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户进行海量数据存储和离线计算的业务场景，充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。开通 文件存储 ...
- 产品推荐
- 这些文档可能帮助您