应用场景

主备两份数据存储。主备日志复制同步模式下,影响主库性能。异步模式下,备库延迟存在数据丢失风险。部署及切换复杂,需保证切换工具的高可用。传统数据库搬站上云 传统数据库,例如:Oracle/RAC,SAP HANA等基于SAN之上构建。与SAN相比,...

数据上云场景

使用DataWorks结合DataX进行Hadoop数据迁移的示例请参见 Hadoop数据迁移新手教程,或参见视频教程 Hadoop数据迁移到MaxCompute最佳实践。Sqoop执行时,会在原来的Hadoop集群上执行MR作业,可以分布式地将数据传输到MaxCompute上,详情请...

数据格式

数据存储分桶 为了进一步优化读写效率,Transactional Table 2.0支持按照BucketIndex对数据进行切分存储,BucketIndex数据列默认复用PK列,bucket数量可通过配置表属性 write.bucket.num 指定,因此对同一张表或分区的数据,写入数据会按PK...

存储费用

MaxCompute数据存储三个副本,但只按一个副本压缩后的大小进行按量计费。存储费用分为存储计费和备份存储计费。存储计费公式与价格说明,请参见 分层存储计费(Beta版本)。备份存储计费公式与价格说明,请参见 备份存储计费。当实例欠费后...

MySQL高可用实践

主备库两份数据存储。一致性 强一致。弱一致。一般采用异步模式复制。半同步复制模式下,仍然存在主备库数据状态不一致问题。易用性 部署与切换简单 部署与切换逻辑复杂,另需保证第三方切换工具的自身高可用性。环境准备 从以上比较可知,...

自建Hadoop数据迁移到阿里云E-MapReduce

客户在IDC或者公有云环境自建Hadoop集群,数据集中保存在HDFS文件系统用于数据分析任务。...架构图 方案详情 请参见 阿里云自建Hadoop数据迁移到阿里云E-MapReduce。icmsDocProps={'productMethod':'created','language':'zh-CN',};

最佳实践概览

通过DataWorks将MaxCompute数据同步至Elasticsearch 通过阿里云Logstash将MaxCompute数据同步至Elasticsearch 通过实时计算处理数据并同步到Elasticsearch 通过DataWorks将Hadoop数据同步至Elasticsearch 存储产品迁移 从Solr集群迁移文档...

功能特性

数据库文件存储 功能集 功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写,需按4K,8K,16K对齐-共享读写 一份数据可共享式多点挂载并进行读写,读写可线性扩展-存储加密 通过对数据库文件存储实施加密,可以确保数据库文件...

MaxCompute+Hadoop搭建实践

准备Hadoop数据源 创建Hadoop集群,具体操作请参见 开通阿里云EMR服务。进入Hive准备数据。使用Workbench方式登录集群主节点后,在终端界面输入如下命令:[has@emr-header-1 root]$hive-创建库 create database if not exists myhive;切换...

成本

存储分层能力 很多分析场景的数据具有一定的时效性,时间越近的数据访问频率越高、越远的数据访问频率越低。AnalyticDB PostgreSQL版 能够根据需求,自动地将部分时效性较低的数据进行归档、使用OSS等成本更低、访问速度较慢的存储介质替换...

从自建HDFS迁移数据

背景介绍 在某些场景下面,我们需要从自建的Hadoop存储数据迁移到Lindorm的文件引擎当中。适用范围 阿里云ECS自建Hadoop集群中的数据迁移到文件引擎。准备工作 开通文件引擎,详情请参见 开通指南。修改Hadoop 配置信息,详情请参见 ...

产品优势

本文介绍了 表格存储 的优势,包括多模型数据存储、多元化数据索引、多计算生态接入、访问安全性等。多模型数据存储 表格存储 支持宽表(WideColumn)模型、时序(TimeSeries)模型、消息(Timeline)等多种数据存储模型,能实现多种类型...

产品架构

Tablestore 多模型数据存储 表格存储 针对不同业务类型的结构化数据提供了宽表(WideColumn)模型、时序(TimeSeries)模型和消息(Timeline)模型数据存储模型。模型 描述 宽表模型 类Bigtable/HBase模型,可应用于元数据、大数据等...

常见问题

表格存储 具有以下优势:多模型数据存储 表格存储 支持宽表(WideColumn)模型、时序(TimeSeries)模型、消息(Timeline)等多种数据存储模型,能实现多种类型数据的一体化存储。模型 描述 宽表模型 类Bigtable/HBase模型,可应用于元数据...

某网约车公司车辆轨迹数据

车辆数据需要存储3年,日增数据量100 GB,3年总数据量超100 TB,数据存储成本高昂。解决方案 在原有的架构上引入了阿里云数据库,并将全量数据写到 云原生多模数据库 Lindorm 中,同时增量数据通过Kafka、Spark等实时同步到 云原生多模数据...

产品架构

共享分布式存储 多个计算节点共享一份数据,而不是每个计算节点都存储份数据,极大降低了用户的存储成本。基于全新打造的分布式块存储(Distributed Storage)和文件系统(Distributed Filesystem),存储容量可以在线平滑扩展,不会受到...

产品架构

共享分布式存储 多个计算节点共享一份数据,而不是每个计算节点都存储份数据,极大降低了用户的存储成本。基于全新打造的分布式块存储(Distributed Storage)和文件系统(Distributed Filesystem),存储容量可以在线平滑扩展,不会受到...

文件存储 HDFS 版和对象存储OSS双向数据迁移

步骤数据迁移 为Hadoop集群挂载好 文件存储 HDFS 版 实例和安装OSS客户端Jindo SDK后,使用Hadoop MapReduce任务(DistCp)即可实现数据迁移。迁移数据的操作如下所示。实践一:将 文件存储 HDFS 版 上的数据迁移至对象存储OSS 执行...

Transaction Table2.0概述

很多业务场景并不要求延时秒级更新可见或者行级更新,更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景,MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储、计算解决方案,本文为您介绍本方案...

迁移工具

将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...

表格存储

表格存储(Tablestore)是阿里云自研的结构化数据存储,提供海量结构化数据存储以及快速的查询和分析服务。表格存储提供兼容HBase的WideColumn模型、消息模型Timeline以及时空模型Timestream,实现PB级存储、千万TPS以及毫秒级延迟的服务...

数据

存储数据量 存放存储介质的实际数据大小,与备份数据量不同,存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小:数据库磁盘空间(RDS/ECS)>数据文件空间(实际使用)>备份数据量(DBS)>存储数据量(内置存储)。

什么是备份数据

与备份数据量不同,存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小 在单次全量备份情况下,数据库磁盘空间(RDS/ECS)>数据文件空间(实际使用)>备份数据量(DBS)>存储数据量(OSS)。综上所述,您可通过调整...

时序分析存储概述

分析存储与时序表的数据存储相互独立,允许用户自定义数据的生命周期(TTL),对分析存储的查询操作不会对时序表的读写性能产生影响。分析存储能够自动同步时序表数据,在数据写入速率稳定的情况下,同步操作的延迟通常在10分钟内,如果...

应用场景

可以将访问频度非常高的数据存储在云数据库 Memcache 版中,底层数据存储在 RDS 中。大型促销类业务 大型促销秒杀系统,系统整体访问压力非常大。一般的数据库根本无法承载这样的读取压力,可选用云数据库 Memcache 版存储。带有计数器的...

什么是PolarDB MySQL企业版

共享分布式存储 多个计算节点共享一份数据,而不是每个计算节点都存储份数据,极大地降低了用户的存储成本。基于全新打造的分布式块存储(Distributed Storage)和文件系统(Distributed Filesystem),存储容量可以在线平滑扩展,不会受...

新功能发布记录

2022-02-11 华东1(杭州)、华东2(上海)、华南1(深圳)、华北2(北京)Oracle RAC最佳实践 数据库文件存储企业版公测发布 版本新增对共享ESSD存储的支持,一份数据可共享式多点挂载并进行读写,读写可线性扩展,用户无需感知底层磁盘,...

数据治理

EMR集群类型 元数据存储类型 数据存储类型:OSS 数据存储类型:OSS-HDFS 数据存储类型:HDFS 新版数据湖集群(DataLake)数据湖构建(DLF)RDS实例 MySQL 自定义集群(Custom)数据湖构建(DLF)RDS实例 MySQL 其他集群-数据保护伞为什么有...

JindoData概述

JindoData是阿里云开源大数据团队自研的数据存储加速套件,面向大数据和AI生态,为阿里云和业界主要数据存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现,主要包括JindoFS存储系统(原JindoFS Block模式)、...

冷热分离介绍

冷热分离功能支持将冷热数据存储在不同的介质上,冷存储的存储类型为容量型存储,热存储的存储类型为标准型云存储、性能型云存储、本地SSD盘或本地HDD盘。冷存储的价格仅为标准型存储的20%,大大降低了存储成本。原理简介 在功能实现上,...

数据集成服务

数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...

数据分层存储计费规则

本文介绍开启冷数据分层存储后,在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后,PolarDB PostgreSQL版 支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据分层存储的详细介绍,请...

数据分层存储计费规则

本文介绍开启冷数据分层存储后,在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后,PolarDB PostgreSQL版(兼容Oracle)支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据分层存储...

数据分层存储计费规则

本文介绍开启冷数据分层存储后,在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后,PolarDB PostgreSQL版(兼容Oracle)支持将集群的冷数据转存至低成本的OSS上进行存储,以降低数据存储成本。说明 更多关于冷数据分层存储...

计费常见问题

本文列举 文件存储 HDFS 版 的计费常见问题。计费 开通文件存储 HDFS 版服务后,就开始计费吗?文件存储 HDFS 版服务如何停止计费?删除存储数据后,为什么控制台显示的存储容量不变,账单没有减少?使用文件系统上传下载数据时,是否计费...

概述

PolarDB支持的数据冷存模式包含以下种:将整表数据存储在OSS中,索引存储在云盘中,降本后还能有良好的访问性能;只将表中的LOB字段、辅助性字段独立存储在OSS中;只将分区表中的过期子分区存储在OSS中,热分区存储在云盘中,这是比较...

概述

PolarDB支持的数据冷存模式包含以下种:将整表数据存储在OSS中,索引存储在云盘中,降本后还能有良好的访问性能;只将表中的LOB字段、辅助性字段独立存储在OSS中;只将分区表中的过期子分区存储在OSS中,热分区存储在云盘中,这是比较...

功能特性

数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型(WideColumn)是类Bigtable/HBase模型,可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据,单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...

概述

PolarDB支持的数据冷存模式包含以下种:将整表数据存储在OSS中,索引存储在云盘中,降本后还能有良好的访问性能;只将表中的LOB字段、辅助性字段独立存储在OSS中;只将分区表中的过期子分区存储在OSS中,热分区存储在云盘中,这是比较...

功能特性

按时间点恢复RDS数据 按时间点恢复PolarDB数据 按时间点恢复MongoDB数据 按时间点恢复Redis数据 按时间点恢复Tair数据 存储能力 温备份存储 提供性能适中、价格适中的备份存储。DBS内置存储 备份数据清理 支持TTL过期系统自动删除备份数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 开源大数据平台 E-MapReduce 云数据库 RDS 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用