数据存储冷热分离
AnalyticDB MySQL版 弹性模式集群版（新版）（3.1.3.3及以上版本）支持表或分区级别的数据存储冷热分离策略。前提条件 AnalyticDB MySQL版 集群需要同时满足以下条件：集群系列需为 弹性模式集群版（新版）。集群内核版本需为3.1.3.3或以上...
SA混合云存储阵列
阿里云混合云存储阵列作为软硬一体的存储设备，集成了阿里云存储服务，融合了公共云存储和传统存储阵列的优点：简单 客户无需更改原有的IT架构，就可以像使用本地存储设备一样使用阿里云混合云存储阵列，同时使用本地存储空间和云端存储...
迁移开源HDFS的数据到文件存储 HDFS 版
本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心，而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...
数据归档
功能优势 开启RDS MySQL通用云盘的数据归档OSS功能后，借助OSS海量、安全、低成本、高可靠的特性，用户能够在RDS MySQL上实现极低成本的归档数据存储，在具备InnoDB事务能力之上支持低频的数据访问，数据存储成本相较于ESSD PL1云盘下降80%...
引擎功能
数据存储默认采用多副本策略，充分保证数据的可用性。数据库内机器学习 Lindorm时序引擎提供开箱即用的数据库内机器学习服务。您可以通过SQL语句直接在数据库内完成整个机器学习流程，挖掘更深的数据价值。使用数据库内机器学习服务的优势...
存储类型概述
对象存储OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。说明 各存储类型的定价，请参见 OSS产品定价。各存储类型的计费方式，请参见 存储费用。标准存储（Standard）提供高可靠、高...
常见问题
同一实例中的 多个计算集群 具有如下特性：数据共享：多集群共享底层数据，均可以访问底层数据，避免冗余数据存储。计算隔离：多集群间的计算资源是物理隔离的，分别用于隔离不同的工作负载。集群间的缓存是隔离的，根据自身访问特性进行...
Delta Lake概述
背景信息 通常的数据湖方案是选取大数据存储引擎构建数据湖（例如，阿里云对象存储OSS产品或云下HDFS），然后将产生的各种类型数据存储在该存储引擎中。在使用数据时，通过Spark或Presto对接数据分析引擎并进行数据解析。但该套方案存在...
通过实时计算订阅数据
参数 说明 数据存储类型 DataHub数据存储。EndPoint 通过 DataHub访问域名 获取。Project DataHub的项目名称，可在 DataHub控制台 中获取。使用同样的方式注册RDS数据存储，参数说明如下。参数 说明 Instance RDS的实例ID，可在RDS实例的 ...
数据服务系统配置
API缓存数据存储位置 在 API缓存数据存储位置 区域，单击 修改 按钮，支持指定API缓存数据的存储位置。Dataphin系统的redis：将缓存数据存储到系统公共的Redis中，将与其他模块共享存储空间，适用于缓存数据量较小的场景。应用内存：缓存...
计费常见问题
按照存储计费规则，当项目的实际数据存储量大于0 MB，且小于等于512 MB时，MaxCompute将收取该项目0.01元/天的费用。例如，9:00删除项目数据，次日会有前一天00:00~09:00的存储费用账单。上传至MaxCompute的资源，是否会产生费用？会产生...
作业启动问题
at org.apache.flink.fs.shaded.hadoop3.org.apache.hadoop.fs.aliyun.oss.AliyunOSSFileSystemStore.listObjects(AliyunOSSFileSystemStore.java:506)~?at org.apache.flink.fs.shaded.hadoop3.org.apache.hadoop.fs.aliyun.oss....
ZKFC Mismatched address异常
dfs.namenode.servicerpc-address.hdfs-cluster.nn1 dfs.namenode.servicerpc-address.hdfs-cluster.nn2 dfs.namenode.servicerpc-address.hdfs-cluster.nn3(仅适用Hadoop3)或 dfs.namenode.servicerpc-address.emr-cluster.nn1 dfs....
使用前须知
警告 当您为某个Bucket开通OSS-HDFS服务后，通过该服务写入的数据将保留在OSS-HDFS的数据存储目录.dlsdata/下。为避免影响OSS-HDFS服务的正常使用或者引发数据丢失的风险，禁止以非OSS-HDFS提供的方式对目录.dlsdata/及目录下的Object执行...
磁盘型
适用于兼容Redis、需要大容量且访问性能较高的温冷数据存储场景。背景信息 传统Redis基于内存属于易失性存储介质，随着业务持续快速的发展，数据量飞速的增长，您可能会遇到如下挑战：沉淀的数据越来越多但访问量低，数据存储在内存中性价...
磁盘型
适用于兼容Redis、需要大容量且访问性能较高的温冷数据存储场景。背景信息 传统Redis基于内存属于易失性存储介质，随着业务持续快速的发展，数据量飞速的增长，您可能会遇到如下挑战：沉淀的数据越来越多但访问量低，数据存储在内存中性价...
基本概念
数据结构多样时，可以选择将结构化数据存储在Lindorm，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。O OSS 对象存储服务（Object Storage Service，简称OSS）是阿里云提供的海量、...
简介
系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等，结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力，广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...
E-MapReduce数据迁移
cp~/aliyun-sdk-dfs-1.0.2-beta.jar/opt/apps/ecm/service/hadoop/2.8.5-1.3.1/package/hadoop-2.8.5-1.3.1/share/hadoop/hdfs/在E-MapReduce服务中，对应的路径为/opt/apps/ecm/service/hadoop/x.x.x-x.x.x/package/hadoop-x.x.x-x.x.x/...
归档存储服务等级协议
阿里云服务具备自动数据备份功能，备份数量详见相关技术文档，备份数据默认与源数据存储在同一个数据中心。用户无需指定数据自动备份数量及自动备份数据所存储的位置。2.5.2.阿里云的数据中心将遵守当地的相关法律法规，用户对此具有知情权...
新建Flink计算源
包括E-MapReduce5.x、CDH5.x Hadoop、CDH6.x Hadoop、Cloudera Data Platform 7.x、亚信DP5.3 Hadoop、星环TDH 6.x Hadoop。重要 通常情况下，未选择集群类型也能够测试连接通过；个别情况未选择可能导致测试连接失败，建议进行选择。Flink...
DLA Lakehouse实时入湖
数据存储格式 数据的存储格式固定为HUDI。源端实例引擎类型 数据源的引擎类型。当前仅支持MySQL引擎。任务执行Spark虚拟集群 执行Spark作业的虚拟集群。目前入湖⼯作负载在DLA Spark的虚拟集群中运行。如果您还未创建虚拟集群，请进行创建...
数仓版（3.0）产品定价
6.048元/GB/月 云盘等级PL3 0.0168元/GB/小时 12.096元/GB/月 冷存储数据 0.0003元/GB/小时 0.216元/GB/月 说明 ② 每月费用估算仅为了预估1 GB数据存储1个月的花费。估算方法为小时价×24小时×30天。实际花费请以账单为准。中国香港 基础...
MongoDB逻辑备份
数据库所在位置 需要备份的数据库所在位置，支持类型如下：有公网IP:Port的自建数据库 ECS上的自建数据库 云数据库MongoDB 通过专线/VPN网关/智能网关接入的自建数据库 无公网IP:Port的自建数据库（通过数据库网关DG接入）说明 当您选择云...
Hologres物理表和字段详情
Dataphin数据表：为您展示表的 名称、对象类型、存储格式、逻辑表及逻辑视图的 所属板块/物理表及物理视图的 所属项目、负责人、存储量、生命周期（Hadoop集群的计算引擎不支持展示该信息）、描述、血缘来源 信息，同时您可以进行 查看血缘...
MaxCompute物理表和字段详情
Dataphin数据表：为您展示表的 名称、对象类型、存储格式、逻辑表及逻辑视图的 所属板块/物理表及物理视图的 所属项目、负责人、存储量、生命周期（Hadoop集群的计算引擎不支持展示该信息）、描述、血缘来源 信息，同时您可以进行 查看血缘...
创建备份计划
说明 数据量较大时，建议您购买DBS提供的 备份实例存储包，用于抵扣后续备份计划的 存储费用，该费用仅在数据存储在 DBS内置存储 时收取。更多存储包的选购建议，请参见本文 常见问题。如需了解备份计划后续可能产生的费用问题等，请参见 ...
重要组件
由于多个主机的数据库实例需要访问块存储上的同一份数据，常用的Ext4等文件系统不支持多点挂载，PolarDB数据库团队自行研发了专用的用户态文件系统，提供常见的文件读写查看接口，支持类似O_DIRECT的非缓存方式读写数据，还支持数据页原子...
StarRocks物理表和字段详情
Dataphin数据表：为您展示表的 名称、对象类型、存储类型、逻辑表及逻辑视图的 所属板块/物理表及物理视图的 所属项目、负责人、存储量、生命周期（Hadoop集群的计算引擎不支持展示该信息）、描述、血缘来源 信息，同时您可以进行 查看血缘...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。更多信息，请参见 Apache Hudi官网。权限说明 仅支持 超级管理员、数据源管理员、...
数据备份概述
为了防止由于误删、恶意篡改等导致重要数据不可用，您可以使用 表格存储 数据备份功能备份实例中宽表数据，并在数据丢失或受损时及时恢复。背景信息 云备份（Cloud Backup）作为阿里云统一灾备平台，是一种简单易用、敏捷高效、安全可靠的...
数据上传
（可选）上传 阿里云对象存储OSS 数据，需满足如下条件：已开通OSS并创建Bucket，将待上传数据存储至OSS Bucket中。后续可将OSS数据上传至相应数据源，详情请参见 创建存储空间、上传文件。已为执行数据上传操作的阿里云账号授予可访问目标...
功能特性
监控告警 数仓和数据湖 功能集 功能 功能描述 参考文档 数据存储 数据缓存 云数据库SelectDB支持数据缓存功能，当您需要管理缓存数据并提升云数据库 SelectDB 版的访问速度时，可以根据该文档对缓存进行有效管理，并利用LRU和TTL管理策略，...
支持的云服务
基于MaxCompute的数据仓库能力，您可以与阿里云其他产品集成，实现可视化开发、数据存储、数据迁移、机器学习、业务决策等能力，构建满足实际业务需求的解决方案。本文为您介绍支持与MaxCompute集成的各阿里云产品信息。MaxCompute支持集成...
数据膨胀诊断
注意事项 智能诊断数据膨胀功能仅支持存储弹性模式实例，且内核版本须满足以下条件：AnalyticDB PostgreSQL 6.0版 实例为v6.3.10.0及以上。AnalyticDB PostgreSQL 7.0版 实例为v7.0.4.0及以上。如何查看和升级内核版本，请参见 查看内核小...
资产全景
总数据量：分布式数据存储可能有多个副本（取决于计算引擎本身配置），当前展示的存储量为所有副本存储总量。仅统计生产项目（包括 prod 和 basic 项目），T+1 更新。总数据表数：生产环境所有物理表和逻辑表总数，实时更新。总项目数：...
存储空间分析
说明 热数据的相关信息，请参见 数据存储冷热分离。冷数据量 AnalyticDB for MySQL 集群所有表的冷数据量。说明 数仓版（3.0）预留模式集群不支持冷热数据分离，因此不显示冷数据量。冷数据的相关信息，请参见 数据存储冷热分离。热数据量 ...
HBase存算一体转存算分离
由于存算分离架构下，HBase表数据存储到了OSS-HDFS，WAL文件还需要存储到本地HDFS，所以需要修改 hbase-site.xml 配置文件的配置项。参数 说明 hbase.rootdir 修改为 oss:/${test-bucket}.${region}.oss-dls.aliyuncs.com/${hbase}。hbase....
产品功能
TSDB 提供时序数据的高效读写。对于百万数据点的读取，响应时间小于 5 秒，且最高可以支撑每秒千万数据点的写入。...数据查询 TSDB 支持通过 HTTP 协议、TSDB Java Client 以及 ...TSDB 的数据存储默认采取三副本策略，充分保证数据的可用性。
- 产品推荐
- 这些文档可能帮助您