快速体验
大数据存储与计算：云原生大数据计算服务 MaxCompute（必选）、实时数仓Hologres（可选）、开源大数据平台E-MapReduce（可选），您可根据需要开通MaxCompute、Hologres或E-MapReduce。数据开发与调度：大数据开发治理平台 DataWorks数据...
资产全景
资产全景介绍 资产全景页面仅为您展示生产环境中的元数据及加工所得的应用数据，包括以下三种模式：全局模式：以星球形式为您展示存储数据量大于0的业务板块及其概要信息。流动模式：展示数据的流入、整合与输出过程，更直观的体现数据加工...
什么是OSS-HDFS服务
作为云原生数据湖基础，OSS-HDFS在满足EB级数据分析、亿级文件管理服务、TB级吞吐量的同时，全面融合大数据存储生态，除提供对象存储扁平命名空间之外，还提供了分层命名空间服务。分层命名空间支持将对象组织到一个目录层次结构中进行管理...
二级索引简介
索引表数据存储量与数据表无区别，数据存储类型与实例规格绑定。更多信息，请参见 数据存储量。说明 关于实例规格和CU的更多信息，请分别参见 实例 和 读写吞吐量。相关文档 如果需要更灵活丰富的数据加速查询方式，例如多条件组合查询、...
引擎简介
与多模引擎共享存储，LindormDFS支撑，充分利用了对象存储的低成本与高可靠、块存储的高性能等优势，并通过高低速分层存储、副本共享去重、智能冷热转存等技术，面向用户提供弹性低成本、100%HDFS协议兼容的云原生大数据存储能力，可使用...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据...
查询分析存储描述信息
当需要查看分析存储的详细配置信息，您可以使用DescribeTimeseriesAnalyticalStore接口查询分析存储描述信息，例如数据生命周期配置、数据同步选项、数据同步状态、数据存储大小等。前提条件 已创建时序表并为时序表创建了分析存储。具体...
查询分析存储描述信息
当需要查看分析存储的详细配置信息，您可以使用DescribeTimeseriesAnalyticalStore接口查询分析存储描述信息，例如数据生命周期配置、数据同步选项、数据同步状态、数据存储大小等。前提条件 已创建时序表并为时序表创建了分析存储。具体...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。更多信息，请参见 Apache Hudi官网。权限说明 仅支持 超级管理员、数据源管理员、...
JindoFS块存储模式
应用场景 E-MapReduce目前提供了三种大数据存储系统，E-MapReduce OssFileSystem、E-MapReduce HDFS和E-MapReduce JindoFS，其中OssFileSystem和JindoFS都是云上存储的解决方案，下表为这三种存储系统和开源OSS各自的特点。特点 开源OSS E-...
选购资源包
选购示例 案例场景 假设王先生2022年5月份NAS文件系统的资源预估使用量如下：地域 文件系统类型 资源使用量 华东1（杭州）通用性能型NAS 存储容量：60 GiB 低频介质数据存储量：380 GiB 低频数据读流量：1 GiB 低频数据写流量：2 GiB 华东2...
索引选择策略
表格存储作为海量结构化大数据存储，支持不同的索引结构，便于不同场景的查询分析加速使用。使用SQL查询功能时，您可以通过显式访问二级索引表进行索引查询。对于多元索引，表格存储提供了自动多元索引选择策略和显式访问多元索引两种方式...
设置数据保留策略
数据保留策略介绍 InfluxDB可以通过定义数据保留策略，用来控制存储数据量的方式。新创建的数据库默认的保留策略是 autogen，初始化的保留策略时长为0s，表示数据永久保存；分片时长默认为7天，您可以根据需求来修改存储策略。创建保留策略...
创建Kudu数据源
在 新建数据源 对话框的 大数据存储 区域，选择 Kudu。如果您最近使用过Kudu，也可以在 最近使用 区域选择Kudu。同时，您也可以在搜索框中，输入Kudu的关键词，快速筛选。在 新建Kudu数据源 对话框中，配置连接数据源参数。配置数据源的...
冷热分离介绍
背景信息 在海量大数据场景下，一张表中往往存储着大量的历史数据，如订单数据或者监控数据。随着时间的推移，这些数据被访问的频率会逐渐降低，最终被搁置。减少这部分数据的存储成本，成为一个新的问题。为解决这一问题同时降低存储成本...
数据表-数据概况
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小，分区文件数，分区最后更新时间等...
混合存储型（已停售）
使用混合存储型，将所有课程信息存储到磁盘，访问量大的课程和题库数据存储到内存并常驻内存，保证高频访问数据的读写性能，实现高性能与高性价比的有机结合。典型业务场景的示例如下：场景1：使用开源Redis集群存储了100GB的数据，但高峰...
混合存储型（已停售）
使用混合存储型，将所有课程信息存储到磁盘，访问量大的课程和题库数据存储到内存并常驻内存，保证高频访问数据的读写性能，实现高性能与高性价比的有机结合。典型业务场景的示例如下：场景1：使用开源Redis集群存储了100 GB的数据，但高峰...
影响查询性能的因素
如果查询需要处理的数据量较大，就可能会长时间占用大量的资源，导致整体查询效率降低，进而影响最终的查询效果。此外，如果 AnalyticDB MySQL版 中表存储的数据量较大，那么在执行索引过滤、明细数据读取等操作时也会出现相互争抢磁盘I/O...
常见问题
基因行业：基因测序、交付、诊断等基因上下游业务的数据存储需求，结合云上强大的计算能力，可以实现大数据的存储+计算+分析方案。OSS适合存储什么？OSS适合存储论坛网站与软件应用中的附件、高清图片、音视频、备份文件等，以及各种App...
基本概念
您可以在创建集群时购买EIU，也可以在高吞吐写入或大数据量扫描时购买或扩容EIU。EIU的性能指标，请参见 弹性IO资源（EIU）扩容。ACU ACU，全称为AnalyticDB Compute Unit，是 AnalyticDB for MySQL 湖仓版（3.0）计算资源和存储资源的最小...
DBS沙箱功能概览
相比现有基于大数据平台的历史数据离线分析方案，DBS沙箱功能提供原始数据库SQL接口，不需要开发人员编写离线分析脚本，并由于使用快照存储机制，存储成本也更低。费用说明 更多信息，请参见 DBS沙箱费用。后续步骤 自建MySQL应急恢复...
X-Engine简介
因为目标是面向大规模的海量数据存储，提供高并发事务处理能力和降低存储成本，在大部分大数据量场景下，数据被访问的机会是不均等的，访问频繁的热数据实际上占比很少，X-Engine根据数据访问频度的不同将数据划分为多个层次，针对每个层次...
连续查询
连续查询的常见场景与示例 数据降精度与长期存储 对于数据量较大的场景，存储成本会成为用户关心的问题。Lindorm时序引擎支持设置每个数据库的保数据有效期（TTL），您可以结合连续查询，将数据降精度后写入到有效期更长的数据库中。以下...
存储空间分析
您可以在 AnalyticDB for MySQL 空间总览页面查看集群和表的总数据量、冷数据量、热数据量、索引数据量、分区数量、节点的磁盘使用率等指标。查看集群级别的数据量 通过 空间总览 可以查看当前集群的 总数据量、热数据量、冷数据量、以及 ...
如何对JSON类型进行高效分析
总之，PolarDB MySQL版 的虚拟列是一种灵活且强大的功能，尤其处理半结构化数据（如JSON类型数据等）时可以直接将不规则的数据存储为结构化数据，避免中间ETL额外处理逻辑，并且可以使用传统的SQL查询语言进行查询与分析。虚拟列有助于简化...
购买方式2：按量付费
由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上），我们推荐配合存储包一起使用，能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。说明 存储包分为 中国内地通用 和 中国香港及海外通用 两...
购买方式2：按量付费
由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上），我们推荐配合存储包一起使用，能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。说明 存储包分为 中国内地通用 和 中国香港及海外通用 两...
什么是云数据库HBase
云原生多模数据库Lindorm）、全文检索（参见Lindorm产品）等能力，结合完备的工具服务，丰富的生态融合，一站式高效满足企业在大数据量场景下的存储、检索、分析需求，是风控、推荐、广告、物联网、车联网、Feeds流、数据大屏等场景的数据...
通用数据开发
数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的数据，存储在业务系统所对应的数据库中，包括MySQL、Oracle和RDS等类型。数据收集与存储：您需要同步不同业务系统的数据至MaxCompute中，方可通过MaxCompute的海量数据...
应用场景
云数据库Redis版 适用于多种场景，尤其是请求并发量大场景中的数据存储。游戏行业应用 游戏行业通常将云数据库Redis版作为重要的部署架构组件，用于缓存或数据持久化。场景一：Redis作为缓存加速应用访问 Redis作为缓存层，加速应用访问。...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
功能特性
冷热数据分层存储 大规格分层存储 社区兼容版大存储型集群支持添加云盘和扩容磁盘。大规格分层存储 企业版共享存储OSS 共享存储 企业版采用存算分离架构，多节点共享一份存储。OSS存储 存储底层采用OSS，相比社区版存储单价大幅降低。企业...
成本
对象存储（OSS）是阿里云推出的存储服务，具备数据量大、成本低、安全性高、可靠性高的特点，能够满足多种场景的存储需求，存储成本低至 0.12元/GB/月。AnalyticDB PostgreSQL版 支持通过外表方式对OSS存储服务进行访问，支持对OSS的数据...
【新功能/规格】RDS通用云盘支持数据归档OSS功能
云数据库RDS通用云盘数据归档OSS功能，当实例数据量较大时，存储成本也随之升高。业务数据通常分为冷数据和热数据，将对象存储（OSS）作为归档冷数据的存储介质，能够大幅降低用户的存储成本。功能简介 RDS SQL Server基于SQL Server内核...
表数据格式
为了支持增全量存储和处理一体化架构，Transaction Table2.0（简称TT2）设计了统一的表数据组织格式，既可支持MaxCompute普通表的所有功能，同时也能很好的支持增量处理链路的新场景，包括time travel查询、upsert操作等。本文为您介绍...
如何查看表的数据存储量
介绍如何查看表的数据存储量。操作步骤 通过控制台在数据表的 基本详情 页签，可以查看表大小，即表的数据存储量。通过控制台在数据表的 监控指标 页签，选择 指标分组 为 表大小，可以查看表大小，即表的数据存储量。
产品优势
数据多重冗余存储，数据设计持久性不低于99.999999999%。备份过程中，实时校验数据完整性。海量用户验证，风险快速发现并修复。多个工具拼凑，问题指数级增长。受限于硬件可靠性，易出问题，一旦出现磁盘坏道，容易出现不可逆转的数据丢失...
变更磁盘存储类型
变更磁盘存储类型耗时较久，可长达数小时甚至更久，具体时间视云盘变配时的吞吐量、存储空间大小以及原云盘类型而定。下表为不同计算节点数量、不同存储空间大小、不同数据量场景下的参考数据。计算节点数量 存储空间（单位：GB）数据量...
什么是备份数据量
常见概念 在数据库备份DBS业务场景下，含有常见以下几个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量等。概念 说明 数据库磁盘空间 数据库磁盘空间由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲...
- 产品推荐
- 这些文档可能帮助您