文件系统存储类型
归档存储 数据审计 若您需要满足合规要求，对数据存储的保留期限有长期需求。例如，在医疗行业中，一些患者的记录需要保留6年或更久；在金融行业中，一些交易数据需要保留5年以上。采用归档存储方案能够帮助您轻松管理冷数据并降低存储成本...
概述
文件存储CPFS 文件存储CPFS（Cloud Paralleled File System）是一款并行文件系统，其数据存储在集群中的多个数据节点，多个客户端可以同时访问，满足大型高性能计算机集群的高IOPS、高吞吐、低时延的数据存储需求。文件存储HDFS版 文件存储...
Kafka数据接入
说明 基于Tablestore Sink Connector，您也可以将Apache Kafka中的数据批量导入到 表格存储 的数据表或者时序表中。更多信息，请参见 将Kafka数据同步到表格存储。注意事项 仅支持在同地域内，将数据从 云消息队列 Kafka 版 实例的数据源...
时序模型介绍
如果要以更低成本备份表格存储中的时序数据或者以文件形式导出时序数据到本地，您可以通过DataWorks数据集成服务将表格存储中的时序数据导出到OSS后进行存储或者下载。更多信息，请参见 将表格存储数据同步到OSS。如果要可视化展示时序数据...
数据上传
（可选）上传 阿里云对象存储OSS 数据，需满足如下条件：已开通OSS并创建Bucket，将待上传数据存储至OSS Bucket中。后续可将OSS数据上传至相应数据源，详情请参见 创建存储空间、上传文件。已为执行数据上传操作的阿里云账号授予可访问目标...
概述
DataHub数据同步功能 DataHub提供数据Sink/Source功能，即数据同步功能，DataHub支持将对应Topic中的数据 实时/准实时 的同步到第三方阿里云产品中，打通阿里云产品间的数据流通。目前支持MaxCompute（原ODPS）、分析型数据库MySQL(ADS)、...
常见问题
适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。为什么选择 表格存储？表格存储 具有以下...
客户案例
DataWorks在多个行业中均有典型的案例落地，帮助多个行业的企业解决数据痛点，挖掘数据价值，本文为您介绍典型行业中已落地的客户案例。新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，...
FlushInstance-清空实例中的数据
清空Redis实例中的数据，不可恢复。接口说明 该 API 对应的控制台操作请参见 清除数据。说明 调用此 API 删除数据前请妥善备份数据或确认数据无需备份。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后...
什么是MaxCompute
模块名称 功能说明 存储引擎 MaxCompute为您提供MaxCompute存储引擎（内部存储）用于存储MaxCompute表、资源等，同时您也可以通过外表的方式直接读取存储在OSS、TableStore、RDS等其他产品中的数据。其中MaxCompute存储引擎主要采用列压缩...
规格及选型
实例资源类型 AnalyticDB PostgreSQL版 推荐使用存储弹性模式和Serverless版本两种实例资源类型：存储弹性模式 产品功能完整，使用存储计算一体架构，支持计算节点垂直升降配，横向扩容和存储灵活调整。购买时需要指定 实例系列、计算节点...
混合存储型（已停售）
内存数据：内存中存放了热数据的Key和Value，同时为快速确认要操作的Key是否存在，内存中也会缓存所有的Key信息。磁盘数据：磁盘中存放所有的Key和Value，Redis的数据结构（例如Hash）也会以一定的格式进行存储在磁盘。适用场景 适用场景 ...
DAS企业版介绍
开通DAS企业版后，默认的 数据存储时长 为1个月，您可以根据自己的需要进行修改，具体请参见 管理DAS企业版。说明 SQL洞察 功能中分析和统计数据（不包括SQL明细数据）的存储时长最长为90天：如果对应实例DAS专业版设置的存储时长小于等于...
典型慢查询
在执行数据排序时，AnalyticDB MySQL 会把数据缓存到内存中。如果需要排序的数据量较大，就会占用较多内存。Stage中有窗口函数操作。在执行窗口函数时，AnalyticDB MySQL 会把数据缓存在内存中。如果需要执行窗口函数的数据量较大，就会...
Kafka实时入湖建仓分析
数据解析配置 的参数说明如下：参数名称 参数说明 消息数据格式 Kafka的Value字段的数据存储格式，固定为JSON。Schema设置模式 默认为 手动设置，会从Kafka的Topic获取一条样例数据进行Schema的推断设置。消息样例数据 通过调整样例数据对...
环境准备
适用于海量账单、IM 消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。表格存储通道服务（Tunnel Service）是...
概述
适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。云原生大数据计算服务（MaxCompute）是一...
混合存储型（已停售）
混合存储型架构图 Redis企业版混合存储型（简称混合存储型）是阿里云自主研发的兼容Redis协议的混合存储产品，使用磁盘存储全量数据，将热数据保存到内存中供应用快速读写。在保证常用数据访问性能不下降的基础上，混合存储型能够大幅度...
Catalog概述
基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog StarRocks 2.3及以上版本支持Catalog功能，方便您轻松访问并查询存储在各类外部源的数据。...
功能特性
按时间点恢复RDS数据 按时间点恢复PolarDB数据 按时间点恢复MongoDB数据 按时间点恢复Redis数据 按时间点恢复Tair数据 存储能力 温备份存储 提供性能适中、价格适中的备份存储。DBS内置存储 备份数据清理 支持TTL过期系统自动删除备份数据...
PolarDB PostgreSQL版架构介绍
可以将回放进程中的以下IO操作offload到session进程中：数据页IO开销。日志apply开销。基于LogIndex页面的多版本回放。如下图所示，在只读节点上的回放进程中，在Apply一条WAL的meta时：如果对应Page不在内存中，仅仅记录LogIndex。如果...
PolarDB PostgreSQL版架构介绍
可以将回放进程中的以下IO操作offload到session进程中：数据页IO开销。日志apply开销。基于LogIndex页面的多版本回放。如下图所示，在只读节点上的回放进程中，在Apply一条WAL的meta时：如果对应Page不在内存中，仅仅记录LogIndex。如果...
Catalog概述
基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如，Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog StarRocks 2.3及以上版本支持Catalog功能，方便您轻松访问并查询存储在各类外部源的数据。...
计费模式
本文介绍数据湖构建中各资源的计费规格，包括入湖作业资源用量、数据存储对象和元数据请求三部分。计量计费项 重要 DLF产品目前所有功能为 0折扣活动阶段，即使超过免费阶梯限定后，目前也均不会产生实际计费。元数据对象的存储量 元数据...
性能测试
以时空轨迹数据为7.6 GB为例，写入耗时的测试结果如下：数据库 写入耗时 云原生多模数据库 Lindorm Ganos引擎 7分钟 开源GeoMesa（HBase）13分钟 云数据库MongoDB分片集群 34分钟 创建时空索引后的时空数据存储空间占用情况 创建时空主键...
开启和使用冷数据分层存储
冷数据恢复 数据转存至OSS时会进行压缩处理，如果要将已经存储在OSS中的数据恢复至云盘存储，需确保云盘上有足够的存储空间，通常要比OSS上的存储空间增大约1.4~4倍。冷数据清除 删除冷存表/索引/物化视图的SQL也是透明的，无需进行任何...
开启和使用冷数据分层存储
冷数据恢复 数据转存至OSS时会进行压缩处理，如果要将已经存储在OSS中的数据恢复至云盘存储，需确保云盘上有足够的存储空间，通常要比OSS上的存储空间增大约1.4~4倍。冷数据清除 删除冷存表/索引/物化视图的SQL也是透明的，无需进行任何...
开启和使用冷数据分层存储
冷数据恢复 数据转存至OSS时会进行压缩处理，如果要将已经存储在OSS中的数据恢复至云盘存储，需确保云盘上有足够的存储空间，通常要比OSS上的存储空间增大约1.4~4倍。冷数据清除 删除冷存表/索引/物化视图的SQL也是透明的，无需进行任何...
创建数据流
OSS路径 输入数据在OSS中的保存路径。表名 输入数据流写入数据的目标表。覆盖目标表 打开或关闭 覆盖目标表 开关。开关关闭：直接写入数据。开关打开：如果表已存在，先清空目标表或者分区数据，再写入数据。文件格式 选择文件存储格式。...
Location托管
Location托管可以将数据湖OSS中的存储数据托管到数据湖构建（DLF）中进行管理和分析，在托管Location后将可以为你提供 存储概览，生命周期管理介绍，数据表-数据概况（如数据访问频次，数据最后更新时间等），以及存储权限（规划中）等数据...
将MaxCompute数据同步到表格存储
适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。云原生大数据计算服务（MaxCompute）是一...
应用场景
IM场景中可使用 表格存储 互联网应用架构中的分布式结构化数据存储架构来实现。场景架构如下图所示。表格存储 专为IM场景和Feed流场景设计了Timeline轻量级消息模型，能够支持同步表百TB存储、存储表PB级存储、每秒百万写扩散消息写入以及...
DLA Lakehouse实时入湖
数据存储格式 数据的存储格式固定为HUDI。源端实例引擎类型 数据源的引擎类型。当前仅支持MySQL引擎。任务执行Spark虚拟集群 执行Spark作业的虚拟集群。目前入湖⼯作负载在DLA Spark的虚拟集群中运行。如果您还未创建虚拟集群，请进行创建...
数据节点管理
在弹框中输入资源池名称，在高级选项中可以选择数据节点，支持将_recyle存储资源池中的数据节点关联到新建的自定义存储资源池。默认可以不选择，等自定义存储资源池创建后通过增加数据节点的方式添加数据节点。单击 确定。创建完成后可在...
时序模型计量计费
时间线数据包括产生数据的时间和对应的数据值，是时序模型中数据存储与读写操作的主要计费部分。其中数据存储支持选择高性能存储或者容量型存储，读写操作按照容量型进行计量计费。时间线元数据也称为时间序列元数据，表示一条时间线的标识...
查询报错问题
第一次查询时会将数据缓存到内存中，若下次查询所需要的数据依然在内存中时，此时不用再次读磁盘，因此访问速度很快。用户使用的是普通表，且写入大量数据后未执行optimize操作，此时执行SQL会随着插入数据多而变得越来越慢。这是因为分析...
SQL洞察
重要 对于采用冷热混合存储的SQL洞察和审计，超过7天的SQL洞察和审计数据采用冷存储，分析7天前的SQL明细数据时，系统会创建对应的任务重新进行计算和分析，您可以在 任务列表 页面，查看任务进度及历史任务。查询分析超过7天的SQL洞察和...
RDS SQL Server I/O高问题
诊断缓存的一个常用性能指标是页生命周期（Page Life Expectancy），表示平均每个缓存的数据页在内存中驻留的时间，单位为秒。时间越短，意味着实例的缓存压力越大。通常建议Page Life Expectancy的阈值至少不低于300秒，实例的内存规格越...
时序分析存储概述
分析存储与时序表的数据存储相互独立，允许用户自定义数据的生命周期（TTL），对分析存储的查询操作不会对时序表的读写性能产生影响。分析存储能够自动同步时序表数据，在数据写入速率稳定的情况下，同步操作的延迟通常在10分钟内，如果...
自建MySQL应急恢复
背景信息 DBS沙箱功能，尝试引入数据重删技术（重复数据删除技术）和虚拟化存储技术，来解决传统数据库备份服务中的存储成本和使用成本问题。通过重删和增量合并技术，使得备份数据在服务端持续保持可用的全量状态。通过虚拟化存储技术，...
- 产品推荐
- 这些文档可能帮助您