图扑案例
对于需要实时采集海量数据的生产线、风电厂和智能交通态势感知数据的场景，为了实现实时数据采集、存储、索引和聚合，原存储方案中采用了ElasticSearch、Prometheus、Hbase分别存储从现场传感器、第三方系统和用户终端设备采集的时序指标、...
如何开启存储压缩功能
开启后，在集群 基本信息 页面，下拉至页面底部的 数据库分布式存储 区域，即可查看开启存储压缩功能后的存储空间变化（括号中显示的块存储物理数据量即为压缩后实例整体的存储用量）。说明 PolarDB 仅对压缩后的物理数据进行计费。存储包...
如何开启存储压缩功能
开启后，在集群 基本信息 页面，下拉至页面底部的 数据库分布式存储 区域，即可查看开启存储压缩功能后的存储空间变化（括号中显示的块存储物理数据量即为压缩后实例整体的存储用量）。说明 PolarDB 仅对压缩后的物理数据进行计费。存储包...
产品架构
整体架构如下：LindormTable 的数据持久化存储在LDFS中，表的数据通过自动Sharding分散到集群中的多台服务器上，并且每一个分区可以拥有1至N个副本，这N个副本拥有主、从两种角色，主从副本可以加载在不同的Zone，从而保障集群的高可用和强...
数据归档概述
归档链路文档 数据归档至专属存储 数据归档至AnalyticDB MySQL 3.0 数据归档至Lindorm 数据归档至AnalyticDB PostgreSQL版 数据归档至RDS MySQL 数据归档至PolarDB MySQL版 数据归档至用户OSS 数据归档至DBS内置OSS 常见问题 Q：如果在数据...
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
表格存储
表格存储（Tablestore）是阿里云自研的结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。表格存储提供兼容HBase的WideColumn模型、消息模型Timeline以及时空模型Timestream，实现PB级存储、千万TPS以及毫秒级延迟的服务...
备份与恢复常见问题
A：支持，购买存储包后，若抵扣完账号下所有 PolarDB 集群的存储空间用量后存储包容量仍有剩余，将自动按照1:1.6的比例抵扣一级备份中超过免费额度的空间用量，直至抵扣完存储包中的所有容量。若存储包中剩余容量不足以抵扣一级备份所用量...
数据安全
为了防止由于误删、恶意篡改等导致重要数据不可用，您可以使用 表格存储 数据备份功能备份实例中宽表数据，并在数据丢失或受损时及时恢复。更多信息，请参见 备份Tablestore数据、恢复Tablestore数据 和 为备份计划设置报警方式。用户密钥...
数据库备份到OSS
背景 对象存储OSS 对象存储OSS 提供了标准类型存储，作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也提供了成本更低、存储期限更长的低频访问类型存储和归档类型存储，作为不经常访问数据的备份和归档。对象存储OSS非常...
生命周期管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
导出全量数据到MaxCompute
如果需要使用MaxCompute备份 表格存储 数据或者迁移 表格存储 数据到MaxCompute中使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到MaxCompute后，您可以使用DataWorks数据分析功能查看...
通过实时计算订阅数据
依次双击 RDS 数据存储>数据库名称（datav_test）>表名（target_table），选择右侧的 作为结果表引用，在开发作业中引用目标表。通过 INSERT INTO 语句，将实时计算后的源表数据插入目标表中。说明 如果数据格式不匹配，需要进行相应的 ...
宽表模型介绍
宽表（WideColumn）模型是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景，支持数据版本、生命周期、主键列自增、条件更新、过滤器等功能。宽表模型在车联网场景中主要用于车辆元数据的存储与分析。说明 关于宽表模型的更多信息...
通过缓存优化性能
Delta缓存通过使用快速中间数据格式在节点的本地存储中创建远程文件的副本来加速数据读取。每当需要从远程位置获取文件时，数据都会自动缓存。然后在本地的连续读取上述数据，从而显著提高读取速度。说明 详细内容可参考Databricks官网文章...
开启和使用冷数据分层存储
如果没有存储数据，开启该功能本身不会产生费用。暂不支持的DDL：暂不支持在OSS表空间中创建数据库：CREATE DATABASE dbname TABLESPACE OSS;暂不支持将已有数据库一次性转入OSS表空间：ALTER DATABASE dbname SET TABLESPACE OSS;说明 该...
PolarDB MySQL版逻辑备份
当您的存储数据量较大时，推荐您购买 DBS存储包（包年包月）抵扣DBS内置存储费用。相比按量付费，DBS存储包更加优惠。存储方式 请选择存储方式，当前支持：内置加密存储（推荐）：使用行业标准的AES256算法（即256位高级加密标准）进行加密...
方案选择
表格存储作为面向海量结构化数据提供的Serverless表存储服务，具有海量数据存储、热点数据自动分片、海量数据多维检索等功能，能有效解决订单数据大爆炸的挑战。同时，多元索引 功能在保证用户数据高可用的基础上提供了数据多维度搜索、...
常见问题
对比项 DAS企业版 V3 DAS企业版 V2 DAS企业版 V1 DAS企业版 V0 计费项 采用按量计费的模式，计费项为：数据引入 实时搜索分析 洞察分析 数据热存储 数据冷存储 数据查询 数据导出 企业版 V3在冷热存储混合的基础上，按使用的功能细分计费项...
设置生命周期策略
生命周期策略仅对文件大小在64 KiB~4.88 TiB范围内的文件进行转储，超出此范围的数据将不会转储至低频存储或归档存储中。归档存储的最低存储时间要求为60天。如果文件以归档类型存储时长不足60天将收取归档存储不足归档时长容量费用。更多...
MySQL物理备份
当您的存储数据量较大时，推荐您购买 DBS存储包（包年包月）抵扣DBS内置存储费用。相比按量付费，DBS存储包更加优惠。对象存储OSS Bucket名称 请选择您的对象存储OSS Bucket名称。说明 该参数仅在 备份目标存储类型 参数为 用户OSS 时显示...
RDS MySQL或自建MySQL逻辑备份
当您的存储数据量较大时，推荐您购买 DBS存储包（包年包月）抵扣DBS内置存储费用。相比按量付费，DBS存储包更加优惠。存储方式 请选择存储方式，当前支持：内置加密存储（推荐）：使用行业标准的AES256算法（即256位高级加密标准）进行加密...
使用冷存储
并通过建表语句指定将冷数据存放在冷存储介质上面，同时HBase增强版还基于冷存储实现了在同一张表内的冷热分离功能，能够自动将表中热数据放到读写速度快的热存储中，而把不常访问的数据放到冷存储中降低成本。注意事项 冷存储的读IOPS能力...
开启和使用冷数据分层存储
如果没有存储数据，开启该功能本身不会产生费用。暂不支持的DDL：暂不支持在OSS表空间中创建数据库：CREATE DATABASE dbname TABLESPACE OSS;暂不支持将已有数据库一次性转入OSS表空间：ALTER DATABASE dbname SET TABLESPACE OSS;说明 该...
开启和使用冷数据分层存储
如果没有存储数据，开启该功能本身不会产生费用。暂不支持的DDL：暂不支持在OSS表空间中创建数据库：CREATE DATABASE dbname TABLESPACE OSS;暂不支持将已有数据库一次性转入OSS表空间：ALTER DATABASE dbname SET TABLESPACE OSS;说明 该...
PolarDB PostgreSQL版（兼容Oracle）逻辑备份
当您的存储数据量较大时，推荐您购买 DBS存储包（包年包月）抵扣DBS内置存储费用。相比按量付费，DBS存储包更加优惠。存储方式 存储方式：内置加密存储（推荐）：使用行业标准的AES256算法（即256位高级加密标准）进行加密存储。在对象存储...
按时间戳冷热分离
优先查询热存储中的数据，若热存储中的数据查完了，用户仍然在调用获取下一条数据，则会开始查询冷数据。false：否。不开启优先查询热数据功能。方式二：HBase Java API scan=new Scan();scan.setAttribute(AliHBaseConstants.COLD_HOT_...
方案背景
基于表格存储搭建的智能元数据管理系统样例内嵌在表格存储控制台中，用户可登录控制台体验系统（如果您是表格存储的新用户，需要开通表格存储服务后体验，开通免费，Meta数据存储在公共实例中，体验不消耗用户存储、流量、CU）。...
在云控制台上使用块网关
本文介绍如何通过阿里云云存储网关控制台快速创建块网关及iSCSI卷。前提条件 已注册阿里云账号，并完成实名认证，详情请参见 注册阿里云账号。说明 建议您使用RAM账户登录云存储网关控制台进行相关操作，详情请参见 账号访问控制。已开通云...
EMR+DLF数据湖解决方案
步骤六（可选）：使用生命周期对数据湖存储进行合理规划，节省存储成本 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则，可以基于分区/表创建时间、分区/表最近修改时间、分区值三种规则类型，对数据定期进行OSS存储...
数据备份概述
为了防止由于误删、恶意篡改等导致重要数据不可用，您可以使用 表格存储 数据备份功能备份实例中宽表数据，并在数据丢失或受损时及时恢复。背景信息 云备份（Cloud Backup）作为阿里云统一灾备平台，是一种简单易用、敏捷高效、安全可靠的...
冷热数据分层存储
冷热数据分层存储提供了两种存储策略，具体如下：存储策略 详情 默认存储策略 将新写入的数据存储在热数据盘中，提供高效查询。当热数据存储量达到业务使用阈值时，自动将当前热数据盘中占用空间最大的part数据文件移动到冷数据盘存储，...
使用存储包
存储包抵扣方式如下：存储包可抵扣的内置存储用量为：100 GB/1.13=88.4956 GB（约等值，请以实际出账为准），不足以抵扣120 GB内置存储数据，则使用存储包先抵扣88.4956 GB用量。剩余的内置存储120 GB-88.4956 GB=31.5044 GB正常按量计费。...
设置存储空间自动扩容
当数据库存储空间不足时，可能会无法写入数据，导致数据丢失甚至数据库崩溃，严重影响业务运行。RDS MySQL支持在存储空间达到阈值时自动进行扩容。在扩容期间无需重启实例，对业务无影响。前提条件 实例的计费方式为包年包月或按量付费。...
功能特性
管理文件元信息 管理目录 与传统文件系统中的层级结构不同，OSS内部使用扁平结构存储数据。即所有数据均以Object的形式保存在Bucket中。为方便您对Object进行分组并简化权限管理，您可以创建目录，然后将目标Object存放至指定目录。当您不...
入湖基础操作
数据湖存储位置：数据存储的OSS路径，入湖任务会自动创建此处填写的空文件夹来存储数据。分区信息：添加需要写入的分区信息。分区表达式：填写描述分区值的获取方式，比如 MySQL 中from_unixtime(gmt_create)。分区字段：填写分区字段名称...
存储资源包
续费 支持 退订 不支持 升降级 不支持 抵扣规则 每小时统计账号下所有 云数据库 SelectDB 版 实例的存储使用空间总量，按抵扣因子从购买的存储包容量中抵扣，如果抵扣量超出存储包总量，则超出部分以按量计费产生费用。存储资源包费用 存储...
方案实现
步骤三：导入数据 控制台 项目样例 中插入了1亿条数据，您可以通过控制台插入少量测试数据。店铺编号 店铺（md5）（主键）类型 店铺名称 店铺位置 店铺评分 人均消费 o0057022192 0000000f470ef0ef0f0f548b925ceffela7e3 杭帮菜 韩村杭帮菜...
E-MapReduce数据迁移
本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...
使用UDF处理数据
如果您在表格存储中的数据有着独特的结构，希望自定义开发逻辑来处理每一行数据，例如解析特定的JSON字符串，您可以使用用户自定义函数UDF（User Defined Function）来处理表格存储中的数据。操作步骤 在IntelliJ中安装MaxCompute-Java/...
- 产品推荐
- 这些文档可能帮助您