数据存储生命周期管理
本文介绍存储保存时间迁移策略。生命周期管理策略 热存储数据至少需保存7天才能转换为低频存储，当数据的存储时间超过配置的 热存储层数据保存 时间后，数据自动由热存储转为低频存储。热存储数据至少需保存30天才能直接转换为归档存储，当...
设置数据冷热存储策略
如果您想要以指定规则对文件引擎中存储的数据进行归档，将冷热数据分开存储，可以通过命令设置冷热存储策略，按照目录级别对数据进行划分。冷热分离可以有效提高热数据的查询效率，减少冷数据的存储成本。本文介绍通过开源HDFS客户端设置...
应用场景
云数据库Redis版 适用于多种场景，尤其是请求并发量大场景中的数据存储。游戏行业应用 游戏行业通常将云数据库Redis版作为重要的部署架构组件，用于缓存或数据持久化。场景一：Redis作为缓存加速应用访问 Redis作为缓存层，加速应用访问。...
元数据管理
选择元数据表中数据存储的位置。选择元数据表的存储格式。指定元数据表的分隔符。手动定义元数据表的列，指定列编号、列名称、是否是分区列等信息。删除元数据库 1.进入元数据管理-元数据库页面。2.找到想要删除的元数据库，点击右侧的删除...
数据集成服务
具体数据源配置如下：源数据源：Kafka数据源 目标数据源：Tablestore数据源 同步HBase数据到表格存储 HBase数据库中数据只支持迁移到表格存储的数据表中。迁移过程中会使用到HBase的Reader脚本配置和表格存储的Writer脚本配置。具体数据源...
概述
数据同步过程中，数据源中的数据存储在目标数据仓库OSS中，搭建数据仓库过程中不会对数据源端的业务系统产生任何压力。通过DLA控制台配置建仓任务，支持自定义设置定时数据投递。极致的计算能力，充分发挥DLA的计算能力，通过DLA的大内存、...
冷热分层存储
并不是所有OSS-HDFS中存储的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍然需要继续保存。针对以上问题，OSS-HDFS服务支持数据的冷热分层存储，对于经常需要访问的数据以标准类型进行存储，对于较少访问的数据以低频、...
功能特性
数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型（WideColumn）是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...
计量计费项
预留模式的计费项包括计算能力、数据存储量和外网下行流量三部分。预留模式适用于业务峰值较为平稳、可预测的场景。本文介绍预留模式的计费价格、计费组成、计费项以及计费常见问题。计费价格 具体计费价格，请参见 表格存储价格详情页。...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
宽表模型介绍
宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、宽行、多版本数据以及生命周期管理特点，支持主键列自增、局部事务、原子计数器、过滤器、条件更新等功能。模型介绍 表格存储 宽表模型是类Bigtable/...
快速入门
数据湖构建（Data Lake Formation，DLF）产品主要使用流程如下。...创建数据源 创建数据湖的入湖来源，当前支持阿里云RDS MySQL...创建数据湖的元数据 添加元数据库 创建元数据表，指定表中数据的存储位置和存储格式 详细操作请参见 元数据管理。
方案设计
本章节主要为您介绍基于表格存储的海量气象格点数据解决方案的模型及方案设计。标准化格点数据模型 一个规整的五维网格数据为一个网格的数据集（GridDataSet），按照维度顺序五维分别为：维度 说明 variable 变量，例如各种物理量 time ...
什么是OSS-HDFS服务
HDFS服务中的数据 Impala Impala使用JindoSDK查询OSS-HDFS服务中的数据 Presto Presto使用JindoSDK查询OSS-HDFS服务中的数据 Spark Spark使用JindoSDK查询OSS-HDFS服务中的数据 阿里云生态 EMR 在EMR Hive或Spark中访问OSS-HDFS Flink EMR ...
创建分析存储
设置分析存储同步时序表中数据的方式。analyticalStore.setSyncOption(AnalyticalStoreSyncType.SYNC_TYPE_INCR);设置时序表名称。CreateTimeseriesAnalyticalStoreRequest request=new CreateTimeseriesAnalyticalStoreRequest("test_...
更新分析存储的数据生命周期
当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后，表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
更新分析存储的数据生命周期
当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后，表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
创建分析存储
analyticalStore.SetTimeToLive(2592000)/设置分析存储同步时序表中数据的方式。analyticalStore.SetSyncOption(tablestore.SYNC_TYPE_INCR)/设置时序表名称。request:=tablestore.NewCreateTimeseriesAnalyticalStoreRequest("test_...
多元索引介绍
用户为数据表创建了多元索引后，当在数据表中写入数据时，数据会先写入数据表中，数据写成功后会立即返回用户写成功，同时另一个异步线程会从数据表中读取写入的数据然后写入到多元索引，采用异步方式创建多元索引不会降低表格存储的写入...
SQL查询介绍
SQL查询为表格存储的多数据引擎提供统一的访问接口，兼容MySQL的查询语法，适用于在海量数据中进行在线数据访问类型的场景。您可以通过SQL查询功能对表格存储中的数据进行复杂的查询和高效的分析。背景信息 为了满足用户业务平滑迁移到表格...
对象存储优化
对象存储OSS提供存储管理功能，帮助您优化存储性能和成本。...OSS还支持对低频访问和归档存储的数据进行检索，您无需执行数据取回操作即可找到分析所需的数据。通过OSS SelectObject，您可以降低成本，获取更多数据洞察。
计算与分析概述
分析工具 适用模型 操作 描述 MaxCompute 宽表模型 使用MaxCompute 通过MaxCompute客户端为 表格存储 的数据表创建外部表，即可访问 表格存储 中的数据。Spark 宽表模型 使用Spark计算引擎 使用Spark计算引擎时，支持通过E-MapReduce SQL...
生命周期管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
数据归档至专属存储
本文为您介绍如何将数据归档至专属存储中（存储在 DMS）、将专属存储的数据转存至OSS，以及删除归档至专属存储的数据等操作。前提条件 源数据库类型为：MySQL：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。说明 MySQL数据库账号...
通过控制台使用分析存储
操作 说明 更新分析存储的生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以更新分析存储的生命周期。在 实例管理 页面的 实例详情 页签，单击 时序表列表 页签。在 时序表列表 页签，单击时序表名。在 基本详情...
冷热分离
云数据库HBase增强版支持冷热分离功能，可以将冷热数据存储在不同的介质中，有效提升热数据的查询效率，同时降低数据存储成本。背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这...
基本概念
云数据库SelectDB版 支持的表引擎如下：Aggregate表引擎 Unique表引擎 Duplicate表引擎 索引（Index）索引是对表中一列或多列的值进行排序的一种结构，使用索引 可以快速过滤表中的数据，提高数据的查询效率。目前 云数据库SelectDB版 支持...
Tair持久化与备份恢复
Tair 持久化是指为了避免数据丢失，定期将数据存储到磁盘中。如遇 Tair 宕机或重启，能够利用磁盘中的持久化文件恢复数据。为满足各类场景下对备份与恢复的需求，云原生内存数据库Tair 提供RDB持久化、AOF持久化和Tair-Binlog持久化策略。...
Redis持久化与备份恢复
Redis 持久化是指为了避免数据丢失，定期将数据存储到磁盘中。如遇 Redis 宕机或重启，能够利用磁盘中的持久化文件恢复数据。为满足各类场景下对备份与恢复的需求，云数据库 Redis 版 提供RDB持久化、AOF持久化和Tair-Binlog持久化策略。...
按时间戳冷热分离
如果此时设置 HOT_ONLY 或 TimeRange 只查询热存储中的数据，则只会返回这一行存储在热存储的字段。只有在查询时去掉 HOT_ONLY 和 TimeRange，或保证 TimeRange 覆盖了该行数据的插入和更新时间，才能完整返回这一行数据。因此不建议更新...
授权与回收数据源权限
同步读：通过同步组件对来源存储中的数据进行读取的权限。同步写：通过同步组件对目标存储进行写入的权限。执行：仅支持用于执行数据库SQL任务。该权限不替代同步读、同步写权限。授权原因 填写授予数据源权限的原因。不超过128字符。单击 ...
授权与回收数据源权限
同步读：通过同步组件对来源存储中的数据进行读取的权限。同步写：通过同步组件对目标存储进行写入的权限。执行：仅支持用于执行数据库SQL任务。该权限不替代同步读、同步写权限。授权原因 填写授予数据源权限的原因。不超过128字符。单击 ...
功能发布记录
2022-01-20 华东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）、华南1（深圳）、新加坡 通过Hibernate使用 通过MyBatis使用 同步Kafka数据到时序表 您可以使用kafka-connect-tablestore包将Kafka中数据写入 表格存储 的时序表...
通过缓存优化性能
性能：Delta缓存中存储的数据比Spark缓存中的数据读取和操作速度更快。这是因为Delta缓存使用高效的解压算法，并以最佳格式输出数据，以便使用整个阶段的代码生成进行进一步处理。自动与手动控制：启用Delta缓存时，必须从远程源获取的数据...
计费常见问题
备份计划存储费用（可选）：配置包年包月备份计划时，当备份目标存储类型选择为 DBS内置存储，系统将根据存入DBS内置存储中的实际数据量的大小与时长收取存储费用。费用详情，请参见 存储费用。备份计划备份费用（可选）：若备份计划备份的...
PolarDB-X 1.0迁移至阿里云消息队列Kafka
投递到Kafka的数据格式 根据需求选择迁移到Kafka实例中的数据存储格式。如果您选择 DTS Avro，根据DTS Avro的schema定义进行数据解析，schema定义详情请参见 DTS Avro的schema定义。如果您选择 Canal Json，Canal Json的参数说明和示例请...
高级管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
数据备份概述
通过为实例中的表配置备份计划并执行，您可以备份 表格存储 中的重要数据到 云备份 中，如果重要数据被误删除或者恶意篡改，您可以将备份数据快速恢复到 表格存储 中。注意事项 当前支持使用数据备份功能的地域有华东1（杭州）、华东2...
设置生命周期策略
归档存储：适用于数据长期保存的业务场景，例如数据审计、数据归档等。取值为：14、30、60、90、180。当指定目录或文件在预置天数内未被访问时，文件将会转储至低频存储或归档存储。说明 两种存储类型可以同时选择，也可以选择任意一个。若...
新功能发布记录
数据归档至专属存储 10月 功能名称 变更类型 功能描述 相关文档 查询数据备份 新增 支持查询 RDS MySQL 全量备份时间点的数据。查询备份数据 09月 功能名称 变更类型 功能描述 相关文档 数据归档至 AnalyticDB PostgreSQL版 新增 增加数据...
- 产品推荐
- 这些文档可能帮助您