数据存储生命周期管理
生命周期管理策略 热存储数据至少需保存7天才能转换为低频存储，当数据的存储时间超过配置的 热存储层数据保存 时间后，数据自动由热存储转为低频存储。热存储数据至少需保存30天才能直接转换为归档存储，当数据的存储时间超过配置的 热...
数据集成服务
且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到Tablestore表中存储和使用。您还可以通过DataWorks数据集成服务实现...
对象存储优化
OSS SelectObject允许您使用简单的SQL语句检索对象，这意味着您的应用程序无需使用计算资源来扫描和过滤对象中的数据。使用OSS SelectObject可以将查询性能提升4倍，并将查询成本降低80%。OSS还支持对低频访问和归档存储的数据进行检索，您...
创建分析存储
如果希望分析存储中的数据永不过期，可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。syncOption 分析存储同步选项。取值范围如下：SYNC_TYPE_FULL表示同步全部数据到分析存储。SYNC_TYPE_INCR表示同步增量数据到分析...
创建分析存储
如果希望分析存储中的数据永不过期，可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。syncOption 分析存储同步选项。取值范围如下：SYNC_TYPE_FULL表示同步全部数据到分析存储。SYNC_TYPE_INCR表示同步增量数据到分析...
计算与分析概述
分析工具 适用模型 操作 描述 MaxCompute 宽表模型 使用MaxCompute 通过MaxCompute客户端为 表格存储 的数据表创建外部表，即可访问 表格存储 中的数据。Spark 宽表模型 使用Spark计算引擎 使用Spark计算引擎时，支持通过E-MapReduce SQL...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
概述
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
设置数据冷热存储策略
冷热分离可以有效提高热数据的查询效率，减少冷数据的存储成本。本文介绍通过开源HDFS客户端设置冷热数据存储策略的方法。前提条件 已开通冷存储功能。具体操作，请参见 开通冷存储。操作步骤 通过开源HDFS客户端访问文件引擎，具体操作，...
基本概念
云数据库SelectDB版 支持的表引擎如下：Aggregate表引擎 Unique表引擎 Duplicate表引擎 索引（Index）索引是对表中一列或多列的值进行排序的一种结构，使用索引 可以快速过滤表中的数据，提高数据的查询效率。目前 云数据库SelectDB版 支持...
什么是OSS-HDFS服务
HDFS服务中的数据 Impala Impala使用JindoSDK查询OSS-HDFS服务中的数据 Presto Presto使用JindoSDK查询OSS-HDFS服务中的数据 Spark Spark使用JindoSDK查询OSS-HDFS服务中的数据 阿里云生态 EMR 在EMR Hive或Spark中访问OSS-HDFS Flink EMR ...
冷热分层存储
jindo fs-unsetStoragePolicy-path该命令用于取消指定路径下的数据的存储策略。jindo fs-checkStoragePolicy-path该命令用于查询指定路径下数据存储策略的转换状态。转换状态分为以下三种：Pending：任务等待提交。Submitted：任务已提交。...
快速入门
数据湖构建（Data Lake Formation，DLF）产品主要使用流程如下。...创建数据源 创建数据湖的入湖来源，当前支持阿里云RDS MySQL...创建数据湖的元数据 添加元数据库 创建元数据表，指定表中数据的存储位置和存储格式 详细操作请参见 元数据管理。
方案设计
这四列主键列标记一行表格存储中的数据，这行数据需要保存后两维的数据，即一个格点平面。这种设计下，五维中的前三维都可以通过主键列的值来定位，即对于前三维的每一种情况，都对应表格存储中的一行。由于前三维分别代表变量、时间和高度...
计费常见问题
开启沙箱功能后，DBS会根据沙箱存储中的数据量产生沙箱存储费用。创建沙箱实例后，DBS会根据沙箱实例规格及使用时长产生沙箱实例费用。费用详情，请参见 DBS沙箱费用。说明 DBS控制台暂不支持直接创建按量付费的备份计划。DBS存储包和DBS...
DBS沙箱费用
沙箱存储费用 沙箱存储费用 开启沙箱功能后，系统会自动将待恢复的数据同步至沙箱存储中，并在沙箱存储中生成多个直接可用的沙箱实例快照，DBS将根据沙箱存储中的数据量收取沙箱存储费用。沙箱存储费用的计费方式与价格如下。沙箱存储费用...
冷热分离
背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这部分历史数据体量非常大，比如订单数据或者监控数据，降低这部分数据的存储成本将会极大的节省企业的成本。因此，如何以极简的...
更新分析存储的数据生命周期
如果希望分析存储中的数据永不过期，可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为test_analytical_store分析存储的数据生命周期为30天（即2592000秒）。public void updateAnalyticalStore(TimeseriesClient ...
宽表模型介绍
说明 您也可以通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink等计算引擎分析 表格存储 中的数据。更多信息，请参见 计算与分析概述。计费说明 表格存储 支持预留模式（预付费）和按量模式（后付费）两种计费模式，请根据所用的...
数据归档至专属存储
系统自动执行此任务，您需要等待任务状态从 正在执行 变为 执行成功，此执行过程耗时长短与您归档数据的存储量有关。说明 文件合并任务执行完成后，系统会自动将数据源替换为合并后的文件。查询文件合并后的数据。具体操作，请参见 查询...
按时间戳冷热分离
优先查询热存储中的数据，若热存储中的数据查完了，用户仍然在调用获取下一条数据，则会开始查询冷数据。false：否。不开启优先查询热数据功能。方式二：HBase Java API scan=new Scan();scan.setAttribute(AliHBaseConstants.COLD_HOT_...
更新分析存储的数据生命周期
如果希望分析存储中的数据永不过期，可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为test_analytical_store的分析存储配置信息，将数据生命周期更新为30天（即2592000秒）。func UpdateTimeseriesAnalyticalStore...
通过控制台使用分析存储
操作 说明 更新分析存储的生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以更新分析存储的生命周期。在 实例管理 页面的 实例详情 页签，单击 时序表列表 页签。在 时序表列表 页签，单击时序表名。在 基本详情...
多元索引介绍
使用流程 步骤 操作 说明 1 为数据表创建多元索引 在数据表上创建一个多元索引后，您可以根据多元索引中建立索引的字段来查询数据表中的数据。2 使用多元索引查询数据 多元索引提供了 全匹配查询、匹配查询、短语匹配查询、精确查询、多词...
SQL查询介绍
您可以通过SQL查询功能对表格存储中的数据进行复杂的查询和高效的分析。背景信息 为了满足用户业务平滑迁移到表格存储以及使用SQL方式访问表格存储的需求，表格存储在传统的NoSQL结构化存储之上，提供云原生的SQL引擎能力。SQL查询兼容...
授权与回收数据源权限
同步读：通过同步组件对来源存储中的数据进行读取的权限。同步写：通过同步组件对目标存储进行写入的权限。执行：仅支持用于执行数据库SQL任务。该权限不替代同步读、同步写权限。授权原因 填写授予数据源权限的原因。不超过128字符。单击 ...
授权与回收数据源权限
同步读：通过同步组件对来源存储中的数据进行读取的权限。同步写：通过同步组件对目标存储进行写入的权限。执行：仅支持用于执行数据库SQL任务。该权限不替代同步读、同步写权限。授权原因 填写授予数据源权限的原因。不超过128字符。单击 ...
数据备份概述
表格存储 控制台集成了 云备份 的 Tablestore 备份功能，提供了 Tablestore 数据备份、数据恢复、报警设置等功能，支持对 表格存储 中的数据进行备份与恢复。数据备份可用于容灾备份、误删或恶意篡改恢复、数据版本控制、法律合规要求、...
元数据管理
选择元数据表中数据存储的位置。选择元数据表的存储格式。指定元数据表的分隔符。手动定义元数据表的列，指定列编号、列名称、是否是分区列等信息。删除元数据库 1.进入元数据管理-元数据库页面。2.找到想要删除的元数据库，点击右侧的删除...
通过缓存优化性能
性能：Delta缓存中存储的数据比Spark缓存中的数据读取和操作速度更快。这是因为Delta缓存使用高效的解压算法，并以最佳格式输出数据，以便使用整个阶段的代码生成进行进一步处理。自动与手动控制：启用Delta缓存时，必须从远程源获取的数据...
新功能发布记录
专属存储中的数据转存至阿里云对象存储OSS 退订服务 新增 DMS 支持手动退订 数据管理-新版 包年包月的服务，您可通过DMS的订单释放入口，或直接在用户中心进行退订。退款说明 07月 功能名称 变更类型 功能描述 相关文档 设置审批流程 新增 ...
通过控制台使用宽表模型
当数据的保存时间超过设置的数据生命周期时，系统会自动清理超过数据生命周期的数据。单位为秒。取值：大于等于86400秒（一天）或-1（数据永不过期）。最大版本数 数据表中的属性列能够保留数据的最大版本个数。当属性列数据的版本个数超过...
设置生命周期策略
重要 删除策略并不会清除低频存储或归档存储中的数据。为避免残余低频数据或归档数据产生资费，请在删除策略前对数据进行取回操作。具体操作，请参见 创建数据取回任务。常见问题 如何设置生命周期管理策略？所有文件都可以转储到低频存储...
PolarDB MySQL版迁移至Kafka
投递到Kafka的数据格式 根据需求选择同步到Kafka实例中的数据存储格式。如果您选择 DTS Avro，根据DTS Avro的schema定义进行数据解析，schema定义详情请参见 DTS Avro的schema定义。如果您选择 Canal Json，Canal Json的参数说明和示例请...
Db2 for LUW迁移至阿里云消息队列Kafka版
投递到Kafka的数据格式 迁移到Kafka实例中的数据存储格式。当前仅支持选择 DTS Avro，即根据DTS Avro的Schema定义进行数据解析。Schema定义详情，请参见 DTS Avro的schema定义。投递到Kafka Partition策略 根据业务需求选择迁移的策略，...
PolarDB-X 2.0迁移至阿里云消息队列Kafka
投递到Kafka的数据格式 根据需求选择迁移到Kafka实例中的数据存储格式。如果您选择 DTS Avro，根据DTS Avro的schema定义进行数据解析，schema定义详情请参见 DTS Avro的schema定义。如果您选择 Canal Json，Canal Json的参数说明和示例请...
自建Oracle迁移至阿里云消息队列Kafka版
投递到Kafka的数据格式 根据需求选择迁移到Kafka实例中的数据存储格式。如果您选择 DTS Avro，根据DTS Avro的schema定义进行数据解析，schema定义详情请参见 DTS Avro的schema定义。如果您选择 Shareplex Json，Shareplex Json的参数说明和...
数据展示
表格存储对接Grafana后，您可以通过Grafana可视化展示表格存储中的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。已为表格存储的数据表或者...
功能特性
原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件存储上的所有数据（包括静态存储和动态传输中的数据）都...
开启智能存储分层
归档存储数据保存 数据在Logstore归档存储层中的存储时间，当数据的存储时间超过您所配置的 归档存储数据保存 时间后，数据将自动删除。归档存储数据保存 时间至少为60天。取值范围为60～3650，单位：天。重要 归档存储层数据保存 时间参数...
- 产品推荐
- 这些文档可能帮助您