数据存储生命周期管理
本文介绍存储保存时间迁移策略。生命周期管理策略 热存储数据至少需保存7天才能转换为低频存储，当数据的存储时间超过配置的 热存储层数据保存 时间后，数据自动由热存储转为低频存储。热存储数据至少需保存30天才能直接转换为归档存储，当...
开启智能存储分层
归档存储数据保存 数据在Logstore归档存储层中的存储时间，当数据的存储时间超过您所配置的 归档存储数据保存 时间后，数据将自动删除。归档存储数据保存 时间至少为60天。取值范围为60～3650，单位：天。重要 归档存储层数据保存 时间参数...
数据服务系统配置
例如：当天日期为2023-04-30，配置了30天，则保存时间为2023-03-31至2023-04-30（过期时间根据数据存储周期动态变更）。当您修改时长小于之前设置的时长（例如：之前设置的是30天，现在修改变成20天），保存时需再次确认是否删除统计数据...
内置存储与用户OSS
数据库备份DBS提供数据库的备份恢复能力，备份数据保存在云存储上，云存储支持内置存储、用户OSS。对比项 DBS内置存储 用户OSS 安全性 客户无法直接访问备份集。已接入DBS安全权限体系。客户可直接访问备份集。需要自行管理备份集安全。...
文件系统存储类型
数据存储 数据取回 成本节省计划 低频存储和归档存储是针对存储在标准存储空间中的冷数据进行成本优化。设置生命周期管理策略，您可以根据业务实际访问数据的情况自动分级存储数据，从而优化存储成本。如果您需要频繁访问低频存储或归档...
应用场景
而 文件存储 HDFS 版 能够提供高吞吐量和低延迟的访问能力，无需将数据迁移到计算资源本地，因此在该场景下推荐使用 文件存储 HDFS 版 存储数据。将数据存入 文件存储 HDFS 版，ECS实例或其他计算资源即可直接访问这些数据。将Hadoop或其他...
功能特性
宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、宽行、多版本数据以及生命周期管理特点，支持主键列自增、局部事务、原子计数器、过滤器、条件更新等功能。主键列自增 条件更新 局部事务 原子计数器 ...
更新分析存储的数据生命周期
timeToLive 分析存储数据存活时间，单位为秒。取值范围为-1（数据永不过期）或者大于等于2592000秒（即30天）的int32正整数。如果希望分析存储中的数据永不过期，可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为...
数据存储
根据采集到的不同数据类型，AnalyticDB采用不同的后台存储系统来进行监控数据的存储。时序数据存储 时序数据库对时序数据的写入、聚合以及检索都做了特定优化，AnalyticDB采集到的时序数据主要存在时序数据库中。目前每个AnalyticDB实例有...
管理EventStore
按需配置热存储数据保存时间，并选择后续 自动转换 为 低频存储 时，数据保存超出配置的保存时间后，将自动转入低频存储层。若配置低频存储时间后选择 自动删除，则数据保存在低频存储层超出配置的保存时间后将自动删除。按需配置热存储...
应用场景
表格存储 有互联网应用架构（包括数据库分层架构和分布式结构化数据存储架构）、数据湖架构和物...数据存储：长期保存数据，需要支持单表规模极大以及高性价比存储。监控&IoT场景中可使用 表格存储 的物联网架构来实现。场景架构如下图所示。
更新分析存储的数据生命周期
timeToLive 分析存储数据存活时间，单位为秒。取值范围为-1（数据永不过期）或者大于等于2592000秒（即30天）的int32正整数。如果希望分析存储中的数据永不过期，可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为...
添加数据集
DataV数据集支持多种数据源的接入，如数据库、excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...
存储说明
数据盘 数据盘用于保存数据。Master实例默认挂载1块云盘作为数据盘，Core实例默认挂载4块云盘作为数据盘。云盘与本地盘 E-MapReduce集群支持使用以下两种类型的磁盘来存储数据。块存储类型 描述 使用场景 云盘 包括SSD云盘、高效云盘和ESSD...
Catalog概述
存储系统：用于存储数据。数据文件以不同的格式存储在分布式文件系统或对象存储系统中。当FE将生成的查询计划分发给各个BE后，各个BE会并行扫描Hive存储系统中的目标数据，并执行计算返回查询结果。查询数据 查询内部数据 如果需要查询存储...
Catalog概述
存储系统：用于存储数据。数据文件以不同的格式存储在分布式文件系统或对象存储系统中。当FE将生成的查询计划分发给各个BE后，各个BE会并行扫描Hive存储系统中的目标数据，并执行计算返回查询结果。查询数据 查询内部数据 如果需要查询存储...
使用ossimport迁移数据
ossimport支持将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中。本文介绍如何使用ossimport将数据从第三方存储迁移到OSS。背景信息 某用户的数据存储于腾讯云COS广州（华南）区域，数据大小约500TB。现...
ECS实例说明
大数据型 使用本地SATA盘作存储数据，存储性价比高，是大数据量（TB级别的数据量）场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点；Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...
实时数据订阅概述
Pull模式：您可以使用开源的Kafka客户端直接订阅数据，服务端会暂时保存数据，您需要对保存的数据设置一个过期时间，如果超过这个时间数据会被删除。具体操作请参见 通过Pull模式创建数据订阅通道。Push模式：云原生多模数据库 Lindorm ...
设置数据保留策略
数据保留策略介绍 InfluxDB可以通过定义数据保留策略，用来控制存储数据量的方式。新创建的数据库默认的保留策略是 autogen，初始化的保留策略时长为0s，表示数据永久保存；分片时长默认为7天，您可以根据需求来修改存储策略。创建保留策略...
telnet 访问操作指南
保存数据的 key 是一个 16 位的无符号的整数（以十进制的方式表示）。该标志将和需要存储的数据一起存储，并在客户端 get 数据时返回。您可以将此标志用做特殊用途，此标志对服务器来说是透明的。过期的时间。0 表示存储的数据永远不过时...
时序模型
更新分析存储的数据生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以使用 UpdateTimeseriesAnalyticalStore 接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后，表格存储 会自动异步清理分析...
时序模型
更新分析存储的数据生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以使用 UpdateTimeseriesAnalyticalStore 接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后，表格存储 会自动异步清理分析...
管理Logstore
按需配置热存储数据保存时间，并选择后续 自动转换 为 低频存储 时，数据保存超出配置的保存时间后，将自动转入低频存储层。若配置低频存储时间后选择 自动删除，则数据保存在低频存储层超出配置的保存时间后将自动删除。按需配置热存储...
将MaxCompute数据同步到表格存储
步骤一：新增表格存储数据源 将表格存储添加为数据源，具体步骤如下：进入数据集成页面。以项目管理员身份登录 DataWorks控制台。在左侧导航栏，单击 工作空间列表 后，选择地域。在 工作空间列表 页面，在目标工作空间 操作 列选择 快速...
产品更新动态
创建数据集 探查数据集 管理数据集 数据卡片生成 数据卡片智能一键生成，提供多样化的可视化表现方式，帮助您快速获得数据分析灵感、保存数据见解。生成的卡片支持图表快速更换、聚合方式调整、预览编辑和一键保存，帮助您快速构建专属的...
修改名单抽奖数据
您还可以在组件 设置数据源 页面中，选择 数据源 类型为您自定义添加的动态数据源类型（如数据库、API等），使得数据接口获得的是整个抽奖池数据，即所有能参与抽奖的人员名单。通过配置动态数据源内容，可动态获取抽奖名单数据，实现公平...
修改名单抽奖数据
您还可以在组件 设置数据源 页面中，选择 数据源 类型为您自定义添加的动态数据源类型（如数据库、API等），使得数据接口获得的是整个抽奖池数据，即所有能参与抽奖的人员名单。通过配置动态数据源内容，可动态获取抽奖名单数据，实现公平...
物联网存储介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
存储类型概述
解冻后访问会产生归档存储数据取回容量费用，直接访问会产生归档直读数据取回容量费用。归档存储适用于数据长期保存的业务场景，例如档案数据、医疗影像、科学资料、影视素材等。提供归档存储-本地冗余（LRS）和归档存储-同城冗余（ZRS）两...
什么是数据库备份DBS
数据量：在数据库备份场景下，有4个概念，分别是数据库磁盘空间、数据文件空间、备份数据量、存储数据量。具体概念请参见 数据量。内置存储与用户OSS：DBS提供数据库的备份恢复能力，备份数据保存在云存储上，云存储支持内置存储、用户OSS...
表设计规范
分区表的分区列级数不能超过6级，即底层存储数据的目录层数不能超过6层。因此应为分区表设置合适的生命周期。当部分数据的生命周期与其它数据不同时，您可以通过细粒度分区实现对部分数据的管理。分区字段定义依据 按优先级高低排序如下：...
概述
同一份数据以不同的格式保存，数据所占用的存储空间不同，使用DLA扫描数据时所花费的时间和费用也不同。通常情况下，同一份数据以ORC格式和PARQUET格式存储时，其数据扫描性能要优于普通文本CSV格式。因此，您可以将文本类型的数据转换为...
JindoFS介绍和使用
JindoFS块存储模式（Block）JindoFS存储模式（Block），不仅提供缓存加速能力，还可以组织、存储数据和管理文件元数据，类似Apache Hadoop HDFS。在此模式下JindoFS是个独立的存储系统，只是文件块数据存储在OSS上。Cache模式和Block模式...
方案设计
数据存储方案 表格存储设计了两张表分别存储数据集的meta和data：meta表示这个数据集的元数据，例如GridDataSetId、各维度长度、自定义属性等。data表示这个数据集里实际的网格数据。data相比meta在数据大小上要大很多。将数据集的meta和...
开启和使用冷数据分层存储
如果没有存储数据，开启该功能本身不会产生费用。暂不支持的DDL：暂不支持在OSS表空间中创建数据库：CREATE DATABASE dbname TABLESPACE OSS;暂不支持将已有数据库一次性转入OSS表空间：ALTER DATABASE dbname SET TABLESPACE OSS;说明 该...
开启和使用冷数据分层存储
如果没有存储数据，开启该功能本身不会产生费用。暂不支持的DDL：暂不支持在OSS表空间中创建数据库：CREATE DATABASE dbname TABLESPACE OSS;暂不支持将已有数据库一次性转入OSS表空间：ALTER DATABASE dbname SET TABLESPACE OSS;说明 该...
创建逻辑模型：维度表
存储策略 维度表基于什么策略（即存储数据的时间周期及数据量范围）存储数据。维度 维度表关联的维度，用于配置维度表分析数据的视角。说明 创建维度，详情请参见 创建概念模型：维度。表名规则 通过已配置的检查器规范维度表的命名规则。...
应用场景
数据分析：分析设备使用数据，及时发现异常并实现控制，需要支持对接计算引擎进行海量数据查询分析。工业物联网 在工业领域通过将物联网、感知控制、信息处理、网络通信等技术应用到工业生产过程的各个环节来提高企业生产效率、改进产品...
Oracle逻辑备份
安全加密 传输数据HTTPS加密，存储数据AES256加密。创建备份计划 具体操作，请参见 购买备份计划。说明 购买时，选择数据库类型为 Oracle，并选择备份方式为 逻辑备份。配置备份计划 登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在...
- 产品推荐
- 这些文档可能帮助您