新功能发布记录
无地域属性Bucket中的数据会被存储于中国内地的某个地域，但您不感知具体地域信息，只能通过该Bucket的外网Endpoint来访问。2023-04-10 不适用 无地域属性Bucket 2023年03月 功能名称 功能概述 发布时间 支持地域 相关文档 华北2（北京）...
数据安全
您可以对创建的实例保存镜像，以保存对应的工程环境以及配置，并在需要是随时部署镜像，避免您珍贵的环境数据丢失。而存储在对应介质中的数据/数据集，可以通过对应存储产品进行备份以及恢复。数据存储介质 可用性说明 对象存储 OSS 数据...
数据集成服务
迁移方案 说明 同步表格存储数据到MaxCompute 您可以使用MaxCompute备份表格存储数据或者迁移表格存储数据到MaxCompute中使用。迁移过程中会使用到表格存储的Reader脚本配置和MaxCompute的Writer脚本配置。具体数据源配置如下：源数据源：...
回收数据库
如果已分配桌面的员工从桌面集包含人员列表中移除，系统会将云桌面的数据暂时存放在回收数据库中，默认保留天数为您在创建桌面集时设置的离职后数据保留天数。您可将该桌面的数据转交给其他桌面或者延长销毁时间，以保证数据的顺利交接。...
存储类型概述
解冻后访问会产生归档存储数据取回容量费用，直接访问会产生归档直读数据取回容量费用。归档存储适用于数据长期保存的业务场景，例如档案数据、医疗影像、科学资料、影视素材等。提供归档存储-本地冗余（LRS）和归档存储-同城冗余（ZRS）两...
生命周期管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您想将存储在低频存储或归档存储中的数据取回通用型NAS标准存储，请参见 创建数据取回...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
数据模型
数据时效（TTL）数据时效是指数据保存有效期，超过有效期的数据会被自动清理，默认数据有效期为永久保存。场景示例 某风力电厂包含一系列的智能风力发电机设备，创建名为 Wind-generators 的table来存储所有设备的信息，设备由 ID、型号、...
产品架构
在查询操作中，通常来说热数据会直接从缓存中获取，冷数据需要从后端对象存储中读取并缓存至本地，以便加快后序访问速度。通过内存、本地磁盘及远程存储的联合，StarRocks构建了多层数据访问体系，您可以自定义数据冷热规则以优化业务需求...
解决MySQL实例空间满自动锁定的问题
RDS MySQL实例由于慢SQL、插入数据多等原因导致实例空间满，为避免数据丢失，RDS会对实例进行自动锁定，锁定之后，将无法进行写入操作。您可以参照本文清理数据文件、临时文件、Binlog文件、undo文件和general_log文件，解决存储空间问题。...
多元索引介绍
使用多元索引时，索引数据量占用的存储空间为多元索引存储，通过多元索引查询与分析数据会消耗计算资源。按量模式：多元索引计费项包括读吞吐量、数据存储量和外网下行流量，其中读吞吐量包括预留读吞吐量和按量读吞吐量。更多信息，请参见...
OSS投递（新版）
建议预留一段缓冲时间，否则可能会导致数据丢失。例如Logstore的数据保存时间为30天，则延迟投递的时间最好不要超过25天。管理投递 限制项 说明 暂停投递任务 投递任务会记录上次投递的日志Cursor，恢复运行时从记录的Cursor开始继续投递。...
基于Delta Table构建近实时增全量一体化链路实践
解决方案 MaxCompute存储引擎配套支持了合理高效的表数据服务，对存储数据进行自动治理和优化，降低存储和计算成本，提升分析处理性能。如上图所示，Delta Table的表数据服务主要分成 Auto Sort、Auto Merge、Auto Partial Compact、Auto ...
稳定性说明与使用限制
建议预留一段缓冲时间，否则可能会导致数据丢失。例如Logstore的数据保存时间为30天，则延迟投递的时间最好不要超过25天。管理投递 限制项 说明 暂停投递任务 投递任务会记录上次投递的日志Cursor，恢复运行时从记录的Cursor开始继续投递。...
管理EventStore
按需配置热存储数据保存时间，并选择后续 自动转换 为 低频存储 时，数据保存超出配置的保存时间后，将自动转入低频存储层。若配置低频存储时间后选择 自动删除，则数据保存在低频存储层超出配置的保存时间后将自动删除。按需配置热存储...
方案背景
因此车联网场景下车辆轨迹数据存储与分析的需求如下：数据存储：车辆轨迹数据会随着时间动态变化，要长期保存车辆轨迹信息，需要单表规模极大以及高性价比存储。数据写入：面向众多车辆，需要支持百万级节点实时写入。数据检索：根据多个...
时序模型计量计费
使用时序模型时，时间线数据和时间线元数据会产生数据存储量。同时，对时间线数据和时间线元数据的读写操作会消耗读写吞吐量。本文介绍了时序模型的计费项以及计费示例。注意事项 时序模型中的分析存储功能将从2023年12月20日正式开始收费...
多表归并任务中执行Online DDL操作导致目标库数据丢失
通过DTS进行多表归并任务时，若在源库执行Online DDL操作，则会导致目标库数据丢失。本文介绍如何避免这种情况的发生。问题描述 在通过DTS进行多表归并任务时，若在源库进行Online DDL操作，对源库的表结构等进行了调整修改，则同步到目标...
存储说明
部分缓存或临时测试场景，或者基于3副本存储TB级数据时会使用本地盘，但是该方案会因为磁盘寿命增加额外的运维成本，因此存储数据建议您使用OSS或者 开通并授权访问OSS-HDFS服务。您可以参见 在EMR Hive或Spark中访问OSS-HDFS，了解Hive或...
概述
数据上传后会保存到实时表，后续会在几分钟内通过定时任务的形式同步到MaxCompute离线表，供离线计算使用。LogHub 日志服务SLS提供数据投递功能，将LogHub实时采集的日志投递至MaxCompute。详情请参见 通过LogHub迁移日志数据至MaxCompute...
产品优势
本文介绍了 表格存储 的优势，包括多模型数据存储、多元化数据索引、多计算生态接入、访问安全性等。多模型数据存储 表格存储 支持宽表（WideColumn）模型、时序（TimeSeries）模型、消息（Timeline）等多种数据存储模型，能实现多种类型...
生命周期管理概述
访问低频存储或归档存储中的冷数据会产生读写流量费用。更多信息，请参见 通用型NAS计费。当需要频繁访问低频存储或归档存储中的数据时，建议用户创建数据取回任务，将指定文件或目录中的数据取回至通用型NAS标准存储（图示中③）。执行...
常见问题
同时，结合IMM（智能媒体处理产品）可以实现存储+数据智能处理的解决方案。基因行业：基因测序、交付、诊断等基因上下游业务的数据存储需求，结合云上强大的计算能力，可以实现大数据的存储+计算+分析方案。OSS适合存储什么？OSS适合存储...
数据表设计
其中数据模型定义（keys_type）中指定的列为Key列，其他列为Value列，底层存储数据时会按照Key列排序。对于用户写入的数据，SelectDB会根据不同数据模型，对于Key列相同的行（Row）进行不同的处理：Aggregate模型：Key列相同时多行数据会...
常见问题
在业务使用实例过程中，产生的数据会占用存储资源且存储大小会发生弹性变化。存储资源默认按量付费，即您 先使用再按实际的使用量付费，因此会产生后付费的费用。此外，包年包月实例中也可以创建按量付费集群。因此，按量付费的存储资源和...
时序分析存储概述
更新分析存储数据生命周期 修改分析存储数据生命周期TTL，优化存储费用。SQL查询分析 分析存储支持通过SQL进行查询，SQL中支持通过使用不同条件进行聚合分析操作。核心优势 海量数据的实时分析 对于时序的热数据采用 表格存储 行列混合的宽...
管理Logstore
按需配置热存储数据保存时间，并选择后续 自动转换 为 低频存储 时，数据保存超出配置的保存时间后，将自动转入低频存储层。若配置低频存储时间后选择 自动删除，则数据保存在低频存储层超出配置的保存时间后将自动删除。按需配置热存储...
将MaxCompute数据同步到表格存储
步骤一：新增表格存储数据源 将表格存储添加为数据源，具体步骤如下：进入数据集成页面。以项目管理员身份登录 DataWorks控制台。在左侧导航栏，单击 工作空间列表 后，选择地域。在 工作空间列表 页面，在目标工作空间 操作 列选择 快速...
表数据格式
数据存储分桶 为了进一步优化读写效率，Delta Table支持按照BucketIndex对数据进行切分存储，BucketIndex数据列默认复用PK列，bucket数量可通过配置表属性 write.bucket.num 指定，因此对同一张表或分区的数据，写入数据会按PK列值对数据...
常见问题
表格存储 具有以下优势：多模型数据存储 表格存储 支持宽表（WideColumn）模型、时序（TimeSeries）模型、消息（Timeline）等多种数据存储模型，能实现多种类型数据的一体化存储。模型 描述 宽表模型 类Bigtable/HBase模型，可应用于元数据...
表格存储
表格存储（Tablestore）是阿里云自研的结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。表格存储提供兼容HBase的WideColumn模型、消息模型Timeline以及时空模型Timestream，实现PB级存储、千万TPS以及毫秒级延迟的服务...
计费项概览
数据库自治服务DAS提供的SQL洞察功能提供一定的免费空间额度，超过该额度的存储空间会产生费用。SQL洞察产生的费用与审计日志的存储容量和保存时长有关。按量付费 Serverless 说明 SQL洞察不支持包年包月计费。若您购买集群时选择 包年包月...
常见问题
如果一行数据未写入时间，那么这行数据会被保留在热存储区。Q：对于按时间戳冷热分离，冷数据更新后还是冷数据吗？A：不是。由于更新后的数据重新记录了时间戳，因此冷数据更新后变为热数据。Q：我只想查询热数据，为什么还返回了冷数据？A...
现代IM系统中的消息系统—模型
支撑海量数据存储：对于消息存储库来说，如果需要消息永久存储，则随着时间的积累，数据规模会越来越大，需要存储库能应对长时间积累的海量消息数据存储，需要能达到PB级容量。低存储成本：消息数据的冷热区分是很明显的，大部分查询都会...
欠费说明
本文主要说明您的数据库存储DBFS会在什么情况下产生欠费，以及欠费之后的注意事项。...注意信息 如果您的DBFS服务产生欠费，请知悉：当DBFS...欠费超过15天，将视为您主动放弃DBFS服务，存储空间将被回收，存储空间内的数据会被清理且不可恢复。
逻辑复制槽故障转移（Logical Replication Slot ...
此时丢失的数据，除了HA本身造成的数据丢失外，还可能会丢失HA后新主库上新增的部分数据。为避免上述数据丢失的情况，可以将 polar_priority_replication_force_wait 参数设置为 on。备库断开期间，主库会一直等待备库重新连接或者重搭完成...
逻辑复制槽故障转移（Logical Replication Slot ...
此时丢失的数据，除了HA本身造成的数据丢失外，还可能会丢失HA后新主库上新增的部分数据。为避免上述数据丢失的情况，可以将 polar_priority_replication_force_wait 参数设置为 on。备库断开期间，主库会一直等待备库重新连接或者重搭完成...
逻辑复制槽故障转移（Logical Replication Slot ...
此时丢失的数据，除了HA本身造成的数据丢失外，还可能会丢失HA后新主库上新增的部分数据。为避免上述数据丢失的情况，可以将 polar_priority_replication_force_wait 参数设置为 on。备库断开期间，主库会一直等待备库重新连接或者重搭完成...
计费常见问题
删除存储数据后，为什么存储容量不变，账单没有减少？账单为上一小时的账单，NAS控制台上显示的文件系统使用量是上一小时存储空间的最大值，控制台显示和实际存在延迟，请您耐心等待更新。使用文件系统上传下载数据时，是否计费？本地到线...
按自定义时间列冷热分离
数据写入 冷热分离的表与普通表的数据写入方式完全一致，数据会先存储在热存储（标准型/性能型）中。随着时间的推移，如果一行数据满足 当前时间-时间列值>CHS设置的值 条件，则会在执行 compaction 时被归档到冷存储中。数据查询 由于冷热...
- 产品推荐
- 这些文档可能帮助您