应用场景
车联网场景中数据存储与分析的核心需求如下：数据高并发写入：面向众多车辆，需要支持百万级节点实时写入。数据存储：长期保存车辆轨迹信息以及车辆状态信息，需要单表规模极大以及高性价比存储。实时地理围栏：实时数据的地理围栏报警，...
对象存储优化
一般情况下，对象存储中的数据无论大小都必须作为一个整体进行访问。OSS SelectObject允许您使用简单的SQL语句检索对象，这意味着您的应用程序无需使用计算资源来扫描和过滤对象中的数据。使用OSS SelectObject可以将查询性能提升4倍，并将...
快速入门
数据湖构建（Data Lake Formation，DLF）产品主要使用流程如下。...创建数据源 创建数据湖的入湖来源，当前支持阿里云RDS MySQL...创建数据湖的元数据 添加元数据库 创建元数据表，指定表中数据的存储位置和存储格式 详细操作请参见 元数据管理。
设置数据冷热存储策略
冷热分离可以有效提高热数据的查询效率，减少冷数据的存储成本。本文介绍通过开源HDFS客户端设置冷热数据存储策略的方法。前提条件 已开通冷存储功能。具体操作，请参见 开通冷存储。操作步骤 通过开源HDFS客户端访问文件引擎，具体操作，...
PolarDB Serverless实现了哪些突破
并且因为内存和存储中的状态与数据库节点解耦，使用Serverless架构的 PolarDB 节点的崩溃恢复时间比使用单机架构的 PolarDB 内核快5.3倍。在 PolarDB Serverless架构下，我们对数据库性能进行了测试，最终的测试结果也远超预期。这些结果也...
telnet 访问操作指南
0 表示存储的数据永远不过时（但可被服务器算法：LRU 等替换）。非 0（unix 时间），过期后服务器可以保证用户得不到该数据（以服务器时间为标准）。需要存储的字节数（不包含最后的“\r”），若您希望存储空数据时，可以为 0。最后客户端...
Location托管
Location托管可以将数据湖OSS中的存储数据托管到数据湖构建（DLF）中进行管理和分析，在托管Location后将可以为你提供 存储概览，生命周期管理介绍，数据表-数据概况（如数据访问频次，数据最后更新时间等），以及存储权限（规划中）等数据...
应用场景
云数据库Redis版 适用于多种场景，尤其是请求并发量大场景中的数据存储。游戏行业应用 游戏行业通常将云数据库Redis版作为重要的部署架构组件，用于缓存或数据持久化。场景一：Redis作为缓存加速应用访问 Redis作为缓存层，加速应用访问。...
元数据管理
选择元数据表中数据存储的位置。选择元数据表的存储格式。指定元数据表的分隔符。手动定义元数据表的列，指定列编号、列名称、是否是分区列等信息。删除元数据库 1.进入元数据管理-元数据库页面。2.找到想要删除的元数据库，点击右侧的删除...
授权与回收数据源权限
同步读：通过同步组件对来源存储中的数据进行读取的权限。同步写：通过同步组件对目标存储进行写入的权限。执行：仅支持用于执行数据库SQL任务。该权限不替代同步读、同步写权限。授权原因 填写授予数据源权限的原因。不超过128字符。单击 ...
授权与回收数据源权限
同步读：通过同步组件对来源存储中的数据进行读取的权限。同步写：通过同步组件对目标存储进行写入的权限。执行：仅支持用于执行数据库SQL任务。该权限不替代同步读、同步写权限。授权原因 填写授予数据源权限的原因。不超过128字符。单击 ...
设置生命周期策略
费用说明 低频存储类型费用说明 低频存储容量费用：根据您转储至低频存储中的文件大小、时长收取一定的低频介质存储容量费用。低频存储读/写流量费用：根据您每小时访问低频存储内数据的读写流量累积值计费（不区分内网和公网）。归档存储...
文件系统存储类型
存储类型对比 对比指标 标准存储 低频存储 归档存储 平均4K读延迟 容量型：10 ms 高级型：2 ms 性能型：2 ms 首次读数据时，延迟25~50 ms，之后与访问标准存储中的数据一致。首次读数据时，延迟25~50 ms，之后与访问标准存储中的数据一致。...
更新分析存储的数据生命周期
当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后，表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
更新分析存储的数据生命周期
当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后，表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
平台安全诊断
平台安全诊断目前支持的安全域说明如下：数据计算与存储安全性诊断 用于对数据权限的控制、数据存储加密、数据存储备份等功能进行安全性诊断，及时识别潜在的安全隐患，提升在数据存储与访问过程中的安全性。数据传输安全性诊断 用于对数据...
数据备份概述
表格存储 控制台集成了 云备份 的 Tablestore 备份功能，提供了 Tablestore 数据备份、数据恢复、报警设置等功能，支持对 表格存储 中的数据进行备份与恢复。数据备份可用于容灾备份、误删或恶意篡改恢复、数据版本控制、法律合规要求、...
冷数据分层存储计费规则
您可以 购买存储包，来抵扣OSS中冷数据的存储容量，以减少存储冷数据的费用。存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买...
冷数据分层存储计费规则
您可以 购买存储包，来抵扣OSS中冷数据的存储容量，以减少存储冷数据的费用。存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买...
冷数据分层存储计费规则
您可以 购买存储包，来抵扣OSS中冷数据的存储容量，以减少存储冷数据的费用。存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买...
归档为CSV或ORC格式
将OSS数据导回至PolarStore 导回在OSS上归档的普通表中的数据 如果您有低频修改归档到OSS上冷数据的需求，您可以通过 ALTER ENGINE 语法将OSS数据导回至PolarStore进行修改。数据导回至PolarStore后，会同步删除OSS上的冷数据。修改完数据...
冷数据存储计费规则（可选）
您可以 购买存储包，来抵扣OSS中冷数据的存储容量，以减少存储冷数据的费用。存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买...
引擎简介
典型场景 大数据场景：海量数据存储与分析 广告场景：海量广告营销数据的实时存储 金融&零售：海量订单记录与风控数据的实时存储 车联网：车辆轨迹与状况数据的高效存储处理 互联网社交：高效、稳定的社交Feed流信息存储 访问方式 通过...
概述
您可以根据业务需求使用DataX、DTS或者canal工具将MySQL数据库中的数据同步迁移到表格存储（Tablestore）中。使用场景 数据架构变化 随着业务的变化，如果现有业务对数据库并发读写需求、扩展性和可用性需求较高，或需要复杂的检索，原有...
ActionTrail日志清洗
自动发现：DLA自动设置ActionTrail投递到OSS中的日志数据的存储目录。Schema名称 设置Schema的名称，即OSS在DLA中的映射数据库名称。清洗后数据保存位置 DLA清洗OSS数据后，将结果数据回写入OSS即数据清洗后的存储位置。DLA会默认指定存储...
冷存储介绍
冷热分离功能可以自动将表中的热数据存储至读写速度更快的热存储中，将不常访问的历史数据存储至容量型云存储中，从而降低存储成本。如果您在业务上有冷热分离的需求，请参见 冷热分离介绍。开通容量型云存储 如何开通容量型云存储，请参见...
名词解释
INDEX 〇 ✖️ Index（索引）是一种数据结构，用于加快数据库中数据的检索速度，提高查询性能。索引可以看作是表中一个或多个列的快速访问入口，可以根据某个特定的列值快速定位到想要访问的数据。宽表引擎支持多种索引，例如二级索引、...
SQL查询介绍
您还可以通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink、PrestoDB等计算引擎实现表中数据的计算与分析。具体操作，请参见 计算与分析。如果要以图表等形式可视化展示数据，您可以通过对接Grafana实现。更多信息，请参见 对接...
方案背景
在电商运营中数据的分析和可视化是最重要的部分之一，而通过电商大屏可以实现数据分析和可视化的完美结合。电商大屏中包含全量订单和实时订单的聚合结果，全量订单的聚合结果展示全景的综合数据视图，实时订单的聚合结果展示实时的运营指标...
物联网设备数据上云存储
本文介绍如何使用阿里云物联网平台和 TSDB 进行数据打通，实现物联网设备系统的开发和管理、数据采集、数据上报、数据存储和分析的一体化方案，构建智能物联网平台。架构参考“物联网平台+TSDB”方案的实现架构如下：物联网设备通过 IoT ...
数据表-数据概况
为您介绍数据表详情中“数据概况”的主要功能。功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、...
什么是文件存储 HDFS 版
数据迁移 您可以将存储介质上的数据直接迁移至 文件存储 HDFS 版，也可以将 文件存储 HDFS 版 中的数据迁移至其他存储介质。文件存储 HDFS 版和对象存储OSS双向数据迁移 文件存储 HDFS 版和数据库MySQL双向数据迁移 迁移开源HDFS的数据到...
主备方案介绍
云数据库HBase存储海量大数据，在业务场景中往往承载着重要数据，为保障数据的高可用性和安全性，云数据库HBase提供了主备双活和主备容灾特性。本文介绍云数据库HBase的主备双活和主备容灾特性功能。使用场景 主备双活：大数据量随机读响应...
通用型NAS计费
转换过程中的文件数据在标准存储与低频存储或归档存储中都会存在一个副本，造成计费量的上升。转换完成后，计费会恢复正常。注释②：读写数据流量说明 文件系统中的数据符合低频存储规则或归档存储规则后将自动转储至低频存储或归档存储，...
访问列存数据
列存提供丰富的索引能力和数据分布特征，可以有效加速计算过程中的数据定位与排布，通过SQL即可完成海量主键数据的增删改查。高吞吐 列存引擎吞吐能力支持水平扩展，提供每分钟TB级数据的读写能力。适用于车联网数据快速导入、模型训练数据...
数据扫描和识别
首次扫描：完成授权后，DSC 会对授权的OSS存储桶（Bucket）中的文件进行全量扫描。增量扫描：如果OSS文件有新增或修改时，DSC 会扫描该新增或修改的文件。是否支持对已扫描过的OSS文件重新扫描？如果文件没有被修改，DSC 不会对已扫描过的...
概述
高性能版（推荐使用）：基于基础版Spark全密态引擎提供的数据加密能力，高性能版的Spark全密态计算引擎结合Gluten和Velox，提供了向量化计算的能力，在保证数据传输与存储过程安全的同时，提升了数据处理效率。基础版和高性能版Spark全密态...
数据归档
通过数据归档功能，可以将对象存储（OSS）用作归档冷数据的存储介质，从而显著降低存储成本。功能简介 RDS PostgreSQL实例利用表空间和外部文件系统来实现对OSS的访问，允许用户通过DDL完成数据在ESSD和OSS之间的转换。启用数据归档功能的...
CREATE DATABASE
数据库中分表的存储位置与该库的存储位置保持一致，以实现分表上的数据隔离。数据库创建成功后，您可以通过以下语句查看数据库的存储位置信息。SHOW CREATE DATABASE db1 MODE=drds;返回结果如下所示：+-+-+|DATABASE|CREATE DATABASE|+-+-...
存储类型概述
对象存储OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。说明 各存储类型的定价，请参见 OSS产品定价。各存储类型的计费方式，请参见 存储费用。标准存储（Standard）提供高可靠、高...
- 产品推荐
- 这些文档可能帮助您