资源预估选型
使用表格存储中的数据读写，索引的写入、查询、分析，通道服务等操作均会消耗VCU的计算资源。通过QPS近似评估VCU的建议请参见下表。由于计算资源的消耗涉及较多因素，请结合实际业务评估VCU。重要 读写行的大小，请求的Cache命中率、Filter...
迁移工具
OTSWriter 用于向表格存储中写入数据。通道服务 使用通道服务可以轻松构建高效和弹性的数据复制解决方案。数据传输服务DTS 数据传输服务DTS可以在两个数据源之间同步正在进行的数据变更。数据同步通常用于OLTP到OLAP的数据传输。数据同步...
通过SDK使用分析存储
} } 更新分析存储的生命周期 当需要清理分析存储中的历史数据时，您可以更新分析存储的数据生命周期TTL。更新分析存储的TTL后，表格存储会自动异步删除分析存储中超过TTL的数据。以下示例用于更新test_timeseries_table时序表下名为test_...
SQL查询
通过SQL查询功能，您可以对表格存储中数据进行复杂的查询和高效的分析。SQL查询在车联网场景中作为不同类型数据的统一查询接口。说明 关于SQL查询的更多信息，请参见 SQL查询。概述 SQL查询兼容MySQL的查询语法，同时提供基础的SQL DDL建表...
监控与日志
关于如何在表格存储中启用日志服务，请参见 开通审计日志。审计日志可用于安全审计、合规性审计、故障排查等场景。表格存储的日志数据存储的最大保存时长默认为7天，您可以根据实际需要自行修改。相关操作，请参见 修改Logstore配置。...
时序分析存储概述
写入时序表的数据会在分析存储中同时存储。更新分析存储数据生命周期 修改分析存储数据生命周期TTL，优化存储费用。SQL查询分析 分析存储支持通过SQL进行查询，SQL中支持通过使用不同条件进行聚合分析操作。核心优势 海量数据的实时分析 ...
方案背景
实时计算Flink通过与表格存储对接，进行数据的实时分析，然后将计算结果写回到表格存储中存储。实时计算Flink主要用于对设备元数据进行流计算作业或者对接Kafka等消息队列订阅消息。方案优势 数据自动分区和负载均衡。采用存储计算分离架构...
Kafka数据接入
自动识别字段类型：将JSON消息体中的String和Boolean字段分别转化为 表格存储 中对应的String和Boolean字段。JSON消息体中的Integer和Float数据类型，将被转化为 表格存储 中的Double类型。全部作为String写入 主键模式 指定主键模式。支持...
实例
按量读吞吐量或按量写吞吐量 容量型存储 中 高 中 实例命名规范 实例的名称在一个地域内必须唯一，不同的地域内实例名称可以相同。具体命名规范如下。必须由英文字母、数字或短划线（-）组成。首字符必须为英文字母。末尾字符不能为短划线...
使用函数计算清洗数据
同时，您也可以实时访问表格存储中的原始数据和结果数据。样例场景 假设写入表格存储的为日志数据，且日志数据包括如下三个字段。为了便于日志查询，您需要将level>1的日志写入到表格存储的另一张数据表result中。字段名称 类型 说明 id ...
应用场景
车辆数据通过MQTT协议接入消息队列Kafka后，数据一部分接入到实时计算Flink进行清洗与地理围栏计算检查，一部分直接写入表格存储中存储车辆相关信息。同时，支持通过SQL协议接入报表进行数据统计以及接入MaxCompute中进行海量历史数据分析...
计量计费项
使用表格存储中的数据读写，索引的写入、查询、分析，通道服务等操作均会消耗VCU的计算资源。重要 SQL本身不会有额外的费用，但是使用SQL查询数据过程中涉及到的表扫描、索引查询等操作会消耗VCU的计算资源。数据存储量 说明 当数据量较大...
使用教程
本文主要为您介绍如何使用Hive或者HadoopMR访问表格存储中的表。数据准备 在表格存储中准备一张数据表pet，name是唯一的一列主键，数据示例请参见下表。说明 表中空白部分无需写入，因为表格存储是schema-free的存储结构，没有值也无需写入...
时序模型介绍
如果要以更低成本备份表格存储中的时序数据或者以文件形式导出时序数据到本地，您可以通过DataWorks数据集成服务将表格存储中的时序数据导出到OSS后进行存储或者下载。更多信息，请参见 将表格存储数据同步到OSS。如果要可视化展示时序数据...
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
使用Go语言驱动
本文介绍如何使用Go语言驱动连接表格存储。注意事项 目前支持使用SQL查询功能的地域有华东1（杭州）、华东2（上海）、...表格存储中字段数据类型 Go语言中字段数据类型 Integer int64 Binary[]byte String string Double float64 Boolean bool
SQL查询介绍
您可以通过SQL查询功能对表格存储中的数据进行复杂的查询和高效的分析。背景信息 为了满足用户业务平滑迁移到表格存储以及使用SQL方式访问表格存储的需求，表格存储在传统的NoSQL结构化存储之上，提供云原生的SQL引擎能力。SQL查询兼容...
物联网存储介绍
使用SQL查询，您可以对表格存储中数据进行复杂的查询和高效的分析。计算生态与可视化对接 支持与Spark、MaxCompute等计算组件无缝对接。支持对接开源的可视化和分析平台Grafana，用于以多种形式可视化展示数据分析处理结果。核心优势 物...
SQL查询计量计费
使用SQL查询过程中，可能消耗读吞吐量的操作如下：数据表：数据扫描与查询 二级索引：数据扫描与查询 多元索引：数据查询与计算 时序表：数据扫描与查询 计费示例 假设表格存储中有一个订单表sample_table，主键为user_id（String类型），...
使用函数计算
步骤一：为数据表开启Stream功能 使用触发器功能需要先在表格存储控制台开启数据表的Stream功能，才能在函数计算中处理写入表格存储中的增量数据。登录 表格存储控制台。在页面上方，选择地域。在 概览 页面，单击实例名称或在实例 操作 列...
监控与日志
关于如何在文件存储中启用日志服务，请参见 开通日志分析功能。日志数据保存时间默认为30天，您可以根据实际需要自行修改。相关操作，请参见 修改Logstore配置。查询和分析日志 对NAS文件系统实例中的资源进行操作时，系统会自动采集审计...
功能特性
管理文件系统中某个目录所能包含的文件数量或者文件大小或者某个用户所能使用的资源 目录配额 生命周期管理 阿里云文件存储通用型 NAS 推出的生命周期管理功能，可以帮助您将低频访问的冷文件数据从标准存储转换到低频存储中，并采用低频...
哪些是常用的资源包
存储包 根据文件的不同存储类型，OSS对存储在Bucket中的文件收取对应的存储容量费用，您可以购买不同的存储包用于抵扣对应的存储容量费用。关于OSS支持的存储包类型及抵扣说明，请参见 存储费用。下行流量包 当您通过公网访问或者下载...
Tablestore HBase Client 支持的功能
表格存储中数据存储和管理的基本单位为，表格存储会自动地根据数据分区的数据大小、访问情况进行分裂或者合并，所以不支持 HBase 中 Region 管理相关的方法。Snapshots 表格存储目前不支持 Snapshots，所以暂时不支持 Snapshots 相关的方法...
数据存储量
如下图所示，表格存储中实例的数据总量是所有表的数据量之和，表的数据量是表中所有行的数据量之和，所有行的数据量是所有单行数据的主键列和属性列数据量之和。说明 关于最新的单价信息，请参见 表格存储价格详情页。下面举例说明如何计算...
概述
使用Spark计算引擎访问表格存储时，您可以通过E-MapReduce SQL或者DataFrame编程方式对表格存储中数据进行复杂的计算和高效的分析。应用场景 功能特性 对于批计算，除了基础功能外，Tablestore On Spark提供了如下核心优化功能：索引选择：...
数据存储量如何计量
如下图所示，表格存储中实例的数据总量是所有表的数据量之和，表的数据量是表中所有行的数据量之和，所有行的数据量是所有单行数据的主键列和属性列数据量之和。说明 关于最新的单价信息，请参见 表格存储价格详情页。下面举例说明如何计算...
数据类型
precision：表示最多可以表示多少位的数字。取值范围：1。scale：表示小数部分的位数。取值范围：0。如果不指定以上两个参数，则默认为 decimal(38,18)。说明 同一个表中不能同时存在新老Decimal数据类型。执行 setproject odps.sql.hive....
数据展示
表格存储对接Grafana后，您可以通过Grafana可视化展示表格存储中的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。已为表格存储的数据表或者...
使用SDK
数据湖投递不支持同步删除操作，表格存储中的删除操作在数据投递时会被忽略，已投递到OSS中的数据不会被删除。新建数据投递任务时存在最多1分钟的初始化时间。数据同步存在延迟，写入速率稳定时，延迟在3分钟内。数据同步的P99延迟在10分钟...
导出全量数据到OSS
如果要以更低成本备份 表格存储 中的全量数据或者以文件形式导出 表格存储 数据到本地，您可以通过DataWorks数据集成服务将 表格存储 中的全量数据导出到OSS。全量数据导出到OSS后，您可以自由下载文件到本地。注意事项 此功能适用于 表格...
对接Grafana
表格存储对接Grafana后，您可以通过Grafana可视化展示表格存储中的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用宽表模型。已为表格存储的数据...
产品架构
本文介绍 表格存储 的系统架构和典型应用架构。系统架构 表格存储 的架构如下图所示。业务场景 表格存储 适用于元数据、消息数据、时空数据、大数据等场景下的系统搭建。数据接入 表格存储 提供SDK、DataWorks、IoT规则引擎等多种数据接入...
方案实现
示例如下：以下示例中读取一个NetCDF（气象格点数据常用的格式）文件，然后将其中的数据通过GridDataWriter录入到表格存储中。通过GridDataWriter每次写入时，只能写入一个二维平面，所以需要在外层进行3层循环，分别枚举变量维、时间维、...
敏感数据安全防护方案
本文介绍如何将阿里云对象存储OSS与阿里云 数据安全中心DSC（Data Security Center）结合，对敏感数据进行识别、分类、分级和保护。前提条件 已开通DSC 开通步骤请参见 快速实现数据分类分级。已开通OSS 开通步骤请参见 开通OSS服务。背景...
对象存储OSS
存储类型 OSS提供标准存储、低频访问存储、归档存储、冷归档存储和深度冷归档存储多种存储类型，全面覆盖从热到冷的各种数据存储场景。存储类型 说明 标准存储 提供高可靠、高可用、高性能的对象存储服务，能够支持频繁的数据访问。适用于...
通过Amazon S3协议挂载OSS
Rclone Rclone是一个命令行程序，用于管理云存储中的数据，支持在50多种云存储产品间同步数据。相对于s3fs和goofys，Rclone还支持将存储空间挂载到Windows系统上，作为本地磁盘共享数据。主要特点 Rclone支持文件同步、文件传输、加密、...
计费概述
文件存储CPFS支持创建不同类型的CPFS文件系统，不同类型的文件系统计费标准不同，本文介绍文件存储CPFS的计费情况。计费方式 文件存储CPFS支持以下计费方式。计费方式 说明 按量计费 默认付费方式。先使用，后付费，适用于业务用量经常有...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
时序模型介绍
通过时序模型，您可以对时间序列进行存储、查询和分析。时序模型提供了数据生命周期、时间线索引、冷热存储、数据压缩等功能以满足时序数据的低成本存储以及高性能查询分析的需求。时序模型在车联网场景中主要用于车辆轨迹数据的存储、查询...
- 产品推荐
- 这些文档可能帮助您