概述
适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。云原生大数据计算服务（MaxCompute）是一...
时序函数
本文介绍了时序分析存储中使用SELECT语句查询数据时支持的时序函数。函数 函数输出类型 描述 time_bin(_time,interval)Datetime 配合group by对时间进行分桶。例如 group by time_bin(_time,"10s")表示对时间每十秒分为一个桶，结合聚合...
将表格存储数据下载到本地文件
表格存储支持通过命令行工具或者DataX工具直接下载数据到本地文件。您也可以通过DataWorks工具将数据同步到OSS后再在OSS侧下载数据到本地文件。下载方式 请根据所需文件格式选择合适的方式进行数据下载，详细说明请参见下表。导出文件格式 ...
使用AccessKey访问表格存储
除了授权方式外，您还可以在 MaxCompute 中使用 AccessKey 访问表格存储的数据。准备工作 获取表格存储资源所属账号的 AccessKeyId 和 AccessKeySecret，如果该 AK 是资源所属账号的子账号，那么该子账号至少需要对表格存储相关的资源具有...
常见问题
数据存储到阿里云OSS以后，您可以选择标准存储（Standard）作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也可以选择成本更低、存储期限更长的低频访问存储（Infrequent Access）、归档存储（Archive）、冷归档存储（Cold ...
通过Go语言驱动使用SQL查询数据
物联网存储IoTstore是表格存储基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求推出的一站式物联网解决方案，可为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、...
SQL查询
通过SQL查询功能，您可以对表格存储中数据进行复杂的查询和高效的分析。SQL查询在车联网场景中作为不同类型数据的统一查询接口。说明 关于SQL查询的更多信息，请参见 SQL查询。概述 SQL查询兼容MySQL的查询语法，同时提供基础的SQL DDL建表...
使用教程
本文主要为您介绍如何使用Hive或者HadoopMR访问表格存储中的表。数据准备 在表格存储中准备一张数据表pet，name是唯一的一列主键，数据示例请参见下表。说明 表中空白部分无需写入，因为表格存储是schema-free的存储结构，没有值也无需写入...
监控与日志
监控与日志可有效保障您文件存储NAS资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力，持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务，例如云监控、配置审计等，帮助您实时监控云资源的使用情况和业务运行...
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
时序模型介绍
时序模型在车联网场景中主要用于车辆轨迹数据的存储、查询和分析。说明 关于时序模型的更多信息，请参见 时序模型。模型介绍 在表格存储的时序模型中，采用一张二维的时序表来存储时序数据。每行代表一个时间线在某个时间点的数据，该行的...
导出全量数据到OSS
如果要以更低成本备份 表格存储 中的全量数据或者以文件形式导出 表格存储 数据到本地，您可以通过DataWorks数据集成服务将 表格存储 中的全量数据导出到OSS。全量数据导出到OSS后，您可以自由下载文件到本地。注意事项 此功能适用于 表格...
数据存储量
如下图所示，表格存储中实例的数据总量是所有表的数据量之和，表的数据量是表中所有行的数据量之和，所有行的数据量是所有单行数据的主键列和属性列数据量之和。说明 关于最新的单价信息，请参见 表格存储价格详情页。下面举例说明如何计算...
计量计费项
使用表格存储中的数据读写，索引的写入、查询、分析以及通道服务等操作均会消耗VCU的计算资源。重要 SQL本身不会有额外的费用，但是使用SQL查询数据过程中涉及到的表扫描、索引查询等操作会消耗VCU的计算资源。创建实例时，您可以按照业务...
前言
背景信息 表格存储 提供了宽表模型、时序模型、消息模型等多种数据模型，SDK参考文档中主要介绍使用宽表模型和时序模型时的功能操作。请根据要使用的数据模型执行相应操作，具体功能的使用流程说明请参见下表。说明 关于消息模型的更多信息...
SQL查询计量计费
使用SQL查询过程中，可能消耗读吞吐量的操作如下：数据表：数据扫描与查询 二级索引：数据扫描与查询 多元索引：数据查询与计算 时序表：数据扫描与查询 计费示例 假设表格存储中有一个订单表sample_table，主键为user_id（String类型），...
将表格存储的增量数据转换为全量数据格式
通过DataWorks控制台，您可以在MaxCompute中使用merge_udf.jar包将 表格存储 的增量数据转换为全量数据格式。前提条件 已导出 表格存储 全量数据到MaxCompute，且已配置同步 表格存储 增量数据到MaxCompute。具体操作，请分别参见 全量导出...
概述
使用Spark计算引擎访问表格存储时，您可以通过E-MapReduce SQL或者DataFrame编程方式对表格存储中数据进行复杂的计算和高效的分析。应用场景 功能特性 对于批计算，除了基础功能外，Tablestore On Spark提供了如下核心优化功能：索引选择：...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
常见问题
相反，20 GB作为Object的历史版本在Bucket中存储了30天，而40 GB作为Object的最新版本在Bucket中存储了15天。按照存储费用的按量付费计算规则得知，则该Object当月的存储费用为：20 GB×0.12元/GB/月+40 GB×0.12元/GB/月÷30天×15天=4.8...
冷热分层存储
并不是所有OSS-HDFS中存储的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍然需要继续保存。针对以上问题，OSS-HDFS服务支持数据的冷热分层存储，对于经常需要访问的数据以标准类型进行存储，对于较少访问的数据以低频、...
方案实现
步骤二：实时流计算 实时流计算将实时统计一个窗口周期时间内的订单数和订单金额统计，并将聚合结果写回表格存储的数据表中。创建流计算的Sink外表order_stream_sink（对应表格存储中的OrderStreamSink表）。执行实时流计算SQL命令进行实时...
快速入门（PAI-DSW）
NAS与阿里云人工智能平台PAI（Platform For AI）无缝集成，您可以在PAI的服务上配置NAS作为数据集持久化存储部署、训练过程中的数据。本文介绍如何在控制台为PAI-DSW实例快速部署NAS。前提条件 已开通PAI并创建默认工作空间。具体操作，请...
方案实现
示例如下：以下示例中读取一个NetCDF（气象格点数据常用的格式）文件，然后将其中的数据通过GridDataWriter录入到表格存储中。通过GridDataWriter每次写入时，只能写入一个二维平面，所以需要在外层进行3层循环，分别枚举变量维、时间维、...
多元索引介绍
表格存储与数据库及搜索引擎等系统的主要区别如下：除了Join、事务和相关性外，表格存储能覆盖数据库和搜索系统中的其他功能，同时具备数据库的数据高可靠性和搜索系统的高级查询能力，可以替换常见的 数据库+搜索系统组合架构 方式。...
后续指引
当您完成了创建存储空间（Bucket）、上传和下载文件（Object）等基本操作后，您可以结合自身的业务场景选用OSS提供的一系列常用的高阶功能。下表汇总了OSS的常用高阶功能：功能列表 说明 开启请求者付费模式 请求者付费模式是指由请求者...
转换存储类型
OSS支持标准、低频访问、归档、冷归档、深度冷归档多种存储类型，您可以通过生命周期规则或者CopyObject的方式随时转换文件（Object）的存储类型。警告 对开通了OSS-HDFS服务的Bucket，建议不要修改OSS-HDFS的数据存储目录.dlsdata/下任意...
如何关闭OSS服务或停止计费？
如果您长时间（超过30天）未使用OSS中存储的Object，但是仍然希望保留Object，建议您通过生命周期规则将Object从标准存储类型转换为低频访问、归档存储、冷归档存储或者深度冷归档存储类型，可以节省约50%到80%的费用。通过生命周期转换...
日志管理
下载日志 在浏览器中，输入 https://<块网关IP地址>访问本地块网关控制台。输入用户名和密码，单击 确认。单击 关于，进入 关于系统 页面。找到 日志信息 区域，单击 下载日志 将日志下载到本地主机。如果发生故障，您可以下载日志并提交工...
什么是OSS-HDFS服务
导出审计日志 冷热分层存储 并不是所有OSS-HDFS中存储的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍然需要继续保存。针对以上问题，OSS-HDFS服务支持数据的冷热分层存储，对于经常需要访问的数据以标准类型进行存储，...
方案实现
在前文的方案与架构基础上，本文介绍如何使用表格存储的Timeline模型实现Feed流系统的存储与同步功能。模型介绍 本文使用表格存储作为存储和同步系统，并主要使用Timeline模型、基于推模式进行同步。表格存储消息（Timeline）模型是针对...
管理版本控制
通过Object的版本管理，在错误覆盖或者删除Object后，您能够将Bucket中存储的Object恢复至任意时刻的历史版本。通过Object的版本管理，在错误覆盖或者删除Object后，您能够将Bucket中存储的Object恢复至任意时刻的历史版本。Bucket的版本...
多元索引介绍
嵌套查询 在线数据中，除了扁平化的一层结构外，还存在一些更复杂的多层结构场景，例如图片标签：某个系统中存储了大量图片，每个图片都有多个实体，例如有房子、有轿车、有人。在每个图片中，这些实体占的位置和空间大小都不同，所以每个...
其他特性
用户在错误覆盖或者删除Object后，OSS能够将Bucket中存储的Object恢复至任意时刻的历史版本。版本控制应用于Bucket内的所有Object。当第一次针对Bucket开启版本控制后，该Bucket中所有的Object将在之后一直受到版本控制，并且每个版本都...
时序数据生命周期
当要实现自动清理时序表中的历史数据时，您可以使用数据生命周期（TTL）功能有效地管理时序数据，减少数据存储空间，降低存储成本。配置TTL后，如果希望延长数据保存时间，您可以修改TTL。注意事项 数据清理后无法恢复，请谨慎操作。通过...
管理版本控制
通过Object的版本管理，在错误覆盖或者删除Object后，您能够将Bucket中存储的Object恢复至任意时刻的历史版本。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。...
对象概述
对象（Object）是OSS存储数据的基本单元，也被称为OSS的文件。和传统的文件系统不同，Object没有文件目录层级结构的关系。Object类型 Object包含以下三种类型：通过 简单上传 生成的Object类型为Normal。通过 分片上传 生成的Object类型为...
极速型NAS
极速型NAS是基于阿里云最新一代网络架构和全闪存储打造的高性能共享文件存储产品，全托管的云存储服务与阿里云丰富的计算服务完全集成，充分发挥公共云计算生态的能力。具有低时延、高IOPS、大容量等特性，适用于Linux时延敏感型企业应用、...
使用函数计算清洗数据
在函数详情页面，单击 函数代码 页签，在代码编辑器中编写代码。此处以Python函数代码为例介绍。其中INSTANCE_NAME（表格存储的实例名称）、REGION（使用的地域）、ENDPOINT（服务地址）需要根据情况进行修改。usr/bin/env python#-*-...
块存储
数据持久性和服务可用性 在同一可用区中，您的业务数据以多副本的形式分布存储在块存储集群中，保证读写过程中的数据稳定性，为ECS实例实现99.9999999%（9个9）的数据可靠性保证。为进一步提升块存储的可靠性，建议您定期创建快照，为云盘...
- 产品推荐
- 这些文档可能帮助您