Kafka数据接入
选择 column 或 row_and_column 删除模式，当Value存在空值时，删除行和属性列后，将数据写入 表格存储 数据表。无 度量名称字段 将该字段映射为 表格存储 时序模型中的度量名称字段（_m_name），表示时序数据所度量的物理量或者监控指标的...
预留模式和按量模式的区别
背景信息 表格存储按弹性动态扩容、按需付费、存储和计算分离等原则提供了按量模式的计费模式。为了满足用户的费用评估、成本控制等需求，表格存储在支持按量模式的同时，推出了预留模式的计费模式。预留模式的计费模式能使用户更方便的...
常见问题
表格存储 适用于以下场景：元数据 用户存储海量的文档、媒体文件等数据的同时，对文件元数据的存储和分析不可或缺。此外，电商的订单、银行流水、运营商话费账单也需要存储及分析大量的元数据。表格存储 单表支持PB级存储、千万QPS以及多种...
产品优势
消息模型：表格存储 自研模型，主要用于消息数据，适用于IM、Feed和物联网设备消息下推等消息系统中消息的存储和同步。多元化数据索引 除了支持主键查询，表格存储 还支持二级索引和多元索引的索引方式，提供强大的数据查询能力。二级索引...
方案分析
在加入同步功能后，系统架构如下图所示：元数据 处理系统基本的存储和推送功能外，还需要对元数据进行处理，元数据包括用户信息和用户关系等。下面以用户关系进行介绍。用户账号之间的关注关系具有如下特点：变长链表，长度可达亿级别。...
数据存储量
如下图所示，表格存储中实例的数据总量是所有表的数据量之和，表的数据量是表中所有行的数据量之和，所有行的数据量是所有单行数据的主键列和属性列数据量之和。说明 关于最新的单价信息，请参见 表格存储价格详情页。下面举例说明如何计算...
通过控制台使用宽表模型
表格存储 提供了控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。通过控制台使用宽表模型（WideColumn）时，您需要开通表格存储服务，然后使用控制台进行创建实例、创建数据表、读写表中数据以及使用SQL查询数据的操作...
数据存储量如何计量
如下图所示，表格存储中实例的数据总量是所有表的数据量之和，表的数据量是表中所有行的数据量之和，所有行的数据量是所有单行数据的主键列和属性列数据量之和。说明 关于最新的单价信息，请参见 表格存储价格详情页。下面举例说明如何计算...
宽表模型介绍
宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、宽行、多版本数据以及生命周期管理特点，支持主键列自增、局部事务、原子计数器、过滤器、条件更新等功能。模型介绍 表格存储 宽表模型是类Bigtable/...
二级索引计量计费
通过DELETE操作删除一行数据 产生的写CU如下：对每张索引表，如果该行有相应的索引行，则该行中所有与索引表主键相关的列的大小之和，按4 KB向上取整，否则写CU为0。对于主键列自增的数据表，新写入数据时会产生索引表的写CU，写CU计算规则...
数据集成服务
且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到Tablestore表中存储和使用。您还可以通过DataWorks数据集成服务实现...
如何优化高并发IM系统架构
高并发的IM系统通常选择NoSQL数据库存储产品来存储消息，但常见的NoSQL产品没有提供自增列的功能，通常要借助外部组件来实现消息序号和ID的递增，使得整体的架构更加复杂，且影响整条链路的延时。功能需求 IM系统通常需要实现下列功能：...
数据湖投递概述
大规模实时数据分析 数据湖投递可以实时（每2分钟）投递增量的 表格存储 数据到OSS，投递的数据支持按系统时间分区、Parquet列存格式存储；再利用OSS的高读带宽和列存面向扫描场景优化实现高效实时数据分析。功能特性 数据湖投递的主要功能...
存储费用
当您在OSS内存储文件时，OSS会根据您存储的文件类型、大小和时长收取一定的存储费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情，请参见 OSS产品定价。计费项 计费项 计费规则 计费周期 付费方式 标准存储（本地冗余）...
多元索引介绍
预留模式：计费项包括计算能力、数据存储量和外网下行流量，其中数据存储量包括高性能存储、容量型存储和多元索引存储。使用多元索引时，索引数据量占用的存储空间为多元索引存储，通过多元索引查询与分析数据会消耗计算资源。按量模式：...
表格存储建表注意事项
在应用程序写入数据时，表格存储需要应用程序指定数据所有列（主键列及属性列）的列名和列值。如何理解建表时主键（Primary Key）的第一列为分区键（Partition Key）？主键的第一列为分区键，可以理解为当表的数据量达到一个设定值时，表格...
通用限制
GetRange一次扫描的数据 5000行或者4 MB 一次返回的行数超过5000行或者扫描的数据量超过4 MB，满足以上任一条件，数据将会按行级别被截掉并返回下一行数据主键信息。一次HTTP请求Request Body的数据大小 5 MB 无。一次读请求时的过滤器个数...
通过控制台使用时序模型
创建分析存储 分析存储功能主要用于时序数据长期存储和分析场景。使用分析存储（Analytical Store）功能，您可以低成本存储时序数据以及快速查询和分析时序数据。更多信息，请参见 时序分析存储概述。系统默认已开启分析存储，请根据实际...
表格存储的数据存储
表格存储对实例的数据总量按小时计费。由于用户的数据总量会动态变化，因此表格存储以固定的时间间隔统计表的数据总量大小，计算每小时数据总量的平均值，将平均值乘以单价进行计费。说明 单价可能会发生变化。更多信息，请参见 表格存储...
对接DataV
前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时，请开通DataV服务。具体操作，请参见 开通DataV服务。已获取AccessKey（包括...
查询时序数据
按列表展示数据 按图形展示数据 说明 图中不同颜色代表不同的数据列，将鼠标移动到数据趋势线上将显示该时间节点上不同数据列的值。您还可以通过取消选中或者选中指定数据列来展示所需数据列。使用命令行工具 您可以使用命令行工具查询某一...
方案实现
模型介绍 本文使用表格存储作为存储和同步系统，并主要使用Timeline模型、基于推模式进行同步。表格存储消息（Timeline）模型是针对消息数据场景所设计的，能够满足消息数据场景对消息保序、海量消息存储、实时同步的业务需求，同时支持...
导出全量数据到OSS
数据表中的行按主键从小到大排序，读取范围是一个左闭右开的区间，返回的是大于等于起始主键且小于结束主键的所有的行。假设表包含pk1（String类型）和pk2（Integer类型）两个主键列。如果需要导出全表数据，则配置示例如下：主键区间分布...
冷热分离介绍
容量型云存储和标准型存储在写入吞吐量上的差别不大，您可以放心写入数据。容量型云存储不适合并发大量读请求的场景，并发大量的读请求可能会导致请求异常。如果您购买的容量型云存储的存储空间较大，可根据实际业务情况调整读IOPS能力。...
动态修改schema
如果要实现求最小值、求最大值、求和、求平均值、统计行数、去重统计行数、百分位统计、按字段值分组、按范围分组、按地理位置分组、按过滤条件分组、直方图统计、日期直方图统计、获取统计聚合分组内的行、嵌套查询等数据分析需求，您可以...
云存储网关软件版公测
下面分别列出了云存储网关托管版和云存储网关软件版的适用场景。云存储网关托管版 云存储网关托管版支持NFS、SMB和iSCSI标准协议，对这些协议的某些特性有强需求，比如需要访问SMB共享并使用AD服务来鉴权、通过NFS服务指定某些客户端只读...
使用流程
表格存储 提供了控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。本文介绍通过控制台和命令行工具快速使用宽表模型和时序模型的流程。背景信息 使用表格存储前，您需要了解表格存储相关介绍，例如产品概述、基本概念等...
通过SLS完成日志数据入湖OSS
这些数据包括来源于关系型数据库中的结构化数据（行和列）、半结构化数据（例如CSV、日志、XML、JSON等）、非结构化数据（例如email、文档、PDF等）和二进制数据（例如图像、音频、视频等）。日志服务集成了数据投递到OSS的功能，以...
使用教程
使用RangeRowQueryCriteria的setFilter()和addColumnsToGet()可以在表格存储的服务器端过滤掉不必要的行和列，减少访问数据的大小，降低成本，提高性能。通过添加对应多张表的多个RangeRowQueryCriteria，可以实现多表的union。通过添加同...
表操作篇
表格存储会对表中的行按主键进行排序，合理设计主键可以让数据在分区上的分布更加均匀，从而能够充分地利用表格存储水平扩展的特点。选取分区键时，建议遵循以下几个原则：单个分区键值中的数据不宜过大，建议不超过 10 GB。说明 单个分区...
块存储
按量计费方式下，您按需开通和释放块存储资源，无需提前购买大量资源，成本比传统主机降低30%~80%；如果您使用包年包月的方式，即先付费再使用，成本将进一步降低。通过不同方式创建云盘时，支持的计费方式不同：随ECS实例创建云盘，计费...
使用函数计算
通过函数计算访问表格存储，对表格存储增量数据进行实时计算。背景信息 函数计算（Function Compute，简称FC）是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算为您准备...
测试模型
属性列名 类型 长度 field0 string 100 field1 string 100 field2 string 100 field3 string 100 field4 string 100 分区数量 表格存储的自动负载均衡机制能够根据表下各个分区的数据量、访问压力对数据分区进行动态的分裂，该过程不需要...
SQL查询
SQL中的列名必须和原始表中的列名等效，例如原始表中列名为Aa，在SQL中列名必须使用Aa、AA、aA或者aa中的一个。data_type 列的数据类型，包含BIGINT、DOUBLE、BOOL等多种数据类型。SQL中列的数据类型必须和原始表中列的数据类型相匹配。...
现代IM系统中的消息系统—实现
如果好友关系一旦解除，可以直接拼出关系表中两行主键对用户关系，通过做物理删除（删除行）或逻辑删除（属性列状态修改）结束两个人的好友关系即可。核心代码 public void establishFriendship(String userA,String userB,String ...
存储空间清单
您可以使用对象存储OSS的清单功能获取存储空间（Bucket）中指定文件（Object）的数量、大小、存储类型、加密状态等信息。相对于GetBucket（ListObjects）接口，在海量Object的列举场景中，建议您优先使用清单功能。警告 为避免影响OSS-HDFS...
创建投递任务
您可以选择任意字段以任意顺序、名称写入列存文件，OSS的列存数据会按Schema数组中的数据列先后顺序分布。注意 投递数据的字段类型必须与数据源的字段类型匹配，否则会作为脏数据丢弃。字段类型映射详情请参见 数据格式映射。taskType 投递...
存储冗余概述
对象存储OSS提供本地冗余存储和同城冗余存储两种存储冗余类型，覆盖从单可用区到多可用区的数据冗余机制，以保证数据的持久性和可用性。本地冗余存储（LRS）采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内...
云存储网关提供哪些服务
本文简要介绍云存储网关服务。云存储网关是一款可以将本地应用程序、基础设施、...通过可在本地数据中心和阿里云部署的兼容行业标准存储协议的虚拟设备，将现有的存储应用程序和工作负载连接阿里云存储服务，无缝对接阿里云的存储和计算服务。
什么是混合云存储
混合云存储包括 SA混合云存储阵列、CPFS并行文件存储、SDS分布式存储 和 HCI超融合 等多种形态，您可以像使用本地存储一样使用和管理本地和云端的各种存储资源（块、文件和对象）。本地存储可以通过云缓存、云同步、云分层、云备份等方式...
- 产品推荐
- 这些文档可能帮助您