顺序消息
如上图所示，消息组1和消息组4的消息混合存储在队列1中，云消息队列 RocketMQ 版 保证消息组1中的消息G1-M1、G1-M2、G1-M3是按发送顺序存储，且消息组4的消息G4-M1、G4-M2也是按顺序存储，但消息组1和消息组4中的消息不涉及顺序关系。...
顺序消息
消息存储 如上图所示，顺序消息的Topic中，每个逻辑队列对应一个物理队列，当消息按照顺序发送到Topic中的逻辑队列时，每个分区的消息将按照同样的顺序存储到对应的物理队列中。消息消费 云消息队列 RocketMQ 版 按照存储的顺序将消息投递...
对象命名
与传统文件系统中的层级结构不同，OSS内部使用扁平结构存储数据。即所有数据均以对象（Object）的形式保存在存储空间（Bucket）中。对象（Object）是OSS存储数据的基本单元，也被称为OSS的文件。OSS通过键名（Key）唯一标识存储的Object。...
队列（MessageQueue）
版本兼容性 队列的名称属性在 云消息队列 RocketMQ 版 服务端的不同版本中有如下差异：服务端3.x/4.x版本：队列名称由{主题名称}+{BrokerID}+{QueueID}三元组组成，和物理节点绑定。服务端5.x版本：队列名称为一个集群分配的全局唯一的字符...
管理目录
与传统文件系统中的层级结构不同，OSS内部使用扁平结构存储数据。即所有数据均以对象（Object）的形式保存在存储空间（Bucket）中。为方便管理，OSS控制台将所有以正斜线（/）结尾的对象显示为目录，实现类似于目录的基本功能。您可以通过...
生产者负载均衡
策略原理：Hash算法 MessageGroupHash模式下，生产者发送消息时，以消息组为粒度，按照内置的Hash算法，将相同消息组的消息分配到同一队列中，保证同一消息组的消息按照发送的先后顺序存储。说明 Hash算法的具体原理，请参见 SipHash算法。...
如何优化高并发IM系统架构
主键顺序 主键名称 主键值 说明 1 partition_key md5（receive_id）前4位 分区键保证数据均匀分布 2 receive_id receive_id 接收方的用户ID 3 message_id message_id 消息ID 表格存储表结构包括主键列和属性列两部分。主键列 最多支持4个...
时序模型介绍
基础概念 概念 描述 时序数据 由多个时间序列组成，每个时间序列表示一组按照时间顺序排列的数据点。除了数据点之外，还需要一些元数据用来标识一个时间序列。因此时序数据由元数据和数据两部分组成。元数据：记录了所有时间序列的标识信息...
索引介绍
使用宽表模型的表引擎查询数据时存在依赖主键以及根据属性查询效率低的问题，表格存储提供了二级索引和多元索引用于解决宽表模型的数据查询问题。您也可以为数据表创建映射关系后，像使用传统数据库一样使用SQL查询表中数据。表引擎 宽表...
现代IM系统中的消息系统—模型
本章节主要介绍表格存储（Tablestore）的Timeline模型基本功能以及核心组件，并且会通过IM消息系统场景，介绍如何基于Timeline实现IM场景下消息同步、存储和索引等基本功能。Timeline模型 Timeline模型以简单为设计目标，核心模块主要包括...
宽表模型介绍
模型介绍 表格存储 宽表模型是类Bigtable/HBase模型，通过数据表采用三维结构（行、列和时间）存储数据。数据表的每一行可以有不同的列，可以动态增加或者减少属性列，创建表时无需为表的属性列定义严格的Schema。模型构成 宽表模型如上图...
索引选择
多元索引本质上是通过各种数据结构加快了数据的筛选过程，功能丰富，但在数据按照某种固定顺序读取的场景上效率不如二级索引。多元索引的查询效率与倒排链长度等因素相关，即查询性能与整个表的全量数据规模有关，在数据规模达到百亿行以上...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
云存储网关软件版公测
云存储网关软件版是一款可以安装在阿里云用户ECS上或者用户本地数据中心客户端的产品，提供类似ossfs的功能，使用云存储网关软件版可以将OSS桶挂载到客户端本地以POSIX文件接口进行访问，从而您可以像操作本地文件一样操作OSS里面的文件。...
多元索引功能
折叠（去重）排序 表格存储提供按照主键的字母顺序排序功能，但如果要按照其他字段排序，您可以使用多元索引的排序能力。多元索引提供了丰富的排序能力，包括正序或逆序、单条件、多条件等，多元索引排序均为全局排序。多元索引的默认返回...
现代IM系统中的消息系统—实现
本文主要以钉钉（DingTalk）的功能为参照，详细说明如何基于表格存储的Timeline模型实现钉钉的IM功能。以下内容按照聊天系统的消息存储、关系维护、即时感知、多端同步四个功能模块分块，分别介绍每一部分的功能、方案介绍、表设计以及实现...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
数据复制
已创建 表格存储 数据表，且目标表的主键列应和需要复制的源表主键列保持一致（包括主键顺序和名称）。具体操作，请参见 通过控制台创建数据表 或 通过SDK创建数据表。已创建 RAM 用户，并授予 RAM 用户管理 表格存储 服务的权限...
如何选择二级索引和多元索引
多元索引本质上是通过各种数据结构加快了数据的筛选过程，功能丰富，但在数据按照某种固定顺序读取的场景上效率不如二级索引。多元索引的查询效率与倒排链长度等因素相关，即查询性能与整个表的全量数据规模有关，在数据规模达到百亿行以上...
物联网存储介绍
索引引擎：索引引擎采用了倒排索引、空间索引等存储结构，能够支持全文检索、任意字段组合检索以及统计聚合，用于设备元数据和设备时序元数据的检索。表格存储针对不同类型的数据提供了宽表（WideColumn）模型、时序（TimeSeries）模型和...
方案设计
标准化格点数据模型 一个规整的五维网格数据为一个网格的数据集（GridDataSet），按照维度顺序五维分别为：维度 说明 variable 变量，例如各种物理量 time 时间维度 z z轴，一般表示空间高度 x x轴，一般表示经度或纬度 y y轴，一般表示...
多元索引介绍
多元索引（Search Index）基于倒排索引和列式存储，可以解决大数据的多维查询和统计分析难题。当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为...
多元索引介绍
嵌套查询 在线数据中，除了扁平化的一层结构外，还存在一些更复杂的多层结构场景，例如图片标签：某个系统中存储了大量图片，每个图片都有多个实体，例如有房子、有轿车、有人。在每个图片中，这些实体占的位置和空间大小都不同，所以每个...
创建多元索引
如果要存储和查询JSON格式数据，您可以在数据表中使用字符串方式存储JSON数据，然后通过多元索引中的数组和嵌套类型实现JSON数据的灵活查询。更多信息，请参见 数组和嵌套类型。如果应用中需要地理位置相关查询，您可以使用Geo-point字段...
动态修改schema
相关文档 如果要在不改变表结构情况下实现新字段新数据类型的查询功能，您可以通过修改多元索引Schema或者新建多元索引时结合虚拟列功能来实现。更多信息，请参见 虚拟列。您可以根据查询场景使用 全匹配查询、匹配查询、短语匹配查询、...
混合云备份HBR
抵扣顺序 HBR存储费用的抵扣顺序为：存储资源包>SCU＞按量计费 抵扣案例 陈先生2020年6月在华东1（杭州）购买了200 GB的备份库存储容量资源包和50 GB SCU，其6月份在华东1（杭州）地域标备份存储量为300 GB，则陈先生当月的存储费用抵扣...
文件存储NAS
抵扣顺序 NAS存储费用抵扣顺序为：存储包>资源包>SCU>按量付费 抵扣案例 陈先生2021年01月在华北2（北京）购买了500 GiB的通用型NAS资源包和100 GiB SCU，其01月份在华北2（北京）仅使用了容量型NAS，且容量型NAS每小时文件存储量为600 GiB...
存储空间概述
在上传数据（例如文档、图片、音视频等...✓×OSS ON云盒 OSS ON云盒为云盒（CloudBox）产品提供了非结构化数据本地存储、本地访问、以及本地处理的能力。您可以在OSS ON云盒中创建Bucket，并使用与公共云一致的API、SDK访问云盒中的OSS。✓×
添加SMB共享AD域用户或用户组
本文介绍文件网关SMB共享添加AD域用户和域用户组的使用说明。前提条件 已创建SMB共享，具体操作请参见 创建共享。云存储网关已加入AD域，具体操作请参见 文件网关如何加入AD域。云存储网关版本在1.9.3版本及以上。如果低于此版本，请您对...
存储容量单位包SCU
存储容量单位包SCU（Storage Capacity Unit）是一种预付费的存储容量资源包，可以抵扣多种不同类型云存储产品的按量付费账单。购买方式 SCU的购买方式，请参见 创建存储容量单位包。抵扣规则 SCU可以抵扣多款云产品的部分存储费用，下表列...
对象存储OSS
抵扣顺序 OSS存储费用的抵扣顺序为：地域存储包>中国大陆通用存储包＞SCU＞按量计费 抵扣案例 用户A于2021年6月在华东1（杭州）购买了500 GB的 标准-本地冗余存储包 和20 GB的SCU，其6月份在华东1（杭州）地域标准存储（本地冗余）类型文件...
存储容量单位包SCU
抵扣顺序 OSS存储费用的抵扣顺序为：地域存储包>中国内地通用存储包＞SCU＞按量计费 抵扣案例 用户A于2021年6月在华东1（杭州）购买了500 GB的 标准-本地冗余存储包 和20 GB的SCU，其6月份在华东1（杭州）地域标准存储（本地冗余）类型文件...
步骤三：创建资源
普通消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，可能会造成消息乱序。当 存储引擎 选择 云存储 时，默认选择 普通消息。分区顺序消息：默认情况下，保证相同Key的消息...
账单和用量查询
资源包抵扣顺序：存储包>资源包>存储容量单位包SCU>按量付费。官网价 单文件系统实例一个月内在抵扣完存储包和资源包后，剩余按量付费的存储容量根据账单中对应的单价核算的结果。案例：华北2（北京）的张先生有一个通用容量型NAS文件系统...
资源包概述
低频-本地冗余存储包 抵扣低频-本地冗余存储类型的OSS文件的存储费用 归档-本地冗余存储包 抵扣归档-本地冗余存储类型的OSS文件的存储费用 标准-同城冗余存储包 抵扣标准-同城冗余存储类型的OSS文件的存储费用 低频-同城冗余存储包 抵扣...
通过SLS完成日志数据入湖OSS
背景信息 数据湖是一个集中式存储库，允许您以任意规模存储所有结构化、半结构化以及非结构化数据。这些数据包括来源于关系型数据库中的结构化数据（行和列）、半结构化数据（例如CSV、日志、XML、JSON等）、非结构化数据（例如email、文档...
宽表模型设计
数据表结构 假设存储车辆元数据的数据表名称为vehicles_metadata，表结构请参见下表。说明 关于表设计的更多信息，请参见 表设计。字段名称 类型 描述 vin_id（主键列）String 车辆识别代码，即车架号，用于唯一标识车辆。v_color String ...
产品架构
Tablestore 多模型数据存储 表格存储 针对不同业务类型的结构化数据提供了宽表（WideColumn）模型、时序（TimeSeries）模型和消息（Timeline）模型三种数据存储模型。模型 描述 宽表模型 类Bigtable/HBase模型，可应用于元数据、大数据等...
虚拟列
使用虚拟列功能时，您可以通过修改多元索引Schema或者新建多元索引来实现新字段新数据类型的查询功能，而无需修改表格存储的存储结构及数据。前提条件 已初始化Client。具体操作，请参见 初始化。已创建数据表，且数据表的数据生命周期...
表格存储建表注意事项
表格存储支持半结构化的表，即建表时只需要指定主键列（1至4列），不需要在创建表的时候指定属性列。表格存储表中包含的属性列个数无限制，且每一行数据可以拥有不同数量不同类型的属性列。在应用程序写入数据时，表格存储需要应用程序指定...
- 产品推荐
- 这些文档可能帮助您