现代IM系统中的消息系统—模型
上图是Timeline Store的结构图，Store内会存储所有的Timeline数据。Timeline是一个面向海量消息的数据模型，同时用于消息存储库和同步库，需要满足多种要求。支撑海量数据存储：对于消息存储库来说，如果需要消息永久存储，则随着时间的...
环境准备
使用Flink访问表格存储中的表前，您需要开通实时计算Flink服务并创建Flink全托管实例以及开通表格存储Tablestore服务并创建Tablestore实例。背景信息 阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台，提供...
初始化
上图为TimeStream模型的结构示意图，其中时序数据是存储到数据表中，时间线是存储到元数据表（Meta表）中。数据表可以根据业务需求创建多个，但元数据表只能有一个。所有数据表的时间线元数据写入到同一个元数据表中，您通过...
计量计费项
表格存储按实例计费。按量模式的计费项 包括读吞吐量、写吞吐量、数据存储量和外网下行流量四部分。按量模式适用于业务峰谷变化较大，不可预测的场景。如果实际业务中使用了多元索引、二级索引、SQL查询、时序模型、多版本、生命周期管理、...
文件网关支持的OSS Bucket类型说明
云存储网关文件网关支持标准（Standard）类型、低频访问（IA）类型和归档存储类型的OSS Bucket。如果没有开启网关的归档管理功能（具体的归档管理设置，请参见 管理共享 里操作步骤6），那么在已归档的文件上发起读操作请求时还是会同步...
图片处理常见问题
如何通过图片处理持久化存储多个规格的图片 如果您需要在存储空间存放除原图外的小图，可以通过图片处理持久化的方式，在图片处理的请求内添加转存参数，将处理后的图片作为文件（Object）保存至指定的存储空间（Bucket）内。关于图片处理...
CDN访问加速
该架构有以下劣势：Web服务器高负载 动态数据和静态数据共用一台服务器，当网站访问量增加时，服务器可能无法承受高负载，从而导致网站响应速度变慢，甚至崩溃。存储空间难以扩容 静态资源的存储空间会受到服务器硬盘容量的限制。当存储...
应用场景
本文介绍对象存储OSS的主要应用场景。图片和音视频等应用的海量存储 OSS可用于图片、音视频、日志等海量文件的存储。各种终端设备、Web网站程序、移动应用可以直接向OSS写入或读取数据。OSS支持流式写入和文件写入两种方式。网页或者移动...
Transaction Table2.0概述
增全量数据存储和处理一体化架构 上图所示即为MaxCompute高效支持上述综合业务场景的全新架构，支持丰富的数据源方便地通过定制开发的接入工具实现增量和离线批量数据导入到统一的存储中，由后台数据管理服务自动优化编排数据存储结构，...
基础概念
属性图 属性图（如下图1所示）具有如下特征：属性图由不同的节点和边组成 用户节点U1/U2/U3/U4和商品节点I1/I2/I3 好友关系friend1/friend2/friend3/friend4，购买关系buy1/buy2/buy3/buy4/buy5 属性图中所有边都是有向边 属性图中的节点和...
ListDirectoriesAndFiles-查询目录和文件列表
获取通用型NAS指定目录下的低频存储文件和包含低频存储文件的子目录列表。接口说明 仅通用型 NAS 文件系统支持该功能。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成...
图片URL规则
直接获取原图 用户有两种方式访问图片，分别是：三级域名 自定义域名 三级域名访问的URL http://channel.<endpoint>/object@action.format这里的endpoint指的是用户图片所在的Region的图片服务的访问域名，关于访问域名请参考 访问域名，...
功能概述
表格存储 面向海量结构化数据提供Serverless表存储服务，适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 ...
数据集成服务
且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到Tablestore表中存储和使用。您还可以通过DataWorks数据集成服务实现...
文件系统存储类型
存储类型 通用型NAS文件系统提供了为实现低成本存储而设计的不同存储类型，分别为标准存储、低频存储和归档存储。标准存储：提供高可靠、高可用、高性能的文件存储服务，适用于存储频繁访问的热数据。在创建文件系统后，文件系统数据首先...
存储概述
基本概念 存储类型（Storage Class）Kubernetes 的原生概念，通常由系统管理员定义，用于指定所支持的存储类别，不同的类别会有不同的存储 SLA、备份策略等差异性。存储卷（Persistent Volume）存储卷（Persistent Volume，简称 PV），...
ListBucketInventory
存储空间所有者默认拥有该权限，若您无该项权限，请先向存储空间所有者申请该项操作的权限。请求语法 带continuation-token的形式 GET/?inventory&continuation-token=xxx HTTP/1.1 不带continuation-token的形式 GET/?inventory HTTP/1.1 ...
产品优势
对象存储OSS是阿里云提供的海量、安全、低成本、高持久性的云存储服务。本文将OSS与传统的自建存储进行对比，让您更好地了解OSS。下表列举了与自建存储相比，OSS在易用性、持久性、数据安全等方面的优势。对比项 对象存储OSS 自建服务器...
时序模型介绍
表格存储的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景，支持自动构建时序元数据索引、丰富的时序查询能力等功能。时序模型通过时序表存储时间序列数据，能提供高并发写入和查询...
索引介绍
例如有一张数据表存储文件的MD5和SHA1值，表结构如下。通过这张表的主键，您可以查询文件对应的MD5和SHA1值，但是通过MD5或SHA1反查文件名却不容易。此时您可以为这张表建立两张全局二级索引表，表结构分别为如下：重要 为了确保主键的唯一...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
方案背景
本文介绍了表格存储结合实时计算Flink实现大数据分析的样例场景、架构设计等。背景信息 云数据库RDS MySQL基于阿里巴巴的MySQL源码分支，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据库管理...
在文件存储 HDFS 版上使用Presto
查看 文件存储 HDFS 版 实例上是否有刚创建的表数据。hadoop fs-ls dfs:/f-xxxxx.cn-zhangjiakou.dfs.aliyuncs.com:10290/tmp/presto_test/*如果返回信息显示刚创建的表数据，则表示Presto可以向 文件存储 HDFS 版 写入数据。进行Word ...
表格存储
表格存储（Tablestore）是阿里云自研的结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。表格存储提供兼容HBase的WideColumn模型、消息模型Timeline以及时空模型Timestream，实现PB级存储、千万TPS以及毫秒级延迟的服务...
资源使用优化
同时也要优化存储资源的使用架构，比如在使用 SLS 过程中可以优化存储结构和优化存储内容：优化存储结构 如果您持续采集某应用的日志，每天的写入量为100 GB，存储30天并建立全文索引，此数据量日志服务成本就很高。如果您更关心的是其中某...
0003-00001401
访问域名结构为 BucketName.Endpoint，BucketName为您的存储空间名称，Endpoint为存储空间对应的地域域名。例如 https://example-bucket.oss-cn-hangzhou.aliyuncs.com 比如上面的请求如果通过三级域名访问就是：GET/test.txt ...
如何优化高并发IM系统架构
介绍如何使用表格存储的主键增列功能优化高并发IM系统架构。背景 在构建社交IM和朋友圈应用时，最基本的需求是将用户发送的消息和朋友圈的更新及时、准确地更新给该用户的好友。这需要为用户发送的每一条消息或者朋友圈更新设置一个序号...
方案背景
表格存储作为阿里云面向海量结构化数据提供Serverless表存储服务，具有海量数据存储、热点数据自动分裂、海量数据多维检索等功能，可以有效的地解决地理位置数据量大膨胀这一挑战。需求场景 某店铺搜索平台，提供了亿量级的店铺信息。用户...
宽表模型介绍
模型介绍 表格存储 宽表模型是类Bigtable/HBase模型，通过数据表采用三维结构（行、列和时间）存储数据。数据表的每一行可以有不同的列，可以动态增加或者减少属性列，创建表时无需为表的属性列定义严格的Schema。模型构成 宽表模型如上图...
教程示例：使用RAM Policy控制OSS的访问权限
本教程示例详细演示了如何使用RAM Policy控制用户对OSS存储空间（Bucket）、文件夹以及文件夹下文件（Object）的访问权限。背景信息 RAM Policy是基于用户的授权策略。通过设置RAM Policy，您可以集中管理您的用户（例如员工、系统或应用...
应用场景
车联网架构图如下图所示。车辆数据通过MQTT协议接入消息队列Kafka后，数据一部分接入到实时计算Flink进行清洗与地理围栏计算检查，一部分直接写入表格存储中存储车辆相关信息。同时，支持通过SQL协议接入报表进行数据统计以及接入...
方案设计
本章节主要为您介绍基于表格存储的海量气象格点数据解决方案的模型及方案设计。标准化格点数据模型 一个规整的五维网格数据为一个网格的数据集（GridDataSet），按照维度顺序五维分别为：维度 说明 variable 变量，例如各种物理量 time ...
数据存储量
表格存储数据表基于LSM架构实现，数据会采取追加写入的方式写入内存，当数据满足一定条件后会转存形成一个小的数据文件。对于单行数据的多次更新与删除操作可能会分散到多个小文件中，直接计算所有文件大小会造成冗余计量。而系统会定期...
基本概念
文件存储NAS使用架构 文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。可支持上千台弹性计算ECS、容器服务ACK等计算节点共享访问，您无需修改应用程序，即可迁移业务系统上云。计算节点和NAS各模块的关系如下图所...
资源包抵扣规则
资源包类型 抵扣计费项 抵扣说明 通用型NAS资源包 抵扣通用型NAS如下计费项的费用：通用型存储容量（容量型/性能型/高级型）低频介质存储容量 通用型NAS资源包根据存储空间内通用型NAS文件系统所产生的存储容量进行抵扣，通用型存储容量...
现代IM系统中的消息系统—架构
本章节主要介绍现代IM系统中的消息系统架构以及基于表格存储（Tablestore）自研的Timeline模型构建的消息系统。基于Timeline构建的现代消息系统能够同时支持消息系统的多种特性，包括多端同步、消息漫游和在线检索，在性能和规模上能够实现...
基本原理
将数据变更事件通知给所有 SessionServer，事件内容是：id：版本号信息：<version>SessionServer 接收到变更事件通知后，对比 SessionServer 内存中存储的 dataInfoId 的 version，发现比 DataServer 发过来的小，所以主动向 DataServer ...
什么是云存储网关CSG
产品架构 云存储网关的云上服务和部署在客户数据中心的存储网关实例可以形成存储网关集群。通过这个集群，文件数据可以在云上集群和线下集群之间自由流动，帮助实现数据和业务的协同迁移，典型的场景有文件备份、数据分发和容灾。同时通过...
功能发布记录
本文介绍了表格存储每次发布涉及的功能变更及对应的文档，帮助您了解 表格存储 的发布动态。2023年 2023年12月 功能名称 功能描述 发布时间 发布地域 相关文档 时序分析存储商业化 使用分析存储（Analytical Store）功能，您可以低成本存储...
产品架构
时序引擎 LindormTSDB 是面向海量时序数据设计的分布式时序引擎，兼容开源OpenTSDB等标准接口，其基于时序数据特点和查询方式，采用Timerange+hash结合的分区算法，时序专向优化的LSM架构和文件结构，支持海量时序数据的低成本存储、预降...
- 产品推荐
- 这些文档可能帮助您