方案背景
表格存储作为阿里云面向海量结构化数据提供Serverless表存储服务，具有海量数据存储、热点数据自动分裂、海量数据多维检索等功能，可以有效的地解决地理位置数据量大膨胀这一挑战。需求场景 某店铺搜索平台，提供了亿量级的店铺信息。用户...
EMQX数据接入
将模拟温湿度数据通过MQTT协议上报到EMQX Cloud后，使用EMQX Cloud数据集成将数据转存到表格存储（Tablestore）。前提条件 EMQX Cloud 已在EMQX Cloud上创建专业版EMQX集群。已完成与阿里云平台的VPC对等连接创建，用于VPC之间的网络连接。...
宽表模型介绍
2 开通表格存储服务 使用 表格存储 功能前，您必须开通 表格存储 服务。服务仅需开通一次，开通过程免费。如果已经开通 表格存储 服务，请跳过此操作。3 创建实例 重要 创建实例前，您需要根据实际业务特点以及业务对读写性能和成本要求...
概述
背景信息 表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低...
时序模型介绍
表格存储的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景，支持自动构建时序元数据索引、丰富的时序查询能力等功能。时序模型通过时序表存储时间序列数据，能提供高并发写入和查询...
挂载与卸载
本文主要说明阿里云数据库文件存储服务DBFS的挂载与卸载功能。DBFS服务挂载步骤如下：进入“数据库文件存储控制台”->“数据库文件系统列表”。单击“挂载”按钮，弹出信息输入框。填写DBFS服务挂载信息，单击“确定”。挂载成功后，执行...
什么是CPFS智算版（邀测）
CPFS智算版是阿里云文件存储CPFS推出的一款超高性能的文件存储服务，支持端到端RDMA网络，应用于AIGC、自动驾驶等智算场景。本文介绍CPFS智算版的使用限制、费用说明及操作指引。关于CPFS智算版的性能指标，请参见 产品规格。使用限制 仅...
如何选用NAS、OSS和EBS？
本文介绍文件存储NAS与对象存储OSS、块存储EBS的区别和部署架构，帮助您更好地选用合适的阿里云存储服务。产品对照表 文件存储NAS、对象存储OSS和块存储EBS的主要区别如下表所示。对比项 文件存储NAS 对象存储OSS 块存储EBS 特点 原有使用...
开始使用OSS
对象存储OSS支持多种方式访问和管理对象。本文为您介绍如何通过控制台、命令行管理工具ossutil、图形化管理工具ossbrowser、OSS SDK、REST API等多种方式管理OSS。开通OSS服务 打开 OSS开通页面。在OSS开通页面，按照界面指引完成开通操作...
什么是文件存储NAS
阿里云文件存储NAS（Apsara File Storage NAS）是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。前置概念 阅读本文前，您可能需要了解如下概念：什么是...
使用NAS静态存储卷
您可以通过阿里云提供的Flexvolume插件使用阿里云NAS文件存储服务。本文介绍如何使用NAS静态存储卷。前提条件 使用存储卷时请将Flexvolume插件更新到最新版本。具体操作，请参见 安装与升级Flexvolume组件。已通过kubectl连接Kubernetes...
测试模型
本次性能测试不是产品能力的极限测试，因此并没有触发表格存储服务端的流控措施，表格存储的自动负载均衡机制也尽可能地保证用户单表提供的服务能力能够水平扩展。大规模的压力测试可能会触发后端流控并且可能会产生较贵的费用，如果需要做...
计费常见问题
本文介绍文件存储CPFS计费的常见问题。包括资源包如何使用或抵扣、CPFS服务如何停止计费、购买资源包为什么还欠费等问题。类目 问题 计费 CPFS服务如何停止计费？包年包月模式的CPFS文件系统能否转换为按量付费模式？文件系统用于计费的...
性能优化指导原则
为了使您的应用程序在OSS上获得最佳性能，...例如，这些开发工具包包含自动对网络错误（客户端错误或者服务端错误）重试请求的逻辑，以适应不同的网络状况；这些开发工具包还包含高级的传输接口，提供针对大文件的上传或者下载的最佳实践。
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
云存储网关
它以阿里云对象存储OSS为后端存储，为云上和云下应用提供业界标准的文件服务（NFS和SMB）和块存储服务（iSCSI）。云存储网关 目前提供两种形态：文件网关 文件网关将OSS Bucket的对象结构与NAS文件系统的目录和文件建立映射关系，您通过...
Kafka数据接入
通过创建Tablestore Sink Connector，将 云消息队列 Kafka 版 实例的数据源Topic导出到 表格存储（Tablestore）。前提条件 云消息队列 Kafka 版 已为实例开启Connector。具体操作，请参见 开启Connector。已为实例创建数据源Topic。更多...
数据读取
本文介绍如何通过 开源大数据平台 EMR（E-MapReduce）控制台，快速创建一个 EMR 集群并使用Spark3读取 表格存储 的数据。前提条件 已使用阿里云账号对 EMR 服务授权。具体操作，请参见 角色授权。已创建 表格存储 数据表。具体操作，请参见...
新功能发布记录
本文列举了文件存储NAS产品功能发布的时间、发布地域及相关文档。2024年02月 功能名称 功能概述 发布时间 发布地域 相关文档 通用高级型NAS 通用型NAS新增一个存储规格类型为高级型的文件系统。适用于容器数据持久化、AI训练数据存储、工业...
方案分析
根据Feed流中的数据类型，本文分别设计系统存储、同步与元数据方案。不同类型的Feed流产品架构存在差异，本文设计的产品是基于单向关系的时间排序Feed流，类似于微博。存储 Feed流系统中的存储库主要存放具体的用户Feed消息，而Feed消息...
流计算
通过在E-MapReduce集群中使用Spark SQL访问表格存储。对于流计算，基于通道服务，利用CDC（数据变更捕获）技术完成Spark的mini batch流式消费和计算，同时提供了at-least-once一致性语义。前提条件 已创建 EMR 集群。具体操作，请参见 EMR...
MySQL高可用实践
本文为您说明如何基于阿里云数据库存储服务DBFS来实现MySQL的高可用构建。优势说明 如何保证数据库服务的高可用性，一直是业界讨论的重要课题之一。下面就主要的两种解决方案进行对比说明：对比项 基于DBFS共享存储构建 基于主备同步方式...
将HBase数据同步到表格存储
准备工作 开通表格存储服务，并创建实例和数据表。具体操作，请参见 通过控制台使用宽表模型 或者 通过命令行工具使用宽表模型。说明 创建数据表时建议使用HBase原主键或唯一索引作为表格存储数据表的主键。获取AccessKey用来进行签名认证...
数据复制
本文介绍如何在 开源大数据平台 EMR（E-MapReduce）集群上，使用Spark3将 表格存储 中一张表的数据复制到另一张表中，全程使用SQL语句实现表的创建以及数据的复制操作。前提条件 已创建 EMR 集群。具体操作，请参见 创建EMR集群。重要 创建...
物联网平台数据接入
通过使用规则引擎数据流转功能，将物联网平台中的设备数据转发到表格存储（Tablestore）中存储。前提条件 已创建物联网平台企业版实例并将设备接⼊到企业版实例。具体操作，请参见 购买企业版实例 和 设备接入和上报数据。已开通表格存储...
日志应用
日志审计服务 存储方式与地域限制 重要 使用日志审计服务进行日志区域化存储或中心化存储前，请合理评估存储地域是否满足相关法律法规和安全监管的要求。中心化存储 从各个阿里云账号、各个地域采集到的日志，会存储到中心账号下的一个中心...
方案实现
在前文的方案与架构基础上，本文介绍如何使用表格存储的Timeline模型实现Feed流系统的存储与同步功能。模型介绍 本文使用表格存储作为存储和同步系统，并主要使用Timeline模型、基于推模式进行同步。表格存储消息（Timeline）模型是针对...
使用SDK
创建投递任务后，表格存储数据表中的数据会自动投递到OSS Bucket中存储。注意事项 目前支持使用数据湖投递功能的地域有华东1（杭州）、华东2（上海）、华北2（北京）和华北3（张家口）。数据湖投递不支持同步删除操作，表格存储中的删除...
批计算
通过在E-MapReduce集群中使用Spark2访问表格存储。对于批计算，Tablestore on Spark提供索引选择、分区裁剪、Projection列和Filter下推、动态指定分区大小等功能，利用表格存储的全局二级索引或者多元索引可以加速查询。前提条件 已创建E-...
文件存储NAS
阿里云文件存储NAS（Apsara File Storage）是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统，支持NFS和SMB协议。文件存储NAS 目前提供极速型、通用性能型...
数据安全
用户密钥安全 表格存储客户端支持使用V4签名算法对用户密钥（即阿里云账号或者RAM用户的AccessKey信息）进行计算生成派生密钥，并使用派生密钥发起请求，表格存储服务端在收到该请求时会使用派生密钥进行用户身份验证，避免在身份验证过程...
数据可靠性
日志服务底层存储采用三副本机制来保证数据的可靠性，即每份数据都有3个副本，副本按照一定的分布式存储算法保存在集群中的不同机器。通过该机制，存储系统确保3个数据副本分布在不同服务器的不同物理磁盘上，单个硬件设备的故障不会造成...
常见问题
使用 表格存储 您只需专注于业务研发，无需担心软硬件预置、配置、故障、集群扩展、安全等问题，在保证高服务可用性的同时，为您省去运维成本。使用场景 表格存储 有哪些主要使用场景？表格存储 适用于以下场景：元数据 用户存储海量的文档...
常见问题
数据存储到阿里云OSS以后，您可以选择标准存储（Standard）作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也可以选择成本更低、存储期限更长的低频访问存储（Infrequent Access）、归档存储（Archive）、冷归档存储（Cold ...
文件存储HDFS版
数据持久性和服务可用性 和文件存储NAS一样，文件存储HDFS版的数据在后端进行多副本存储，每份数据都有多份拷贝在故障域隔离的不同设备上存放，提供99.999999999%（11个9）的数据可靠性，能够有效降低数据安全风险。扩展性和弹性 文件存储...
集群内备份和恢复应用
重要 若不勾选备份存储卷，且未通过排除资源排除存储声明、存储卷时，备份记录仅包含对应的YAML，而不包含存储的数据。YAML中记录了云盘ID、NAS Server等存储底层信息。恢复时，将通过静态方式按照YAML恢复存储声明、存储卷。指定标签备份 ...
新功能发布记录
创建接入点 使用接入点 存储冗余类型转换 对象存储OSS支持将Bucket的存储冗余类型从本地冗余存储转换为同城冗余存储，从而具备抵抗可用区级故障的能力。2023-06-28 华东1（杭州）、华东2（上海）、华北2（北京）、华北 3（张家口）、华北6...
审计日志概述
注意事项 由于 表格存储 控制台会定期检测是否支持二级索引，因此审计日志中会存在一些非法索引名创建的校验错误信息（即API值为CreateIndex且HttpStatus值为400），请忽略此日志信息。日志示例如下：API:CreateIndex AccessKeyID:TMP.3Kg4...
功能特性
数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型（WideColumn）是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...
基于最后一次访问时间的生命周期规则
在开通了OSS-HDFS服务的Bucket中配置生命周期规则 如果您对开通了OSS-HDFS服务的Bucket设置或更新为匹配整个Bucket的生命周期规则，需通过NOT元素排除.dlsdata/，避免因生命周期规则触发的Object存储类型转换行为影响OSS-HDFS数据读写。...
- 产品推荐
- 这些文档可能帮助您