增量同步性能白皮书
单机同步单分区 单机同步4个分区 单机同步8个分区 单机同步32分区 单机同步64分区 2台机器同步64分区 2台机器同步128分区 说明 上述测试场景不是产品能力的极限测试，对表格存储服务端的整体压力较小。测试步骤 创建数据表并进行预分区...
表格存储
表格存储（Tablestore）是阿里云自研的结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。表格存储提供兼容HBase的WideColumn模型、消息模型Timeline以及时空模型Timestream，实现PB级存储、千万TPS以及毫秒级延迟的服务...
作为Output接入
当 存储引擎 选择 Local 存储（当前仅专业版实例支持选择存储引擎类型为Local存储，标准版暂不支持）时，需要配置 日志清理策略。云消息队列 Kafka 版 支持以下两种日志清理策略。Delete：默认的消息清理策略。在磁盘容量充足的情况下，...
表设计
本章节主要为您介绍表格存储表设计的最佳实践。说明 关于表格存储索引选择的最佳实践，参见 存储和索引的引擎详解。主键设计——数据散列 为什么需要数据散列 数据散列是分布式数据系统中的通常要考虑的问题，散列的目的是让数据分布更均匀...
按扫描量付费
数据分区：通过分区的方式，把原始数据存储在不同的分区中，DLA只扫描其中的一个或者几个分区，无需扫描所有分区，从而节省扫描费用。计费示例 您在OSS中存储了两个容量均为1 TB的CSV文件和JSON文件，在RDS中存储一个容量为1TB的数据表。...
作为Output接入
当 存储引擎 选择 Local 存储（当前仅专业版实例支持选择存储引擎类型为Local存储，标准版暂不支持）时，需要配置 日志清理策略。云消息队列 Kafka 版 支持以下两种日志清理策略。Delete：默认的消息清理策略。在磁盘容量充足的情况下，...
将云消息队列 Kafka 版接入阿里云Elasticsearch
当 存储引擎 选择 Local 存储（当前仅专业版实例支持选择存储引擎类型为Local存储，标准版暂不支持）时，需要配置 日志清理策略。云消息队列 Kafka 版 支持以下两种日志清理策略。Delete：默认的消息清理策略。在磁盘容量充足的情况下，...
作为Output接入
当 存储引擎 选择 Local 存储（当前仅专业版实例支持选择存储引擎类型为Local存储，标准版暂不支持）时，需要配置 日志清理策略。云消息队列 Kafka 版 支持以下两种日志清理策略。Delete：默认的消息清理策略。在磁盘容量充足的情况下，...
创建云盘
您可以使用云盒中的块存储资源创建云盘，并挂载到ECS实例上，以增加实例的存储空间。本文介绍如何使用云盒资源创建云盘，并提供云盘相关的操作指引。背景信息 使用云盒资源创建云盘时，云盘类型和容量由云盒中购买的块存储资源决定，您无需...
使用阿里云Flink（流式数据传输）
实时计算Flink版内置插件支持通过批量数据通道写入MaxCompute，受到批量数据通道并发数及存储文件数影响，内置版本插件会有性能瓶颈。MaxCompute提供了使用流式数据通道的Flink插件，支持使用Flink在高并发、高QPS场景下写入MaxCompute。...
计费常见问题
本文介绍文件存储NAS（通用型NAS/极速型NAS）计费常见问题。包括通用型NAS资源包如何使用或抵扣、NAS服务如何停止计费、购买资源包为什么还欠费等问题。开通NAS服务后，就开始计费吗？仅开通NAS服务，不会产生费用。当您在通用型NAS中写入...
计费方式1：按量付费+固定规格计算包（推荐）
“按量付费+固定规格计算包”是指在购买按量付费的集群之外，额外购买固定规格计算包用于抵扣按量付费计算节点费用的一种付费方式。该方式是最推荐的 PolarDB MySQL版 付费方式。注意事项 您可以购买多个固定规格计算包叠加使用，一个固定...
MaxCompute表的高级功能
生命周期 MaxCompute为表和分区提供数据生命周期管理功能。表（分区）数据从最后一次更新时间算起，在指定的时间段（即生命周期）内如果没有变动，则此表（分区）将被MaxCompute自动回收。生命周期只能以表为单位进行设置。创建表test_...
基本概念
物理库 物理库，是数据库在物理存储设备上的物理表示和存储方式，包括数据文件、日志文件、索引文件等。创建 AnalyticDB for MySQL 集群时，会自动创建一个物理库。每一个物理库被切分为若干个分片（Shard）。这些分片分布到若干个节点组...
数据加密
您可以将Bucket默认的服务器端加密方式设置为AES-256，也可以在上传Object或修改Object的元数据时，在请求中携带 X-OSS-server-side-encryption 并指定其值为 AES256，即可实现该Object的服务器端加密存储。更多信息请参见OSS开发指南中的 ...
数据建模
存储大小 取对应分区的物理存储量，与期望值进行比较，只要符合规则则通过。比较方式包括：>、、>=、、=和!主键唯一 对应分区，表主键字段值去重后的count数是否等于分区记录数，等于则规则通过，不等于则规则不通过。多表记录数波动率 源...
数据引入层（ODS）
ODS（Operational Data Store）层存放您从业务系统获取的最原始的数据，是其他上层数据的源数据。业务数据系统中的数据通常为非常细节的数据，经过长...ODS层的表建议以统计日期及时间分区表的方式存储，便于管理数据的存储成本和策略控制。
数据引入层（ODS）
ODS（Operational Data Store）层存放您从业务系统获取的最原始的数据，是其他上层数据的源数据。业务数据系统中的数据通常为非常细节的数据，经过长...ODS层的表建议以统计日期及时间分区表的方式存储，便于管理数据的存储成本和策略控制。
计量计费项
表格存储按实例计费。按量模式的计费项 包括读吞吐量、写吞吐量、数据存储量和外网下行流量四部分。按量模式适用于业务峰谷变化较大，不可预测的场景。如果实际业务中使用了多元索引、二级索引、SQL查询、时序模型、多版本、生命周期管理、...
分区和列操作
合并分区 对分区表的分区进行合并，即同一个分区表下的多个分区合并成一个分区，同时删除被合并的分区维度的信息，把数据移动到指定分区。清空分区数据 清空指定分区的数据。列操作 添加列或注释 为已存在的非分区表或分区表添加列或注释。...
数据存储
本文介绍 云数据库 SelectDB 版 在数据存储方面的关键设计和特性，帮助客户充分发挥SelectDB的潜力。表 在云数据库SelectDB中，表（Table）是存储结构化数据的一种特殊形式。一张表由行（Row）和列（Column）组成，其中行表示一行数据，列...
存储空间概述
在上传数据（例如文档、图片、音视频等）到OSS之前，您需要在OSS所支持的地域中创建一个存储空间（Bucket），然后将无限数量的对象（Object）上传到该Bucket中。背景信息 Bucket和Object都是OSS资源，OSS提供了相关的API接口来管理这些资源...
基本概念
RAM用户支持的表达格式如下表所示。...Superuser拥有整个实例的所有权限...存储引擎Storage Engine（SE）主要用于管理和处理数据，包括创建、查询、更新和删除（简称 CRUD）数据等，关于存储引擎详细的技术原理请参见 Hologres存储引擎技术揭秘。
常见问题
本文列举了阿里云 表格存储 的常见问题，帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储？表格存储 面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...
CDN加速和OSS传输加速的区别
概述 本文主要介绍阿里云对象存储OSS的传输加速功能和CDN加速OSS资源的区别，以便您根据实际业务进行选择。详细信息 阿里云对象存储OSS以海量、安全、低成本、高可靠等特点已经成为用户存储静态资源和文件的首要选择，实际使用中面向全球...
快速入门
分区模式 分区模式决定了将数据写入到MaxCompute哪个分区中，目前DataHub支持以下分区方式：分区模式 分区依据 支持Topic类型 说明 USER_DEFINE Record中的分区列（和MaxCompute的分区字段同名）的value值 TUPLE(1).DataHub schema中必须...
CDM明细层设计规范
数据存储及生命周期管理规范 CDM明细层的表的类型为事实表，存储方式为按天分区。事务型事实表一般永久保存。周期快照型事实表根据业务需求设置生命周期管理。您可依据3个月内的最大需要访问的跨度设置保留策略，具体计算方式如下：当3个月...
访问列存数据
列存即列式存储，是一种将数据按列进行存储和处理的数据管理方式。Lindorm计算引擎支持将半结构化、结构化数据以列存方式进行存储，相较于行式存储，列式存储的查询响应时间更短，消耗IO更少。本文介绍如何通过计算引擎访问Lindorm列存数据...
ALTER TABLE
alter table 只会影响分区表的新建分区（包括 insert overwrite 生成的），新分区将按新的聚簇属性存储，老数据分区的聚簇属性和存储保持不变。即在一张曾经做过聚簇属性设置的表上，关闭了聚簇属性，再增加聚簇设置，可以在新分区设置不同...
JindoTable SDK模式归档和解冻命令介绍
如果指定-i/-a/-o/-cr 参数，相关参数描述如下：指定-i 参数，则转换存储格式为低频（Infrequent Access，IA）存储，跳过原本为标准存储的文件。对冷归档(Cold Archive)有效。指定-a 参数，则转换存储格式为归档，唯一作用是将冷归档(Cold ...
JindoTable SDK模式归档和解冻命令介绍
如果指定-i/-a/-o/-cr 参数，相关参数描述如下：指定-i 参数，则转换存储格式为低频（Infrequent Access，IA）存储，跳过原本为标准存储的文件。对冷归档(Cold Archive)有效。指定-a 参数，则转换存储格式为归档，唯一作用是将冷归档(Cold ...
功能特性
数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型（WideColumn）是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...
资源包概述
低频-本地冗余存储包 抵扣低频-本地冗余存储类型的OSS文件的存储费用 归档-本地冗余存储包 抵扣归档-本地冗余存储类型的OSS文件的存储费用 标准-同城冗余存储包 抵扣标准-同城冗余存储类型的OSS文件的存储费用 低频-同城冗余存储包 抵扣...
持续的存储优化
维护一个规模适中且价格合理的存储架构是一个持续的过程。为了更有效地利用存储支出，您每个月都应该进行存储...您可以为存储优化任务设置月度计划，使用OSS提供的各种存储管理功能来监控存储成本并评估资源使用情况，从而简化存储优化工作。
管理MaxCompute Catalog
配置MaxCompute Catalog后，您可以在Flink全托管作业开发中直接访问 MaxCompute 中存储的表，无需再定义Schema。本文为您介绍如何在Flink全托管模式下创建、查看、使用及删除MaxCompute Catalog。背景信息 MaxCompute Catalog通过查询...
RestAPI Reader最佳实践
实践2：读取一个接口数据，该接口为一个分页的RestAPI接口 示例场景：接口定义 本实践示例的场景为读取一个RESTful接口数据并写入一个MaxCompute分区表中，其中使用的示例RESTful接口为一个自建的测试GET接口，本示例的接口详情如下。...
预留模式和按量模式的区别
说明 适用场景 预留模式 预付费（包年包月）为主 计算部分需要提前规划硬件资源消耗，提供固定的算力。存储部分可以动态扩展，根据实际使用量，每小时扣费。无需容量规划。业务峰值较平稳，可预测 期望整体成本可控 预算制，需要提供预购...
Node Labels特性使用
本文为您介绍YARN Node Labels特性、使用方式和常见问题。基本介绍 YARN Node Labels特性支持将YARN NodeManager节点进行分区管理。因为一个节点只能设置属于某一个Node Label，所以可以使用 Node Label将整个YARN集群划分为不相交的节点...
数据导出到OSS概述
表格存储 中的全量数据以及增量数据可以通过DataWorks数据集成同步到 对象存储 中备份和使用。实现原理 DataWorks数据集成的离线同步功能将不同数据源的同步抽象为从来源数据源读取数据的Reader插件以及向目标数据源写入数据的Writer插件，...
测试模型
表结构 主键名 类型 编码方式 长度 userid string 4-Byte-Hash+Long.toHexString 20 属性列 属性列名 类型 长度 field0 string 100 field1 string 100 field2 string 100 field3 string 100 field4 string 100 分区数量 表格存储的自动负载...
- 产品推荐
- 这些文档可能帮助您