表设计
本章节主要为您介绍表格存储表设计的最佳实践。说明 关于表格存储索引选择的最佳实践，参见 存储和索引的引擎详解。主键设计——数据散列 为什么需要数据散列 数据散列是分布式数据系统中的通常要考虑的问题，散列的目的是让数据分布更均匀...
概述
一张源表经过冷数据归档后，会拆分成源表和归档表，其中源表存储的近期的热数据，归档表是存储过期的冷数据。归档后的归档表表名和源表表名不一样，主要是为保证查询的SLA，因为数据存储在OSS的归档表查询点查性能不如源表。相较于InnoDB表...
概述
背景信息 表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低...
方案背景
表格存储作为阿里云面向海量结构化数据提供Serverless表存储服务，具有海量数据存储、热点数据自动分裂、海量数据多维检索等功能，可以有效的地解决地理位置数据量大膨胀这一挑战。需求场景 某店铺搜索平台，提供了亿量级的店铺信息。用户...
自定义RAM Policy
ots:ComputeSplitPointsBySize"],"Resource":"*","Effect":"Allow"}]} 所有读写API"Action":"ots:*"所有SQL操作API"Action":"ots:SQL*"Resource定义 表格存储 的资源由产品、地域、用户ID、实例名和表名多个字段组成。每个字段均支持星号...
时序数据生命周期
数据生命周期 时序模型中的数据包括时间线元数据和时序表数据，分别由时间线元数据表和时间线数据表存储。表格存储分别提供了时间线元数据生命周期和时序表数据生命周期用于管理相应数据。时序表数据生命周期 时序表数据生命周期是时间线...
方案选择
表格存储作为面向海量结构化数据提供的Serverless表存储服务，具有海量数据存储、热点数据自动分片、海量数据多维检索等功能，能有效解决订单数据大爆炸的挑战。同时，多元索引 功能在保证用户数据高可用的基础上提供了数据多维度搜索、...
现代IM系统中的消息系统—实现
存储库 功能：会话窗口消息展示 存储库是聊天会话消息所对应的存储表，消息以会话分类存储，每个会话是一个消息队列。单个消息队列（TimelineQueue）通过timelineId唯一标识，所有消息基于sequenceId有序排列。消息体中含有发送人、消息ID...
表格存储支持跨地域数据迁移吗？
表格存储支持跨地域数据迁移，您可以使用DataWorks或者通道服务进行数据迁移。当进行跨地域数据迁移时，请确保执行调度任务的机器与源实例以及目标实例的网络连通。您可以通过如下方式测试网络连通性。当使用DataWorks迁移数据时，分别新建...
OSS存储空间名称符合正则表达式
OSS存储空间的名称符合参数设置的正则表达式格式，视为“合规”。应用场景 IT管理（例如：权限管理、分账等）会依赖资源名称进行资源分类。检查OSS存储空间名称可及时发现不符合要求的资源。风险等级 默认风险等级：低风险。当您使用该规则...
使用表格存储SDK时出现Signature mismatch异常
现象 使用表格存储SDK进行功能操作时出现如下错误：Error Code:OTSAuthFailed,Message:Signature mismatch.,RequestId:0005f55a-xxxx-xxxx-xxxx-xxxxxxxxxxxx,TraceId:10b0f0e0-xxxx-xxxx-xxxx-xxxxxxxxxxxx,HttpStatus:403 原因 初始化...
数据可视化工具
DataV可用于展示表格存储数据表或者二级索引表中的数据，一般用于构建复杂的大数据处理分析展现的企业应用系统。对接DataV Grafana Grafana是一款开源的可视化和分析平台，支持Prometheus、Graphite、OpenTSDB、InfluxDB、Elasticsearch、...
迁移工具
将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...
基础数据操作
通过Flink计算与分析数据后，您可以使用Tablestore时序表存储输出结果。更多信息，请参见 使用时序表存储Flink输出结果。在某些场景下，如果希望将时序表中的时序数据迁移到另一个时序表中，您可以DataWorks数据集成服务实现。更多信息，请...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
将表格存储的增量数据转换为全量数据格式
其中 function_name 为 步骤二：新建并注册函数 中的函数名称，para_list 为 附录：模式选择 中的参数列表，custom_para_list 为自定义参数列表，stream_table_name为增量表的名称，primary_keys 为 表格存储 数据表的主键列表，SequenceID...
为什么数据写入、更新或删除后表大小无变化？
表格存储数据表基于LSM架构实现，数据会采取追加写入的方式写入内存，当数据满足一定条件后会转存形成一个小的数据文件。对于单行数据的多次更新与删除操作可能会分散到多个小文件中，直接计算所有文件大小会造成冗余计量。而系统会定期...
表格存储
适用场景 表格存储 单表支持PB级存储、千万QPS，以及多种索引方式（全局二级索引、全文索引、倒排索引以及时空索引），被广泛用于社交互联网、物联网、人工智能、元数据和大数据等领域结构化数据业务场景。元数据 用户存储海量的文档、媒体...
数据总览
项目存储量除表存储量外，还会计算包括资源存储量、回收站存储量及其它系统文件存储量等在内，因此会大于表存储量。表的存储计费计算的是表的逻辑存储而非物理存储。热门表 根据数据地图表详情页访问PV，为您展示表访问量的排行榜。为实时...
数据复制
本文介绍如何在 开源大数据平台 EMR（E-MapReduce）集群上，使用Spark3将 表格存储 中一张表的数据复制到另一张表中，全程使用SQL语句实现表的创建以及数据的复制操作。前提条件 已创建 EMR 集群。具体操作，请参见 创建EMR集群。重要 创建...
对接DataV
前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时，请开通DataV服务。具体操作，请参见 开通DataV服务。已获取AccessKey（包括...
配置冷存储
云原生多模数据库 Lindorm 搜索引擎支持配置表级别的冷存储功能，可以将表数据存储至冷存储介质中，从而降低存储成本。本文介绍搜索引擎配置冷存储的具体操作。前提条件 已下载并安装Search Shell，具体操作请参见 通过Search Shell连接并...
实例
具体操作，请分别参见 将表格存储数据表中数据同步到另一个数据表 和 将表格存储时序表中数据同步到另一个时序表。不论当前实例规格，使用多元索引时均会产生高性能存储量、预留读吞吐量与按量读吞吐等。更多信息，请参见 多元索引计量计费...
命名规则和数据类型
通过本文您可以了解 表格存储 的表名和列名的命名规则，以及主键列和属性列支持的数据类型。命名规则 表名和列名必须符合以下规则。规范项 说明 组成 由英文字符（a~z）或（A~Z）、数字（0~9）和下划线（_）组成。首字母 必须为英文字母（a...
写入时序数据
通过Flink计算与分析数据后，您可以使用Tablestore时序表存储输出结果。更多信息，请参见 使用时序表存储Flink输出结果。在某些场景下，如果希望将时序表中的时序数据迁移到另一个时序表中，您可以DataWorks数据集成服务实现。更多信息，请...
方案背景
设备接入平台通过与表格存储对接，将数据存储到表格存储宽表模型中。更多信息，请参见 宽表模型介绍。表格存储的数据表用于车辆元数据的存储、更新和查询。宽表模型的表结构设计请参见 宽表模型设计。多元索引用于车辆检索和圈选。更多信息...
数据读取
已创建 表格存储 数据表。具体操作，请参见 通过控制台创建数据表 或 通过SDK创建数据表。已创建 RAM 用户，并授予 RAM 用户管理 表格存储 服务的权限（AliyunOTSFullAccess）。具体操作，请参见 配置RAM用户权限。重要 由于配置时需要填写...
分层存储
您可以根据数据的访问频率，将某些表或分区的存储类型设置为低频存储或长期存储，实现数据的冷热分层，以降低数据存储费用。申请开通使用 目前分层存储处于邀测阶段，如需您需要使用此功能，请单击 申请开通，在 新功能试用申请 页面申请...
流计算
步骤一：在表格存储侧创建数据表和通道 创建Source表和Sink表。具体操作，请参见 通过控制台创建数据表 或 通过SDK创建数据表。Source表名称为OrderSource，主键列分别为UserId和OrderId，属性列分别为price和timestamp，如下图所示。Sink...
功能特性
宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、宽行、多版本数据以及生命周期管理特点，支持主键列自增、局部事务、原子计数器、过滤器、条件更新等功能。主键列自增 条件更新 局部事务 原子计数器 ...
表操作篇
为高效利用表格存储，在设计表格存储的表的主键时，需考虑表的分区键：分区方式 说明 使用 CardID 作为表的分区键 使用 CardID 作为表的分区键是一个比较好的选择。每天每张卡产生的消费记录数从总体上来讲是均匀的，每一个分区中的访问...
SQL使用限制
大小写敏感 不敏感 由于 表格存储 中原表名和列名均是大小写敏感的，当使用SQL时，原表名和列名会统一转换为小写字母进行匹配，即如果要操作 表格存储 中的Aa列，在SQL中使用AA、aa、aA、Aa均可，因此在原表名或者列名不能同时为AA、aa、aA...
使用教程（宽表模型）
Tablestore数据源表 存储在Tablestore中数据的主键和属性列值均可以在Flink中通过数据源表DDL以列名与相应的类型映射进行读取。更多信息，请参见 表格存储Tablestore连接器。DDL定义 数据源表的DDL定义示例如下：CREATE TABLE tablestore_...
使用冷存储
背景信息 用户可以在购买云HBase实例时选择冷存储作为一个附加的存储空间，并通过建表语句指定将冷数据存放在冷存储介质上面，同时HBase增强版还基于冷存储实现了在同一张表内的冷热分离功能，能够自动将表中热数据放到读写速度快的热存储...
存储格式
修改表的存储格式 表存储格式（行存或列存）只能在创建表时声明。要改变存储模型，必须使用目标的存储格式创建一个表，将原始表的数据载入到新表中，删除原始表，并把新表重命名为原始表的名称。用户还必须重新授权原始表上有的权限。注意...
数据存储量
如下图所示，表格存储中实例的数据总量是所有表的数据量之和，表的数据量是表中所有行的数据量之和，所有行的数据量是所有单行数据的主键列和属性列数据量之和。说明 关于最新的单价信息，请参见 表格存储价格详情页。下面举例说明如何计算...
方案实现
在Source表（order_source表）上执行批计算SQL命令，得到聚合结果，并将聚合结果分别写回表格存储的Sink表（OrderTotalSink表和OrderBatchSink表）中。执行批计算SQL语句更新用户维度的聚合结果。SQL命令。INSERT INTO order_batch_sink ...
通过控制台投递数据到OSS
通过表格存储控制台创建投递任务，将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket，详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...
创建投递任务
如果要表格存储数据表中的数据投递到OSS Bucket中存储，您可以使用CreateDeliveryTask接口创建一个投递任务。重要 请确认已安装支持数据湖投递功能的表格存储Go SDK。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket。具体操作...
创建时序表
当使用表格存储时序模型时，您需要使用CreateTimeseriesTable接口创建时序表用于存储时序数据。创建时序表时支持配置数据生命周期、时序时间线表的配置信息 和创建分析存储。分析存储可用于快速分析时序数据。前提条件 已通过控制台创建...
- 产品推荐
- 这些文档可能帮助您