方案分析
根据Feed流中的数据类型，本文分别设计系统存储、同步与元数据方案。不同类型的Feed流产品架构存在差异，本文设计的产品是基于单向关系的时间排序Feed流，类似于微博。存储 Feed流系统中的存储库主要存放具体的用户Feed消息，而Feed消息...
云存储网关软件版公测
云存储网关软件版是一款可以安装在阿里云用户ECS上或者用户本地数据中心客户端的产品，提供类似ossfs的功能，使用云存储网关软件版可以将OSS桶挂载到客户端本地以POSIX文件接口进行访问，从而您可以像操作本地文件一样操作OSS里面的文件。...
多元索引介绍
用户为数据表创建了多元索引后，当在数据表中写入数据时，数据会先写入数据表中，数据写成功后会立即返回用户写成功，同时另一个异步线程会从数据表中读取写入的数据然后写入到多元索引，采用异步方式创建多元索引不会降低表格存储的写入...
秒级修改列字符集
若将该列的字符集修改为utf8mb4，其最大存储长度为 85*4=340 字节，由于修改列字符集后的最大存储长度大于256个字节，因此，修改该列字符集时不能秒级完成。目标字符集的列的最大存储长度不能小于原字符集的列的最大存储长度。例如，某列...
现代IM系统中的消息系统—模型
为了满足同步库和存储库对存储的不同要求，也提供了一些灵活的自定义配置，主要包括：配置 说明 Time to live（数据生命周期）可自定义数据生命周期，例如永久保存，或者保存N天。Storage type（存储类型）自定义存储类型，对存储库来说，...
时序模型介绍
表格存储的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景，支持自动构建时序元数据索引、丰富的时序查询能力等功能。时序模型通过时序表存储时间序列数据，能提供高并发写入和查询...
块存储性能
相同类型块存储产品的单位容量的I/O性能均一致，但云盘性能随容量增长而线性增长，直至达到该类型块存储的单盘性能上限。ESSD云盘在不同容量范围内还能选择不同的性能等级。测试不同块存储类型的性能表现，请参见 测试块存储性能、测试ESSD...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
通过控制台使用宽表模型
通过控制台使用宽表模型（WideColumn）时，您需要开通表格存储服务，然后使用控制台进行创建实例、创建数据表、读写表中数据以及使用SQL查询数据的操作。前提条件 已获取用于操作表格存储的阿里云账号或者RAM用户的登录信息。如果未注册...
创建存储过程
存储过程是作为单个 SPL 程序语句调用的独立 SPL 程序。调用时，存储过程可选择以输入参数的形式从调用方接收值，并可选择以输出参数的形式向调用方返回值。CREATE PROCEDURE 命令可定义并命名一个将存储在数据库中的独立存储过程。如果...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
宽表模型介绍
表格存储按照分区键对数据表的数据进行分区，拥有相同分区键的行会被划分到同一个分区，实现数据访问负载均衡。属性列（Attribute Column）一行中除主键列外，其余都是属性列。属性列会对应多个值，不同值对应不同的版本，每行的属性列个数...
数据类型
QUANTILE_STATE/QUANTILE_STATE是一种计算分位数近似值的类型，在导入时会对相同的Key，不同Value进行预聚合，当Value数量不超过2048时采用明细记录所有数据，当Value数量大于2048时采用TDigest算法，对数据进行聚合（聚类）保存聚类后的...
使用DTS同步
通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库数据（例如自建MySQL或RDS MySQL）同步到表格存储（Tablestore）实例，轻松实现数据的流转。前提条件 已创建RAM用户并为RAM用户授予AliyunOTSFullAccess权限（管理...
计费常见问题
OSS和NAS之间的数据迁移 如果您从阿里云NAS读写数据，当读写低频存储或归档存储的数据时，会产生低频存储或归档存储读写流量费用。更多信息，请参见 通用型NAS计费。如果您从阿里云OSS读写数据，则会产生OSS请求费用，该费用由OSS收取。更...
迁移HBase至Hologres
开发方式 应用开发复杂，需要将业务分析的指标、维度、表、聚合等概念，转化为存储的KeyValue概念，将应用层查询过滤场景翻译为对Key的字节过滤操作，系统效率严重依赖Key设计的质量。整个系统从数据录入到数据分析查询等复杂多样的场景，...
使用SDK时出现Validate PK name fail异常
现象 使用SDK查询数据时出现如下异常：Caused by:[ErrorCode]:OTSInvalidPK,[Message]:Validate PK name fail 原因 设置的主键名称和数据表的主键名称不一致，或者设置的主键顺序和数据表的主键顺序不一致。解决方案 设置的主键名称与主键...
局部事务
为数据表开启局部事务后，使用局部事务功能，您可以创建数据范围在一个分区键值内的局部事务并对局部事务中的数据进行读写操作。通过使用局部事务您可以实现单行或多行读写的原子操作。场景 使用局部事务功能，可以实现单行或多行读写的...
基本概念
存储空间（Bucket）存储空间是用户用于存储对象（Object）的容器，所有的对象都必须隶属于某个存储空间。存储空间具有各种配置属性，包括地域、访问权限、存储类型等。用户可以根据实际需求，创建不同类型的存储空间来存储不同的数据。同...
GetRange
其中每行的primary_key_columns和attribute_columns均只包含在columns_to_get中指定的列，其顺序不保证与请求中的columns_to_get一致；primary_key_columns的顺序也不保证与建表时指定的顺序一致。如果在请求中指定的columns_to_get不包含...
方案背景
通过Spark实现实时数据和离线数据处理并将聚合结果保存到表格存储的数据表中。实时流计算通过Spark Structured Streaming实时统计一个窗口周期内订单数量和订单金额的聚合结果。离线批计算通过Spark SQL离线聚合原始订单数据的总金额和用户...
索引介绍
表格存储的宽表模型包含多个主键列，多列主键列按照顺序共同构成一个主键，类似MySQL的联合主键，也可以把多个主键列拼接起来看作HBase的RowKey，每一列其实都只是整体主键的一部分。采用多列主键主要原因如下：业务常需要多个字段来构成...
通过命令行工具快速使用云存储网关软件版
说明 OSS Bucket中存储的数据需要单独计费。步骤一：下载云存储网关软件版安装包 当前最新版本：0.6.2。Linux操作系统 下载链接：Ubuntu 16.04：CsgAgent-latest-ubuntu1604.deb Ubuntu 18.04：CsgAgent-latest-ubuntu1804.deb Ubuntu 20....
AppendObject
版本控制 在目标Bucket处于开启或暂停版本控制状态下，对Appendable类型Object执行相关操作时，有如下注意事项：仅允许对当前版本为Appendable类型的Object执行追加上传（AppendObject）操作，且OSS不会为该Appendable类型的Object生成历史...
准备工作
用于访问表格存储服务，将原始数据和聚合结果写入表格存储的数据表中。说明 在表格存储中通过控制台或者SDK创建存储电商数据的原始订单表OrderSource，OrderSource表有两个主键UserId（用户ID）和OrderId（订单ID）和两个属性列price（价格...
创建时序表
示例 创建不带分析存储的时序表 以下示例用于创建test_timeseries_table时序表，且该表中数据永不过期。private static void createTimeseriesTable(TimeseriesClient client){ String tableName="test_timeseries_table;...
存储概览
存储概览主要包括存储，元数据对象的基本信息，还包括存储趋势、存储归档分布，表格式分布，小文件分布等信息，可以方便您快速了解当前存储资源使用情况及问题，并进行优化。前提条件 已经开通OSS产品。已经在DLF中完成 Location托管。存储...
创建时序表
当使用表格存储时序模型时，您需要使用CreateTimeseriesTable接口创建时序表用于存储时序数据。创建时序表时支持配置数据生命周期、时序时间线表的配置信息 和创建分析存储。分析存储可用于快速分析时序数据。前提条件 已通过控制台创建...
环境准备
使用Hive/HadoopMR来访问表格存储中的表前，您需要完成JDK、Hadoop环境、Hive环境、表格存储Java SDK和阿里云EMR SDK的安装。使用Hive/HadoopMR来访问表格存储中的表 通过 表格存储 及 E-MapReduce 官方团队发布的依赖包，可以直接使用Hive...
数据集成服务
当您的现有业务对数据库的并发读写、扩展性和可用性的要求较高，且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到...
表格存储的数据存储
表格存储对实例的数据总量按小时计费。由于用户的数据总量会动态变化，因此表格存储以固定的时间间隔统计表的数据总量大小，计算每小时数据总量的平均值，将平均值乘以单价进行计费。说明 单价可能会发生变化。更多信息，请参见 表格存储...
字符类型
如果要存储的串比声明的长度短，类型为 character 的值将会用空白填满；而类型为 character varying 的值将只是存储短些的串。如果我们明确地把一个值造型成 character varying(``n``)或者 character(``n``)，那么超长的值将被截断成 n 个...
二级索引简介
背景信息 表格存储的数据表是通过指定主键来实现表中数据的查询。但是，通常情况下很多应用可能需要通过数据表主键以外的属性对数据进行查询。为了解决此问题，您可以为数据表创建一个或多个二级索引，然后使用索引表查询数据。二级索引...
混合云备份HBR
抵扣顺序 HBR存储费用的抵扣顺序为：存储资源包>SCU＞按量计费 抵扣案例 陈先生2020年6月在华东1（杭州）购买了200 GB的备份库存储容量资源包和50 GB SCU，其6月份在华东1（杭州）地域标备份存储量为300 GB，则陈先生当月的存储费用抵扣...
多元索引限制
Mapping 创建多元索引时对字段长度、字段数量、字段类型映射、嵌套类型、表中字段等的使用限制。具体说明请参见下表。名称 最大值 说明 多元索引字段数量 500 可被索引的字段数。数组长度 256 数组中最多包含的元素个数。Nested嵌套层数 5 ...
文件存储NAS
抵扣顺序 NAS存储费用抵扣顺序为：存储包>资源包>SCU>按量付费 抵扣案例 陈先生2021年01月在华北2（北京）购买了500 GiB的通用型NAS资源包和100 GiB SCU，其01月份在华北2（北京）仅使用了容量型NAS，且容量型NAS每小时文件存储量为600 GiB...
- 产品推荐
- 这些文档可能帮助您