表格存储建表注意事项
以为供应商提供服务为例，您有了一套基于表格存储的解决方案后，每加一个供应商就部署一组表格存储的表。这样，表的个数很快达到上限。如果您不断提高表个数的上限，会造成运维成本的不可控，也增加了后续全局数据分析的难度。建议在使用...
我是数采实施商
excel点表介绍 什么是模板表（全称为技术属性模板表）什么是设备表（全称为设备配置表）什么是点位表（用于离散点位管理）以一个例子来展开说明3张表的差异，假设工厂中通过PLC接入了 10个电机、1个机械臂，且10个电机在PLC协议地址空间中...
离线数据存储概述
平台系统表包括产品表、设备表、设备分组表、设备分组关系表、设备标签表和设备位置数据表。更多信息，请参见 查看平台系统表。时序表和快照表 您可以使用时序表和快照表，从产品 和IoT孪生引擎 维度，查看设备上报的物模型属性和事件数据...
配置冷存储
云原生多模数据库 Lindorm 搜索引擎支持配置表级别的冷存储功能，可以将表数据存储至冷存储介质中，从而降低存储成本。本文介绍搜索引擎配置冷存储的具体操作。前提条件 已下载并安装Search Shell，具体操作请参见 通过Search Shell连接并...
查看表和DB的存储大小
Hologres兼容PostgreSQL，当前支持查看表或者DB的存储大小。本文将会为您介绍如何使用SQL语句查看表和DB的存储大小。使用限制 仅支持查看内部表的存储规格大小，不支持直接查看分区父表（查看分区父表返回结果是0），需要指定分区子表进行...
数据总览
项目存储量除表存储量外，还会计算包括资源存储量、回收站存储量及其它系统文件存储量等在内，因此会大于表存储量。表的存储计费计算的是表的逻辑存储而非物理存储。热门表 根据数据地图表详情页访问PV，为您展示表访问量的排行榜。为实时...
数据分层存储
会返回多行，每行代表一张分区子表 分区子表：分区子表名 hot_size 热存储的大小，单位Byte cold_size 冷存储的大小，单位Byte status 状态：hot：数据在热存中 cold：数据在冷存中 transferring：数据正在搬迁 示例如下：非分区父表 ...
管理离线数据归档
时序/快照表中 的 产品属性时序表、产品事件表 自定义存储表 中的 分区表、时序表 数据归档存储成功后，在分析洞察的SQL数据服务工作台，无法再查询到对应的归档数据进行分析。如果需要在分析洞察中对已归档的数据进行查询和分析，可以撤销...
创建和管理自定义存储表
物联网平台数据服务提供离线数据存储功能，支持自定义分区表、事务表和时序表。自定义存储表可以作为数据服务中数据解析、SQL分析任务和数据可视化的数据源，可以作为数据解析、SQL分析任务的结果输出表，可以集成时序表数据到实时计算...
管理平台系统表和时序/快照表
您可以通过数据服务的离线数据存储功能，查看平台系统表、时序表和快照表。本文介绍查看平台系统表、时序表和快照表的操作步骤，及各存储表的数据内容。查看存储表 登录 物联网平台控制台。在 实例概览 页面，找到对应的企业版实例，单击...
存储概览
存储概览主要包括存储，元数据对象的基本信息，还包括存储趋势、存储归档分布，表格式分布，小文件分布等信息，可以方便您快速了解当前存储资源使用情况及问题，并进行优化。前提条件 已经开通OSS产品。已经在DLF中完成 Location托管。存储...
顺序消息
消息存储 如上图所示，顺序消息的Topic中，每个逻辑队列对应一个物理队列，当消息按照顺序发送到Topic中的逻辑队列时，每个分区的消息将按照同样的顺序存储到对应的物理队列中。消息消费 云消息队列 RocketMQ 版 按照存储的顺序将消息投递...
存储格式
当您创建一个表时，可以选择表的存储格式为行存表或者列存表。行存表 默认情况下，AnalyticDB PostgreSQL创建的是行存表。行存表使用和 PostgreSQL 相同的堆存储模型（Heap Table），在 OLTP 类型负载下表现最好：这种场景中，数据常由每次...
分层存储
如果访问数据量大或访问频次过多，可能会导致费用高于标准存储费用，例如：一个月全量访问一次低频存储的表或分区产生的费用，将等于标准存储的费用。六个月全量访问一次长期存储的表或分区产生的费用，将等于标准存储的费用。长期存储 ...
资源分析
治理对象 分数指标 打分规则 存储健康分 物理表和逻辑表的权重为：物理表总存储分*70%逻辑表总存储分*30%。物理表 单物理表分数 初始总分为100分。空物理表扣10分。废弃物理表扣40分。未管理的物理表扣20分。生命周期过长的物理表扣10分。...
快速玩转Tablestore入门与实战
本文为您介绍 表格存储 的适用场景以及可借鉴的开发指导、经典案例。通过本文提供的场景和应用案例，您可以更好地了解 表格存储 使用方式、设计思路、架构实现等，为您的方案选型提供参考依据。说明 本文中的经典场景都提供相应的实现代码...
资源分析
治理对象 分数指标 打分规则 存储健康分 物理表和逻辑表的权重为：物理表总存储分*70%逻辑表总存储分*30%。物理表 单物理表分数 初始总分为100分。空物理表扣10分。废弃物理表扣40分。未管理的物理表扣20分。生命周期过长的物理表扣10分。...
如何查看表的数据存储量
介绍如何查看表的数据存储量。操作步骤 通过控制台在数据表的 基本详情 页签，可以查看表大小，即表的数据存储量。通过控制台在数据表的 监控指标 页签，选择 指标分组 为 表大小，可以查看表大小，即表的数据存储量。
表格存储和传统关系型数据库（例如MySQL、SQL Server...
表格存储是阿里云自研的多模型结构化数据存储，提供海量结构化数据存储以及...相对于传统关系型数据库严格的SCHEMA，表格存储的表是稀疏的，每一行可以有不同的列，可以动态增加或者减少属性列，创建表时无需为表的属性列定义严格的SCHEMA。
方案实现
在Source表（order_source表）上执行批计算SQL命令，得到聚合结果，并将聚合结果分别写回表格存储的Sink表（OrderTotalSink表和OrderBatchSink表）中。执行批计算SQL语句更新用户维度的聚合结果。SQL命令。INSERT INTO order_batch_sink ...
对接Grafana
已为表格存储的数据表或者时序表创建映射关系。具体操作，请分别参见 创建表的映射关系 和 创建多值模型映射关系。首次使用时，请自行安装开源Grafana，且Grafana版本必须大于8.0.0。关于安装Grafana的具体操作，请参见 Grafana官方文档。...
数据展示
已为表格存储的数据表或者时序表创建映射关系。具体操作，请分别参见 创建表的映射关系 和 创建多值模型映射关系。首次使用时，请自行安装开源Grafana，且Grafana版本必须大于8.0.0。关于安装Grafana的具体操作，请参见 Grafana官方文档。...
命名规则和数据类型
通过本文您可以了解 表格存储 的表名和列名的命名规则，以及主键列和属性列支持的数据类型。命名规则 表名和列名必须符合以下规则。规范项 说明 组成 由英文字符（a~z）或（A~Z）、数字（0~9）和下划线（_）组成。首字母 必须为英文字母（a...
生产者负载均衡
策略原理：Hash算法 MessageGroupHash模式下，生产者发送消息时，以消息组为粒度，按照内置的Hash算法，将相同消息组的消息分配到同一队列中，保证同一消息组的消息按照发送的先后顺序存储。说明 Hash算法的具体原理，请参见 SipHash算法。...
时序分析存储概述
分析存储与时序表的数据存储相互独立，允许用户自定义数据的生命周期（TTL），对分析存储的查询操作不会对时序表的读写性能产生影响。分析存储能够自动同步时序表数据，在数据写入速率稳定的情况下，同步操作的延迟通常在10分钟内，如果...
查询时序表描述信息
使用DescribeTimeseriesTable接口，您可以查询时序表描述信息，例如数据生命周期（Time To Live，简称TTL）配置等。前提条件 已创建时序表。具体操作，请参见 创建时序表。已初始化TimeseriesClient。具体操作，请参见 初始化OTSClient。...
三元组转kv
本文为您介绍 Designer 提供的三元组转kv算法组件。三元组转kv算法组件用于将三元组表（row,col,value）转换为kv表（row,[col_id:value]）。三元组（row,col,value）表的数据类型为“XXD”或“XXL”，“X”表示任意数据类型，“D”表示...
迁移HBase至Hologres
开发方式 应用开发复杂，需要将业务分析的指标、维度、表、聚合等概念，转化为存储的KeyValue概念，将应用层查询过滤场景翻译为对Key的字节过滤操作，系统效率严重依赖Key设计的质量。整个系统从数据录入到数据分析查询等复杂多样的场景，...
数据写入时序表后是否可以立即查询到？
数据写入时序表后，根据使用的数据查询方式不同，查询延迟有区别。当通过 GetTimeseriesData 接口进行查询时，您可以立即查询到写入的数据。当通过SQL使用时序表的绑定关系进行查询时，对于已有时间线，您可以立即查询到写入的数据。如果是...
查询时序表描述信息
TimeseriesTable TTL:",describeTimeseriesTableResponse.GetTimeseriesTableMeta().GetTimeseriesTableOPtions().GetTimeToLive())/如果为时序表创建了分析存储，您可以使用如下代码获取时序表的分析存储信息。analyticalStores:=...
使用SDK时出现Validate PK name fail异常
现象 使用SDK查询数据时出现如下异常：Caused by:[ErrorCode]:OTSInvalidPK,[Message]:Validate PK name fail 原因 设置的主键名称和数据表的主键名称不一致，或者设置的主键顺序和数据表的主键顺序不一致。解决方案 设置的主键名称与主键...
顺序消息
如上图所示，消息组1和消息组4的消息混合存储在队列1中，云消息队列 RocketMQ 版 保证消息组1中的消息G1-M1、G1-M2、G1-M3是按发送顺序存储，且消息组4的消息G4-M1、G4-M2也是按顺序存储，但消息组1和消息组4中的消息不涉及顺序关系。...
通过SDK使用时序模型
通过SDK创建时序表后，您可以写入时序数据并对时间线进行检索以及查询时序数据。前提条件 已创建时序模型实例。具体操作，请参见 创建时序模型实例。已初始化TimeseriesClient。具体操作，请参见 初始化OTSClient。注意事项 时序模型功能将...
迁移工具
使用DataWorks/DataX、表格存储的通道服务等迁移工具，在不影响业务的情况下您可以实现表格存储数据的全量迁移、增量迁移或者实时同步。本文介绍如何选择迁移工具。迁移工具选择 迁移数据时，请根据实际业务选择合适的迁移工具。表格存储...
创建时序表
示例 创建不带分析存储的时序表 以下示例用于创建test_timeseries_table时序表，且该表中数据永不过期。private static void createTimeseriesTable(TimeseriesClient client){ String tableName="test_timeseries_table;...
创建时序表
示例 创建不带分析存储的时序表 以下示例用于创建一个时序表。CreateTimeseriesTableSample用于创建一个时序表，时序表名为timeseriesTableName，TTL为timeTolive。func CreateTimeseriesTableSample(client*tablestore.TimeseriesClient,...
数据集成服务
迁移过程中会使用到MySQL的Reader脚本配置和表格存储的Writer脚本配置，具体数据源配置如下：源数据源：MySQL数据源 目标数据源：Tablestore数据源 同步Oracle数据到表格存储 Oracle数据库中的数据只能迁移到表格存储的数据表中。...
环境准备
使用Hive/HadoopMR来访问表格存储中的表前，您需要完成JDK、Hadoop环境、Hive环境、表格存储Java SDK和阿里云EMR SDK的安装。使用Hive/HadoopMR来访问表格存储中的表 通过 表格存储 及 E-MapReduce 官方团队发布的依赖包，可以直接使用Hive...
存储空间分析
您可以在 AnalyticDB for MySQL 空间总览页面查看集群和表的总数据量、冷数据量、热数据量、索引数据量、分区数量、节点的磁盘使用率等指标。查看集群级别的数据量 通过 空间总览 可以查看当前集群的 总数据量、热数据量、冷数据量、以及 ...
数据湖投递概述
全量数据备份 数据湖投递可以自动将 表格存储 的全表数据投递到OSS Bucket中，作为备份归档数据。大规模实时数据分析 数据湖投递可以实时（每2分钟）投递增量的 表格存储 数据到OSS，投递的数据支持按系统时间分区、Parquet列存格式存储；...
- 产品推荐
- 这些文档可能帮助您