数据重排
在MaxCompute的使用过程中，如果已经积累了大量数据占用了大量存储资源，且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理，在您的存储预算有限，计算资源还有冗余的情况下，可以考虑使用数据重排方式对存储空间进行优化。...
查看表和DB的存储大小
使用限制 仅支持查看内部表的存储规格大小，不支持直接查看分区父表（查看分区父表返回结果是0），需要指定分区子表进行查看。如果查询到表的规格大小是0，则返回空值。仅Hologres V1.3.24及以上版本支持使用 pg_relation_size 函数查看...
读取数据
接口/返回表中的一行数据。param GetRowRequest 执行GetRow操作所需参数的封装。return GetRowResponse GetRow操作的响应内容。GetRow(request*GetRowRequest)(*GetRowResponse,error)参数 参数 说明 TableName 数据表名称。PrimaryKey 行...
OSS小时数据
取值如下：standard：标准存储-本地冗余 IA：低频访问-本地冗余 archive：归档存储-本地冗余 coldarchive：冷归档存储 deepcoldarchive：深度冷归档存储 standard-zrs：标准存储-同城冗余 IA-zrs：低频访问-同城冗余 archive-zrs：归档存储...
如何查看表的总行数
使用多元索引的 全匹配查询 接口，毫秒级返回表中总行数。使用多元索引的 统计聚合 接口，毫秒级返回表中总行数。使用SQL查询 重要 如果要使用SQL查询功能，请先创建表的映射关系。具体操作，请参见 创建表的映射关系。执行如下SQL语句查询...
通配符查询
} },getTotalCount:true/结果中的TotalCount可以表示表中数据的总行数，默认为false，表示不返回表中数据的总行数。},columnToGet:{/返回列设置，可设置为RETURN_SPECIFIED（自定义返回列）、RETURN_ALL（返回所有列）、RETURN_ALL_FROM_...
如何统计冷存数据
参数名称 描述 relname 表或索引名称 polar_osfs_table_size 此函数返回指定表（不包括其索引）在OSS上所占用的总空间，包括表数据本身、TOAST 数据以及任何相关的 free space map(FSM)和 visibility map(VM)文件，功能上与本地盘存储的 ...
通配符查询
GetTotalCount 是否返回匹配的总行数，默认为false，表示不返回表中数据的总行数。设置GetTotalCount为true后会影响查询性能。ColumnsToGet 是否返回所有列。包含ReturnAll和Columns以及ReturnAllFromIndex设置。ReturnAll默认为false，...
数据分层存储
分区表 创建分区表的存储策略 分区表也可以通过 SET_TABLE_PROPERTY 来设置表的存储策略，分区子表默认继承父表的存储属性，也可以分别设置父表和子表的存储策略。支持的选项有：hot（热存储）。cold（冷存储）。例如将分区父表（tbl2）...
通配符查询
get_total_count 是否返回匹配的总行数，默认为false，表示不返回表中数据的总行数。设置get_total_count为true后会影响查询性能。query_type 设置查询类型为 QueryTypeConst:WILDCARD_QUERY。field_name 列名称。value 带有通配符的字符串...
存储过程
返回信息如下：id-1(1 row)通过上述存储过程执行结果可以看到表 table_a 相关事务提交，成功建表并写入数据；而表 table_b 相关的事务在存储过程中被回滚。示例二 本示例将分别在存储过程和函数中执行一个循环任务并回收表的存储空间，以...
通过控制台使用多元索引
如果实际业务中要用到非主键列查询、多条件组合查询等多种查询功能，您可以通过控制台为数据表创建多元索引，然后使用多元索引查询数据。前提条件 已创建数据表，且数据表的最大版本数（max Versions）必须为1，数据生命周期（Time to Live...
配置冷存储
云原生多模数据库 Lindorm 搜索引擎支持配置表级别的冷存储功能，可以将表数据存储至冷存储介质中，从而降低存储成本。本文介绍搜索引擎配置冷存储的具体操作。前提条件 已下载并安装Search Shell，具体操作请参见 通过Search Shell连接并...
批计算谓词下推配置
如果a=10返回的结果只有1000条，b返回的结果有一亿条，则在存储层将1000条结果与一亿条结果做合并比较耗时，此时把b提到计算层，Spark只需要对存储层返回的1000条数据作过滤，大大降低了存储层的压力。谓词支持 Spark谓词支持情况请参见下...
离线数据存储概述
离线数据包括平台系统表、时序表、快照表和自定义存储表。本文介绍不同类型存储表的基本功能和应用场景。前提条件 已备份数据，具体操作，请参见 数据备份。应用场景 除了查看数据外，数据存储中的存储表，可应用于以下功能。作为查询对象...
创建和管理自定义存储表
物联网平台数据服务提供离线数据存储功能，支持自定义分区表、事务表和时序表。自定义存储表可以作为数据服务中数据解析、SQL分析任务和数据可视化的数据源，可以作为数据解析、SQL分析任务的结果输出表，可以集成时序表数据到实时计算...
Jindo sql命令介绍
jindo sql-d access_log_path=oss:/test-sh/oss-accesslog-d partition.table.enabled=true 代码中的 access_log_path 为OSS访问日志存储路径，partition.table.enabled 指定是否为分区表，true表示为分区表。常见问题 Q：如何修改初始资源...
Jindo sql命令介绍
jindo sql-d access_log_path=oss:/test-sh/oss-accesslog-d partition.table.enabled=true 代码中的 access_log_path 为OSS访问日志存储路径，partition.table.enabled 指定是否为分区表，true表示为分区表。常见问题 Q：如何修改初始资源...
Jindo sql命令介绍
jindo sql-d access_log_path=oss:/test-sh/oss-accesslog-d partition.table.enabled=true 代码中的 access_log_path 为OSS访问日志存储路径，partition.table.enabled 指定是否为分区表，true表示为分区表。常见问题 Q：如何修改初始资源...
Presto Server配置和SQL示例
返回示例如下：USE 映射表相关操作 创建映射表后，您可以根据需要执行获取指定Schema中表列表、查看指定表的元数据和删除映射表操作。获取Schema中表列表 使用Schema后，获取已创建的表列表。show tables;返回示例如下：Table-exampletable...
错误处理
getOTSErrorCode()：表格存储返回的错误类型字符串。常见错误请参见 错误码参考。getOTSErrorMessage()：表格存储返回的错误详细描述。getRequestId()：用于唯一标识此次请求的UUID。当您无法解决问题时，记录此RequestId并 提交工单。
迁移工具
将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...
基础数据操作
创建时序表后，您可以通过PutTimeseriesData接口或者时序Writer工具写入时序数据，您还可以迁移 MySQL或 Kafka数据源的数据到表格存储时序表。时序数据写入到时序表后，您可以使用QueryTimeseriesMeta接口检索时间线以及使用...
查询可恢复表格存储实例的数据表
查询可恢复表格存储实例的数据表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 ...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
高级管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
CreateDataFlow-创建数据流动
创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中，才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
数据复制
本文介绍如何在 开源大数据平台 EMR（E-MapReduce）集群上，使用Spark3将 表格存储 中一张表的数据复制到另一张表中，全程使用SQL语句实现表的创建以及数据的复制操作。前提条件 已创建 EMR 集群。具体操作，请参见 创建EMR集群。重要 创建...
方案设计
传统方案中主要是通过MySQL等关系型数据库来存储，在本方案中我们通过单独的meta表来存储，并通过表格存储的多元索引功能来实现多条件的组合查询和多种排序方式，相比传统方案更加易用。在查询格点数据之前，一般要知道格点数据中各维度的...
表格存储中表、行、列、值和电子表格的类比
表格存储中的表存储着用户的结构化数据。用户可以在表中查询、插入、修改和删除数据。一个用户可以拥有多个表。数据在表中以行、列、值的形式来组织。上图展示了表格存储中表及其它概念与电子表格的类比：表：类似电子表格中底端的标签，...
错误处理
get_error_code：表格存储返回的错误类型字符串。get_error_message：表格存储返回的错误消息字符串。get_request_id：用于唯一标识此次请求的UUID。当您无法解决问题时，记录此requestId并 提交工单。重试 SDK中出现错误时会自动重试。...
错误处理
ErrorCode：表格存储返回的错误类型字符串。ErrorMessage：表格存储返回的错误消息字符串。RequestId：用于唯一标识该次请求的 UUID。当您无法解决问题时，可以凭这个 RequestId 来请求表格存储开发工程师的帮助。重试 SDK 中出现错误时会...
SQL查询介绍
由于表格存储中原始表的列名大小写敏感，当使用SQL时，原始表的列名会统一转换为小写字母进行匹配，即如果要操作表格存储表中的Aa列，在SQL中使用AA、aa、aA、Aa均可，因此表格存储原始表的列名不能同时为AA、aa、aA和Aa。目前支持使用SQL...
对接DataV
通过DataV控制台添加表格存储数据源后，您可以使用DataV可视化展现表格存储的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时...
功能发布记录
本文介绍了表格存储每次发布涉及的功能变更及对应的文档，帮助您了解 表格存储 的发布动态。2023年 2023年12月 功能名称 功能描述 发布时间 发布地域 相关文档 时序分析存储商业化 使用分析存储（Analytical Store）功能，您可以低成本存储...
表格存储建表注意事项
表格存储支持半结构化的表，即建表时只需要指定主键列（1至4列），不需要在创建表的时候指定属性列。表格存储表中包含的属性列个数无限制，且每一行数据可以拥有不同数量不同类型的属性列。在应用程序写入数据时，表格存储需要应用程序指定...
JSON函数
路径选择器 返回值${"a":1,"c":{"d":4},"f":[1,2,3]}$.a 1$.c {"d":4}$.c.d 4$.f[1]2 对于key中含有空格的情况，假设要查询的JSON Object对象如下：{"a fish":"shark","a bird":"sparrow"} 不同路径选择器配置时的返回值说明请参见下表。...
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
在文件存储 HDFS 版上使用Presto
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。...如果返回信息与创建表中的信息一致，则表示Presto可读取 文件存储 HDFS 版 上的数据并计算。
快速玩转Tablestore入门与实战
基础入门-五分钟入门 如何免费使用一款免运维、无限容量的表存储服务 Tablestore数据模型-WideColumn和Timeline 亿级消息系统的核心存储：Tablestore发布Timeline 2.0模型 Tablestore Timestream：为海量时序数据存储设计的全新数据模型 ...
- 产品推荐
- 这些文档可能帮助您