功能发布记录
2023年 2023年12月 功能名称 功能描述 发布时间 发布地域 相关文档 时序分析存储商业化 使用分析存储（Analytical Store）功能，您可以低成本存储时序数据以及快速查询和分析时序数据。分析存储功能主要用于时序数据长期存储和分析场景。...
概述
使用Spark计算引擎访问表格存储时，您可以通过E-MapReduce SQL或者DataFrame编程方式对表格存储中数据进行复杂的计算和高效的分析。应用场景 功能特性 对于批计算，除了基础功能外，Tablestore On Spark提供了如下核心优化功能：索引选择：...
如何对JSON类型进行高效分析
PolarDB MySQL版 本身是一个关系型数据库管理系统，其存储的数据通常是结构化数据，但也原生支持存储和查询半结构化数据，如XML和JSON格式数据。PolarDB IMCI也全面支持JSON数据类型及其列式函数，采用二进制JSON格式来存储半结构化数据，...
从RDS MySQL同步至Tablestore
表格存储（Tablestore）是阿里云自研的多模型结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库（例如自建MySQL或RDS MySQL）同步至Tablestore...
External Volume操作
External Volume是MaxCompute提供的分布式文件系统和非结构化数据存储方案，通过External Volume可以实现使用MaxCompute引擎查询及处理OSS上的文件数据，而无需将数据导入到MaxCompute的表中，从而减少数据的冗余和传输开销。本文为您介绍...
宽表模型设计
数据表结构 假设存储车辆元数据的数据表名称为vehicles_metadata，表结构请参见下表。说明 关于表设计的更多信息，请参见 表设计。字段名称 类型 描述 vin_id（主键列）String 车辆识别代码，即车架号，用于唯一标识车辆。v_color String ...
Serverless存储层
云原生数据仓库AnalyticDB MySQL版 采用计算存储分离的架构，通过云原生技术实现了池化，提供了...支持半结构化、非结构化数据的存储。提供全文检索能力。提供湖加速能力。通过智能采集湖上数据统计信息，改善湖上查询计划，加速湖查询。
DescribeDBClusterAttribute-查看PolarDB集群的详细...
3012558848 CompressStorageUsed long 压缩后的存储数据大小。说明 仅当集群开启存储压缩功能后支持返回该参数。15529410560 StorageSpace long 按空间计费（包年包月）的存储空间。单位：Byte。50 DBVersionStatus string 当前数据库小...
API概览
GetDrdsDbRdsRelationInfo 该接口用于查询 PolarDB-X 1.0 数据库存储实例结构。ModifyRdsReadWeight 该接口用于修改存储资源RDS的读写权重。ModifyPolarDbReadWeight 该接口用于修改存储资源PolarDB的读写权重。ResetDrdsToRdsConnections ...
存储空间概述
在上传数据（例如文档、图片、音视频等...✓×OSS ON云盒 OSS ON云盒为云盒（CloudBox）产品提供了非结构化数据本地存储、本地访问、以及本地处理的能力。您可以在OSS ON云盒中创建Bucket，并使用与公共云一致的API、SDK访问云盒中的OSS。✓×
云数据库 Memcache 版支持的数据结构？
云数据库 Memcache 版目前仅支持 Key-Value 的数据结构，暂不支持 List 等数据结构。
索引选择策略
表格存储作为海量结构化大数据存储，支持不同的索引结构，便于不同场景的查询分析加速使用。使用SQL查询功能时，您可以通过显式访问二级索引表进行索引查询。对于多元索引，表格存储提供了自动多元索引选择策略和显式访问多元索引两种方式...
新功能发布记录
您可以利用Object的元数据自定义索引的条件以快速获取Object列表，帮助您更好地管理与了解数据结构，方便您后续查询、统计和管理Object。2022-03-21 华东1（杭州）、澳大利亚（悉尼）数据索引 2022年01月 功能名称 功能概述 发布时间 支持...
GetDrdsDbRdsRelationInfo
调用GetDrdsDbRdsRelationInfo接口查询数据库存储实例结构。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
通用数据开发
数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的数据，存储在业务系统所对应的数据库中，包括MySQL、Oracle和RDS等类型。数据收集与存储：您需要同步不同业务系统的数据至MaxCompute中，方可通过MaxCompute的海量数据...
功能优势
为了让您对非结构化数据拥有更多的自主控制权，您可以把非结构化数据保存在OSS或者图片服务器上（下图使用OSS），非结构化数据的保存地址即URL存储在分析型数据库MySQL版中，整体架构如下所示。通过分析型数据库MySQL版控制台注册特征提取...
CountAggregation
请求数据结构 message CountAggregation { optional string field_name=1;} 名称 类型 是否必选 描述 field_name string 是 用于统计聚合的字段。响应数据结构 message CountAggregationResult { optional int64 value=1;} 名称 类型 是否...
使用SQL查询数据时如何选择查询方式
背景信息 表格存储作为结构化大数据存储，支持不同的索引结构，便于在不同场景的查询分析加速使用。索引结构包括通过数据表主键进行的单行读（GetRow）和范围读（GetRange）、自定义配置主键的二级索引表以及支持倒排索引和多维空间索引的...
GroupByFilter
请求数据结构 message GroupByFilter { repeated Query filters=1;optional Aggregations sub_aggs=2;optional GroupBys sub_group_bys=3;} 名称 类型 是否必选 描述 filters Query 是 过滤条件，返回结果的顺序和添加过滤条件的顺序一致。...
MatchAllQuery
表示全匹配查询配置。MatchAllQuery可以匹配所有行，常用于查询表中数据总行数，或者随机返回几条数据。数据结构 message MatchAllQuery { }
TopRowsAggregation
请求数据结构 message TopRowsAggregation { optional int32 limit=1;optional Sort sort=2;} 名称 类型 是否必选 描述 limit int32 是 每个分组内最多返回的数据行数，默认返回1行数据。sort Sort 否 分组内数据的排序方式。响应数据结构 ...
ReturnContent
返回的数据内容。数据结构 message ReturnContent { optional ReturnType return_type=1;} return_type:类型：ReturnType 描述：返回数据的类型。
SumAggregation
请求数据结构 message SumAggregation { optional string field_name=1;optional bytes missing=2;} 名称 类型 是否必选 描述 field_name string 是 用于统计聚合的字段。missing bytes 否 当某行数据中的字段为空时字段值的默认值，由...
MinAggregation
请求数据结构 message MinAggregation { optional string field_name=1;optional bytes missing=2;} 名称 类型 是否必选 描述 field_name string 是 用于统计聚合的字段。missing bytes 否 当某行数据中的字段为空时字段值的默认值，由...
MaxAggregation
请求数据结构 message MaxAggregation { optional string field_name=1;optional bytes missing=2;} 名称 类型 是否必选 描述 field_name string 是 用于统计聚合的字段。missing bytes 否 当某行数据中的字段为空时字段值的默认值，由...
Aggregations
表示统计聚合配置。数据结构 message Aggregations { repeated Aggregation aggs=1;} 名称 类型 是否必选 描述 aggs Aggregation 是 单个统计聚合功能配置。
AvgAggregation
请求数据结构 message AvgAggregation { optional string field_name=1;optional bytes missing=2;encoded as SQLVariant,check in SearchProxy } 名称 类型 是否必选 描述 field_name string 是 用于统计聚合的字段。missing bytes 否 当...
RowsSerializeType
时序数据的行序列化类型。枚举数据结构 enum RowsSerializeType { RST_FLAT_BUFFER=0;} RST_FLAT_BUFFER表示使用flatbuffer的序列化方式。
DistinctCountAggregation
请求数据结构 message DistinctCountAggregation { optional string field_name=1;optional bytes missing=2;} 名称 类型 是否必选 描述 field_name string 是 用于统计聚合的字段。missing bytes 否 当某行数据中的字段为空时字段值的默认...
GroupBys
表示多元索引返回结果的分组配置。数据结构 message GroupBys { repeated GroupBy group_bys=1;} 名称 类型 是否必选 描述 group_bys GroupBy 是 单个分组配置。
步骤三：配置节点运行配置
当输出数据结构为具体的模型结构且数据资源类型为MaxCompute、Hive、AnalyticDB PostgreSQL、PostgreSQL时，系统会自动生成节点的输出物理表，当需要修改时，可打开 自定义输出 以后修改。生产环境 物理表所在资源 生产环境中节点输出使用...
步骤三：配置节点运行配置
当输出数据结构为具体的模型结构且数据资源类型为MaxCompute、Hive、AnalyticDB PostgreSQL、PostgreSQL时，系统会自动生成节点的输出物理表，当需要修改时，可打开 自定义输出 以后修改。生产环境 物理表所在资源 生产环境中节点输出使用...
Query
表示查询条件。数据结构 message Query { optional QueryType type=1;optional bytes query=2;} 名称 类型 是否必选 描述 type QueryType 是 查询类型。query bytes 是 查询信息，由protobuf编码。
AnalyticalStoreSyncStat
数据结构 message AnalyticalStoreSyncStat { optional AnalyticalStoreSyncType sync_phase=1;同步状态。optional int64 current_sync_timestamp=2;最新同步时间。} 名称 类型 描述 sync_phase AnalyticalStoreSyncType 最新同步状态。...
VariantType
字符串转换后的数据类型。枚举数据结构 enum VariantType { VT_INTEGER=0;VT_DOUBLE=1;VT_STRING=3;} VT_INTEGER：整型。VT_DOUBLE：双精度浮点型。VT_STRING：字符串类型。
StreamRecord
数据结构 message StreamRecord { required ActionType action_type=1;required bytes record=2;} action_type:类型：required ActionType 描述：表示该行的操作类型。record:类型：required bytes 描述：表示该行的数据内容。相关操作 ...
IndexInfo
数据结构 message IndexInfo { optional string table_name=1;optional string index_name=2;} 名称 类型 是否必选 描述 table_name string 是 数据表名称。index_name string 是 多元索引名称。相关操作 ListSearchIndex
TimeseriesKey
数据结构 message TimeseriesKey { required string measurement=1;required string source=2;required string tags=3;} 名称 类型 是否必选 描述 measurement string 是 度量名称。source string 是 数据源标识。tags string 是 标签信息...
新建Spark Batch类型的公共节点
如果节点文件和脚本中有要求输入，则打开 节点输入 后面的 开关，单击 添加节点输入，添加节点输入，自定义填写输入标识并选择输入数据结构。如果节点脚本中有要求输出变量，则打开 节点输出 后面的 开关，单击 添加节点输出，添加节点输出...
Sort
在多元索引中表示索引预排序方式或者返回结果的...数据结构 message Sort { repeated Sorter sorter=1;} 名称 类型 是否必选 描述 sorter Sorter 是 排序设置。取值范围为字段值排序、地理位置排序、分数排序和主键排序。默认按照主键排序。
- 产品推荐
- 这些文档可能帮助您