宽表模型介绍
多元索引适用于除数据表主键和二级索引之外的其他所有查询和分析场景，例如非主键列的条件查询、任意列的自由组合查询、关系查询、全文检索、地理位置查询、前缀查询、模糊查询、嵌套结构查询、Null值查询等。7 分析数据 通过SQL查询或者...
文档更新动态（2024年）
更新说明 通过表映射创建离线视图 通过SQL加工创建离线视图 通过表单加工创建离线视图 标签资产市场概述 创建及管理标签离线服务任务 分析平台-基于分析平台创建SQL查询/基于分析平台创建NoteBook Notebook和SQL查询支持访问MySQL、Oracle...
JindoCube使用说明
说明 Cache数据由Spark任务写到一个指定目录中，和普通的Spark写表或者写目录一样，对于Parquet、Json、ORC等数据格式，并发构建同一个Cache可能导致Cache数据不准确，不可用，应避免这种情况。如果无法避免并发构建、更新Cache，可以考虑...
JindoCube使用说明
说明 Cache数据由Spark任务写到一个指定目录中，和普通的Spark写表或者写目录一样，对于Parquet、Json、ORC等数据格式，并发构建同一个Cache可能导致Cache数据不准确，不可用，应避免这种情况。如果无法避免并发构建、更新Cache，可以考虑...
JindoCube使用说明
说明 Cache数据由Spark任务写到一个指定目录中，和普通的Spark写表或者写目录一样，对于Parquet、Json、ORC等数据格式，并发构建同一个Cache可能导致Cache数据不准确，不可用，应避免这种情况。如果无法避免并发构建、更新Cache，可以考虑...
JindoCube使用说明
说明 Cache数据由Spark任务写到一个指定目录中，和普通的Spark写表或者写目录一样，对于Parquet、Json、ORC等数据格式，并发构建同一个Cache可能导致Cache数据不准确，不可用，应避免这种情况。如果无法避免并发构建、更新Cache，可以考虑...
JindoCube使用说明
说明 Cache数据由Spark任务写到一个指定目录中，和普通的Spark写表或者写目录一样，对于Parquet、Json、ORC等数据格式，并发构建同一个Cache可能导致Cache数据不准确，不可用，应避免这种情况。如果无法避免并发构建、更新Cache，可以考虑...
JindoCube使用说明
说明 Cache数据由Spark任务写到一个指定目录中，和普通的Spark写表或者写目录一样，对于Parquet、Json、ORC等数据格式，并发构建同一个Cache可能导致Cache数据不准确，不可用，应避免这种情况。如果无法避免并发构建、更新Cache，可以考虑...
管理HTTPS监听的SSL证书
更新Ingress关联的Secret资源 典型场景 如果您需要更新当前ALB Ingress中已经生效的Secret资源，那么您可以直接编辑现有Secret资源的YAML配置文件，并将更新后的YAML文件应用至Kubernetes集群，这个操作会自动触发ALB Ingress Controller...
管理HTTPS监听的SSL证书
更新Ingress关联的Secret资源 典型场景 如果您需要更新当前ALB Ingress中已经生效的Secret资源，那么您可以直接编辑现有Secret资源的YAML配置文件，并将更新后的YAML文件应用至Kubernetes集群，这个操作会自动触发ALB Ingress Controller...
JindoCube使用说明
说明 Cache数据由Spark任务写到一个指定目录中，和普通的Spark写表或者写目录一样，对于Parquet、Json、ORC等数据格式，并发构建同一个Cache可能导致Cache数据不准确，不可用，应避免这种情况。如果无法避免并发构建、更新Cache，可以考虑...
列存索引中TopK算子的实现
通过一个简单的例子来说明上述算法：假设当前TopK查询中K=3，读取第一批数据后生成的sorted run为(1,2,10,15,21)，则cutoff value更新为10。接下来使用cutoff value=10过滤第二批数据，生成的第二个sorted run为(2,3,5,6,8)，则cutoff ...
向量计算概述
Proxima概念 Hologres中的概念 特征向量 数组类型Array，仅支持固定长度数组 向量索引 一种特殊类型的Index，当前仅支持KNN/RNN的Graph索引 距离计算 一种类型的UDF:proxima_distance()每种距离计算对应一个UDF KNN查询 order by distance...
使用场景
如果下面的任一条件为真，即便对一个给定查询通常可以产生并行查询计划，规划器都不会为它产生并行查询计划：查询要写任何数据或者锁定任何数据库行。如果一个查询在顶层或者 CTE 中包含了数据修改操作，那么不会为该查询产生并行计划。一...
PolarDB并行查询
这样就在各个Partition内，完成了co-located join，每个Hash Table都更小来避免落盘，此外也没有了build中的并发问题 子查询并行-pushdown exec 这里子查询是表达式中的一部分，可以存在于 select list/where/having 等子句中。对于相关子...
现代IM系统中的消息系统—实现
一方面方便群属性的展示，另一方面为应用做写扩散提供快速获取收件人列表的查询。因而在表设计上，我们会建议用户使用两列主键：第一列为群ID，第二列为用户ID。通过这样的设计，可以直接给予getRange接口拉取群所有用户的信息。群聊关系表...
新建及管理动态脱敏规则
写开发表：对来源表敏感数据的查询结果进行脱敏后再写入开发表中，防止生产环境的敏感数据泄露，特殊情况下，个人账号写Basic表则视为写开发表。数据查询：针对不参与生产环境调度的数据查询（如任务的一次性运行、即席查询、分析查询），...
新建及管理动态脱敏规则
写开发表：对来源表敏感数据的查询结果进行脱敏后再写入开发表中，防止生产环境的敏感数据泄露，特殊情况下，个人账号写Basic表则视为写开发表。数据查询：针对不参与生产环境调度的数据查询（如任务的一次性运行、即席查询、分析查询），...
如何基于LSM-tree架构实现一写多读
同时，为了产品化，充分发挥B+tree引擎和LSM-tree引擎的各自优势，还面临着新的挑战，即如何在一个数据库产品中同时实现两个存储引擎（InnoDB、X-Engine）的一写多读。PolarDB整体架构 PolarDB支持X-Engine引擎后，X-Engine引擎与InnoDB...
数据模型
一张表包括行（Row）和列（Column），Row即您数据表中的一行数据，Column用于描述一行数据中不同的字段。Column可以分为两大类：Key和Value。从业务角度看，Key和Value可以分别对应维度列和指标列。在SelectDB建表语句的列中，关键字 ...
ANALYZE
ANALYZE 收集一个数据库中的表的内容的统计信息，并且将结果存储在pg_statistic系统目录中。简介 ANALYZE 收集一个数据库中的表的内容的统计信息，并且将结果存储在pg_statistic系统目录中。接下来，查询规划器会使用这些统计信息来帮助...
如何将一棵LSM-Tree塞进NVM
全持久化 Low Fast 持久化索引的更新以及添加操作通常涉及PM中多个超过8字节的小的随机写入，因此引入用于维护一致性的开销以及随机写入导致的写放大问题。无持久化是指将PM当作DRAM使用，此种方法可以保证索引处于最高的性能，但掉电数据...
时序引擎版本说明
功能优化 修复SQL子查询语句中包含时序过滤属性的聚合结果未出现在父查询中时，查询失败的问题。修复查询内存释放问题。修复分区的TTL参数值被删除时元数据持久化的问题。实例默认开启tsproxy健康检查。实例默认开启慢查询管理。优化读写...
Search
TFT.ADDDOC TFT.ADDDOC index document[WITH_ID doc_id]向索引中插入一个文档（document），可通过 WITH_ID 指定该文档在索引内的唯一ID（doc_id），若doc_id已存在，则更新并覆盖原文档。若不指定 WITH_ID（默认），则自动生成doc_id。TFT...
OSS数据湖加速
基于阿里云数据湖构建（Data Lake Formation，DLF）和对象存储（Object Storage Service，OSS）推出的Hologres数据湖加速服务，提供了灵活的数据访问和分析能力以及高效的数据处理能力，显著加快了对OSS数据湖的查询和分析过程。...
更新或删除数据（UPDATE|DELETE）
MaxCompute支持通过 delete、update 操作，在行级别删除或更新Transactional表中的数据。本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 前提...
调优集群性能
如下图所示，某个大表分布不均，存储节点0上的Shard_0和Shard_1中数据量较大，而在存储节点1上的Shard_2和Shard_3中数据量较小，那么当您查询这个大表时，较大概率会出现存储节点0需要处理的数据多，存储节点1上需要处理的数据少的情况，...
管理健康报告
该健康报告提供了前一天（T+1）的数据，并包括SQL查询、表分析和导入任务三个核心部分。查看健康报告 进入EMR Serverless StarRocks实例列表页面。登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Serverless>StarRocks。在顶部菜单栏处，...
UPDATE
为了更新的速度尽可能的快，后台会先将数据写完，待异步Compaction时再执行压缩和整理，因此在数据更新过程中，会看到数据的存储会一定的膨胀，待数据更新之后，Compaction完成后实例存储用量会下降。Hologres高性能写入更新原理详情请参见...
什么是表格存储
表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、...
PolarDB MySQL版8.0.1版本发布日志
本文将详细介绍 PolarDB MySQL版 8.0.1版本的更新日志和全部的功能特性。8.0.1.1.41 类别 说明 发布时间 新增功能和性能优化 列存索引中新增基于TopK下推的Left Join功能。支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、FLUSH_...
查看NLB操作日志
排除条件查询 同时指定多个条件，将其中一个条件前面的语句修改为NOT即可排除该条件进行查询。如果需要查询操作审计中非Alex产生的事件，在搜索文本框输入 NOT event.userIdentity.userName:Alex。登录 网络型负载均衡NLB控制台。在左侧...
API概览
DescribeDiskReplicaPairs 查询一个或多个异步复制关系 查询指定地域下，一个或多个异步复制关系的信息。RemoveDiskReplicaPair 移除一致性复制组中的复制对 移除一致性复制组中的复制对。移除复制对只是解除了复制对和一致性复制组的绑定...
常见问题
ClickHouse每次写入都会生成一个data part，如果每次写入一条或者少量的数据，那会造成ClickHouse内部有大量的data part（会给merge和查询造成很大的负担）。为了防止出现大量的data part，ClickHouse内部做了很多限制，这就是too many ...
提交时间戳技术CTS
事务状态的迭代、获取、查询（可见性判断）等逻辑更加轻量化，同时PolarTrans将大部分的事务逻辑进行无锁优化，对于读写混合场景、纯写场景都有较大性能提升。PolarTrans CTS技术的核心数据结构为CTS log，事务状态迭代、可见性判断、事务...
配置读写分离
在主实例页面上，如果添加了只读实例，每个只读实例页面上会提供一个只读地址（Read Only Endpoint），专注离线拖数、跑批等资源链路隔离场景，确保只读资源可被独享。在HTAP场景下，购买了主实例和只读实例，您可以使用集群地址（Cluster ...
CREATE INDEX
在并发索引构建中，索引实际上在一个事务中被录入到系统目录，然后在两个事务中发生两次表扫描。在每一次表扫描之前，索引构建必须等待已经修改了表的现有事务终止。在第二次扫描之后，索引构建必须等待任何持有早于第二次扫描的快照的事务...
系统表说明
根据查询的状态（请参见 type 列），每个查询在查询日志表中创建一行或两行记录：如果查询执行成功，则会创建 type 为 QueryStart 和 QueryFinish 的两行记录信息。如果在查询处理期间发生错误，则会创建 type 为 QueryStart 和 ...
新版合并请求
云效Flow流水线完成 集成后，代码评审支持如下几个能力：代码评审展示的流水线的状态为实时回写，并会在页面自动完成更新。支持云效流水线运行详情的前端嵌入，提升使用体验。支持快捷跳转到云效流水线详情页。5.3.三方自动化检查服务集成 ...
查看ALB操作日志
排除条件查询 同时指定多个条件，将其中一个条件前面的语句修改为NOT即可排除该条件进行查询。如果需要查询操作审计中非Alex产生的事件，在搜索文本框输入 NOT event.userIdentity.userName:Alex。登录 应用型负载均衡ALB控制台。在左侧...
- 产品推荐
- 这些文档可能帮助您