RANK
计算排名。排名可能不连续。使用限制 窗口函数的使用限制如下：窗口函数只能出现在 select 语句中。窗口函数中不能嵌套使用窗口函数和聚合函数。窗口函数不能和同级别的聚合函数一起使用。命令格式 bigint rank()over([partition_clause]...
合并集合去重机制
告警管理系统接收到告警后，按照路由合并策略对符合条件的告警进行合并分组，并归到合并集合中。合并集合在经过抑制、静默、去重等操作后，被发送到行动（通知）管理系统中进行告警通知。路由合并规则 告警路由合并基于合并基准、行动策略...
概述
告警合并 告警合并是将具有相同特征的告警进行分组，便于进行统一通知或后续处理，在一定程度上避免告警风暴。更多信息，请参见 多种告警分组合并。告警静默 告警静默用于禁止一段时间内的告警通知。例如在特定时间内维护测试环境，会产生...
图表附录
表格 表格是基于 Ant Design 的表格组件做的封装，样式上支持如下配置：表头样式配置 合并多级表头，二级以上表头顺序调整 固定表头 列样式配置 列排序 列样式条件判断 左、右固定列 行大小与边框 自动合并相同内容 分页 使用原始数据 其中...
概述
支持的Sequence类型及其特性 PolarDB-X 1.0 目前共支持如下4种Sequence类型：类型（缩写）全局唯一 连续 单调递增 同一连接内单调递增 非单点 数据类型 可读性 单元化能力 Group Sequence（GROUP）是 否 否 是 是 所有整型 好 否 单元化 ...
从PolarDB MySQL版同步到Kafka
Kafka是应用较为广泛的分布式、高吞吐量、高可扩展性消息队列服务，普遍用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，是大数据生态中不可或缺的产品之一。通过数据传输服务DTS（Data Transmission Service），...
数据模型
对Aggregate模型而言，指定的所有Key列数据相同的行，多行数据会进行合并，Value列按照建表时字段定义中设置的AggregationType进行预聚合，最终只保留一行数据。这意味着Aggregate模型可以通过预聚合，极大地降低聚合查询时所需扫描的数据...
主键与唯一键（AUTO模式）
CREATE TABLE list_tbl(order_id bigint,city varchar(50),name text,PRIMARY KEY(order_id))PARTITION BY LIST(city)(PARTITION p1 VALUES IN("Beijing"),PARTITION p2 VALUES IN("Shanghai"),PARTITION p3 VALUES IN("Guangzhou"),...
对接MaxCompute常见问题与诊断
如果以上操作都做完了，还是导入不了，如果使用的是 insert on conflict 命令，请排查是否外表重复数据太多，重复数据太多也会导致导入性能不好，可以在MaxCompute做重复数据去重，再进行导入，详情请参见 多行数据合并为一行数据。...
PERCENT_RANK
计算排名。输出百分比格式。使用限制 窗口函数的使用限制如下：窗口函数只能出现在 select 语句中。窗口函数中不能嵌套使用窗口函数和聚合函数。窗口函数不能和同级别的聚合函数一起使用。命令格式 double percent_rank()over([partition_...
T+1多库合并建仓
背景信息 在数据库应用中，当单个关系型数据库RDS（Relational Database Service）的数据量越来越多时，相应的数据查询时间也会延长，影响用户体验。为保证业务可以继续使用RDS数据库，业务端通常会采用分库分表技术，将一个RDS数据库中的...
分区和列操作
alter table sale_detail add if not exists partition(sale_date='201910')partition(sale_date='201911')partition(sale_date='201912')partition(sale_date='202001')partition(sale_date='202002')partition(sale_date='202003')...
窗口函数
传统的Group By函数会按照分组后的查询结果进行聚合计算，且每个分组只输出一条数据。但与传统的Group By函数不同，窗口函数（也称OLAP函数）可以为每个分组返回多个值，且不会影响记录的数量。本文介绍如何使用窗口函数。使用限制 窗口...
Cassandra数据建模
本文介绍Cassandra数据建模的概念、建模建议。Cassandra是一款分布式、去中心化、高可用的列存储（Wide Column Store）的No SQL数据库。分布式层面主要依靠一致性Hash算法把数据分布在整个集群中，单机主要实现了基于LSM-Tree的引擎。集群...
分区合并
执行以下SQL将表组mytg1的p1、p2合并成一个新分区p12（意味着tb1和tb2的分区p1、p2会同步的合并成一个新分区p12）：ALTER TABLEGROUP mytg1 MERGE PARTITIONS p1,p2 TO p12 List/List column 分区表分区合并 对于list/list column分区策略...
从RDS同步至自建Kafka集群
Kafka是应用较为广泛的分布式、高吞吐量、高可扩展性消息队列服务，普遍用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，是大数据生态中不可或缺的产品之一。通过数据传输服务DTS（Data Transmission Service），...
数据变更最佳实践
建议如下：通过每条INSERT或者REPLACE语句写入的数据行数大于1000行，但写入的总数据量不宜太大，不超过16MB。通过批量打包方式写入数据时，单个批次的写入延迟相对会高一些。写入报错时，需要做重试确保数据被写入，重试导致的数据重复...
SELECT
GROUP BY从句 GROUP BY 分句对 SELECT 语句的输出进行分组，分组是匹配值的数据行。一个简单的 GROUP BY 分句可以包含由输入列组成的任何表达式或者或列序号（从1开始）。以下查询是等价的。他们都对 nationkey 列进行分组，第一个查询使用...
配置HDFS输出组件
同步其他数据源的数据至HDFS数据源的场景中，完成源数据的信息配置后，需要配置HDFS输出组件的目标数据源。本文为您介绍如何配置HDFS输出组件。前提条件 已创建HDFS数据源，如何创建，请参见 创建HDFS数据源。进行HDFS输入组件属性配置的...
窗口函数
窗口函数支持在一个动态定义的数据子集上执行聚合操作或其他计算，常用于处理时间序列数据、排名、移动平均等问题，本文为您介绍MaxCompute SQL支持的窗口函数的命令格式、参数说明及示例，指导您使用窗口函数完成开发。MaxCompute SQL支持...
分区表简介
本文详细介绍了 PolarDB PostgreSQL版 分区表功能的优势和特性。概述 在 PolarDB PostgreSQL版 数据库中，分区表(Partitioned Table)是将一个表或索引物理地分解为多个更小、更便于管理的部分，这个部分称为分区(Partition)。每个分区都是...
从ECS上的自建MySQL同步至自建Kafka集群
Kafka是应用较为广泛的分布式、高吞吐量、高可扩展性消息队列服务，普遍用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，是大数据生态中不可或缺的产品之一。通过数据传输服务DTS（Data Transmission Service），...
数据准备快速入门
数据准备（轻量ETL）可以将数据源表或者数据集中的数据进行清洗、聚合、关联和合并等操作，并将加工后的数据输出，让不会写SQL代码的业务人员能够低成本完成BI可视化数据的准备。常规流程为在数据源模块建立数据库连接后，开发者将数据源表...
从ECS上的自建MySQL同步至自建Kafka集群
Kafka是应用较为广泛的分布式、高吞吐量、高可扩展性消息队列服务，普遍用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，是大数据生态中不可或缺的产品之一。通过数据传输服务DTS（Data Transmission Service），...
分区表常见问题
对于大批量的数据，例如一张表一天有1000万行新数据，一个月就3亿行，PolarDB如何应对？请参见文档 INTERVAL RANGE 和 自动化管理分区。可以打开 在线分区维护 功能，在自动增加和删除分区时不阻塞其他分区上的DML操作。分区表支持事务吗？...
窗口函数
传统的Group By函数会按照分组后的查询结果进行聚合计算，且每个分组只输出一条数据。但与传统的Group By函数不同，窗口函数（也称OLAP函数）可以为每个分组返回多个值，且不会影响记录的数量。本文介绍如何使用窗口函数。前提条件 PolarDB...
通过DMS导入SQL文件失败
通过DMS将SQL文件导入云虚拟主机MySQL数据库时，提示 Duplicate entry '1' for key 'PRIMARY'。本文介绍这种情况的可能原因和解决方案。问题现象 通过DMS将SQL文件导入云虚拟主机MySQL数据库时，提示 Duplicate entry '1' for key 'PRIMARY...
Slowly Changing Dimension
业务数据随着时间在不断变化，如果您要对数据进行分析，则需要考虑如何存储和管理数据。其中数据中随着时间变化的维度被称为Slowly Changing Dimension（SCD）。E-MapReduce根据实际的数仓场景定义了基于固定粒度的缓慢变化维（G-SCD）。...
表数据格式
为了支持增全量存储和处理一体化架构，Transaction Table2.0（简称TT2）设计了统一的表数据组织格式，既可支持MaxCompute普通表的所有功能，同时也能很好的支持增量处理链路的新场景，包括time travel查询、upsert操作等。本文为您介绍...
基本概念
合并集合 用于存放被合并分组后的告警数据，包含一个或多个不同指纹的告警。在经过延迟、去重等操作后，合并集合被发送到通知（行动）管理系统中进行告警通知。告警事务（Alert incident）合并集合中的告警被发送到告警管理系统中，通过告...
CREATE TABLE
参与Join的两个表，按相同的分布键（Join列）进行数据分布，使得两个表相同键值的数据被分布到同一分片，可直接在同一分片进行Join操作，无需在分片之间进行数据传输，能够有效减少查询过程中的数据重分布，提升查询性能。例如，需要按照...
分区表简介
本文详细介绍了 PolarDB PostgreSQL版（兼容Oracle）分区表功能的优势和特性。概述 在 PolarDB PostgreSQL版（兼容Oracle）数据库中，分区表(Partitioned Table)是将一个表或索引物理地分解为多个更小、更便于管理的部分，这个部分称为分区...
分析数据
DataWorks的电子表格为您提供丰富、便捷的数据分析操作，其操作与Office Excel高度一致，大大降低您的学习成本。前提条件 已创建并导入数据至电子表格。详情请参见 创建电子表格 和 导入数据至电子表格。背景信息 您可以在电子表格的编辑...
分区表简介
本文详细介绍了 PolarDB PostgreSQL版（兼容Oracle）分区表功能的优势和特性。概述 在 PolarDB PostgreSQL版（兼容Oracle）数据库中，分区表(Partitioned Table)是将一个表或索引物理地分解为多个更小、更便于管理的部分，这个部分称为分区...
数据归档至专属存储
本文为您介绍如何将数据归档至专属存储中（存储在 DMS）、将专属存储的数据转存至OSS，以及删除归档至专属存储的数据等操作。前提条件 源数据库类型为：MySQL：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。说明 MySQL数据库账号...
窗口函数
您可以使用窗口函数对指定开窗列的数据灵活地进行分析处理工作。本文为您提供支持的窗口函数的命令格式、参数说明及示例，指导您使用窗口函数完成开发。支持的窗口函数如下。函数 功能 AVG 对窗口中的数据求平均值。CLUSTER_SAMPLE 用户...
常见问题
本文汇总了 云数据库ClickHouse 的常见问题及解决方案。选型与购买 云数据库ClickHouse和官方版本对比多了哪些功能和特性？购买实例时，推荐选择哪一个版本？单双副本实例各有什么特点？购买链路资源时显示“当前区域资源不足”，应该如何...
AUTO模式核心特性及典型场景
热点分裂——有效解决数据热点 对于热点数据，PolarDB-X 支持两种处理方式：第一种方案是将热点数据所在的分区数据迁移到特定的数据节点，让热点数据以独享存储资源的方式服务业务，能够实现热点数据不影响非热点数据的业务。具体操作步骤...
CUME_DIST
具体的返回值等于 row_number_of_last_peer/partition_row_count，其中：row_number_of_last_peer 指当前行所属GROUP的最后一行数据的ROW_NUMBER窗口函数返回值，partition_row_count 为该行数据所属分区的数据行数。示例数据 为便于理解各...
Binlog日志服务
记录级别 按照数据行的主键计算Hash值并进行分发，即对应同一数据行的binlog数据，会始终按序路由给同一个binlog数据流，适用于希望将数据充分打散且不要求日志数据按库或按表保持有序的场景，该策略要求数据表必须含有主键，无主键表的...
- 产品推荐
- 这些文档可能帮助您