数据源

2、离线存储的用户表、物品表、行为表为分区表,分区字段为 ds STRING 和 hh STRING。智能推荐引擎每小时会产出一个新分区,产出分区的 ds 和 hh 分别为前一小时的日期和小时。3、不建议您自行修改生命周期。如您因MaxCompute存储问题等...

备份与恢复

对于分区表而言,Restore整张表时,每个分区会单独Restore,从而产生独立的Version。操作命令 备份与恢复功能涉及的操作命令如下表所示。场景 命令 功能 权限说明 设置备份数据保留周期 setproject odps.timemachine.retention.days=days;...

概述

PolarDB 不仅兼容社区MySQL的分区表类型HASH、RANGE、LIST、RANGE-HASH、LIST-HASH,而且8.0.2.2.0及以上版本的组合分区功能还支持更多的分区表类型。本章节主要介绍了 PolarDB 支持的分区表类型,以及如何使用这些分区表类型。PolarDB ...

2022年

ZomboDB 2022年11月 缺陷修复 修复分区表部分列具有 UPDATE 但没有 SELECT 权限的用户可能会从错误消息中获取被拒绝列值的问题。缺陷详情请参见 CVE-2021-3393。2022年11月 V1.1.27 内核小版本 类别 名称 描述 相关文档 发布时间 新增 ...

错误码表(2.0版)

18033 Not support create table without tablegroup 建分区表时缺少表组子句,请参考DDL文档进行修改。18034 Wrong table options 建表指定的options子句中参数错误,请参考DDL文档进行修改。18035 PRIMARY KEY does not exist for real ...

写数据

前提条件 如果您需要写入分区表,则需要先创建待写入的分区表,再使用该组件写入数据,关于如何创建分区表,详情请参见 创建分区表。使用限制 支持的计算引擎为MaxCompute。可视化配置组件参数 Designer 仅支持通过可视化方式,配置该组件...

普通表快速转换为RANGE分区表

PolarDB 支持在不做数据重分布的情况下,可以使用该语法快速的将普通表转为RANGE分区表。本文将介绍 PolarDB 普通表快速转RANGE分区表的操作步骤。背景信息 PolarDB 普通表快速转RANGE分区表时,普通表的数据不经校验直接作为分区表的第一...

产品整体介绍

这些分区表可以是行存表,也可以是列存表,或者外表。比如业务上完全可以对最近需要写入的分区(Mar)使用行存表,过去已经归档的分区(Feb)使用列存表,出于降低成本考虑,也可以对较少查询的分区(Jan)使用OSS外表。数据库对象 ...

转换分区表

您可以通过 ALTER TABLE 命令修改分区属性,实现普通表和RANGE分区表与INTERVAL RANGE分区表之间的相互转换。前提条件 集群版本需为 PolarDB MySQL版 8.0版本且Revision version为8.0.2.2.0及以上。您可以通过 查询版本号 确认集群版本。...

功能发布记录

重构Auto Analyze能力,采用分布式Auto Analyze,支持外表Auto Analyze,支持湖仓加速集群Auto Analyze,支持分区表增量Auto Analyze,解决超大表,超宽列Analyze失败等问题,显著减少表缺少统计信息场景,执行计划更稳定,性能消耗更低,...

关联分析

关联左:选择相应的待关联的数据,左表一般为行为。左表分区字段:选择相应的ds字段,分区字段显示有两种形式 yyyymmdd 与 yyyy-mm-dd,可下拉选择显示的样式。左分析字段:选择需要分析的字段。关联右:选择相应的待关联的数据...

数据服务

字段信息 字段信息显示数据在所选存储数据库下的字段及信息,具体包括字段名、数据类型、字段描述、分区字段、数据质量以及告警信息。鼠标点击或移动至告警信息处,可显示该字段的所有规则。如下图所示,其中告警规则会以红色高亮显示。...

什么是子分区

子分区(SUBPARTITION)用于把分区表划分为更小的子集,这些子集会存储在相同或不同的服务器上。如果对一个分区划分了子分区,那么每个分区都至少有一个子分区。如果对一个表划分了子分区,那么数据不会存储在在任何分区表中,而是会存储于...

2022-09-19版本

MySQL整库同步Kafka 管理Kafka JSON Catalog Hologres结果表DDL定义分区表 创建对应Hologres结果表时可以通过PARTITION BY定义分区表。CREATE TABLE AS(CTAS)语句 Hologres维表支持异步请求的超时时间设置 通过设置异步请求的超时时间...

分区表管理(auto_partition)

AnalyticDB PostgreSQL版 支持将大表定义为分区表,并支持通过auto_partition插件对分区表进行自动删除或新增,当您进行条件查询时,系统只会扫描满足条件的分区,避免全表扫描,从而提升查询性能。新增分区的粒度包括小时,天,星期,月,...

ALTER TABLE…SPLIT SUBPARTITION

ALTER TABLE…SPLIT SUBPARTITION命令用于将子分区添加到现有的子分区表中。语法介绍 使用ALTER TABLE…SPLIT SUBPARTITION命令将一个子分区划分为两个子分区,并重新分配子分区的内容。ALTER TABLE…SPLIT SUBPARTITION命令有两种形式:第...

V5.4.x系列实例版本说明

修复 show create table 和 show global index 中GSI拆分规则显示错误的问题。修复某些情况下window函数计算错误的问题。修复JSON操作符->在表达式中的解析问题。发布日期:2022-07-04 大版本:V5.4.12 小版本:16569042 类别 说明 缺陷...

Logview诊断实践

例如,对分区表sales使用 insert into.values 命令新增2000个分区,如下所示:INSERT INTO TABLE sales partition(ds)(ds,product,price)VALUES('20170101','a',1),('20170102','b',2),('20170103','c',3),.;Fuxi作业执行结束,仍需要...

创建指标质量规则

数据更新触发调度:在一个代码任务执行时,会解析本次任务是否更新当前表和所属分区,并执行校验(非分区表只判断表是否更新);如果涉及到配置了该调度方式的表发生变更,则会开始执行质量规则。说明 适用于表的修改任务不固定或者是重点...

创建指标质量规则

数据更新触发调度:在一个代码任务执行时,会解析本次任务是否更新当前表和所属分区,并执行校验(非分区表只判断表是否更新);如果涉及到配置了该调度方式的表发生变更,则会开始执行质量规则。说明 适用于表的修改任务不固定或者是重点...

创建数据质量规则

数据更新触发调度:在一个代码任务执行时,会解析本次任务是否更新当前表和所属分区,并执行校验(非分区表只判断表是否更新);如果涉及到配置了该调度方式的表发生变更,则会开始执行质量规则。说明 适用于表的修改任务不固定或者是重点...

创建数据质量规则

数据更新触发调度:在一个代码任务执行时,会解析本次任务是否更新当前表和所属分区,并执行校验(非分区表只判断表是否更新);如果涉及到配置了该调度方式的表发生变更,则会开始执行质量规则。说明 适用于表的修改任务不固定或者是重点...

创建分区表

PolarDB PostgreSQL版 创建分区表的语法完全兼容PostgreSQL。本文详细介绍了其语法及创建不同类型分区表的示例。语法说明 CREATE TABLE[IF NOT EXISTS]table_name([{ column_name data_type[COMPRESSION compression_method][COLLATE ...

数据详情

状态以及操作 右上角展示了数据的状态以及...需注意的是,执行索引回滚处于回滚锁定的状态,全量调度将停止,直到用户解除锁定状态 回滚锁定状态下的,全量调度停止,用户修复问题可自己选择分区来手动触发全量,验证问题修复情况

节点/数据库//分区/二级分区

分区表(一级分区)HybridDB for MySQL中的表从建模的维度看,可以分为事实表(fact table)和维度表(dimension table),事实表是指分区表(通常是一级分区表),即需要被拆分到不同节点去存储的表,在建表的时候指定分区键就可以生成...

Hologres开发:周期性调度

因此,您可以将MaxCompute的分区表或非分区表导入Hologres的分区或非分区表,可以根据实际业务情况选择是否需要分区。前往DataWorks调度会产生一定的调度费用,详细收费情况,请参见 DataWorks资源组概述。如果需要实现写入更新,您需要...

设置逻辑质量规则

通过设置逻辑质量规则并运行质量检测计划,您可以查看逻辑质量检查结果,方便用户掌握当前逻辑的质量状况,您可以通过可视化方式与自定义SQL方式制定级与字段级质量规则。本文以可视化方式为例介绍如何设置逻辑表表规则和字段...

设置逻辑质量规则

通过设置逻辑质量规则并运行质量检测计划,您可以查看逻辑质量检查结果,方便用户掌握当前逻辑的质量状况,您可以通过可视化方式与自定义SQL方式制定级与字段级质量规则。本文以可视化方式为例介绍如何设置逻辑表表规则和字段...

创建逻辑模型:明细

明细用于存储大量能够体现业务活动状况的实际数据或详细数值,是数据聚合依据某个维度生成的结果。例如,分析产品销售情况,您可以创建销售明细,用来存储产品维度(作为外键)、时间维度(作为外键)以及销售总量。本文为您介绍...

pg_partitioned_table

列名称 列类型 描述 partrelid oid 这个分区表的 pg_class 项的OID。partstrat char 分区策略。取值范围如下:h:哈希分区表。l:列表分区表。r:范围分区表。partnatts int2 分区键中的列数。partdefid oid 这个分区表的默认分区的 pg_...

Colocation Join

当表为单分区表时,一个Bucket内仅有一个Tablet。如果是多分区表,则会有多个。为了使得Table能够有相同的数据分布,同一CG内的Table必须保证分桶列和分桶数相同:分桶列,即在建表语句中 DISTRIBUTED BY HASH(col1,col2,.)中指定的列。分...

ALTER(2.0版)

增加列 表创建好之后目前支持增加列。语法 ALTER TABLE table_name ADD column_name data_type;示例 商品表GOODS中增加一列num,类型为bigint。ALTER TABLE goods ADD num bigint;修改二级分区数 最大二级分区数可以...相关文章 二级分区表

创建MaxCompute投递任务(新版)

MaxComute分区表的分区不能为空。MaxCompute分区列必须要配置确定的字段(系统保留字段或日志内容的字段),旧版投递需要满足通过cast运算符将string类型字段值转换为对应分区列类型(若转换失败导致的空分区列,日志会在投递中被丢弃)。...

创建分区表

PolarDB PostgreSQL版(兼容Oracle)创建分区表的语法完全兼容PostgreSQL。本文详细介绍了其语法及创建不同类型分区表的示例。语法说明 CREATE TABLE[IF NOT EXISTS]table_name([{ column_name data_type[COMPRESSION compression_method]...

ePQ支持分区表查询

为了方便管理和提高查询性能,用户一般会使用分区表,将大表拆分成多张子分区表,每张子分区表又可以进一步拆分成二级子分区表,从而形成了多级分区表。支持弹性跨机并行查询,能够利用集群中多个计算节点提升只读查询的性能。ePQ不仅能够...

ePQ支持分区表查询

为了方便管理和提高查询性能,用户一般会使用分区表,将大表拆分成多张子分区表,每张子分区表又可以进一步拆分成二级子分区表,从而形成了多级分区表。PolarDB PostgreSQL版 支持弹性跨机并行查询,能够利用集群中多个计算节点提升只读...

创建逻辑模型:维度

维度创建,您可以将维度的属性添加为维度的字段,并对维度进行关联和分区的设置,使用统一的数据标准来进行字段设置,保障全数据域中的维度数据的属性是一致的。维度配置完成:可物化至存储引擎,后续在计算引擎中使用维度...

时序引擎版本说明

为提升用户体验,云原生多模数据库 Lindorm会不定期地发布版本,用于丰富云产品功能或修复已知缺陷。您可以参阅本文了解Lindorm时序引擎的版本更新说明,选择在业务低峰期升级实例的时序引擎版本。如何查看或升级实例的时序引擎版本 您可以...

Dataphin同步任务同步多层分区表

问题描述 用户需要将二级分区表同步至一级分区表,分区字段填写一个总是报错。解决方案 例如一级分区ds,二级分区city,可以如下图配置:适用于 Dataphin 同步任务

ACID语义

结束的UPDATE/DELETE作业对应的非分区表或分区被先结束的INSERT OVERWRITE/TRUNCATE作业修改。结束的MERGE小文件作业会报错。结束的MERGE小文件作业对应的非分区表或分区被先结束的INSERT OVERWRITE/TRUNCATE作业修改。INSERT INTO...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库自治服务 负载均衡 弹性公网IP 短信服务 人工智能平台 PAI 金融分布式架构
新人特惠 爆款特惠 最新活动 免费试用