深度解析PolarDB数据库并行查询技术

此SQL的并行执行计划如下图所示:从计划中可以看出orders会进行并行扫描,由32个workers线程来执行,每个worker只扫描orders的一部分数据分片,然后与customer按o_custkey做index lookup进行JOIN,JOIN的结果发送到一个collector组件...

名称解释

分区(一级分区)HybridDB for MySQL中的从建模的维度看,可以分为事实(fact table)和维度(dimension table),事实是指分区(通常是一级分区),即需要被拆分到不同节点去存储的,在建的时候指定分区键就可以生成...

DDL操作常见问题

可以重新创建一张分区,使用动态分区SQL将源数据导入至新分区,详情请参见 插入或覆写动态分区数据(DYNAMIC PARTITION)。如何查看指定的分区是否存在?可以使用函数PARTITION_EXISTS查看指定的分区是否存在,更多函数信息,请...

专家权限模型

可以使用如下几种方法授予某个用户或多个用户删除的权限:替换新用户为的Owner。ALTER TABLE TABLENAME OWNER TO"云账号/云邮箱;授予新用户Superuser权限。ALTER USER"云账号/云邮箱"SUPERUSER;添加多个用户至用户组并授予Owner...

DROP TABLE

注意事项 请谨慎操作,确认表可以删除后,再执行删除操作。如果误删了,当项目开启了备份恢复功能,且删除操作未超过项目设置的备份数据保留天数时,则可以恢复。更多备份恢复信息,请参见 备份与恢复。删除之后,MaxCompute项目的...

操作

数据表可以有多个,您可以根据自身的场景需求将数据写入到不同的中,例如按数据精度分表。元数据只能有一个,所有数据的元数据信息全部记录到同一张中。Timestream提供了元数据和数据的创建和删除功能。元数据 创建元数据...

发布

发布是从一个或者一组生成的改变的集合,也可以被描述为更改集合或者复制集合。简介 发布可以被定义在任何物理复制的主服务器上。定义有发布的节点被称为发布者。发布是从一个或者一组生成的改变的集合,也可以被描述为更改集合...

统计

配置统计结构,用于导入统计数据。统计记录用户执行相关操作的统计数据。基于统计数据,可以进行 人群筛选。前提条件 已在您配置的 计算源 中存储统计,数据格式请参考 统计数据要求。确保您的统计中的所有用户ID类型均已在...

一致性修复

一致性修复功能用于对比不同之间的结构,找出差异并在目标执行差异脚本,以保障不同之间的结构一致性。应用场景 多套不同环境之间进行结构对比,以保障不同环境之间的结构一致性。例如,确保测试环境与生产环境的结构...

创建加密

创建数据时您可以配置数据加密。表格存储提供基于密钥管理服务(Key Management Service,简称KMS)密钥加密和基于自带密钥(Bring Your Own Key,简称BYOK)自定义密钥加密两种加密方式,请根据实际需要选择。前提条件 已通过表格存储...

新建元

是通过数据管理的跨存储类型,开发过程中所用到的输入、输出、维表可以通过创建元进行创建和管理。本文为您介绍如何新建元。功能优势 元具有以下优势:安全可靠:通过元表可以有效避免直接编写原生Flink DDL语句导致的敏感...

新建元

是通过数据管理的跨存储类型,开发过程中所用到的输入、输出、维表可以通过创建元进行创建和管理。本文为您介绍如何新建元。功能优势 元具有以下优势:安全可靠:通过元表可以有效避免直接编写原生Flink DDL语句导致的敏感...

订单明细

配置订单明细结构,用于导入订单明细数据。基于订单明细数据,可以进行 人群筛选,还可以生成 RFM模型、偏好类标签 等自定义标签,RFM模型可用于 RFM分析、人群筛选 等。前提条件 已在您配置的 计算源 中存储订单明细,数据格式请...

-轨迹数据同步

和轨迹表可以实时同步,但会影响点的写入性能。手动同步SQL示例:说明 手动同步时,需要在点上增加一列以标记此点是否已经同步到轨迹。在点增加一列标记是否同步,并建立索引 ALTER TABLE sample_points ADD COLUMN sync bool ...

-轨迹数据同步

和轨迹表可以实时同步,但会影响点的写入性能。手动同步SQL示例:说明 手动同步时,需要在点上增加一列以标记此点是否已经同步到轨迹。在点增加一列标记是否同步,并建立索引 ALTER TABLE sample_points ADD COLUMN sync bool ...

-轨迹数据同步

和轨迹表可以实时同步,但会影响点的写入性能。手动同步SQL示例:说明 手动同步时,需要在点上增加一列以标记此点是否已经同步到轨迹。在点增加一列标记是否同步,并建立索引 ALTER TABLE sample_points ADD COLUMN sync bool ...

表可以被看作为事件的集合,随着时间的推移,事件不断被添加到中,因此该集合是无边界的。流支持设置数据过期时间,默认为7天。流中的时间属性:表示在某一时间、某个地点、某人发生了某一事件。时间属性包含了摄取时间、事件时间...

转换分区

可以通过 ALTER TABLE 命令修改分区属性,实现普通和RANGE分区与INTERVAL RANGE分区之间的相互转换。前提条件 集群版本需为 PolarDB MySQL版 8.0版本且Revision version为8.0.2.2.0及以上。您可以通过 查询版本号 确认集群版本。...

Hologres整库周期性增全量同步至MaxCompute

目标端不存在的表可以单击 目标名 列的 按钮编辑目标结构,例如,为目标添加字段,设置主键等。目标端已有仅支持查看。还支持您全选 目标映射 框中的信息,单击 批量刷新映射 按钮,进行批量映射刷新。同步前清空目标。...

AnalyticDB for MySQL3.0整库周期性增全量同步至...

目标端不存在的表可以单击 目标名 列的 按钮编辑目标结构,例如,为目标添加字段,设置主键等。目标端已有仅支持查看。还支持您全选 目标映射 框中的信息,单击 批量刷新映射 按钮,进行批量映射刷新。同步前清空目标。...

用户行为

配置用户行为结构,用于导入用户行为数据。用户行为记录用户的浏览、加购、收藏、购买等行为。基于用户行为数据,可以进行 人群筛选,还可以生成 AIPL模型、偏好类标签 等自定义标签,AIPL模型可用于 AIPL用户分析、AIPL流转分析、...

存储格式定义

可以根据使用场景,在建时选行存(适合数据更新较频繁或采用INSERT方式的实时写入的场景)或列存(适合少量列的数据查询、聚集等数据仓库应用场景)。行存 默认情况下,AnalyticDB PostgreSQL版 创建的是行存(Heap Table),...

继承

在本数据库中,一个表可以从 0 个或者多个其他继承,而对一个的查询则可以引用一个的所有行或者该的所有行加上它所有的后代表。默认情况是后一种行为。例如,下面的查询将查找所有高度高于 500 尺的城市的名称,包括州首府:SELECT...

外部概述

MaxCompute支持使用外部功能查询和...相关文档 MaxCompute支持OSS、Hologres及RDS等多种外部,具体请参见 OSS外部、Tablestore外部、Hologres外部、RDS外部、Paimon外部。外部的常见问题及解决方式请参见 外部常见问题。

独立部署V4.0.0版本说明

新版数据类型 旧版数据集底类型 用户标签 用户标签 用户行为 用户行为 订单汇总 RFM模型——客户数据 订单明细 RFM模型——交易数据 统计-AIPL模型 功能差异 V4.0.0在功能用法上进行了一些改进,以下列出几个较大...

存储格式

当您创建一个时,可以选择的存储格式为行存或者列存。行存 默认情况下,AnalyticDB PostgreSQL创建的是行存。行存使用和 PostgreSQL 相同的堆存储模型(Heap Table),在 OLTP 类型负载下表现最好:这种场景中,数据常由每次...

用户标签

配置用户标签结构,用于导入用户标签数据。用户标签记录用户的一系列特征属性。通过为字段配置标签别名的方式给用户打标签,在使用标签时,实质上是在使用对应的字段。基于用户标签数据,可以形成 用户画像,可以进行 透视分析、人群...

分布

使用场景 是否使用分区可以通过以下几个方面进行考虑:数据量是否足够大:通常对于大的事实,比如数据量有几千万或者过亿,可以考虑使用分区,但数据量大小并没有一个绝对的标准可以使用,一般是根据经验,以及对目前性能是否...

基于原生DDL语句创建元

开发过程中所用到的输入、输出、维表可以通过创建元方式来进行创建和管理,以支持您通过引用元的方式来创建其他数据。有效解决原生DDL开发方式的研发路径复杂,密码明文记录,安全性差,研发效率低等问题。更多信息,请参见 ...

基于原生DDL语句创建元

开发过程中所用到的输入、输出、维表可以通过创建元方式来进行创建和管理,以支持您通过引用元的方式来创建其他数据。有效解决原生DDL开发方式的研发路径复杂,密码明文记录,安全性差,研发效率低等问题。更多信息,请参见 ...

自定义召回模型

注意:此项功能仅支持高级版实例,创建高级版实例将默认打开如下服务:如上服务将用于高级版自定义召回模型的搭建、存储、计算等。如果您希望新增自定义召回模型,需要:第一步:通过离线算法平台创建AI工作空间;第二步:通过离线算法...

管理

创建 DDM提供两种创建(实体)的方式:右键单击模型树节点,在弹出的菜单中选择 新建。单击工具栏的 实体/,移动光标到主模型设计区域时会变成虚线矩形图,单击鼠标左键即可在该位置完成添加的操作。编辑 右键单击模型设计区...

创建和管理自定义存储

自定义存储表可以作为数据服务中数据解析、SQL分析任务和数据可视化的数据源,可以作为数据解析、SQL分析任务的结果输出可以集成时序数据到实时计算Flink,也可以直接存储静态导入的自定义字段数据等。本文介绍如何创建和管理自定义...

如何实现一键转冷存

场景描述 通过 ALTER TABLE tblname SET TABLESPACE oss 锁表可以每次对单个对象进行转存,当遇到对象有多个索引、或者分区有多个子分区都需要转存至冷存中时,需要依次执行 ALTER 命令,操作繁琐且容易遗漏。为了解决这类问题,...

数据注册与字段配置

离线“实验报表来源”的格式 字段名称 字段含义 是否必填 说明 user_id 用户id 是 用户标识,可以是用户的 uid,也可以是设备 devcie_id,imei 等 exp_id 实验id 是 ab 服务返回的实验id,通过埋点回流。如果是用户的自己的推荐服务,设置...

ALTER PARTITION TABLE

不要求与父一致:即对应的属性分区子表可以与父不一致,如果子没有显式指定属性,则会继承父的属性,若是子显式指定属性,则会保留子的属性。索引列必须包含父的索引列:即分区子的索引列必须包含父的索引列,还能显式再...

代码模式建模

数据创建完成后,您可以使用脚本模式通过FML语句配置的字段及分区信息。本文为您介绍如何使用FML语句配置数据的相关内容。前提条件 DataWorks目前不支持通过FML语言创建数据,您需要提前使用可视化界面创建好维度、明细、汇总...

CREATE PARTITION TABLE

不要求与父一致:即对应的属性分区子表可以与父不一致,如果子没有显式指定属性,则会继承父的属性,若是子显式指定属性,则会保留子的属性。索引列必须包含父的索引列:即分区子的索引列必须包含父的索引列,还能显式再...

结构设计

数据管理DMS提供的结构设计功能,可以实现对目标库、进行符合研发规范的结构设计。您可按需自定义不同业务线的研发流程,保障多套环境(例如开发环境、测试环境、生产环境)之间结构的一致性。本文以物理库为例,介绍进行结构设计的...

优化MaxCompute外部的查询性能

Hologres与MaxCompute在底层资源无缝打通,您可以通过以下方式加速查询MaxCompute的数据:新建外部直接加速查询 在Hologres中新建外部,即可直接加速查询外部数据。无需数据导入导出、无冗余存储。该方式适用于单次查询的数据量小于...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库Cassandra版 弹性公网IP 短信服务 人工智能平台 PAI 金融分布式架构 物联网平台
新人特惠 爆款特惠 最新活动 免费试用