无锁结构变更方案对比
OSC（OnlineSchemaChange）：工作原理和pt-online-schema-change基本一致，不同的地方是它采用的是异步模式，在A_gst的基础上创建了一张日志表，触发器的条目更新将直接落在日志表中，后台进程将日志表中的条目应用到A_gst表。这样整个流程...
什么是表格存储
表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、...
购买Hologres
共享集群（湖仓加速版）针对MaxCompute和OSS数据湖外部表设计的Serverless在线查询加速服务，基于Hologres存储计算分离的云原生架构，以共享集群资源的形式，加速分析存储在OSS中的湖数据，按需使用，按SQL扫描的数据量付费，详情请参见 ...
数据注册与字段配置
数据注册 数据注册需要您已经开通MaxCompute、绑定项目，再注册MaxCompute表，该注册表是效果统计的中间表（实验报表来源表），即以user_id、exp_id、维度指标作为联合主键统计的数据表。表示某个用户在某个实验下的曝光、点击等指标，也...
零售电商数据建模
字段和分区字段管理 支持手动录入、快捷模式或代码模式的方式配置字段管理和分区字段管理，建议新建模型时使用快捷模式查找已有表或视图的方式来快速导入，修改模型时使用代码模式，两种方式结合使用。这里使用“代码模式-FML语言（适用于...
表设计最佳实践
本文为您介绍表设计的最佳实践方式，为实际开发提供指导和依据。产生大量小文件的操作 MaxCompute表的小文件会影响存储和计算性能。在进行表设计时，应考虑避开产生大量小文件的操作。会产生大量小文件的操作如下：使用MaxCompute Tunnel ...
采集数据
新建表入口 新建 ods_raw_log_d 表 在新建表弹窗中输入名称ods_raw_log_d，在表的编辑页面单击 DDL模式，输入下述建表语句后单击 生成表结构。CREATE TABLE IF NOT EXISTS ods_raw_log_d(col STRING)PARTITIONED BY(dt STRING)LIFECYCLE 7;...
使用流程
本文介绍通过控制台和命令行工具快速使用宽表模型和时序模型的流程。背景信息 使用表格存储前，您需要了解表格存储相关介绍，例如产品概述、基本概念等，然后根据业务场景确定使用的数据存储模型、实例模型和实例规格。表格存储 提供了宽表...
P2P消息收发模式（MQTT）
除了标准MQTT协议所支持的发布/订阅（Pub/Sub）消息收发模式外，云消息队列 MQTT 版 还支持点对点（Point to Point，简称P2P）模式。本文介绍P2P模式的概念、原理以及如何使用 云消息队列 MQTT 版 点对点收发消息。什么是P2P模式 P2P，...
文档修订记录
MySQL整库数据离线同步至Hive 2023.4.12 更新功能 数据集成 补充 行模式、列模式 两种数据读取与写入方式，可针对宽表与时序表进行数据读取与写入。Tablestore数据源 Tablestore Stream数据源 2023.4.7 新增功能 数据集成 DataWorks数据...
P2P消息收发模式（MQTT）
除了标准MQTT协议所支持的发布/订阅（Pub/Sub）消息收发模式外，云消息队列 MQTT 版 还支持点对点（Point to Point，简称P2P）模式。本文介绍P2P模式的概念、原理以及如何使用 云消息队列 MQTT 版 点对点收发消息。什么是P2P模式 P2P，...
规范建模概述
Dataphin遵循Ralph Kimball的维度建模理论，使用Dataphin进行规范建模时，您可根据业务实际情况在Dataphin设计并创建概念模型，并通过概念模型中的业务实体（业务对象 或 业务活动）创建对应的维度表、事实表、原子指标、业务限定、指标、...
规范建模概述
Dataphin遵循Ralph Kimball的维度建模理论，使用Dataphin进行规范建模时，您可根据业务实际情况在Dataphin设计并创建概念模型，并通过概念模型中的业务实体（业务对象 或 业务活动）创建对应的维度表、事实表、原子指标、业务限定、指标、...
集成简介
普通集成和各种优化集成支持的集成模式如下表所示。下表中 表示支持，表示不支持。集成类型 集成的服务名称 请求响应（RequestComplete）等待系统回调（WaitForSystemCallback）等待用户回调（WaitForCustomCallback）优化集成 函数计算 ...
将DRDS模式数据库转换为AUTO模式数据库
本文介绍了如何将DRDS模式的数据库转换为AUTO模式数据库。背景信息 PolarDB-X 支持通过create database like/as语句，将DRDS模式数据库转换为AUTO模式数据库。AUTO模式数据库与DRDS模式数据库的介绍，请参见 AUTO模式数据库与DRDS模式数据...
表设计规范
表设计主要影响 表设计影响的操作有：创建表、导入数据、更新表、删除表及管理表。其中，导入数据场景按照实时数据采集和离线导入批量数据的方式分为如下三种：导入后立即查询与计算。导入后立即查询与计算，需要考虑每次导入的数据量，...
步骤1：创建实例
连接模式 代理模式（默认）：客户端通过代理服务器（Proxy）连接 Tair 实例，Proxy承担着路由转发、负载均衡、模式转换与故障转移等职责，具有聚合连接、增强读性能、简单易用等优势，有助于您设计更高效的业务系统，更多信息请参见 Tair ...
管理Schema
在 Schema 页面，单击 自定义注册表 页签（或 云产品事件注册表 页签），找到目标Schema，在其右侧 操作 列单击 详情。在 Schema详情 页面，查看Schema基础信息、Schema内容和版本列表。编辑Schema 登录 事件总线EventBridge 控制台。在...
冷数据归档表创建及变更
创建冷数据归档表 本文以创建TTL表t_order和关联的归档表t_order_oss为例说明创建冷数据归档表的步骤。执行以下命令，在AUTO模式数据库中创建TTL表t_order。CREATE TABLE t_order(id bigint NOT NULL AUTO_INCREMENT,gmt_modified DATETIME...
价格总览
mPaaS 各组件支持的计费模式如下表所示：预付费模式 资源包模式 后付费模式 移动网关 不支持 支持 支持 消息推送 不支持 支持 支持 数据同步 不支持 支持 支持 移动分析 不支持 支持 支持 实时发布 不支持 支持 支持 智能投放 不支持 支持 ...
创建逻辑模型：应用表
添加表字段 您可以通过 快捷模式 或 代码模式 为表添加字段，其中 快捷模式 支持如下导入方式：从表/视图导入：从计算引擎已存在的物理表或视图导入字段，即在 查找已有表/视图 下拉列表搜索并选择已存在的物理表或视图进行字段导入。...
Decrypt
不同密钥规格对应的加密算法与填充模式如下表所示。密钥规格 加密算法 填充模式 说明 Aliyun_AES_128 Aliyun_AES_192 Aliyun_AES_256 AES_GCM（默认值）不涉及 采用GCM模式进行AES加密。AES_CBC PKCS7_PADDING（默认值）NO_PADDING 采用CBC...
交叉表
本文介绍交叉表的相关配置。简介 交叉表是常见的表格类型，主要用于对查询和分析结果进行分组。例如统计每分钟内各个请求方法对应的请求数量，使用普通表格的展示效果如下图所示。针对上述查询和分析结果，您可以通过交叉表对结果进行聚合...
使用限制
每个弹性模式集群中外表数量的最大值 50万张 无 每张表中列数的最大值 4096 无 表中COMMENT最大长度 1024个字符 无 列中COMMENT最大长度 1024个字符 无 每列中单个字段的最大长度 16 MB 无 每行写入数据的最大长度 16 MB 无 列默认值长度 ...
CREATE TABLE
对于父表的模式修改通常也会传播到子表，并且默认情况下子表的数据会被包括在对父表的扫描中。如果在多个父表中存在同名的列，除非父表中每一个这种列的数据类型都能匹配，否则会报告一个错误。如果没有冲突，那么重复列会被融合来形成新表...
ALTER DEFAULT PRIVILEGES
简介 当前，只能修改用于模式、表（包括视图和外部表）、序列、函数和类型（包括域）的特权。其中，可设置权限的函数包括聚集函数和过程函数。当这个命令应用于函数时，单词 FUNCTIONS 和 ROUTINES 是等效的。（推荐使用 ROUTINES，因为它...
Encrypt
使用说明 不同密钥规格对应的加密算法与填充模式如下表所示。密钥规格 加密算法 填充模式 说明 Aliyun_AES_128 Aliyun_AES_192 Aliyun_AES_256 AES_GCM（默认值）不涉及 采用GCM模式进行AES加密。AES_CBC PKCS7_PADDING（默认值）NO_...
格式化函数（数字、字符、日期类型）
下面的表显示了针对日期/时间格式的模式修改者。表 3.日期/时间格式的模板模式修饰符 修饰符 说明 示例 FM 前缀 填充模式（禁止填充空格和零）FMMonth TH 后缀 大写序号后缀 DDTH th 后缀 小写序号后缀 DDth FX 前缀 固定格式全局选项...
创建逻辑模型：汇总表
添加表字段 您可以通过 快捷模式 或 代码模式 为表添加字段，其中 快捷模式 支持如下导入方式：从表/视图导入：从计算引擎已存在的物理表或视图导入字段，即在 查找已有表/视图 下拉列表搜索并选择已存在的物理表或视图进行字段导入。...
pg_dump
strict-names 表示每个模式（-n/-schema）和表（-t/-table）限定符至少要匹配备份的数据库中的一个模式和表。说明 如果模式和表限定符没有找到匹配项，pg_dump即使没有-strict-names，也会生成错误。此选项对-N/-exclude schema、-T/-...
AUTO模式数据库与DRDS模式数据库
本文介绍了什么是AUTO模式数据库与DRDS模式数据库，以及这两者模式的区别。PolarDB-X数据库模式概述 从 PolarDB-X 5.4.13版本开始，新增支持AUTO模式的数据库（也称为自动分区数据库）。AUTO模式的数据库支持自动分区，即创建表时无需指定...
工作原理
本文介绍弹性伸缩的工作流程、伸缩模式的配置和弹性伸缩示意图。ECI类型的伸缩组与ECS类型的伸缩组的工作原理一致，本文以伸缩组内的ECS实例为例，介绍弹性伸缩的工作原理。关于ECS实例和ECI实例的更多信息，请参见 什么是云服务器ECS 和 ...
从RDS原生实时同步
目前支持三种同步模式的表定义类型，以适应多库多表的同步场景：目标表名需要源表schema作为前缀：目标表自动加上原表schema作为前缀，可以用于多库同步到中心库，但对表名敏感的应用有侵入。多实例多库相同表同步至单表：目标表自动增加...
结构设计元数据不一致的解决办法
本文介绍如何解决结构设计中表结构与变更基准库中表结构不一致问题。解决方法 请在目标表关联的所有工单状态为 设计中 的工单（工单状态为 已发布 或 已关闭 不需要处理）中移除该表。具体操作如下：登录 数据管理DMS 5.0。在顶部菜单栏中...
权限
默认情况下，在表、表列、序列、外部数据包装器、外部服务器、大型对象、模式或表空间上，不向 PUBLIC 授予权限。对于其他类型的对象，授予 PUBLIC 的默认权限如下所示：针对数据库的 CONNECT 和 TEMPORARY（创建临时表）权限;针对函数和...
SQL脚本模式
当您面对大数据集的ETL任务、自动化定期任务、复杂查询编排等场景时，可以使用MaxCompute当前SQL引擎支持的脚本模式（Script Mode SQL）。在脚本模式下，一个多语句的SQL脚本文件将被作为一个整体进行编译，无需对单个语句进行编译；提交...
流式数据湖仓Paimon
类别 详情 支持类型 源表、维表和结果表 运行模式 流模式和批模式 数据格式 暂不支持 特有监控指标 暂无 API种类 SQL 是否支持更新或删除结果表数据 是 特色功能 目前Apache Paimon提供以下核心能力：基于HDFS或者对象存储构建低成本的轻量...
创建应用事务
在状态设计器中，编排设计 Saga 模式应用事务流程。操作说明如下：在上方导航栏内（图示中①），你可以执行放大流程图、撤销、复制、删除等操作。单击编辑区上方的 图标，可将图形界面切换成代码界面，查看代码。在左侧边栏内（图示中②）...
Trajectory最佳实践
您可考虑采用分区表的模式降低单表数据量。使用分区表请参见PostgreSQL文档中 分区表 相关章节。减少使用字符串类型属性 轨迹属性中如有大量的字符串属性，会导致存储空间浪费和性能下降。如果字符串为固定内容，可以转换为整型进行枚举，...
Trajectory最佳实践
您可考虑采用分区表的模式降低单表数据量。使用分区表请参见PolarDB文档中 分区表使用。减少使用字符串类型属性 轨迹属性中如有大量的字符串属性，会导致存储空间浪费和性能下降。如果字符串为固定内容，可以转换为整型进行枚举，建议在...
- 产品推荐
- 这些文档可能帮助您