如何实现不锁表转冷存
为了解决这类问题，PolarDB PostgreSQL版 提供了一种不锁表转冷存的途径，本文介绍操作方法。创建扩展 CREATE EXTENSION IF NOT EXISTS pg_repack;操作步骤 PolarDB PostgreSQL版 数据库提供的 pg_repack 插件可以实现在不持有大锁的情况下...
如何实现不锁表转冷存
为了解决这类问题，PolarDB PostgreSQL版（兼容Oracle）提供了一种不锁表转冷存的途径，本文介绍操作方法。创建扩展 CREATE EXTENSION IF NOT EXISTS pg_repack;操作步骤 PolarDB PostgreSQL版（兼容Oracle）数据库提供的 pg_repack 插件...
建表时创建列存索引的DDL语法
为了实现行存和列存的分流，目前有手动和自动两种分流方案。您可以根据业务情况选择一种 分流方案概述，并配置集群地址。通过集群地址连接到数据库集群。创建列存索引 CREATE TABLE 语法：在建表时，您只需要在 CREATE TABLE 语句的 ...
快速使用存算分离版实例
存算分离版实例适用于对存储成本敏感，同时对查询效率要求略低的业务场景，例如OLAP多维分析、实时数据分析以及数据仓库场景。该实例类型采用存算分离架构，将数据存储在阿里云OSS对象存储中。本文为您介绍如何通过阿里云账号创建并快速...
诊断项与诊断结果说明
如果使用率过高，请您定位使用较多CPU资源的进程并判断是否正常。查询CPU资源使用情况的操作，请参见 Linux系统的ECS实例CPU使用率或CPU负载较高问题的排查及解决方案。disk中inode检查 检查Disk中inode是否足够。检查该实例磁盘的inode...
通过文件管理优化性能
如果不可能存在查询的数据，则可以直接跳过，如果可能存在被查询的数据，则需要扫描表文件，但被扫描的表文件中不一定包含查询的数据，我们将这种判断表文件中包含查询数据，但实际并不存在的情况称为假阳性。为了能尽可能多的跳过和查询...
动态增加或删除列存索引的DDL语法
为了实现行存和列存的分流，目前有手动和自动两种分流方案。您可以根据业务情况选择一种 分流方案概述，并配置集群地址。通过集群地址连接到数据库集群。创建列存索引 语法：可在 ALTER TABLE 语句后增加 COMMENT 'COLUMNAR=1' 字段，为表...
判断存储空间是否存在
本文介绍如何判断存储空间是否存在。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的Region与Endpoint的对应关系，请参见 访问域名和数据中心。本文...
REPLACE SELECT FROM
写入数据时，根据主键判断待写入的数据是否已经存在于表中，如果已经存在，则先删除该行数据，然后插入新的数据；如果不存在，则直接插入新数据。语法 REPLACE INTO table_name[(column_name,.)]query;参数 query：可以是 SELECT FROM ...
基于PHP的应用开发
本文介绍基于PHP连接和使用Lindorm宽表引擎的方法。前提条件 已安装PHP。要求PHP为8.0及以上版本。已开通MySQL协议兼容功能。如何开通，请参见 开通MySQL协议兼容功能。已将客户端IP添加至白名单，具体操作请参见 设置白名单。操作步骤 ...
REPLACE INTO
写入数据时，会先根据主键判断待写入的数据是否已经存在于表中，并根据判断结果选择不同的方式写入数据：如果待写入数据已经存在，则先删除该行数据，然后插入新的数据。如果待写入数据不存在，则直接插入新数据。说明 本文所指的主键既...
高级配置说明
Readiness Probe 用来判断容器是否准备好接收流量。如果检查失败，集群会屏蔽请求访问该容器；若检查成功，则会开放对该容器的访问。Liveness Probe 用来检测容器是否正常，如果检查失败，集群会对该容器执行重启操作。说明 Readiness ...
添加列存只读实例
列存只读实例，仅授权访有列存索引的表，针对没有列存索引的表会提示查询限制。操作步骤 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。在 实例列表 页，单击 PolarDB-X 2.0 页签。找到目标实例，在目标实例右侧的 操作 ...
表管理
表管理功能用于定义DataWorks中的表分区字段、临时表、导入表的标识，方便您根据表名称即可判断该表的类别；同时，支持定义表的主题和物理层级，可基于功能、类型等多个维度，将同类型的表放置相同的主题或层级统一管理。使用限制 仅 空间...
Blink和Flink常见问题及诊断
基本概念 Hologres性能 写入性能 列存表：InsertOrIgnore>InsertOrReplace>InsertOrUpdate 行存表：InsertOrReplcae=InsertOrUpdate>InsertOrIgnore 参数 说明 InsertOrIgnore 结果表有主键，实时写入时如果主键重复，丢弃后到的数据。...
列存索引
列存索引会根据您当前的表结构以及 json_col0 的结构，来创建索引表，并根据您后续的表结构、JSON字段内容变化来动态扩展索引表。查看索引状态。SHOW INDEX FROM my_tbl;SHOW INDEX 的使用方法及返回结果集说明，请参见 SHOW INDEX。使用列...
CREATE TABLE
分区表：系统根据各分区的LastModifiedTime判断是否需要回收分区。不同于非分区表，分区表的最后一个分区被回收后，该表不会被删除。生命周期只能设定到表级别，不支持在分区级别设置生命周期。说明 通过 create table[if not exists]...
开启和使用冷数据分层存储
LOB字段支持SQL一键冷存，具体使用方式如下：创建带有大对象字段的表 CREATE TABLE test_large_object(id serial,val text);将大对象字段独立冷存 ALTER TABLE test_large_object alter column val(storage_type='oss');写入大对象数据，...
开启和使用冷数据分层存储
LOB字段支持SQL一键冷存，具体使用方式如下：创建带有大对象字段的表 CREATE TABLE test_large_object(id serial,val text);将大对象字段独立冷存 ALTER TABLE test_large_object alter column val(storage_type='oss');写入大对象数据，...
开启和使用冷数据分层存储
LOB字段支持SQL一键冷存，具体使用方式如下：创建带有大对象字段的表 CREATE TABLE test_large_object(id serial,val text);将大对象字段独立冷存 ALTER TABLE test_large_object alter column val(storage_type='oss');写入大对象数据，...
聚合函数
bool_and函数 bool_and(boolean expression)判断是否所有日志都满足条件。如果是，则返回true。bool_and函数等同于every函数。bool_or函数 bool_or(boolean expression)判断是否存在日志满足条件。如果存在，则返回true。checksum函数 ...
通过火焰图定位性能瓶颈
如果存在较宽的栈顶，沿着栈顶依次往栈底方向搜索，找到第一个包名为所分析应用自身定义的方法行，然后重点排查该方法是否存在优化空间。实践分析 ARMS持续剖析功能通过火焰图可视化技术呈现应用的性能剖析数据，当线上应用出现CPU、内存...
Beam概述（公测）
Beam自研存储引擎采用统一的存储设计（行存Detla和PAX结构的列存Base），既能够承载OLTP的高并发读写负载，也能够应对OLAP的批量写入和大量扫描场景。Beam是 AnalyticDB PostgreSQL版 基于PostgreSQL 12的Table Access Method开发的下一代...
数据膨胀、倾斜与索引统计
期望表大小为 AnalyticDB PostgreSQL版 判断没有膨胀情况下的表大小。实际表大小 实际表的大小，单位为Byte。膨胀表大小 膨胀表的大小，为可释放的空间量，单位为Byte。膨胀系数 数据膨胀的系数，膨胀系数计算公式如下：系统统计的死行数/...
语音&VUI
功能概述 语音&VUI功能由若干项子功能组成，有关子功能介绍如下表所示：子功能项 功能描述 语音算法服务 包含噪音过滤阈值、文字合成语音的语速、音量和语调设置等功能，支持使用系统内置或自定义语音算法服务。静音检测 也称VAD阈值，用以...
创建应用
请按照以下逻辑进行模式选择：应用的视觉表现是否有渲染地球、大气的需求（即远景需要以弧形、球形表示）。是，请使用球面类型。否，请继续判断。应用的业务表达或接入数据中，是否存在地理信息系统业务或地理数据。是，请继续判断。否，请...
通过文件URL无法正常访问文件怎么办？
本文介绍通过文件URL无法正常访问文件（Object）的可能原因及解决方法。出现以上问题，请按以下步骤排期可能的原因，并通过...解决方法：您可以通过各语言SDK判断要访问的文件是否存在。以Java SDK为例，具体操作，请参见 判断文件是否存在。
列存表MetaScan加速查询性能
列存表是通过block为单位来存储数据的，MetaScan是通过meta信息判断block是否满足条件，跳过不满足条件的block，从而减少I/O，提升扫描性能的。如果过滤列的数值分布的非常散，例如每个block都有，这样的话，即使过滤率很好也需要扫描所有...
AUTO OPTIMIZE语句
通过AUTO OPTIMIZE语句，将启动一个流式优化任务，自动地对外部数据湖的表进行优化。本文为您介绍AUTO OPTIMIZE语句的背景信息、前提条件、使用限制、注意事项、基本语法和参数配置。背景信息 功能详情 目前仅支持将Iceberg表的若干小文件...
解析生效测试方法
概述 测试域名解析生效的方法有以下四类：域名解析生效测试。本地域名解析生效测试。测试命令dig或nslookup。全国各地运营商解析生效测试。域名解析生效测试 可帮助用户快速排查域名、DNS、网站问题，立即使用。本地域名解析生效测试 此...
订阅Hologres Binlog
因此建议开启Binlog的表使用行存表或者行列共存表，会使得读Binlog时会有更好的性能。开启Binlog Hologres中，Binlog功能默认关闭，您可以通过设置表属性 binlog.level 和 binlog.ttl 开启该功能。如下示例开启Binlog，更多关于创建表的...
创建和使用CCI
在包含CCI的表上使用其他DDL时的约束 语句 是否支持 DROP TABLE 支持 DROP INDEX 支持 TRUNCATE TABLE 不支持 RENAME TABLE 不支持 ALTER TABLE RENAME 不支持 说明 考虑主表与列存索引的数据一致性，目前禁止执行 TRUNCATE TABLE 语句。...
配置数据质量监控
本案例希望监控每日调度任务产出的表数据是否符合预期，由于当前表每日产出业务时间是昨天的数据，所以此处计算结果显示调度时间为今天，计算结果为昨天时，符合预期。2、配置监控规则 表ods_raw_log_d用于接收从OSS同步过来的网站访问记录...
API 说明
包括：判断是否展示启动页 打开启动页 通知关闭启动页 判断是否展示启动页 接口定义 BOOL splashScreenExist(BOOL shouldShowSplashScreen);接口描述 根据用户自定义的规则以及 MCDP 内部的规则，判断是否需要展示启动页。参数说明 参数 ...
新建及管理数据分类
按表中文名扫描：根据数据表的中文名称进行扫描判断。正则（大小兼容）：在输入框中输入正则表达式。例如您需要匹配所有名称中带有 信息，则正则表达式定义为.*信息.*。正则表达式：在输入框中输入正则表达式。例如您需要匹配所有名称中带...
新建及管理数据分类
按表中文名扫描：根据数据表的中文名称进行扫描判断。正则（大小兼容）：在输入框中输入正则表达式。例如您需要匹配所有名称中带有 信息，则正则表达式定义为.*信息.*。正则表达式：在输入框中输入正则表达式。例如您需要匹配所有名称中带...
配置数据质量监控
本案例希望监控每日调度任务产出的表数据是否符合预期，由于当前表每日产出业务时间昨天的数据，所以此处计算结果显示调度时间为今天，计算结果为昨天时，符合预期。2、配置监控规则 表ods_raw_log_d用于接收从OSS同步过来的网站访问记录，...
数据服务
存储数据库 存储物理表的数据库，可查看同一个物理表存于不同数据库的当日状态、数据质量、指标详情和规则明细。数据质量 平台会根据已配置的表级别规则，对物理表的数据质量进行评估。数据质量状态说明如下：优秀（绿灯）：没有命中规则。...
高并发点查
目前的行存实现是将行存编码后存在单独的一列中，这样做简化了行存的实现。行存模式仅支持在建表的时候开启，需要在建表语句属性（property）中指定如下属性。store_row_column"="true"在Unique模型下的点查优化 在Unique数据模型下使用行...
质量规则模板类型
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
- 产品推荐
- 这些文档可能帮助您