通过Lindorm Shell访问宽表引擎
COMPRESSION HBase表的数据压缩方式。无默认压缩算法。可选的压缩算法共以下三种：ZSTD（推荐）SNAPPY LZ4 NUMREGIONS 分片的个数。一般按照每个分片使用6~8 GB的存储量来计算分片数量。如果实例规模较大，分片数量可以按需设置多个。...
按扫描量付费
压缩数据：对原始数据进行压缩来减少数据量，建议压缩格式为Parquet或者Orc格式，然后使用DLA扫描压缩过的数据，从而节省扫描费用。数据分区：通过分区的方式，把原始数据存储在不同的分区中，DLA只扫描其中的一个或者几个分区，无需扫描...
数据模型
数据库在存储数据时，会将同一条时间线的数据尽量聚类存储，提升时间线数据访问效率，同时更好的支持时序数据压缩。在时序表中，Tag列的值都相同的一系列数据行构成了一条时间线。时序数据库提供一系列特有的数据访问操作，包括聚合...
应用场景
这些服务都具有高效的数据压缩、列式存储和并行查询等特性，使其在大数据分析场景中表现出色。可以用于用户画像、人群圈选、BI报表和业务分析等一系列的业务场景。实时数据分析场景解决方案 步骤如下：实时摄入：通过直接读取Kafka数据来...
点云压缩
智慧城市：对城市三维重建产生的点云信息进行有效的数据压缩，实现数据流畅的渲染展示。混合现实：为混合现实场景中的点云数据提供实时编码解码能力。注意事项 点云压缩仅支持同步处理（x-oss-process处理方式）。使用点云压缩前，需要先...
如何设计时序数据表
时序数据表可以为您提高查询和存储性能，本文介绍如何根据时序数据的来源和场景建立时序数据表。时序数据示例 时序数据建模至关重要，需要仔细分析数据...但出于数据压缩和查询计算的角度考虑，应尽量避免使用VARCHAR类型作为字段列的类型。
图扑案例
利用Lindorm自研的数据压缩存储和存储优化能力，海量低价值密度的监控数据存储成本也有大幅度降低。为适应日趋复杂化多样化的终端设备、边缘设备、传感器以及第三方系统数据源采集、上报的异构数据，如图3所示，阿里 云原生多模数据库 ...
点云模型
概述 Ganos PointCloud是云原生关系型数据库PolarDB的一个扩展，使PolarDB能够有效快速存储和管理点云数据，并提供点云数据压缩、解压缩、属性统计等功能，同时联合Ganos Geometry模块提供点云空间分析的能力。点云数据类型 点云数据类型...
点云模型
概述 Ganos PointCloud是对象关系型数据库PostgreSQL的一个扩展，使PostgreSQL能够有效快速存储和管理点云数据，并提供点云数据压缩、解压缩、属性统计等功能，同时联合Ganos Geometry模块提供点云空间分析的能力。点云数据类型 点云数据...
点云模型
概述 Ganos PointCloud是云原生关系型数据库PolarDB的一个扩展，使PolarDB能够有效快速存储和管理点云数据，并提供点云数据压缩、解压缩、属性统计等功能，同时联合Ganos Geometry模块提供点云空间分析的能力。点云数据类型 点云数据类型...
从Oracle迁移应用至阿里云PolarDB全流程指南
数据库和应用采集 登录阿里云官方网站，在 ADAM官网 下载 数据库采集器 和 应用采集器，按照 数据库采集 进行Oracle数据库采集，应用采集 进行Oracle应用采集，生成相应的zip格式的数据压缩包，便于后续上传到阿里云ADAM官网进行分析使用。...
8.0.1和8.0.2版功能对比
不支持 支持 数据压缩/归档/加密 表级压缩 对于指定的表，支持显著优于MySQL官方的压缩能力，通过压缩降低数据的存储成本。支持 支持 L2PC Bufferpool 二级缓存。不支持 支持 XEngine高压缩引擎 提供了超大存储容量，可以同时作为多...
数据传输预检查
启动数据迁移项目时，为确保项目的顺利运行，OceanBase 数据传输功能会自动启动预检查环节，针对源端和目标端的数据库连通性、相关配置的正确性、增量日志参数等问题或设置进行检查。本文为您介绍数据迁移项目预检查环节的常见报错和解决...
日志备份时报：The transaction log for database xx ...
如果 tempdb 数据库总空间大于等于5 GB，且可以重启数据库实例：重启数据库实例，具体操作请参见 重启实例。在目标实例控制台左侧导航栏中，单击 备份恢复。在 备份恢复 页单击 备份并收缩事务日志。在弹出的对话框中单击 确定。如果 ...
Tunnel命令常见问题
使用Tunnel Upload命令上传数据时，是按照数据压缩前还是压缩后的大小计费？使用Tunnel Upload命令上传数据时，是否支持限速？使用Tunnel Upload命令上传数据时，速度太慢，如何解决？使用Tunnel Upload命令上传数据时，设置了经典网络的...
HDFS数据源
支持ORCFile数据压缩，目前支持 SNAPPY 和 ZLIB 两种压缩方式。支持SequenceFile数据压缩，目前支持 lZO 压缩方式。多个File可以支持并发读取。CSV类型支持压缩格式有gzip、bz2、zip、lzo、lzo_deflate和snappy。目前插件中Hive版本为1.1.1...
X-Engine简介
X-Engine是阿里云数据库产品事业部自研的联机...X-Engine作为存储引擎，核心的价值还在于性价比，持续提升性能降低成本，是一个长期的根本目标，X-Engine还在Compaction调度、缓存管理与优化、数据压缩、事务处理等方向上进行深层次的探索。
ASMCompressor CRD说明
这种策略通常用于特定数据模式的压缩，其中压缩字典事先已知或预定义。DEFAULT_STRATEGY BrotliCompressor压缩配置 字段 类型 是否必选 说明 默认值 window_bits int 否 窗口位大小，取值为[10,24]。取值越大，压缩效果越好，但内存消耗越...
创建OSS外部表
CSV 以GZIP方式压缩的CSV TSV 以GZIP方式压缩的TSV 示例：通过内置文本数据解析器创建OSS外部表-非分区表 示例：通过内置文本数据解析器创建OSS外部表-分区表 示例：通过内置文本数据解析器创建OSS外部表-压缩数据 通过内置开源数据解析器...
使用float2类型压缩存储向量
本节将通过具体示例，为您介绍半浮点数压缩数据列的定义和相关的操作。当前向量检索系统中，会将图片、声音、文本转化成高维浮点数数组进行存储，将占用大量的存储空间。为降低存储成本，压缩存储空间，为您提供了float2压缩存储模式。...
压缩数据从OSS迁移至MaxCompute
本文为您介绍如何通过MaxCompute外部表能力，将SNAPPY压缩文件数据（以半角逗号分隔）从OSS迁移至MaxCompute。前提条件 已开通MaxCompute并创建项目，详情请参见 创建MaxCompute项目。已开通OSS并创建存储空间，且Bucket中有压缩数据SNAPPY...
Query Profile介绍
LocalDiskReadBytes 所有Connector Scan执行节点从本地缓存读取的压缩数据大小之和。该指标仅适用于存算分离实例。RemoteReadBytes 所有Connector Scan执行节点从OSS对象存储读取的压缩数据大小之和。该指标仅适用于存算分离实例。...
自定义函数（邀测中）
AnalyticDB for MySQL 将数据使用GZIP格式压缩后传输至函数计算服务，但在函数计算服务创建的自定义函数中没有编写解压缩代码，导致函数计算服务无法解析数据。AnalyticDB for MySQL 未开启压缩，将数据直接传输至函数计算服务，函数计算...
如何将冷存数据进行预热
本文介绍将冷存数据进行预热的最佳实践。场景描述 冷存中的数据首次查询时延迟会比较高，可以提前预热将其加载到持久化缓存...如果希望增加缓存比例，可通过控制台界面调大 polar_smgrcache_size 参数，调整完后立即生效，无需重启数据库。
如何将冷存数据进行预热
本文介绍将冷存数据进行预热的最佳实践。场景描述 冷存中的数据首次查询时延迟会比较高，可以提前预热将其加载到持久化缓存...如果希望增加缓存比例，可通过控制台界面调大 polar_smgrcache_size 参数，调整完后立即生效，无需重启数据库。
数据压缩
lz4是一种无损压缩算法，具有高速解码与压缩能力。日志服务部分API接口支持lz4压缩算法，使用lz4压缩算法可以减少网络传输流量，降低流量费用，提升接口访问速度。压缩请求数据 日志服务如下API接口支持在HTTP请求体中传输lz4压缩格式的...
使用OSS外表高速导出数据到OSS
云原生数据仓库AnalyticDB PostgreSQL版 支持通过OSS外部表（即gpossext功能），将数据并行导出到阿里云对象存储OSS，并支持通过GZIP进行OSS外部表文件压缩，大量节省存储空间及成本。功能介绍 目前gpossext支持读写TEXT、CSV格式的文件...
读取OSS数据
recordid|patientid|direction|+-+-+-+|2|13|NE|3|48|NE|9|4|NE|+-+-+-+示例：读取OSS压缩数据（内置文本数据解析器）基于 示例：通过内置文本数据解析器创建OSS外部表-压缩数据 中创建的OSS外部表mc_oss_csv_external3读取OSS数据。...
常见报错
systemctl restart mysqld 说明 修改配置文件后，需要重启数据库实例配置才可生效，请考虑在业务低峰期重启自建数据库实例。以上操作完成后，MySQL已重启。您可使用步骤1的命令查看binlog日志是否已开启成功，然后重新启动备份计划即可。...
版本管理
PolarDB 集群架构共三层：数据库代理Proxy、数据库内核引擎DB和数据库分布式存储Store。您可以根据实际情况单独升级Proxy或内核引擎，也可以绑定一起升级。注意事项 版本升级一般不超过30分钟，升级过程中会重启数据库代理Proxy或内核引擎...
版本管理
PolarDB 集群架构共三层：数据库代理Proxy、数据库内核引擎DB和数据库分布式存储Store。您可以根据实际情况单独升级Proxy或内核引擎，也可以绑定一起升级。注意事项 版本升级一般不超过30分钟，升级过程中会重启数据库代理Proxy或内核引擎...
小版本升级
PolarDB 集群架构共三层：数据库代理Proxy、数据库内核引擎DB和数据库分布式存储Store。您可以根据实际情况单独升级Proxy或内核引擎，也可以绑定一起升级。关于版本或者主动运维升级的相关问题，可加钉钉群咨询，群号：51685000218。注意...
如何快速定位及解决数据库问题
本文介绍了数据库发生故障时的快速判断方法和解决办法。如何定位系统瓶颈是否在数据库上 通过Processlist来判断 执行以下语句，显示 PolarDB-X 上所有正在执行的SQL语句。...方法四：重启数据库 以上方法都无效的情况下，请重启数据库。
创建三维城市场景项目
三维城市构建器项目，支持通过使用 官方基底数据 和 空间构建数据 两种方式添加多个城市基底子组件和数据映射子组件。本文介绍两种创建三维城市构建器场景的方法。使用官方基底数据方式创建 在控制台内，单击切换到 三维城市构建器 页面，...
创建三维城市场景项目
三维城市构建器项目，支持通过使用 官方基底数据 和 空间构建数据 两种方式添加多个城市基底子组件和数据映射子组件。本文介绍两种创建三维城市构建器场景的方法。使用官方基底数据方式创建 在控制台内，单击切换到 三维城市构建器 页面，...
迁移 OceanBase 数据库 Oracle 租户的增量数据至 ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的增量数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将...
RDS PostgreSQL同步至AnalyticDB for PostgreSQL
注意事项 一个数据同步作业只能同步一个数据库，如果有多个数据库需要同步，则需要为每个数据库创建数据同步作业。在数据同步的过程中，如果要将源库中创建的新表作为同步对象，您需要对该表执行如下操作以保障该表数据同步的一致性。ALTER...
从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将RDS PostgreSQL同步至 云原生数据仓库AnalyticDB PostgreSQL。通过DTS提供的数据同步功能，可以轻松实现数据的流转，将企业数据集中分析。前提条件 RDS PostgreSQL中待同步的数据表必须...
从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将RDS PostgreSQL同步至 云原生数据仓库AnalyticDB PostgreSQL。通过DTS提供的数据同步功能，可以轻松实现数据的流转，将企业数据集中分析。前提条件 RDS PostgreSQL中待同步的数据表必须...
配置迁移实例
问题修复后，您需要手动调用 StartMigrationJob 接口来重启数据迁移任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 ...
- 产品推荐
- 这些文档可能帮助您