存储压缩
其中，列存表支持在建表时指定压缩算法、对数据进行压缩。存储压缩可以有效帮助用户减少存储成本和I/O资源的消耗。使用方法 在创建Append-only列存表时，用户可以通过指定COMPRESSTYPE字段来指定压缩的类型。如不指定则数据不会进行压缩。...
创建和删除索引
compression=[alphanumeric]指定压缩选项，可选gz、lzo或snappy，可为空（不对数据进行压缩）。成功返回信息 Code:201 失败返回信息 Code:400表示参数不完整。示例一：在名为my_ds的DS中建立my_index的索引，并指定ID索引为字段 properties...
什么是OceanBase
数据编码是基于数据库关系表中不同字段的值域和类型信息，所产生的一系列的编码方式，它比通用的压缩算法更懂数据，从而能够实现更高的压缩效率。高兼容：兼容常用MySQL/ORACLE功能及MySQL/ORACLE前后台协议，业务零修改或少量修改即可从...
连接方式概述
客户端 在连接 OceanBase 数据库的 MySQL 租户时，支持的客户端如下：MySQL 客户端 MySQL 数据库的命令行客户端，需要单独安装。说明 OceanBase 数据库租户包括 MySQL 模式租户和 Oracle 模式租户。MySQL 客户端，只能访问 MySQL 模式租户...
按量付费标准版
通常，压缩后的数据量与上传数据之前您自己统计的数据量不同，会被压缩至原数据量的五分之一。详细计费规则请参见 存储费用。上传数据资源 数据上传至MaxCompute不产生费用。下载数据资源 仅对通过公网下载的数据按量收费，详细计费规则请...
车联网数据存储处理方案
Lindorm宽表引擎、Lindorm文件引擎、Lindorm LTS数据同步服务、DLA数据湖分析具备了一体化的数据存储、实时归档、离线数据高压缩比存储、高效数据分析的能力 Lindorm LSM架构使得bulkload数据回流成为可能，高效并且对在线业务影响很低。...
迁移时变更压缩和编码方式
如果需要在数据迁移时改变数据的压缩方式或编码方式，您可以参考本文提供的操作方法，在创建迁移任务时添加相关参数对迁移配置进行调整。前提条件 检查源集群、目标集群、LTS的网络连通性。已添加源实例、目标实例的数据源。如何添加，请...
成本
存储压缩表的数据在查询时需要进行解压缩，同时由于所需存储空间较小、能够节约一定的IO带宽。因此在IO速度较慢时能够提高查询性能（如机械硬盘场景），反之则对查询性能有一定影响。LZ4算法的解压缩速度约为ZSTD解压缩速度的三倍，因此对...
按使用功能计费模式计费项
读流量：投递数据（压缩后）到AnalyticDB MySQL或消费数据（压缩后）时，按照传输的数据量计算读流量费用。例如原始数据量为10 GB，您将原始数据上传到日志服务将产生2 GB（压缩率20%）的写流量，然后通过日志服务将数据投递到AnalyticDB ...
SDK接口
本文为您介绍流式数据通道SDK接口的使用方法。使用说明 您可以基于MaxCompute Studio通过Java SDK使用MaxCompute流式数据通道服务。您可以使用以下配置在MaxCompute Studio上添加指定版本的pom依赖。groupId>...
MySQL物理备份
数据库备份DBS 支持对MySQL数据库的物理文件进行全量备份、增量备份、Binlog日志文件备份。本文向您介绍如何通过配置MySQL物理备份计划，实现全量备份和增量备份，以满足数据灾难恢复、数据迁移等需求。前提条件 数据库为 Linux系统 的自建...
管理备份
为确保数据误操作后，AnalyticDB MySQL版 具备数据快速恢复的能力，集群创建成功后，AnalyticDB MySQL版 会自动在后台开启数据备份功能，实现集群级别的数据备份。您可以在 AnalyticDB MySQL版 控制台查看集群的备份集或修改备份设置。注意...
存储费用
MaxCompute会对存储的数据（例如表或资源）及备份的数据，按照数据容量大小进行计费。本文为您介绍存储费用的计费规则。背景信息 MaxCompute数据的压缩比一般在5倍左右，因此多数情况下，您上传的数据文件大小与实际存储在MaxCompute的大小...
Readable Protobuf
PolarDB MySQL版 支持Readable Protobuf功能，即针对存储在数据库中的经过Protobuf序列化的Blob类型的字段，您可以在对应的字段上配置Protobuf schema，并通过可视化函数 PROTO_TO_JSON(blob_field)来读取数据。同时，您也可以使用 JSON_...
DataHub成本节省攻略
主要费用对比 为了验证batch所带来的实际效果，我们拿一些数据进行了对比测试 测试数据为广告投放相关的数据，大约200列，数据中null比例大约20%~30%1000条数据一个batch batch内部的序列化使用的是avro lz4是之前版本默认的压缩算法，压缩...
索引优化
AnalyticDB PostgreSQL版 数据库支持B-Tree、Bitmap，BRIN，GiST和GIN索引，不支持Hash索引。每一种索引类型都使用一种不同的算法，它们最适合的查询类型也不同。B-Tree索引适合于最常见的情况并且是默认的索引类型。说明 AnalyticDB ...
Oracle逻辑备份
压缩存储 支持Oracle原生数据库压缩，以及LZ4压缩。流式备份 备份数据直接写到云存储，不在本地磁盘中转。安全加密 传输数据HTTPS加密，存储数据AES256加密。创建备份计划 具体操作，请参见 购买备份计划。说明 购买时，选择数据库类型为 ...
简介
支持数据冷热分离存储和数据高效压缩算法，海量数据存储成本低。与云上Spark无缝集成，快速搭建空间大数据仓库和空间大数据分析平台。基于OGC标准设计，便于系统间的集成与互操作。基于阿里云HBase专业运维，全托管方式，提供可靠稳定的...
导出结构和数据
注意事项 Web 版 ODC 对导出的数据大小有限制，最大支持导出 2GB 的数据（压缩前），超出部分无法导出。如需导出大量数据，请使用 OceanBase OBDUMPER。最大支持 5 个导出任务并行运行，后续任务在队列中等待运行。导出任务涉及的文件默认...
工作原理
工作原理 本地安装一个数据库网关代理（database gateway agent）。数据库网关代理负责与数据库网关云端服务（database gateway cloud service）建立安全的、可信任的通道。不同账号、不同网关所建立的通道彼此隔离。通道建立后，当您...
添加堡垒机架构备份网关
数据库备份DBS 支持接入堡垒机网络结构的数据库，当数据库主机处于内网环境且无法直接与外部网络建立连接时，可以通过堡垒机代理访问外部网络。您需要在堡垒机上安装代理网关，并在数据库主机上安装DBS备份网关。本文介绍添加堡垒机架构...
将数据写入OSS
实现示例如下：示例：通过内置文本数据解析器将数据写入OSS-非分区路径 示例：通过内置文本数据解析器将数据写入OSS-分区路径 示例：通过内置文本数据解析器将数据以压缩方式写入OSS 示例：通过内置开源数据解析器将数据写入OSS 通过自定义...
产品优势
存储成本低 基于高效压缩算法有效压缩原始数据，最多可节约 90%的存储空间。使用简单 兼容 OpenTSDB 的数据访问协议，开发简单。控制台提供丰富的数据管理和运维功能，操作简单便捷，让您轻松完成日常数据管控和运维。专业运维支持 TSDB 的...
Logview诊断实践
解决思路：一种情况是数据分布变化导致的，我们在写表的过程中，会对数据进行压缩，而压缩算法对于重复数据的压缩率是最高的，所以如果写表的过程中，如果相同的数据都排布在一起，就可以获得很高的压缩率。写表的数据分布情况主要取决于写...
pg_dump
pg_dump是 PolarDB PostgreSQL版（兼容Oracle）提供的一种逻辑备份工具，用于将集群中的单个数据库备份为脚本文件或其他存档文件。简介 pg_dump用于备份单个数据库。即使当前数据库正在被访问，也会对正在访问的数据进行一致的备份，并且在...
读写外部数据文本文件（oss_fdw）
阿里云支持通过oss_fdw插件将OSS中的数据加载到RDS PostgreSQL数据库中，也支持将RDS PostgreSQL数据库中的数据写入OSS中。前提条件 RDS PostgreSQL实例大版本为10或以上。说明 如果实例版本为PostgreSQL 14，需要内核小版本大于等于...
DQL操作常见问题
数据在MaxCompute中是列式压缩存储的，如果同一列的前后数据的内容是相似的，压缩比会比较高。当 odps.sql.groupby.skewindata=true 打开时，使用SQL写入数据，数据比较分散，压缩比较小。如果希望数据的压缩比较高，您可以在使用SQL写入...
使用MongoDB工具将MongoDB Atlas迁移至阿里云
您可以在本地设备或ECS实例中安装Mongodump和Mongorestore（也可以安装MongoDB数据库）工具，然后使用这些工具将MongoDB Atlas数据库迁移至阿里云数据库MongoDB。说明 本文以本地设备为例介绍操作流程。注意事项 确保安装的Mongodump和...
自建SQL Server通过堡垒机架构的物理网关迁移上云
使用场景 若您的自建SQL Server数据库所在服务器无法连接公网，但有一台专门的堡垒机进行网络通信时，您可以采用本文操作将自建SQL Server数据库迁移到RDS SQL Server中：在堡垒机上安装代理网关。在自建数据库所在服务器上安装DBS备份网关...
自建SQL Server通过堡垒机架构的物理网关迁移上云
使用场景 若您的自建SQL Server数据库所在服务器无法连接公网，但有一台专门的堡垒机进行网络通信时，您可以采用本文操作将自建SQL Server数据库迁移到RDS SQL Server中：在堡垒机上安装代理网关。在自建数据库所在服务器上安装DBS备份网关...
备份存储（超出免费额度）计费规则
开启存储压缩功能后，集群的一级备份存储的 免费备份空间额度 的规则如下：如果集群的存储付费类型为按容量计费（按量付费），则在开启存储压缩功能后，一级备份存储的 免费备份空间额度 为压缩前数据库存储用量×50%。如果集群的存储付费...
备份存储费用说明
开启存储压缩功能后，集群的一级备份存储的 免费备份空间额度 的规则如下：如果集群的存储付费类型为按容量计费（按量付费），则在开启存储压缩功能后，一级备份存储的 免费备份空间额度 为压缩前数据库存储用量×50%。如果集群的存储付费...
使用MongoDB工具将自建数据库迁移至副本集实例
您可以在本地设备或ECS实例中安装MongoDB数据库，然后借助该工具将自建MongoDB数据库迁移至阿里云MongoDB副本集实例。推荐 使用DTS迁移副本集架构的自建MongoDB数据库上云，可实现不停机迁移上云。更多数据迁移/同步场景的解决方案，请参见...
使用MongoDB工具将自建数据库迁移至分片集群实例
您可以在本地设备或ECS实例中安装MongoDB数据库，然后借助该工具将自建MongoDB数据库迁移至阿里云MongoDB分片集群实例。背景信息 建议通过DTS迁移分片集群架构的自建MongoDB数据库上云，可实现不停机迁移上云。详情请参见 使用DTS迁移分片...
目标数据库连接性检查
为保障数据迁移任务的顺利执行，在预检查阶段检查DTS服务器是否能够连通要迁移的目标数据库。本文将介绍目标数据库连接性检查失败可能的原因及修复方法。当目标数据库连接性预检查失败时，可能是以下几种原因。数据库账号或数据库密码不...
源库连接性检查
在预检查阶段，系统会检查DTS服务器是否能够连通源端数据库。本文将介绍源库连接性检查失败的可能原因及修复方法。当源库连接性预检查失败时，可能是以下几种原因。数据库账号名或密码不正确 报错示例 Access denied for user 'XXX'@'XXX'...
使用MongoDB工具将自建数据库迁移至单节点实例
您可以在本地设备或ECS实例中安装MongoDB数据库，然后借助该工具将自建MongoDB数据库迁移至阿里云MongoDB实例。推荐使用DTS迁移单节点架构的自建MongoDB数据库上云，可实现不停机迁移上云，操作步骤，请参见 云数据库MongoDB版（单节点架构...
Presto FAQ
支持基于.gz压缩的数据吗？能同时处理相同目录下的压缩文件和非压缩文件吗？DLA的表默认会递归读取表目录下的所有子目录和文件吗？为什么同一个SQL从HDFS同步数据到OSS，在DLA中查询是11万数据量，自建的集群查询是19万数据量？性能相关...
2021年
2021-03-16 华北2（北京）华东2（上海）华北3（张家口）华东1（杭州）华南1（深圳）西南1（成都）作业超时监控告警 MaxCompute 外部表支持SNAPPY、LZO压缩格式 如果您的数据格式为TEXTFILE，例如JSON，存放在OSS，希望通过外部表读写且支持...
恢复SQL Server数据
如果拥有RDS SQL Server实例的备份数据，您可以将备份数据恢复到已有实例或新实例上，可用于误操作后恢复以及分析历史数据等场景。功能介绍 您可以通过多种方式恢复RDS SQL Server实例的数据。恢复到已有实例 恢复到新实例 通过临时实例...
- 产品推荐
- 这些文档可能帮助您