数据操作篇
OSS 是阿里云提供的开放存储服务，用以应对海量数据的存储和访问。OSS 的存储单价比表格存储更低，更适合存储文件。如果应用程序不方便使用 OSS，可以将超过 2 MB 的单个值拆分成多个行，存储在表格存储中。错误重试加入时间间隔 表格存储...
引擎类型
流引擎是面向流式数据处理的引擎，提供了流式数据的存储和轻计算功能，帮助您轻松实现将流式数据存储至 云原生多模数据库 Lindorm，满足基于流式数据的处理和应用需求。结合宽表引擎的Ganos时空服务，可以实现基于流式数据的实时轨迹分析...
功能概览
SQL洞察和审计数据的存储空间是由DAS侧提供，不占用数据库实例的存储空间。关闭SQL洞察和审计 警告 SQL洞察和审计功能关闭后，不会对业务产生影响，但是SQL审计日志会被清空。建议您将SQL审计日志导出并保存至本地后，再关闭SQL洞察和审计...
产品优势
背景信息 云原生多模数据库 Lindorm 兼容HBase、Cassandra、S3、TSDB、HDFS、Solr等多种标准接口，支持宽表、时序、对象、文本、队列、空间等多种数据模型，适用于日志、账单、标签等多种数据的存储及分析，具有高性能、低成本等特点。...
C100售前支持相关问题
数据的分析处理：支持设置对应的安全规则和分析报表功能。购买、版本升级、迁移、退款事项处理、过期问题 新购买一台数据库审计C100要注意什么？购买时选择与ECS相同的地域，方便管理。选择版本时，请参考实际数据库流量峰值大小，选择性能...
Kafka集群的数据存储格式
DTS支持选择迁移或同步到Kafka集群的数据存储格式，本文为您介绍数据格式的定义说明，方便您根据定义解析数据。数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化...
管理实例
查看只读实例的数据库列表 只读实例的数据库是从主实例复制而来，只读实例数据库下的 PolarDB-X 1.0存储资源实例 与主实例下数据库的 PolarDB-X 1.0存储资源实例 是同一套实例。为了不影响主实例数据库的业务，建议为只读实例选择不在主...
如何选用NAS、OSS和EBS？
如：互联网业务的音视频存储、数据湖、云相册、个人/企业网盘类应用 适用于OLTP数据库、NoSQL数据库等IO密集型的高性能、低时延业务场景 访问模式 上千个ECS或上万个容器，通过POSIX接口并发读取相同文件，随机读写 数百万客户端通过SDK、...
简介
栅格化GIS应用及航天航空遥感应用 HBase Ganos提供了针对栅格数据管理的通用化模型支持，能够有效支撑大规模遥感影像数据和GIS栅格GRID数据的存储、查询和基础分析处理能力，包括ETL工具支持遥感影像重投影、拼接、切片、入库，支持OGC WMS...
数据归档OSS
低成本高可靠：OSS具有低成本、高可靠的特点，能够帮助客户以更经济高效的方式实现数据归档存储，并保持数据的安全可靠性。业务无影响：数据归档至OSS的功能不会导致实例停机，也不会对用户的业务正常操作造成任何影响，保障了业务的稳定性...
通过实时计算订阅数据
依次双击 RDS 数据存储>数据库名称（datav_test）>表名（target_table），选择右侧的 作为结果表引用，在开发作业中引用目标表。通过 INSERT INTO 语句，将实时计算后的源表数据插入目标表中。说明 如果数据格式不匹配，需要进行相应的 ...
存储概览
存储概览主要包括存储，元数据对象的基本信息，还包括存储趋势、存储归档分布，表格式分布，小文件分布等信息，可以方便您快速了解当前存储资源使用情况及问题，并进行优化。前提条件 已经开通OSS产品。已经在DLF中完成 Location托管。存储...
数仓版（3.0）产品定价
8.064元/GB/月 冷存储数据 0.0002元/GB/小时 0.144元/GB/月 按量付费集群的存储价格 计费项 按量付费价格 每月费用估算 ② 热存储数据 云盘等级PL0 0.0011元/GB/小时 0.792元/GB/月 云盘等级PL1 0.0042元/GB/小时 3.024元/GB/月 云盘等级...
如何删除时序数据
时序模型中的数据包括时间线元数据和时序表数据，此外如果为时序表建立了...如果要删除分析存储的数据，您可以通过为分析存储配置数据生命周期的方式自动清理过期数据。具体操作，请参见 通过控制台管理分析存储 或者 通过SDK管理分析存储。
查询和修改数据复制方式
您可以根据自身业务特点，设置RDS MySQL主备实例之间的数据复制方式，以提高云数据库可用性。前提条件 实例满足以下条件：MySQL 5.7、8.0高可用系列（本地SSD盘）MySQL 5.7、8.0高可用系列（ESSD云盘），且内核小版本必须大于或等于...
概述
场景案例 Tablestore结合Spark的流批一体SQL实战 海量结构化数据的冷热分层一体化 Tablestore+Delta Lake（快速开始）使用方式 根据业务场景可以选择通过E-MapReduce SQL或者DataFrame编程方式使用Spark访问表格存储。E-MapReduce SQL方式 ...
什么是数据库备份DBS
数据量：在数据库备份场景下，有4个概念，分别是数据库磁盘空间、数据文件空间、备份数据量、存储数据量。具体概念请参见 数据量。内置存储与用户OSS：DBS提供数据库的备份恢复能力，备份数据保存在云存储上，云存储支持内置存储、用户OSS...
存储说明
部分缓存或临时测试场景，或者基于3副本存储TB级数据时会使用本地盘，但是该方案会因为磁盘寿命增加额外的运维成本，因此存储数据建议您使用OSS或者 开通并授权访问OSS-HDFS服务。您可以参见 在EMR Hive或Spark中访问OSS-HDFS，了解Hive或...
冷存储介绍
云原生多模数据库 Lindorm 将容量型云存储作为冷存储介质，用于存储数据库中访问频率较低的历史数据（冷数据），从而降低存储成本。本文介绍容量型云存储的功能特性及性能测试结果。功能特性 存储成本低。存储成本仅为标准型云存储成本的20...
概述
您可以 购买PolarDB存储包，来抵扣OSS中冷数据的存储容量，以减少存储冷数据的费用。关于PolarDB存储包的说明，请参见 什么是存储包。PolarDB存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045...
基于Delta lake的一站式数据湖构建与分析实战
数据湖能够将这些不同来源、不同格式的数据集中存储管理在高性价比的存储如 OSS等对象存储中，并对外提供统一的数据目录，支持多种计算分析方式，有效解决了企业中面临的数据孤岛问题，同时大大降低了企业存储和使用数据的成本。...
JindoData概述
IDC机房数据（HDFS）上云迁移和多云迁移利器，支持多种存储数据迁移到阿里云OSS和JindoFS服务，使用上类似Hadoop DistCp。支持JindoTable。结合计算引擎的使用推出的一套解决方案，支持Spark、Hive和Presto等引擎，以及表格式数据的管理...
数据存储需求评估
在优化存储之前，需要了解每个业务负载的性能配置文件，测量每秒读写次数IOPS（Input/Output Operations...数据的敏感性 对于高度敏感的数据，不仅要确保其不丢失和损坏，还要保护其免受意外和恶意更改。数据的持久性、安全性和成本同样重要。
二级索引简介
当某些应用需要使用不同属性作为查询条件来执行数据查询时，您可以通过将这些属性作为二级索引的主键列实现按照属性快速查询数据的需求。表格存储提供了本地二级索引和全局二级索引来满足您不同读取一致性要求的查询场景。本文介绍了二级...
数据导入方式介绍
本文介绍各导入方式的特性及适用场景，帮助您选择正确的数据导入方式。通过外表导入数据 AnalyticDB MySQL 内置不同数据源的访问链路，支持通过创建外表来映射外部数据源，并发地读取外部数据并导入到 AnalyticDB MySQL。通过外表导入数据...
JindoFS块存储模式
本文主要介绍JindoFS的块存储模式（Block），以及一些典型的应用场景。概念 块存储模式提供了最为高效的数据读写能力和元数据访问能力，并且能够支持更加全面的Hadoop文件系统语义。同时，JindoFS也提供了外部客户端，能够从集群外部访问...
按时间戳冷热分离
注意事项 若某一行数据同时包含热数据和冷数据，例如更新了部分列导致一行数据中既存在热数据又存在冷数据的场景，开启查询热数据优先功能会导致该行的查询结果分两次返回，即Scanner返回的Result集合中，对于同一个Rowkey会有两个对应的...
查询账单
当 产品明细 为 数据库自治服务DAS（按量付费）时，表示使用DAS企业版 V2和DAS企业版 V3：对于使用DAS企业版 V2的数据库实例：在 计费项 为 SQL洞察和审计-热存储 的消费明细中，查看热存储占用的存储空间及计费情况。在 计费项 为 SQL洞察...
访问列存数据
列存即列式存储，是一种将数据按列进行存储和处理的数据管理方式。Lindorm计算引擎支持将半结构化、结构化数据以列存方式进行存储，相较于行式存储，列式存储的查询响应时间更短，消耗IO更少。本文介绍如何通过计算引擎访问Lindorm列存数据...
存储类型
读请求将优先访问高性能存储副本，当承载高性能副本的节点故障或临时下线时，访问低成本存储副本实现数据的高可靠与高可用。适合性能要求较高，但可容忍请求毛刺的场景。Lindorm支持以下形式（高性能存储+低成本存储）的副本异构：本地SSD...
管理备份
全量备份采用了将集群全量数据快照压缩后存储在其它离线存储介质的方式。为了保证分布式集群元数据的一致性，在全量备份开始的约10分钟内，集群会短暂禁止DDL的执行。基于备份集的全量恢复采用集群克隆的方式，通过下载备份集的方式将数据...
基本概念
对象（Object）对象是OSS存储数据的基本单元，也被称为OSS的文件。和传统的文件系统不同，对象没有文件目录层级结构的关系。对象由元数据（Object Meta）、用户数据（Data）和文件名（Key）组成，并且由存储空间内部唯一的Key来标识。对象...
产品功能
TSDB 提供时序数据的高效读写。对于百万数据点的读取，响应时间小于 5 秒，且最高可以支撑每秒千万数据点的写入。数据写入 TSDB 支持通过 HTTP 协议和 TSDB Java Client 两种方式进行数据写入。数据查询 TSDB 支持通过 HTTP 协议、TSDB ...
应用场景
车联网场景中涉及的车辆数量大、数据规模大、数据种类多、数据来源广，因此需要支持众多车辆数据的高并发写入、存储与统计分析。车联网场景中数据存储与分析的核心需求如下：数据高并发写入：面向众多车辆，需要支持百万级节点实时写入。...
添加数据
空间数据提供对矢量、栅格、矢量瓦片、栅格瓦片、三维模型、倾斜摄影、BIM、点云等数据的添加，支持通过上传文件和对象存储两种通用的方式添加数据。本文主要介绍如何添加各类空间数据。前提条件 已在云存储上存储了数据文件。背景信息 ...
数据引入层（ODS）
ODS（Operational Data Store）层存放您从业务系统获取的最原始的数据，是其他上层数据的源数据。业务数据系统中的数据通常为非常细节的数据，经过长...ODS层的表建议以统计日期及时间分区表的方式存储，便于管理数据的存储成本和策略控制。
概述
PolarDB PostgreSQL版 支持冷热数据分层存储功能，使用OSS等更低成本的存储介质，将冷热数据进行分层存储。将访问频率和更新频率低的数据转存到OSS中，可以有效降低存储成本。本文介绍了冷数据分层存储的优势和技术原理。功能优势 当 开启...
数据引入层（ODS）
ODS（Operational Data Store）层存放您从业务系统获取的最原始的数据，是其他上层数据的源数据。业务数据系统中的数据通常为非常细节的数据，经过长...ODS层的表建议以统计日期及时间分区表的方式存储，便于管理数据的存储成本和策略控制。
Delta Lake概述
数据演化：数据的Schema并非固定不变，Delta支持通过API 方式改变数据的Schema。实时机器学习：在机器学习场景中，通常需要花费大量的时间用于处理数据，例如数据清洗、转换、提取特征等等。同时，您还需要对历史和实时数据分别处理。而...
概述
PolarDB PostgreSQL版（兼容Oracle）支持冷热数据分层存储功能，使用OSS等更低成本的存储介质，将冷热数据进行分层存储。将访问频率和更新频率低的数据转存到OSS中，可以有效降低存储成本。本文介绍了冷数据分层存储的优势和技术原理。功能...
- 产品推荐
- 这些文档可能帮助您