概述
Apache Flume是一个分布式、可靠和高可用的系统，可以从大量不同的数据源有效地收集、聚合和移动日志数据，从而集中式的存储数据。使用场景 Flume使用最多的场景是日志收集，也可以通过定制Source来传输其他不同类型的数据。Flume最终会将...
创建Impala数据源
在 新建数据源 对话框的 大数据存储 区域，选择 Impala。如果您最近使用过Impala，也可以在 最近使用 区域选择Impala。同时，您也可以在搜索框中，输入Impala的关键词，快速筛选。在 新建Impala数据源 对话框中，配置连接数据源参数。配置...
新功能发布记录
当存储即将出现溢出时，集群的存储空间可自动进行扩容，保障线上业务的稳定性，主要适用于业务数据量比较大，或者业务量波动较大且频繁的场景。设置存储自动扩容 访问地址优化 支持多机房部署方案添加两个访问地址。当访问地址为 2 个时，...
产品概述
秒级快速备份 利用底层分布式存储的快照技术，只需分钟级别即可完成对TB级数据量大小的数据库的备份，且整个备份过程不需要加锁，效率更高，影响更小，对应用程序几乎无影响，全天24小时均可进行备份。PolarDB分布式版产品架构 PolarDB分布...
什么是RDS PostgreSQL
Ganos时空引擎：Ganos时空引擎提供一系列的数据类型、函数和存储过程，用于在阿里云RDS PostgreSQL中对空间/时空数据进行高效的存储、索引、查询和分析计算。RDS PostgreSQL支持的功能请参见 PostgreSQL功能概览。说明 如果业务复杂，您也...
存储成本优化
本文从数据分区、表生命周期和定期删除表3个方面为您介绍如何优化存储成本。对于存储优化而言，有三个关键点：合理地进行数据分区。设置合理的表生命周期。定期删除废表。合理设置数据分区 MaxCompute将分区列的每个值作为一个分区。您可以...
RDS SQL Server I/O高问题
实例I/O过高时，容易影响查询性能。本文介绍查看I/O吞吐情况的方式以及如何排查I/O高...如果调整备份时间无法避免全量备份操作和业务的冲突，建议升级实例的磁盘性能等级，或者拆分数据，减少单个实例上的数据量，缩短全量备份所需的时间。
应用场景
根据数据量和网络条件，迁移过程可能需要几个小时甚至几天的时间。这个漫长的过程可能会对您的业务产生很大的影响。DTS则可以帮助您以最小化的停机时间迁移您的数据。在数据迁移期间，您的应用程序仍可以保持运行状态。唯一的停机时间是当...
购买方式2：按量付费
由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上），我们推荐配合存储包一起使用，能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。说明 存储包分为 中国内地通用 和 中国香港及海外通用 两...
购买方式2：按量付费
由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上），我们推荐配合存储包一起使用，能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。说明 存储包分为 中国内地通用 和 中国香港及海外通用 两...
表引擎
系列 描述 表引擎 特点 MergeTree MergeTree系列引擎适用于高负载任务，支持大数据量的快速写入并进行后续的数据处理，通用程度高且功能强大。该系列引擎的共同特点是支持数据副本、分区、数据采样等特性。MergeTree 用于插入极大量的数据...
基本概念
逻辑模型：反映的是系统分析设计人员对数据存储的观点，是对概念数据模型进一步的分解和细化；数据资源平台中可通过手动、DDL语句、EXCEL导入、云计算资源扫描的方式来实现逻辑模型创建。物理模型：是对真实数据库的描述；数据资源平台中...
通用数据开发
数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的数据，存储在业务系统所对应的数据库中，包括MySQL、Oracle和RDS等类型。数据收集与存储：您需要同步不同业务系统的数据至MaxCompute中，方可通过MaxCompute的海量数据...
什么是云数据库HBase
云原生多模数据库Lindorm）、全文检索（参见Lindorm产品）等能力，结合完备的工具服务，丰富的生态融合，一站式高效满足企业在大数据量场景下的存储、检索、分析需求，是风控、推荐、广告、物联网、车联网、Feeds流、数据大屏等场景的数据...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
应用场景
云数据库Redis版 适用于多种场景，尤其是请求并发量大场景中的数据存储。游戏行业应用 游戏行业通常将云数据库Redis版作为重要的部署架构组件，用于缓存或数据持久化。场景一：Redis作为缓存加速应用访问 Redis作为缓存层，加速应用访问。...
连续查询
连续查询的常见场景与示例 数据降精度与长期存储 对于数据量较大的场景，存储成本会成为用户关心的问题。Lindorm时序引擎支持设置每个数据库的保数据有效期（TTL），您可以结合连续查询，将数据降精度后写入到有效期更长的数据库中。以下...
表格存储
随着表数据量的不断增大，表格存储会进行数据分区的调整从而为该表配置更多的存储。表格存储可支持不少于10 PB数据存储量，单表可支持不少于1 PB数据存储量或1万亿条记录。安全性 表格存储提供表级别和API级别的鉴权和授权机制，支持STS...
计费方式2：按量付费
搭配存储包 PolarDB 的存储空间可根据数据量自动伸缩无需您手动配置，您只需为实际使用的存储空间付费。由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上）时，推荐使用 PolarDB 存储包以降低存储成本。...
计费概述
适用于查询频率高、查询数据量较大的场景，同时也能够给您使用DLA的费用预算带来一定的确定性。说明 若您的业务量波动较大且频繁，每个月甚至每周都可能要变更集群配置，推荐您购买按量付费集群并搭配资源包使用。按计算资源付费（CU版计费...
数据存储需求评估
您在每个业务负载中划分数据并确定存储需求时，需要考虑以下几点：数据量 了解数据量的总大小有助于您估算存储容量和成本。数据访问的频率和响应时间要求 阿里云针对不同的访问频率和响应时间要求提供不同的存储方案，对应不同的存储价格。...
常见问题
表格存储 单表提供PB级数据存储规模，无需分库分表，同时支持千万QPS，可以轻松满足IoT设备、监控系统等时序数据的存储需求，大数据分析SQL直读以及高效的增量流式读接口让数据轻松完成离线分析与实时流计算。表格存储 提供了各个场景下的...
应用场景
您可以将模式固定的结构化数据存储在 RDS（Relational Database Service）中，模式灵活的业务存储在MongoDB中，高热数据存储在 云数据库Redis 或 云数据库Memcache 中，实现对业务数据高效存取，降低存储数据的投入成本。移动应用 云数据库...
计费方式3：包年包月
搭配存储包 PolarDB 的存储空间可根据数据量自动伸缩无需您手动配置，您只需为实际使用的存储空间付费。由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上）时，推荐使用 PolarDB 存储包以降低存储成本。...
购买方式3：包年包月
搭配存储包 PolarDB 的存储空间可根据数据量自动伸缩无需您手动配置，您只需为实际使用的存储空间付费。由于存储空间是根据数据量和存储时长收费的，若您需要的数据量较大（如1000 GB或以上）时，推荐使用 PolarDB 存储包以降低存储成本。...
数据治理
存储量是实时的数据，存储趋势图（折线图）是某一时刻的快照，如果您现在的计算量很少（产生的临时表比较少）的话，两个确实会有一些差距。数据地图血缘展示延迟问题 血缘有最少一天的延迟 数据地图新建表搜不到 若数据地图表和表目前状态...
产品优势
随着表数据量的不断增大，表格存储 会进行数据分区的调整从而为该表配置更多的存储。表格存储 可支持不少于10 PB数据存储量，单表可支持不少于1 PB数据存储量或1万亿条记录。高可靠 表格存储 将数据的多个备份存储在不同机架的不同机器上，...
数据服务系统配置
指定redis实例：将缓存数据存储到指定的Redis，适用于大量API开启缓存，缓存数据量较大的场景。如需添加Redis实例，请参见 创建Redis数据源。重要 请勿删除作为API缓存数据的Redis实例，否则缓存数据存储将失败且API开启的缓存将失效。单击...
查看存储包抵扣量
PolarDB 的存储空间可根据数据量自动伸缩无需您手动配置，您只需为实际使用的数据量付费。当您的数据量较大时，推荐使用 PolarDB 存储包以降低存储成本。本文将介绍如何查看存储包抵扣量。注意事项 仅支持查看当前有效资源包及失效时间未超...
查看存储包抵扣量
PolarDB 的存储空间可根据数据量自动伸缩无需您手动配置，您只需为实际使用的数据量付费。当您的数据量较大时，推荐使用 PolarDB 存储包以降低存储成本。本文将介绍如何查看存储包抵扣量。注意事项 仅支持查看当前有效资源包及失效时间未超...
查看与减少数据备份
说明 如果当月全量备份数据量与增量备份数据量之和未超过每月备份数据量免费额度，则不额外收取备份费用，否则超出部分按量付费。更多信息，请参见 备份费用。如果使用了DBS内置存储，还将收取存储费用。更多信息，请参见 存储费用。备份...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
Query级别诊断结果
查询返回客户端的数据量较大 查询消耗的内存资源较大 查询生成的Stage个数较多 查询读取的数据量较大 查询返回客户端的数据量较大 问题 大量数据返回到客户端会导致慢查询，还会占用部分网络前端资源。说明 您可以在查询详情页面的 查询...
查看存储包使用情况
PolarDB 的存储空间可根据数据量自动伸缩无需您手动配置，您只需为实际使用的数据量付费。当您的数据量较大时，推荐使用 PolarDB 存储包以降低存储成本。本文将介绍查看存储包使用情况的操作步骤。注意事项 仅支持查看当前有效资源包及失效...
分区表常见问题
是的，分区表把数据切分成小的分片独立管理，从而使得拥有大数据量的表仍然拥有高性能和高可用。分区表的更多介绍请参见 分区表概述。业务上估算单张表的数据量为2 TB，选择使用 PolarDB MySQL版 还是PolarDB-X？PolarDB MySQL版 单表最大...
如何查看表的数据存储量
介绍如何查看表的数据存储量。操作步骤 通过控制台在数据表的 基本详情 页签，可以查看表大小，即表的数据存储量。通过控制台在数据表的 监控指标 页签，选择 指标分组 为 表大小，可以查看表大小，即表的数据存储量。
冷数据分层存储计费规则
存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买了一个容量为100 GB的存储包，抵扣完存储空间使用量后还剩50 GB。您的集群的...
冷数据分层存储计费规则
存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买了一个容量为100 GB的存储包，抵扣完存储空间使用量后还剩50 GB。您的集群的...
冷数据分层存储计费规则
存储包抵扣规则如下：地域类型 抵扣因子 1 GB存储包的OSS存储空间抵扣量 中国内地 0.045 1/0.045=22.22 GB 中国香港及海外 0.045 1/0.045=22.22 GB 例如，您购买了一个容量为100 GB的存储包，抵扣完存储空间使用量后还剩50 GB。您的集群的...
技术发展趋势
而Fast Data在数据量的基础上，意味着速度和变化，客户可以更加实时化、更加快速地进行数据处理。IDC在新发布的一份白皮书中表示，随着全球连接的增多，更多数据将产生，其中实时数据所占比例将增加；到2025年，全球近30％的数据将是实时的...
- 产品推荐
- 这些文档可能帮助您