快速玩转Tablestore入门与实战
架构篇 基于Tablestore实现海量运动轨迹数据存储 药品监管系统架构揭秘：海量溯源数据存储与查询 基于Tablestore实现海量摩托车的轨迹管理 超级快递——如何用系统来保证快递准时送达 科学大数据 多维的网格数据是一种科学大数据，在地球...
文档更新动态（2022年之前）
新功能 网络连通解决方案 2021年08月24日 数据服务：支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景，Dataphin支持为项目添加加速计算源，且完成Dataphin数据源开发后，您可以手动...
引擎简介
云原生多模数据库 Lindorm 流引擎面向实时数据处理场景，支持使用标准的SQL及熟悉的数据库概念完成一站式的实时数据处理，适用于车联网、物联网和互联网中常见的ETL、实时异常检测和实时报表统计等场景。本文介绍Lindorm流引擎的应用场景和...
应用场景
物联网设备无时无刻不在产生海量的设备状态数据和业务消息数据，这些数据有助于进行设备监控、业务分析预测和故障...通过日志或者其他方式对原始指标数据进行采集和实时计算，最后将实时计算的结果数据存储到 TSDB，实现监控和分析的展现。
概述
同一份数据以不同的格式保存，数据所占用的存储空间不同，使用DLA扫描数据时所花费的时间和费用也不同。通常情况下，同一份数据以ORC格式和PARQUET格式存储时，其数据扫描性能要优于普通文本CSV格式。因此，您可以将文本类型的数据转换为...
如何使用OSS更省钱？
当访问不同比例的数据时，该用户的每月成本说明如下：存储类型 数据总量 存储费用（0.12 元/GB/月）数据访问比例 外网流出流量费用（08:00-24:00（忙时）（0.50 元/GB）数据取回容量费用 总费用 标准存储-本地冗余 100 TB 12,288 10%5,120 ...
存储加密
当MaxCompute项目中存有敏感信息如个人身份信息、财务记录、健康记录等，开启数据存储加密可保护这些数据不被未授权者访问。MaxCompute支持通过密钥管理服务KMS（Key Management Service）对数据进行加密存储，提供数据静态保护能力，满足...
整体架构
为满足不同场景需求，首先将一份全量数据存储在低成本高吞吐存储介质中，低成本离线处理场景直接读写低成本存储介质中的数据，可降低数据存储和数据IO成本，保证高吞吐。其次将实时数据存储在单独的存储IO节点（EIU）上，保证行级的数据...
集群容灾能力
Hadoop HDFS是一个经历了长时间考验且具有高可靠性的数据存储系统，已实现了海量数据的高可靠性存储。同时基于云上的特性，您也可以再在OSS等服务上额外备份数据，以达到更高的数据可靠性。服务容灾 Hadoop的核心组件都会进行HA部署，即有...
数据处理费用
如果您使用 图片处理、高级图片压缩、视频截帧 等功能时，OSS会收取数据处理费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情，请参见 OSS产品定价。计费项 重要 如果您希望通过请求者支付 图片处理、视频截帧、低频访问...
冷热分层存储
注意事项 读取OSS-HDFS归档类型数据时，涉及数据取回费用。因此对于需要频繁访问的数据，应避免使用低频、归档以及冷归档类型。关于这三种类型数据取回费用的更多信息，请参见 数据处理费用。为OSS-HDFS服务的数据设置存储策略时，涉及数据...
生命周期管理概述
第一次访问冷数据时，延迟时间会稍有增加，之后的访问性能与访问通用型NAS存储空间中的数据一致。访问低频存储或归档存储中的冷数据会产生读写流量费用。更多信息，请参见 通用型NAS计费。当需要频繁访问低频存储或归档存储中的数据时，...
时序分析存储概述
分析存储与时序表的数据存储相互独立，允许用户自定义数据的生命周期（TTL），对分析存储的查询操作不会对时序表的读写性能产生影响。分析存储能够自动同步时序表数据，在数据写入速率稳定的情况下，同步操作的延迟通常在10分钟内，如果...
查询机制
INSERT 当您使用INSERT插入一条数据时，具体过程如下：从数据文件中读取一个数据块到内存中，并将这行数据写入这个数据块，系统生成一条INSERT的WAL日志。当执行COMMIT命令后，系统会产生一条COMMIT的WAL日志。INSERT WAL日志和COMMIT WAL...
什么是云数据库HBase
云数据库HBase是低成本、高扩展、云智能的大数据NoSQL，兼容标准HBase访问协议，提供低成本存储、高扩展吞吐、智能数据处理等核心能力，是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴...
宽表模型介绍
在写入数据时添加任意多个属性列即可。主键列表中第一个主键将作为分区键，按照分区键值的范围将数据负载均衡到多个分区(Partition)中。支持多版本数据存储以及数据生命周期管理，可以有效的管理数据，减少数据存储空间，降低存储成本。...
API概览
本产品（数据库文件存储/2020-04-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
宽表模型介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
什么是云原生多模数据库Lindorm
本文介绍 云原生多模数据库 Lindorm 的...流引擎 云原生多模数据库 Lindorm 流引擎是 面向流式数据处理 的引擎，提供了流式数据的存储和轻计算功能，帮助您轻松实现流式数据存储至 云原生多模数据库 Lindorm，构建基于流式数据的处理和应用。
冷热数据分层存储
为了降低数据存储成本、提高查询性能和系统资源利用率。云数据库ClickHouse 提供了冷热数据分层存储的功能。您可以根据查询频率将数据存储在不同类型的磁盘中。本文介绍如何开启冷热数据分层存储功能和设置分层存储策略。前提条件 云数据库...
配置Hive输出组件
根据Hive中数据存储格式不同，支持选择压缩格式不同：数据存储格式为 orc：支持选择的压缩格式包括 zlib、snappy。数据存储格式为 parquet：支持选择的压缩格式包括 snappy、gzip。数据存储格式为 textfile：支持选择的压缩格式包括 gzip、...
开启和使用冷数据分层存储
部分分区子表冷存：当只需要将已过期（低频访问）的分区子表转为冷数据时，可以直接对子表进行更换表空间操作。未过期（高频访问）的分区子表无需任何改变，仍存储在数据库云盘中，这样既不影响分区表的访问性能，又降低了存储成本。prt1为...
开启和使用冷数据分层存储
部分分区子表冷存：当只需要将已过期（低频访问）的分区子表转为冷数据时，可以直接对子表进行更换表空间操作。未过期（高频访问）的分区子表无需任何改变，仍存储在数据库云盘中，这样既不影响分区表的访问性能，又降低了存储成本。prt1为...
开启和使用冷数据分层存储
部分分区子表冷存：当只需要将已过期（低频访问）的分区子表转为冷数据时，可以直接对子表进行更换表空间操作。未过期（高频访问）的分区子表无需任何改变，仍存储在数据库云盘中，这样既不影响分区表的访问性能，又降低了存储成本。prt1为...
文件系统存储类型
支持数据实时访问，访问数据时会产生低频数据读写流量费用，适用于较低访问频率（平均每月访问频率1到3次）的业务场景。归档存储：提供高持久性、极低存储成本的文件存储服务。支持数据实时访问，访问数据时会产生归档数据读写流量费用，...
查询流程和执行计划
Stage的数据来源可以是底层存储系统中的数据或者网络中传输的数据，一个Stage由分布在不同Executor节点上相同类型的Task组成，多个Task会并行处理数据。说明 AnalyticDB MySQL版 SQL诊断功能支持对Stage级别进行结果诊断。更多详情，请参见...
阿里云存储服务
其存储类型分为标准存储、低频访问存储、归档存储、冷归档存储、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。就价格而言，数据越冷，存储成本越低，需要时的访问成本越高。您可以轻松地在这些存储类型之间转换以优化存储...
CREATE DATABASE
partition_interval BIGINT 分区时长，同一时间段的数据和索引存储在一个时间分区，单位为天。关于默认值，需注意以下内容：3.4.19及以上版本的时序引擎，partition_interval 参数默认值为30。3.4.19之前版本的时序引擎，partition_...
购买方式2：按量付费
按量付费是指在新建数据库集群时您无需预先支付费用，而是等实际使用数据库的计算和存储的服务时，再扣除费用。如果不购买计算包和存储包，集群的计算节点和存储空间（根据实际数据量）均按小时计费，并从账户中按小时扣除。适用场景 若您...
购买方式2：按量付费
按量付费是指在新建数据库集群时您无需预先支付费用，而是等实际使用数据库的计算和存储的服务时，再扣除费用。如果不购买计算包和存储包，集群的计算节点和存储空间（根据实际数据量）均按小时计费，并从账户中按小时扣除。适用场景 若您...
产品概述
云原生数据仓库 AnalyticDB PostgreSQL 版 是一种大规模并行处理（MPP）数据仓库服务，可提供海量数据在线分析服务。云原生数据仓库 AnalyticDB PostgreSQL 版 基于开源项目Greenplum构建，由阿里云深度扩展，兼容ANSI SQL 2003，兼容...
2021年
2021-12-30 全部地域 MaxCompute湖仓一体概述 MaxCompute支持渐进式计算 MaxCompute支持渐进式计算，在处理数据过程中按照一定时间颗粒度自动按时间分区保存处理过程中的中间结果数据，在下一个周期执行时可以重复使用上周期已经计算好的...
流式ETL
数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...
什么是ETL
数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...
什么是云原生数据湖分析
支持 AnalyticDB PostgreSQL 支持 支持 MaxCompute 支持 支持 Elasticsearch 支持 支持 Cassandra 支持 支持 Kudu 支持 支持 ECS自建Druid数据库数据 支持 支持 何时使用DLA DLA主要围绕数据湖存储OSS提供一站式的云原生数据湖分析与计算...
块存储
您可以像使用物理硬盘一样格式化并建立文件系统来使用块存储，可满足绝大部分通用业务场景下的数据存储需求。适用场景 阿里云为您的云服务器ECS提供了丰富的 块存储产品类型，包括基于分布式存储架构的云盘以及基于物理机本地硬盘的本地盘...
添加对象存储OSS数据源
本文档为您介绍在DataV中添加对象存储OSS数据源的方法，以及相关参数配置说明。使用阿里云对象存储服务（Object Storage Service，简称OSS），您可以通过网络随时存储和调用文本、图片、音频和视频等各种非结构化数据文件。前提条件 已准备...
计费方式2：按量付费
存储包是PolarDB推出的一种预付费资源包，可以抵扣存储空间用量、一级备份（超出免费额度）、二级备份、日志备份、冷数据存储、Serverless存储容量等费用。存储包可以有效降低对应的费用，且存储包的规格容量越大，购买时长越长，越划算。...
简介
数据迁移 OSS之间数据迁移 第三方数据源迁移到OSS 从Amazon S3上的应用无缝切换至OSS 使用ossimport迁移数据 数据备份和容灾 备份存储空间 数据库备份到OSS 数据直传OSS Web端直传实践 移动端直传实践 数据处理与分析 通过MaxCompute查询和...
对接DataV
说明 获取数据响应结果后，再次查询数据时可以直接单击 预览数据源返回结果 查看数据返回结果。预览和发布可视化应用。单击画布编辑器右上角的 图标，预览可视化应用。单击画布编辑器右上角的 图标。在 发布 对话框，单击 发布大屏。在 ...
- 产品推荐
- 这些文档可能帮助您