流式数据通道概述

数据存储量会出现增长情况:在开启异步处理的场景下(Merge或Zorder),MaxCompute流式数据通道服务会对最近一小时写入的数据保存两份,一份为原始数据,一份为异步聚合后的数据,数据的存储量会有一定程度的冗余。冗余数据的保存周期...

应用场景

本文为您介绍DataV-Card可视分析创作间的典型使用场景及作品展示。...行业分析报告 支持海量数据,秒级数据探查。支持行业数据挖掘,所见即所得沉淀数据知识,简单几步实现简报搭建。快速分享作品和卡片,充分交流数据见解。

Napatech案例

Lindorm支持海量数据的低成本存储、快速批量导入和实时访问,具备高效的增量及全量数据通道,可轻松与各类大数据平台集成,完成数据的大规模离线分析。基于Lindorm的解决方案,用户在采用到100Gbps+流量产生的大量数据包元数据直接通过...

SQL洞察与审计

建议您将SQL审计日志导出并保存至本地后,再减少SQL洞察和审计数据存储时长。登录 DAS控制台。在左侧导航栏中,单击 实例监控。找到目标实例,单击实例ID,进入目标实例详情页。在左侧导航栏,单击 请求分析>SQL洞察和审计。在 SQL洞察和...

SQL洞察和审计

建议您将SQL审计日志导出并保存至本地后,再减少SQL洞察和审计数据存储时长。登录 DAS控制台。在左侧导航栏中,单击 实例监控。找到目标实例,单击实例ID,进入目标实例详情页。在左侧导航栏,单击 请求分析>SQL洞察和审计。在 SQL洞察和...

低成本历史库

云原生多模数据库Lindorm提供海量数据的低成本存储能力(0.12元/GB/月)、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求,同时可以无缝对接spark、hive、flink、presto等开源分析生态满足用户对数据的复杂分析需求...

SQL洞察和审计

建议您将SQL审计日志导出并保存至本地后,再减少SQL洞察和审计数据存储时长。登录 DAS控制台。在左侧导航栏中,单击 实例监控。找到目标实例,单击实例ID,进入目标实例详情页。在左侧导航栏,单击 请求分析>SQL洞察和审计。在 SQL洞察和...

应用场景

数据存储与分析 传统的数据分析场景下,用户需要把数据从在线数据库(Operational Database)复制到离线数据仓库(Data Warehouse)上之后再进行数据分析,这需要海量数据的多次复制、传输、加载和存储等多方面工作。HybridDB for MySQL...

SQL洞察和审计

建议您将SQL审计日志导出并保存至本地后,再减少SQL洞察和审计数据存储时长。登录 DAS控制台。在左侧导航栏中,单击 实例监控。找到目标实例,单击实例ID,进入目标实例详情页。在左侧导航栏,单击 请求分析>SQL洞察和审计。在 SQL洞察和...

功能概览

建议您将SQL审计日志导出并保存至本地后,再减少SQL洞察和审计数据存储时长。登录 DAS控制台。在左侧导航栏中,单击 实例监控。找到目标实例,单击实例ID,进入目标实例详情页。在左侧导航栏,单击 请求分析>SQL洞察和审计。在 SQL洞察和...

ODS层设计规范

数据存储及生命周期管理规范 数据表类型 存储方式 最长存储保留策略 ODS流水型全量表 按天分区 不可再生情况下,永久保存。日志(数据量非常大,例如一天数据量大于100 GB)数据保留24个月。自主设置是否保留历史月初数据。自主设置是否...

低成本RDS历史库

云原生多模数据库 Lindorm 提供海量数据的低成本存储能力(0.12元/GB/月)、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求,同时可以无缝对接Spark、Hive、Flink、Presto等开源分析生态满足用户对数据的复杂分析...

应用场景:低成本历史库

云原生多模数据库 Lindorm 提供海量数据的低成本存储能力(0.11元/GB/月)、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求,同时可以无缝对接spark、hive、flink、presto等开源分析生态满足用户对数据的复杂分析...

冷热分层存储

并不是所有OSS-HDFS中存储数据都需要频繁访问,但基于数据合规或者存档等原因,部分数据仍然需要继续保存。针对以上问题,OSS-HDFS服务支持数据的冷热分层存储,对于经常需要访问的数据以标准类型进行存储,对于较少访问的数据以低频、...

教程概述

本文为您介绍当需要通过DataV展示海量数据的分析结果时,如何使用DataWorks的数据服务开发数据API,并快速在DataV中调用API,最终将来自MaxCompute的数据成果展示在DataV大屏中,数据开发到数据服务再到数据分析展现一气呵成。注意 本案例...

SQL概述

应用场景 MaxCompute SQL适用于海量数据(GB、TB、EB级别)、离线批量计算的场景。提交MaxCompute作业后,会存在几十秒到数分钟不等的排队调度,所以适合处理批作业,提交一次作业批量处理海量数据。不适合直接对接需要每秒处理几千至数万...

时序模型介绍

通过时序模型,您可以对时间序列进行存储、查询和分析。...服务能力自动水平扩展、支持高并发写入和查询以及PB级海量数据的低成本存储。使用时序模型 您可以通过以下方式使用时序模型。使用控制台 使用命令行工具 使用SDK

数据湖投递概述

表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储,以满足更低成本的历史数据存储,以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求:冷热数据分层 数据湖投递结合 表格存储 的 ...

SQL洞察和审计

建议您将SQL审计日志导出并保存至本地后,再减少SQL洞察和审计数据存储时长。访问 RDS实例列表,在上方选择地域,然后单击目标实例ID。在左侧导航栏中,选择 自治服务>SQL洞察和审计。单击 服务设置。在 服务设置 页,修改存储时长并单击 ...

DBS沙箱功能概览

背景信息 在海量数据场景下,传统数据库备份服务面临两大越来越严重的困难:存储成本:为了保障数据恢复点目标(Recovery Point Objective,RPO),周期性的全量和增量备份产生大量重复数据,导致存储成本过高。使用成本:您必须待数据完成...

概览

查看表的详情 宽表的详细信息包括表的行数、占用的热存储空间和冷存储空间,表结构信息,列簇的最大版本号、TTL和数据压缩类型,数据预览,分片的数量和每个分片的大小等。在 概览 页面,可根据idc、分组、Namespace和表四个维度进行查询...

时序模型

时序表操作 使用 表格存储 时序模型时,您需要使用 CreateTimeseriesTable 接口创建时序表用于时序数据存储。具体操作,请参见 创建时序表。创建时序表后,您可以管理时序表。具体操作说明请参见下表。功能 描述 列出时序表名称 当需要查看...

时序模型

时序表操作 使用 表格存储 时序模型时,您需要使用 CreateTimeseriesTable 接口创建时序表用于时序数据存储。具体操作,请参见 创建时序表。创建时序表后,您可以管理时序表。具体操作说明请参见下表。功能 描述 列出时序表名称 当需要查看...

元数据抽取

使用限制 抽取的数据存储仅支持数据存储在阿里云OSS标准型中的数据。目前元数据发现仅支持json、csv、parquet、orc、hudi、delta、avro格式。元数据发现消耗算力,目前暂不收取费用。操作步骤 新建抽取任务 登入 数据湖构建控制台。在左侧...

什么是云原生多模数据库Lindorm

本文介绍 云原生多模数据库 Lindorm 的...流引擎 云原生多模数据库 Lindorm 流引擎是 面向流式数据处理 的引擎,提供了流式数据的存储和轻计算功能,帮助您轻松实现流式数据存储至 云原生多模数据库 Lindorm,构建基于流式数据的处理和应用。

概述

表格存储 表格存储(Tablestore)是阿里云自研的结构化数据存储,提供海量结构化数据存储以及快速的查询和分析服务,具备PB级存储、千万TPS以及毫秒级延迟的服务能力。云存储网关 云存储网关(Cloud Storage Gateway)是一款可以部署在用户...

DAS企业版介绍

开通DAS企业版后,默认的 数据存储时长 为1个月,您可以根据自己的需要进行修改,具体请参见 管理DAS企业版。说明 SQL洞察 功能中分析和统计数据(不包括SQL明细数据)的存储时长最长为90天:如果对应实例DAS专业版设置的存储时长小于等于...

新建Doris数据

背景信息 Doris即Apache Doris,是一个基于MPP架构的高性能、实时的分析型数据库,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。基于此,能够较好的满足报表分析、...

云数据库RDS简介

数据结构多样时,可以选择将结构化数据存储在RDS,将非结构化数据存储在MongoDB,满足业务的多样化存储需求。MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案,提供了完善的数据导入方案...

存储说明

本文介绍E-MapReduce集群中数据存储相关的信息,包括磁盘角色、云盘与本地盘,以及OSS。背景信息 关于存储的类型、性能和相关的限制信息,请参见 什么是块存储。存储价格估算如下:本地盘实例存储为0.04 元/GB/月 OSS标准型存储为0.12 元/...

新建Doris数据

背景信息 Doris即Apache Doris,是一个基于MPP架构的高性能、实时的分析型数据库,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。基于此,能够较好的满足报表分析、...

基本概念

M MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB、PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将Lindorm数据导入...

创建MaxCompute数据

在 新建数据源 对话框的 大数据存储 区域,选择 MaxCompute。如果您最近使用过MaxCompute,也可以在 最近使用 区域选择MaxCompute。同时,您也可以在搜索框中,输入MaxCompute的关键词,快速筛选。在 新建MaxCompute数据源 对话框中,配置...

概述

适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储,提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息,请参见 什么是表格存储。云原生大数据计算服务(MaxCompute)是一...

概述

大部分阿里云用户以CSV格式将数据存储在OSS上,若要提高数据扫描性能,需要借助第三方工具对文件进行格式转换,然后将转换后的数据上传至OSS,整个过程比较繁琐。为减轻用户工作量,您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...

2024年

什么是DTS Serverless实例 新增 新增支持将 PolarDB MySQL版 集群的数据同步或迁移到SelectDB,以满足您的海量数据分析需求。PolarDB MySQL版同步至云数据库SelectDB版 PolarDB MySQL版迁移至云数据库SelectDB版 新增 新增支持SQL Server ...

SQL查询

SQL查询功能适用于在海量数据中进行在线数据访问类型的场景,SQL访问的延时从毫秒、秒到分钟级别不等,包括基于数据表主键的Point Query(GetRow操作)、多元索引的精确查询(TermQuery)等以及通过多元索引的统计聚合能力进行查询,例如...

什么是文件存储CPFS

在保持海量数据在OSS中低成本存储的同时,获得高性能文件访问能力。CPFS文件系统应用于AI训练、自动驾驶、基因计算、影视渲染、石油勘探、气象分析、EDA仿真等场景,适用于高吞吐、高IOPS、海量文件的IO密集型业务。关于CPFS文件系统实例...

创建MaxCompute数据

在 新建数据源 对话框的 大数据存储 区域,选择 MaxCompute。如果您最近使用过MaxCompute,也可以在 最近使用 区域选择MaxCompute。同时,您也可以在搜索框中,输入MaxCompute的关键词,快速筛选。在 新建MaxCompute数据源 对话框中,配置...

产品概述

云原生数据仓库 AnalyticDB PostgreSQL 版 是一种大规模并行处理(MPP)数据仓库服务,可提供海量数据在线分析服务。云原生数据仓库 AnalyticDB PostgreSQL 版 基于开源项目Greenplum构建,由阿里云深度扩展,兼容ANSI SQL 2003,兼容...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
表格存储 对象存储 云数据库 RDS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用