整体架构

云原生数据仓库AnalyticDB MySQL版 是阿里巴巴自主研发、经过超大规模以及核心业务验证的PB级实时数据仓库。概述 自2012年第一次在集团发布上线以来,AnalyticDB MySQL版 至今已累计迭代发布近百个版本,支撑起集团内的电商、广告、物流、...

快速入门综述

分析型数据库MySQL版(AnalyticDB MySQL版)是一种高并发低延时的PB级实时数据仓库,全面兼容MySQL协议以及SQL 2003语法标准,可以毫秒级针对万亿级数据进行即时的多维分析透视和业务探索。前提条件 先注册阿里云账号。如果以按量付费方式...

阿里云MaxCompute数据

概述 云原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速地解决用户海量数据计算问题,有效降低企业成本,并保障数据...

产品概述

既提供高性能离线数据处理,也支持高并发在线分析查询,是各行业有竞争力的PB级实时数据仓库方案。主要功能 易适配,免调优 支持SQL 2003,部分兼容Oracle语法,支持PL/SQL存储过程。新一代SQL优化器,实现复杂分析语句免调优。PB级数据秒...

概述

云原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全...

分析MaxCompute外部表数据

数据计算服务(MaxCompute,原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute的非结构化框架支持通过INSERT方式将MaxCompute的数据直接输出到OSS。MaxCompute也支持通过外部表关联OSS,进行数据输出。由于...

基于Flink的资讯场景实时数仓

分析型数据库MySQL版 分析型数据库MySQL版(AnalyticDB for MySQL)是一种高并发低延时的PB级实时数据仓库,兼容MySQL协议以及SQL:2003语法标准,可以毫秒级针对万亿级数据进行即时的多维分析透视和业务探索。更多关于分析型数据库MySQL版...

基于AnalyticDB实现城市公交系统智能化

解决方案 针对接近PB级乘车数据和物联网平台数据的存储、计算、分析与查询需求,启迪公交通过多款阿里云数据产品实现北京市公交系统的智能化。方案解读:启迪公交采用分布式关系型数据库DRDS(Distributed Relational Database Service)...

行业趋势与背景

PolarDB-X 技术发展 产品前言 PolarDB-X 是由阿里巴巴自主研发的云原生分布式数据库,融合分布式SQL引擎DRDS与分布式自研存储X-DB,基于云原生一体化架构设计,可支撑千万级并发规模及百PB级海量存储。专注解决海量数据存储、超高并发吞吐...

用户行为分析(UV)概述

解决方案与优势 Hologres是基于分析服务一体化理念(Hybrid Serving&Analytical Processing,HSAP)设计的实时数仓产品,采用分布式架构,支持数据实时写入,高并发、低延时的分析处理PB级数据,兼容PostgreSQL协议,使用最熟悉的工具就能...

快速玩转Tablestore入门与实战

Tablestore结合Spark的流批一体SQL实战 Tablestore+Blink实战:交易数据实时统计 百亿级全网舆情分析系统存储设计 海量监控日志基于EMR Spark Streaming SQL进行实时聚合 物联网 表格存储 单表提供PB级数据存储规模,无需分库分表,同时...

采集-IoT/嵌入式日志

嵌入式开发需求主要有以下几点:数据采集:如何实时采集分散在全球各地的百万/千万设备上的数据?调试:如何使用一套方案既满足线上数据采集又满足开发时的实时调试?线上诊断:某个线上设备出现错误,如何快速定位设备,查看引起该设备...

公交出行:启迪公交

预计未来年均将达到PB级以上的数据存储、计算、分析和查询需求。解决方案 启迪公交采用 PolarDB-X 分布式数据方案构建了全部业务系统,既支持海量大数据的处理能力,又支持高并发、高可用和很强的弹性伸缩能力。票务管理工作台通过用户...

背景

存储水平扩展,查询能力强 表格存储可实现PB级数据的存储和查询,同时提供全局二级索引、多元索引等功能扩充查询能力,满足多种业务的负载和查询需求。如果采用组合使用MySQL、HBase、Elasticsearch等多款产品的方式实现不同业务的查询需求...

什么是云原生数据湖分析

云原生数据湖分析(简称DLA)是新一代大数据解决方案,采取计算与存储完全分离的架构,支持数据库(RDS\PolarDB\NoSQL)与消息实时归档建仓,提供弹性的Spark与Presto,满足在线交互式查询、流处理、批处理、机器学习等诉求,也是传统...

常见问题

表格存储 支持对接MaxCompute、Spark等批计算以及通过实时数据通道对接Flink流计算。访问安全性 表格存储 提供多种权限管理机制,并对每一次请求都进行身份认证和鉴权,以防止未授权的数据访问,确保数据访问的安全性。支持数据访问权限...

什么是DataWorks

典型客户 国家电网大数据中心:通过DataWorks实现总部+27家省(市)公司PB级数据的统一管理,通过全链路数据中台的治理与监测运营体系,加快电网整体数字化转型升级。世界500强亿滋中国:通过DataWorks智能数据建模进行全链路的数据模型...

一键建仓

AnalyticDB MySQL版是云端托管的大规模并行处理的PB级数据仓库,具有快、灵活、易用、超大规模、高并发写入等特点。更多信息,请参见 什么是云原生数据仓库MySQL版。费用说明 AnalyticDB MySQL实例费用:若您购买新的AnalyticDB MySQL实例...

上海新能源汽车车辆基础数据

方案亮点:PB级新能源车辆基础数据、高性能采集入库、高效数据分析、低成本运营。客户感言 2019年开始上海市新能源汽车大数据平台从自建Hadoop集群迁移至阿里云Lindorm+DLA Spark产品,有效解决了我们平台存储和计算的横向动态扩容瓶颈,...

图扑案例

对于需要实时采集海量数据的生产线、风电厂和智能交通态势感知数据的场景,为了实现实时数据采集、存储、索引和聚合,原存储方案中采用了ElasticSearch、Prometheus、Hbase分别存储从现场传感器、第三方系统和用户终端设备采集的时序指标、...

实时数仓Hologres使用流程

Hologres是一款企业级分析和服务一体化的实时数仓,支持数据实时写入实时更新,PB级数据多维查询。如果您是首次使用Hologres的用户,建议您先阅读以下内容。产品简介:本内容概述了Hologres产品介绍、产品优势及应用场景等内容。计费概述:...

支持的云服务

实时数仓Hologres Hologres是一站式实时数据仓库引擎,支持海量数据实时写入、实时更新、实时分析,支持标准SQL(兼容PostgreSQL协议),支持PB级数据多维分析(OLAP)与即席分析(Ad Hoc),支持高并发低延迟的在线数据服务(Serving),...

物联网存储介绍

支持单表10 PB级数据量、万亿条记录数以及千万级别的TPS能力,能实现自动负载均衡以及热点迁移,无需人工介入。易集成 具有便捷的数据上行链路,支持Kafka、阿里云物联网平台、MQTT、EMQX等物联网数据源接入。支持与Spark、MaxCompute、...

RDS术语

M MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将RDS数据导入...

日志服务数据同步至Hologres

Hologres致力于高性能、高可靠、低成本、可扩展的实时计算引擎研发,为用户提供海量数据的实时数据仓库解决方案和亚秒交互式查询服务,广泛应用在实时数据中台建设、精细化分析、自助式分析、营销画像、人群圈选、实时风控等场景。...

某手游开发公司在离线一体分析方案

方案亮点:PB级数据量、同时支持在线和离线数据分析。业务挑战 通过对游戏服的用户行为日志进行收集、存储和分析,计算玩家留存率、LTV、ARPU、充值总金额等。游戏运营变化快,需要灵活的Schema。在线用户基数大,日志数据规模大,需要高...

RDS术语

M MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将RDS数据导入...

RDS术语

M MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将RDS数据导入...

RDS术语

M MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将RDS数据导入...

RDS术语

M MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将RDS数据导入...

技术架构

其底层基础设施采用阿里双11异地多活架构,为数千下游应用提供实时数据流。数据库备份(Database Backup,简称DBS),低成本、企业的云原生备份平台。它可以为多种环境的数据库提供强有力的保护,包括本地数据中心、其他云厂商、公共云及...

什么是MaxCompute

MaxCompute是适用于数据分析场景的企业SaaS(Software as a Service)模式云数据仓库,以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效...

产品概述

HTAP 随着移动互联网和IoT设备的普及,数据会产生爆炸式的增长趋势,传统的OLTP和OLAP的解决方案是基于简单的读写分离或者ETL模型,将在线库的数据以T+1的方式抽取到数据仓库中进行计算,这种方案存在存储成本高、实时性差、链路和维护成本...

免费体验Lindorm宽表性能&价格力

Lindorm宽表引擎支持千万级高并发吞吐,支持百PB级存储,吞吐性能是开源HBase(Apache HBase)的3~7倍,P99时延为开源HBase(Apache HBase)的1/10,平均故障恢复时间相比开源HBase(Apache HBase)提升10倍,支持冷热分离,压缩率比开源...

2023年

Sugar BI连接MaxCompute 2023年9月更新记录 时间 特性 类别 描述 产品文档 2023-09-27 新增TPC-DS性能测试 新说明 MaxCompute适用于TB、PB和EB等各个数量数据查询场景,并在业界具有较大的性能优势,本文基于MaxCompute提供的公开数据...

DataWorks数据服务对接DataV最佳实践

数据服务对接DataV产生背景 MaxCompute是阿里巴巴集团自主研究的快速、完全托管的TB、PB和EB级数据仓库解决方案。当今社会数据收集的方式不断丰富,行业数据大量积累,导致数据规模已增长到传统软件行业无法承载的海量级别。MaxCompute服务...

客户案例

价值体现 从大数据平台上云整体“降本增效”的方案快速切入,迁移到大数据MaxCompute、实时计算、DataWorks后,部分任务有10倍以上的性能提升,存储从自建Hadoop 3PB降到900T,利用Flink实时数据处理能力,将宝宝树现有的场景实时化(...

文档修订记录

向量计算实例规格推荐 2023.12.27 新增数据湖加速查询 新说明 基于阿里云数据湖构建(Data Lake Formation,DLF)和对象存储(Object Storage Service,OSS)推出的Hologres数据湖加速服务,提供了灵活的数据访问和分析能力以及高效的数据...

2020年

新功能 MC-Hologres 是为大数据设计的实时交互式分析产品,它与MaxCompute无缝打通,支持数据实时写入,支持PB级数据进行高并发、低延时的分析处理。兼容PostgreSQL协议,可以使用您最熟悉的BI工具对海量数据进行自助的多维分析透视和业务...

文档修订记录

增强分析(卡片和报告)2023.08.04 新增功能 数据集成 以Kafka实时入湖写入至OSS场景为例,为您介绍如何通过数据集成实时入湖 Kafka单表实时入湖OSS(HUDI)2023年7月更新记录 时间 特性 类别 描述 产品文档 2023.7.31 优化体验 数据服务 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 云服务器 ECS 云数据库 RDS 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用