云原生数据湖分析架构

  1. 阿里云 >
  2. 全部产品 >
  3. 云原生数据湖分析 DLA >
  4. 云原生数据湖分析架构

应用场景

云原生数据湖分析架构
采用云原生架构,大幅降低运维工作量
能够提供
在开源Apache Spark基础上研发,兼容Spark、pySpark生态,开源算法库等。
在开源Presto基础上研发,兼容Presto生态。
Serverless Spark拥有良好的弹性能力,支持Job级别的弹性。可设置长期保有资源(MIN)、弹性资源上限(MAX),MIN最小为0。数据湖分析实例自动根据业务波峰波谷在MIN 与 MAX 之间弹性扩缩容,无需提前预留资源,降低成本的同时保持业务稳定运行。
进行数据ETL,入湖建仓。
Serverless Presto 提供内置cache,分时弹性、分区投影,帮助用户快速搭建BI报表。
推荐搭配产品
点击查看完整内容
云原生数据湖分析架构 相关文章
【通知】停止售卖云原生数据湖分析DLA
停售对象 云原生数据湖分析DLA 停售计划 2023年06月01日起,停止新购云原生数据湖分析DLA实例和开通服务。2023年12月01日起,停止升级云原生数据湖分析DLA实例和续费服务。2024年01月01日起,按地域逐步停止云原生数据湖分析DLA服务。停售...
使用流程
云原生数据湖分析DLA(Data Lake Analytics)是无服务器(Serverless)化的云上交互式查询分析服务,支持通过Presto和Spark引擎分析多种数据源中的数据。快速入门旨在介绍如何开通DLA、构建数据湖、调用Presto和Spark引擎进行数据分析与...
与Spark集成分析
DLA Ganos是基于云原生数据湖分析(Data Lake Analytics,DLA)系统设计开发的,面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化(Serverless)数据湖分析服务与内置的Spark计算引擎,DLA Ganos提供了不同级别的数据分析模型,...
典型场景
数据湖分析 云原生数据仓库AnalyticDB PostgreSQL版 可以通过外部表机制,高并行直接访问海量云存储OSS上的数据,构筑阿里云统一数据湖分析平台。产品功能优势 针对主要的OLAP业务,云原生数据仓库AnalyticDB PostgreSQL版 具备以下优势。...
DLA Spark快速入门
操作步骤 登录 云原生数据湖分析管理控制台。在 概览 页面的左上角,选择虚拟集群所在地域。单击左侧导航栏的 Serverless Spark>作业管理。在 作业编辑 页面,单击 创建作业模板,填写以下作业信息:新创建的作业中包含了SparkPi作业的默认...
DLA Presto CU版本快速入门
本文主要教您如何快速上手阿里云云原生数据湖分析DLA Presto CU版本。操作步骤 创建虚拟集群 与Serverless Presto扫描版不同,在CU版本下执行SQL前,必须要创建一个虚拟集群。具体请参见 虚拟集群管理。说明 创建虚拟集群时,选项 引擎 ...
API概览
云原生数据湖分析DLA提供以下相关API接口。Serverless Spark API 描述 SubmitSparkSQL 提交SparkSQL作业。SubmitSparkJob 提交Spark作业。GetJobStatus 获取Spark作业的执行状态。服务管理 API 描述 CreateInstance 创建实例。...
约束和限制
本文档主要介绍了云原生数据湖分析(Data Lake Analytics,DLA)的限制约束条件。账号和元数据限制 限制 描述 每个账号可购买虚拟集群数量的最大值 10 每个DLA Presto虚拟集群可配置的数据源网络数量 1 每个账号可创建数据库的最大值 100 ...
调度DLA Spark任务
您已开通云原生数据湖分析服务,详情请参见 开通云原生数据湖分析服务 您已开通OSS服务,详情请参见 开通OSS服务。您已创建DLA Spark虚拟集群,详情请参见 创建虚拟集群。说明 如果您想用RAM用户提交Spark作业,且之前未使用过RAM用户在DLA...
快速配置子账号权限
重要 云原生数据湖分析DLA)产品已退市,云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能,并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档,请参见 账号授权。前提条件 已创建RAM子账号。具体请参见 创建...

热门推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化
其他推荐内容