使用流程
如果您是首次使用云原生数据湖分析DLA的用户，我们建议您先阅读以下部分：产品简介-本内容概述了云原生数据湖分析DLA的产品概念、产品优势及应用场景等内容。产品定价-本内容介绍了云原生数据湖分析DLA的产品定价、计费方式等信息。云原生...
【通知】停止售卖云原生数据湖分析DLA
停售对象 云原生数据湖分析DLA 停售计划 2023年06月01日起，停止新购云原生数据湖分析DLA实例和开通服务。2023年12月01日起，停止升级云原生数据湖分析DLA实例和续费服务。2024年01月01日起，按地域逐步停止云原生数据湖分析DLA服务。停售...
功能特性
本文档主要介绍数据湖分析服务DLA包含的核心功能以及应用场景。数据湖分析服务DLA支持以下功能：功能名称 功能描述 参考文档 账号管理 账号分为DLA账号、RAM账号。您可以创建DLA子账号，并关联RAM子账号，关联后可以通过RAM子账号提交Spark...
测试方法
本次测试采用3种不同的测试场景，针对开源自建的Hadoop+Spark集群与阿里云云原生数据湖分析DLA Spark在执行Terasort基准测试的性能做了对比分析。您可以按照本文介绍自行测试对比，快速了解云原生数据湖分析（DLA）Spark引擎的性价比数据。...
OSS访问日志分析
您可以通过日志服务SLS存储和分析OSS日志数据，也可以将OSS日志数据导出并存储到指定的OSS目录长期保存，然后通过数据湖分析服务对长期保存的OSS日志数据进行分析。通过数据湖分析服务（Data Lake Analytics，DLA）分析OSS日志数据前，您...
计费概述
计费方式 计费类别 说明 适用场景 相关文档 按计算资源付费 数据湖分析CU版根据购买的CU规格进行计费，费用跟运行查询扫描的数据量没有关系。计费模式如下。包年包月。按量付费。适用于查询频率高、查询数据量较大的场景，同时也能够给您...
什么是DataWorks
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...
友盟数据分析
您需要购买数据湖分析流量包并完成支付，通过阿里云数据湖分析DLA产品来进行数据的查询和投递。支付完成后请您不要关闭浏览器，等待开通成功的提示窗口。查询数据 服务开通成功之后，等待一段时间您就可以看到友盟自动为您的阿里云账号创建...
典型场景
数据湖分析 云原生数据仓库AnalyticDB PostgreSQL版 可以通过外部表机制，高并行直接访问海量云存储OSS上的数据，构筑阿里云统一数据湖分析平台。产品功能优势 针对主要的OLAP业务，云原生数据仓库AnalyticDB PostgreSQL版 具备以下优势。...
删除服务访问点
删除VPC网络 进入 数据湖分析管理控制台。单击待删除VPC网络右侧的 删除。在弹出的 确认删除 框中，单击 确定。在弹出的 手机验证 框中，输入验证码，然后单击 确定 删除服务访问点。单击 更换手机，根据系统提示更换账号绑定手机。
DataWorks On EMR使用说明
EMR集群类型 EMR集群说明 DataWorks使用说明 DataLake集群（新版数据湖）：EMR on ECS 集群版本必须大于等于3.41.0或5.7.0。您需要将集群注册至DataWorks，后续才可以在DataWorks上使用EMR集群。Custom集群（自定义集群）：EMR on ECS 集群...
如何使用T+1全量同步一键建仓
在DLA中进行如下操作：开通DLA服务，具体请参见 开通云原生数据湖分析服务。初始化DLA数据库主账号密码，具体请参见 重置数据库账号密码。操作步骤 一键创建OSS数据仓库 创建一键建仓任务后，根据业务需要，您也可以在 数据入湖 页面的 ...
折扣活动
活动1：【免费试用】产品新用户免费领取CDN中国内地下行流量 活动详情 产品新用户免费领取固定额度的CDN中国内地下行流量，立即领取。活动对象 阿里云注册会员，且完成阿里云企业认证或个人认证用户。产品新用户是指从未购买且未试用过此...
湖仓一体
有关SelectDB支持的外部数据源，请参见 数据湖分析 和 数据库分析。云数据库SelectDB 也提供表函数功能（Table-Value-Function或TVF），支持把S3、HDFS等常见远端存储中的文件数据，映射成 云数据库SelectDB 中的表，从而方便地对这些文件...
DLA Presto CU版本快速入门
本文主要教您如何快速上手阿里云云原生数据湖分析DLA Presto CU版本。操作步骤 创建虚拟集群 与Serverless Presto扫描版不同，在CU版本下执行SQL前，必须要创建一个虚拟集群。具体请参见 虚拟集群管理。说明 创建虚拟集群时，选项 引擎 ...
OSS Foreign Table功能概览
OSS Foreign Table（简称OSS FDW）是基于PostgreSQL ...支持 不支持 相关文档 使用OSS Foreign Table进行数据湖分析 使用OSS Foreign Table导出数据 使用OSS Foreign Table分区表 OSS Foreign Table使用技巧 OSS Foreign Table数据类型对照表
ActionTrail日志清洗
在DLA中完成以下操作：开通DLA服务，请参见 开通云原生数据湖分析服务。初始化DLA数据库主账号密码，请参见 重置数据库账号密码。步骤一：创建Schema 登录 Data Lake Analytics管理控制台。在页面左上角，选择DLA所在地域。在左侧导航栏...
常见问题
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
折扣活动
活动1：【免费试用】领取每月固定免费金额，连送3个月 活动详情 产品新用户领取每月固定免费金额，可抵扣下行流量（全球所有区域）、动态请求数、静态请求数费用，测试无忧！立即领取。活动对象 阿里云注册会员，且完成阿里云企业认证或...
新功能发布记录
02-26 设置SSL加密 新增 全密态数据库 RDS MySQL新增全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。02-22 全密态数据库 01月 类别 功能名称 功能描述 发布时间...
测试环境
本次测试针对开源自建的Presto与阿里云云原生数据湖分析DLA Presto在OSS数据源上执行查询的性能做了对比分析。本文档主要介绍了测试环境的配置要求。环境配置要求 客户端ECS与服务端（Presto和DLA Presto）处于同一地域、同一可用区。本例...
按扫描量付费
您可以登录 数据湖分析管理控制台，通过 费用>订单 查看消费记录。如何节省费用 您可以先通过以下3种方式对原始数据进行处理，然后再使用DLA扫描数据，可以节省一定的费用。格式转换：把原始数据的格式转换为高性能格式。DLA支持多种高性能...
读写AnalyticDB for PostgreSQL数据
数据湖分析DLA（Data Lata Analytics）支持接入AnalyticDB for PostgreSQL服务，通过标准SQL语句读写AnalyticDB for PostgreSQL中的数据。准备工作 您需要在AnalyticDB for PostgreSQL中进行以下操作：创建实例和配置实例，具体操作请参见 ...
什么是云原生数据湖分析
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...
背景信息以及准备工作
在同一地域开通 数据湖分析 DLA（Data Lake Analytics）服务、AnalyticDB for MySQL 3.0 以及 对象存储服务 OSS（Object Storage Service）服务。在AnalyticDB for MySQL中创建数据库和表，用于存储OSS数据，请参见 CREATE DATABASE、...
权限说明
本文主要介绍数据湖构建（DLF）的权限体系说明，介绍如何为子账号授予合适的权限，以使其可以正确的使用和访问DLF的功能。数据湖构建（DLF）产品的权限体系主要分为RAM权限以及DLF数据权限控制两大类，如果您要访问DLF的页面或数据，一般都...
背景信息及准备工作
在DLA中完成以下准备工作 开通云原生数据湖分析服务。重置数据库密码。在Quick BI中完成以下准备工作 目前只有Quick BI专业版和Quick BI高级版，支持添加DLA数据源。关于如何购买 和免费试用Quick BI，请参见 Quick BI购买、升级、降级、...
什么是MaxCompute
湖仓一体 集成对数据湖（OSS或Hadoop HDFS）的访问分析，支持通过外部表映射、Spark直接访问方式开展数据湖分析。在一套数据仓库服务和用户接口下，实现数据湖与数据仓库的关联分析。详细信息，请参见 MaxCompute湖仓一体概述。离线实时...
产品简介
DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如...
DLF中数据入湖功能停止更新公告
停止更新说明 停止更新时间 2023年02月15日 停止更新影响 数据入湖功能停止更新及新用户使用，未使用数据入湖的用户将不可见数据入湖功能。停止更新期间，已有数据入湖任务和作业依旧提供运维及售后支持服务。建议 如果您有类似数据入湖的...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
Delta Lake和Hudi是数据湖方案中常用的存储机制，为数据湖提供流处理、批处理能力。MaxCompute基于阿里云DLF、RDS或Flink、OSS产品提供了支持Delta或Hudi存储机制的湖仓一体架构。您可以通过MaxCompute查询到实时数据，即时洞察业务数据...
功能发布记录（2022年）
阿联酋（迪拜）所有DataWorks用户 数据集成概述 DataWorks支持EMR新版数据湖DataLake DataWorks支持基于EMR计算引擎新版数据湖DataLake，实现基于EMR引擎的数据集成、数据建模、数据开发调度、数据质量、数据地图、数据安全、数据分析（独...
SDK安装与使用
获取开发用的SDK 可以在PIP的仓库中获取数据湖分析最新的开发SDK包，地址为 Python SDK官方地址。使用SDK提交Spark作业 获取用户的AccessKey，详情请参见 获取AccessKey。获取当前使用区的RegionId,阿里云各区的RegionId可以参见 地域和...
数据湖集群
E-MapReduce（简称EMR）新版控制台提供了数据湖集群，一个更灵活、可靠，以及高效的大数据计算集群。同时，您可以基于该集群轻松构建一个可扩展的数据管道。本文为您介绍数据湖集群支持的特性，以及与旧版Hadoop集群之间的差异。数据湖集群...
常见术语
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统Hadoop方案...
一键同步RDS表结构
云原生数据湖分析DLA支持通过标准JDBC对RDS（MySQL、SQLServer、PostgreSQL）中的数据进行查询和分析，并可以将分析结果回写入RDS。RDS一键同步元数据功能，只需要在DLA中创建RDS Schema，然后通过 MSCK REPAIR TABLE 命令一键将数据库中...
OSS
重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能，并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档，请参见 访问OSS数据源。操作步骤 配置DLA访问OSS的权限。如果您...
背景信息以及准备工作
数据湖分析 DLA（Data Lake Analytics）作为云上数据处理的枢纽，通过DLA可以读取存储在对象存储服务 OSS（Object Storage Service）中的数据，对其进行清洗后再通过DLA将结果数据写入AnalyticDB for MySQL 2.0，通过AnalyticDB for MySQL ...
日志管理
冷数据 冷数据是基于阿里云自研的安全数据湖能力，联合OSS提供的日志存储及数据湖构建服务提供的日志分析能力。开通冷数据功能后，威胁分析与响应服务会在OSS服务创建两个Bucket：security-lake-阿里云账号ID-数据湖名称：该Bucket存储投递...
Redis
重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能，并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档，请参见 访问Redis数据源。前提条件 已经开通对象存储OSS...
- 产品推荐
- 这些文档可能帮助您