阿里云电子政务云架构
阿里云电子政务云依托于阿里云业内先进的技术，提供与其他机房完全物理隔离的专属高规格物理集群、高等级的安全防护，从平台系统架构、网络架构的设计层面开始，保障政务云的独立性、安全性、高可用性。平台系统架构 阿里云电子政务云基于...
概述
AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征，并利用特征向量作为非结构化数据的唯一标识，帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中，绝大多数的数据都...
上海新能源汽车车辆基础数据
方案亮点：PB级新能源车辆基础数据、高性能采集入库、高效数据分析、低成本运营。客户感言 2019年开始上海市新能源汽车大数据平台从自建Hadoop集群迁移至阿里云Lindorm+DLA Spark产品，有效解决了我们平台存储和计算的横向动态扩容瓶颈，...
基于SLS+OSS+DLA构建海量、低成本日志分析方案
阿里云从用户角度出发，研发了一整套小而精的历史日志数据分析方案。利用阿里云日志服务（Log Service，SLS）来投递日志和查询热日志，利用阿里云对象存储服务（Object Storage Service，OSS）来持久存储由SLS服务实时投递的日志，利用阿里...
创建云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB...
重要 如果您同时在使用阿里云上的其他云服务，例如云服务器ECS、云数据库RDS等，请确保 云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）与其他云服务位于同一个VPC，否则它们无法通过内网互通，无法发挥最佳性能。选择 弹性...
快速配置子账号权限
重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能，并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档，请参见 账号授权。前提条件 已创建RAM子账号。具体请参见 创建...
Serverless Spark概述
DLA Spark基于云原生架构，提供面向数据湖场景的数据分析和计算功能。开通DLA服务后，您只需简单的配置，就可以提交Spark作业，无需关心Spark集群部署。重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓...
Redis
阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务，基于高可靠双机热备架构及可平滑扩展的集群架构，可充分满足高吞吐、低延迟及弹性变配的业务需求。本文主要介绍如何通过DLA Serverless Spark访问云数据...
DLA Presto CU版本快速入门
本文主要教您如何快速上手阿里云云原生数据湖分析DLA Presto CU版本。操作步骤 创建虚拟集群 与Serverless Presto扫描版不同，在CU版本下执行SQL前，必须要创建一个虚拟集群。具体请参见 虚拟集群管理。说明 创建虚拟集群时，选项 引擎 ...
DLA Spark快速入门
操作步骤 登录 云原生数据湖分析管理控制台。在 概览 页面的左上角，选择虚拟集群所在地域。单击左侧导航栏的 Serverless Spark>作业管理。在 作业编辑 页面，单击 创建作业模板，填写以下作业信息：新创建的作业中包含了SparkPi作业的默认...
通过元信息发现功能查询并分析OSS数据
操作步骤 开通云原生数据湖分析服务。登录 OSS管理控制台，上传文件到OSS，具体操作请参见 上传文件。例如将 supplier_with_header.csv 文件上传到OSS的指定目录 oss:/alibaba-crawler/schema1/supply_ceshi/。登录 数据湖分析管理控制台，...
API概览
云原生数据湖分析DLA提供以下相关API接口。Serverless Spark API 描述 SubmitSparkSQL 提交SparkSQL作业。SubmitSparkJob 提交Spark作业。GetJobStatus 获取Spark作业的执行状态。服务管理 API 描述 CreateInstance 创建实例。...
Lindorm实时入湖建仓分析
在 SQL执行 页面，系统已经选中了目标库，您可以直接输入SQL语句进行数据分析。Lindorm与DLA的字段类型转换表 目前支持的字段类型转换如下。Lindorm字段类型 DLA字段类型 long、usigned_long、short、unsigned_short、int、unsigned_...
赛盒广告精细化管理方案
解决方案 针对以上问题，阿里云通过 分析型数据库MySQL（AnalyticDB MySQL）和Quick BI制定了解决方案。方案中采用 AnalyticDB MySQL 存放业务数据，AnalyticDB MySQL 的配置为集群版16个C8节点，可支撑上万TPS（Transactions-per-second）...
调度DLA Presto任务
同时执行DLA任务流时产生的中间结果可以被复用，例如用于其他数据分析任务，从而最大化利用DLA的资源。任务调度中一个重要的功能是任务之间的依赖，为演示该功能，本文在DMS中创建两个DLA任务，表、任务之间的关系如下图所示。任务一 从...
如何使用T+1全量同步一键建仓
在DLA中进行如下操作：开通DLA服务，具体请参见 开通云原生数据湖分析服务。初始化DLA数据库主账号密码，具体请参见 重置数据库账号密码。操作步骤 一键创建OSS数据仓库 创建一键建仓任务后，根据业务需要，您也可以在 数据入湖 页面的 ...
支持的地域
本文提供数据安全中心的主要功能模块所支持的地域...PG 重点功能模块支持的地域（政务云）地域名称 数据识别 数据脱敏 安全审计 数据风险检测 华北2 阿里政务云1 仅支持审计OceanBase、RDS-Mysql、RDS-PG 仅支持OceanBase、RDS-Mysql、RDS-PG
Kafka实时入湖建仓分析
在 SQL执行 页面，系统已经选中了目标库，您可以直接输入SQL语句进行数据分析。（可选）OSS数据存储管理。在 湖仓列表 页签单击 存储路径 下的OSS路径链接。在OSS控制台查看已经从Kafka数据源同步过来的库表路径以及表文件。数据库路径：/...
ClickHouse
您已经开通云数据库ClickHouse,详情请参见 开通ClickHouse服务。准备Spark计算节点所需要的 交换机id 和 安全组id，可以选择已有的交换机和安全组，也可以新建 交换机 和 安全组。交换机和安全组需要满足以下条件。交换机需要与您的...
读写AnalyticDB for PostgreSQL数据
云数据库AnalyticDB for PostgreSQL（原HybridDB for PostgreSQL）是一种大规模并行处理（MPP）数据仓库服务，兼容PostgreSQL/Oracle数据库生态，支持行存储和列存储模式。数据湖分析DLA（Data Lata Analytics）支持接入AnalyticDB for ...
约束和限制
本文档主要介绍了云原生数据湖分析（Data Lake Analytics，DLA）的限制约束条件。账号和元数据限制 限制 描述 每个账号可购买虚拟集群数量的最大值 10 每个DLA Presto虚拟集群可配置的数据源网络数量 1 每个账号可创建数据库的最大值 100 ...
产品优势
云原生数据湖分析DLA（Data Lake Analytics）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库与消息实时归档建仓。DLA提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统Hadoop...
测试环境
本次测试针对开源自建的Presto与阿里云云原生数据湖分析DLA Presto在OSS数据源上执行查询的性能做了对比分析。本文档主要介绍了测试环境的配置要求。环境配置要求 客户端ECS与服务端（Presto和DLA Presto）处于同一地域、同一可用区。本例...
调度DLA Spark任务
您已开通云原生数据湖分析服务，详情请参见 开通云原生数据湖分析服务 您已开通OSS服务，详情请参见 开通OSS服务。您已创建DLA Spark虚拟集群，详情请参见 创建虚拟集群。说明 如果您想用RAM用户提交Spark作业，且之前未使用过RAM用户在DLA...
测试结果
本次测试采用3种不同的测试场景，针对开源自建的Hadoop+Spark集群与阿里云云原生数据湖分析DLA Spark在执行Terasort基准测试的性能做了对比分析。本文档主要展示了开源自建Spark和DLA Spark在3种测试场景下的测试结果及性能对比分析。1 TB...
政务场景安全访问实践
阿里云电子政务云上，您可使用RAM帮助您达到以上的安全访问要求。在政务云上，您可以设置RAMID，并要求用户必须使用安全信道，在指定时间范围或在指定源IP条件下才能操作指定的云资源，以达到安全访问的要求。具体操作方式您可参考RAM的...
Spark UDF
重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能，并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档，请参见 Spark SQL开发介绍。使用元数据服务管理用户自定义函数...
登录阿里云电子政务云
已完成政务云 注册账号并认证 后，您可以使用此账号登录政务云平台，用于后续购买使用政务云产品。背景信息 登录阿里云电子政务云平台前，请先确认已完成 注册账号并认证。为满足政务云安全等保要求，用户账号需绑定MFA（多因素认证），...
扫描量版本与CU版本的差异
当您 开通云原生数据湖分析服务（DLA）后，根据您实际的使用场景，您可以选择扫描量版本或者CU版本。DLA Presto引擎既支持扫描量版本也支持CU版本，DLA Spark只支持CU版本。扫描量版本 DLA默认版本，适用于查询频率低、查询数据量较小的...
Cassandra
云原生数据湖分析（Data Lake Analytics，DLA）支持通过CU版访问Cassandra。本文主要介绍如何通过DLA连接并查询Cassandra上的数据。前提条件 DLA目前仅支持通过CU版访问Cassandra，请确保您已经开通了DLA CU版本，具体请参见 DLA Presto CU...
漏斗分析
步骤三：使用漏斗分析函数进行数据分析 按照启动>登录>搜索商品>查看商品>生成订单的事件触发顺序，对应的事件ID为10001>10002>10003>10004>10007。以下示例通过 funnel_count 函数，查询1月1号到20号一共20天、时间窗口为7天（单位毫秒...
Spark SQL
无需用户打包jar包或者写python代码，更有利于数据开发人员使用Spark进行数据分析。您需要先登录 DLA控制台，在 Serverless Spark>作业管理 菜单中创建SparkSQL类型的作业。创建SparkSQL类型的作业后，系统默认会使用DLA元数据服务。如果您...
服务授权
在没有您授权的情况下，阿里云的售后团队和云数据库MongoDB开发团队只能查看MongoDB实例资源、资费和性能相关的信息。例如，云数据库MongoDB实例的购买时间和到期时间，云数据库MongoDB的CPU、内存、存储空间的使用情况等。若您需要阿里云...
API概览
本产品（云数据库 SelectDB 版/2023-05-22）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
读写Elasticsearch数据
云原生数据湖分析DLA（Data Lake Analytics）中支持接入Elasticsearch，通过标准SQL语句读取Elasticsearch中的数据，从而实现Elasticsearch中的数据与其他数据源的数据联合查询等业务需求。本文档主要介绍了DLA读写Elasticsearch数据的操作...
Kafka
重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能，并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档，请参见 访问Kafka数据源。前提条件 在DLA Serverless Spark中...
入门概述
快速入门介绍购买并使用 云数据库 SelectDB 版 的完整过程，旨在帮助新用户快速使用 云数据库 SelectDB 版。使用流程 在本教程中，您将进行以下操作。创建实例：介绍如何创建 云数据库 SelectDB 版 实例。重置实例admin密码：介绍如何重置 ...
API概览
本产品（云数据库 ClickHouse 版/2019-11-11）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足...
测试环境
本次测试采用3种不同的测试场景，针对开源自建的Hadoop+Spark集群与阿里云云原生数据湖分析DLA Spark在执行Terasort基准测试的性能做了对比分析。本文档主要介绍了3种不同测试场景下的测试环境配置要求。环境配置要求 测试环境总体要求：自...
管理RAM账号
云原生数据湖分析DLA使用的系统策略如下：AliyunDLAFullAccess：管理DLA的权限，包括对DLA中所有资源的所有操作权限。AliyunDLADeveloperAccess：开发者权限，与AliyunDLAFullAccess策略相比，不授予虚拟集群的创建、修改、释放等操作权限...
- 产品推荐
- 这些文档可能帮助您