MaxCompute SQL是MaxCompute中用于数据查询和分析的SQL语言,其语法类似于标准SQL,但在标准语法ANSI SQL92的基础上进行了一些扩展和限制以更好地服务于大规模数据仓库的场景。本文为您介绍MaxCompute SQL使用场景、使用向导及支持的工具...
本文介绍如何使用DataWorks数据同步功能,将 云消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute,方便您对离线数据进行分析加工。前提条件 在开始本教程前,确保您在同一地域中已完成以下操作:云消息队列 Kafka 版 ...
单实例成本对比云数据库Redis社区版最高可降低30%,且数据持久化不依赖传统磁盘,保证每个操作持久化的同时提供近乎Redis社区版的吞吐和延时,极大提升业务数据可靠性。购买方式 创建实例 背景信息 由于内存的价格相对昂贵且容量具备较大的...
AnalyticDB PostgreSQL版 提供多种数据迁移方案,可满足不同的数据同步或迁移的业务需求,您可以在不影响业务的情况下,平滑地与各种类型的数据库实例进行迁移或数据同步。迁移数据到AnalyticDB PostgreSQL版 迁移类型 文档 简介 是否支持...
MaxCompute湖仓一体概述 MaxCompute支持渐进式计算 MaxCompute支持渐进式计算,在处理数据过程中按照一定时间颗粒度自动按时间分区保存处理过程中的中间结果数据,在下一个周期执行时可以重复使用上周期已经计算好的重叠时间部分的数据,...
不同于自建Redis数据库,选用云数据库Redis时,您无需再额外考虑云数据库Redis持久化Fork写时复制占用的内存开销以及云数据库Redis增强功能(如安全白名单、审计、大Key、热Key等)的内存开销,这些开销由阿里云承担,不计入购买的实例内存...
单实例成本对比 Redis社区版 最高可降低30%,且数据持久化不依赖传统磁盘,保证每个操作持久化的同时提供近乎Redis社区版的吞吐和延时,极大提升业务数据可靠性。购买方式 创建Tair实例 背景信息 由于内存的价格相对昂贵且容量具备较大的...
例如,对于财务报表,如果业务系统的改造影响财务报表的计算,导致约定好的计算口径被业务系统变更修改,则这种情况必须告知离线开发人员,离线开发人员也必须主动关注这类发布变更通知。说明 发布平台不是指阿里云提供的发布平台,只是一...
PolarDB 是阿里巴巴自研的新一代 云原生数据库,在存储计算分离架构下,利用了软硬件结合的优势,为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。PolarDB 100%兼容PostgreSQL 11,PostgreSQL 14,高度兼容Oracle。...
创建 云原生内存数据库Tair 实例前,您需要结合产品性能、价格、业务场景、工作负载等因素,做出性价比与稳定性最优的决策。本文围绕以上因素,着重介绍实例类型、引擎版本、架构、存储介质,为您的选型提供相关参考。免费试用 阿里云免费...
客户感言 阿里 云原生多模数据库 Lindorm 相比于其他存储引擎和HBase开源版本,提供了更高效的压缩率和同规格下的更大吞吐量,能稳定的支撑高并发、海量数据存储的业务需求。同时提供了成熟的冷热分离方案,大大降低了存储和运维成本,对于...
简而言之,第一代云原生数据库无法实现计算和内存资源解耦,导致目前云原生数据库价格依然高于RDS和自建数据库,这也是其无法占据大部分市场的核心原因。实现新架构的突破 随着 PolarDB Serverless新架构的率先提出,原生数据库的困境出现...
如果开启存储热备集群和计算Standby,PolarDB 会在当前地域内同时部署主集群(包含主备计算节点+主存储)和存储热备集群,并在存储热备集群上启动计算节点(计算节点和主集群的读写节点规格及定价一致)。主集群和存储热备集群各保证3副本...
本实验提供数据仅作为阿里云大数据开发治理平台DataWorks数据应用实操使用,所有数据均为人工Mock数据。业务背景 为了更好的制定企业经营策略,现需要从用户网站行为中获取网站用户群体基本画像数据,例如,用户群体地理属性、社会属性等,...
互联网类应用 Cassandra能够支持大并发低延时的访问需求,具备高可用和弹性扩容能力,适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式,实现更好的可用性和容灾能力。云...
本次测试采用3种不同的测试场景,针对开源自建的Hadoop+Spark集群与阿里云云原生数据湖分析DLA Spark在执行Terasort基准测试的性能做了对比分析。本文档主要展示了开源自建Spark和DLA Spark在3种测试场景下的测试结果及性能对比分析。1 TB...
2022-05-27 韩国(首尔)创建实例 Redis大版本新特性与兼容性 云原生实例和经典实例对比 发布新功能 云数据库Redis版 云盘版支持实例回收站。实例回收站可展示到期、欠费、已释放的Redis实例,您可以在回收站对这些实例执行续费解锁、重建...
面向混合负载的查询执行 羲和分析计算引擎也是新一代云原生数据仓库 AnalyticDB MySQL版 提供一体化的数仓服务重要内核。面向海量数据的云原生数仓需要满足不同的数据分析场景,包括在线报表,在线交互式分析,以及ETL等。不同的场景依赖...
本文介绍了云数据库RDS MySQL的产品功能和对应的文档动态。说明 RDS内核版本更新说明,请参见 RDS MySQL内核(AliSQL)小版本Release Notes。2024年 04月 类别 功能名称 功能描述 发布时间 相关文档 新增 数据归档 RDS MySQL实例数据量较大...
完备数据仓库,首要解决的问题包括:如何更好的支持数据库场景下的交互式分析以及大数据场景下的复杂批计算场景;如何一站式的解决混合负载下的服务能力。新一代云原生数据仓库AnalyticDB MySQL版提供一站式的数仓服务。混合计算引擎 提供...
适用环境(条件必选)当工作组为 专业模式 时,可设置云计算资源的使用环境,分为开发和生产环境,对生产环境的数据读写权限、任务上线发布进行严格权限控制。云计算资源创建后,云计算资源标识自动添加后缀:_dev(开发)、_prod(生产)...
Spark Batch节点是离线节点,运行于Spark类型的云计算资源之上,可通过输入SQL语句处理Spark类型的数据源。本文介绍如何新建Spark Batch类型的公共节点。前提条件 已创建Spark On Yarn或者Spark Cluster类型的云计算资源,具体信息,请参见...
云数据库RDS MySQL提供了以下数据存储类型:ESSD云盘、本地SSD盘、SSD云盘、通用云盘,本文介绍这几种存储类型的区别及选购建议。存储类型介绍 存储类型 说明 ESSD云盘 增强型SSD云盘(Enhanced SSD云盘,下文简称ESSD云盘),是阿里云全新...
按量计费:存储、计算和下载资源都是按实际使用量计费。按时计费:基于包年包月商品计算资源基础上,对计算资源按小时灵活扩容或缩容,最终按扩容的量和使用时长计费。详细的计费策略请参见 计费项与计费方式概述。MaxCompute提供了TCO工具...
云数据库RDS提供了以下数据存储类型:ESSD云盘、本地SSD盘、SSD云盘、通用云盘,本文介绍这几种存储类型的基本信息、区别及选购建议。存储类型介绍 存储类型 说明 支持引擎 ESSD云盘 增强型SSD云盘(Enhanced SSD云盘,下文简称ESSD云盘)...
包年包月是指在新建数据库集群时您需预支付集群的计算、存储和代理服务费用。设置如下参数。参数 说明 地域 选择集群所在的地理位置。集群购买完成后不支持更改地域。说明 请确保 PolarDB 与需要连接的ECS创建于同一个地域,否则它们无法...
规格节点 云原生数据仓库AnalyticDB PostgreSQL版 采用MPP并行架构,在节点角色上区分为Master节点和Segment节点,其中Master节点是实例的入口,负责SQL请求、路由分发和结果集处理,Segment节点为计算节点,负责SQL处理和数据存储,每个...
云消息队列 Kafka 版 云消息队列 Kafka 版 是阿里云基于Apache Kafka构建的高吞吐量、高可扩展性的分布式消息队列服务,广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等,是大数据生态中不可或缺的产品之一,阿里云提供全...
企业数据云平台Cloudera Data Platform(简称阿里云CDP),是阿里云和Cloudera联合打造的阿里云上的大数据平台。Cloudera CDP企业数据云平台 Cloudera企业数据云是社区版CDH的全新商业化升级产品,是阿里云和Cloudera联合打造阿里云上的大...
MaxCompute支持使用外部表功能查询和分析存储于OSS等外部存储系统的数据。该机制使得用户可以无需将数据导入到MaxCompute内部存储,直接对外部数据进行操作,从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据...
云数据库MongoDB提供多种数据存储类型,分别是ESSD云盘、ESSD AutoPL云盘 和SSD本地盘,本文介绍这几种存储类型的特点及区别。存储类型介绍 存储类型 说明 ESSD云盘 ESSD(Enhanced SSD)云盘,是阿里云推出的超高性能云盘产品。ESSD云盘...
适用环境(条件必选)当工作组为 专业模式 时,可设置云计算资源的使用环境,分为开发和生产环境,对生产环境的数据读写权限、任务上线发布进行严格权限控制。云计算资源创建后,云计算资源标识自动添加后缀:_dev(开发)、_prod(生产)...
云计算架构的核心逻辑就是通过虚拟化技术带来池化资源,云原生数据库采用分布式数据库架构,实现大规模扩展,每套数据库系统横跨多台服务器和虚拟机,带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用,实现按需按量...
Transaction Table2.0的增量存储和处理架构的特殊设计主要集中在五个模块:数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织,其他部分与MaxCompute通用的架构一致。本文为您介绍Transaction Table2.0的核心架构要点。...
数据服务API是一种API类型,由云计算资源中的数据通过参数配置生成,生成的API便于后续调用,减少资源操作成本。SQL模式创建数据服务API适用于多表关联、复杂筛选过滤的查询,通过编写SQL代码的方式完成API封装。本文介绍如何用SQL模式创建...
概述 物化视图是将预先计算(根据定义好的SELECT语句)的数据集,存储在云数据库 SelectDB 版中一个特殊的表中。物化视图的主要作用是在原始明细数据的任意维度进行分析,同时也能在固定维度上进行快速分析和查询。详情请参见 物化视图。
计算与存储分离 PolarDB 采用计算与存储分离的设计理念,满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点(Database Engine Server)仅存储元数据,而将数据文件、Redo Log等存储于远端的存储节点(Database ...
计算与存储分离 PolarDB 采用计算与存储分离的设计理念,满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点(Database Engine Server)仅存储元数据,而将数据文件、Redo Log等存储于远端的存储节点(Database ...
数据同步前,需要准备好数据源作为数据源端或目标端。您可以通过新建数据源,供数据同步时使用。本文介绍如何新建数据源。背景信息 数据同步支持关系型数据库、文件、消息队列等类型数据源的配置。操作步骤 登录企业数据智能平台。在页面...
数据服务API 数据服务API支持的云计算资源类型为:ApsaraDB for RDS、ApsaraDB for RDS VPC、AnalyticDB MySQL、AnalyticDB MySQL 2.0、AnalyticDB PostgreSQL、MaxCompute、DataHub、Table Store、Object Storage Service、RocketMQ、...