云原生数据湖分析（文档停止维护）
云原生数据湖分析（Data Lake Analytics，简称DLA）是无服务器（Serverless）化的数据湖分析服务，支持按需与保留资源使用，打造最具性价比的数据湖分析平台；提供一站式的数据湖分析与计算服务，支持 ETL、机器学习、流、交互式分析，可以...
应用场景
数据存储：长期保存车辆轨迹信息以及车辆状态信息，需要单表规模极大以及高性价比存储。实时地理围栏：实时数据的地理围栏报警，需要支持对接实时计算进行实时数据统计分析。海量车辆管理：海量车辆的诸多状态信息的数据管理与查询分析，...
SelectDB节点
背景信息 SelectDB是基于Apache Doris打造的新一代多云原生实时数据仓库，聚焦于满足企业级大数据实时分析需求，为您提供极致性价比、简单易用的数据分析服务。更多介绍，请参见 SelectDB。前提条件 已创建业务流程。数据开发（DataStudio...
ECS实例说明
大数据型 使用本地SATA盘作存储数据，存储性价比高，是大数据量（TB级别的数据量）场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点；Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...
EMR Workbench
阿里云EMR Workbench是一个综合性的大数据分析和开发环境，作为阿里云E-MapReduce的一部分，它提供了EMR Notebook和EMR Workflow两个核心功能。通过EMR Workbench，您可以轻松进行数据开发，以及交互式数据分析，并设计复杂的数据处理工作...
构建数据仓库
满足一套存储，两种计算（实时计算和离线计算）的高性价比组合。产品组合：DataHub+实时计算Flink+交互式分析+MaxCompute+DataWorks+Quick BI/DataV 场景说明：数据采集：通过DataWorks（批量）、DataHub（实时）进行统一数据采集接入。...
持久内存型
最终数据存储持久化要求高的场景 游戏场景直接采用持久存储型实例作为最终的数据存储，相较于使用Redis+MySQL的架构场景，可获得更简洁的架构，更高的性能和性价比，且数据更加可靠。实例规格 持久内存型规格 相关文档 Tair命令支持与限制 ...
持久内存型
最终数据存储持久化要求高的场景 游戏场景直接采用持久存储型实例作为最终的数据存储，相较于使用Redis+MySQL的架构场景，可获得更简洁的架构，更高的性能和性价比，且数据更加可靠。实例规格 持久内存型规格 相关文档 Tair命令支持与限制 ...
标准架构
单副本采用单节点架构，适用于数据可靠性要求不高的纯缓存业务场景，性价比高。高可用 标准架构高可用类型采用主从（master-replica）架构搭建。主节点提供日常服务访问，从节点提供HA高可用，当主节点发生故障，系统会自动在30秒内切换至...
Transaction Table2.0概述
现状分析 当前典型的数据处理业务场景中，对于时效性要求低的大规模数据全量批处理的单一场景，直接使用MaxCompute足以很好的满足业务需求，对于时效性要求很高的秒级实时数据处理或者流处理，则需要使用实时系统或流系统来满足需求。...
阿里云存储服务
适用于各种社交、分享类的图片、音视频应用、大型网站、大数据分析等业务场景。低频访问存储 提供高持久性、较低存储成本的对象存储服务。有最小计量单位（64 KB）和最低存储时间（30天）要求。支持数据实时访问，访问数据时会产生数据取回...
应用场景
通过弹性伸缩支持更合理的资源配比，减少非高峰期的保有资源，优化成本，提高性价比。该场景可实现：在离线一体化 支持数据实时增删改、具备在线分析和ETL计算一体化，实现大数据与数据库的融合。通过资源组隔离让在离线计算任务不相互影响...
物联网存储介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
AnalyticDB MySQL助力Flowerplus业务高速发展
由此可见，Flowerplus对大数据分析的实时性要求较高，而传统的MySQL数据库无法满足这一需求。复杂数据查询性能 使用传统MySQL数据库对订单、商品流量、采购、业务转化率以及商品售罄报警等分析时速度较慢，数据达到千万级或者亿级时，复杂...
发展历程
连年获得TPCx-BB 30 TB规模和TPC-DS 10 TB规模，性能与性价比双料冠军 2019年 连年获得TPCx-BB 30TB规模和TPC-DS 10TB规模，性能与性价比双料冠军。2019大数据“星河（Galaxy）”奖，最佳大数据产品奖（TOP10）。2018年 MaxCompute的多个...
分析外部OSS上的数据
使用列存索引功能读取OSS上的外表数据能很好的实现上述需求，优势如下：OSS作为云原生的存储方案有着非常高的性价比；列存索引功能能够提供超高的计算速度和计算的灵活性；开放的数据存储格式（如ORC、Parquet）有着广泛的兼容性以及高压缩...
电商行业：从4小时到15分钟，一次分布式数据库的丝滑...
近年来，电商平台商品信息持续增加，海量商品导致消费者发现和找到商品的效率低下，识货从用户视角出发，不断整合行业渠道供给，降低发现和筛选的成本，帮助用户更高效地购买到最具性价比的产品。识货的活跃用户数突破5000万，GMV已突破100...
图扑案例
阿里 云原生多模数据库 Lindorm 针对工业物联网数据高并发写入，实时存取等特点，创新性地融合时序、索引、宽表等多模引擎能力，为存储、分析低价值密度、高通量、高实时性的工业物联网监控数据提供了高性价比的最优解决方案，大幅度降低了...
应用场景
大数据 大数据具有数据规模大、数据类型多样、生成速度快、价值巨大但密度低的特点，如何高性价比存储海量持续增长的数据以及快速从海量数据中获取有价值的信息成为大数据领域的关注重点。表格存储 数据湖架构能有效的解决大数据领域面临的...
X-Engine简介
在LSM存储结构中，如果把访问频率高的数据尽可能放在较高的层次上，存放在快速存储设备中（例如NVM、DRAM），而把访问频率低的数据放在较低层次中，存放在廉价慢速存储设备中。这就是X-Engine的冷热分层概念。合并数据 Compaction操作不断...
客户案例
南京银行 公司介绍 南京银行成立于 1996 年 2 月 8 日，是一家具有由国有股份、中资法人股份、外资股份及众多个人股份共同组成独立法人...同时，每个节点都可以部署在廉价的 PC 服务器上，因此，系统成本上的性价比是 RAC 解决方案的数十倍。
账单数据订阅及查询分析
您可在用户中心订阅不同类型的账单数据，例如，计费项明细账单、计费项账单按天汇总等。订阅成功后，账单数据将会定时同步至MaxCompute，您...相关文档 大数据分析工具的常见问题和解决方法，详情请参见 大数据分析工具的常见问题和解决方法。
新功能发布记录
OceanBase 数据库 MySQL 租户至 Kafka 的数据同步项目支持将 OceanBase 数据以 Avro 序列化格式输出 kafka，扩展用户对接下游大数据生态的方式。数据格式说明 新增支持 8 个 OpenAPI 接口，主要覆盖 RDS PostgreSQL 数据源、加减表、传输...
产品简介
产品优势 高性价比 依托于数据湖分析DLA的Serverless无服务器化架构，用户在使用DLA Ganos时无需基础设施和管理成本，不需要单独维护Spark实例，只需要申请虚拟集群后即可随时随用、按需付费。零启动时间，透明升级、QoS弹性服务等。数据库...
产品优势
全托管的Databricks数据洞察大数据分析平台，可以让您从繁杂的环境运维、内核优化等工作中解脱出来，专注于开发Spark作业本身。本文介绍Databricks数据洞察的产品优势。高效稳定 产品内核使用Databricks商业版的Runtime和Delta Lake。与...
简介
架构说明：原始数据采用OSS高性价比存储，冷热分离。影像数据库采用SQL+NoSQL构建时空序列影像，容量无上限，存储与计算分离，极致弹性。原生提供基于“分块”理念的数据存储和组织方式，保留原始像元信息，有效支撑各类分析计算场景。与...
基于Delta lake的一站式数据湖构建与分析实战
数据湖能够将这些不同来源、不同格式的数据集中存储管理在高性价比的存储如 OSS等对象存储中，并对外提供统一的数据目录，支持多种计算分析方式，有效解决了企业中面临的数据孤岛问题，同时大大降低了企业存储和使用数据的成本。...
TPC-H
经过严苛的大规模分析性能和ACID事务测试，AnalyticDB PostgreSQL版 刷新TPC-H 30 TB性能榜单，超越当前有效纪录成为全球第一，性能、性价比全球领先，成为中国首次荣登榜单的产品。TPC-H Benchmark由商业分析行为Ad-hoc查询和并发数据修改...
产品整体介绍
云原生数据仓库AnalyticDB PostgreSQL版 提供PB级数据实时交互式分析、ETL/ELT、BI报表展示功能，支持数据高吞吐实时写入与批量导入，提供ACID保证和标准事务隔离级别，采用MPP全并行架构，是一款具有高性价比的云原生数仓产品，提供基于...
常见问题
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
测试结果
1 TB测试数据下DLA Spark+OSS与自建Hadoop+Spark集群性能对比结果 集群类型 运行Terasort基准测试集耗时（h）费用价格（元）DLA Spark+OSS 0.701 577.42 自建Hadoop+Spark 0.733 10543.04 通过上述耗时和价格对比结果可以看出，作业性能上...
选择付费方式
对周期性高密度计算作业使用包年包月模式，对非周期性的大规模数据处理作业使用按量计费模式。按量计费模式下可以不存储数据，通过读取其它账号下的表获取数据，从而可以节省数据存储费用。不同账号下跨表计算需要通过授权来实现，详细请...
标准版-单副本
单副本架构具有明显的价格优势，性价比较高。警告 单副本架构不能保障数据可用性和服务连续性，选用前请务必确认风险，不建议您在生产环境中使用该架构的实例。云数据库Redis版服务等级协议不适用于单副本架构的实例。由于该架构只有一个...
E-MapReduce弹性低成本离线大数据分析
离线大数据分析概述 主流的三大分布式计算框架系统分别为Hadoop、Spark和Storm：Hadoop可以运用在很多商业应用系统，可以轻松集成结构化、半结构化以及非结构化数据集。Spark采用了内存计算，允许数据载入内存作反复查询，融合数据仓库、流...
什么是Quick BI
Quick BI——阿里云旗下产品，大数据的高效分析与展现平台。通过对数据源的连接，和数据集的创建，可对数据进行即时分析与查询。并通过电子表格或仪表板功能，以拖拽的方式进行数据的可视化呈现。2020年2月12日,国际知名调研机构Gartner...
OpenStore智能存储引擎介绍
适用场景 阿里云Elasticsearch自研Openstore存储引擎，适用于有海量数据写入及长期存储需求，数据查询QPS较低且查询时延容忍度相对较高的日志检索、指标分析等场景。智能混合存储引擎适用于业务上对于数据有实时更新的需求，数据没有严格的...
快速入门
产品使用 Elasticsearch Elasticsearch作为实时分布式搜索和分析引擎，可以快速地、近乎于准实时地存储、查询和分析超大数据集，可以快速构建日志分析、异常监控、企业搜索和大数据分析等各业务应用。Elasticsearch快速入门 Logstash ...
什么是云数据库SelectDB版
产品优势 高性价比 高性能：支持亚秒级响应海量数据查询、万级高并发点查询以及高吞吐复杂分析。在业界知名的ClickBench全球分析型数据库性能排行榜上，查询性能位列第一，写入效率位列第二。低成本：通过存算分离架构大幅度降低存储成本，...
概述
随着业务的高速发展，PolarDB-X 标准版用户可能会遇到集中式的瓶颈，例如单表过大导致查询效率下降、高并发查询导致数据库长期处于高负载状态、无法满足分析型需求等，此时对数据库做垂直升配，已经无法解决问题，且性价比不高。...
混合存储型（已停售）
使用混合存储型，将所有课程信息存储到磁盘，访问量大的课程和题库数据存储到内存并常驻内存，保证高频访问数据的读写性能，实现高性能与高性价比的有机结合。典型业务场景的示例如下：场景1：使用开源Redis集群存储了100GB的数据，但高峰...
- 产品推荐
- 这些文档可能帮助您