功能特性
海量时空数据的快显分析能力 快速时空数据分析能力能够处理海量数据，并支持对千万级矢量数据进行可视化分析，帮助用户实时验证分析结果。内置地理统计分析能力 我们提供内置的地理统计分析功能，可以科学而专业地使用颜色、符号、宽度、...
湖仓一体新能力：EMR支持Hologres和MaxCompute数据源
以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效地分析处理海量数据。随着EMR支持Hologres和MaxCompute数据源，您可以：高效访问在线数据...
数据迁移
背景信息 传统关系型数据库不适合处理海量数据，如果您的数据存放在传统的关系型数据库且数据量庞大时，可以将数据迁移至 MaxCompute。MaxCompute为您提供了完善的数据迁移方案以及多种经典的分布式计算模型，能够快速地解决海量数据存储和...
SQL概述
提交MaxCompute作业后，会存在几十秒到数分钟不等的排队调度，所以适合处理批作业，提交一次作业批量处理海量数据。不适合直接对接需要每秒处理几千至数万笔事务的前台业务系统。使用向导 如果您需要.参考文档 说明 了解MaxCompute SQL 与...
基本概念
为了进一步提高效率，云数据库ClickHouse 将海量数据分散存储到多台服务器上，每台服务器只存储和处理海量数据的一部分，在这种架构下，每台服务器被称为一个分片（Shard）。副本（Replica）为了在异常情况下保证数据的安全性和服务的高...
HDFS概述
HDFS（Hadoop Distributed File System）是一种Hadoop分布式文件系统，具备高度容错特性，支持高吞吐量数据访问，可以在处理海量数据（TB或PB级别以上）的同时最大可能的降低成本。HDFS适用于大规模数据的分布式读写，特别是读多写少的场景...
创建MaxCompute数据源
以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效地分析处理海量数据。更多详情请参见 什么是MaxCompute。权限说明 Dataphin仅支持 超级...
创建MaxCompute数据源
以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效地分析处理海量数据。更多详情请参见 什么是MaxCompute。权限说明 Dataphin仅支持 超级...
什么是MaxCompute
以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效地分析处理海量数据。随着数据收集手段不断丰富，行业数据大量积累，数据规模已增长到了...
客户案例
客户需求 海量数据处理效率下降，离线数据计算时长不稳定。实时计算不开发维护代价大，希望对数仓进行综合治理。价值体现 基于飞天大数据平台产品，快狗打车不仅机器成本节约30%以上，数据开发效率提升100%。从Java Storm迁移到Flink SQL使...
PolarDB HTAP实时数据分析技术解密
对比专用的OLAP系统，其性能瓶颈体如下：MySQL的SQL执行引擎基于流式迭代器模型（Volcano Iterator），而这个模型在工程实现上依赖大量深层次的函数嵌套及虚函数调用，当处理海量数据时，会影响CPU流水线的Pipeline效率，导致CPU Cache效率...
列存索引技术架构介绍
该架构在工程实现上依赖大量深层次的嵌套函数及虚函数，在处理海量数据时，这种架构会影响CPU流水线的Pipeline效率，导致CPU Cache效率低下。同时，Iterator执行模型也无法充分使用CPU提供的SIMD指令来做执行加速。执行引擎只能串行执行，...
引擎简介
核心能力 低成本 通过高密度低成本介质、智能冷热分离、高压缩比算法、自适应编码等技术，达到海量数据存储处理成本比自建低80%。云原生弹性 通过存计分离架构和Serverless技术，支持计算和存储资源的按需即时弹性。企业级稳定性 基于高...
Transaction Table2.0概述
随着当前数据处理业务场景日趋复杂，很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储...
产品简介
数据库体验 DLA Ganos基于Spark SQL设计开发了一系列针对空间数据分析的用户API，内置了大量基本时空UDF算子，用户可以像操作关系型数据库那样通过SQL处理海量时空数据，方便灵活。时空数据统一建模 DLA Ganos基于Spark RDD设计开发了统一...
创建Lindorm数据源
背景信息 Lindorm是阿里云推出的自研数据库，提供宽表、时序、文件、搜索等多种数据模型，支持毫秒级在线数据处理、海量数据低成本存储和分析。更多阿里云Lindorm信息，请参见 云原生多模数据库 Lindorm。权限说明 Dataphin仅支持 超级管理...
创建Lindorm数据源
背景信息 Lindorm是阿里云推出的自研数据库，提供宽表、时序、文件、搜索等多种数据模型，支持毫秒级在线数据处理、海量数据低成本存储和分析。更多阿里云Lindorm信息，请参见 云原生多模数据库 Lindorm。权限说明 Dataphin仅支持 超级管理...
后续指引
此外，MaxCompute还支持SDK及JDBC用户接口实现海量数据开发处理。介绍：SQL SQLML PyODPS MapReduce Mars Spark Graph 外部表 Java SDK Python SDK JDBC 实践：数据开发最佳实践 常见问题：错误码 SQL常见问题 PyODPS常见问题 MapReduce...
引擎简介
产品优势 流引擎专注产品的云原生、高性能和易用性，致力于降低海量实时数据处理的使用门槛和成本，侧重于业务的实现而非复杂的基础设施维护。同时，流引擎也能够对现有的系统进行降本增效。实时性：支持秒级别的实时数据处理。易用性 支持...
2023年
ListJobInfos-查看作业列表 2023-12-04 新增SKEWJOIN HINT 新说明 当两张表Join存在热点，导致出现长尾问题时，您可以通过取出热点key，将数据分为热点数据和非热点数据两部分处理，最后合并的方式，提高Join效率。SkewJoin Hint可以通过...
通用数据开发
数据收集与存储：您需要同步不同业务系统的数据至MaxCompute中，方可通过MaxCompute的海量数据存储与处理能力分析已有的数据。DataWorks提供数据集成服务，可以支持多种数据源类型，根据预设的调度周期同步业务系统的数据至MaxCompute。...
基本散点图
其它 海量数据交互增强：基本散点图的数据过多时可设置数据交互增强的样式，单击 图标可开启或关闭交互增强效果。参数 说明 交互方式 数据交互方式，可选 缩略轴 和 滚动条。说明 当数据类型为时间型数据时，不支持海量数据交互功能。默认...
基本散点图（v4.0及以上版本）
其它 海量数据交互增强：基本散点图的数据过多时可设置数据交互增强的样式，单击 图标可开启或关闭交互增强效果。参数 说明 交互方式 数据交互方式，可选 缩略轴 和 滚动条。说明 当数据类型为时间型数据时，不支持海量数据交互功能。默认...
区域图（v4.0及以上版本）
海量数据交互增强：区域图的数据过多时可设置数据交互增强的样式，单击 图标可开启或关闭交互增强效果。参数 说明 交互方式 数据交互方式，可选 缩略轴 和 滚动条。说明 时间型 数据类型，暂不支持缩略轴海量数据交互。默认范围 缩略轴显示...
气泡图（v4.x版本）
动作 动作 说明 请求气泡图接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如气泡图配置了API数据源为 http://api.test ，传到 请求气泡图接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
RDS MySQL迁移至云数据库SelectDB版
云数据库SelectDB版支持亚秒级响应海量数据查询、万级高并发点查询以及高吞吐复杂分析。数据传输服务DTS（Data Transmission Service）可以帮助您将MySQL数据库（例如自建MySQL或RDS MySQL）迁移至云数据库SelectDB版，满足您的海量数据...
区间柱状图
参数 说明 交互方式 数据交互方式，可选 缩略轴 和 滚动条 两种方式，时间型 数据类型，暂不支持海量数据交互功能。说明 时间型数据暂不支持海量数据交互。默认范围 缩略轴显示的数据范围，范围值可选0~1。只有开启了缩略轴样式时，此选项...
条形图
参数 说明 交互方式 数据交互方式，可选 缩略轴 和 滚动条 两种方式，时间型 数据类型，暂不支持海量数据交互功能。说明 时间型数据暂不支持海量数据交互。默认范围 缩略轴显示的数据范围，范围值可选0~1。只有开启了缩略轴样式时，此选项...
水平基本柱状图（v4.0及以上版本）
其它 海量数据交互增强：柱状图的数据过多时可设置数据交互增强的样式，单击 图标可开启或关闭交互增强效果。参数 说明 交互方式 数据交互方式，默认 滚动条 方式。方向 滚动条样式的排列方向，包括 水平方向 和 垂直方向。类型宽度 数据...
百分比条形图（v4.x版本）
其它 海量数据交互增强：柱状图的数据过多时可设置数据交互增强的样式，单击 图标可开启或关闭交互增强效果。参数 说明 交互方式 数据交互方式，默认 滚动条 方式。方向 滚动条样式的排列方向，包括 水平方向 和 垂直方向。类型宽度 数据...
垂直分组柱状图
海量数据交互增强：柱状图的数据过多时可设置数据交互增强的样式，单击 图标可开启或关闭交互增强效果。参数 说明 交互方式 数据交互方式，可选 缩略轴 和 滚动条。默认范围 缩略轴显示的数据范围，范围值可选0~1。只有开启了 缩略轴 样式...
垂直堆叠柱状图（4.0及以上版本）
海量数据交互增强：柱状图的数据过多时可设置数据交互增强的样式，单击 图标可开启或关闭交互增强效果。参数 说明 交互方式 数据交互方式，可选 缩略轴 和 滚动条。默认范围 缩略轴显示的数据范围，范围值可选0~1。仅在开启了 缩略轴 样式...
柱状图
说明 时间型数据暂不支持海量数据交互。默认范围 缩略轴显示的数据范围，范围值可选0~1。只有开启了缩略轴样式时，此选项才显示。滑轨样式 缩略轴滑轨的样式，包括滑轨的高度值、滑轨前景颜色和背景颜色。只有开启了缩略轴样式时，此选项才...
公交出行：启迪公交
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍启迪公交如何通过 PolarDB-X 应对业务挑战。所属...
E-MapReduce弹性低成本离线大数据分析
Storm适用于处理高速、大型数据流的分布式实时计算，为Hadoop添加可靠的实时数据处理能力。海量离线数据分析可以应用于多种场景，例如：商业系统环境：电商海量日志分析、用户行为画像分析。科研行业：海量离线计算分析和数据查询。游戏...
技术原理
PolarDB-X 1.0 由多个节点构成计算、存储内核一体化实例，在共用一份数据的基础上避免了ETL（Extract-Transform-Load）操作，实现了在线高并发OLTP联机事务处理以及OLAP海量数据分析，即HTAP。原理架构 MPP和只读资源 PolarDB-X 1.0 通过多...
未来规划
数据处理与分析：海量数据分析在线化（实时在线交互式分析）。如何对海量数据进行在线分析和计算，支持实时在线交互式分析，需要做并行处理（DSP 模型、MPP 模型等等），对并行调度计算进行优化。系统能力提升：智能化+安全（使用方便可靠...
导出数据
分析型数据库MySQL版对海量数据分析计算后支持输出（DUMP）数据结果，目前支持两种DUMP方式：导出数据到OSS 导出数据到MaxCompute
产品优势
数据安全中心DSC（Data Security Center）可扫描和识别海量数据，帮您实时获取数据的安全状态。本文介绍 数据安全中心 的产品优势。合规性 使用数据安全中心产品，可以帮助企业满足等保2.0对“云计算环境下安全审计”及“个人信息保护”的...
什么是自动驾驶开发平台
能够解决的问题如下 海量非结构化数据快速预处理 利用数据管理并行计算框架，在阿里云上以云原生的方式分布式处理海量非结构化数据，采集到的感知数据处理效率提高10倍。感知数据多模态检索 无论是经过标注还是未经标注的传感器输出数据，...
- 产品推荐
- 这些文档可能帮助您