客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
Transaction Table2.0概述
随着当前数据处理业务场景日趋复杂，很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储...
什么是MaxCompute
MaxCompute提供离线和实时的数据接入，支持大规模数据计算及查询加速能力，为您提供面向多种计算场景的数据仓库解决方案及分析建模服务。MaxCompute还为您提供完善的数据导入方案以及多种经典的分布式计算模型，您可以不必关心分布式计算和...
计费项与计费方式概述
MaxCompute以项目为单位，对存储、计算和下载操作进行计费。本文为您介绍MaxCompute费用组成、计费项与计费方式以及计费方式选择。计费项与计费方式 MaxCompute计费项以及计费说明如下表所示。计费方式 说明 存储费用 存储费用：按照存储在...
创建试用服务
本视频为创建试用服务的操作演示，具体页面请以实际显示为准。
预估资源价格
DBInstance ALIYUN:GPDB:ElasticDBInstance API网关API Gateway ALIYUN:ApiGateway:Instance 数据传输服务DTS ALIYUN:DTS:SubscriptionInstance ALIYUN:DTS:SynchronizationJob ALIYUN:DTS:MigrationJob 消息队列Kafka版 ALIYUN:KAFKA:...
简介
BatchCompute 是阿里云上的批量计算服务，可以帮助用户进行大规模并行计算。OSS 是阿里云上的对象存储服务，可以存储海量数据。ECS 是阿里云上的云服务器，极易运维和操作,可以方便的制作系统镜像。渲管与这三个云产品的关系如下图 A)制作...
相关协议
本文介绍大数据专家服务相关服务协议。专家服务试用协议
层次调用规范
在完成数据仓库的分层后，您需要对各层次的数据之间的调用关系作出约定。层次调用规范 ADS应用层优先调用数据仓库公共层数据。如果已经存在CDM层数据，不允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据...
数据传输费用（公网下载）
本文介绍MaxCompute中数据下载计费规则。MaxCompute仅对公网的下载数据进行收费，并按照下载的数据大小按量计费。MaxCompute会在第二天给出您的下载费用账单，您可以进入 费用中心 查看。下载计费规则如下。计费公式 价格 说明 一次下载...
简介
空间/时空数据（Spatial/Spatio-temproal Data，以下统称时空数据）是带有时间/空间位置信息的图形图像数据，用来表示事物的位置、形态、变化及大小分布等多维信息。概述 阿里云自研Ganos时空引擎（以下简称Ganos）提供一系列的数据类型、...
SDK接口
接口 描述 TableTunnel 访问MaxCompute Tunnel服务的入口类。您可以通过外网或阿里云内网环境对MaxCompute及其Tunnel进行访问。TableTunnel.StreamUploadSession 上传数据会话。TableTunnel.StreamRecordPack 数据缓存会话。...
读数据表
使用已有的数据进行建模，其中，数据表必须先加入到项目数据中。组件截图 二、参数说明 参数名称 参数说明 参与方 建模的数据输入分别位于己方和对方的数据库中，在任务中，将对应方的ID加入到【读数据表】/【写数据表】组件中。表名 希望...
简介
空间/时空数据（Spatial/Spatio-temproal Data，以下统称时空数据）是带有时间/空间位置信息的图形图像数据，用来表示事物的位置、形态、变化及大小分布等多维信息。概述 阿里云自研Ganos时空引擎（以下简称Ganos）提供一系列的数据类型、...
应用场景
随着大数据时代的到来，图计算在处理海量关系数据上的优势也越来越明显，在商品推荐、社交网络、金融风控、网络安全等场景上应用也日趋广泛。个性化推荐 图计算引擎在处理海量关系数据上具备天然优势，能够提高实时推荐的效率和准确性。以...
技术架构选型
在数据模型设计之前，您需要首先完成技术...MaxCompute作为整个大数据开发过程中的离线计算引擎。DataWorks则包括数据开发、数据质量、数据安全、数据管理等在内的一系列功能。icmsDocProps={'productMethod':'created','language':'zh-CN',};
简单上传示例
Tunnel SDK是MaxCompute提供的离线批量数据通道服务，主要提供大批量离线数据上传和下载。典型的表数据上传流程 创建表，如果是分区表先创建分区。创建TableTunnel。创建UploadSession。创建RecordWriter，写入Record。提交上传。示例 ...
常见问题
本文为您介绍执行MaxCompute准备工作过程中的...MaxCompute Studio是阿里云MaxCompute平台提供的安装在开发者客户端的大数据集成开发环境工具，目前支持集成安装的平台有IntelliJ IDEA、PyCharm。配置详情，请参见 配置MaxCompute Studio。
功能特性
全链路的隐私保护 可信计算服务 C3S 作为中立的、可信的第三方代理数据计算服务，基于密码学算法和可信执行引擎保证用户数据隐私计算过程可验证，其计算结果可以在区块链上进行存证，保护数据隐私安全的同时，实现数据使用的可追溯和可审计...
技术架构选型
在数据模型设计之前，您需要首先完成技术架构的选型。本教程中使用阿里云大数据产品MaxCompute配合...MaxCompute作为整个大数据开发过程中的离线计算引擎。DataWorks则包括数据开发、数据质量、数据安全、数据管理等在内的一系列功能。
导入导出表数据
MaxCompute Studio可以将CSV、TSV等格式的本地数据文件导入至MaxCompute表中，也可将MaxCompute表中的数据导出到本地文件。MaxCompute Studio通过Tunnel导入导出数据。前提条件 导入导出数据使用MaxCompute Tunnel，因此要求MaxCompute ...
2024年
操作审计事件数据迁移至MaxCompute 2024-03-26 新增Pandas API 新说明 MaxFrame提供了兼容Pandas的API接口，您可以用类似于Pandas的方式来操作MaxCompute中的数据，同时利用MaxCompute强大的分布式计算能力，简化您在大数据环境下的数据...
选择付费方式
MaxCompute的计费策略 MaxCompute提供了两个商品的三种计费方式：包年包月：计算资源是包月或者包年的，存储和下载资源是按实际使用量计费。按量计费：存储、计算和下载资源都是按实际使用量计费。按时计费：基于包年包月商品计算资源基础...
SET操作
MaxCompute支持在Session级设置MaxCompute系统变量，本文为您介绍如何设置及查看MaxCompute系统变量，影响MaxCompute的行为。set操作相关命令如下。类型 功能 角色 操作入口 set 对当前Session设置MaxCompute系统变量。具备项目空间操作...
Resource
函数计算 3.0 中的函数：ALIYUN:FC:FUNCTION,函数计算旧版本中的服务：ALIYUN:FC:SERVICE。ALIYUN:FC:FUNCTION resourceArn string 阿里云资源描述符。acs:fc:cn-shanghai:*:functions/demo tags object 标签字典。string value1
GetResourceTagsOutput
函数计算 3.0 中的函数：ALIYUN:FC:FUNCTION,函数计算旧版本中的服务：ALIYUN:FC:SERVICE。ALIYUN:FC:FUNCTION resourceArn string 阿里云资源描述符。acs:fc:cn-shanghai:*:functions/demo tags object 标签字典。string 标签值。value1
SDK概述
emr-maxcompute_2.11：支持Spark读写MaxCompute数据源，使用时需要打进作业JAR包。emr-datahub_2.11：支持Spark读写DataHub数据源，使用时需要打进作业JAR包。groupId>...
配置 SCQL 项目
登录 蚂蚁隐私计算服务平台。在左侧导航栏，单击 隐私计算项目。在 隐私计算项目 页面，确认目标项目的发起方式后，单击 发起的项目 或 受邀的项目。在 隐私计算项目 页面中，单击指定 SCQL 项目右侧的 资源配置。在 资源配置 面板的 节点...
存储费用
MaxCompute会对存储的数据（例如表或资源）及备份的数据，按照数据容量大小进行计费。本文为您介绍存储费用的计费规则。背景信息 MaxCompute数据的压缩比一般在5倍左右，因此多数情况下，您上传的数据文件大小与实际存储在MaxCompute的大小...
生命周期
MaxCompute表的生命周期（Lifecycle），指表（分区）数据从最后一次更新的时间算起，在经过指定的时间后没有变动，则此表（分区）将被MaxCompute自动回收。这个指定的时间就是生命周期。通过设置生命周期可以实现自动数据清理或数据保留，...
查看结果
本文档为您介绍验证数据同步结果的方法。在源数据表（mytable）中插入三行数据，验证数据同步结果。可以看到，在源表中插入三条数据后，销售目标达成率由原来的2%变成了5%。使用同样的方式，配置其他组件的数据。配置完成后，参考 发布可视...
SQL处理优化
为了方便用户操作Transactional Table 2.0，MaxCompute计算引擎对SQL全套的数据查询DQL语法和数据操作DML语法进行了支持，并且SQL引擎内核模块包括Compiler、Optimizer、Runtime等都做了专门适配开发以支持相关功能和优化。本文为您介绍...
软件包关联
录入服务模板时，如果您需要使用部署物中文件部署物相关的软件包，可以使用软件包关联的功能。本文介绍软件包关联的功能。功能介绍 使用软件包关联功能，您需要在服务模板中定义软件包关联的标识位，并在软件包关联中设置关联的文件部署物...
什么是视觉计算服务
阿里云视觉计算服务Visual Compute Service（简称VCS）是一款弹性可伸缩的视觉智能计算服务。提供视觉数据接入、AI算法训练、计算资源调度的能力，通过API支撑开发业务应用，同时帮助开发者提升视觉AI创新效率，专注核心业务创新。VCS支持...
新建计算资源
背景信息 数据探索当前支持的云计算资源有MaxCompute、Hive、RDS MySQL、*ADB MySQL 2.0、*Spark cluster、*Spark on yarn。说明 带星号（*）的云计算资源仅支持在特定场景使用。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标...
用户指南
用户登录阿里云进入视觉计算服务后，可以看到界面如下图所示：第一部分 概览 在概览页面，主要展示您账户上已有的ACU使用概况、存储数据使用概况、ACU项目的使用的情况等内容。第二部分 使用明细 在该页面，您可以看到您的算力单元和文件...
新用户免费试用
Hologres基于创新的HSAP架构，可以将您原先数仓架构中的OLAP系统（Greenplum、Presto、Impala、ClickHouse）、KV数据库或Serving系统（HBase、Redis）统一在一个大数据计算引擎中，并提供快速的离线实时一体化分析能力。产品核心优势 简化...
概述
为了及时告知您任务运行过程中的异常情况，Dataphin支持对离线计算、实时计算、资产质量、数据服务模块的监控报警规则进行告警。任务运行过程中，如果触发了监控告警规则，告警中心会给您发送告警消息，便于您及时发现并处理异常。告警中心...
Pandas API支持
MaxFrame提供了兼容Pandas的API接口，您可以用类似于Pandas的方式来操作MaxCompute中的数据，同时利用MaxCompute强大的分布式计算能力，简化您在大数据环境下的数据处理工作，本文为您介绍Pandas API的支持情况。当前MaxFrame支持的API详情...
数据分析作业
MaxCompute是适用于数据分析场景的企业级SaaS模式云数据仓库，支持在多种工具上使用MaxCompute运行大数据计算分析作业。如果您需要进行简单的查询等数据分析作业，推荐您使用SQL查询或DataWorks的临时查询等工具，高效便捷地完成数据分析...
- 产品推荐
- 这些文档可能帮助您