SQL性能问题

适用场景 微批处理通过增加延迟换取高吞吐,如果您有超低延迟的要求,不建议开启微批处理。通常对于聚合场景,微批处理可以显著地提升系统性能,建议开启。开启方式 MiniBatch默认关闭,您需要在目标作业的 部署详情 页签,运行参数配置 ...

高性能Flink SQL优化技巧

适用场景 微批处理通过增加延迟换取高吞吐,如果您有超低延迟的要求,不建议开启微批处理。通常对于聚合场景,微批处理可以显著地提升系统性能,建议开启。开启方式 MiniBatch默认关闭,在 其他配置 中填写以下代码,具体操作请参见 如何...

2022年功能发布记录

本文介绍 函数计算 2022年度发布的功能变更以及对应的文档动态。2022年11月 功能名称 变更类型 功能描述 相关文档 全地域全计费项价格下调 优化 自2022年11月03日起,函数计算推出全地域计费项价格下调。通过优化计费规则,函数计算支持您...

2022年功能发布记录

本文介绍 函数计算 2022年度发布的功能变更以及对应的文档动态。2022年11月 功能名称 变更类型 功能描述 相关文档 全地域全计费项价格下调 优化 自2022年11月03日起,函数计算推出全地域计费项价格下调。通过优化计费规则,函数计算支持您...

计算

推荐 计算型实例规格族c8a 计算型实例规格族c8i 计算平衡增强型实例规格族c8ae 计算型实例规格族c8y 存储增强计算型实例规格族c7se 网络增强计算型实例规格族c7nex 计算型实例规格族c7a 计算型实例规格族c7 安全增强计算型实例规格族c7t ...

构建基于Serverless架构的弹性高可用音视频处理系统

在音视频系统中,音视频转码是比较消耗计算力的一个子系统,您可以通过 函数计算 和 Serverless 工作流 构建弹性高可用的Serverless音视频处理系统。本文会从工程效率、运维、性能和成本方面介绍Serverless音视频处理系统和传统方案的差异...

2021年

功能 Delta Lake和Hudi是数据湖方案中常用的存储机制,为数据湖提供流处理、批处理能力。MaxCompute基于阿里云DLF、RDS、OSS产品提供了支持Delta或Hudi存储机制的湖仓一体架构。基于DLF、RDS、OSS支持Delta Lake或Hudi存储机制 2021-08-...

2023年

Lambda函数 2023年8月更新记录 时间 特性 类别 描述 产品文档 2023-08-25 新增使用成本优化功能实现降本增效 新说明 MaxCompute为您提供成本优化(计算成本优化)功能,可基于实际作业请求量和资源配置期望,对包年包月一级Quota类型的计算...

公告

计算成本优化功能在原计算资源优化功能(对 包年包月一级Quota 类型的计算资源生成更优的资源配置方案)的基础上增加支持查看使用 按量付费计算资源 调整为使用 包年包月计算资源 的资源配置推荐方案及效果推演,帮助您进一步优化计算成本...

实时数仓Hologres

本文为您介绍如何使用实时数仓Hologres连接。背景信息 实时数仓Hologres 是一站式实时数据仓库引擎,支持海量数据实时写入、实时更新、实时分析,支持标准SQL(兼容PostgreSQL协议),支持PB级数据多维分析(OLAP)与即席分析(Ad Hoc)...

基于Flink+Hologres搭建实时数仓

使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力,实现高效、可扩展的实时数据处理和分析,帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...

Logview诊断实践

计算方面:ODPS处理单个大文件比处理多个文件效率高,文件过多会影响整体的计算执行性能。因此,为了避免系统产生过多文件,SQL作业在结束时会针对一定条件自动触发合并文件的操作。解决措施:通过Logview可以查看作业是否触发了...

2020年

2020-12 功能名称 功能描述 发布时间 发布区域 相关文档 流式数据写入服务(Streaming Tunnel)开始公测 MaxCompute Streaming Tunnel服务,支持通过API方式实现流式数据无感知高QPS写入MaxCompute。2020-12-28 所有区域 流式数据通道概述 ...

迁移Batch批量计算到分布式工作流Argo集群

批处理作业(Batch)通常用于数据处理、仿真计算、科学计算等领域,往往需要大规模的计算资源。分布式工作流Argo集群基于开源Argo Workflows项目开发,完全符合开源工作流标准。通过 工作流集群,您可以轻松编排工作流,每个工作流步骤使用...

为函数安装第三方依赖

函数计算 运行环境中已内置常用的依赖,供您直接在函数中引用。同时,函数计算 支持使用第三方依赖。本文介绍如何为函数安装第三方依赖。背景信息 您可以在以下文档...关于函数计算安装第三方依赖的总结,请参见 函数计算安装依赖库方法小结

基础术语

D 代码压缩(H5)去除 JavaScript 代码中不必要的空格、换行等内容,或把一些可能公用的代码进行处理实现共享,最后输出的结果都压缩为几行内容,降低代码可读性。调用图混淆(iOS)调用图指函数间的交叉调用关系,是重要的程序宏观结构...

MaxCompute UDF(Java)常见问题

解决措施:如果实际计算量很大,可以在MaxCompute UDF的实现Java类的方法中调用 ExecutionContext.claimAlive 来重置计时。重点优化MaxCompute UDF代码逻辑。后续调用MaxCompute UDF时,可同时在Session级别配置如下参数辅助调节...

向量计算(Proxima CE)概述

Proxima CE 是基于Proxima2.x内核提供的超大规模离线向量检索引擎,用于支持批量离线向量检索任务,包括基础的向量检索、多类目检索及百万TopK检索等功能。本文为您介绍 在MaxCompute中如何使用向量计算功能。背景信息 Proxima CE是一款...

基本概念

本文介绍 函数计算 的专有名词的定义,方便您更好地理解相关概念并使用 函数计算。基本概念总览 分类 名称 通用概念 服务、FC函数、请求处理程序、版本、别名、标签、层、触发、运行时、自定义域名 计费相关 按量付费、资源包 实例相关 ...

发展历程

全球两大热门计算存储标准化开源体系之一的ORC(Optimized Row Columnar)社区的PMC(Project Management Committee),MaxCompute成为近两年贡献代码量最多的贡献者,引导存储标准化。MaxCompute积极投入全球热门的优化项目Calcite,...

HTTP触发器概述

CORS请求处理 函数计算 系统默认允许函数的调用请求跨域访问。函数计算 的Response Headers默认设置如下。Access-Control-Allow-Origin:Request请求的Origin Header。Access-Control-Allow-Credentials:默认取值为 true。Access-Control-...

功能特性

边缘计算 在边缘节点提供计算和存储能力 功能功能 功能描述 参考文档 边缘计算 函数形态计算 支持在DCDN边缘节点上运行客户的函数代码(包括JavaScript函数代码和在阿里云函数计算控制台创建的自定义运行时)。函数形态计算 安全防护 ...

快速创建函数

使用 函数计算,您无需采购和管理服务器等基础设施,只需编写并上传代码或镜像,就可以实现弹性可靠的应用。本文介绍如何在 函数计算 控制台快速开发一个简单的Serverless Hello World函数。背景信息 通过函数计算控制台快速创建函数的流程...

使用函数计算

步骤一:为数据表开启Stream功能 使用触发器功能需要先在表格存储控制台开启数据表的Stream功能,才能在函数计算处理写入表格存储中的增量数据。登录 表格存储控制台。在页面上方,选择地域。在 概览 页面,单击实例名称或在实例 操作 列...

快速创建函数

使用 函数计算,您无需采购和管理服务器等基础设施,只需编写并上传代码或镜像,就可以实现弹性可靠的应用。本文介绍如何在 函数计算 控制台快速开发一个简单的Serverless Hello World函数。前提条件 您已成功注册阿里云账号,并完成实名...

DTS触发器

DTS(Data Transmission Service)作为事件源通过 事件总线EventBridge 与函数计算集成后,通过DTS触发能够触发关联函数执行。通过函数可以对DTS数据订阅获取的数据库实时增量数据进行自定义处理。本文介绍如何在函数计算控制台创建DTS...

DTS触发器

DTS(Data Transmission Service)作为事件源通过 事件总线EventBridge 与函数计算集成后,通过DTS触发能够触发关联函数执行。通过函数可以对DTS数据订阅获取的数据库实时增量数据进行自定义处理。本文介绍如何在函数计算控制台创建DTS...

功能特性

函数计算是一款事件驱动的全托管计算服务。本文列举了函数计算常见应用场景以及对应的功能特性,您可以结合您的业务需求选择合适的场景。功能功能 功能描述 参考文档 服务管理 管理服务 服务是函数计算资源管理的单位。创建函数前必须先...

什么是阿里云实时计算Flink版

阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台,提供端到端亚秒级实时数据分析能力,并通过标准SQL降低业务开发门槛,助力企业向实时化、智能化大数据计算升级转型。产品概述 阿里云实时计算Flink版是一种全...

在DataWorks中通过函数计算节点实现动态为PDF添加水印

本文为您介绍如何在DataWorks中通过函数计算节点调用函数计算服务,实现周期性对OSS中的增量PDF文件添加水印。背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务,在函数计算服务中可以自定义各种功能,最终可通过DataWorks...

HTTP触发器概述

以Node.js为例,函数代码处理预检请求的示例如下所示:exports.handler=(req,resp,context)=>{ console.log('hello world');if(req.method='OPTIONS'){/Send response to OPTIONS requests resp.setHeader('Access-Control-Allow-Origin'...

常见问题

云服务ECS(Elastic Compute Service)是阿里云提供的性能卓越、稳定可靠、弹性扩展的IaaS(Infrastructure as a Service)级别云计算服务,ECS免去了您采购IT硬件的前期准备,实现计算资源的即开即用和弹性伸缩。如何将文件数据转储到...

配置环境变量

您可以使用环境变量,在不修改代码的前提下灵活调整 FC 函数的行为。环境变量作为函数配置的一部分,以字符串键值对的方式存储,不同函数拥有独立的环境变量。本文介绍环境变量的基本信息、配置方式和示例代码以及如何在代码中使用环境变量...

本地过程控制

本文以一个典型的过程控制场景为例,描述如何使用边缘函数计算实现较复杂的本地过程控制。前提条件 本示例仅适用于Link IoT Edge专业版,请您确保已完成边缘实例的创建。详细操作,请参见 专业版环境搭建。已创建光照度传感、客厅灯产品...

HTTP请求处理程序(HTTP Handler)

不设置 x-fc-status:函数计算 默认本次调用是成功执行的,但是您的函数可能有异常,没有向 函数计算 汇报,函数计算 会认为这次函数执行没有报错,在业务逻辑上可能没有影响,但是在监控可观测性上会有影响。如下图所示:设置 x-fc-status...

ALB添加函数计算FC作为后端服务

如果您使用阿里云函数计算(Function Compute,简称FC),并需要将函数计算作为ALB后端服务来处理请求,您可以为ALB实例添加函数计算类型的服务器组。通过ALB和函数计算的配置,实现ALB转发请求至函数计算并调用函数,函数在运行完成后,...

2021年

无 MaxCompute 支持通过湖仓一体方式读取OSS上的Hudi或 Delta Lake格式存储 Delta Lake和Hudi是数据湖方案中常用的存储机制,为数据湖提供流处理、批处理能力。MaxCompute基于阿里云DLF、OSS产品提供了支持Delta或Hudi 存储机制的湖仓一体...

HTTP请求处理程序(HTTP Handler)

不设置 x-fc-status:函数计算 默认本次调用是成功执行的,但是您的函数可能有异常,没有向 函数计算 汇报,函数计算 会认为这次函数执行没有报错,在业务逻辑上可能没有影响,但是在监控可观测性上会有影响。如下图所示:设置 x-fc-status...

触发器高级功能

使用说明 本文介绍的高级功能只适用于自定义事件源触发,包括 MNS队列触发、RocketMQ触发、RabbitMQ触发、Kafka触发 和 DTS触发。调用方式 函数计算的触发支持同步调用和异步调用两种调用方式。两种调用方式的限制如下所示。...

什么是边缘函数

通过这种技术,用户的请求可以直接在离用户最近的边缘节点上得到响应处理,从而显著减少延迟、提高响应速度,并实现更低时延的计算体验。边缘函数的优势 全球部署,就近调度,超低延迟:边缘函数与常见的函数计算、弹性计算等云计算服务...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
函数计算(旧版) 云数据库 RDS 云服务器 ECS 轻量应用服务器 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用