UDF开发（Python2）
调用方法如下：在归属MaxCompute项目中使用自定义函数：使用方法与 内建函数 类似，您可以参照内建函数的使用方法使用自定义函数。跨项目使用自定义函数：即在项目A中使用项目B的自定义函数，跨项目分享语句示例：select B:udf_in_other_...
数据开发与运行
本文为您介绍数据开发的相关问题。资源 如何在pyodps调用第三方包？如何在节点内使用资源？如何下载上传到DataWorks的资源？超过30M的资源如何上传？通过odpscmd上传的资源如何在DataWorks上使用？在DataWorks如何上传自己本地编写的jar并...
Java UDTF
采用Java语言编写UDTF函数可有效处理复杂数据处理任务并自定义逻辑，并且通过合理利用Java语言的特性，能更好地满足特定的数据处理需求，提升开发效率和处理性能。本文将介绍UDTF函数的代码结构、使用说明和示例。UDTF代码结构 您可以通过...
开发ODPS SQL任务
SQL函数 MaxCompute支持使用内建函数和自定义函数进行数据开发及分析，内建函数详情请参见 内建函数概述，自定义函数详情请参见 MaxCompute UDF概述。下面以一个简单示例为您介绍SQL函数的使用。内建函数 内建函数为MaxCompute自身预置的...
数据开发常见问题
本文为您介绍数据开发相关的常见问题。任务开发常见问题 引擎基于DataWorks操作的常见问题 表相关 如何可视化新建表？为什么EMR通过DataWorks可视化建表失败报错：call emr exception？如何对生产表添加字段？如何将本地数据上传到...
图像处理最佳实践
本文以Python语言为例，说明如何通过控制台，将原始图像经过函数代码处理，实现边缘检测。应用场景与优势 在不同的应用场景下，函数计算 提供的GPU实例与CPU相比所具备的优势如下。实时、准实时的应用场景 提供数倍于CPU的图形图像处理效率...
创建并管理MaxCompute节点
支持将您的自定义函数通过DataWorks创建为MaxCompute资源并注册为MaxCompute函数，供后续开发MaxCompute任务时直接调用，自定义函数的使用请参见 创建并使用MaxCompute资源、创建并使用自定义函数。支持将本地开发的资源包通过本地上传的...
什么是应用中心
Serverless应用中心是阿里云面向Serverless应用的一站式开发及生命周期管理平台。通过Serverless应用中心，您可以有效聚焦业务场景，快速开发及部署Serverless应用、白屏化操作资源提高运维效率，实现应用的全生命周期的管理。本文介绍...
UDF开发（Java）
当MaxCompute提供的内建函数无法支撑您的业务实现时，您可以根据本文提供的开发流程，使用开发工具（例如IntelliJ IDEA（Maven）或 MaxCompute Studio）自行编写代码逻辑创建自定义函数（UDF），并在MaxCompute中进行调用，以满足多样化...
SLS触发器
通过配置日志服务SLS触发器，您可以实现 日志服务SLS 与 函数计算 的集成。SLS触发器能够在新日志产生时自动触发函数执行，从而增量消费日志服务Logstore的数据，并完成自定义加工任务。使用场景 数据清洗、加工场景 通过日志服务，快速...
实例级别事件
函数计算 提供实例级别的事件，通过实例级别事件您可以了解函数实例完整的生命周期，包括实例构建、销毁的流程以及其中各步骤发生的时间点。本文介绍函数实例的生命周期以及实例级别事件的定义、转移流程、类型和查询方式。函数实例的生命...
什么是应用中心
Serverless应用中心是阿里云面向Serverless应用的一站式开发及生命周期管理平台。通过Serverless应用中心，您可以有效聚焦业务场景，快速开发及部署Serverless应用、白屏化操作资源提高运维效率，实现应用的全生命周期的管理。本文介绍...
应用场景
AI推理 在AI模型训练完成后，对外提供推理服务时，可以使用 函数计算，通过将数据模型包装在调用函数中，在用户实际请求到达时再运行代码。高效免运维：AI工程师可以专注于算法模型的训练和业务逻辑的开发，将集群的运维交予函数计算处理，...
应用场景
AI推理 在AI模型训练完成后，对外提供推理服务时，可以使用函数计算，通过将数据模型包装在调用函数中，在用户实际请求到达时再运行代码。高效免运维：AI工程师可以专注于算法模型的训练和业务逻辑的开发，将集群的运维交予函数计算处理，...
在DataWorks中通过函数计算节点实现动态为PDF添加水印
本文为您介绍如何在DataWorks中通过函数计算节点调用函数计算服务，实现周期性对OSS中的增量PDF文件添加水印。背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务，在函数计算服务中可以自定义各种功能，最终可通过DataWorks...
链路追踪
示例代码 函数计算的链路分析基于OpenTracing协议的Jaeger实现，Node.js运行时提供以下两种方式自定义Span。使用OpenTelemetry（推荐）在Node.js语言的代码中，您可以通过OpenTelemetry SDK手动埋点将数据上报到链路追踪服务端。完整的示例...
函数计算应用
重要 使用Python语言开发的函数，仅支持在Link IoT Edge专业版实例中使用。授权 选择授权阿里云函数计算的角色。角色相关说明，请参见 云资源访问。应用版本 设置应用的版本，必须是该应用唯一的版本号，即一个应用不可以设置两个相同的...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
开发部署扩展程序：自建服务方式
扩展程序参数配置 DataWorks支持在扩展程序开发过程中使用参数来提高扩展程序开发和应用效率，在扩展程序代码开发时，将需要应用的参数添加至此处即可。您可直接使用DataWorks提供的典型应用场景的内置参数，也可自定义参数。支持添加多个...
基本概念
本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
链路追踪
示例代码 函数计算的链路分析基于OpenTracing协议的Jaeger实现，Go运行时提供以下两种创建自定义Span的方式。使用OpenTelemetry（推荐）在Go语言的代码中，您可以通过OpenTelemetry SDK手动埋点，将数据上报到链路追踪服务端。完整的示例...
语雀
本文介绍如何通过函数计算，解决语雀CPU密集场景下，进程被阻塞等问题。客户介绍 语雀是一个专业的云端知识库，用于团队的文档协作。现在已经是阿里巴巴员工进行文档编写和知识沉淀的标配，并于2018年开始对外提供服务。客户痛点 语雀是...
语雀
本文介绍如何通过函数计算，解决语雀CPU密集场景下，进程被阻塞等问题。客户介绍 语雀是一个专业的云端知识库，用于团队的文档协作。现在已经是阿里巴巴员工进行文档编写和知识沉淀的标配，并于2018年开始对外提供服务。客户痛点 语雀是...
人工智能最佳实践
本文以Python语言为例，说明如何通过控制台，将原始图像经过函数代码处理，实现风格合成以及对象检测。应用场景与优势 传统的面向人工智能应用的GPU基础设施，通常会面临着建设周期长、运维复杂度高、集群利用率低和成本较高等问题。函数...
搭建WordPress博客平台
本示例中使用的 WordPress博客系统 镜像如下。更多镜像环境，您可在 云市场基础环境 中搜索筛选。单击 使用。在 自定义购买 页面，按照界面提示，配置参数。请注意以下参数，更多参数说明，请参见 自定义购买实例。镜像：镜像 区域已自动...
扩展程序概述
DataWorks通过OpenEvent能力为您提供消息推送订阅能力，同时您可以将服务程序注册为DataWorks的扩展程序，通过扩展程序来卡点并响应订阅的事件消息，以此实现通过扩展程序对特定事件进行消息通知与流程管控。本文为您介绍通过OpenEvent和...
异步任务最佳实践
异步任务可以实时感知业务状态、控制执行函数，让您对一些异常情况进行更好的处理，例如报警通知、自动化重试等情况。本文介绍 函数计算 异步任务的最佳实践。背景信息 FaaS早期主要支持无状态、短时和轻量级的计算能力，例如API后端、图片...
软件定时器
定时器管理函数 函数名 描述 aos_timer_create()定时器创建函数（推荐）aos_timer_new()定时器创建函数（兼容3.1）aos_timer_new_ext()定时器创建函数 aos_timer_free()定时器删除函数 aos_timer_start()定时器启动函数 aos_timer_stop()...
环境说明
本文介绍在 函数计算 中使用Go语言编写函数的运行环境信息。Go运行时 函数计算 目前支持Go 1.x版本，推荐使用Go 1.8或以上版本。名称 操作系统 架构 Go 1.x Linux x86_64 注意 Go 运行时目前使用Linux操作系统，暂不支持ARM64架构。Go SDK...
环境说明
本文介绍在 函数计算 中使用Go语言编写函数的运行环境信息。Go运行时 函数计算 目前支持Go 1.x版本，推荐使用Go 1.8或以上版本。名称 操作系统 架构 Go 1.x Linux x86_64 重要 Go 运行时目前使用Linux操作系统，暂不支持ARM64架构。Go SDK...
链路追踪
示例代码 函数计算的链路分析基于OpenTracing协议的Jaeger实现，Java运行时提供以下两种创建自定义Span的方式。使用OpenTelemetry（推荐）在Java语言的代码中，您可以通过OpenTelemetry SDK手动埋点将数据上报到链路追踪服务端。完整的示例...
加工数据
进入数据开发 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。步骤一：新建MaxCompute表 提前新建dwd_log_info_di、dws_user_info_all_di、ads_user...
功能发布记录（2024年）
2024.2.20 所有地域 所有DataWorks用户 DataWorks on EMR Serverless StarRocks最佳实践 数据地图新增数据开发代码搜索 DataWorks数据地图新增数据开发代码搜索功能，支持跨工作空间全局代码检索，通过关键字精确定位目标代码，帮助您提升...
加工数据
进入数据开发 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。步骤一：新建MaxCompute表 提前新建dwd_log_info_di、dws_user_info_all_di、ads_user_info_1d表，用于...
图像处理最佳实践
本文以Python语言为例，说明如何使用Serverless Devs开发工具或通过控制台，将原始图像经过函数代码处理，实现边缘检测。应用场景与优势 在不同的应用场景下，函数计算 提供的GPU实例与CPU相比所具备的优势如下。实时、准实时的应用场景 ...
上下文及日志格式
在Web函数中，您想获取上下文或者查看执行日志，可以参考Custom Runtime的公共请求头以及日志格式，根据这些信息打造属于您的自定义运行环境。函数计算公共请求头 Custom Runtime从 函数计算 中接收到的公共请求头如下表所示。如果您需要...
使用内建函数
背景信息 为了供您方便快捷的使用MaxCompute SQL进行数据分析和数据加工，MaxCompute提供了丰富的内建函数，以便您在日常开发和分析中使用，对于内建函数，您无需关注函数内部的实现逻辑，可直接进行调用。您可以根据需要从不同维度快速...
如何实现OAuth登录
注意模型和逻辑流的调用权限设置 在低代码开发平台魔笔中，逻辑流是由多个操作组成的。操作是实现逻辑的最小单位，可以理解为函数。在逻辑流调用三方登录Action时，需要注意对调用操作的访问权限进行设置，以保证安全性。建议在逻辑流中...
高德
值得一提的是，由Serverless支撑的业务在流量高峰期的表现十分优秀，每分钟函数调用量接近两百万次。这再次验证了Serverless基础技术的价值，进一步拓展了技术场景。公司介绍 2020年的十一出行节期间，高德地图创造了记录——截止2020年10...
人工智能最佳实践
本文以Python语言为例，说明如何使用Serverless Devs开发工具或通过控制台，将原始图像经过函数代码处理，实现风格合成以及对象检测。应用场景与优势 传统的面向人工智能应用的GPU基础设施，通常会面临着建设周期长、运维复杂度高、集群...
- 产品推荐
- 这些文档可能帮助您