编辑脚本
当成功创建脚本文件后，单击待编辑的脚本文件名，即可在脚本文件编辑框中通过 Python 语言编辑联邦脚本。Python 编码规范及封装的 FL 能力请参见 联邦建模 API。脚本编辑完成后，单击 保存，即可保存编辑后的脚本文件。在执行脚本文件前，...
UDTF概述
MaxCompute支持您通过Java、Python语言编写代码创建UDTF，扩展MaxCompute的函数能力，满足个性化业务需求。本文为您介绍UDTF类型、使用限制、注意事项、开发流程及使用说明等信息。背景信息 UDTF为用户自定义表值函数，适用于一进多出业务...
UDAF概述
MaxCompute支持您通过Java、Python语言编写代码创建UDAF，扩展MaxCompute的函数能力，满足个性化业务需求。本文为您介绍UDAF类型、使用限制、注意事项、开发流程及使用说明等信息。背景信息 UDAF为用户自定义聚合函数，适用于多进一出业务...
Python 3 UDTF
调用方法如下：在归属MaxCompute项目中使用自定义函数：使用方法与 内建函数 类似，您可以参照内建函数的使用方法使用自定义函数。跨项目使用自定义函数：即在项目A中使用项目B的自定义函数，跨项目分享语句示例：select B:udf_in_other_...
函数
函数是用来在SQL语句中执行特定操作的编程构件，包括内建函数和用户自定义函数（User Defined Function，以下简称UDF）。MaxCompute为您提供了SQL计算功能，您可以在MaxCompute SQL中使用系统的 内建函数 完成一定的计算和计数功能。但当内...
Python 3 UDAF
调用方法如下：在归属MaxCompute项目中使用自定义函数：使用方法与 内建函数 类似，您可以参照内建函数的使用方法使用自定义函数。跨项目使用自定义函数：即在项目A中使用项目B的自定义函数，跨项目分享语句示例：select B:udf_in_other_...
Flink Python作业快速入门
本文带您快速体验Flink Python流作业和批作业的创建、部署和启动，以了解实时计算Flink版Python作业的操作流程。前提条件 如果您使用RAM用户或RAM角色等身份访问，需要确认已具有Flink控制台相关权限，详情请参见 权限管理。已创建Flink...
使用OpenAPI示例
本文为您介绍使用OpenAPI创建定向分组的完整示例。查看OpenAPI文档 阅读 API概览，选择创建定向分组的OpenAPI：AddDirectionalGroup。请您根据文档，了解调用该接口需要准备的数据和权限。用户身份管理 身份 您可以使用阿里云账号（主账号...
使用OpenAPI示例
本文为您介绍使用OpenAPI搜索媒体工作流的完整示例。查看OpenAPI文档 通过阅读 API概览 得知，搜索媒体工作流的OpenAPI为 SearchMediaWorkflow-搜索媒体工作流。请您根据文档，了解调用该接口需要准备的数据和权限。创建RAM用户并授权 身份...
使用OpenAPI示例
本文为您介绍使用OpenAPI查询公网IP资产归属地域的完整示例。查看OpenAPI文档 通过阅读 API概览 得知，查询公网IP资产归属地域的OpenAPI为 DescribeIpLocationService。请您根据文档，了解调用该接口需要准备的数据和权限。创建RAM用户并...
MaxCompute UDF概述
注意事项 使用自定义函数时，您需要注意：在性能上，自定义函数的性能低于内建函数，建议您优先使用内建函数实现相同逻辑的业务需求。在SQL语句中使用自定义函数时，如果计算的数据量过大并且存在倾斜，会导致作业占用的 内存超出默认分配...
Python 2 UDTF
调用方法如下：在归属MaxCompute项目中使用自定义函数：使用方法与 内建函数 类似，您可以参照内建函数的使用方法使用自定义函数。跨项目使用自定义函数：即在项目A中使用项目B的自定义函数，跨项目分享语句示例：select B:udf_in_other_...
在PyODPS节点中调用第三方包
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。更多创建PyODPS节点信息，请参见 开发PyODPS 2任务 和 开发PyODPS 3任务。使用限制 在PyODPS节点中调用第...
SELECT TRANSFORM
返回结果如下：+-+-+|key|value|+-+-+|1|4|2|5|3|6|+-+-+调用Python脚本使用示例 准备Python文件，脚本文件名为 myplus.py，命令示例如下。usr/bin/env python import sys line=sys.stdin.readline()while line:token=line.split('\t')if...
SELECT TRANSFORM
返回结果如下：+-+-+|key|value|+-+-+|1|4|2|5|3|6|+-+-+调用Python脚本使用示例 准备Python文件，脚本文件名为 myplus.py，命令示例如下。usr/bin/env python import sys line=sys.stdin.readline()while line:token=line.split('\t')if...
创建并管理MaxCompute节点
MaxCompute函数与资源能力：在DataWorks上开发MaxCompute任务时，支持直接使用MaxCompute的内置函数，当前MaxCompute内置函数列表请参见 使用内建函数。支持将您的自定义函数通过DataWorks创建为MaxCompute资源并注册为MaxCompute函数，供...
OSS有哪些批量操作？
对象存储OSS提供丰富的访问和管理文件（Object）的方式，为提升操作效率，您可以参照本文所示的方法批量管理文件，例如批量上传、下载、复制、删除文件等。批量上传 您可以使用以下方法，批量上传文件：ossimport工具 支持从服务器本地、第...
使用OpenAPI示例
本文为您介绍使用OpenAPI查询已创建的以图搜图应用实例列表的完整示例。查看OpenAPI文档 查询已创建的以图搜图应用实例列表的OpenAPI：QueryPictureSearchApps。请您根据文档，了解调用该接口需要准备的数据和权限。创建RAM用户并授权 身份...
使用OpenAPI示例
本文为您介绍使用OpenAPI查询DDoS原生防护实例详情的完整示例。查看OpenAPI文档 通过阅读 API概览 得知，查询DDoS原生防护实例详情的OpenAPI为 DescribeInstanceList。请您根据文档，了解调用该接口需要准备的数据和权限。创建RAM用户并...
使用OpenAPI示例
本文为您介绍使用OpenAPI查询DDoS高防实例的规格配置的完整示例。查看OpenAPI文档 通过阅读 API概览 得知，查询DDoS高防实例的规格配置的OpenAPI为 DescribeInstanceSpecs。请您根据文档，了解调用该接口需要准备的数据和权限。创建RAM用户...
内建函数概述
注意事项 在使用内建函数时，需要注意：内建函数的入参类型、入参数量、函数格式必须满足函数语法要求，否则MaxCompute无法成功解析函数，SQL运行会报错。如果内建函数的入参涉及2.0新数据类型（例如TINYINT、SMALLINT、INT、FLOAT、...
Python 2 UDAF
调用方法如下：在归属MaxCompute项目中使用自定义函数：使用方法与 内建函数 类似，您可以参照内建函数的使用方法使用自定义函数。跨项目使用自定义函数：即在项目A中使用项目B的自定义函数，跨项目分享语句示例：select B:udf_in_other_...
创建并使用自定义函数
如果MaxCompute提供的内建函数无法支撑您的业务实现，您可以通过编写代码逻辑创建自定义函数，满足您的业务需求。背景内容 UDF（User-Defined Function）指的是自定义函数，它允许用户根据自身需求编写特定的函数以扩展数据处理的功能。...
UDF开发（Python3）
调用函数 在归属MaxCompute项目中使用自定义函数：使用方法与 内建函数 类似，您可以参照内建函数的使用方法使用自定义函数。跨项目使用自定义函数：即在项目A中使用项目B的自定义函数，跨项目分享语句示例：select B:udf_in_other_project...
使用OpenAPI示例
本文为您介绍使用OpenAPI查询CNAME接入详情的完整示例。查看OpenAPI文档 通过阅读 API概览 得知，查询CNAME接入详情的OpenAPI为 DescribeDomainDetail。请您根据文档，了解调用该接口需要准备的数据和权限。创建RAM用户并授权 身份 您可以...
使用OpenAPI示例
本文介绍如何通过OpenAPI使用 办公安全平台SASE（Secure Access Service Edge）。查看OpenAPI文档 您可以通过 API概览 查看支持的接口列表。本文以 ListPrivateAccessTags-批量查询内网访问标签 为例，为您介绍如何使用OpenAPI集成SDK示例...
使用OpenAPI示例
本文为您介绍使用OpenAPI查询指定密钥的密钥详情的完整示例。查看OpenAPI文档 通过阅读 API概览 得知，查询指定密钥的密钥详情的OpenAPI为 DescribeKey。请您根据文档，了解调用该接口需要准备的数据和权限。创建RAM用户并授权 身份 您可以...
UDF开发（Python2）
调用方法如下：在归属MaxCompute项目中使用自定义函数：使用方法与 内建函数 类似，您可以参照内建函数的使用方法使用自定义函数。跨项目使用自定义函数：即在项目A中使用项目B的自定义函数，跨项目分享语句示例：select B:udf_in_other_...
自定义Python脚本上架
Python组件：上架组件前编写好脚本，只可编辑输入、输出参数，不可修改Python代码。算法包组件：上传算法包方式运行组件。此处选择 Python脚本。分组 目前选择默认分组。运行方式 service实时调用：画布可实时调用组件，组件超时一分钟运行...
MaxCompute UDF（Python）常见问题
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下：问题现象一：运行报错描述为 function 'xxx' cannot be resolved。产生原因：原因一：调用MaxCompute UDF...
使用访问凭证访问阿里云OpenAPI最佳实践
本文为您介绍如何在不同的场景中，实现以非AccessKey硬编码的方式编程，使用访问凭证访问阿里云OpenAPI。背景信息 AccessKey（简称AK）是阿里云提供给阿里云用户的访问密钥，用于访问阿里云OpenAPI时的身份验证。AccessKey包括AccessKey ID...
开发UDF
当MaxCompute提供的内建函数无法满足您的业务需求时，您可在MaxCompute Studio中自行开发UDF（自定义函数）以实现业务功能，本文介绍如何使用MaxCompute Studio开发及调试Java UDF。前提条件 您需要完成以下操作：管理项目连接 创建...
PAI-TF数据IO方式介绍
配置Tensorflow组件 ①输入桩连接OSS输入 ②输入桩连接MaxCompute输入 ③输入桩连接模型输入 ④输出桩连接模型输出 ⑤输出桩连接MaxCompute输出 如果输入MaxCompute表，输出也是MaxCompute表，则只需要接入②和⑤。读写MaxCompute表需要...
OpenAPI集成示例（SDK）
调用 OpenAPI 我们使用Python 语言的阿里云SDK，讲解调用步骤。准备 Python 环境 下载并安装 Python 3。查看Python版本方法：打开终端，输入 python-version。配置环境变量 配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_...
编写Android测试脚本
步骤一、创建Capabilities文件 使用Python语言编写Capabilities文件，用于执行测试脚本时指定所需的测试环境。放在项目根目录下（/desired_capabilities.py），文件命名为 desired_capabilities.py。说明 desired_capabilities.py 仅用于...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。使用限制 DataWorks建议您在PyODPS节点内获取到本地处理的数据不超过50 MB，该操作受限于DataWorks执行...
Python SDK示例：资源
本文为您介绍Python SDK中操作MaxCompute资源相关的典型场景操作示例。背景信息 MaxCompute中的资源常用在UDF和MapReduce中。基本操作如下：list_resources()：列出该项目空间下的所有资源。exist_resource()：判断资源是否存在。delete_...
编写iOS测试脚本
配置环境 本文以iOS 10为例进行说明，相应环境要求如下：macOS 10.11.5及以上 Xcode 8.0及以上 Appium 1.6.0及以上 创建Capabilities文件 使用Python语言编写Capabilities文件，指定执行测试脚本所需测试环境，文件命名为 desired_...
概述
实时计算Flink版支持在Flink SQL作业中使用Python自定义函数，本文为您介绍Flink Python自定义函数的分类、Python依赖使用方法和能调优方式。自定义函数分类 分类 描述 UDSF（User Defined Scalar Function）用户自定义标量值函数，将0个、...
安装Python SDK
日志服务Python SDK支持Pypy2、Pypy3、Python2.6、Python2.7、Python3.3、Python3.4、Python3.5、Python3.6、Python3.7、Python3.8和Python3.9版本。您可以执行 python-V 命令检查您已安装的Python版本。已安装Python的包管理工具Pip。更多...
- 产品推荐
- 这些文档可能帮助您