ZIP_WITH
将ARRAY数组 a 和 b 的元素按照位置，使用 combiner 进行元素级别的合并，返回一个新的ARRAY数组。命令格式 array<R>zip_with(array<T><a>,array<S><b>,function,S,R>)参数说明 a、b：必填。ARRAY数组。array、array中的 T、S 指代ARRAY数...
列运算
对于List，explode 默认返回一列，当传入参数 pos 时，将返回两列，其中一列为值在数组中的编号（类似Python的 enumerate 函数）。对于Dict，explode 会返回两列，分别表示keys及values。explode 中也可以传入列名，作为最后生成的列。示例...
ARRAYS_ZIP
合并多个给定数组并返回一个结构数组，其中第N个结构包含输入数组的所有第N个值。命令格式 array,U,.>>arrays_zip(array<T><a>,array<U><b>[,.])参数说明 a、b：必填。ARRAY数组。array及 array中的 T 和 U 指代ARRAY数组元素的数据类型，...
数组类型
然而，当前的实现忽略任何提供的数组尺寸限制，即其行为与未指定长度的数组相同。当前的实现也不会强制所声明的维度数。一个特定元素类型的数组全部被当作是相同的类型，而不论其尺寸或维度数。因此，在 CREATE TABLE 中声明数组的尺寸或...
函数概览
flatten函数 把将二维数组转换为一维数组。reduce函数 根据Lambda表达式中的定义，对数组中的各个元素进行相加计算，然后返回计算结果。reverse函数 对数组中的元素进行反向排列。sequence函数 通过指定的起始值返回一个数组，其元素为起始...
COUNT
以下示例显示可以稀疏地填充关联数组（即，已赋值元素的序列中存在“间隙”）。COUNT仅包括已赋值的元素。DECLARE TYPE sparse_arr_typ IS TABLE OF NUMBER INDEX BY BINARY_INTEGER;sparse_arr sparse_arr_typ;BEGIN sparse_arr(-100):=-...
赋值节点
赋值节点输出格式 赋值节点支持ODPS SQL、SHELL和Python三种赋值语言，使用不同赋值语言时，赋值节点的参数（outputs）输出格式不同，下游节点需要根据outputs的具体情况，以${参数名} 的格式，使用 一维数组 或 二维数组 的方式在代码中...
使用 FORALL 语句
SELECT 语句使用 BULK COLLECT INTO 命令填充 t_emp 数组。在填充 t_emp 后，FORALL 语句会遍历 t_emp 数组索引中的值 i，然后将每个记录行插入 emp_copy 中。CREATE TABLE emp_copy(LIKE emp);DECLARE TYPE emp_tbl IS TABLE OF emp%...
通过ASM实现gRPC链路追踪
context.invocation_metadata()，返回值类型为2-tuple数组，2-tuple的形式为('k','v')，使用 m.key,m.value 获取键值对。Unary RPC 使用Java语言通过服务端获取Headers实现Unary RPC。对Headers无感知。使用Go语言通过服务端获取Headers...
通过ASM实现gRPC链路追踪
context.invocation_metadata()，返回值类型为2-tuple数组，2-tuple的形式为('k','v')，使用 m.key,m.value 获取键值对。Unary RPC 使用Java语言通过服务端获取Headers实现Unary RPC。对Headers无感知。使用Go语言通过服务端获取Headers...
JSON&JSONB 数据类型操作
一个多维数组会变成一个JSON数组的数组。说明 如果pretty_bool为true，在第一维元素之间会增加换行。array_to_json('{{1,5},{99,100}}':int[])[[1,5],[99,100]]row_to_json(record[,pretty_bool])返回该行为一个JSON对象。说明 如果pretty_...
数组函数和操作符
本文介绍了 PolarDB PostgreSQL版（兼容Oracle）支持的数组操作符和数组函数。数组操作符 数组函数表展示了可以用于数组类型的函数。数组函数 第一个数组是否包含第二个数组，也就是说，出现在第二个数组中的每个元素是否等于第一个数组中...
UDF示例：引用表资源
开发代码 Python UDF代码如下，实现遍历引用的表资源（例如udf_test）中的数据，返回数组格式的数据。from odps.udf import annotate from odps.distcache import get_cache_table@annotate('->string')class DistCacheTableExample(object...
for-each节点逻辑原理介绍
例如，赋值节点的赋值语言为Shell或Python（Python2）时，输出结果为一维数组：2021-03-28,2021-03-29,2021-03-30,2021-03-31,2021-04-01，则for-each节点会循环5次完成遍历。SQL类型遍历次数：按二维数组类型的输出，循环遍历次数即为二维...
查询导播台布局列表
以填充区（框）作为配置目标进行Layer设置，此时画面会按照原始的宽高比缩放，长边对齐的自适应方式在填充区（框）内居中填充，若填充区宽高比和画面不一致，则短边两侧无填充（显示为下层Layer画面，若下层未配置Layer，默认为底图黑色）...
CREATE TRANSFORM
语言的实现通常默认会使用文本表示，但是在一些时候这很不方便，例如，有时可能用一个联合数组或者列表更合适。一种转换指定了两个函数：一个“from SQL”函数负责将类型从 SQL 环境转换到语言。这个函数将在该语言编写的一个函数的参数上...
简介
Python语言：我们用Python语言进行消费。Java 语言用法，请参考 通过消费组消费数据。Python SDK 推荐使用标准CPython解释器。日志服务的Python SDK可以使用 python3-m pip install aliyun-log-python-sdk-U 命令进行安装。更多日志服务...
在PyODPS节点中调用第三方包
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。更多创建PyODPS节点信息，请参见 开发PyODPS 2任务 和 开发PyODPS 3任务。使用限制 在PyODPS节点中调用第...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。使用限制 DataWorks建议您在PyODPS节点内获取到本地处理的数据不超过50 MB，该操作受限于DataWorks执行...
varbitx
set_bit_array_record(varbit a,int b,int c,int[]d)returns(varbit,int[])将指定下标位置数组d对应的BIT位设置为b（0或1），超出原始长度的部分填充c（0或1），返回设置后的varbit，同时返回此次操作中被设置为b的下标位置数组。...
varbitx
set_bit_array_record(varbit a,int b,int c,int[]d)returns(varbit,int[])将指定下标位置数组d对应的BIT位设置为b（0或1），超出原始长度的部分填充c（0或1），返回设置后的varbit，同时返回此次操作中被设置为b的下标位置数组。...
varbitx
set_bit_array_record(varbit a,int b,int c,int[]d)returns(varbit,int[])将指定下标位置数组d对应的BIT位设置为b（0或1），超出原始长度的部分填充c（0或1），返回设置后的varbit，同时返回此次操作中被设置为b的下标位置数组。...
编写自定义脚本
出参：$jsonObj，关联数组，关联数组key取值为英文字符串不能是字符的数字如"10"，不能为空。function executeScript($data){$jsonObj=array();return$jsonObj;} 重要 请避免使用全局变量或者static变量，否则会造成执行结果不一致。脚本中...
创建合流任务
LayoutConfig 名称 类型 必选 描述 FillSizeNormalized JSON浮点数组 必选 表示该Layer元素需要填充的尺寸大小。[w,h]：w、h取值范围[0-1]。其中宽高都是进行了归一化计算。例如：[0.2,0.3]代表水平占比20%，垂直占比30%。...
开发PyODPS 3任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
位图功能扩展（varbitx）
set_bit_array_record(varbit a,int b,int c,int[]d)returns(varbit,int[])将指定下标位置数组d对应的BIT位设置为b（0或1），超出原始长度的部分填充c（0或1），返回设置后的varbit，同时返回此次操作中被设置为b的下标位置数组。...
对象存储OSS使用Python语言实现签名Header上传的示例
概述 对象存储OSS SDK提供了集成签名、上传和下载的SDK，但实际使用中，有时需要使用API的方式实现在签名的情况下进行上传和下载，本文以PutObject接口为例，提供了Python语言实现的示例。说明 建议优先使用OSS提供SDK，本文提供的只是签名...
开发PyODPS 3任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
概述
使用Python语言开发产品时，您可使用物联网平台提供的Python SDK，简化开发过程，使设备快速接入物联网平台。本文简要介绍Python SDK的使用说明和功能介绍。使用说明 Python SDK分为Paho-SDK和Link SDK两个系列。Paho-MQTT Python 基于开源...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
复杂类型函数
ARRAY_EXCEPT 命令格式 array<T>array_except(array<T><a>,array<T><b>)命令说明 找出在ARRAY数组 a 中，但不在ARRAY数组 b 中的元素，并去掉重复的元素后，返回新的ARRAY数组。参数说明 a、b：必填。ARRAY数组。array中的 T 指代ARRAY数组...
Python 3 UDTF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。引用文件资源和表资源的代码示例如下。from odps.udf import annotate from odps.udf import BaseUDTF from odps.distcache import ...
Python 3 UDAF
Python 2 UDAF迁移 Python 2官方即将停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDAF的MaxCompute项目。建议所有的Python UDAF都直接使用Python 3语言编写。存量项目：创建了大量...
数据科学计算概述
NumPy：用于N维数组对象运算。Pandas：是一个包含数据帧的数据分析库。Matplotlib：用于创建图形和图形的2D绘图库。Scikit-Learn：用于数据分析和数据挖掘任务的算法。为满足用户基于MaxCompute进行大规模数据处理、分析、挖掘及模型训练的...
Python脚本示例
本文介绍Python语言的自定义Topic消息解析脚本模板和示例。脚本模板 SELF_DEFINE_TOPIC_UPDATE_FLAG='/user/update'#自定义Topic：/user/update。SELF_DEFINE_TOPIC_ERROR_FLAG='/user/update/error'#自定义Topic：/user/update/error。将...
IForest异常检测
页签 参数名称 描述 字段设置 特征列名数组 如果您已经配置了 向量列名 或 tensor列，则该参数不允许配置。用于训练的特征列名。说明 特征列名数组、tensor列 和 向量列名 是三个互斥参数，您只能使用其中一个参数来描述算法的输入特征。...
加密SDK快速入门（Python）
加密SDK（Encryption SDK）是一个客户端密码库，通过与密钥管理服务KMS（Key Management Service）结合使用，帮助您快速实现数据的加解密、签名验签功能。本文以Python3语言为例，为您介绍如何快速使用加密SDK进行数据加解密。背景信息 您...
JSON函数和操作符
数组和组合递归地转换为数组和对象（多维数组在JSON中变成数组的数组）。否则，如果存在从SQL数据类型到json的类型转换，则造型函数将用于执行转换;[a]否则，将生成一个标量json值。对于除数字、布尔值或空值之外的任何标量，将使用文本...
运维助手
若运行在独享调度资源组上的任务执行时需依赖第三方包，为保障任务可顺利执行，您需要先通过该资源组的运维助手功能，将相应的第三方包安装至独享调度资源组。DataWorks的运维助手提供了多种内置的第三方包，可直接安装使用，若内置的第三...
Python脚本示例
本文提供Python语言的物模型数据解析脚本模板和示例。脚本模板 您可以基于以下Python脚本模板编写数据解析脚本。说明 本模板仅适用于 数据格式 为 透传/自定义 的产品。将设备的自定义格式数据转换为Alink协议的数据，设备上报数据到物联网...
- 产品推荐
- 这些文档可能帮助您