MaxCompute JSON类型使用指南
返回结果+-+|_c0|+-+|"MaxCompute"|+-+说明 新的JSON类型采用了更为规范的JSON Path解析，与MaxCompute旧函数get_json_object的JSON Path不同，可能存在兼容性问题，因此新的SQL推荐使用json_extract函数，更多JSON内置函数请参见 复杂类型...
GREATEST
MaxCompute GREATEST是一种聚合函数，用于比较一组值，并返回其中最大的数值。本文为您介绍GREATEST函数的命令格式、参数说明以及返回值信息。命令格式 greatest(,[,.])参数说明 var1、var2：必填。BIGINT、DOUBLE、DECIMAL、DATETIME或...
API错误码（ODPS-04CCCCX）
ODPS-0423121:The function has already existed Worker 1 函数已存在，API返回409错误。修改函数名称，且名称不存在冲突情况。ODPS-0423131:Invalid function name Worker 1 函数名称不合法，API返回400错误。修改为合法的函数名称。ODPS-...
SOUNDEX
此函数为MaxCompute 2.0扩展函数。返回值说明 返回STRING类型。str 值为NULL时或者不识别的特殊字符时，返回NULL。使用示例 示例1：将字符串 hello 转换为SOUNDEX字符串。命令示例如下。返回H400。select soundex('hello');示例2：输入参数...
SELECT FUNCTION
调用SQL语言定义函数的方式和现有内建函数的调用方式一致。命令格式 select([,.])from;参数说明 function_name：已创建的SQL语言定义函数的名称。column_name：待查询的目标表的列名称。列的数据类型必须与SQL语言定义函数定义的数据类型...
SQL概述
MaxCompute UDF 介绍MaxCompute支持的自定义函数，包含UDF（User Defined Scalar Function）、UDTF（User Defined Table Valued Function）和UDAF（User Defined Aggregation Function），并指导您如何创建自定义函数。MaxCompute UDT 介绍...
打印UDF日志
在开发UDF的过程中打印日志有助于用户进行UDF代码调试，本文为您介绍在MaxCompute中如何打印及查看UDF日志。背 景信息 当前MaxCompute的UDF运行在远端的机器上，很多用户代码在本地测试成功以后，提交到分布式的环境下，可能由于数据不同...
COLLECT_SET
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
TRANSLATE
此函数为MaxCompute 2.0扩展函数。命令格式 string translate(string|varchar,string|varchar,string|varchar)返回值说明 返回STRING类型。如果任一输入参数值为NULL，返回NULL。使用示例 示例1：将字符串 ababab 出现在 abab 中的每个字符...
LPAD
当您需要格式化数据表中的字符串，以保证字符串输出的一致性和对齐时，MaxCompute支持使用LPAD函数，用字符串 str2 将字符串 str1 向左补足到 length 位。此函数为MaxCompute 2.0扩展函数，本文为您介绍LPAD的命令格式和使用示例。命令格式...
GET_IDCARD_AGE
MaxCompute GET_IDCARD_AGE函数主要用于验证身份证的合法性并获取身份证持有者的年龄。本文为您介绍GET_IDCARD_AGE函数的命令格式和参数说明。命令格式 get_idcard_age()参数说明 idcardno：必填。STRING类型，15位或18位身份证号码。在...
RPAD
当您需要格式化数据表中的字符串，以保证字符串输出的一致性和对齐时，MaxCompute支持使用RPAD函数，用字符串 str2 将字符串 str1 向右补足到 length 位。此函数为MaxCompute 2.0扩展函数，本文为您介绍RPAD的命令格式和使用示例。命令格式...
2023年
2023-05-06 全部地域 数学函数 ISNAN ATAN2 POSITIVE NEGATIVE 时间日期函数 DAYOFWEEK DAYOFYEAR CURRENT_TIMEZONE 字符串函数 INITCAP 物化视图支持定时刷新数据 物化视图支持多种定时方式刷新数据，让物化视图能保持更新鲜的数据供用户...
REPLACE
此函数为MaxCompute 2.0扩展函数。命令格式 string replace(string,string,string)参数说明 str：必填。STRING类型。待替换的字符串。如果输入支持转换为STRING类型的数据类型，则会隐式转换为STRING类型参与运算。old：必填。待比较的字符...
VAR_SAMP
当您需要了解数据值的波动或分布情况时，MaxCompute支持使用VAR_SAMP函数计算指定数值列的样本方差，帮助您从数据中提取出更深层次的价值。此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您...
创建并使用自定义函数
参数 描述 函数类型 选择函数类型，包括 数学运算函数、聚合函数、字符串处理函数、日期函数、窗口函数 和 其他函数。更多详情请参见 使用内建函数。MaxCompute引擎实例 默认不可以修改。函数名 UDF函数名，即SQL中引用该函数所使用的名称...
使用须知
内建函数 支持通过内建数学函数、窗口函数、日期函数、聚合函数、字符串函数等处理数据。UDF 支持通过创建自定义函数来满足更多的计算需求。如果您拥有一定开发经验 如果您拥有一定的开发经验，了解分布式概念，且希望解决某些无法用SQL...
SUBSTRING_INDEX
此函数为MaxCompute 2.0扩展函数。命令格式 string substring_index(string,string,int)参数说明 str：必填。STRING类型。待截取的字符串。separator：必填。STRING类型的分隔符。count：必填。INT类型。指定分隔符位置。返回值说明 返回...
ANY_VALUE
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
COVAR_SAMP
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
ARG_MAX
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
ARG_MIN
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
使用MaxCompute分析IP来源最佳实践
参数 描述 函数类型 选择函数类型，包括 数学运算函数、聚合函数、字符串处理函数、日期函数、窗口函数 和 其他函数。MaxCompute引擎实例 默认不可以修改。函数名 UDF函数名，即SQL中引用该函数所使用的名称。需要全局唯一，且注册函数后不...
概述
不支持访问MaxCompute除OSS、Hologres以及HBase外部表之外的外部表、内建函数和自定义函数（MaxCompute UDF）。不支持在使用 按量计费开发者版 资源的项目中执行Spark作业。按量计费开发者版仅支持MaxCompute SQL（支持使用UDF）、PyODPS...
MIN_BY
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
MAX_BY
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
COVAR_POP
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
APPROX_DISTINCT
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
VARIANCE/VAR_POP
如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：Session级别：如果使用新数据类型，您需要在SQL语句前加上语句 set odps.sql....
资源
概念 资源（Resource）是MaxCompute的特有概念，如果您想使用MaxCompute的 自定义函数（UDF）或 MapReduce 功能，需要依赖资源来完成，如下所示：SQL UDF：您编写UDF后，需要将编译好的JAR包以资源的形式上传到MaxCompute。运行此UDF时，...
CONCAT_WS
此函数为MaxCompute 2.0扩展函数。命令格式 string concat_ws(string,string,string[,.])string concat_ws(string,array<string><a>)参数说明 separator：必填。STRING类型的分隔符。str1、str2：至少要指定2个字符串。STRING类型。如果...
2022年
更新说明 MAP_CONCAT、MAP_FROM_ARRAYS、MAP_FROM_ENTRIES、MAP、STR_TO_MAP函数增加 mapDupKeyPolicy 参数并支持通过 odps.sql.map.key.dedup.policy 设置。复杂类型函数 2022-01-05 新增最佳实践。新实践 新增Spark On MaxCompute访问...
NUMERIC_HISTOGRAM
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
函数操作
Name my_lower Owner ALIYUN$Created Time 2020-06-18 15:50:19 Class org.alidata.odps.udf.examples.Lower Resources project_name/my_lower.jar 查看自定义函数列表 查看MaxCompute项目中所有自定义函数。命令格式。以下两种命令格式...
UDT示例
函数重载 MaxCompute UDF使用 evaluate 方法重载函数。该方式不支持泛型，当您需要定义一个支持任何数据类型的函数时，必须为每种类型都写一个 evaluate 函数。该方法无法实现个别输入类型（例如ARRAY）的重载函数。在没有提供Resolve注解...
CURRENT_TIMESTAMP
CURRENT_TIMESTAMP函数为MaxCompute 2.0扩展函数，支持获取数据库服务器当前TIMESTAMP类型的时间。命令格式 timestamp current_timestamp...相关函数 CURRENT_TIMESTAMP函数属于日期函数，更多日期计算、日期转换的相关函数请参见 日期函数。
Java SDK介绍
ODPS MaxCompute SDK的入口，您可通过此类来获取项目空间下的所有对象集合，包括 Projects、Tables、Resources、Functions、Instances。您可以通过传入AliyunAccount实例来构造MaxCompute对象。代码示例如下。阿里云账号AccessKey拥有所有...
数据动态脱敏
当您期望某些用户只可以查看MaxCompute项目中隐藏关键信息的敏感数据时，您可以开启MaxCompute动态脱敏功能，在数据访问或展示时实时隐藏或替换敏感数据，以防止敏感数据泄露。本文为您介绍如何开启MaxCompute动态脱敏功能，并提供参考示例...
PERCENTILE
此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据...
（邀测）MaxCompute Notebook使用说明
内置丰富函数库 MaxCompute Notebook内置pandas、numpy、pyplot、pyecharts、matplotlib等大量数据分析、挖掘及可视化扩展库，无需花费大量时间准备开发环境，满足您日常数据挖掘及可视化分析需求。安全保障 MaxCompute Notebook采用Bearer...
- 产品推荐
- 这些文档可能帮助您