ODPS-0123091

设置当前处理模式为严格模式,集团内部的flag是odps.sql.udf.strict.mode=true,中国公共云对应的flag是odps.function.strictmode odps>set odps.sql.udf.strict.mode=true;错误,因为输入数据'-'不能cast成bigint而且当前工作在strict模式...

快速入门

使用DataWorks的临时查询功能,新建MaxCompute ODPS SQL节点,执行SQL命令验证数据导入结果。更多临时查询操作信息,请参见 使用临时查询运行SQL语句(可选)。命令示例如下:select*from mushroom_classification;返回结果如下:对导入表...

使用DataWorks连接

使用DataWorks连接MaxCompute有如下方式:数据分析的 SQL查询 功能:实现编辑MaxCompute SQL查询数据、分析数据(电子表格)、在线分享数据及下载数据等功能。SQL查询功能详情请参见 SQL查询。数据开发的MaxCompute任务节点:DataWorks将...

快速入门

PyODPS可在DataWorks等数据开发平台中作为数据开发节点调用。这些平台提供了PyODPS运行环境和调度执行的能力,无需您手动创建ODPS入口对象。PyODPS支持类似Pandas的快速、灵活和富有表现力的数据结构。您可以通过PyODPS提供的DataFrame API...

RAND

返回+-+|_c0|+-+|0.8212525247695169|+-+说明 参数 odps.sql.executionengine.enable.rand.time.seed=true 只对不输入参数生效,如果加入了参数,默认参数值 false。相关函数 RAND函数属于数学函数,更多数据计算、数据转换的相关函数请...

MAP_FROM_ENTRIES

该参数也可以在Session级别通过 odps.sql.map.key.dedup.policy 参数进行设置,例如 set odps.sql.map.key.dedup.policy=exception;不设置时该参数默认值为 last_win。说明 MaxCompute的行为实现优先以函数中 mapDupKeyPolicy 的取值为准,...

MAP_CONCAT

该参数也可以在Session级别通过 odps.sql.map.key.dedup.policy 参数进行设置,例如 set odps.sql.map.key.dedup.policy=exception;不设置时该参数默认值为 last_win。说明 MaxCompute的行为实现优先以函数中 mapDupKeyPolicy 的取值为准,...

常见问题

当MaxCompute项目打开2.0新数据类型开关(odps.sql.type.system.odps2=true)时,存在隐式转换被禁用的风险,您可以关闭2.0新数据类型开关(odps.sql.type.system.odps2=false)。在MaxCompute中创建表的方式有哪些?您可以通过如下方式...

与Hive、MySQL、Oracle内建函数对照表

setproject odps.sql.hive.compatible=True;Session级别切换为Hive模式。set odps.sql.hive.compatible=True;数学函数 MaxCompute Hive MySQL Oracle ABS ABS ABS ABS ACOS ACOS ACOS ACOS ASIN ASIN ASIN ASIN ATAN ATAN ATAN ATAN CEIL ...

CURRENT_TIMESTAMP

CURRENT_TIMESTAMP函数为MaxCompute 2.0扩展函数,支持获取数据库...set odps.sql.type.system.odps2=true;select current_timestamp();相关函数 CURRENT_TIMESTAMP函数属于日期函数,更多日期计算、日期转换的相关函数请参见 日期函数。

MAP_FROM_ARRAYS

该参数也可以在Session级别通过 odps.sql.map.key.dedup.policy 参数进行设置,例如 set odps.sql.map.key.dedup.policy=exception;不设置时该参数默认值为 last_win。说明 MaxCompute的行为实现优先以函数中 mapDupKeyPolicy 的取值为准,...

BITWISE_OR_AGG

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

BITWISE_AND_AGG

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

HISTOGRAM

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

TRANSFORM_KEYS

该参数也可以在Session级别通过 odps.sql.map.key.dedup.policy 参数进行设置,例如 set odps.sql.map.key.dedup.policy=exception;不设置时该参数默认值为 last_win。说明 MaxCompute的行为实现优先以函数中 mapDupKeyPolicy 的取值为准,...

MAP_AGG

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

SQL

PyODPS支持对MaxCompute SQL的基本操作,本文为您介绍如何在PyODPS中使用SQL。背景信息 PyODPS提供对MaxCompute SQL的基本操作方法,方法如下所示。方法名称 方法说明 execute_sql()/run_sql()执行SQL语句。open_reader()读取SQL执行结果。...

ODPS-0130071

错误码:ODPS-0130071:Semantic analysis exception 错误1:the number of input partition columns(n)doesn't equal to table's partition columns(m)错误信息示例 FAILED:ODPS-0130071:[m,n]Semantic analysis exception-the number of ...

SQL其他常见问题

本文为您介绍在MaxCompute中执行SQL时,与数据类型、SQL限制等相关的常见问题。问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒?在执行MaxCompute SQL过程中,对DOUBLE类型的数据进行等值比较,为什么结果不符合...

MAP_UNION_SUM

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

MULTIMAP_AGG

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

MAP_UNION

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

ODPS-0123144

错误码:ODPS-0123144:Fuxi job failed 错误1:kInstanceMonitorTimeout(errCode:252)at Odps/xxx/xxx.Detail error msg:CRASH_EXIT,usually caused by bad udf performance.错误信息 ODPS-0123144:Fuxi job failed-...

UDT示例

Java数组 set odps.sql.type.system.odps2=true;set odps.sql.udt.display.tostring=true;SELECT new Integer[10],-创建一个包含10个元素的数组。new Integer[]{c1,c2,c3},-通过初始化列表创建一个长度为3的数组。new Integer[][]{ new ...

CAST

返回+-+|_c0|+-+|2022-12-20|+-+说明 默认参数 odps.sql.executionengine.enable.string.to.date.full.format 的值为 false,如果需要转换带时分秒的日期字符串,需要把该参数值设置成 true。示例4(错误命令示例):异常用法,如果转换不...

分区剪裁合理性评估

本文为您介绍如何评估分区剪裁合理性。背景信息 MaxCompute分区表是指在创建表时指定...自定义函数中使用分区剪裁时,需要修改类或者在SQL语句前设置 set odps.sql.udf.ppr.deterministic=true;详情请参见 WHERE子句过滤(where_condition)。

ODPS-0123031

错误码:ODPS-0123031:ODPS partition exception 错误1:maximum 60000 partitions allowed 错误信息示例 ODPS-0123031:ODPS partition exception-maximum 60000 partitions allowed 错误描述 每张MaxCompute的分区表最多允许存在 60000 个...

镜像管理

MaxCompute提供镜像管理功能,内置数据分析、科学计算、机器学习(如Pandas、Numpy、Scikit-learn、Xgboost)等各类常用镜像,并已对镜像进行预先加热,您可在SQL UDF、PyODPS开发等场景中直接引用已有镜像,无需执行繁琐的镜像打包、上传...

消费监控告警

MaxCompute提供如下消费监控告警方式:单SQL消费限制:MaxCompute支持在执行SQL语句前预估SQL语句的消费(包括使用后付费和包年包月计算资源的SQL)。当预估消费超出设定的阈值时,SQL语句执行受限,系统返回失败状态并给出失败信息。您...

UDF示例:兼容Hive

调用Hive UDF时,需要在SQL语句前添加 set odps.sql.hive.compatible=true;语句,与SQL语句一起提交执行。Java UDF在分布式环境中运行时,请注意MaxCompute的 Java沙箱 限制。UDF会起新进程计算,当集群资源紧张时,会有小概率因新进程启动...

通过UDF访问VPC网络资源

创建网络连接后,在使用SQL命令调用UDF前,需要在SQL语句前增加 set odps.session.networklink=;属性与SQL语句一起提交执行。networklink_name 为创建的网络连接名称。使用限制 由于专有网络连接方案存在地域限制,仅华北2(北京)、华东2...

COUNT_IF

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

将数据写入OSS

odps.sql.unstructured.oss.commit.mode 属性设置不同取值时的实现原理如下:取值为False:MaxCompute写入到OSS外部表的数据,会存储在 LOCATION 目录下的.odps 文件夹中。odps 文件夹中维护了一个.meta 文件,用于保证MaxCompute数据的...

ANY_VALUE

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

COVAR_SAMP

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

ARG_MIN

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

ARG_MAX

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

VAR_SAMP

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

MIN_BY

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

VARIANCE/VAR_POP

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 云数据库HBase版 云备份 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用