数据类型版本说明

MaxCompute目前提供了三种不同类型的数据类型版本,包括1.0数据类型、2.0数据类型以及Hive兼容数据类型,您可以根据业务需求选择合适的数据类型版本。本文为您介绍三种数据类型版本、选择数据类型版本以及查看和修改项目的数据类型版本。...

SETPROJECT

RAND SQL Session/Project odps.sql.type.system.odps2 2.0新数据类型开关。关于2.0数据类型的更多信息,请参见 2.0数据类型版本。True:打开。False:关闭。MaxCompute 2.0扩展函数 SQL Session/Project odps.sql.hive.compatible Hive...

Flag参数列表

RAND SQL Session/Project odps.sql.type.system.odps2 2.0新数据类型开关。关于2.0数据类型的更多信息,请参见 2.0数据类型版本。True:打开。False:关闭。MaxCompute 2.0扩展函数 SQL Session/Project odps.sql.hive.compatible Hive...

MaxCompute TIMESTAMP_NTZ数据类型介绍

开启2.0数据类型 SET odps.sql.type.system.odps2=true;MaxCompute Project时区默认是中国的东八区(Asia/Shanghai),通过以下命令返回的odps.sql.timezone属性,确认前时区 setproject;若当前项目非东八区,执行以下代码 SET odps.sql....

SQL其他常见问题

本文为您介绍在MaxCompute中执行SQL时,与数据类型SQL限制等相关的常见问题。问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒?在执行MaxCompute SQL过程中,对DOUBLE类型的数据进行等值比较,为什么结果不符合...

SQL语句中设置Flag示例

例如,Session级别使用MaxCompute 2.0数据类型时,需要在涉及2.0数据类型SQL前加设置Flag的语句 set odps.sql.type.system.odps2=true;示例 使用Java SDK提交SQL时,不能简单地把Set Flag语句直接放到SQL查询中执行。设置Flag的正确方式...

PyODPS常见问题

PyODPS数据类型如何设置?使用PyODPS时遇到ValueError,如何解决?安装PyODPS时,提示Warning:XXX not installed,如何解决?产生此问题的原因为组件缺失,请根据报错信息中提示的XXX信息,明确缺失的组件名称,使用 pip 命令安装此组件。...

常见问题

当MaxCompute项目打开2.0新数据类型开关(odps.sql.type.system.odps2=true)时,存在隐式转换被禁用的风险,您可以关闭2.0新数据类型开关(odps.sql.type.system.odps2=false)。在MaxCompute中创建表的方式有哪些?您可以通过如下方式...

Python SDK常见问题

PyODPS数据类型如何设置?使用PyODPS时遇到ValueError,如何解决?安装PyODPS时,提示Warning:XXX not installed,如何解决?产生此问题的原因为组件缺失,请根据报错信息中提示的XXX信息,明确缺失的组件名称,使用 pip 命令安装此组件。...

1.0数据类型版本

MaxCompute 1.0数据类型版本是MaxCompute三种数据类型版本之一,该数据类型版本仅支持1.0数据类型。本文为您介绍1.0数据类型版本的设置方法、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为1.0数据类型版本...

2.0数据类型版本

本文为您介绍MaxCompute 2.0数据类型版本的定义、使用场景、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为2.0数据类型版本时,项目空间的数据类型属性参数定义如下。setproject odps.sql.type.system.odps...

Hive兼容数据类型版本

Hive兼容数据类型版本是MaxCompute三种数据类型版本之一,该数据类型版本下仅支持Hive兼容数据类型。本文为您介绍Hive兼容数据类型版本的定义、支持的数据类型以及与其他数据类型版本的差异。定义 项目空间选择数据类型版本为Hive兼容数据...

Java SDK常见问题

例如,如果您需要使用MaxCompute 2.0数据类型,可以通过Session级别方式开启,在涉及2.0新数据类型SQL前增加Set Flag语句 set odps.sql.type.system.odps2=true;使用Java SDK提交SQL时,不能简单地把Set Flag语句直接增加到SQL中,设置...

MaxCompute后付费消费突增排查

2.0数据类型详情,请参见2.0数据类型版本。set odps.sql.decimal.odps2=true;select inst_id-实例id,input_bytes-数据输入量(,complexity,cast(input_bytes/1024/1024/1024*complexity*0.3 as DECIMAL(18,5))cost_sum,get_json_object...

内建函数常见问题

当MaxCompute项目打开2.0新数据类型开关(odps.sql.type.system.odps2=true)时,如下隐式类型转换会被禁用,存在精度损失或报错的风险:STRING->BIGINT STRING->DATETIME DOUBLE->BIGINT DECIMAL->DOUBLE DECIMAL->BIGINT 此时,您可以...

大量数据导出方案

数据同步节点和ODPS SQL节点连线配置成依赖关系,ODPS SQL节点作为数据的产出节点,数据同步节点作为数据的导出节点。工作流调度配置完成后(可以直接使用默认配置),单击 运行。数据同步的运行日志,如下所示。2016-12-17 23:43:46.394...

统计MaxCompute TOPN费用账号及耗时作业

ODPS SQL节点运行的命令示例如下:开启2.0数据类型开关。2.0数据类型详情,请参见2.0数据类型版本。set odps.sql.decimal.odps2=true;将元数据写入cost_topn、time_topn表。user_id为账号ID。您可以在个人信息页面查看账号ID。insert into ...

UDF开发(Java)

附录:数据类型 数据类型映射 为确保编写Java UDF过程中使用的数据类型与MaxCompute支持的数据类型保持一致,您需要关注二者间的数据类型映射关系。具体映射关系如下。说明 在MaxCompute中不同数据类型版本支持的数据类型不同。从...

ODPS-0130241

left is YY while right is ZZ 错误信息示例 ODPS-0130241:[m,n]Illegal union operation-type mismatch for column xx of UNION,left is YY while right is ZZ 问题描述 两个表进行union操作的时候,要求这两个表的数据类型必须匹配,否则...

UDT概述

说明 部分内置的 新数据类型 需要先设置 set odps.sql.type.system.odps2=true;才可使用,否则会报错。UDT扩展了类型转换规则:UDT对象可以被隐式类型转换为其基类对象。UDT对象可以被强制类型转换为其基类或子类对象。没有继承关系的两个...

MaxCompute数据迁移至OSS

单击 新增数据源,并选择数据类型为 MaxCompute。在 新增MaxCompute数据源 对话框中配置参数,并单击 完成。详情请参见 配置MaxCompute数据源。新增OSS数据源,详情请参见 配置OSS数据源。配置MaxCompute(ODPS)Reader和对象存储(OSS)...

SQL概述

MaxCompute SQL是MaxCompute中用于数据查询和分析的SQL语言,其语法类似于标准SQL,但在标准语法ANSI SQL92的基础上进行了一些扩展和限制以更好地服务于大规模数据仓库的场景。本文为您介绍MaxCompute SQL使用场景、使用向导及支持的工具...

SUBSTR

Hive兼容数据类型版本:当 start_position 为0时,与起始位置为1时相同。1.0和2.0数据类型版本:当 start_position 为0时,返回NULL。length:可选。BIGINT类型,表示子串的长度值。值必须大于0。重要 如果 setproject odps.function....

授权信息

操作 API 访问级别 资源类型 条件关键字 关联操作 odps:CreateProject CreateProject Write Project acs:odps:{#regionId}:{#accountId}:project/*odps:Encryption 无 odps:CreateQuotaPlan CreateQuotaPlan Write 全部资源*无 无 odps:...

复杂数据类型上传下载示例

本文为您介绍如何通过Tunnel SDK上传或下载复杂数据类型。MaxCompute支持ARRAY、MAP和STRUCT这3种复杂数据类型,具体用法请参见 数据类型版本说明。上传复杂类型数据 代码示例 RecordWriter recordWriter=uploadSession.openRecordWriter(0...

概述

您如果需要使用这些新类型,在执行SQL之前需要执行以下语句,打开MaxCompute 2.0数据类型开关。详情请参见 数据类型版本说明。set odps.sql.type.system.odps2=true 常见问题 如何查看MaxCompute JDBC驱动的日志?MaxCompute JDBC驱动的...

ODPS-0110061

xxxx 错误码描述 当前项目默认不允许表结构变更(Schema Evolution),如新增struct类型的子列、删除列、修改列顺序和更改列数据类型。解决方案 若您需要开通表结构变更(Schema Evolution),请运行 setproject odps.schema.evolution....

项目管理(新版)

开启decimal2.0 可选择项目是否开启MaxCompute 2.0的Decimal数据类型,即为设置 odps.sql.decimal.odps2 属性。单SQL消费限制 设置单SQL消费的最高阈值,即为设置 odps.sql.metering.value.max 属性,详细内容请参见 消费监控告警。单位:...

普通模式和Hive兼容模式下SQL的差异

本文为您介绍MaxCompute中运算符、类型转换和内建函数分别在普通模式和Hive兼容模式下使用的区别。运算符 BITAND(&)当输入参数是BIGINT类型的时候,如果BITAND的计算结果是LONG_MIN(-2 63),在普通模式下会返回NULL,而Hive模式仍然是...

SET

odps.sql.type.system.odps2 2.0新数据类型开关。2.0数据类型详情请参见 2.0数据类型版本。True:打开 False:关闭 odps.sql.hive.compatible Hive兼容模式开关。打开Hive兼容模式后,MaxCompute才支持Hive指定的各种语法,例如 ...

使用DataWorks连接

MaxCompute任务节点包括:ODPS SQL节点、ODPS Spark节点、PyODPS 2节点、PyODPS 3节点、ODPS Script节点、ODPS MR节点。使用场景 数据分析使用场景 数据分析的 SQL查询 功能使用场景如下:您可以通过数据分析的 SQL查询 功能查询数据,并...

使用说明

您如果需要使用这些新类型,在执行SQL之前需要执行以下语句,打开MaxCompute 2.0数据类型开关。详情请参见 数据类型版本说明。set odps.sql.type.system.odps2=true JDBC下载 您可以通过 OSS、GitHub 或 Maven库 获取MaxCompute各版本的JAR...

开发ODPS SQL任务

DataWorks为您提供ODPS SQL节点,可用于周期性调度MaxCompute的SQL任务,并完成与其他类型节点的集成和联合调度。MaxCompute SQL任务采用类似SQL的语法,适用于海量数据(TB级)但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...

成本分析

用量记录数:以折线趋势图展示用量明细中的各数据类型的总记录数趋势。用量记录数也可以理解为作业数,若出现一个作业关联计算内部表和外部表则会有两条用量记录。计算使用量:以折线趋势图展示各类型作业的计算量趋势,按使用量统计方式可...

MaxCompute JSON类型使用指南

MaxCompute当前支持JSON数据类型,提高了表中带有JSON类型数据的计算和分析的性能,本文为您介绍JSON类型的使用方法。JSON类型简介 背景信息 半结构化数据介于结构和非结构化数据之间,数据中有一定的Schema,但是Schema灵活,没有强约束,...

项目空间操作

true:打开 false:关闭 odps.sql.decimal.odps2 DECIMAL 2.0数据类型 DECIMAL(precision,scale)开关。详情请参见 2.0数据类型版本。true:打开 false:关闭 odps.timemachine.retention.days 设置备份数据的保留天数。详情请参见 备份与...

BITWISE_OR_AGG

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

BITWISE_AND_AGG

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

HISTOGRAM

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....

MAP_AGG

如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展函数时,需要执行如下语句开启新数据类型开关:Session级别:如果使用新数据类型,您需要在SQL语句前加上语句 set odps.sql....
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
大数据开发治理平台 DataWorks 云数据库 RDS 数据库备份 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用