SQL Workbench/J连接MaxCompute
MaxCompute支持您通过数据库管理工具SQL Workbench/J访问MaxCompute项目，进行数据管理...查看表数据 创建SQL Workbench/J和MaxCompute数据连接后，SQL Workbench/J会自动跳转到SQL执行界面，您可以直接执行SELECT查询语句查看表数据信息。
数据输入输出
MaxCompute表 您可以使用MaxCompute表创建MaxFrame DataFrame对象，并将计算结果存储到另一张MaxCompute表中。从非分区表 test_odps_table 中获取数据，通过MaxFrame进行转换并将其存储到另一张分区表 test_processed_odps_table 中，代码...
在SQL语句中设置Flag示例
例如，Session级别使用MaxCompute 2.0数据类型时，需要在涉及2.0数据类型的SQL前加设置Flag的语句 set odps.sql.type.system.odps2=true;示例 使用Java SDK提交SQL时，不能简单地把Set Flag语句直接放到SQL查询中执行。设置Flag的正确方式...
快速体验MaxCompute
本文指导您基于MaxCompute提供的公开数据集，通过 MaxCompute控制台，快速体验在MaxCompute上执行SQL语句查询数据及下载查询结果到本地的操作。前提条件 已创建一个MaxCompute项目。操作详情请参见 创建MaxCompute项目。已拥有对应...
INITCAP
返回固定格式的字符串，单词之间以空格分隔，转换后的格式为：字符串中每个单词首...使用示例-返回Odps Sql。SELECT initcap("oDps sql");相关函数 INITCAP函数属于字符串函数，更多查找字符串、转换字符串格式的相关函数请参见 字符串函数。
从MaxCompute导入数据报错get odps table error:can ...
2、分析型数据库目前仅允许操作者导入自身为 Project Owner 的 MaxCompute Project 中，或者操作者是 MaxCompute 表的 Table Creator 的数据。3、如果用户的 MaxCompute 开启了保护模式的功能(set projectProtection=true)，数据无法以任何...
Common错误码（ODPS-00CCCCX）
ODPS-0010000:System internal error-SQL Runtime Internal Error:ODPS-0123031:0 SQL语句写入动态分区数过多。优化SQL语句。ODPS-0010000:System internal error-enable python sandbox failed 0 内部错误。ODPS-0010000:System internal ...
权限问题
MaxCompute表无Download权限 报错信息 解决方法 在DataWorks的 数据地图 中搜索对应的MaxCompute表，并申请开通其Download权限，运行时则可以下载相应的数据。MaxCompute表无Describe、Select等权限 报错信息 解决方法 申请对应Project下的...
常见问题
MaxCompute支持通过什么方式运行SQL语句?数据导入方式有哪些？误删除表数据如何恢复？不同项目的表是否可以相互引用？新创建的MaxCompute项目为什么不支持数据类型自动隐式转换呢？当MaxCompute项目打开2.0新数据类型开关（odps.sql.type....
DROP TABLE
删除非分区表或分区表。注意事项 请谨慎操作，确认表可以删除后，再执行删除操作。如果误删了表，当项目开启了备份恢复功能，且删除操作未超过项目设置的...SHOW：查看表的SQL DDL语句、列出项目下所有的表和视图或列出一张表中的所有分区。
使用阿里云Flink（流式数据传输）
说明 DDL语句中定义的字段需要与MaxCompute物理表中的字段名称、顺序以及类型保持一致，否则可能导致在MaxCompute物理表中查询的数据为/n。命令示例如下：create table odps_output(id INT,user_name VARCHAR,content VARCHAR)with(type='...
ODPS-0123091
设置当前处理模式为严格模式，集团内部的flag是odps.sql.udf.strict.mode=true，中国公共云对应的flag是odps.function.strictmode odps>set odps.sql.udf.strict.mode=true;错误，因为输入数据'-'不能cast成bigint而且当前工作在strict模式...
压缩数据从OSS迁移至MaxCompute
创建方式 平台 基于MaxCompute SQL创建OSS外部表 MaxCompute客户端 使用控制台（查询编辑器）连接 DataWorks控制台-ODPS SQL节点 MaxCompute Studio-SQL程序 以可视化方式创建OSS外部表 MaxCompute Studio-SQL程序 DataWorks控制台-外部表 ...
ODPS-0130241
Query示例-创建表 odps>create table mc_test1(a string);odps>create table mc_test2(a bigint);错误，union两边的数据类型不匹配 odps>(select a from mc_test1)union all(select a from mc_test2);FAILED:ODPS-0130241:[4,9]Illegal ...
ODPS-0130252
解决方案 建议的方案是修改query：1）当其中join的一张表是小表时，可以设置odps.sql.allow.cartesian值为true或者补充join的关联条件来解决。2）当join的表都是大表时，不推荐odps.sql.allow.cartesian设置为true，会发生数据膨胀。建议...
其他运维常见问题
命令查看表占用的存储空间大小。MaxCompute暂时不能查看整个项目的存储空间大小。如何查看某个用户在项目中的操作历史记录？您可以通过 审计日志 功能查看用户的操作记录。如何查看项目中添加的资源包信息？您可以使用MaxCompute的 list ...
HISTOGRAM
如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：Session级别：如果使用新数据类型，您需要在SQL语句前加上语句 set odps.sql....
BITWISE_OR_AGG
如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：Session级别：如果使用新数据类型，您需要在SQL语句前加上语句 set odps.sql....
GETDATE
说明 在MaxCompute SQL中，getdate 总是返回一个固定的值。返回结果会是MaxCompute SQL执行期间的任意时间，时间精度精确到秒。如果开启了新数据类型2.0，时间精度精确到毫秒。相关函数 GETDATE函数属于日期函数，更多日期计算、日期转换的...
BITWISE_AND_AGG
如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：Session级别：如果使用新数据类型，您需要在SQL语句前加上语句 set odps.sql....
Quick BI连接MaxCompute
查看表数据 成功添加MaxCompute数据源后，在目标表的 操作 列单击 图标，通过编写SQL代码查看表数据并保存。可视化分析数据 参照查看表数据流程自定义SQL创建数据表后，即可根据实际业务诉求创建仪表板并配置参数属性开展数据分析，详情请...
常见问题
MaxCompute项目：登录 MaxCompute控制台，在左侧导航栏选择 工作区>项目管理，查看MaxCompute项目名称。开通MaxCompute服务时，如何根据本身数据存储量以及计算任务评估开通哪些产品规格？请参见 资源规划及规格选型。创建MaxCompute项目时...
MAP_AGG
如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：Session级别：如果使用新数据类型，您需要在SQL语句前加上语句 set odps.sql....
其它操作
参数说明 sql_sentence：待估算费用的SQL语句。使用示例 cost sql select*from sale_detail;返回结果如下。ID=20150715113033121xxxxxxx UDF:0 Complexity:1.0 Input:0 Bytes 参数说明如下：UDF：表示SQL中运行的UDF个数。Complexity：表示...
ODPS-0123144
错误码：ODPS-0123144:Fuxi job failed 错误1：kInstanceMonitorTimeout(errCode:252)at Odps/xxx/xxx.Detail error msg:CRASH_EXIT,usually caused by bad udf performance.错误信息 ODPS-0123144:Fuxi job failed-...
SQL概述
MaxCompute SQL是MaxCompute中用于数据查询和分析的SQL语言，其语法类似于标准SQL，但在标准语法ANSI SQL92的基础上进行了一些扩展和限制以更好地服务于大规模数据仓库的场景。本文为您介绍MaxCompute SQL使用场景、使用向导及支持的工具...
创建DataFrame
从MaxCompute表创建DataFrame 从MaxCompute表创建DataFrame，您需要将Table对象传入DataFrame方法，或者使用表的 to_df 方法。代码示例如下：from odps.df import DataFrame#传入Table对象。iris=DataFrame(o.get_table('pyodps_iris'))#...
MULTIMAP_AGG
如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：Session级别：如果使用新数据类型，您需要在SQL语句前加上语句 set odps.sql....
MAP_UNION_SUM
如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：Session级别：如果使用新数据类型，您需要在SQL语句前加上语句 set odps.sql....
数据类型版本说明
查看 odps.sql.type.system.odps2、odps.sql.decimal.odps2、odps.sql.hive.compatible 属性判断当前项目的数据类型版本。修改项目的数据类型版本 如果发现项目当前选择的数据类型版本不能满足业务需求，可以修改数据类型版本。项目管理员...
与其他SQL语法的差异
本文将MaxCompute SQL与Hive、MySQL、Oracle、SQL Server的SQL语法进行对比，为您介绍MaxCompute不支持的语法。MaxComputeDDL语法差异对比 语法 MaxCompute Hive MySQL Oracle SQL Server CREATE TABLE—PRIMARY KEY N N Y Y Y CREATE ...
MAP_UNION
如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：Session级别：如果使用新数据类型，您需要在SQL语句前加上语句 set odps.sql....
Python SDK示例：SQL
并非所有可以执行的MaxCompute命令都是PyODPS可以接受的SQL语句。在调用非DDL、DML语句时，请使用其他方法，例如：GRANT、REVOKE等语句请使用run_security_query方法。PAI命令请使用run_xflow或execute_xflow方法。调用SQL引擎执行SQL，会...
DQL操作常见问题
问题现象 执行如下MaxCompute SQL语句后，查询返回结果的条数大于 table1 的数据条数。select count(*)from table1 a left outer join table2 b on a.ID=b.ID;产生原因 示例SQL是table1通过ID字段和table2的ID字段做左外关联，所以会出现...
使用限制
MaxCompute MapReduce限制项汇总，如下表所示。边界名 边界值 分类 配置项名称 默认值 是否可配置 说明 Instance内存占用[256 MB,12 GB]内存限制 odps.stage.mapper(reducer).mem 和 odps.stage.mapper(reducer).jvm.mem 2048 MB＋1024 MB ...
查询非结构化数据
MaxCompute 2.0支持通过外部表的方式直接访问OSS...在编辑器中输入创建外部表的SQL语句，并单击 图标，完成外部表创建。新建一个MaxCompute SQL脚本，输入如下查询语句，并单击 图标，查询数据。相关文档 示例：通过自定义解析器创建OSS外部表
整体架构
Transaction Table2.0的增量存储和处理架构的特殊设计主要集中在五个模块：数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织，其他部分与MaxCompute通用的架构一致。本文为您介绍Transaction Table2.0的核心架构要点。...
FROM_JSON
写法与建表语句的类型一致。例如 array、map,array<string>>或 struct,b:double,`C`:map,string>>。说明 STRUCT的Key区分大小写。此外，STRUCT类型还有一种写法 a bigint,b double，等同于 struct,b:double>。JSON数据类型与MaxCompute数据...
查看和更新MaxCompute Studio版本
本文为您介绍如何查看和更新MaxCompute Studio版本。查看MaxCompute Studio版本信息 在顶部菜单栏，单击 File>Settings.在 Settings 对话框的左侧导航栏，单击 MaxCompute Studio。在 MaxCompute Studio 对话框的 Updates Checking 区域...
选择连接工具
DataWorks 使用DataWorks连接 MaxCompute Studio MaxCompute Studio 数据库管理 DBeaver连接MaxCompute DataGrip连接MaxCompute SQL Workbench/J连接MaxCompute ETL工具 使用Kettle调度MaxCompute 使用Apache Airflow调度MaxCompute 使用...
- 产品推荐
- 这些文档可能帮助您