UNLOAD
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 功能介绍 MaxCompute支持使用 unload 命令将MaxCompute的数据导出至 OSS、Hologres 外部存储...
UNLOAD
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 功能介绍 MaxCompute支持使用 unload 命令将MaxCompute的数据导出至 OSS、Hologres 外部存储...
管理项目连接
参数 说明 Properties File 上传MaxCompute项目客户端（odpscmd）的配置文件 odps_config.ini，详情请参见 安装并配置MaxCompute客户端。用于初始化 Access Id、Access Key、Project Name 和 End Point 配置项。AK Account 连接MaxCompute...
MaxCompute UDF（Python）常见问题
解决措施：原因一的解决措施：在报错的项目下通过 MaxCompute客户端 执行 list functions;命令，确保MaxCompute UDF是真实存在的。原因二的解决措施：通过 MaxCompute客户端 执行 desc function;命令，检查输出结果中的 Class 及 Resources...
项目空间操作
具备项目空间访问权限的用户 本文中的命令您需要在 MaxCompute客户端 执行。查看项目空间属性 查看项目空间配置的属性信息。项目空间Owner 设置项目空间属性 设置项目空间的属性信息。项目空间Owner 查看项目空间账号体系 显示当前项目空间...
DOWNLOAD
MaxCompute客户端 使用SQL分析连接 使用DataWorks连接 MaxCompute Studio 基于角色为用户授权 为单个角色，授予允许下载指定表数据或实例的权限，然后将角色绑定至多个用户，用户即可具备角色的权限。前提条件 使用Download权限控制方案前...
SET操作
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio show flags 显示set命令设置的属性。set 对当前Session设置MaxCompute系统变量。MaxCompute也...
使用说明
运行作业 MaxCompute客户端提供一个JAR命令用于运行MaxCompute Graph作业，其使用方式与 MapReduce 中的 JAR命令 相同。使用语法如下。Usage:jar[][ARGS]-conf<configuration_file>Specify an application configuration file-classpath...
函数操作
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用DataWorks连接 MaxCompute Studio 注销函数 在MaxCompute项目中注销已注册的自定义函数。具备注销函数权限（Delete）的用户。查看函数 查看MaxCompute项目中...
备份与恢复
通过MaxCompute客户端执行此命令打印项目级别的参数信息，MaxCompute客户端使用请参见 使用本地客户端（odpscmd）连接。您可以查看 odps.timemachine.retention.days 参数的取值。例如 odps.timemachine.retention.days=1，代表当前项目...
Download权限控制
MaxCompute客户端 使用SQL分析连接 MaxCompute Studio 使用DataWorks连接 基于角色为用户授权 为单个角色，授予允许下载指定表数据或实例的权限，然后将角色绑定至多个用户，用户即可具备角色的权限。前提条件 使用Download权限控制方案前...
REVOKE
执行环境 本文中的命令支持在如下工具平台执行：MaxCompute客户端 成功连接MaxCompute项目，然后执行授权命令。使用SQL分析连接 使用 use<MaxCompute_Name>;命令进入目标MaxCompute项目，然后执行授权命令。示例 假设Bob@aliyun.com是test_...
MaxCompute UDF（Java）常见问题
原因三的解决措施：在报错的项目下通过 MaxCompute客户端 执行 list functions;命令，确保MaxCompute UDF是真实存在的，且MaxCompute UDF的类和依赖的资源正确。原因四的解决措施：通过 MaxCompute客户端 执行 desc function;命令，确保 ...
基于Package跨项目访问资源
MaxCompute客户端 使用SQL分析连接 MaxCompute Studio 使用DataWorks连接 将资源添加至Package 删除Package中的资源 许可其他项目使用Package 撤销其他项目使用Package的许可 删除Package 查看Package列表 查看Package的详细信息 Package...
DROP PACKAGE
您可以通过 MaxCompute客户端 执行 show packages;命令获取已创建的Package信息。使用示例 删除test_project_a中已创建的Package datashare。命令示例如下。删除Package。drop package datashare;相关命令 CREATE PACKAGE：创建Package。...
Java UDTF读取MaxCompute资源示例
在MaxCompute Studio的左侧导航栏，单击 Project Explorer，在目标MaxCompute项目上单击右键，启动MaxCompute客户端，并执行SQL命令调用新创建的UDTF。SQL代码示例如下。select my_udtf("10","20")as(a,b,fileResourceLineCount)from tnp1;...
UNINSTALL PACKAGE
您可以通过 MaxCompute客户端 执行 show packages;命令获取已创建的Package信息。使用示例 卸载test_project_b项目中已安装的Package datashare。命令示例如下。卸载Package。uninstall package test_project_a.datashare;相关命令 CREATE ...
用户规划与管理
您可以通过 MaxCompute客户端 执行 list users;命令获取账号信息。使用示例 示例一：删除test_project_a项目中已添加的阿里云账号 odps_test_user@aliyun.com ，假设阿里云账号未被授予任何角色，命令示例如下。remove user ALIYUN$odps_...
功能特性
DataWorks数据下载 数据迁移 相关工具 支持通过MaxCompute客户端（Tunnel）、DataWorks数据集成（Tunnel）、DTS（Tunnel）、Sqoop（Tunnel）、Kettle（Tunnel）、Flume（DataHub）、Fluentd（DataHub）、LogStash（DataHub）、OGG（DataHub...
DISALLOW PROJECT
您可以通过 MaxCompute客户端 执行 show packages;命令获取已创建的Package信息。使用示例 撤销test_project_b项目可以安装test_project_a中的Package datashare的权限。命令示例如下。撤销Package授权许可。disallow project test_project...
概述
客户端：SQL语言操作平台，您可以自行选择DataWorks（推荐）、MaxCompute SDK（Java SDK 或 Python SDK）、MaxCompute客户端（odpscmd）或 MaxCompute Studio。人工智能平台 PAI：提供机器学习模型。MaxCompute SQLML可以帮助数据开发...
ALLOW PROJECT
您可以通过 MaxCompute客户端 执行 show packages;命令获取已创建的Package信息。number 否 用于增加一个Label权限控制策略，指定允许资源使用方访问的敏感数据等级。被授权的MaxCompute项目可以访问Package，但仅能访问敏感等级小于等于 ...
Policy权限控制
MaxCompute客户端 使用SQL分析连接 MaxCompute Studio 使用DataWorks连接 为被赋予内置角色的用户通过自定义角色进行精细化授权 当用户已经被赋予内置角色时，如果需要对用户的操作权限进行更精细化的管理，无法通过ACL权限控制方案解决...
INSTALL PACKAGE
您可以通过 MaxCompute客户端 执行 show packages;命令获取已创建的Package信息。使用示例 在test_project_b项目中安装test_project_a项目的Package datashare，假设Amy@aliyun.com为test_project_b的项目所有者。命令示例如下。Amy进入...
对于外部项目的用户以及权限操作
set odps.sql.hive.compatible=true;添加用户。add user<阿里云账号>;阿里云账号 格式为 ALIYUN$，您可以通过 MaxCompute客户端（odpscmd）执行 list users;命令查看用户信息。赋予show tables权限。grant List on project external_...
项目级别Information Schema
安装方式有如下两种：登录 MaxCompute客户端，执行如下命令：install package Information_Schema.systables;登录 DataWorks控制台，进入 临时查询 界面。更多临时查询操作详情，请参见 使用临时查询运行SQL语句（可选）。执行如下命令：...
CREATE PACKAGE
您可以通过 MaxCompute客户端 执行 show packages;命令获取已创建的Package信息。使用示例 假设Bob@aliyun.com是test_project_a的项目所有者，现需要允许其他项目访问test_project_a中的部分资源。创建Package，命令示例如下。Bob进入项目...
REMOVE USER
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 MaxCompute Studio 使用SQL分析连接 命令格式 remove user;参数说明 user_name：必填。待删除阿里云用户或RAM用户账号信息。阿里云账号格式为 ALIYUN$@aliyun.com;RAM用户账号格式...
快速入门
本文以开发WordCount MapReduce作业为例，为您介绍如何通过MaxCompute Studio编写MapReduce程序及生成JAR包，并在MaxCompute客户端上运行MapReduce作业。前提条件 请确认您已满足如下条件：已安装并配置MaxCompute客户端。更多安装并配置...
角色规划
MaxCompute客户端 使用SQL分析连接 MaxCompute Studio 使用DataWorks连接 查看角色列表（项目级别）查看项目中已创建的角色列表。删除角色（项目级别）删除项目中已存在的角色。租户级别（Tenant）创建角色（租户级别）管理角色（租户级别...
Spark Connector
使用如下命令在Spark的 bin 目录下启动Spark SQL客户端：cd$SPARK_HOME/bin spark-sql 使用Spark SQL客户端执行命令示例如下：查询MaxCompute项目中存在的表：SHOW tables in odps.doc_test;doc_test 为示例MaxCompute项目名称，实际运行时...
Tunnel SDK常见问题
解决措施 如果您使用MaxCompute客户端工具里的Tunnel命令行进行导出，客户端支持分区表整个导出，其结果会导出到一个文件夹里。如果您使用Tunnel SDK进行导出，可以先使用SDK获取分区表的所有分区，命令示例如下。odps.tables().get...
开发ODPS SQL任务
DataWorks为您提供ODPS SQL节点，可用于周期性调度MaxCompute的SQL任务，并完成与其他类型节点的集成和联合调度。MaxCompute SQL任务采用类似SQL的语法，适用于海量数据（TB级）但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...
Instance Logview示例
本文为您介绍如何使用MaxCompute Java SDK生成Instance Logview链接。Instance Logview可以帮助您快速定位问题。背景信息 您可以通过Logview查看和Debug提交的MaxCompute...说明 您也可以在MaxCompute客户端中使用 wait命令获得Logview链接。
UDF示例：引用文件资源
本文以在MaxCompute客户端操作为例，为您介绍如何通过Python UDF引用文件资源。前提条件 请确认您已完成如下操作：已安装并配置MaxCompute客户端。更多安装并配置MaxCompute客户端信息，请参见 安装并配置MaxCompute客户端。已将待引用的...
Java UDTF
在MaxCompute Studio的左侧导航栏，单击 Project Explorer，在目标MaxCompute项目上单击右键，启动MaxCompute客户端，并执行SQL命令调用新创建的UDTF。假设待查询目标表my_table的数据结构如下。col0|col1|+-+-+|A B|1|C D|2|+-+-+执行如下...
Java UDAF
在MaxCompute Studio的左侧导航栏，单击 Project Explorer，在目标MaxCompute项目上单击右键，启动MaxCompute客户端，并执行SQL命令调用新创建的UDAF。假设待查询目标表my_table的数据结构如下。col0|col1|+-+-+|1.2|2.0 ...
UDF示例：引用表资源
本文以在MaxCompute客户端操作为例，为您介绍如何通过Python UDF引用表资源。前提条件 请确认您已完成如下操作：已安装并配置MaxCompute客户端。更多安装并配置MaxCompute客户端信息，请参见 安装并配置MaxCompute客户端。已将待引用的表...
DESCRIBE PACKAGE
您可以通过 MaxCompute客户端 执行 show packages;命令获取已创建的Package信息。使用示例 查看test_project_a项目中Package datashare包含的资源及权限信息。命令示例如下。查看Package详情。describe package test_project_a.datashare;...
创建并使用MaxCompute表
说明 超过1W条的数据，可通过MaxCompute客户端导出，使用 Tunnel命令 命令导出。查询MaxCompute表数据 您可使用 ODPS SQL节点 或 临时查询 功能，通过 SQL语句 查询MaxCompute表的数据。权限预设情况说明 简单模式 工作空间无法做到细粒度...
- 产品推荐
- 这些文档可能帮助您