DataWorks如何将shell任务运行在自定义资源组上

在进行数据开发中,有很多时候需要使用shell 来调用其他语言。但是在DataWorks上,底层的机器运行任务时都会有沙箱限制,沙箱会限制网络访问和禁止本地IO读写等等,会带来诸多不便。那么我们如何将这部分任务运行在非沙箱环境(自己的机器上)呢。 我们可以将任务的运行环境预先在某台机器上准备好,然后...

【odps】求助,我想在Base上运行Java程序,该怎么办?

我用Java调用odps的接口运行sql语句,但是不知道该怎么做,有没有大神可以指教一下?多谢啦。

一站式大数据开发治理平台DataWorks初级课程

11 课时 |
399 人已学 |
免费

DataWorks 使用教程

9 课时 |
1112 人已学 |
免费

DataWorks一站式大数据开发治理平台精品课程

35 课时 |
7394 人已学 |
免费
开发者课程背景图

DataWorks 为什么提交了任务以后,任务没有运行呢?

在DataWorks 中设置了一个任务12点开始运行,为什么12点以后这个任务还没有开始运行呢?任务是什么时候开始运行的啊。

DataWorks的周期实例任务未运行如何排查?

经常有同学问我:“我的任务为什么还没开始跑”、“任务没有运行该怎么办”等等,有没有同学知道这种任务未运行的情况如何处理呢。

解析Dataworks中的运行和测试运行的区别

有很多用户在使用Dataworks的数据开发中运行SQL和在数据集成中运行同步任务时,都会有一个疑惑。我在页面上运行和测试运行有什么区别呢?为什么我明明配置了系统参数,在代码中运行时,却没有自动解析,而提醒我去填写系统变量的临时值? 下面我就给大家讲讲这两者的主要区别。 页面上的运行 页面上的运行是...

MaxCompute现在是出问题了吗,为什么我select一直是Job Queueing;还是我们公司的odps 运行量太大导致的

MaxCompute现在是出问题了吗,为什么我select一直是Job Queueing;还是我们公司的odps 运行量太大导致的

ODPS周期运行时会报如下ApproachPlanFailed Error

FAILED: ODPS-0010000:System internal error - fuxi job failed, ApproachPlanFailed2017-07-28 11:42:17 INFO =============================================...

在MaxCompute(原 ODPS)里运行sql命令,怎么能下载超过一万行的数据?

在MaxCompute(原 ODPS)里运行sql命令,怎么能下载超过一万行的数据?

原来在ODPS页面,有个“运行任务”一类的栏目,可以看到运行完毕和正在运行的任务,也可以手动点击结束任务, 请问这个功能选择在哪里能看到?

原来在ODPS页面,有个“运行任务”一类的栏目,可以看到运行完毕和正在运行的任务,也可以手动点击结束任务,请问这个功能选择在哪里能看到?

odps的UDTF运行之前测试通过的单元测试代码报错, java.lang.RuntimeException: com.aliyun.odps.OdpsException: 403,这块以前都是测试通过的,相关的配置也没有改动过

odps的UDTF运行之前测试通过的单元测试代码报错, java.lang.RuntimeException: com.aliyun.odps.OdpsException: 403,这块以前都是测试通过的,相关的配置也没有改动过

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

DataWorks
DataWorks
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。
2700+人已加入
加入
相关电子书
更多
大模型驱动DataWorks数据开发治理平台智能化升级
重磅发布—DataWorks全链路数据治理系列新品
一站式大数据开发治理DataWorks使用宝典
立即下载 立即下载 立即下载
相关实验场景
更多

大数据开发治理平台 DataWorks更多运行相关