如何为离线计算模板开启共享运行资源开关,请参见 步骤三:配置离线计算模板。使用限制 仅支持元仓租户的超级管理员和系统管理员开启或关闭全局共享资源开关。注意事项 开启共享资源开关前,请您合理评估数据安全性并确保共享运行资源的...
支持在开发场景中新建计算节点,配置计算节点的各类参数及离线计算节点的调度信息。支持在开发场景中新建系统节点,并配置系统节点的配置信息。支持通过可视化方式配置上下游计算节点的依赖关系,并配置输入、输出参数的对应关系。支持根据...
支持在开发场景中新建计算节点,配置计算节点的各类参数及离线计算节点的调度信息。支持在开发场景中新建系统节点,并配置系统节点的配置信息。支持通过可视化方式配置上下游计算节点的依赖关系,并配置输入、输出参数的对应关系。支持根据...
支持在开发环境场景中新建计算节点,配置计算节点的各类参数及离线计算节点的调度信息。支持在开发环境场景中新建系统节点,并配置系统节点的配置信息。支持通过可视化方式配置上下游计算节点的依赖关系,并配置输入、输出参数的对应关系。...
本文为您介绍在离线计算引擎MaxCompute下如何创建MAX_COMPUTE_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理,生成符合业务场景需求的数据场景。操作步骤 在Dataphin首页,单击顶部菜单栏中的 研发。默认进入 开发 页面...
本文为您介绍在离线计算引擎MaxCompute下如何创建MAX_COMPUTE_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理,生成符合业务场景需求的数据场景。操作步骤 在Dataphin首页,单击顶部菜单栏中的 研发。默认进入 开发 页面...
本文为您介绍在绑定了Hologres离线计算引擎的项目下如何创建HOLOGRES_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理,生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页,单击顶部菜单栏的 研发。在数据 开发 ...
本文为您介绍如何基于Dataphin构建HADOOP_MR类型的离线计算任务。操作步骤 在Dataphin首页,单击顶部菜单栏中的 研发。默认进入 开发 页面。按照下图操作指引,进入 新建HADOOP_MR任务 页面。编写并运行代码。在 新建HADOOP_MR任务 对话框...
本文为您介绍如何基于Dataphin构建MapReduce类型的离线计算任务。前提条件 完成JAR资源包的上传,详情请参见 上传资源及引用。背景信息 MapReduce任务中引用到的JAR资源包需提前创建,因此需要您在资源管理中上传JAR资源包,然后在...
本文为您介绍在绑定了Hologres离线计算引擎的项目下如何创建HOLOGRES_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理,生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页,单击顶部菜单栏的 研发。在数据 开发 ...
本文为您介绍基于STARROCKS离线计算引擎如何新建STARROCKS_SQL任务。操作步骤 在Dataphin首页,单击顶部菜单栏中的 研发。默认进入开发页面。按照下图操作指引,进入 新建STARROCKS_SQL任务 页面。编写并运行代码。在 新建STARROCKS_SQL...
本文为您介绍如何基于Dataphin构建Shell类型的离线计算任务。操作步骤 在Dataphin首页,单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引,进入 新建SHELL任务 对话框。编写并运行代码。在 新建SHELL任务 对话框,配置参数...
本文为您介绍如何基于Dataphin构建Shell类型的离线计算任务。操作步骤 在Dataphin首页,单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引,进入 新建SHELL任务 对话框。编写并运行代码。在 新建SHELL任务 对话框,配置参数...
本文为您介绍如何基于Dataphin新建IMPALA_SQL类型的离线计算任务。前提条件 创建IMPALA_SQL任务需在Hadoop计算源中开启Impala任务。具体操作,请参见 创建Hadoop计算源。操作步骤 在Dataphin首页,单击顶部菜单栏中的 研发。默认进入 开发 ...
本文为您介绍基于ArgoDB离线计算引擎如何新建ARGODB_SQL任务。操作步骤 在Dataphin首页,单击顶部菜单栏中的 研发。默认进入 开发 页面。按照下图操作指引,进入 新建ARGODB_SQL任务 页面。编写并运行代码。在 新建ARGODB_SQL任务 对话框,...
本文为您介绍如何基于Dataphin构建MapReduce类型的离线计算任务。前提条件 完成JAR资源包的上传,详情请参见 上传资源及引用。背景信息 MapReduce任务中引用到的JAR资源包需提前创建,因此需要您在资源管理中上传JAR资源包,然后在...
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略,杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
本文为您介绍如何基于Dataphin构建HIVE_SQL类型的离线计算任务。背景信息 HIVE_SQL计算任务适用于对已有数据进行加工处理,生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页,单击顶部菜单栏中的 研发。默认进入 开发 页面。...
本文为您介绍如何基于Dataphin构建Spark SQL任务类型的离线计算任务。前提条件 项目的Hadoop计算源的Spark SQL服务配置已开启Spark SQL任务。更多信息,请参见 创建Hadoop计算源。操作步骤 在Dataphin首页,单击顶部菜单栏中的 研发。默认...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
不同计算引擎配置离线模式运行参数的操作路径相同,下图以配置Ververica Flink计算引擎的离线任务运行参数为例。说明 若您项目中所有计算任务均需配置同一的任务参数,您可在新建项目时进行全局的统一配置。详情请参见 创建通用项目。BLINK...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存代码...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
不同计算引擎配置离线模式运行参数的操作路径相同,下图以配置Ververica Flink计算引擎的离线任务运行参数为例。说明 Fusioninsight引擎不支持自定义参数,仅支持系统默认自带的参数。若您项目中所有计算任务均需配置同一的任务参数,您可...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。在代码编写页面,保存并提交SQL任务。单击页面上的 图标,保存...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。单击 确定。在工作流面板页面,保存并提交PAI_DESIGNER任务。...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见 计算任务运行配置。单击 确定。在工作流面板页面,保存并提交PAI_DESIGNER任务。...
运行配置 您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略。未配置则默认继承租户级设置的默认值。配置说明,请参见:计算任务运行配置。在代码编写页面,保存并提交 PYTHON 任务。单击页面上的 图标,...
背景信息 当多个任务的代码逻辑相似,只有部分配置项或输入参数不同时,您可以将代码写入到离线计算模板中,并将不同的配置项和输入参数定义为模板变量参数。后续任务引用了该离线计算模板后,可以给离线计算模板中的模板变量参数赋值,以...
背景信息 当多个任务的代码逻辑相似,只有部分配置项或输入参数不同时,您可以将代码写入到离线计算模板中,并将不同的配置项和输入参数定义为模板变量参数。后续任务引用了该离线计算模板后,可以给离线计算模板中的模板变量参数赋值,以...
更多信息,请参见:离线计算任务属性配置,请参见 离线任务属性配置概述。实时计算任务属性配置,请参见:实时模式配置概述。离线模式配置概述。相关:离线计算任务支持查看计算任务的相关对象,即 当前 计算 任务引用读取的表、引用读取...
更多信息,请参见:离线计算任务属性配置,请参见 离线任务属性配置概述。实时计算任务属性配置,请参见:实时模式配置概述。离线模式配置概述。相关:离线计算任务支持查看计算任务的相关对象,即 当前 计算 任务引用读取的表、引用读取...
修改离线计算引擎设置,系统将同步修改计算源配置。为了保证修改效率,系统在修改过程中不会对计算源的连通性进行校验,请谨慎确认配置的正确性,配置错误可能导致任务失败。修改完成后,建议对计算源进行手动连通性测试。修改计算设置后,...