管理作业版本

背景信息 本文从以下方面为您介绍如何管理作业版本:对比作业版本 回滚作业版本 锁定作业版本 删除作业版本 对比作业版本 仅支持SQL代码和作业配置内容的对比,有差异的内容就会被标记出来。登录 实时计算控制台。在 Flink全托管 页签,...

管理作业模板

在左侧导航栏,选择 作业 与性能 管理>作业。在 作业 页面,选择待创建作业模板的集群。单击页面左侧的 提交作业 页签。在 提交作业 区域,完成作业参数配置,单击 图标将当前作业参数配置保存为模板。作业模板名不能和已创建的作业模板名...

使用kubectl管理作业

执行以下命令,管理作业。您可以执行以下命令,查看作业状态。kubectl describe SparkApplication<作业名>-namespace<集群对应的namespace>返回信息如下所示。Name:spark-pi-simple Namespace:c-48e779e0d9ad*Labels:<none>Annotations:...

管理作业

在项目中,您可以通过创建作业来进行任务开发。本文为您介绍如何创建作业、设置和删除作业。前提条件 已创建项目,详情请参见 新建项目。创建作业 进入 项目空间 页面。使用阿里云账号登录 Databricks数据洞察控制台。在Databricks数据洞察...

通过控制台管理作业

单击 作业管理 页签。单击 创建作业。在 创建作业 对话框,自定义 作业名称 并选择作业类型。根据作业内容模板,配置以下作业参数,其他参数默认配置。参数 说明 token 提交Spark作业时用于进行计算资源鉴权的token。您可以通过 云原生多模...

通过DMS管理作业

本文介绍通过DMS管理Lindorm Spark作业的方法。前提条件 已开通数据管理DMS服务。已开通计算引擎。如何开通,请参见 开通与变配。已完成作业开发。如何开发,请参见 JAR作业开发实践 或 Python作业开发实践。已将作业上传至HDFS或OSS。如何...

通过DataWorks管理作业

Lindorm计算引擎兼容CDH(Cloudera's Distribution Including Apache Hadoop),支持通过大数据开发治理平台DataWorks开发、管理、调度、运维分布式计算作业作业类型包括交互式SQL查询、SQL作业、JAR作业、Python作业等。本文介绍如何...

MaxCompute作业运维管理

本文为您介绍如何通过MaxCompute管家运维管理作业。功能入口 重要 MaxCompute管家将于北京时间 2024年1月10日 陆续下线,请您使用新版作业运维,新版作业运维提供更丰富的过滤参数、作业参数和提供作业统计图、作业分析等功能,更好地帮助...

作业状态集管理

本文为您介绍如何管理作业的状态集,包括创建、查看、删除和从指定状态恢复。背景信息 概念 详情 系统检查点(对应Apache Flink中的Checkpoint)生命周期完全由Flink系统管理,您可以配置 系统检查点间隔、系统检查点超时时间 和 两次系统...

作业优先级管理与成本优化

本文为您介绍MaxCompute作业优先级管理与成本优化。作业优先级 MaxCompute的包年包月计算资源有限,在实际数据开发过程中,系统需要优先保障重要作业的计算资源。您可以通过MaxCompute设置使用包年包月计算资源Project的作业优先级,优先...

登录E-HPC客户端

E-HPC客户端支持作业提交和查询、文件管理等功能,可以方便您日常管理作业。本文介绍如何登录E-HPC客户端。前提条件 集群和集群节点的状态均为 运行中。已创建集群用户。具体操作,请参见 创建用户。使用限制 客户端仅支持连接使用PBS调度...

操作指南

形态 文档 EMR on ECS 创建集群 克隆集群 新增服务 管理配置项 登录集群 管理事件中心 E-MapReduce Doctor 组件操作 EMR on ACK 资源管理 服务管理 作业管理 组件操作 EMR Serverless StarRocks 创建实例 连接实例 实例监控 StarRocks ...

JAR作业开发实践

本文介绍Lindorm计算引擎JAR作业开发的详细步骤。...步骤五:作业提交 Lindorm计算引擎支持以下两种方式提交并管理作业。通过Lindorm控制台提交作业,操作方法请参见 通过控制台管理作业。通过DMS提交作业,操作方法请参见 通过DMS管理作业

准备工作

使用控制台:适合初、中级用户,使用网页可视化界面管理作业和集群,使用控制台需要对批量计算的程序包部署逻辑以及 JSON 格式有一定的了解,参考 控制台快速开始示例。使用SDK:适合高级用户,需要编程基础。官方提供Java 版和 python 版...

通过控制台提交作业

在左侧导航栏,选择 作业性能与性能管理>作业。在 作业 页面,选择待提交作业的集群。单击 提交作业 页签。在 提交作业 区域,完成作业参数配置。配置项 描述 作业提交模板 您也可以选择已配置的作业模板快速提交作业。更多信息,请参见 ...

管理运维中心

单击 编辑,可编辑所选作业,详情请参见 管理作业。单击 启动 或 停止,可启动或是停止所选的作业。查看审计日志 使用阿里云账号登录 Databricks数据洞察控制台。在Databricks数据洞察控制台页面,选择所在的地域(Region)。创建的集群将...

产品架构

您可以使用这些工具向 BatchCompute 提交作业,查询作业运行状态,并管理作业生命周期(比如停止已提交的作业,释放已完成的作业等)。运行环境 BatchCompute 允许用户通过自定义虚拟机镜像或者 Docker 的方式对运行环境进行高度定制,可以...

2023-10-23版本

权限管理 作业操作授权 按登录方式授权 MaxCompute连接器支持复杂数据结构和独享 Tunnel MaxCompute连接器支持MaxCompute中JSON、ARRAY、MAP和STRUCT的读写,同时支持指定独享Tunnel进行服务连接。大数据计算服务MaxCompute Redis连接器...

后续指引

介绍:项目空间的安全配置 项目空间的数据保护 动态脱敏 备份与恢复 数据加密 常见问题:安全配置常见问题 运维管理 资源、作业管理 MaxCompute提供元数据及MaxCompute管家工具,方便您精细化管理作业和资源。介绍:Information Schema ...

客户端功能概述

E-HPC客户端支持作业提交、作业查询、文件管理等功能,可以帮助您方便管理作业,提升操作体验。本文介绍E-HPC客户端的功能、方案和使用限制等。功能说明 根据工作职责和使用需求的不同,E-HPC的用户可以分为集群管理员和作业操作员。集群...

什么是弹性高性能计算E-HPC

作业管理 作业提交 性能分析 通过E-HPC优化器功能,您可以监控作业运行时的集群性能数据,包括实时数据和历史数据,同时您还可以选择所需进程进行性能剖析。E-HPC优化器 可视化处理 通过E-HPC的远程可视化功能,您在控制台上即可直观地处理...

2021-08-04版本

详情请参见 管理作业版本。支持Hologres元数据,可以通过注册Hologres Catalog直接访问下游Hologres表。详情请参见 管理Hologres Catalog。引擎版本命名格式变更为 vvr-版本号>-flink-版本号>。支持提交多个不同引擎版本的SQL作业。目前仅...

作业配置说明

本文介绍Lindorm计算引擎的常用Spark配置项和配置方法。Spark配置项 Lindorm计算引擎...具体操作,请参见 通过控制台管理作业。通过DMS提交Python作业时,可以在作业配置区域配置运行作业的自定义参数。具体操作,请参见 通过DMS管理作业

作业投递

(可选)管理作业投递规则,包括以下操作:修改作业投递规则:在 配置作业投递规则 面板中修改已配置的参数。删除作业投递规则:在 配置作业投递规则 面板中删除查询内存使用峰值的 阈值 和查询执行时间的 阈值,并将查询是否因为内存不足...

基本概念

开通实时计算Flink版 管理项目空间 资源调整 项目空间(Namespace)项目空间是Flink全托管管理作业的基本单元,您的所有配置、作业、权限均在单个项目空间下进行。您可以创建多个项目空间,为每个项目空间分配单独的资源和权限,实现多租户...

SQL作业开发

版本信息 您可以在此处查看作业版本信息,操作 列下的功能详情请参见 管理作业版本。单击 保存。单击 深度检查。深度检查能够检查作业的SQL语义、网络连通性以及作业使用的表的元数据信息。同时,您可以单击结果区域的 SQL优化,展开查看...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据管理 密钥管理服务 商标服务 轻量应用服务器 云安全中心 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用