Spark作业原生运维监控

本文主要介绍基于原生Spark UI和YARN UI提供的运维监控能力。背景信息 Databricks数据洞察提供了原生的监控运维UI,例如Spark UI和YARN UI,用户可根据自己的需求进行查询。本文主要介绍原生UI透露出来的日志监控和指标查询,配合平台侧...

参数概述

系统运维管理 支持对参数的存储和管理。简介 系统运维管理 支持参数存储服务,为参数配置和参数安全保驾护航。您可以将敏感数据或频繁出现的数据作为参数值存储起来,存储方式支持纯文本数据或加密数据。通过使用创建参数时指定的唯一名称...

账户访问控制

以下列举了访问控制RAM的典型场景:系统运维管理 管理员:您可以创建一个 系统运维管理 管理员,给该管理员组授予 系统运维管理 的完全权限,包括创建编辑模板和执行。模板开发者:该用户组需要编辑模板的权限。您可以给开发者组授予一个...

概览

您只需要开通日志服务,将本地日志通过日志服务进行收集,即可解决企业的监控运维与运营诉求。此外,还可完美结合云监控的其他功能,形成完整的监控闭环。解决方案 通过将云监控与日志服务结合,推出了非常轻量级,但全面、易用的解决方案...

概览

您只需要开通日志服务,将本地日志通过日志服务进行收集,即可解决企业的监控运维与运营诉求。此外,还可完美结合云监控的其他功能,形成完整的监控闭环。解决方案 通过将云监控与日志服务结合,推出了非常轻量级,但全面、易用的解决方案...

查看执行详情

在使用 系统运维管理 OOS(CloudOps Orchestration Service)(OOS)过程中,您随时可通过查看执行详情了解执行的相关信息。登录 系统运维管理 OOS(CloudOps Orchestration Service)管理控制台。在执行列表中选择目标执行,单击 详情。在...

自动定时升级临时带宽

通过OOS自动进行带宽临时升级。...系统运维管理 OOS(CloudOps Orchestration Service)时间触发器功能的出现很好的解决了这个问题,让您可以既省时又省钱。解决方案 通过OOS常用运维任务中的 带宽临时升级 则可轻松搞定。

全自动执行

使用 系统运维管理 OOS(CloudOps Orchestration Service)(OOS)可对平台提供的公共模板或您自定义的模板进行执行创建,如果您对模板中所有任务的风险已充分了解,则可选择 客户了解风险,无需确认 的风险确认模式来启动全自动执行,下面...

在批量执行命令中使用加密参数

通过 什么是系统运维管理 的参数仓库,可以更为方便的对参数进行集中管理。利用参数仓库的 加密参数,可以更安全的管理命令中的敏感信息。本文介绍如何在OOS批量执行命令时使用加密参数。前提条件 已开通密钥管理服务(KMS),请参见 什么...

计费说明

本文为您介绍系统运维管理OOS(Operation Orchestration Service)的计费说明。您可以免费使用OOS,但需要为您创建的执行内所涉及的云资源进行付费。阿里云资源计费方式,遵循各产品的计费规则。

API概览

本产品(系统运维管理/2019-06-01)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求,可...

普通参数

本示例介绍如何在 系统运维管理 OOS(CloudOps Orchestration Service)的参数仓库中创建、搜索、更新普通参数。创建普通参数 登录 系统运维管理 OOS(CloudOps Orchestration Service)控制台。选择 参数仓库,单击 普通参数,单击 创建...

通过替换系统盘批量升级ECS的操作系统

本文介绍如何通过OOS(系统运维管理)批量升级ECS实例的操作系统。注意事项 在模版执行过程中实例会重启 Windows和Linux之间不能互相转换 系统盘挂载的ECS实例不能有未支付的订单 只能保留数据盘中的用户数据,系统盘内的用户数据将无法...

定时开关机

操作步骤 登录 系统运维管理 控制台。单击 常用运维任务 中的 定时开关机,点击 创建。选择任务类型,填写 任务名称,选择 执行周期、任务类型、时区、开机时间、关机时间、任务结束时间。选择资源类型、停机模式和实例是否休眠。相比停止...

入门概述

本快速入门指引您快速创建一个 系统运维管理 模板,并执行模板。本快速入门包含以下操作:新建模板 以一个简单的示例模板为例,介绍如何新建模板,详情请参见 新建模板。创建执行 选择新建的模板创建执行任务并启动执行,详情请参见 创建...

查看执行日志

您可以通过日志来了解...查询日志方式 控制台查询 登录 系统运维管理 管理控制台。在 任务 执行管理 页中,找到目标执行ID并单击 详情。单击 日志。重要 显示当前执行的所有日志,您可以通过点击左边的执行任务节点查看每个任务对应的日志。

批量在托管实例中执行命令

操作步骤 登录 系统运维管理 OOS(CloudOps Orchestration Service)管理控制台。单击 常用运维任务 中的 批量操作实例,单击 创建。选择 任务类型 为 发送远程命令。本示例选择 发送远程命令 中的 Linux Shell,输入命令为df-h。选择 资源...

为OOS服务设置RAM权限

系统运维管理 OOS(CloudOps Orchestration Service)内部基于STS(Security Token Service)临时凭证访问其他云产品的API,您需要授权OOS账号以RamRole的身份访问您资源。如果在模板中未配置RamRole,则OOS默认扮演OOSServiceRole角色。...

用参数仓库的加密参数批量修改实例密码

背景 参数仓库 是 系统运维管理 提供的一个可以在云端保存数据的功能,如有依赖使用云端数据的需求,使用参数仓库可以随时调用保存的数据、方便更新与维护。而且在参数仓库功能内部还提供了一种加密参数选项,如当您想批量修改ECS实例的...

批量下载文件到实例

首先登录到 系统运维管理 控制台,单击 常用运维任务,单击 批量操作实例,单击 创建。2.单击 批量下载文件,参数输入完成后单击 创建。3.执行完成后,单击 详情 查看执行结果。场景二:从OSS(对象存储)下载文件到实例 前提条件:所选...

在多台ECS实例内批量执行命令

了解更多 系统运维管理 OOS(CloudOps Orchestration Service)OOS是阿里云的运维自动化平台,适用于批量、定时、事件驱动、跨区域运维等场景,除了在ECS内执行命令外,还可以完成ECS创建释放,启停,变配,网络带宽升级,挂载云盘等等各种...

自动定时重启ECS云服务器

在这种情况下,我们可以使用阿里云的系统运维管理(OOS)服务来创建定时任务,自动重启 ECS 实例。在进行设置时,我们需要注意合理设置重启的时间,评估重启对业务的影响,尽可能避免在业务高峰期进行,以免影响业务的正常运行。操作步骤 ...

监控宝集成

步骤1:找到监控监控源 进入 运维事件中心>集成中心>集成配置 菜单找到监控监控源,进入监控宝的新增集成页面查看集成步骤完成集成接入。步骤2:新建通知 进入“个人设置->通知设置->URL回调”“回调URL”输入:...

配置清单概述

本文介绍如何使用阿里云系统运维管理(OOS)的配置清单功能来收集和管理阿里云计算环境中ECS实例的元数据。这包括一系列数据类型,如应用程序信息、网络配置、服务、文件系统数据、Windows特定数据和实例细节等。指导如何在OOS控制台中设置...

实时监控

命令审批 参照以下步骤进行命令审批:管理员登录系统后,进入 运维>实时监控 页。所有会话 显示了正在运维的会话,需要命令审批 显示了需要进行命令审批的会话。前往 需要命令审批 页,单击会话条目右侧的 播放,进入运维窗口监控页面,...

使用OOS流程配置编辑器编写模板

流程配置编辑器通过配置模板元素以及拖拽的方式构建整个流程,将 系统运维管理 OOS(CloudOps Orchestration Service)流程更直观、简洁的呈现出来。避免以往编写模板时复杂的语法规则和易错的文本格式,以提高您的模板编写体验。操作步骤 ...

持续报警

通常情况下,您需要尽快排除问题,让监控项恢复正常或需要结合实际情况调整报警规则,避免因大量报警信息或报警疲劳干扰,而影响正常的监控运维工作。持续报警的治理建议如下:分析报警条件中设置的阈值是否合理,将其修改为合适的值。具体...

系统事件

模板执行状态通知 系统运维管理 系统在模板执行状态发生变化时发出通知:当前仅支持在执行状态变为Failed时发出事件通知 云产品动作创建的子执行不发出事件通知 通知格式 {"ver":"1.0","id":"2256A988-0B26-4E2B-820A-8A0580D0B8E5",...

带宽临时升级

选择 执行周期 和 带宽升级开始时间,填写 带宽升级持续时间、任务结束时间 和 公网最大出带宽(单位:Mbps,取值范围:0~100,系统运维管理 不对带宽值入参进行校验。如果您设置的带宽值超过ECS的限制,带宽临时升级可能会失败,您可以在...

安装

然后执行命令如下:python setup.py install 验证 首先命令行输入python并回车,在Python环境下检查SDK的版本:>>>import aliyunsdkoos>>>aliyunsdkoos._version_'1.0.0' 上面的输出表明您已经成功安装了系统运维管理的Python SDK 1.0.0。...

基本概念

特权账号 特权账号通常指在企业云端资源使用过程中,由于云端系统运维、应用/数据开发、资源管理等原因创建的具有系统超级管理、敏感数据增删改查、用户权限调整等进阶权限的账号。通常该类账号的滥用、误用会对企业核心业务的正常运转造成...

使用OOS流程配置编辑器编写模板(旧版)

流程配置编辑器通过配置模板元素以及拖拽的方式构建整个流程,将 系统运维管理 OOS(CloudOps Orchestration Service)流程更直观、简洁的呈现出来。同时流程编辑器可以通过配置模板元素的方式,避免以往编写模板时复杂的语法规则和易错的...

执行记录投递

本文为您介绍如何通过 系统运维管理 OOS(CloudOps Orchestration Service)控制台进行执行记录投递。执行记录投递功能可以将您在 系统运维管理 中创建的执行记录投递到对象存储OSS或日志服务SLS进行持久化存储,以便对执行记录进行查询、...

创建执行

操作步骤 登录 系统运维管理 管理控制台。在 任务执行管理 页面点击 创建。在 创建执行 页面,设置 基本信息,设置为完成后单击 下一步:设置参数。本示例中,选择 执行模式 为 自动执行。参数解释如下:参数 描述 执行模式 自动执行:确认...

基于镜像的日常发布

使用 系统运维管理。解决方案 机器分组 首先建议对机器进行分组,可以给机器打上相应的tag,比如我们可以给我们的ECS按环境来分组env:test和env:product这样比较方便管理,批量执行时候只需要选好相应的标签即可。打镜像 然后我们需要解决...

执行模板中使用加密参数

如使用 系统运维管理 OOS(CloudOps Orchestration Service)的模板功能便可以直接在模板中使用加密参数。操作步骤 登录 系统运维管理 OOS(CloudOps Orchestration Service)控制台。选择 参数仓库,创建加密参数,具体步骤请参考 创建...

创建或更新镜像

操作步骤 登录 系统运维管理 管理控制台。单击 常用运维任务 中的 创建或更新镜像。单击 创建。可选择 从已有实例创建镜像 或 更新镜像。本示例选择 从已有实例创建镜像。填写 新镜像名称。执行使用到的权限的来源可选择当前账号的已有权限...

使用系统运维管理配置多台实例的免密登录

系统运维管理是阿里云提供的云上自动化运维服务,能够自动化管理和执行任务。您可以通过模板来定义执行任务、执行顺序、执行输入和输出,然后通过执行模板来完成任务的自动化运行。SSH免密登录大多用于自动化运维,主要是安全方便自动化...

通过OOS实现ECS实例迁移

背景介绍 系统运维管理 OOS(CloudOps Orchestration Service)(OOS)为用户提供一个可视化的、可操作的ECS实例迁移功能,迁移流程如下图所示:注意事项 您在迁移之前请 安装virtio驱动,以免造成新的实例无法启动。如果您的实例系统环境有...

新建模板

操作步骤 登录 系统运维管理 管理控制台。选择 自定义任务模板,单击 创建模板。在基本信息区域,配置模板参数。输入模板 名称,本示例中为DescribeInstances。在模板 详情 区域,选择 YAML 格式,并输入以下示例模板。您可以修改此模板,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云监控 应用实时监控服务 云服务器 ECS 轻量应用服务器 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用