调度依赖配置指引
DataWorks的调度依赖是指周期调度节点间的上下游依赖关系。通过节点的依赖关系有序调度运行上下游节点，即当上游节点运行成功后，下游节点才会启动运行，保障适时的产出有效业务数据。本文为您介绍调度依赖的配置指引，避免因调度依赖配置...
使用ack-descheduler组件对Pod进行调度优化
为了解决实际运行中集群资源无法充分利用或浪费的问题，可以使用ack-descheduler组件对集群的Pod进行调度优化，使部分不合理的Pod能够重新调度到合适的节点上。本文介绍如何使用ack-descheduler组件优化Pod调度。前提条件 已创建ACK集群...
定期调度Zeppelin中的作业
状态 描述 scheduled 已开始调度 skipped 跳过本次调度 upstream_failed 上游任务失败 up_for_reschedule 已重新调度 up_for_retry 重试 failed 调度失败 success 调度成功 running 调度正在运行中 queued 加入调度队列 no_status 没有状态...
监控
为防止磁盘使用率超过磁盘安全水位，需要配置监控报警，提前发出报警通知，让您及时知晓磁盘水位并管理磁盘空间，保证业务正常运行。说明 湖仓版（3.0）集群无需配置磁盘监控告警。登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上...
DMS调度XIHE SQL
云原生数据仓库AnalyticDB MySQL版 数仓版（3.0）和 湖仓版（3.0）都支持使用DMS的任务编排功能来编排、调度、管理和监控 AnalyticDB MySQL 任务。本文介绍如何通过DMS来进行任务开发与调度。背景信息 挑战和诉求：事件调度 传统的数据库...
Hologres开发：周期性调度
HoloStudio与DataWorks无缝连通，您可以通过HoloStudio将MaxCompute数据导入Hologres，并基于DataWorks的底层能力，前往DataWorks进行定时调度，实现周期性导入数据至Hologres。本文为您介绍如何将MaxCompute源表数据导入Hologres进行周期...
Hologres开发：周期性调度
HoloStudio与DataWorks无缝连通，您可以通过HoloStudio将MaxCompute数据导入Hologres，并基于DataWorks的底层能力，前往DataWorks进行定时调度，实现周期性导入数据至Hologres。本文为您介绍如何将MaxCompute源表数据导入Hologres进行周期...
数据开发功能索引
批量操作（）：用于快速对表、资源、函数进行批量修改（包括修改责任人、引擎实例、调度资源组、调度重跑属性、调度类型、调度周期、调度超时时间等操作）。导入（）：用于快速将本地数据上传至目标表中。目前仅支持上传数据至MaxCompute表...
Linux实例使用df和du命令查看磁盘时结果不一致
问题描述 执行如下命令，查看Linux实例文件系统的使用率。df-h 系统显示类似如下，查看/dev/xvdb1 磁盘分区已占用空间为27 GB，挂载目录为/opt。依次执行如下命令，切换到/opt 目录，查看占用空间为2.4 GB，即df和du命令查看的结果不一致。...
常见问题
Linux实例磁盘空间满和inode满的问题排查方法 Windows实例内存分析工具的介绍 Linux实例IO负载情况的查询和案例分析 Linux实例df和du命令查看磁盘空间大小不同或为负数 开启Windows实例的内核转储（Kernel Memory Dump）功能 Linux实例的...
如何查看Linux系统I/O负载情况？
查看磁盘I/O负载 使用iostat从系统纬度查看磁盘IO负载 iostat是一款Linux系统中监控I/O性能的工具，可以从系统纬度查看磁盘I/O负载情况。执行如下命令，安装iostat。yum install sysstat 执行如下命令，查看I/O负载。iostat-d-k 3 5 说明-d...
Linux实例负载高问题排查和异常处理
本文档介绍Linux云服务器负载高导致ECS实例运行变慢、自动...故障处理 Linux系统ECS实例CPU使用率或CPU负载较高问题的排查及解决方案 如何查看Linux系统网络流量负载情况？如何查看Linux系统I/O负载情况？如何处理系统内存使用率过高问题？
使用du与df命令查看磁盘容量不一致
问题描述 在Linux系统的ECS实例中，执行 du 与 df 命令查看磁盘容量，出现不一致的现象，以下为出现不一致的5种现象：执行 df-h 命令查看文件系统的使用率，可以看到/dev/xvdb1 磁盘占用了约27G，挂载目录为/opt。进入/opt 目录执行 du-sh ...
Linux实例系统总体负载的查询及分析
使用sar工具查看Linux实例各项资源使用情况 sar是System Activity Reporter（系统活动情况报告）的缩写。sar工具对系统状态进行取样后，通过计算数据和比例来表达系统当前的运行状态。其特点是可以连续对系统取样，获得大量的取样数据。其...
在Linux实例使用df命令查看磁盘的容量与购买容量不符
概述 在Linux系统的ECS实例使用 df-h 命令查看磁盘容量，发现与购买时选择的磁盘容量不符。详细信息 本文以购买的200G磁盘为例，说明为何在Linux系统格式化挂载后只显示197G，并说明为何Used参数值加Avail参数值的和与Size参数值不符。...
Linux实例磁盘空间满和Inode满的问题排查方法
在Linux系统的轻量应用服务器内创建文件或者应用时出现 No space left on device 报错提示，即表示您的磁盘空间不足。如果磁盘满不符合您的预期使用，可根据本文判断磁盘满的原因并相应解决。说明 如果磁盘满是符合您预期的使用，则通过升...
节点异常问题排查
在 Prometheus监控 页面，单击 节点监控 页签，在 集群节点监控详情 页面选择待查看的节点，可查看对应节点的CPU、内存、磁盘等监控信息。检查节点的安全组 关于如何检查节点的安全组，请参见 安全组概述 和 配置集群安全组。Kubelet异常...
解决Linux实例磁盘空间满问题
在Linux系统的云服务器ECS实例内创建文件或者应用时出现 No space left on device 报错提示，即表示您的磁盘空间不足。如果磁盘满不符合您的预期使用，可根据本文判断磁盘满的原因并相应解决。说明 如果磁盘满是符合您的预期使用，您可以...
节点异常问题排查
在 Prometheus监控 页面，单击 节点监控 页签，在 集群节点监控详情 页面选择待查看的节点，可查看对应节点的CPU、内存、磁盘等监控信息。检查节点的安全组 关于如何检查节点的安全组，请参见 安全组概述 和 最小化集群访问规则。Kubelet...
Pod诊断
请尝试通过命令 kubectl get apiservice，检查集群中的APIService的可用状态，并通过 kubectl describe apiservice 命令，查看状态异常的APIService并分析原因。集群Pod网段余量紧张 检查Flannel集群剩余可用PodCIDR网段是否少于5个。每个...
Alibaba Cloud Linux 3镜像发布记录
您可以通过本文查看Alibaba Cloud Linux 3镜像最新的可用版本及更新内容。背景信息 如无特殊声明，更新内容适用于云服务器ECS所有可用地域。Alibaba Cloud Linux 3镜像适用于大多数实例规格族，但存在一部分镜像仅适用于部分实例规格族。...
块存储FAQ
所选配的设备名，在Linux操作系统下与磁盘设备号对应，在Windows操作系统下与磁盘管理器中的磁盘顺序一致。什么是独立云盘？独立云盘，即单独购买的按量付费数据盘，而不是随实例创建的数据盘。它可以在同一个可用区内的不同ECS实例之间...
如何使用Prometheus监控Windows
为了方便运维人员快速查看所管理Windows集群的整体运行情况，这里还建议服务配置TopN（包括CPU使用率、磁盘空间使用率、磁盘空闲率、网络流量等关键指标）大盘。告警规则 根据上述对主要指标的介绍，这里建议您至少配置如下的默认告警规则...
如何使用Prometheus监控Windows
为了方便运维人员快速查看所管理Windows集群的整体运行情况，这里还建议服务配置TopN（包括CPU使用率、磁盘空间使用率、磁盘空闲率、网络流量等关键指标）大盘。告警规则 根据上述对主要指标的介绍，这里建议您至少配置如下的默认告警规则...
动态修改Pod资源参数
ack-koordinator提供对Pod内存参数动态修改的能力，可以在不重启Pod的情况下，修改CPU、内存、磁盘IO等单机隔离参数。本文介绍如何使用ack-koordinator动态修改Pod资源参数。前提条件 已通过kubectl连接Kubernetes集群。具体操作，请参见 ...
动态修改Pod资源参数
修改磁盘IOPS参数 如果您需要控制磁盘IOPS，请使用操作系统为Alibaba Cloud Linux的Worker节点。修改磁盘IOPS参数的具体操作如下：使用以下YAML，创建一个IO密集型的测试应用。将宿主机目录/mnt 挂载至Pod内部使用，对应磁盘设备名称为/dev...
配置blk-iocost权重限速
blk-iocost权重限速功能是Alibaba Cloud Linux对cgroup I/O子系统（blkcg）基于权重的磁盘限速功能的改进。它是一种I/O控制器，可以根据应用程序或进程的优先级为块设备上的I/O操作分配带宽，并且可以通过设置权重值来限制特定应用程序或...
编辑节点池
此时节点A的标签将变为：testB:testB testC:testC 展开查看设置为不可调度信息 勾选该项后，新添加的节点注册到集群时默认设置为不可调度。若想打开调度选项，可以在节点列表中开启。说明 设置为不可调度不会对节点池已有节点生效，仅对...
查看和执行公共命令
公共命令发布后，您可以直接查看命令的详细内容，并可以在ECS实例上执行命令及查看执行进度和结果，例如，一键升级Linux实例中的 云助手Agent、一键安装Java、一键诊断Linux实例是否需要进行磁盘扩容操作等。使用公共命令，可以快速地完成...
云监控指标说明
说明 在Linux系统中，一个节拍理解为操作系统进程调度的最小时间片，不同Linux内核可能值有不同，通常在1ms到10ms之间。serverless_starrocks_be_cpu_idle 瞬时值 BE节点CPU使用空闲率。serverless_starrocks_be_max_disk_io_util_percent ...
系统运维工具集SysAK使用说明
安装SysAK 环境要求 操作系统：Alibaba Cloud Linux 2/3、Anolis OS 8.4 ANCK、CentOS 7及其他内核版本大于3.10的Linux系统 说明 您可以运行 uname-a 命令查看实例的内核版本。硬件：x86_64 安装部署 操作系统 安装方法 Alibaba Cloud ...
功能特性
查看集群列表与详情 登录集群 通过与集群主节点建立SSH连接，您可以使用终端上的Linux命令来管理和与集群进行交互操作。登录集群 集群类型 阿里云EMR提供多种集群类型，包括DataLake、OLAP、DataFlow、DataServing等，旨在为大数据处理和...
Linux系统的ECS实例通过vsftp上传文件失败，提示“553...
本文介绍Linux系统的ECS实例通过vsftp上传文件失败，提示“553 Could not create file”错误的解决方案。问题现象 Linux系统的ECS实例通过vsftp上传文件失败，提示“553 Could not create file”错误。问题原因 可能由于以下原因导致：...
诊断项与诊断结果说明
诊断项 描述 诊断范围及建议操作 磁盘扩容未生效 在控制台对Linux实例的磁盘扩容后，检查是否需要进一步执行扩容命令。检查在控制台对该实例的磁盘扩容后，是否已经生效。如果在控制台完成了扩容操作但实际没有生效，需要手动执行扩容命令...
出错提示S6磁盘分区创建快照出错
Linux 磁盘分区空间不足。系统可用内存不足300 MB。磁盘分区快照设备异常。解决方案 不同操作系统对应的解决方案如下：Windows 打开事件查看器检查是否有vss、volsnap、disk相关来源异常，并根据报错进行处理。如果报错提示磁盘空间不足，...
创建CDH Impala节点
在DataWorks中，CDH Impala节点可以编写并执行Impala SQL脚本。...查看运行的周期调度任务，详情请参见 查看并管理周期任务。如果您需要查看更多周期调度任务详情，可单击顶部菜单栏的 运维中心，详情请参见 运维中心概述。
历史数据清理
您可以在 基本信息 区域，单击 查看定时任务，查看定时调度信息，同时您还可以进行如下操作。暂停调度 说明 如果需要关闭调度，请前往历史数据清理工单详情页，单击右上角的 关闭工单，再填入关闭工单的具体原因，单击 确定 即可。重启调度...
配置RDS MySQL间的数据集成任务
设置完成后，可单击 任务失败策略 右侧的 查看计划调度时间 来查看设置的调度时间是否符合预期。任务失败策略 根据业务需求，选择：单次任务失败后，不再执行后续的调度任务 单次任务失败后，忽略失败，并执行下一次调度任务 选择迁移对象...
创建CDH Hive节点
如果您已部署CDH集群并希望借助DataWorks执行Hive任务（例如，数据查询作业或处理...查看运行的周期调度任务，详情请参见 查看并管理周期任务。如果您需要查看更多周期调度任务详情，可单击顶部菜单栏的 运维中心，详情请参见 运维中心概述。
创建CDH Presto节点
在DataWorks中，CDH Presto节点可以实现实时数据分析。该节点提供了分布式SQL查询...查看运行的周期调度任务，详情请参见 查看并管理周期任务。如果您需要查看更多周期调度任务详情，可单击顶部菜单栏的 运维中心，详情请参见 运维中心概述。
- 产品推荐
- 这些文档可能帮助您