快速入门
并行：并行运行两个任务流。并行模式1：阻塞任务A直到前一个任务流的任务A已经完成。并行模式2：阻塞任务 A 直到前一个任务流的任务 A 的子节点已经完成。公开任务流 选择是否公开该任务流，设置公开后，该任务流可被租户内的所有用户查看...
Memcg OOM优先级策略功能
运行以下命令创建两个cgroup节点 A、B，并开启memcg OOM优先级策略功能。mkdir/sys/fs/cgroup/memory/A cd/sys/fs/cgroup/memory/A echo 1>memory.use_priority_oom mkdir/sys/fs/cgroup/memory/B cd/sys/fs/cgroup/memory/B echo 1>memory...
基于eRDMA增强型实例部署AI训练集群
yum install libibverbs rdma-core librdmacm libibverbs-utils aiacc-nccl-plugin-y Ubuntu 运行以下命令，添加PGP签名。wget-qO-https://mirrors.aliyun.com/erdma/GPGKEY |apt-key add-运行以下命令，添加apt源。Ubuntu 20.04 echo"deb...
创建RAID阵列（Linux）
操作步骤 本操作以Ubuntu 22.04版本的ECS实例为例，介绍如何使用Linux系统内置的 mdadm 命令为数据盘创建一个名称为/dev/md0的RAID阵列。远程连接ECS实例。关于连接方式的介绍，请参见 连接方式概述。运行以下命令，查看ECS实例上所有云盘...
使用实例时镜像相关问题
yum-y install rpm-build rpmbuild-ba kexec-tools.spec 运行以下命令，安装修改后的RPM包。cd/root/rpmbuild/RPMS/aarch64 rpm-ivh kexec-tools-2.0.15-51.el7.aarch64.rpm 如果再次发生宕机，通过 ls-lh/var/crash 查询dump文件，可以...
部署Node.js环境（Alibaba Cloud Linux 2）
nvm ls 返回结果如下所示，表示当前已安装v14.0.0、v16.0.0两个版本，正在使用的是v16.0.0版本。v14.0.0->v16.0.0 default->v14.0.0 iojs->N/A(default)unstable->N/A(default)node->stable(->v16.0.0)(default)stable->16.0(->v16.0.0)...
配置网卡多队列的网络中断亲和性
多队列是指网络接口卡具有能力在多个发送和接收队列上并行处理网络数据包。在使用网卡多队列时，通常需要配置网络中断亲和性（IRQ Affinity），将不同的队列中断分配给特定的CPU处理，而不是由任意的CPU处理，这有助于减少CPU之间的争用并...
部署Node.js环境（CentOS 7）
nvm ls 返回结果如下所示，表示当前已安装v14.0.0、v16.0.0两个版本，正在使用的是v16.0.0版本。v14.0.0->v16.0.0 default->v14.0.0 iojs->N/A(default)unstable->N/A(default)node->stable(->v16.0.0)(default)stable->16.0(->v16.0.0)...
搭建多个Web站点（Linux）
cd/usr/share/nginx/html 运行以下命令，创建两个测试文件夹。文件夹中用于存放测试网站信息，即存放项目代码。sudo mkdir Testpage-1 sudo mkdir Testpage-2 配置测试站点Testpage-1的信息。运行以下命令，进入Testpage-1。cd/usr/share/...
手动部署LNMP环境（Alibaba Cloud Linux 3/2、CentOS ...
mysql Ver 8.0.36 for Linux on x86_64(MySQL Community Server-GPL)运行以下命令，启动MySQL。sudo systemctl start mysqld 依次运行以下命令，设置开机启动MySQL。sudo systemctl enable mysqld sudo systemctl daemon-reload 配置MySQL ...
ossimport概述
└─workers#Worker列表├─console.sh#命令行工具，目前支持只Linux├─logs#日志目录└─README.md#说明文档，强烈建议使用前仔细阅读 配置文件 单机模式下有两个配置文件 sys.properties、local_job.cfg，分布式模式下有三个配置文件 ...
使用Megatron-Deepspeed训练GPT-2并生成文本
GPT-2模型由多层单向Transformer的解码器部分构成，根据模型层次规模，GPT-2模型有以下几个规格：Megatron-Deepspeed框架结合了两种主要技术：Megatron-LM是由NVIDIA开源的Transformer 模型框架。DeepSpeed是由Microsoft开源的一个深度学习...
构建多架构容器镜像
可以看到 main 版本下有linux/amd64和linux/arm64两个架构的镜像。在linux/amd64和linux/arm64架构上分别验证镜像。在linux/amd64机器上执行以下命令。docker run-rm xxx-registry.cn-hangzhou.cr.aliyuncs.com/test/golang-test:main 预期...
Tunnel命令常见问题
done 实际运行Shell脚本效果如下，本例中以两个文件userlog1及userlog2举例。完成上传后，您可以在MaxCompute客户端查看表数据。使用Tunnel Upload命令上传数据报错，是否有类似MySQL的-f参数，可以强制跳过错误数据继续进行上传？您可以在...
将节点容器运行时从Docker迁移到containerd
Kubernetes v1.24将不再支持将Docker作为内置容器运行时，为了将ACK升级到Kubernetes v1.24及更高版本，您需要将节点容器运行时从Docker迁移到containerd。本文介绍如何在ACK管理控制台将节点容器运行时从Docker迁移到containerd。前提条件...
SAP NetWeaver 部署指南
可以授权两个安全组之间互访。安全组是一种虚拟防火墙，具备状态检测包过滤功能。安全组用于设置单台或多台云服务器的网络访问控制，它是重要的网络安全隔离手段，用于在云端划分安全域。一台ECS实例必须至少属于一个安全组。具体详细信息...
计算资源优化
弹性伸缩分为两个维度：调度层弹性，主要是负责修改负载的调度容量变化。包括HPA、VPA、CronHPA和Elastic-Workload等类型，例如HPA是典型的调度层弹性组件，通过HPA可以调整应用的副本数，调整的副本数会改变当前负载占用的调度容量，从而...
使用说明
运行作业 MaxCompute客户端提供一个JAR命令用于运行MaxCompute Graph作业，其使用方式与 MapReduce 中的 JAR命令 相同。使用语法如下。Usage:jar[][ARGS]-conf<configuration_file>Specify an application configuration file-classpath...
并行查询测试方法
make 编译完成后该目录下会生成两个可执行文件：dbgen：数据生成工具。在使用InfiniDB官方测试脚本进行测试时，需要用该工具生成tpch相关表数据。qgen：SQL生成工具。生成初始化测试查询，由于不同的seed生成的查询不同，为了结果的可重复...
通过导入工具导入至数仓版
步骤二：导入数据准备 说明 您还可以使用Linux的 split 命令对大文件进行切分（建议切分后的文件大小为1 GB~2 GB），文件切分后会形成更多的分片，更利于 AnalyticDB MySQL版 导入工具执行并行导入，从而提升导入速度，缩短导入时间。...
Spark常见问题
参数说明：该参数用于设置每个Executor进程的CPU核数，决定每个Executor进程并行执行Task的能力，每个CPU核同一时间只能执行一个Task。通常Executor的CPU核数设置为 2~4 较为合适。如何解决内存不足问题？常见报错：java.lang....
代码多副本功能
配置开关 代码多副本提供了全局开关和memcg开关，只有当两个开关同时打开时，内核系统内的进程才能使用代码多副本功能。配置开关 说明/sys/kernel/mm/duptext/enabled 全局开关用于设置当前内核系统是否启用代码多副本功能。取值范围：0～1...
如何安装Ubuntu 18图形化桌面？
apt-get update 运行以下命令，安装图形化桌面。apt-get install ubuntu-desktop 如果安装出现如下报错，请参见 常见问题 中的解决方案解决以后，再启动图形化桌面。运行以下命令，设置默认启动为图形化桌面。systemctl set-default ...
修改并编译Alibaba Cloud Linux内核的rpm包
一般根据平台是Arm还是x86架构，选择 kernel-5.10.134-aarch64.config 或者 kernel-5.10.134-x86_64.config 文件即可，也可以同时修改两个平台的配置。运行以下命令，修改config文件。本文以x86架构的 kernel-5.10.134-x86_64.config 文件...
在裸设备上创建文件系统
sudo yum install-y e2fsprogs 说明 此步骤中yum命令适用于CentOS等Linux发行版本。其他Linux发行版本，请根据实际使用的包管理软件修改安装命令。例如Debian或Ubuntu，请使用 sudo apt-get install<软件包名称>。运行以下命令，为目标数据...
部署和使用SVN
请根据实际情况选择并运行以下命令：如果您第一次增加用户，运行命令时需要带上参数-c 生成文件。sudo htpasswd-c/var/svn/svnrepos/conf/passwd userTest 如果您已经增加过用户，当后续还需要增加用户时，请运行以下命令。sudo htpasswd/...
使用AMD AI容器镜像部署ChatGLM3-6B
数据盘：ChatGLM3-6B的运行需要下载多个模型文件，会占用大量存储空间，为了保证模型顺利运行，建议数据盘设置为100 GiB。步骤二：创建Docker运行环境 安装Docker。在Alibaba Cloud Linux 3上安装Docker可以参考 安装Docker并使用（Linux）...
ECS实例数据传输的实现方式
watch“echo stats”|nc 192.168.2.34 11211 清空缓存：printf“flush_allrn”|nc 192.168.2.34 11211#谨慎操作，清空了缓存就没了 SCP SCP（Secure Copy）即安全拷贝，是一种在两个服务器（本地与本地、本地与远程、远程与远程）之间安全...
安装日志采集客户端
在 Linux 系统中，运行以下命令查看客户端状态：sudo/etc/init.d/ilogtaild status 在 Windows 系统中，在 服务 中查看客户端运行状态：控制面板>管理工具>服务，在列表中查看 LogtailDaemon 和 LogtailWorker 两个 Windows 服务的运行状态...
开启或关闭IPv6
如果两个配置文件存在差异，您可以执行以下命令重新生成initramfs。sudo dracut-v-f 重启实例。sudo reboot 执行 ifconfig 命令判断是否已开启IPv6。如果网络配置信息包含以下信息，表示IPv6已开启。inet6<以fe80:开头的单播地址>inet6实例...
mysqlclient 连接 OceanBase 数据库
定义函数 insert_record，该函数主要实现了向指定表中插入一条记录，记录包含 name 和 age 两个字段。使用 with 语句管理数据库连接和游标对象的生命周期，保证了数据库连接和游标对象的安全关闭，避免了内存泄漏等问题。定义 SQL 语句，...
在fstab文件中配置UUID方式自动挂载数据盘
在Linux系统中，您可以通过在fstab文件中使用UUID（Universally Unique Identifier）方式标识文件系统，以确保即使云盘的挂载顺序发生变化仍然可以正确地自动挂载数据盘，从而解决挂载顺序变更导致ECS重启后无法正常运行的问题。...
部署RabbitMQ
手动部署：适合对Linux命令有基本了解的用户，能够个性化部署。具体操作，请参见 手动部署RabbitMQ。手动部署使用以下操作系统和软件版本：操作系统：公共镜像CentOS 7.8 64位 RabbitMQ版本：3.7.8 erlang版本：21.1 JDK版本：1.8.0_282 ...
初始化小于等于2 TiB数据盘（Linux）
说明 云盘使用MBR分区形式，最多可以创建4个主分区，或者3个主分区和1个扩展分区，扩展分区不可以直接使用，需要划分成若干个逻辑分区才可以使用。更多信息，请参见 分区格式介绍。以创建一个主要分区为例。输入 p 并按 Enter 键，开始创建...
在容器（Docker）中配置eRDMA
实现原理 在容器环境中使用eRDMA功能时，使用Docker的-device 选项将/dev/infiniband/rdma_cm 和/dev/infiniband/uverbsX 两个字符设备映射到容器中，这样容器内的用户态程序就可以绕过操作系统内核直接访问eRDMA设备进行数据的收发。...
Apache配置多域名访问不同网站
测试网站：共两个，test01 和 test02。测试域名：共两个，test01.example.com 和 test02.example.com 。最终配置完成后，将实现：访问 test01.example.com ，获取测试网站 test01 的信息。访问 test02.example.com ，获取测试网站 test02 ...
Hive作业调优
作业调优方案 作业调优方向 调优方案 参数调优 内存参数 CPU参数 Task数量优化 并行运行 Fetch task 开启向量化 合并小文件 代码优化 代码优化 代码优化 数据清洗 读取表时分区过滤，避免全表扫描。数据过滤之后再JOIN。重复使用数据时，...
转换MBR分区为GPT分区
Alibaba Cloud Linux 2/3版本、CentOS 6及以上版本运行以下命令。type sgdisk|sudo yum install-y gdisk Debian 8及以上版本、Ubuntu14及以上版本运行以下命令。type sgdisk|sudo apt-get install-y gdisk 运行以下命令，将MBR分区转换为...
Linux实例使用df和du命令查看磁盘时结果不一致
本文主要介绍Linux实例使用df和du命令查看磁盘时结果不一致问题的解决方案。问题描述 执行如下命令，查看Linux实例文件系统的使用率。df-h 系统显示类似如下，查看/dev/xvdb1 磁盘分区已占用空间为27 GB，挂载目录为/opt。依次执行如下命令...
安装virtio驱动
没有这两个参数：未安装virtio驱动，需要手动安装。具体操作，请参见 安装virtio驱动。取值均为 m/取值一个为y一个为m：支持virtio驱动，还需运行以下命令，判断virtio驱动是否已添加到临时文件系统。取值均为 m：运行以下命令，判断virtio...
- 产品推荐
- 这些文档可能帮助您