linux集群命令 linux集群管理软件

Linux集群常用指令

姓名：张昊楠   学号：21021210691

存储NAS 文件操作

df -h查看空间使用情况

警惕超大 nohup.out

ls   当前路径下的文件列表

pwd  查看当前路径

cd    进入某个文件夹

任务提交

任务提交前

qhost--查看集群负载状态

qsub / qsub-sge.pl--提交任务

qstat--查看任务状态

qdel / qmod--任务控制

任务查看

qhost -j---列出所有用户在每个节点上的任务

qhost -q---列出每个节点上每个队列的任务数

qhost -u username---列出某个用户在每个节点上的任务

提交命令

qsub -cwd -q queue.q test.sh

qsub-sge.pl --maxproc 50 --resource vf=5G --queue queue.q test.sh

任务查看2

qstat -u username---查看某个用户的任务

qstat -u *,---查看所有用户的任务

qstat –j jobs_ID---查看某个任务的详细信息

查看.e和.o文件

.e：错误信息

.o：标准输出

任务控制

qdel jobID---删除某个任务

qdel -u username---删除某个用户的所有任务

qmod -s jobID--挂起某个任务

qmod -us jobID---继续运行某个挂起的任务

按任务占用内存大小选择相应的队列

查看队列 qstat -g c

QUEUE

PE.q--并行

cloud.q--云平台

general.q--96G节点

middle.q--96G节点

great.q--大内存节点

plus.q--大内存节点

single.q--Trinity组装

single._p.q---Trinity组装（占用内存较大）

相关问答

Q1: Linux集群命令分发执行脚本

    如果没有运维人员或运维软件，但是又面临在一个集群中每台机器都执行一个命令时，总不能真的登录每一台吧。那这里就起一个简单的命令分发执行脚本。

0、确保脚本所在的机器能够免密登录到集群其他机器

    SSH免密登录配置

1、将集群的IP都写入一个文件中

2、编写命令分发脚本

如果机器数量少，可以替换第三行语句为

如果机器IP配置的映射名有规律，也可以替换第三行语句为

同时后面的 $i 替换为 hadoop$i 

3、测试

Q2: Linux HA 集群原理和配置-02

本文介绍在Linux HA集群中linux集群命令的仲裁和分区概念。

集群正常工作时linux集群命令，所有节点都在一个分区内（partition），分区内的所有节点将选举出一个仲裁节点，这个仲裁节点负责向其他节点发送集群控制命令。当网络发生故障时，集群中的节点发现无法和仲裁节点通信，则会在可通信的范围内重新选举一个新的仲裁节点。此时集群内可能出现多个仲裁节点，每个仲裁节点的管理范围为一个分区。

下文中将通过防火墙策略的设置模拟集群网络中通信出现异常的各种情况，如：

通过防火墙策略可以精准控制两两节点之间的连通性，使linux集群命令我们能更准确的linux集群命令了解在网络连通性发生变化对集群的影响。

在所有节点上启动防火墙，并添加策略对整个管理网络192.168.56.0/24放通。

保存上述策略，之后在实验过程会使用iptables命名加入新策略模拟网络通信异常效果，如果需要恢复网络通信正常状态，直接不保存策略重启firewalld服务即可。

通过pcs status查看集群状态：

上述结果显示当前集群只有一个分区，分区内的节点包括全部3台主机，仲裁节点是ha-host3，这表示集群间的通信是完好的。下图显示当前集群状态：

在ha-host1上添加以下策略：

该策略将使得ha-host1和ha-host3之间的通信中断，在所有节点上查看集群状态：

上面的结果显示，ha-host1失去和当前仲裁节点ha-host3的联系之后，和ha-host2一起组成新的分区并选举出ha-host2作为新的仲裁节点。有趣的是ha-host2和ha-host3的通信并未中断，但是他被“优先级较高的ha-host1抢走并推举为老大”，剩下ha-host3独自留在其自身所在的分区。此时ha-host3所在的分区提示了“partition WITHOUT quorum”，表示该分区中的节点数目不超过一半。

下图显示当前集群状态：

在ha-host1上再添加策略：

使其和当前的仲裁节点ha-host2的通信中断，集群状态变为：

发现ha-host2和ha-host3一起组成了新的分区，由于ha-host1所在分区节点数不足一半，无法启动资源，虚拟ip资源vip被切换到了ha-host2上。下图显示当前集群状态：

如果再把ha-host2和ha-host3直接的通信中断，此时3个节点间两两均无法通信。每个节点都是一个分区，每个分区的主机数均不过半，因此无法启动任何资源，原先运行在ha-host2上的vip也停止了。

当前集群状态如下图：

Q3: Linux一次在多个服务器运行命令

如果您维护多个Linux服务器，则有时您希望在所有服务器上运行相同的命令。例如，您可能希望安装/升级软件包，修补内核以及更新配置等。如果您必须登录到每个服务器并手动运行相同的命令，那将是一项繁琐的工作。

这篇文章是关于一个管理工具，它允许您一次在许多不同的机器上运行相同的命令。

通过ClusterSSH，您可以同时在多个主机上进行相同的更改。它提供了一个特殊的控制台界面，您在控制台中输入的任何内容都会自动发送到任意数量的主机。

在Linux上安装ClusterSSH

在Ubuntu，Debian或Linux Mint上安装ClusterSSH：

$ sudo apt-get install clusterssh

要在CentOS或RHEL上安装ClusterSSH，首先需要设置EPEL存储库，然后运行以下命令。

$ sudo yum install clusterssh

要在Fedora上安装ClusterSSH，只需运行：

$ sudo yum install clusterssh

配置ClusterSSH

安装后，第一步是定义要在其上运行命令的主机群集。为此，请按如下方式创建系统范围的ClusterSSH配置文件。

$ sudo vi / etc / clusters

clusters = my_cluster my_cluster2

my_cluster = host1 host2 host3 host4

my_cluster2 = host5 host6

如果您需要特定于用户的ClusterSSH配置，只需使用〜/ .csshrc而不是/ etc / clusters。在上面的示例配置中，我定义了两个集群：“my_cluster”由四个主机组成，“my_cluster2”包含两个主机。群集是您要登录并运行命令的一组主机。

当您使用任何用户定义的群集启动ClusterSSH时，它将使用ssh登录到群集中的各个主机，并在主机上运行任何用户类型的命令。

启动ClusterSSH

要启动ClusterSSH，请按如下方式运行cssh命令。

$ cssh -l dev my_cluster

在上文中，“dev”是群集中所有主机的登录ID，“my_cluster”是群集名称。

如果需要，可以指定单个主机名而不是群集名。

$ cssh -l dev host1 host2 host3

一旦CSSH执行命令时，它会弹出用于单个主机的XTerm窗口，以及标记的一个小窗口“CSSH [2]”，其是ClusterSSH控制台窗口。无论您在控制台窗口中输入什么，都将同时出现在各个主机的XTerm窗口中。基本上，您可以通过单一控制台窗口控制所有XTerm窗口。

如果要将某些命令运行到特定的XTerm窗口，只需将焦点切换到Xterm窗口，然后像往常一样键入命令。

以下屏幕截图显示了ClusterSSH的运行情况，其中群集中有五个主机，左上角的控制台窗口是您应该键入要在所有五个主机上运行的命令的位置。

转自 嘉为教育-rhce认证_rhce培训_linux培训_linux认证_linux考证

linux集群命令的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于linux集群管理软件、linux集群命令的信息别忘了在本站进行查找喔。