Slurmを運用していて、原因不明で計算ノードが動かなくなった。 sinfoで確認すると # sinfo PARTITION AVAIL TIMELIMIT NODES STATE NODELIST work* up infinite 1 idle kk3 work* up infinite 2 down kk4,kk5みたいな感じ。 それぞれのノードでslurmdのステ…