<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<style type="text/css" style="display:none;"> P {margin-top:0;margin-bottom:0;} </style>
</head>
<body dir="ltr">
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
I have a standalone server with 4 GeForce RTX 2080 Ti. The purpose is to serve as a computer server for data science jobs. My department chair wants a job scheduler on it. I have installed SLURM (18.08.9). That works just fine in a basic configuration when
 I attempt to add Gres_Types gpu and then add Gres:gpu:4 to the end of the node description:</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<p style="margin: 0px; font: 11px Menlo; background-color: rgb(255, 255, 255); margin: 0px; background-color: rgb(255, 255, 255)">
<span style="font-variant-ligatures: no-common-ligatures; font-variant-ligatures: no-common-ligatures">NodeName=cs-datasci CPUs=24 RealMemory=385405 Sockets=2 CoresPerSocket=6 ThreadsPerCore=2 State=UNKNOWN Gres=gpu:4</span></p>
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
and then try to restart slurmd I get an error that it cannot find the plugin</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<p style="margin: 0px; font: 11px Menlo; background-color: rgb(255, 255, 255); margin: 0px; background-color: rgb(255, 255, 255)">
<span style="font-variant-ligatures: no-common-ligatures; font-variant-ligatures: no-common-ligatures">slurmd: error: Couldn't find the specified plugin name for select/cons_tres looking at all files</span></p>
<p style="margin: 0px; font: 11px Menlo; background-color: rgb(255, 255, 255); margin: 0px; background-color: rgb(255, 255, 255)">
<span style="font-variant-ligatures: no-common-ligatures; font-variant-ligatures: no-common-ligatures">slurmd: error: cannot find select plugin for select/cons_tres</span></p>
<p style="margin: 0px; font: 11px Menlo; background-color: rgb(255, 255, 255); margin: 0px; background-color: rgb(255, 255, 255)">
<span style="font-variant-ligatures: no-common-ligatures; font-variant-ligatures: no-common-ligatures">slurmd: fatal: Can't find plugin for select/cons_tres</span></p>
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
The system was prebuilt by AdvancedHPC with CentOS 7 and CUDA 8.0</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
I usually keep notes when I'm installing things but in this case I wasn't jotting things down as I went. I think I started with the instructions on this page: <a href="https://slurm.schedmd.com/quickstart_admin.html">https://slurm.schedmd.com/quickstart_admin.html</a> and
 went with the usual ./configure, make, make install.</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
I have a feeling maybe something did not work and I switched to the rpm packages based on some other web pages I saw because if I do a yum list installed | grep slurm I see a lot of pacakages. The problem is I was interrupted with other tasks and my memory
 was somewhat rusty when I came back to this.</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
When I went looking for this error I saw there were some issues with the newest SLURM and CUDA 10.2 but I didn't think that should be an issue because I was at CUDA 8.0.  Just in case I backed down to SLURM 18.</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
I'm willing to start all over if anyone thinks cleaning up and rebuilding will help that. I do see libraries in /etc/lib64/slurm but I also see 2 files in /usr/local/lib/slurm/src so I'm not sure if that's left over from trying to install from source.  All
 the daemons are in /usr/sbin and user commands in /usr/bin</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
I'm a newbie at this and very frustrated. Can anyone help?</div>
<div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div id="Signature">
<div id="divtagdefaultwrapper" style="font-size:12pt; color:#000000; background-color:#FFFFFF; font-family:Calibri,Arial,Helvetica,sans-serif">
<div class="BodyFragment"><font size="2">
<div class="PlainText">***************************************************************<br>
<p class="p1" style="margin-top: 0px; margin-bottom: 0px;"><span class="s1">Lisa Weihl </span><em>Systems Administrator</em></p>
<p class="p1" style="margin-top: 0px; margin-bottom: 0px;"><em>Computer Science, Bowling Green State University<br>
</em>Tel: (419) 372-0116   |    Fax: (419) 372-8061<br>
lweihl@bgsu.edu<br>
www.bgsu.edu​<br>
</p>
</div>
</font></div>
</div>
</div>
</div>
</body>
</html>