<!DOCTYPE html>
<html xmlns="https://www.w3.org/1999/xhtml" xmlns:o="urn:schemas-microsoft-com:office:office">
<head>
<title>Leonardo: service restored - slurm controller issue resolved</title>
<meta charset="utf-8">
<meta name="viewport" content="width=device-width, initial-scale=1">
<meta http-equiv="X-UA-Compatible" content="IE=edge">
<meta name="format-detection" content="address=no">
<meta name="format-detection" content="telephone=no">
<meta name="format-detection" content="email=no">
<meta name="x-apple-disable-message-reformatting">
<!--[if gte mso 9]><xml><o:OfficeDocumentSettings><o:AllowPNG/><o:PixelsPerInch>96</o:PixelsPerInch></o:OfficeDocumentSettings></xml><![endif]-->
<style type="text/css">
#outlook a{padding:0;}
.ReadMsgBody{width:100%;} .ExternalClass{width:100%;}
.ExternalClass, .ExternalClass p, .ExternalClass span, .ExternalClass font, .ExternalClass td, .ExternalClass div {line-height: 100%;}

body { margin: 0; padding: 0; height: 100%!important; width: 100%!important; -webkit-text-size-adjust: 100%; -ms-text-size-adjust: 100%; mso-line-height-rule: exactly;}
table,td { border-collapse: collapse !important; mso-table-lspace: 0pt; mso-table-rspace: 0pt;}
img { border: 0; height: auto; line-height: 100%; outline: none; text-decoration: none; max-width: 100%!important; -ms-interpolation-mode: bicubic;}
img.aligncenter { display: block; margin: 0 auto;}
/* TinyMCE of WP */
.alignleft { float: left; margin: 7px 15px 7px 0px; }
.alignright { float: right; margin: 7px 0px 7px 15px; }
.aligncenter { display: block; margin-left: auto; margin-right: auto; }
.screen-reader-text { display: none }
figcaption { display: block; }
@media screen and (max-width: 525px) {
 .wrapper { padding-left: px; padding-right: px; padding-bottom: px; padding-top: px;}
 .m-d-block {display: block}
 .m-d-none {display: none; visibility: hidden; color: transparent;}
 .m-pb-1 { padding-bottom: 16px!important; }
 .p-0 { padding: 0 !important; }
 .pt-1, .padding-top-15 { padding-top: 15px!important; }
 .pb-1, .padding-bottom-15 { padding-bottom: 15px!important; }
 .dh { display: hidden }
 .fs-90 {
 font-size: 90%;
 }
 .responsive { width:100%!important; }
 table.responsive { width:100%!important; float: none; display: table; padding-left: 0; padding-right: 0; }
 table[class="responsive"] { width:100%!important; float: none; display: table; padding-left: 0; padding-right: 0; }
 img { max-width: 100%!important }
 img[class="responsive"] { max-width: 100%!important; }
 /* "width: auto" restores the natural dimensions forced with attributes for Outlook */
 .fluid { max-width: 100%!important; width: auto; }
 img[class="fluid"] { max-width: 100%!important; width: auto; }

 .block { display: block; }

 td[class="responsive"]{width:100%!important; max-width: 100%!important; display: block; padding-left: 0 !important; padding-right: 0!important; float: none; }
 td.responsive { width:100%!important; max-width: 100%!important; display: block; padding-left: 0 !important; padding-right: 0!important; float: none; }

 td[class="section-padding-bottom-image"]{
 padding: 50px 15px 0 15px !important;
 }
 /* For grids */
 .max-width-100 { max-width: 100%!important; }

 /* Obsolete */
 .tnp-grid-column {
 max-width: 100%!important;
 }

}

/* Custom CSS */
/* End Custom CSS */


/* Last posts */
@media (max-width: 525px) {
 .posts-1-column {
 width: 100%!important;
 }
 .posts-1-image {
 width: 100%!important;
 display: block;
 }
}



/* Html */
.html-td-global p {
 font-family: Helvetica, Arial, sans-serif;
 font-size: 16px;
}


/* Text */
.text p {
 margin: 0 0 15px 0 !important;
}
.text a {
 color: #007bff;
 text-decoration: none;
}
</style>
</head>
<body style="margin: 0; padding: 0; line-height: normal; word-spacing: normal;" dir="ltr">

<table cellpadding='0' cellspacing='0' border='0' width='100%' role='presentation'>
<tr>
<td bgcolor='#ffffff' valign='top' class='wrapper'><!-- tnp --><table role="presentation" border="0" cellpadding="0" cellspacing="0" align="center" width="100%" style="border-collapse: collapse; width: 100%;" class="tnpc-row tnpc-row-block ui-sortable-handle" data-id="posts">
<tbody><tr><td align="center" style="padding: 0;" class="edit-block">
<!--[if mso | IE]><table role="presentation" border="0" cellpadding="0" align="center" cellspacing="0" width="600"><tr><td width="600" style="vertical-align:top;width:600px;"><![endif]--><table role="presentation" type="options" class="tnpc-block-content" border="0" cellpadding="0" align="center" cellspacing="0" width="100%" style="border-collapse: separate !important; width: 100%!important; max-width: 600px!important">
<tbody><tr><td align="center" style="text-align: center; line-height: normal !important; letter-spacing: normal; mso-line-height-rule: exactly; outline: none; padding: 15px 15px 15px 15px;background-color: #ffffff;" bgcolor="#ffffff" class=""><table border="0" cellpadding="0" align="center" cellspacing="0" width="100%" class="responsive">
 <tbody><tr>
 <td style="padding-bottom: 20px; padding-left: 0px; padding-right: 0px;">
 <a href="https://www.hpc.cineca.it/wp-admin/admin-ajax.php?action=tnptr&nltr=NzAzOzk7aHR0cHM6Ly93d3cuaHBjLmNpbmVjYS5pdC9uZXdzbGV0dGVyL2xlb25hcmRvLXNlcnZpY2UtcmVzdG9yZWQtc2x1cm0tY29udHJvbGxlci1pc3N1ZS1yZXNvbHZlZC87Ozg4NDc5OGM3Y2RlNDZiZmM1NjdhZTVmN2MxMjQzNDQ3" style="font-size: 32px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: normal; margin: 0; text-decoration: none;" class="tnpc-inline-editable" data-type="title" data-id="26323" dir="ltr" role="heading" aria-level="2">Leonardo: service restored – slurm controller issue resolved</a> </td>
 </tr>

 <tr>
 <td style="font-size: 14px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: normal!important; padding-bottom: 10px; text-align: center; font-style: italic;">
 25 July 2026 </td>
 </tr>
 
 
 <tr>
 <td align="left" dir="ltr" style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; padding-left: 0px; padding-right: 0px; line-height: 1.5;">
 <!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;">Dear Users,</p>
<!-- /wp:paragraph -->

<!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;">The issue has been resolved, and it is now possible to submit jobs and query the queue status normally.</p>
<!-- /wp:paragraph -->

<!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;">The problem was caused by instabilities on the local filesystem used by the Slurm service. We will continue monitoring the system closely over the coming hours to ensure stability.</p>
<!-- /wp:paragraph -->

<!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;">Please note that when the controller was restored, an internal recovery procedure failed, causing all jobs that had started running on the Booster partitions to be terminated with the following message:</p>
<!-- /wp:paragraph -->

<!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;"><code>srun: PrologSlurmctld failed, job killed</code></p>
<!-- /wp:paragraph -->

<!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;">This additional issue has now been fixed, and full production service has been restored across the entire cluster.</p>
<!-- /wp:paragraph -->

<!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;">We apologize for the inconvenience and thank you for your understanding.</p>
<!-- /wp:paragraph -->

<!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;">Best regards,</p>
<!-- /wp:paragraph -->

<!-- wp:paragraph -->
<p style="font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5 !important;">HPC User Support - CINECA</p>
<!-- /wp:paragraph --> </td>
 </tr>

 </tbody></table>
 <br><br></td></tr></tbody></table><!--[if mso | IE]></td></tr></table><![endif]--></td></tr></tbody></table><table role="presentation" border="0" cellpadding="0" cellspacing="0" align="center" width="100%" style="border-collapse: collapse; width: 100%;" class="tnpc-row tnpc-row-block ui-sortable-handle" data-id="text">
<tbody><tr><td align="center" style="padding: 0;" class="edit-block">
<table role="presentation" border="0" cellpadding="0" cellspacing="0" width="100%" style="border-collapse: separate !important; width: 100%!important;">
<tbody><tr><td align="center" width="100%" style="width: 100%; background-color: #ffffff;" bgcolor="#ffffff"><!--[if mso | IE]><table role="presentation" border="0" cellpadding="0" align="center" cellspacing="0" width="600"><tr><td width="600" style="vertical-align:top;width:600px;"><![endif]--><table role="presentation" type="options" class="tnpc-block-content" border="0" cellpadding="0" align="center" cellspacing="0" width="100%" style="border-collapse: separate !important; width: 100%!important; max-width: 600px!important">
<tbody><tr><td align="center" style="text-align: center; line-height: normal !important; letter-spacing: normal; mso-line-height-rule: exactly; outline: none; padding: 0px 10px 0px 10px;" bgcolor="" class=""><table width="100%" style="width: 100%!important" border="0" cellpadding="0" cellspacing="0">
 <tbody><tr>
 <td width="100%" valign="top" align="left" class="text" style="mso-line-height-rule: exactly; font-size: 16px;font-family: Verdana, Geneva, sans-serif;font-weight: normal;color: #222222; line-height: 1.5;">
 <p style="text-align: center"><span style="font-family: verdana, geneva, sans-serif"><span style="font-size: 12px">To unsubscribe to HPC-News send a mail to <a href="mailto:hpc-news-userdb-leave@list.cineca.it" target="_blank" rel="noopener">hpc-news-userdb-leave@list.cineca.it</a>.<br></span><span style="font-size: 12px">For more information see documentation at <a href="https://www.hpc.cineca.it/wp-admin/admin-ajax.php?action=tnptr&nltr=NzAzOzk7aHR0cHM6Ly93d3cuaHBjLmNpbmVjYS5pdC91c2VyLXN1cHBvcnQvZ2V0LWluLXRvdWNoLzs7MDA4NjQzYWNlODJlMmMzZGM3Yjg2MjAzMDVjYTZhNzM%3D" target="_blank" rel="noopener">https://www.hpc.cineca.it/user-support/get-in-touch/</a></span></span></p> </td>
 </tr>
</tbody></table></td></tr></tbody></table><!--[if mso | IE]></td></tr></table><![endif]--></td></tr></tbody></table></td></tr></tbody></table>

<!-- /tnp -->
</td>
</tr>
</table>


<img alt="" src="https://www.hpc.cineca.it/wp-admin/admin-ajax.php?action=tnptr&noti=NzAzOzk7MTc1NTUyZDI4MzJiMWE2NzNlY2U0YWNmMGEzOGI3OTQ%3D"/>
<img alt="Separator" src="https://www.hpc.cineca.it/wp-json/tnp/o/703/9/2599ce7ac78d9a85c1aa9471f07a50c1.gif">
</body>
</html>