<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
</head>
<body style="word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class="">
Dear Everyone,<br class="">
<br class="">
The submit portal is ready for new submissions now.
<div class=""><br class="">
</div>
<div class="">There’s a few changes in place to be aware of:<br class="">
<br class="">
1. Outputs will now appear at a new location, /volatile/clas12/osg2, to facilitate #3 below.  HIPO files at the old /volatile/clas12/osg will remain, deleted only by the standard /volatile auto-deletion mechanism.<br class="">
<br class="">
2. For performance of both Lustre and the submit node, Lustre is no longer being used directly by the jobs, in favor of staging inputs and outputs.  This means there will currently be about a 1 hour delay between job success reporting and the files appearing
 on /volatile. That feedback delay will be addressed in the future.<br class="">
<br class="">
3. For performance and maintainence of filesystems, the only outputs appearing on Lustre will be HIPO files and the top level nodeScript.sh, one per submission.  Logs will be retained on the submit node for diagnostics.<br class="">
<br class="">
4. Output options are currently limited to DSTs only, until we get some mileage on the new setup.<br class="">
<br class="">
And, just a note, the non-DST output and LUND input options should ideally be reserved for smaller tests, e.g. for generator development, while large-scale simulations should ideally use a generator supported by the portal and DST outputs only.  There will
 be a discussion at an upcoming Thursday@11 software meeting.<br class="">
<br class="">
For questions on any of these, we can use the Simulation topic at the forum: <a href="https://clas12.discourse.group/" class="">https://clas12.discourse.group/</a>
<div class=""><br class="">
</div>
<div class="">Regards,</div>
<div class="">Mauri and Nathan</div>
<div class=""><br class="">
<div><br class="">
<blockquote type="cite" class="">
<div class="">On Mar 19, 2021, at 11:35 AM, Maurizio Ungaro <<a href="mailto:ungaro@jlab.org" class="">ungaro@jlab.org</a>> wrote:</div>
<br class="Apple-interchange-newline">
<div class="">
<div class="">Hi all,<br class="">
<br class="">
The OSG submissions are suspended due to issues with lustre.<br class="">
<br class="">
During this down time,  the OSG portal will be modified and /volatile will not be used directly anymore, but as a second stage of storing the output files.<br class="">
<br class="">
An update will be sent when we’re ready to submit jobs again.<br class="">
<br class="">
Sorry for the inconvenience,<br class="">
Mauri<br class="">
<br class="">
<br class="">
<br class="">
<br class="">
<br class="">
_______________________________________________<br class="">
Clas12_software mailing list<br class="">
<a href="mailto:Clas12_software@jlab.org" class="">Clas12_software@jlab.org</a><br class="">
https://mailman.jlab.org/mailman/listinfo/clas12_software</div>
</div>
</blockquote>
</div>
<br class="">
</div>
</div>
</body>
</html>