<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
{font-family:"Cambria Math";
panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0in;
margin-bottom:.0001pt;
font-size:11.0pt;
font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:#0563C1;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:#954F72;
text-decoration:underline;}
span.EmailStyle17
{mso-style-type:personal-compose;
font-family:"Calibri",sans-serif;
color:windowtext;}
.MsoChpDefault
{mso-style-type:export-only;
font-family:"Calibri",sans-serif;}
@page WordSection1
{size:8.5in 11.0in;
margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
{page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal">Accelerator Users,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">There will be an outage all Linux systems in the OPS and DEV accelerator environments tomorrow from 11am followed by system reboots. The initial outage will only be around 15 minutes and critical systems will be back just after this.
The cleanup of other systems (like workstations) might take up to an hour. The impact to other enclaves like CHL, ITF and SRF should be minimal and has been planned with the associated parties. Please save your work and log off any OPS or DEV Linux systems
at the end of your workday today. A logbook notification will be sent at the start and end of this work. Below is the ATLis task, a brief reason why this work must be completed and a list of impacted systems.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thank you for your time and sorry for the inconvenience,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Anthony Cuffe<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><b>ATLis Task:<o:p></o:p></b></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><a href="http://devweb.acc.jlab.org/CSUEApps/atlis/task/21441">http://devweb.acc.jlab.org/CSUEApps/atlis/task/21441</a><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><b>Reason for Rollback of File Servers:<o:p></o:p></b></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">On RHEL 7 the default file system (XFS) defaults to creating inode numbers using 64 bits for new files on file systems larger than 2TBs. 32-bit software not built with Large File Support (LFS) get confused when stat()ing such files, usually
ending in crashes/missing UI pieces, etc. Additionally, legacy IOC systems have trouble even reading these file systems. It took some time to understand this problem mainly because it only affects our larger file systems (like opsdata) and most of our systems
are now 64-bit RHEL 7. <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">The previous opsfs and devfs were kept in production for just such a problem . All files will be sync’d back before roll back so nothing created or changed in the interim will be affected. The new file servers will be deployed later
with the same file system we currently use (EXT4) and care will be taken to ensure compatibility with legacy systems.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><b>Affected System List:<o:p></o:p></b></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">cagw<o:p></o:p></p>
<p class="MsoNormal">cagwhla<o:p></o:p></p>
<p class="MsoNormal">cagwhlb<o:p></o:p></p>
<p class="MsoNormal">cagwhlc<o:p></o:p></p>
<p class="MsoNormal">cagwhld<o:p></o:p></p>
<p class="MsoNormal">cagwlcls<o:p></o:p></p>
<p class="MsoNormal">cagwops<o:p></o:p></p>
<p class="MsoNormal">cagwrad<o:p></o:p></p>
<p class="MsoNormal">cagwsite<o:p></o:p></p>
<p class="MsoNormal">cagwts<o:p></o:p></p>
<p class="MsoNormal">crl<o:p></o:p></p>
<p class="MsoNormal">hlal00<o:p></o:p></p>
<p class="MsoNormal">hlal01<o:p></o:p></p>
<p class="MsoNormal">hlbl00<o:p></o:p></p>
<p class="MsoNormal">opsbat0<o:p></o:p></p>
<p class="MsoNormal">opsbat1<o:p></o:p></p>
<p class="MsoNormal">opsbat2<o:p></o:p></p>
<p class="MsoNormal">opsbat3<o:p></o:p></p>
<p class="MsoNormal">opsbat4<o:p></o:p></p>
<p class="MsoNormal">opscam1<o:p></o:p></p>
<p class="MsoNormal">opsfs<o:p></o:p></p>
<p class="MsoNormal">opsfs0<o:p></o:p></p>
<p class="MsoNormal">opsl00<o:p></o:p></p>
<p class="MsoNormal">opsl01<o:p></o:p></p>
<p class="MsoNormal">opsl02<o:p></o:p></p>
<p class="MsoNormal">opsl03<o:p></o:p></p>
<p class="MsoNormal">opsl04<o:p></o:p></p>
<p class="MsoNormal">opsl05<o:p></o:p></p>
<p class="MsoNormal">opsl06<o:p></o:p></p>
<p class="MsoNormal">opsl07<o:p></o:p></p>
<p class="MsoNormal">opsl08<o:p></o:p></p>
<p class="MsoNormal">opsl09<o:p></o:p></p>
<p class="MsoNormal">opsl10<o:p></o:p></p>
<p class="MsoNormal">opsl12<o:p></o:p></p>
<p class="MsoNormal">opsl13<o:p></o:p></p>
<p class="MsoNormal">opsl15<o:p></o:p></p>
<p class="MsoNormal">opsl632<o:p></o:p></p>
<p class="MsoNormal">opsla0<o:p></o:p></p>
<p class="MsoNormal">opsla2<o:p></o:p></p>
<p class="MsoNormal">opsld1<o:p></o:p></p>
<p class="MsoNormal">opslfb1<o:p></o:p></p>
<p class="MsoNormal">opslfb2<o:p></o:p></p>
<p class="MsoNormal">opslin1<o:p></o:p></p>
<p class="MsoNormal">opslin2<o:p></o:p></p>
<p class="MsoNormal">opsltab<o:p></o:p></p>
<p class="MsoNormal">opsmdaq0<o:p></o:p></p>
<p class="MsoNormal">opsns<o:p></o:p></p>
<p class="MsoNormal">opsnx00<o:p></o:p></p>
<p class="MsoNormal">opsnx01<o:p></o:p></p>
<p class="MsoNormal">opsnx02<o:p></o:p></p>
<p class="MsoNormal">opsnx03<o:p></o:p></p>
<p class="MsoNormal">opsnx1<o:p></o:p></p>
<p class="MsoNormal">opsnx2<o:p></o:p></p>
<p class="MsoNormal">opsweb<o:p></o:p></p>
<p class="MsoNormal">subopsl01<o:p></o:p></p>
<p class="MsoNormal">subopsl02<o:p></o:p></p>
<p class="MsoNormal">subopsl03<o:p></o:p></p>
<p class="MsoNormal">subopsl04<o:p></o:p></p>
<p class="MsoNormal">subopsl05<o:p></o:p></p>
<p class="MsoNormal">subopsl06<o:p></o:p></p>
<p class="MsoNormal">subopsl07<o:p></o:p></p>
<p class="MsoNormal">subopsl08<o:p></o:p></p>
<p class="MsoNormal">subopsl09<o:p></o:p></p>
<p class="MsoNormal">subopsl10<o:p></o:p></p>
<p class="MsoNormal">subopsl11<o:p></o:p></p>
<p class="MsoNormal">subopsl12<o:p></o:p></p>
<p class="MsoNormal">subopsl13<o:p></o:p></p>
<p class="MsoNormal">subopsl14<o:p></o:p></p>
<p class="MsoNormal">subopsl15<o:p></o:p></p>
<p class="MsoNormal">subopsl16<o:p></o:p></p>
<p class="MsoNormal">subopsl77<o:p></o:p></p>
<p class="MsoNormal">svclb92<o:p></o:p></p>
<p class="MsoNormal">svclbsy1<o:p></o:p></p>
<p class="MsoNormal">svclbsyds<o:p></o:p></p>
<p class="MsoNormal">svclin1<o:p></o:p></p>
<p class="MsoNormal">svclin2<o:p></o:p></p>
<p class="MsoNormal">svclna1<o:p></o:p></p>
<p class="MsoNormal">svclnl1<o:p></o:p></p>
<p class="MsoNormal">svclnl2<o:p></o:p></p>
<p class="MsoNormal">svclnl3<o:p></o:p></p>
<p class="MsoNormal">svclnl4<o:p></o:p></p>
<p class="MsoNormal">svclnl5<o:p></o:p></p>
<p class="MsoNormal">svclsl1<o:p></o:p></p>
<p class="MsoNormal">svclsl2<o:p></o:p></p>
<p class="MsoNormal">svclsl3<o:p></o:p></p>
<p class="MsoNormal">svclsl4<o:p></o:p></p>
<p class="MsoNormal">svclsl5<o:p></o:p></p>
<p class="MsoNormal">svcltsb1<o:p></o:p></p>
<p class="MsoNormal">svclw1<o:p></o:p></p>
<p class="MsoNormal">svclw2<o:p></o:p></p>
<p class="MsoNormal">svclw3<o:p></o:p></p>
<p class="MsoNormal">cryol01<o:p></o:p></p>
<p class="MsoNormal">dcpl01<o:p></o:p></p>
<p class="MsoNormal">dcpl02<o:p></o:p></p>
<p class="MsoNormal">dcpl03<o:p></o:p></p>
<p class="MsoNormal">dcpl04<o:p></o:p></p>
<p class="MsoNormal">dcpl05<o:p></o:p></p>
<p class="MsoNormal">devbat0<o:p></o:p></p>
<p class="MsoNormal">devbat1<o:p></o:p></p>
<p class="MsoNormal">devbat2<o:p></o:p></p>
<p class="MsoNormal">devcam1<o:p></o:p></p>
<p class="MsoNormal">devfs0<o:p></o:p></p>
<p class="MsoNormal">devfs<o:p></o:p></p>
<p class="MsoNormal">devl00<o:p></o:p></p>
<p class="MsoNormal">devl01<o:p></o:p></p>
<p class="MsoNormal">devl02<o:p></o:p></p>
<p class="MsoNormal">devl04<o:p></o:p></p>
<p class="MsoNormal">devl05<o:p></o:p></p>
<p class="MsoNormal">devl06<o:p></o:p></p>
<p class="MsoNormal">devl07<o:p></o:p></p>
<p class="MsoNormal">devl08<o:p></o:p></p>
<p class="MsoNormal">devl10<o:p></o:p></p>
<p class="MsoNormal">devl101<o:p></o:p></p>
<p class="MsoNormal">devl11<o:p></o:p></p>
<p class="MsoNormal">devl12<o:p></o:p></p>
<p class="MsoNormal">devl14<o:p></o:p></p>
<p class="MsoNormal">devl15<o:p></o:p></p>
<p class="MsoNormal">devl16<o:p></o:p></p>
<p class="MsoNormal">devl17<o:p></o:p></p>
<p class="MsoNormal">devl18<o:p></o:p></p>
<p class="MsoNormal">devl19<o:p></o:p></p>
<p class="MsoNormal">devl20<o:p></o:p></p>
<p class="MsoNormal">devl21<o:p></o:p></p>
<p class="MsoNormal">devl22<o:p></o:p></p>
<p class="MsoNormal">devl23<o:p></o:p></p>
<p class="MsoNormal">devl26<o:p></o:p></p>
<p class="MsoNormal">devl27<o:p></o:p></p>
<p class="MsoNormal">devl65<o:p></o:p></p>
<p class="MsoNormal">devl66<o:p></o:p></p>
<p class="MsoNormal">devl68<o:p></o:p></p>
<p class="MsoNormal">devl72<o:p></o:p></p>
<p class="MsoNormal">devl76<o:p></o:p></p>
<p class="MsoNormal">devl77<o:p></o:p></p>
<p class="MsoNormal">devl79<o:p></o:p></p>
<p class="MsoNormal">devllrf1<o:p></o:p></p>
<p class="MsoNormal">devlmmf1<o:p></o:p></p>
<p class="MsoNormal">devlsim01<o:p></o:p></p>
<p class="MsoNormal">devlsim02<o:p></o:p></p>
<p class="MsoNormal">devlsim03<o:p></o:p></p>
<p class="MsoNormal">devlsim1<o:p></o:p></p>
<p class="MsoNormal">devlsim2<o:p></o:p></p>
<p class="MsoNormal">devlsim3<o:p></o:p></p>
<p class="MsoNormal">devlsim4<o:p></o:p></p>
<p class="MsoNormal">devlsim5<o:p></o:p></p>
<p class="MsoNormal">devns<o:p></o:p></p>
<p class="MsoNormal">devnx00<o:p></o:p></p>
<p class="MsoNormal">devtest<o:p></o:p></p>
<p class="MsoNormal">devweb<o:p></o:p></p>
<p class="MsoNormal">digil01<o:p></o:p></p>
<p class="MsoNormal">digil02<o:p></o:p></p>
<p class="MsoNormal">digil03<o:p></o:p></p>
<p class="MsoNormal">digil04<o:p></o:p></p>
<p class="MsoNormal">digil05<o:p></o:p></p>
<p class="MsoNormal">dvlweb<o:p></o:p></p>
<p class="MsoNormal">eesdcpl1<o:p></o:p></p>
<p class="MsoNormal">eesl01<o:p></o:p></p>
<p class="MsoNormal">eesl04<o:p></o:p></p>
<p class="MsoNormal">eesl05<o:p></o:p></p>
<p class="MsoNormal">eeslcamacstand<o:p></o:p></p>
<p class="MsoNormal">eesllrf1<o:p></o:p></p>
<p class="MsoNormal">eesllrf2<o:p></o:p></p>
<p class="MsoNormal">gpbl01<o:p></o:p></p>
<p class="MsoNormal">ssglmpsts<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</body>
</html>