<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle18
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:#1F497D;}
span.EmailStyle19
        {mso-style-type:personal-compose;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal">Maria’s sanity test email from earlier today is reporting that system application-apply stx-openstack is failing (hanging) on both virtual and bare metal environments.  As discussed on the community call today the plan to debug these failures
 is for Ada’s team to reproduce the issue and then request assistance from the containers subteam to triage the failure today.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">On bare metal labs at our location we are not seeing these failures as of loads built on April 18<sup>th</sup> or later.  We were seeing these types of failures on virtual loads and a commit was merged today to address:
<a href="https://review.opendev.org/#/c/655240/">https://review.opendev.org/#/c/655240/</a>
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">In case this commit also addresses the failures reported earlier today in Maria’s sanity test email, Don Penney has triggered a new CENGN build to pick up this commit.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Frank<span style="color:#1F497D"><o:p></o:p></span></p>
<p class="MsoNormal"><a name="_MailEndCompose"><span style="color:#1F497D"><o:p> </o:p></span></a></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Miller, Frank <br>
<b>Sent:</b> Thursday, April 18, 2019 5:11 PM<br>
<b>To:</b> starlingx-discuss@lists.starlingx.io<br>
<b>Subject:</b> Update on sanity status <o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">This week has seen a number of issues that impacted sanity.  Two of the issues were addressed by commits earlier in the week as well as this morning.  It looks like at least one issue remains that is preventing the stx-openstack application
 from successfully coming up on some platforms.  This issue is being tracked by <a href="https://bugs.launchpad.net/starlingx/+bug/1825423">
https://bugs.launchpad.net/starlingx/+bug/1825423</a>  <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Until a solution is merged and sanity results are good, I suggest you revert to the most recent sane loads which were from the April 10 and April 11 builds:<o:p></o:p></p>
<p class="MsoNormal">Apr 11: <a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/20190411T013000Z/outputs/iso/">
http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/20190411T013000Z/outputs/iso/</a>
<o:p></o:p></p>
<p class="MsoNormal">Apr 10: <a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/20190410T013000Z/">
http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/20190410T013000Z/</a>
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">An update will be sent on Monday.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Frank<o:p></o:p></p>
<p class="MsoNormal">P.S. The most recent sanity report is indicating LP <a href="https://bugs.launchpad.net/starlingx/+bug/1825045">
https://bugs.launchpad.net/starlingx/+bug/1825045</a> is causing failures but while the symptoms look the same we do not feel this is actually the LP that is causing sanity to fail.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</body>
</html>