<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:"Intel Clear";
        panose-1:2 11 6 4 2 2 3 2 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
pre
        {mso-style-priority:99;
        mso-style-link:"HTML Preformatted Char";
        margin:0in;
        margin-bottom:.0001pt;
        font-size:10.0pt;
        font-family:"Courier New";}
span.HTMLPreformattedChar
        {mso-style-name:"HTML Preformatted Char";
        mso-style-priority:99;
        mso-style-link:"HTML Preformatted";
        font-family:"Courier New";}
span.EmailStyle22
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72" style="word-wrap:break-word">
<div class="WordSection1">
<p class="MsoNormal">Hi again Ghada,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I think I found the fix.<o:p></o:p></p>
<p class="MsoNormal">Some time ago because of this issue: <a href="https://bugs.launchpad.net/starlingx/+bug/1949771">
https://bugs.launchpad.net/starlingx/+bug/1949771</a><o:p></o:p></p>
<p class="MsoNormal">I created this commit: <a href="https://review.opendev.org/c/starlingx/test/+/818131">
https://review.opendev.org/c/starlingx/test/+/818131</a> which was merged on master branch but never cherry-picked on r/stx.6.0 branch.<o:p></o:p></p>
<p class="MsoNormal">I’m testing now locally if this will fix the issue on stx.6.0. If so,  I will create the needed change(s). I’ll try to be quick.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thanks!<o:p></o:p></p>
<p class="MsoNormal">Alex<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Dimofte, Alexandru <br>
<b>Sent:</b> Tuesday, January 25, 2022 3:57 PM<br>
<b>To:</b> Khalil, Ghada <Ghada.Khalil@windriver.com>; starlingx-discuss@lists.starlingx.io<br>
<b>Cc:</b> Church, Robert <Robert.Church@windriver.com>; Miller, Frank <Frank.Miller@windriver.com><br>
<b>Subject:</b> RE: [Starlingx-discuss] Sanity RC.6.0 Test LAYERED build ISO 20220119T184201Z<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Hi Ghada, <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I triggered again the Standard and Standard Ext bare-metal + virtual for stx.6.0.<o:p></o:p></p>
<p class="MsoNormal">I remember that last time I tried 6 times on Standard bare-metal, always seeing this issue. For master(layered) builds I am using master branch and for StaringX6.0 I am using r/stx.6.0 branch(I will compare today and check the diffs).<o:p></o:p></p>
<p class="MsoNormal">What I can tell is that before adding the OSDs in the Provision.robot is checked if all hosts are ready(both controllers are unlocked, both computes are LOCKED, this is why the Simplex and Duplex are fine).<o:p></o:p></p>
<p class="MsoNormal">Then checking why the computes are locked I observed that in the unlock computes function it waits 30mins for platform-integ-apps to be APPLIED.<o:p></o:p></p>
<p class="MsoNormal">On Standard and Standard Ext the platform-integ-apps remained in uploaded state and not applied. I checked after few hours ant it was still on uploaded state.
<o:p></o:p></p>
<p class="MsoNormal">I will check again today and hopefully I will find any clue...<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Br,<o:p></o:p></p>
<p class="MsoNormal">Alex<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Khalil, Ghada <<a href="mailto:Ghada.Khalil@windriver.com">Ghada.Khalil@windriver.com</a>>
<br>
<b>Sent:</b> Monday, January 24, 2022 11:39 PM<br>
<b>To:</b> Dimofte, Alexandru <<a href="mailto:alexandru.dimofte@intel.com">alexandru.dimofte@intel.com</a>>;
<a href="mailto:starlingx-discuss@lists.starlingx.io">starlingx-discuss@lists.starlingx.io</a><br>
<b>Cc:</b> Church, Robert <<a href="mailto:Robert.Church@windriver.com">Robert.Church@windriver.com</a>>; Miller, Frank <<a href="mailto:Frank.Miller@windriver.com">Frank.Miller@windriver.com</a>><br>
<b>Subject:</b> RE: [Starlingx-discuss] Sanity RC.6.0 Test LAYERED build ISO 20220119T184201Z<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Hi Alex,<o:p></o:p></p>
<p class="MsoNormal">Can you please try the stx.6.0 sanity again?  It would be good to get more information about how intermittent the issue reported below is.
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">From the comments in the LP from Bob Church (who reviewed the LP logs), it appears that the sanity suite is perhaps checking the app state too early.  Is there a difference in the sanity steps executed for stx.6.0 and stx master?  There
 shouldn’t be much difference between the two branches in relation to the platform-integ-apps, so it’s surprising that we are hitting this issue on one branch and not the other.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thanks,<o:p></o:p></p>
<p class="MsoNormal">Ghada<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Dimofte, Alexandru <<a href="mailto:alexandru.dimofte@intel.com">alexandru.dimofte@intel.com</a>>
<br>
<b>Sent:</b> Friday, January 21, 2022 6:17 AM<br>
<b>To:</b> <a href="mailto:starlingx-discuss@lists.starlingx.io">starlingx-discuss@lists.starlingx.io</a><br>
<b>Subject:</b> [Starlingx-discuss] Sanity RC.6.0 Test LAYERED build ISO 20220119T184201Z<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div style="border:solid #9C6500 1.0pt;padding:2.0pt 2.0pt 2.0pt 2.0pt">
<p class="MsoNormal" style="line-height:12.0pt;background:#FFEB9C"><span style="font-size:10.0pt;color:red">[Please note: This e-mail is from an EXTERNAL e-mail address]<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal">Sanity Test from 2022-January-19 (<a href="https://urldefense.com/v3/__http:/mirror.starlingx.cengn.ca/mirror/starlingx/rc/6.0/centos/flock/20220119T184201Z/outputs/iso/__;!!AjveYdw8EvQ!PFW2bVpa4RRs6GNHthfc07aIBEjHiIDUWQ1H4EbHhkuP18DBfzogx9v2E18RkQuZKfw2$">http://mirror.starlingx.cengn.ca/mirror/starlingx/rc/6.0/centos/flock/20220119T184201Z/outputs/iso/</a>)<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Status: <span style="background:red;mso-highlight:red">RED</span><o:p></o:p></p>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"><o:p> </o:p></span></pre>
<pre><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">Helm-Chart used: <a href="https://urldefense.com/v3/__http:/mirror.starlingx.cengn.ca/mirror/starlingx/rc/6.0/centos/flock/20220119T184201Z/outputs/helm-charts/helm-charts-stx-openstack-centos-stable-versioned.tgz__;!!AjveYdw8EvQ!PFW2bVpa4RRs6GNHthfc07aIBEjHiIDUWQ1H4EbHhkuP18DBfzogx9v2E18RkZx7IMgU$">http://mirror.starlingx.cengn.ca/mirror/starlingx/rc/6.0/centos/flock/20220119T184201Z/outputs/helm-charts/helm-charts-stx-openstack-centos-stable-versioned.tgz</a><o:p></o:p></span></pre>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Standard configuration and sporadically standard ext configuration on bare-metal and virtual setups are affected by:
<o:p></o:p></p>
<p class="MsoNormal"><a href="https://urldefense.com/v3/__https:/bugs.launchpad.net/starlingx/*bug/1958630__;Kw!!AjveYdw8EvQ!PFW2bVpa4RRs6GNHthfc07aIBEjHiIDUWQ1H4EbHhkuP18DBfzogx9v2E18RkT5OeXtS$">https://bugs.launchpad.net/starlingx/+bug/1958630</a> - platform-integ-apps
 booting != completed or uploaded != applied issues<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Kind regards,<o:p></o:p></p>
<p class="MsoNormal">Alexandru Dimofte<o:p></o:p></p>
<p class="MsoNormal"><span style="color:#1F497D"><o:p> </o:p></span></p>
<table class="MsoNormalTable" border="0" cellspacing="0" cellpadding="0" style="margin-left:.15in;border-collapse:collapse">
<tbody>
<tr>
<td width="132" valign="top" style="width:99.3pt;border:none;border-right:solid #0071C5 1.5pt;padding:0in 5.4pt 0in 5.4pt">
<p class="MsoNormal"><span style="color:#00B0F0">  </span><span lang="PL" style="color:#00B0F0"><img border="0" width="127" height="54" style="width:1.325in;height:.5666in" id="Picture_x0020_1" src="cid:image001.png@01D81208.35552340" alt="Logo

Description automatically generated"></span><span lang="PL" style="color:#00B0F0"><o:p></o:p></span></p>
</td>
<td width="488" valign="top" style="width:365.75pt;padding:0in 5.4pt 0in 5.4pt">
<p class="MsoNormal"><span style="font-size:14.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Dimofte Alexandru<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Software Engineer<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">PMCE TEAM<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Personal Mobile: +40 743167456<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0"><a href="mailto:alexandru.dimofte@intel.com"><span style="color:#00B0F0">alexandru.dimofte@intel.com</span></a><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Str. Iancu Fotea nr. 38, mun. Galati, jud. Galati, 800017, ROMANIA<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="DE" style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Intel Romania<o:p></o:p></span></p>
</td>
</tr>
</tbody>
</table>
<p class="MsoNormal" style="margin-bottom:12.0pt"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</div>
</body>
</html>