<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:"Intel Clear";
        panose-1:2 11 6 4 2 2 3 2 2 4;}
@font-face
        {font-family:"Intel Clear Pro";
        panose-1:2 11 8 4 2 2 2 6 2 1;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
span.EmailStyle20
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72" style="word-wrap:break-word">
<div class="WordSection1">
<p class="MsoNormal">Hello Ghada,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">We investigated this issue, we changed the boot order on controller-1(for standard_ext on setup2 which was the affected configuration). Now we have the right load on both controllers, the sanity report will come later for RC5.0. Master
 image is still affected by <a href="https://bugs.launchpad.net/starlingx/+bug/1928949">
https://bugs.launchpad.net/starlingx/+bug/1928949</a><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Kind regards,<o:p></o:p></p>
<p class="MsoNormal">Alex<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Khalil, Ghada <Ghada.Khalil@windriver.com> <br>
<b>Sent:</b> Thursday, May 20, 2021 9:54 PM<br>
<b>To:</b> Sun, Austin <austin.sun@intel.com>; Dimofte, Alexandru <alexandru.dimofte@intel.com>; starlingx-discuss@lists.starlingx.io; Miller, Frank <Frank.Miller@windriver.com>; Little, Scott <Scott.Little@windriver.com>; Panech, Davlet <Davlet.Panech@windriver.com><br>
<b>Subject:</b> RE: [Starlingx-discuss] Sanity RC 5.0 Test LAYERED build ISO 20210519T010439Z<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">If each controller is running a different load, then this would be a lab setup issue.
<a id="OWAAMBF8981A7E4E74C04913C63CF9A1AA836" href="mailto:alexandru.dimofte@intel.com">
<span style="font-family:"Calibri",sans-serif;text-decoration:none">@Dimofte, Alexandru</span></a> can you please investigate this?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">We will wait for the resolution of this issue before declaring the 5.0 release as ready.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thanks,<o:p></o:p></p>
<p class="MsoNormal">Ghada<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Sun, Austin <<a href="mailto:austin.sun@intel.com">austin.sun@intel.com</a>>
<br>
<b>Sent:</b> Wednesday, May 19, 2021 10:14 PM<br>
<b>To:</b> Dimofte, Alexandru <<a href="mailto:alexandru.dimofte@intel.com">alexandru.dimofte@intel.com</a>>;
<a href="mailto:starlingx-discuss@lists.starlingx.io">starlingx-discuss@lists.starlingx.io</a>; Miller, Frank <<a href="mailto:Frank.Miller@windriver.com">Frank.Miller@windriver.com</a>>; Little, Scott <<a href="mailto:Scott.Little@windriver.com">Scott.Little@windriver.com</a>>;
 Panech, Davlet <<a href="mailto:Davlet.Panech@windriver.com">Davlet.Panech@windriver.com</a>><br>
<b>Subject:</b> Re: [Starlingx-discuss] Sanity RC 5.0 Test LAYERED build ISO 20210519T010439Z<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div style="border:solid #9C6500 1.0pt;padding:2.0pt 2.0pt 2.0pt 2.0pt">
<p class="MsoNormal" style="line-height:12.0pt;background:#FFEB9C"><span style="font-size:10.0pt;color:red">[Please note: This e-mail is from an EXTERNAL e-mail address]<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal">Hi All:<o:p></o:p></p>
<p class="MsoNormal" style="text-indent:10.2pt">Some Investigation found on LP #1928949:<o:p></o:p></p>
<p class="MsoNormal">1) Not sure why controller-1 build info is master info. controller-0 is r/stx.5.0 , "20210519T042950Z" .
<o:p></o:p></p>
<p class="MsoNormal">     Is it possible ?  <a id="OWAAM6D138FC1B5F94352B1FBDE8EA93B4C9F" href="mailto:Frank.Miller@windriver.com">
<span style="font-family:"Calibri",sans-serif;text-decoration:none">@Miller, Frank</span></a> ,
<a id="OWAAM5BBC991D1E2844C0A9DC0D7D9A9C1CE1" href="mailto:Scott.Little@windriver.com">
<span style="font-family:"Calibri",sans-serif;text-decoration:none">@Little, Scott</span></a>
<a id="OWAAM953C0FB194B84ED6AEF5A4BBEB553ED2" href="mailto:Davlet.Panech@windriver.com">
<span style="font-family:"Calibri",sans-serif;text-decoration:none">@Panech, Davlet</span></a>:  could this happen possibly  ?  or setup issue ?
<o:p></o:p></p>
<p class="MsoNormal">2)  This issue is because rabbitmq pod running on controller-1 fail.
<o:p></o:p></p>
<p class="MsoNormal" style="text-indent:10.2pt;text-autospace:none">     + exec rabbitmq-server<o:p></o:p></p>
<p class="MsoNormal" style="text-indent:10.2pt;text-autospace:none">Failed to create thread: Resource temporarily unavailable (11)<o:p></o:p></p>
<p class="MsoNormal">    Once changes,  --pod-max-pids 750 to --pod-max-pids 2000 in /etc/sysconfig/kubelet on controller-1 .   reapply openstack the rabbitmq pod running on controller-1 successfully .
<o:p></o:p></p>
<p class="MsoNormal">    This change is related w/ [1]  merged on 0518    <o:p></o:p></p>
<p class="MsoNormal">     maybe need increase some value for pid limited ,  the question is what value should be appropriate.
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[1] <a href="https://urldefense.com/v3/__https:/review.opendev.org/c/starlingx/stx-puppet/*/791267/3/__;Kw!!AjveYdw8EvQ!O0bB7OtiCCPZIDipG-T_lalpmSeoNwF_PwryeAYLmGdp0heiK3ZEgweneLoTLtcRIzyc$">
https://review.opendev.org/c/starlingx/stx-puppet/+/791267/3/</a><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thanks.<o:p></o:p></p>
<p class="MsoNormal">BR<br>
Austin Sun. <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Dimofte, Alexandru <<a href="mailto:alexandru.dimofte@intel.com">alexandru.dimofte@intel.com</a>>
<br>
<b>Sent:</b> Wednesday, May 19, 2021 10:52 PM<br>
<b>To:</b> <a href="mailto:starlingx-discuss@lists.starlingx.io">starlingx-discuss@lists.starlingx.io</a><br>
<b>Subject:</b> [Starlingx-discuss] Sanity RC 5.0 Test LAYERED build ISO 20210519T010439Z<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Sanity Test from 2021-May-19 (<a href="https://urldefense.com/v3/__http:/mirror.starlingx.cengn.ca/mirror/starlingx/rc/5.0/centos/flock/20210519T010439Z/outputs/iso/__;!!AjveYdw8EvQ!O0bB7OtiCCPZIDipG-T_lalpmSeoNwF_PwryeAYLmGdp0heiK3ZEgweneLoTLri9xlkK$">http://mirror.starlingx.cengn.ca/mirror/starlingx/rc/5.0/centos/flock/20210519T010439Z/outputs/iso/</a>)<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Status: <span style="background:red;mso-highlight:red">RED</span><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">This might be related to:<o:p></o:p></p>
<p class="MsoNormal"><a href="https://urldefense.com/v3/__https:/bugs.launchpad.net/starlingx/*bug/1928949__;Kw!!AjveYdw8EvQ!O0bB7OtiCCPZIDipG-T_lalpmSeoNwF_PwryeAYLmGdp0heiK3ZEgweneLoTLoaBS07J$">https://bugs.launchpad.net/starlingx/+bug/1928949</a>  - stx-openstack
 apply-failed because of osh-openstack-rabbitmq install issue<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Helm-Chart used: <a href="https://urldefense.com/v3/__http:/mirror.starlingx.cengn.ca/mirror/starlingx/rc/5.0/centos/flock/20210519T010439Z/outputs/helm-charts/helm-charts-stx-openstack-centos-stable-versioned.tgz__;!!AjveYdw8EvQ!O0bB7OtiCCPZIDipG-T_lalpmSeoNwF_PwryeAYLmGdp0heiK3ZEgweneLoTLryQ0UxK$">
http://mirror.starlingx.cengn.ca/mirror/starlingx/rc/5.0/centos/flock/20210519T010439Z/outputs/helm-charts/helm-charts-stx-openstack-centos-stable-versioned.tgz</a><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Courier New""><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Courier New"">Regards,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Courier New"">Alexandru Dimofte</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:#1F497D"><o:p> </o:p></span></p>
<table class="MsoNormalTable" border="0" cellspacing="0" cellpadding="0" style="margin-left:.15in;border-collapse:collapse">
<tbody>
<tr>
<td width="132" valign="top" style="width:99.3pt;border:none;border-right:solid #0071C5 1.5pt;padding:0in 5.4pt 0in 5.4pt">
<p class="MsoNormal"><span style="color:#00B0F0">  </span><span lang="PL" style="color:#00B0F0"><img border="0" width="127" height="55" style="width:1.3263in;height:.5763in" id="Picture_x0020_1" src="cid:image001.png@01D74E6E.E0D1E4A0" alt="Logo

Description automatically generated"></span><span lang="PL" style="color:#00B0F0"><o:p></o:p></span></p>
</td>
<td width="488" valign="top" style="width:365.75pt;padding:0in 5.4pt 0in 5.4pt">
<p class="MsoNormal"><span style="font-size:16.0pt;font-family:"Intel Clear Pro",sans-serif;color:#00B0F0">Dimofte Alexandru<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Software Engineer<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">STARLINGX TEAM<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Skype no: +40 336403734<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Personal Mobile: +40 743167456<o:p></o:p></span></p>
<p class="MsoNormal"><span style="color:#00B0F0"><a href="mailto:alexandru.dimofte@intel.com"><span style="color:#00B0F0">alexandru.dimofte</span><span style="font-size:9.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">@intel.com</span></a></span><span style="font-size:9.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0"><o:p></o:p></span></p>
<p class="MsoNormal"><span lang="DE" style="font-size:8.0pt;font-family:"Intel Clear",sans-serif;color:#00B0F0">Intel Romania<o:p></o:p></span></p>
</td>
</tr>
</tbody>
</table>
<p class="MsoNormal" style="margin-bottom:12.0pt"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</div>
</body>
</html>