<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:Wingdings;
        panose-1:5 0 0 0 0 0 0 0 0 0;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
p.MsoListParagraph, li.MsoListParagraph, div.MsoListParagraph
        {mso-style-priority:34;
        margin-top:0in;
        margin-right:0in;
        margin-bottom:0in;
        margin-left:.5in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Calibri",sans-serif;}
p.msonormal0, li.msonormal0, div.msonormal0
        {mso-style-name:msonormal;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
p.msonormal00, li.msonormal00, div.msonormal00
        {mso-style-name:msonormal0;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;}
p.msonormal000, li.msonormal000, div.msonormal000
        {mso-style-name:msonormal00;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
p.msochpdefault, li.msochpdefault, div.msochpdefault
        {mso-style-name:msochpdefault;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:10.0pt;
        font-family:"Calibri",sans-serif;}
span.emailstyle19
        {mso-style-name:emailstyle19;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.emailstyle21
        {mso-style-name:emailstyle21;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.emailstyle22
        {mso-style-name:emailstyle22;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.emailstyle23
        {mso-style-name:emailstyle23;
        font-family:"Calibri",sans-serif;
        color:#1F497D;}
span.emailstyle24
        {mso-style-name:emailstyle24;
        font-family:"Calibri",sans-serif;
        color:#1F497D;}
span.emailstyle28
        {mso-style-name:emailstyle28;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.apple-converted-space
        {mso-style-name:apple-converted-space;}
span.EmailStyle280
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle31
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
/* List Definitions */
@list l0
        {mso-list-id:1717511435;
        mso-list-type:hybrid;
        mso-list-template-ids:-1909287418 -1721436222 67698691 67698693 67698689 67698691 67698693 67698689 67698691 67698693;}
@list l0:level1
        {mso-level-start-at:0;
        mso-level-number-format:bullet;
        mso-level-text:-;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:"Calibri",sans-serif;
        mso-fareast-font-family:Calibri;}
@list l0:level2
        {mso-level-number-format:bullet;
        mso-level-text:o;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:"Courier New";}
@list l0:level3
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:Wingdings;}
@list l0:level4
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:Symbol;}
@list l0:level5
        {mso-level-number-format:bullet;
        mso-level-text:o;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:"Courier New";}
@list l0:level6
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:Wingdings;}
@list l0:level7
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:Symbol;}
@list l0:level8
        {mso-level-number-format:bullet;
        mso-level-text:o;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:"Courier New";}
@list l0:level9
        {mso-level-number-format:bullet;
        mso-level-text:;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-.25in;
        font-family:Wingdings;}
ol
        {margin-bottom:0in;}
ul
        {margin-bottom:0in;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt">Hi Austin, <o:p></o:p></span></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt">An update about the EB that you sent us (</span><span style="color:black"><a href="http://dcp-dev.intel.com/pub/starlingx/stx-eng-build/314/outputs" target="_blank">http://dcp-dev.intel.com/pub/starlingx/stx-eng-build/314/outputs</a>)</span><span lang="ES" style="font-size:11.0pt">,
</span><span style="font-size:11.0pt">in summary:</span><span lang="ES" style="font-size:11.0pt"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p> </o:p></span></p>
<ul style="margin-top:0in" type="disc">
<li class="MsoListParagraph" style="margin-left:0in;mso-list:l0 level1 lfo1"><span style="font-size:11.0pt">A full sanity was executed for all configs once. All TC passed.<o:p></o:p></span></li><li class="MsoListParagraph" style="margin-left:0in;mso-list:l0 level1 lfo1"><span style="font-size:11.0pt">An Standard with external storage was installed 3 times (because this is where the issue appeared more times), tiller pod was running fine.<o:p></o:p></span></li><li class="MsoListParagraph" style="margin-left:0in;mso-list:l0 level1 lfo1"><span style="font-size:11.0pt">Port range is also like this:<o:p></o:p></span></li></ul>
<p class="MsoListParagraph"><span style="font-size:11.0pt">controller-0:~$ cat /proc/sys/net/ipv4/ip_local_port_range<o:p></o:p></span></p>
<p class="MsoListParagraph"><span style="font-size:11.0pt">32768   60999<o:p></o:p></span></p>
<p class="MsoListParagraph"><span style="font-size:11.0pt">If I understood, we had good luck the three times and tiller port was not in use.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p></o:p></span></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt">Please, let me know if you need additional details.<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt">Thanks & Regards<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt">Cristopher Lemus<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt"><o:p> </o:p></span></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="color:black">From: </span></b><span style="color:black">"Church, Robert" <Robert.Church@windriver.com><br>
<b>Date: </b>Tuesday, November 12, 2019 at 12:15 PM<br>
<b>To: </b>"Qian, Bin" <Bin.Qian@windriver.com>, "Lemus Contreras, Cristopher J" <cristopher.j.lemus.contreras@intel.com>, "Jones, Bruce E" <bruce.e.jones@intel.com>, "Khalil, Ghada" <Ghada.Khalil@windriver.com>, "Sun, Austin" <austin.sun@intel.com>, "Perez
 Ibarra, Maria G" <maria.g.perez.ibarra@intel.com>, "starlingx-discuss@lists.starlingx.io" <starlingx-discuss@lists.starlingx.io>, "Cabrales, Ada" <ada.cabrales@intel.com><br>
<b>Cc: </b>"Eslimi, Dariush" <Dariush.Eslimi@windriver.com><br>
<b>Subject: </b>Re: [Starlingx-discuss] Sanity Test - ISO 20191111<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p> </o:p></span></p>
</div>
<p class="MsoNormal"><span style="font-size:11.0pt">I think this is commit: https://opendev.org/starlingx/config-files/commit/fbc09b8db8a14fbf24976a0f7d8924af7a330f85</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt">Bob</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt"> </span><o:p></o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="color:black">From: </span></b><span style="color:black">"Qian, Bin" <Bin.Qian@windriver.com><br>
<b>Date: </b>Tuesday, November 12, 2019 at 12:12 PM<br>
<b>To: </b>"Lemus Contreras, Cristopher J" <cristopher.j.lemus.contreras@intel.com>, "Jones, Bruce E" <bruce.e.jones@intel.com>, "Khalil, Ghada" <Ghada.Khalil@windriver.com>, "Sun, Austin" <austin.sun@intel.com>, "Perez Ibarra, Maria G" <maria.g.perez.ibarra@intel.com>,
 "starlingx-discuss@lists.starlingx.io" <starlingx-discuss@lists.starlingx.io>, "Cabrales, Ada" <ada.cabrales@intel.com><br>
<b>Cc: </b>"Eslimi, Dariush" <Dariush.Eslimi@windriver.com><br>
<b>Subject: </b>Re: [Starlingx-discuss] Sanity Test - ISO 20191111</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt"> </span><o:p></o:p></p>
</div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">Thanks Cristopher,</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">I found the same on latest build as well. </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">I further look into the sys config, I found that recently the config-files/initscripts-config/files/sysctl.conf was altered, and the following was removed.</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"># Limit local port range</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">net.ipv4.ip_local_port_range = 49216 61000</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">net.ipv4.tcp_tw_reuse = 1</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">The file is deployed to /etc/sysctl.conf, the setting is the range of local port.</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">Probably some changes that messed up?</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">Thanks,</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">Bin</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<div class="MsoNormal" align="center" style="text-align:center"><span style="font-family:"Times New Roman",serif;color:black">
<hr size="1" width="100%" align="center">
</span></div>
<div id="divRpF401450">
<p class="MsoNormal" style="margin-bottom:12.0pt"><b><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">From:</span></b><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> Lemus Contreras, Cristopher J [cristopher.j.lemus.contreras@intel.com]<br>
<b>Sent:</b> Tuesday, November 12, 2019 9:56 AM<br>
<b>To:</b> Qian, Bin; Jones, Bruce E; Khalil, Ghada; Sun, Austin; Perez Ibarra, Maria G; starlingx-discuss@lists.starlingx.io; Cabrales, Ada<br>
<b>Cc:</b> Eslimi, Dariush<br>
<b>Subject:</b> Re: [Starlingx-discuss] Sanity Test - ISO 20191111</span><o:p></o:p></p>
</div>
<div>
<div>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">Hi Bin,</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">I checked on the configs that failed with today’s build (BUILD_ID="20191112T000000Z"), and I got this output on both:</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">[sysadmin@controller-0 ~(keystone_admin)]$ cat /proc/sys/net/ipv4/ip_local_port_range</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">32768    60999</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">Which I think, causes the conflict with port 44134.</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">With this build, the two configs that failed are Standard with Dedicated Storage (2+2+2), virtual and baremetal environments.</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">Please, let me know if you need further details.</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">Thanks & Regards</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black">Cristopher Lemus</span><o:p></o:p></p>
<p class="MsoNormal"><span lang="ES" style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="color:black">From: </span></b><span style="color:black">"Qian, Bin" <Bin.Qian@windriver.com><br>
<b>Date: </b>Tuesday, November 12, 2019 at 11:38 AM<br>
<b>To: </b>"Jones, Bruce E" <bruce.e.jones@intel.com>, "Khalil, Ghada" <Ghada.Khalil@windriver.com>, "Sun, Austin" <austin.sun@intel.com>, "Perez Ibarra, Maria G" <maria.g.perez.ibarra@intel.com>, "starlingx-discuss@lists.starlingx.io" <starlingx-discuss@lists.starlingx.io>,
 "Cabrales, Ada" <ada.cabrales@intel.com><br>
<b>Cc: </b>"Eslimi, Dariush" <Dariush.Eslimi@windriver.com><br>
<b>Subject: </b>Re: [Starlingx-discuss] Sanity Test - ISO 20191111</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">While the lab is still being installed, I check the collected logs. From system inventory's point of view, all nodes provisioned successfully. The impact of my commits
 ends after controller-0 being provisioned (unlocked successfully the 1s time). </span>
<o:p></o:p></p>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">As Bob brought up in the comment, the port 44134 was taken by other process (as client port). it could be the rage setting of ephemeral port incorrect. I check a
 couple of our existing lab, I got:</span><o:p></o:p></p>
</div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">cat /proc/sys/net/ipv4/ip_local_port_range</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">49216   61000</span><o:p></o:p></p>
</div>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">which excludes target port 44134 from being randomly assigned as client port.</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">I think it might be a good start that someone have access to the labs that failed the sanity to check the same settings?</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">Thanks,</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">Bin</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<div>
<div class="MsoNormal" align="center" style="text-align:center"><span style="font-family:"Times New Roman",serif;color:black">
<hr size="1" width="100%" align="center">
</span></div>
<div id="divRpF403774">
<p class="MsoNormal" style="margin-bottom:12.0pt"><b><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">From:</span></b><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> Qian, Bin [Bin.Qian@windriver.com]<br>
<b>Sent:</b> Tuesday, November 12, 2019 8:26 AM<br>
<b>To:</b> Jones, Bruce E; Khalil, Ghada; Sun, Austin; Perez Ibarra, Maria G; starlingx-discuss@lists.starlingx.io; Cabrales, Ada<br>
<b>Cc:</b> Eslimi, Dariush<br>
<b>Subject:</b> Re: [Starlingx-discuss] Sanity Test - ISO 20191111</span><o:p></o:p></p>
</div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">The 2 commits are inter related, taking one out will fail. I am trying to reproduce the issue. Not sure what exactly causes the issue yet. The commits work no difference
 on virtual or </span><span style="font-size:9.0pt;font-family:"Courier New";color:#333333;background:white">baremetal. </span><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">
</span><o:p></o:p></p>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">Bin</span><o:p></o:p></p>
<div>
<div class="MsoNormal" align="center" style="text-align:center"><span style="font-family:"Times New Roman",serif;color:black">
<hr size="1" width="100%" align="center">
</span></div>
<div id="divRpF244444">
<p class="MsoNormal" style="margin-bottom:12.0pt"><b><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black">From:</span></b><span style="font-size:10.0pt;font-family:"Tahoma",sans-serif;color:black"> Jones, Bruce E [bruce.e.jones@intel.com]<br>
<b>Sent:</b> Tuesday, November 12, 2019 7:54 AM<br>
<b>To:</b> Khalil, Ghada; Sun, Austin; Perez Ibarra, Maria G; starlingx-discuss@lists.starlingx.io; Cabrales, Ada; Qian, Bin<br>
<b>Cc:</b> Eslimi, Dariush<br>
<b>Subject:</b> RE: [Starlingx-discuss] Sanity Test - ISO 20191111</span><o:p></o:p></p>
</div>
<div>
<div>
<p class="MsoNormal"><span style="font-size:11.0pt;color:#1F497D">Is it possible to bisect the two suspicious commits, or otherwise figure out which parts of the commits are the root cause?</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:#1F497D"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:#1F497D">      brucej</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:#1F497D"> </span><o:p></o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><a name="_____replyseparator"></a><b><span style="font-size:11.0pt;color:black">From:</span></b><span style="font-size:11.0pt;color:black"> Khalil, Ghada [mailto:Ghada.Khalil@windriver.com]
<br>
<b>Sent:</b> Tuesday, November 12, 2019 7:26 AM<br>
<b>To:</b> Sun, Austin <austin.sun@intel.com>; Perez Ibarra, Maria G <maria.g.perez.ibarra@intel.com>; starlingx-discuss@lists.starlingx.io; Cabrales, Ada <ada.cabrales@intel.com>; Qian, Bin <Bin.Qian@windriver.com><br>
<b>Cc:</b> Eslimi, Dariush <Dariush.Eslimi@windriver.com><br>
<b>Subject:</b> Re: [Starlingx-discuss] Sanity Test - ISO 20191111</span><o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:#1F497D">Adding Bin explicitly to the email thread</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:#1F497D"> </span><o:p></o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:11.0pt;color:black">From:</span></b><span style="font-size:11.0pt;color:black"> Sun, Austin [<a href="mailto:austin.sun@intel.com" target="_blank">mailto:austin.sun@intel.com</a>]
<br>
<b>Sent:</b> Tuesday, November 12, 2019 4:02 AM<br>
<b>To:</b> Perez Ibarra, Maria G; <a href="mailto:starlingx-discuss@lists.starlingx.io" target="_blank">
starlingx-discuss@lists.starlingx.io</a>; Cabrales, Ada<br>
<b>Subject:</b> Re: [Starlingx-discuss] Sanity Test - ISO 20191111</span><o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:black">Hi All:</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:black">     About this </span>
<span style="color:black"><a href="https://bugs.launchpad.net/starlingx/+bug/1851533" target="_blank">https://bugs.launchpad.net/starlingx/+bug/1851533</a></span><span style="font-size:11.0pt;color:black">, after triage ,</span><o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.15in"><span style="font-size:11.0pt;color:black">this issue should be caused by
</span><span style="color:black"><a href="https://review.opendev.org/#/c/691714/" target="_blank">https://review.opendev.org/#/c/691714/</a>
</span><span style="font-size:11.0pt;color:black">and</span><span style="color:black">
<a href="https://review.opendev.org/#/c/692439" target="_blank">https://review.opendev.org/#/c/692439</a></span><o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.15in"><span style="font-size:11.0pt;color:black">after revert this commit , AIO on virtual environment can be deployed successfully
</span><o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.15in"><span style="color:black"><a id="OWAAM7A6EC52F8B2742828BB8586D75CBB981" href="mailto:ada.cabrales@intel.com" target="_blank"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;text-decoration:none">@Cabrales,
 Ada</span></a></span><span style="font-size:11.0pt;color:black"> and Maria :  would you like to verify this by EB which reverts 691714/692439 ?
</span><o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.15in"><span style="font-size:11.0pt;color:black"> EB is available on 
</span><span style="color:black"><a href="http://dcp-dev.intel.com/pub/starlingx/stx-eng-build/314/outputs" target="_blank">http://dcp-dev.intel.com/pub/starlingx/stx-eng-build/314/outputs</a>
</span><o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.15in"><span style="color:black"> </span><span style="font-size:11.0pt;color:black">This change 691714 will cause</span><span style="color:black">
<a href="https://bugs.launchpad.net/starlingx/+bug/1852155" target="_blank">https://bugs.launchpad.net/starlingx/+bug/1852155</a>
</span><span style="font-size:11.0pt;color:black">issue too. </span><o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.15in"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.15in"><b><span style="font-size:11.0pt;color:black">@Qianbin</span></b><span style="font-size:11.0pt;color:black"> :  would you double check these two issues caused by 691714/692439 gerrit ?</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:black">Thanks.</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:black">BR</span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:black">Austin Sun. </span>
<o:p></o:p></p>
<p class="MsoNormal" style="text-indent:.15in"><span style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b><span style="font-size:11.0pt;color:black">From:</span></b><span style="font-size:11.0pt;color:black"> Perez Ibarra, Maria G <<a href="mailto:maria.g.perez.ibarra@intel.com" target="_blank">maria.g.perez.ibarra@intel.com</a>>
<br>
<b>Sent:</b> Tuesday, November 12, 2019 1:17 AM<br>
<b>To:</b> <a href="mailto:starlingx-discuss@lists.starlingx.io" target="_blank">
starlingx-discuss@lists.starlingx.io</a><br>
<b>Subject:</b> [Starlingx-discuss] Sanity Test - ISO 20191111</span><o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt"><b><span style="font-size:12.0pt;font-family:"Courier New";color:black">Status of the Sanity Test for last CENGN ISO:<span class="apple-converted-space"> </span></span></b><i><span style="font-size:12.0pt;font-family:"Courier New";color:black">bootimage.iso
 from 2019-November-11<span class="apple-converted-space"> </span></span></i><span style="font-size:12.0pt;font-family:"Courier New";color:black">(</span><span style="font-size:12.0pt;font-family:"Times New Roman",serif;color:black"><a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/20191111T000000Z/outputs/iso/" target="_blank"><span style="font-family:"Courier New";color:#954F72">link</span></a></span><span style="font-size:12.0pt;font-family:"Courier New";color:black">)</span><o:p></o:p></p>
<p class="MsoNormal" style="orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Courier New";color:black">Status:<span class="apple-converted-space"> </span></span><b><span style="font-size:12.0pt;font-family:"Courier New";color:red">RED</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Courier New";color:black">===========================================</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Courier New";color:black">Sanity Test is executed in a<span class="apple-converted-space"> </span><i><u>Containers – Bare Metal Environment</u></i></span><o:p></o:p></p>
<p class="MsoNormal" style="orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black">AIO –<span class="apple-converted-space"> </span>Simplex</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Setup             04 TCs<span class="apple-converted-space"> </span>[PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Provisioning      01 TCs [</span><span style="font-size:9.0pt;font-family:"Courier New";color:red">FAIL</span><span style="font-size:9.0pt;font-family:"Courier New";color:black">]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity OpenStack <span class="apple-converted-space"> </span>49<span class="apple-converted-space"> </span>TCs [</span><span style="font-size:9.0pt;font-family:"Courier New";color:#FFC000">BLOCKED</span><span style="font-size:9.0pt;font-family:"Courier New";color:black">]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity Platform   07<span class="apple-converted-space"> </span>TCs [</span><span style="font-size:9.0pt;font-family:"Courier New";color:#FFC000">BLOCKED</span><span style="font-size:9.0pt;font-family:"Courier New";color:black">]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">TOTAL:<span class="apple-converted-space"> </span>[ 61 TCs ]</span><o:p></o:p></p>
<p class="MsoNormal" style="orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black">AIO –<span class="apple-converted-space"> </span>Duplex</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Setup             04 TCs<span class="apple-converted-space"> </span>[PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Provisioning      01 TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity OpenStack <span class="apple-converted-space"> </span>52<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity Platform   07<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">TOTAL:<span class="apple-converted-space"> </span>[ 64 TCs ]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black">Standard<span class="apple-converted-space"> </span>-<span class="apple-converted-space"> </span>Local Storage (2+2)</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Setup             04<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Provisioning      01 TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity OpenStack <span class="apple-converted-space"> </span>52<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity Platform   08<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">TOTAL:<span class="apple-converted-space"> </span>[ 65 TCs ]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Times New Roman",serif;color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black">Standard<span class="apple-converted-space"> </span>- Dedicated<span class="apple-converted-space"> </span>Storage (2+2+2)</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Setup           <span class="apple-converted-space"> </span> 04<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Provisioning      01 TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity OpenStack <span class="apple-converted-space"> </span>52<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity Platform   09<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">TOTAL:<span class="apple-converted-space"> </span>[ 66 TCs ]</span><o:p></o:p></p>
<p class="MsoNormal" style="orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Times New Roman",serif;color:black">===========================================</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Times New Roman",serif;color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Times New Roman",serif;color:black">Sanity Test is executed in a<span class="apple-converted-space"> </span><i><u>Containers – Virtual Environment</u></i></span><o:p></o:p></p>
<p class="MsoNormal" style="orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black">AIO –<span class="apple-converted-space"> </span>Simplex</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Setup             04 TCs<span class="apple-converted-space"> </span>[PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Provisioning      01 TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity OpenStack <span class="apple-converted-space"> </span>49<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity Platform   07<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">TOTAL:<span class="apple-converted-space"> </span>[ 61 TCs ]</span><o:p></o:p></p>
<p class="MsoNormal" style="orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black">AIO –<span class="apple-converted-space"> </span>Duplex</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Setup             04 TCs<span class="apple-converted-space"> </span>[PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Provisioning      01 TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity OpenStack <span class="apple-converted-space"> </span>52<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity Platform   07<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">TOTAL:<span class="apple-converted-space"> </span>[ 64 TCs ]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black">Standard<span class="apple-converted-space"> </span>-<span class="apple-converted-space"> </span>Local Storage (2+2)</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Setup             04<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Provisioning      01 TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity OpenStack <span class="apple-converted-space"> </span>52<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity Platform   08<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">TOTAL:<span class="apple-converted-space"> </span>[ 65 TCs ]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:12.0pt;font-family:"Times New Roman",serif;color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<b><span style="font-size:9.0pt;font-family:"Courier New";color:black">Standard<span class="apple-converted-space"> </span>- Dedicated<span class="apple-converted-space"> </span>Storage (2+2+2)</span></b><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Setup           <span class="apple-converted-space"> </span> 04<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Provisioning      01 TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity OpenStack <span class="apple-converted-space"> </span>52<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">Sanity Platform   09<span class="apple-converted-space"> </span>TCs [PASS]</span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p style="margin:0in;margin-bottom:.0001pt;orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-size:9.0pt;font-family:"Courier New";color:black">TOTAL:<span class="apple-converted-space"> </span>[ 66 TCs ]</span><o:p></o:p></p>
<p class="MsoNormal" style="orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal" style="orphans:auto;text-align:start;widows:auto;word-spacing:0px">
<span style="font-family:"Courier New";color:black">List of docker images</span><span style="color:black"> :
<a href="http://lists.starlingx.io/pipermail/starlingx-discuss/2019-November/006894.html" target="_blank">
http://lists.starlingx.io/pipermail/starlingx-discuss/2019-November/006894.html</a></span><o:p></o:p></p>
<p class="MsoNormal"><b><span style="font-family:"Courier New";color:black"> </span></b><o:p></o:p></p>
<p class="MsoNormal"><b><span style="font-family:"Courier New";color:black">BUG</span></b><o:p></o:p></p>
<p class="MsoNormal"><span style="font-family:"Courier New";color:black">platform-integ-apps apply failed - tiller on Crash
</span><span style="color:black"><a href="https://bugs.launchpad.net/starlingx/+bug/1851533" target="_blank">https://bugs.launchpad.net/starlingx/+bug/1851533</a></span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-family:"Courier New";color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><b><span style="font-family:"Courier New";color:black"> </span></b><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black">regards</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black">Maria G</span><o:p></o:p></p>
<p class="MsoNormal"><span style="color:black"> </span><o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:11.0pt;color:black"> </span><o:p></o:p></p>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</body>
</html>