<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
p.msonormal0, li.msonormal0, div.msonormal0
        {mso-style-name:msonormal;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
span.EmailStyle18
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle19
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle20
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle21
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle22
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle23
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle24
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle25
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle26
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle27
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle29
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal">Thanks Austin for the very good analysis.  The initial theory discussed on today’s build call is the tis version was not updated for package [1].  Saul/Scott took the action to verify this.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">In the meantime, Nicolae can you run a monolithic build sanity so we can confirm if the ISO is sane or has other issues as well?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Frank<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Sun, Austin <austin.sun@intel.com> <br>
<b>Sent:</b> Thursday, May 07, 2020 7:59 AM<br>
<b>To:</b> Jascanu, Nicolae <nicolae.jascanu@intel.com>; starlingx-discuss@lists.starlingx.io; Little, Scott <Scott.Little@windriver.com><br>
<b>Subject:</b> Re: [Starlingx-discuss] Sanity Master Test LAYERED build ISO 20200506T013246Z bug#1877035<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Hi All:<o:p></o:p></p>
<p class="MsoNormal" style="text-indent:10.2pt">After further analysis this issue with Yan.  Suspect there is bug hiding in cengn layer build.
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Scott : would you like to check cengn build env ? <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">The details analysis :<o:p></o:p></p>
<p class="MsoNormal">Latest puppet-keystone rpm built from cengn should include change [1] which was merged by April 28<sup>th</sup>.
<o:p></o:p></p>
<p class="MsoNormal">From distro layer build 0505 [3] and latest distro output , puppet-keystone includes change [1].<o:p></o:p></p>
<p class="MsoNormal">But if we extract puppet-keystone in 0506 iso built  from layer build [2] or latest iso [5] ,  it is surprised this change [1] was not included.  so bug#1877035 shows-up based on 0506 and 0507 iso.
<o:p></o:p></p>
<p class="MsoNormal">If we extract puppet-keystone from 0506 iso built from monolithic [4], the change [1] was included in puppet-keystone, and ansible  provision pass it.
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">BTW: layer build  in my local setup (cross build flock or flock layer only build )  did not show this issue, so it should not be related to layer build script.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[1] <a href="https://review.opendev.org/#/c/716842/">https://review.opendev.org/#/c/716842/</a><o:p></o:p></p>
<p class="MsoNormal">[2] <a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/flock/20200506T013246Z/outputs/iso/bootimage.iso">
http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/flock/20200506T013246Z/outputs/iso/bootimage.iso</a>
<o:p></o:p></p>
<p class="MsoNormal">[3] <a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/distro/20200505T130946Z/outputs/RPMS/std/puppet-keystone-11.3.0-1.el7.tis.9.noarch.rpm">
http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/distro/20200505T130946Z/outputs/RPMS/std/puppet-keystone-11.3.0-1.el7.tis.9.noarch.rpm</a><o:p></o:p></p>
<p class="MsoNormal">[4] <a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/monolithic/20200506T080014Z/outputs/iso/bootimage.iso">
http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/monolithic/20200506T080014Z/outputs/iso/bootimage.iso</a>
<o:p></o:p></p>
<p class="MsoNormal">[5] <a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/flock/20200507T015208Z/outputs/iso/bootimage.iso">
http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/flock/20200507T015208Z/outputs/iso/bootimage.iso</a><o:p></o:p></p>
<p class="MsoNormal">[6] <a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/distro/latest_build/outputs/RPMS/std/puppet-keystone-11.3.0-1.el7.tis.9.noarch.rpm">
http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/distro/latest_build/outputs/RPMS/std/puppet-keystone-11.3.0-1.el7.tis.9.noarch.rpm</a>
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thanks.<o:p></o:p></p>
<p class="MsoNormal">BR<br>
Austin Sun. <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Jascanu, Nicolae <<a href="mailto:nicolae.jascanu@intel.com">nicolae.jascanu@intel.com</a>>
<br>
<b>Sent:</b> Wednesday, May 6, 2020 10:06 PM<br>
<b>To:</b> <a href="mailto:starlingx-discuss@lists.starlingx.io">starlingx-discuss@lists.starlingx.io</a><br>
<b>Subject:</b> [Starlingx-discuss] Sanity Master Test LAYERED build ISO 20200506T013246Z<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:Consolas">Sanity Test from 2020-May-06 (</span><a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/flock/20200506T013246Z/outputs/iso/">http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/flock/20200506T013246Z/outputs/iso/</a><span style="font-size:9.0pt;font-family:Consolas">)<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:Consolas"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:Consolas">Status: RED<o:p></o:p></span></p>
<p class="MsoNormal"><b><i><o:p> </o:p></i></b></p>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:Consolas">Provisioning is failing for all configurations. I’ve added a comment to the bug:
</span><a href="https://bugs.launchpad.net/starlingx/+bug/1877035">https://bugs.launchpad.net/starlingx/+bug/1877035</a><span style="font-size:9.0pt;font-family:Consolas"><o:p></o:p></span></p>
<p class="MsoNormal">We used the helm chart from <a href="http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/latest_docker_image_build/outputs/helm-charts/">
http://mirror.starlingx.cengn.ca/mirror/starlingx/master/centos/latest_docker_image_build/outputs/helm-charts/</a><b><i><o:p></o:p></i></b></p>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:Consolas"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:Consolas">Regards,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:Consolas">STX Validation Team<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:Consolas"><o:p> </o:p></span></p>
</div>
</body>
</html>