<div dir="ltr"><div>Hello everyone,</div><div><br></div><div>Starting tomorrow we will be upgrading the staging and production LLVM build bot.</div><div><br></div><div>To make the transition smooth we would not accept any change to zorg from tomorrow 11:00 AM PDT till the production bot is up and running the new version. Please feel free to talk to me if you will have a special situation and if you would absolutely have to make changes. Thanks for your patience and understanding.<br></div><div><br></div><div>If you are a bot owner, you do not need to do anything at this point, unless I'll ask you to help.<br></div><div><br></div><div>Here is the plan.<br></div><div><br></div><div>* Tomorrow, on September 30th, 2020, at 11:00 AM PDT we will upgrade the staging build bot to buildbot v2.8.4.</div><div><br></div><div>If you are an owner of one of the staged builders, you would not need to do anything. The staging will go down for a short period of time, and then a new version will come up and will accept connections from your bots.</div><div><br></div><div>We will be watching the staging and will be improving zorg for the next week or so. Meaning that staging will be restarted more often than before, and restarts will be done without further notices.<br></div><div><br></div><div>* Once the staging is reliable you may want to move your bot from production to staging to make sure it will work as expected after the upgrade. I will send a note when this could be done.<br></div><div><br></div><div>* After staging is good and we have about a week of running history, we will upgrade the production bot. I will send a separate announcement for this closer to the date.</div><div><br></div><div>Once the production is up and running, I will need your feedback about blame e-mails delivery, IRC reporting issues, and anything you could spot wrong with the new bot. I  hope the transition will go smoothly and we will handle issues quickly if any would come up.</div><div><br></div><div>* After production is good and we have about a week of running history, I'll ask the bot owners to upgrade buildbots on their side. Please do not upgrade your buildbots unless I'll ask you to. We are trying to limit a number of moving parts at this stage.</div><div><br></div><div>Thanks for your support and help. And please feel free to ask if you have questions.<br></div><div><br></div><div>Galina</div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Sep 10, 2020 at 9:35 PM Galina Kistanova <<a href="mailto:gkistanova@gmail.com">gkistanova@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div>Hello everyone,</div><div><br></div><div>The buildbot upgrade is entering the phase when the results to become visible. <br></div><div><br></div><div>No change is required at this time on any of the builders. The bot owners could upgrade the buildbot on build computers later, at their convenience, as this is not on the critical path.</div><div><br></div><div>We are going to upgrade the staging bot first. Then, once that is stable and all detected issues are resolved, we will upgrade the production bot.</div><div><br></div><div>I will need some help with testing, and will be asking to move some of the builders temporarily to the staging. LLVM buildbot is a piece of critical infrastructure, so more eyes and hands in making sure it works properly the better.</div><div><br></div><div>I'll be posting updates and ETA of particular changes in this thread.<br></div><div><br></div><div>Please feel free to ask if you have any questions or concerns.</div><div><br></div><div>Thanks</div><div><br></div><div>Galina</div><div><br></div></div>
</blockquote></div>