<p dir="ltr">The same happened to our bots. It's because the processes don't die and buildbot thinks it's dead and starts a new cycle. </p>
<p dir="ltr">I had to stop the bot, kill all remaining processes and restart the bot. That did it. </p>
<p dir="ltr">Maybe we need an extra step on the bots to make sure the previous instance is not running, or a signal to kill it when the master gives up on time out. </p>
<p dir="ltr">Cheers, <br>
Renato </p>
<div class="gmail_quote">On 6 Dec 2014 11:46, "Daniel Sanders" <<a href="mailto:Daniel.Sanders@imgtec.com">Daniel.Sanders@imgtec.com</a>> wrote:<br type="attribution"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">clang-cmake-mips didn't turn green immediately after the revert. I just checked on the machine and it appears that this was because of a large number of leftover processes from the build that timed out. After rebooting, it's turned green.<br>
<br>
I'm curious about the reason these processes didn't die when buildbot timed out the build. Does lit clean up its subprocesses when it's killed?<br>
<br>
> No worries, at least that was easy to spot. Huzzah for buildbots! :)<br>
<br>
:-) Yep, these things happen sometimes. Also, it's given me the perfect example of why continuous builds is better than the nightly buildbots we use internally at the moment. Once we're past the 3.5.1 release, I really need to push our upgrades along.<br>
________________________________________<br>
From: Renato Golin [<a href="mailto:renato.golin@linaro.org">renato.golin@linaro.org</a>]<br>
Sent: 06 December 2014 00:42<br>
To: Benjamin Kramer<br>
Cc: David Majnemer; Daniel Sanders; LLVM Dev; Clang Dev<br>
Subject: Re: [cfe-dev] [LLVMdev] Major ARM bots failure<br>
<br>
On 6 December 2014 at 00:03, Benjamin Kramer <<a href="mailto:benny.kra@gmail.com">benny.kra@gmail.com</a>> wrote:<br>
> Reverted for now. Not sure what's going on there. Sorry for the breakage.<br>
<br>
No worries, at least that was easy to spot. Huzzah for buildbots! :)<br>
<br>
cheers,<br>
--renato<br>
</blockquote></div>