<div dir="ltr">Thanks! <div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Tue, Mar 24, 2015 at 3:26 PM, Galina Kistanova <span dir="ltr"><<a href="mailto:gkistanova@accesssoftek.com" target="_blank">gkistanova@accesssoftek.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">




<u></u>





<div lang="EN-US" link="blue" vlink="blue">

<div>

<p class="MsoNormal"><font color="navy" face="Arial"><span style="font-size:10.0pt;font-family:Arial;color:navy">I reduced number of threads for build to
32 and rebooted the box. Hope this will help.<u></u><u></u></span></font></p>

<p class="MsoNormal"><font color="navy" face="Arial"><span style="font-size:10.0pt;font-family:Arial;color:navy"><u></u> <u></u></span></font></p>

<p class="MsoNormal"><font color="navy" face="Arial"><span style="font-size:10.0pt;font-family:Arial;color:navy">Thanks<u></u><u></u></span></font></p>

<p class="MsoNormal"><font color="navy" face="Arial"><span style="font-size:10.0pt;font-family:Arial;color:navy"><u></u> <u></u></span></font></p>

<p class="MsoNormal"><font color="navy" face="Arial"><span style="font-size:10.0pt;font-family:Arial;color:navy">Galina <u></u><u></u></span></font></p>

<p class="MsoNormal"><font color="navy" face="Arial"><span style="font-size:10.0pt;font-family:Arial;color:navy"><u></u> <u></u></span></font></p>

<p class="MsoNormal"><font color="navy" face="Arial"><span style="font-size:10.0pt;font-family:Arial;color:navy"><u></u> <u></u></span></font></p>

<div>

<div class="MsoNormal" align="center" style="text-align:center"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">

<hr size="2" width="100%" align="center">

</span></font></div>

<p class="MsoNormal"><b><font face="Tahoma"><span style="font-size:10.0pt;font-family:Tahoma;font-weight:bold">From:</span></font></b><font face="Tahoma"><span style="font-size:10.0pt;font-family:Tahoma"> <u></u>Kostya Serebryany<u></u> [mailto:<a href="mailto:kcc@google.com" target="_blank">kcc@google.com</a>] <br>
<b><span style="font-weight:bold">Sent:</span></b> Tuesday, March 24, 2015 1:00
PM<br>
<b><span style="font-weight:bold">To:</span></b> <u></u>Galina
 Kistanova<u></u><br>
<b><span style="font-weight:bold">Cc:</span></b> Hans Wennborg; <u></u>David Blaikie<u></u>; <u></u><a href="mailto:llvm-commits@cs.uiuc.edu" target="_blank">llvm-commits@cs.uiuc.edu</a></span></font></p><div><div class="h5"><font face="Tahoma"><u></u><br>
<b><span style="font-weight:bold">Subject:</span></b> Re: [compiler-rt] r231367
- tsan: fix signal handling during stop-the-world</font></div></div><u></u><u></u><p></p>

</div><div><div class="h5">

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">The bot is very heavily loaded, it has 40+ processes running since
March 1:<u></u><u></u></span></font></p>

<div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">41500 buildsl+  20   0 1208380 1.040g   1044 R 100.0
 2.2  17567:12 clang-3.7            
                     
                     
                     
                     
                 <u></u><u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">41534 buildsl+  20   0  347420 246492    976 R
100.0  0.5  18093:57 clang-3.7          
                     
                     
                     
                     
                   <u></u><u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">41438 buildsl+  20   0  535216 427720   1020 R
100.0  0.9  17862:52 clang-3.7          
                     
                       
                     
                     
                 <u></u><u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">41364 buildsl+  20   0  538920 427928   1132 R
 99.6  0.9  17835:58 clang-3.7        
                     
                     
                     
                     
                     <u></u><u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">41400 buildsl+  20   0  481600 374952   1044 R
 99.0  0.8  17961:05 clang-3.7        
      <u></u><u></u></span></font></p>

</div>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

</div>

<div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">buildsl+ 41534 55.0  0.4 347420 246500 ?       R
   Mar01 18094:29
/home/buildslave/slave_as-bldslv8/clang-x86_64-linux-selfhost-abi-test/stage1.install/bin/clang-3.7
-cc1 -triple x86_64-unknown-linux-gnu -emit-obj -disable-free -main-file-name
Errno.cpp -mrelocation-model pic -pic-level 2 -mthread-model posix -fmath-errno
-masm-verbose -mconstructor-aliases -munwind-tables -fuse-init-array
-target-cpu x86-64 -momit-leaf-frame-pointer -dwarf-column-info
-ffunction-sections -fdata-sections -coverage-file
/home/buildslave/slave_as-bldslv8/clang-x86_64-linux-selfhost-abi-test/stage2/lib/Support/CMakeFiles/LLVMSupport.dir/Errno.cpp.o
-resource-dir
/home/buildslave/slave_as-bldslv8/clang-x86_64-linux-selfhost-abi-test/stage1.install/bin/../lib/clang/3.7.0
-dependency-file lib/Support/CMakeFiles/LLVMSupport.dir/Errno.cpp.o.d -MT
lib/Support/CMakeFiles/LLVMSupport.dir/Errno.cpp.o -D GTEST_HAS_RTTI=0 -D
_DEBUG -D _GNU_SOURCE -D __STDC_CONSTANT_MACROS -D __STDC_FORMAT_MACROS -D
__STDC_LIMIT_MACROS -U NDEBUG -I lib/Support -I
/home/buildslave/slave_as-bldslv8/clang-x86_64-linux-selfhost-abi-test/llvm/lib/Support
-I include -I
/home/buildslave/slave_as-bldslv8/clang-x86_64-linux-selfhost-abi-test/llvm/include
-internal-isystem /usr/lib/gcc/x86_64-linux-gnu/4.8/../../../../include/c++/4.8
-internal-isystem /usr/lib/gcc/x86_64-linux-gnu/4.8/../../../../include/x86_64-linux-gnu/c++/4.8
-internal-isystem
/usr/lib/gcc/x86_64-linux-gnu/4.8/../../../../include/x86_64-linux-gnu/c++/4.8
-internal-isystem
/usr/lib/gcc/x86_64-linux-gnu/4.8/../../../../include/c++/4.8/backward
-internal-isystem /usr/local/include -internal-isystem
/home/buildslave/slave_as-bldslv8/clang-x86_64-linux-selfhost-abi-test/stage1.install/bin/../lib/clang/3.7.0/include
-internal-externc-isystem /usr/include/x86_64-linux-gnu
-internal-externc-isystem /include -internal-externc-isystem /usr/include -O3
-Wall -W -Wno-unused-parameter -Wwrite-strings -Wcast-qual
-Wmissing-field-initializers -Wno-long-long -Wcovered-switch-default
-Wnon-virtual-dtor -pedantic -std=c++11 -fdeprecated-macro
-fdebug-compilation-dir /home/buildslave/slave_as-bldslv8/clang-x86_64-linux-selfhost-abi-test/stage2
-ferror-limit 19 -fmessage-length 0 -fvisibility-inlines-hidden -mstackrealign
-fno-rtti -fobjc-runtime=gcc -fdiagnostics-show-option -fcolor-diagnostics
-vectorize-loops -vectorize-slp -o
lib/Support/CMakeFiles/LLVMSupport.dir/Errno.cpp.o -x c++
/home/buildslave/slave_as-bldslv8/clang-x86_64-linux-selfhost-abi-test/llvm/lib/Support/Errno.cpp<u></u><u></u></span></font></p>

</div>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">I would expect that rebooting the bot will resolve the flakiness. <u></u><u></u></span></font></p>

</div>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">On Mon, Mar 23, 2015 at 1:26 PM, <u></u>Kostya
 Serebryany<u></u> <<a href="mailto:kcc@google.com" target="_blank">kcc@google.com</a>>
wrote:<u></u><u></u></span></font></p>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">On Fri, Mar 20, 2015 at 9:59 AM, <u></u>Galina
 Kistanova<u></u> <<a href="mailto:gkistanova@accesssoftek.com" target="_blank">gkistanova@accesssoftek.com</a>> wrote:<u></u><u></u></span></font></p>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">Sure I can set you up with the access. That's one of the purposes of
having the bots in the lab.<br>
<br>
Just tell me what you are going to do there, so I could figure out the
permissions, and when you will be accessing it, so I would stop the builder.<u></u><u></u></span></font></p>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">I will need the machine to build and run a single C++ test, <u></u><u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">so all I need is the access to the clang binary built on this builder<u></u><u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">and an ability to compile a test  using that clang. <u></u><u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">No need to stop the builder. <u></u><u></u></span></font></p>

</div>

<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-right:0in">

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><br>
Please also send me directly the ssh key you will be using.<u></u><u></u></span></font></p>

</blockquote>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

</div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt">ok! <u></u><u></u></span></font></p>

</div>

<div>

<div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"> <u></u><u></u></span></font></p>

</div>

<blockquote style="border:none;border-left:solid #cccccc 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-right:0in">

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><br>
Thank you<br>
<font color="#888888"><span style="color:#888888"><br>
Galina</span></font><u></u><u></u></span></font></p>

<div>

<div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><br>
<br>
-----Original Message-----<br>
From: <a href="mailto:hwennborg@google.com" target="_blank">hwennborg@google.com</a>
[mailto:<a href="mailto:hwennborg@google.com" target="_blank">hwennborg@google.com</a>]
On Behalf Of Hans Wennborg<br>
Sent: Thursday, March 19, 2015 1:43 PM<br>
To: <u></u>David Blaikie<u></u><br>
Cc: <u></u>Kostya Serebryany<u></u>; <u></u>Galina Kistanova<u></u>; <a href="mailto:llvm-commits@cs.uiuc.edu" target="_blank">llvm-commits@cs.uiuc.edu</a><br>
Subject: Re: [compiler-rt] r231367 - tsan: fix signal handling during
stop-the-world<br>
<br>
I'm hitting this when running 'ninja check-all' on my machine.<br>
<br>
If I just run the individual run line, it doesn't crash though.<br>
<br>
On Mon, Mar 16, 2015 at 11:37 AM, <u></u>David Blaikie<u></u>
<<a href="mailto:dblaikie@gmail.com" target="_blank">dblaikie@gmail.com</a>>
wrote:<br>
> Not my bot (& I seem to have lost my local reproduction - it was
failing<br>
> pretty consistently for me last week - perhaps my machine instnalled a<br>
> software update in the interim), +Galina who might have some more info
about<br>
> as-bldslv8.<br>
><br>
> On Mon, Mar 16, 2015 at 11:34 AM, <u></u>Kostya
 Serebryany<u></u> <<a href="mailto:kcc@google.com" target="_blank">kcc@google.com</a>>
wrote:<br>
>><br>
>><br>
>><br>
>> On Sun, Mar 15, 2015 at 12:34 AM, Dmitry Vyukov <<a href="mailto:dvyukov@google.com" target="_blank">dvyukov@google.com</a>><br>
>> wrote:<br>
>>><br>
>>> On Sun, Mar 15, 2015 at 12:32 AM, <u></u>David
 Blaikie<u></u> <<a href="mailto:dblaikie@gmail.com" target="_blank">dblaikie@gmail.com</a>><br>
>>> wrote:<br>
>>> >> Added:<br>
>>> >>   
 compiler-rt/trunk/test/asan/TestCases/Linux/leak_check_segv.cc<br>
>>> >><br>
>>> >><br>
>>> >>
compiler-rt/trunk/test/asan/TestCases/Linux/signal_during_stop_the_world.cc<br>
>>> >><br>
>>> >><br>
>>> >>
compiler-rt/trunk/test/sanitizer_common/TestCases/Linux/signal_segv_handler.cc<br>
>>> ><br>
>>> ><br>
>>> > This test appears to be flaky. Failing every second run here:<br>
>>> ><br>
>>> > <a href="http://lab.llvm.org:8011/builders/clang-x86_64-linux-selfhost-abi-test/builds/2871" target="_blank">http://lab.llvm.org:8011/builders/clang-x86_64-linux-selfhost-abi-test/builds/2871</a><br>
>>> > and failing for me locally.<br>
>>><br>
>>><br>
>>> The test does not fail for a bunch of us locally (I run it 5000
times<br>
>>> locally).<br>
>>> Can you please run it locally _without_ any tool? Does it fail?<br>
>><br>
>><br>
>> Yea, we tried reproducing it on multiple machines with no luck.<br>
>> Can we have access to the bot?<u></u><u></u></span></font></p>

</div>

</div>

</blockquote>

</div>

</div>

</div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

</div>

</div>

</div>

<p class="MsoNormal"><font size="3" face="Times New Roman"><span style="font-size:12.0pt"><u></u> <u></u></span></font></p>

</div>

</div></div></div>

</div>


</blockquote></div><br></div>