<div dir="ltr">Instead of putting the directory that contains libc++/libc++abi into LD_LIBRARY_PATH, use the system's 'normal' method of locating libraries, by ensuring that directory is included in the search path built up from /etc/ld.so.conf. If you do this, then an RPATH in an executable *will* take precedence over the default directory, because the default directory won't be specified in LD_LIBRARY_PATH (which has the highest precedence).<br></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Nov 26, 2015 at 4:09 AM, Schlottke-Lakemper, Michael via cfe-users <span dir="ltr"><<a href="mailto:cfe-users@lists.llvm.org" target="_blank">cfe-users@lists.llvm.org</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">



<div style="word-wrap:break-word">
<br>
<div>
<blockquote type="cite"><span class="">
<div>On 25 Nov 2015, at 20:13 , Alexey Samsonov <<a href="mailto:vonosmas@gmail.com" target="_blank">vonosmas@gmail.com</a>> wrote:</div>
<br>
</span><div>
<div dir="ltr" style="font-family:Helvetica;font-size:12px;font-style:normal;font-variant:normal;font-weight:normal;letter-spacing:normal;line-height:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px">
<div class="gmail_extra">
<div class="gmail_quote"><span class="">On Wed, Nov 25, 2015 at 4:12 AM, Schlottke-Lakemper, Michael<span> </span><span dir="ltr"><<a href="mailto:m.schlottke-lakemper@aia.rwth-aachen.de" target="_blank">m.schlottke-lakemper@aia.rwth-aachen.de</a>></span><span> </span>wrote:<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex">
<div style="word-wrap:break-word"><span>
<div>
<blockquote type="cite">
<div dir="ltr" style="font-family:Helvetica;font-size:12px;font-style:normal;font-variant:normal;font-weight:normal;letter-spacing:normal;line-height:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px">
<div class="gmail_extra">
<div class="gmail_quote"><br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex">
<div style="word-wrap:break-word">Thus I tried to compile a complete LLVM/Clang stack (with compiler-rt, libcxx, libcxxabi, libomp) using -DLLVM_USE_SANITIZER=MemoryWithOrigins. However, this did not work either, as apparently during the compilation
 process the memory sanitizer already comes to life and complains about use-of-unitialized values… Thus this approach seems to be a dead end.<span><font color="#888888">
<div><br>
</div>
</font></span>
<div><span><font color="#888888">Michael</font></span>
<div>
<div><br>
<div>
<blockquote type="cite">
<div>On 24 Nov 2015, at 15:28 , Michael Schlottke-Lakemper <<a href="mailto:m.schlottke-lakemper@aia.rwth-aachen.de" target="_blank">m.schlottke-lakemper@aia.rwth-aachen.de</a>> wrote:</div>
<br>
<div>
<div style="word-wrap:break-word">Hi folks,
<div><br>
</div>
<div>When running our msan-instrumented simulation program, instead of a proper output I get the following error:</div>
<div><br>
</div>
<div>==12089==WARNING: MemorySanitizer: use-of-uninitialized-value</div>
<div>
<div>==12089==WARNING: Can't read from symbolizer at fd 14</div>
<div>/pds/opt/llvm/bin/llvm-symbolizer: symbol lookup error: /pds/opt/libcxx-20151121-r253770-clang-msan/lib/libc++abi.so.1: undefined symbol: __msan_origin_tls</div>
<div>==12089==WARNING: external symbolizer didn't start up correctly!</div>
</div>
<div><br>
</div>
<div>My setup for using the memory sanitizer is as follows:</div>
<div>- compile libc++/libc++abi with -fsanitize=memory</div>
<div>- compile test program with normal (=uninstrumented) LLVM/Clang installation using -fsanitize=memory</div>
<div>- put instrumented libcxx/libcxxabi library dirs into LD_LIBRARY_PATH</div>
</div>
</div>
</blockquote>
</div>
</div>
</div>
</div>
</div>
</blockquote>
<div>Can you pass -Wl,-rpath when you link your executable, to specify the path to instrumented libc++/libc++abi?</div>
</div>
</div>
</div>
</blockquote>
<br>
</div>
</span>
<div>Yes, and if I do that together with setting LD_LIBRARY_PATH=“”, it works, thanks.</div>
</div>
</blockquote>
<div><br>
</div>
<div>Why do you need to clear LD_LIBRARY_PATH to run MSan?</div>
</span><div>What libraries from LLVM lib dir harm running the MSan-ified executalbe? I thought that if you set rpath to correct path with instrumented libraries it should be enough…</div>
</div>
</div>
</div>
</div>
</blockquote>
<br>
</div>
<div>Right now I have the problem that by default, LD_LIBRARY_PATH includes a directory with libc++/libc++abi in it. However, when running msan-instrumented executables to test them, the executable should pick up msan-instrumented versions of libc++/libc++abi
 while the subsequently used llvm-symbolizer needs to pick up the uninstrumented versions (otherwise I get the above-mentioned errors). Setting rpath is not enough, since the presence of libc++/libc++abi in LD_LIBRARY_PATH will override it. Compiling llvm-symbolizer
 in a way that it is able to run with msan-instrumented libc++ might be an option, but I don’t know how to do that (other than compiling all of LLVM with msan, which does not work either).</div>
<div><br>
</div>
<div>One possible workaround that I have been using is to create a shell script, call it “llvm-symbolizer”, put</div>
<div><br>
</div>
<div>LD_LIBRARY_PATH="$LLVM_DIR/lib:$LD_LIBRARY_PATH" $LLVM_DIR/bin/llvm-symbolizer $*</div>
<div><br>
</div>
<div>in it, and make sure that it is on the PATH before the actual llvm-symbolizer executable (which is located in LLVM_DIR/bin). However, this is clearly a workaround and I am looking for a more robust and more “canonical” solution.</div>
<div><br>
</div>
<div>Any suggestions?</div><span class="HOEnZb"><font color="#888888">
<div><br>
</div>
<div>Michael</div>
<br>
</font></span></div>

<br>_______________________________________________<br>
cfe-users mailing list<br>
<a href="mailto:cfe-users@lists.llvm.org">cfe-users@lists.llvm.org</a><br>
<a href="http://lists.llvm.org/cgi-bin/mailman/listinfo/cfe-users" rel="noreferrer" target="_blank">http://lists.llvm.org/cgi-bin/mailman/listinfo/cfe-users</a><br>
<br></blockquote></div><br></div>