<div dir="ltr"><br><br><div class="gmail_quote"><div dir="ltr">On Sat, Dec 15, 2018 at 9:37 PM Chandler Carruth via llvm-dev <<a href="mailto:llvm-dev@lists.llvm.org">llvm-dev@lists.llvm.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div dir="ltr">On Sat, Dec 15, 2018 at 6:13 PM Davide Italiano <<a href="mailto:davide@freebsd.org" target="_blank">davide@freebsd.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">On Sat, Dec 15, 2018 at 12:02 PM Vedant Kumar via llvm-dev<br>
<<a href="mailto:llvm-dev@lists.llvm.org" target="_blank">llvm-dev@lists.llvm.org</a>> wrote:<br>
><br>
> Hi,<br>
><br>
> > On Dec 15, 2018, at 10:32 AM, Brian Gesiak via llvm-dev <<a href="mailto:llvm-dev@lists.llvm.org" target="_blank">llvm-dev@lists.llvm.org</a>> wrote:<br>
> ><br>
> > Hello all!<br>
> ><br>
> > I find that using lldb to debug LLVM libraries can be super<br>
> > frustrating, because a lot of LLVM classes, like the constructor for<br>
> > StringRef, are marked LLVM_ATTRIBUTE_ALWAYS_INLINE. So when I attempt<br>
> > to have lldb evaluate an expression that implicitly instantiates a<br>
> > StringRef, I get 'error: Couldn't lookup symbols:<br>
> > __ZN4llvm9StringRefC1EPKc'.<br>
> ><br>
> > As an example, most recently this happened to me when playing around<br>
> > with llvm::AttributeSet, having attached lldb to an opt built with<br>
> > -DCMAKE_BUILD_TYPE="Debug":<br>
> ><br>
> >   (lldb) e $AS.hasAttribute("myattr")<br>
> >   error: Couldn't lookup symbols:<br>
> >     __ZN4llvm9StringRefC1EPKc<br>
> ><br>
> > Despite having built in a "Debug" configuration,<br>
> > LLVM_ATTRIBUTE_ALWAYS_INLINE makes it very difficult to debug LLVM.<br>
> ><br>
> > How do you all deal with or work around this problem?<br>
><br>
> I don't think there are any great workarounds. The data formatters in utils/lldbDataFormatters.py can help a bit.<br>
><br>
><br>
> > Is there a good<br>
> > way to do so? If not, would anyone object if I sent up a patch to<br>
> > introduce a CMake variable or something to conditionally disable<br>
> > LLVM_ATTRIBUTE_ALWAYS_INLINE? I'd like to be able to turn it off, but<br>
> > I'm not sure if there's some good reason it needs to stay on even for<br>
> > debug builds?<br>
><br>
> IIRC the motivation for using always_inline in debug builds was to make binaries acceptably fast. IMHO this isn't the right tradeoff because it also makes binaries frustratingly hard to debug.<br>
><br>
> Some might object that with clang modules, it should be no trouble for a debugger to evaluate these kinds of expressions. I've CC'd Raphael who can speak to this much better than I can. My understanding is that modules may help, but lldb (and presumably gdb as well?) are not going to learn how to parse templated code out of C++ modules, instantiate them, and JIT-compile them for you really soon. That seems like an ongoing, longer-term project.<br>
><br>
> I'd like to see us move away from using always_inline in core ADT headers to make debugging easier in the near future.<br>
><br>
<br>
+1 to everything you said. I happened to remember this wasn't always<br>
the case for StringRef, so I did some archeology and found:<br>
[llvm] r247253 - [ADT] Apply a large hammer to StringRef functions:<br>
attribute always_inline.<br>
<br>
I'm afraid I missed the commit at the time but there are few remarks I<br>
would like to make:<br>
1) The motivation for this change, at least from what I understand, is<br>
trying to optimize `check-llvm`. As somebody who spends a fair amount<br>
of time tapping fingers while waiting for the tests to run,  I do<br>
believe this is a laudable goal, but I'm uncertain of the results. In<br>
fact, it seems it only saves 1 second (according to the commit<br>
message).<br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div>There were a string of related commits here, not just one. They added up at the time.</div></div></div><div dir="ltr"><div class="gmail_quote"><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
2) I can't speak for anybody else, but I'm not entirely sure a<br>
48-cores box is a common setup (I might be completely wrong on this<br>
one, but I have [and had] access to much more modest hardware). In<br>
other words, I'm not entirely sure the setup that drove the change is<br>
representative of the "typical" llvm developer (for some definition of</blockquote><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">"typical").<br></blockquote><div> </div></div></div><div dir="ltr"><div class="gmail_quote"><div>Not sure this is terribly relevant.... if anything, it minimizes the total impact. Anyways....</div></div></div><div dir="ltr"><div class="gmail_quote"><div><br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
3) I think the tradeoff here is just not great. I personally devote<br>
much more time debugging llvm (and related subprojects) than running<br>
the testsuite.<br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div>s/testsuite/check-llvm</div><div><br></div><div>But this I disagree with, FWIW. Anyways, not sure it is relevant anymore...</div></div></div><div dir="ltr"><div class="gmail_quote"><div><br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Chandler, is there anything that can be done here to make the<br>
experience less frustrating (i.e. revising the decision or reverting)?<br>
The original commit pointed out this was a workaround, but the status<br>
quo is that it makes debugging llvm itself much harder.<br>
 Of course, happy to help.<br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div>I think the time where this made sense has passed us by, and I'm happy to systematically rip all these things out.</div><div><br></div><div>These days, I do not think there is any reasonable performance of `check-llvm` (or any other `check-foo` w/o optimizations enabled, and debug info disabled. </div></div></div></blockquote><div><br>For some value of "reasonable" - FWIW I (& sounds like a few others at least) use a straight Debug (unoptimized, (split) debug info enabled) build & regularly run the binaries in a debugger.<br> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div>The former is necessary to get plausible test times, and the latter is (sadly) necessary to get plausible build times.</div></div></div></blockquote><div><br>Curious what your definition/line is for those? (& I guess I disagree, since I find a debug build to be sufficient/the right tradeoff for my needs)<br><br>All that said, I've been debugging LLVM regularly like this using GDB for years and didn't notice this regression in functionality probably because I'm used to GDB's lack of C++ understanding, so I probably learned early on that it couldn't handle some cases like this so I rarely try to call code short of LLVM's 'dump' functions from within the debugger.<br><br>I do rather like the idea of having a different always_inline variant that's for "yeah, this is really necessary for plausible performance, but not for correctness" that, combined with -g (OK, some variant of -g (a -f modifier, maybe) perhaps, so we can maintain the "-g doesn't affect codegen" invariant) causes even functions that are inlined away to be emitted (this could extend to functions not marked inline too, of course - but we'd still need the variant attribute to ensure we didn't emit standalone definitions of functions that make no sense/can't be correctly executed when not inlined).<br> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div> As a consequence, I exclusively use optimized (but w/ asserts) builds for running `check-foo`, and do a separate build if I ever need to debug something. So I no longer see any benefit from these always-inline attributes, and only the down sides. I suspect this is true for most developers these days: they are all downside. If the developer cares about check-foo, they use an optimized build.</div><div><br></div><div>So, as long as we are prepared to add specific guidance to our documentation that folks hacking on LLVM (and subprojects) should generally expect to enable -O2 at least to see reasonable test performance, I'm happy to rip out all the always inline in the whole thing. Even happy to do the work. Just need the community to agree about the direction.</div></div></div>
_______________________________________________<br>
LLVM Developers mailing list<br>
<a href="mailto:llvm-dev@lists.llvm.org" target="_blank">llvm-dev@lists.llvm.org</a><br>
<a href="http://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev" rel="noreferrer" target="_blank">http://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev</a><br>
</blockquote></div></div>