<div dir="ltr"><div dir="ltr">> Where was this policy, which sounds like replicating their design mistakes bug-for-bug, agreed upon and documented?<br></div><div>James responded already, but just to add my perspective: on the subject of llvm vs gnu binutils compatibility, I've heard everything in the range from "let's do our own completely separate thing" to "let's be byte-for-byte compatible". The general consensus is closer towards the closer compatibility side, so the happy medium we've tried to apply is "be gnu compatible, except when it doesn't make sense" -- support for ancient platforms, bugs, weird formatting, etc. We definitely take things on a case by case basis, there's no firm policy that we replicate all the bugs.</div><div><br></div><div>And to be clear, this is only for tools with the same name as GNU tools. As an example: we have llvm-readobj.cpp which prints things in an llvm way, accepts llvm flags, etc.; and we have llvm-readelf (which is just a symlink) that adds gnu-specific flag aliases, prints in a different mode, etc. We don't change llvm-readobj format to match gnu compatibility, generally speaking.</div><div><br></div><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Feb 6, 2020 at 3:55 AM Jon Chesterfield via llvm-dev <<a href="mailto:llvm-dev@lists.llvm.org">llvm-dev@lists.llvm.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr"><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Feb 6, 2020 at 9:15 AM James Henderson <<a href="mailto:jh7370.2008@my.bristol.ac.uk" target="_blank" class="cremed">jh7370.2008@my.bristol.ac.uk</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr"><br></div><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, 6 Feb 2020 at 00:24, Jon Chesterfield via llvm-dev <<a href="mailto:llvm-dev@lists.llvm.org" target="_blank" class="cremed">llvm-dev@lists.llvm.org</a>> wrote:</div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div>This doesn't sound right. GNU binutils have a large quantity of legacy cruft, not least the redundancy between tools like readelf and objdump which are capable of doing the same task in exchange for different command line arguments.</div></div></div></blockquote><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div><br></div><div>Our from-scratch binutils suite has the opportunity to be much easier to use than GNU's tooling. Where was this policy, which sounds like replicating their design mistakes bug-for-bug, agreed upon and documented?</div></div></div></blockquote><div>
<div>Many tools (readelf, objdump, nm, objcopy etc) are used in many people's build systems... principle is discussed on multiple reviews of changes for the tools too.</div></div></div></div></blockquote><div><br></div><div>Thanks for your response. I read through the links but haven't gone looking for diff reviews.</div><div><br></div><div>Yes, I see why people presently using gnu tools would want llvm tools with corresponding names to behave identically. My concern is that meeting this goal takes time from the very few binutils developers that could otherwise be spent producing new binary manipulation tooling. Programmers wanting to rewrite their binaries doesn't necessarily imply a determination to stick with the GNU API - your example of generating json instead semi-arbitrarily delimited text is a good example.</div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div><div></div><div>To be clear, if there is a bug in the GNU tool, we don't try to match that. We've also made multiple extensions and improvements over what GNU does in some tools, some of which were also adopted in the GNU equivalent afterwards.</div></div></div></div></blockquote><div><br></div><div>Bugs vs features are a bit context dependent but I'm glad to hear dev effort is also going on improving matters. I'm not in the binutils space (as a dev or as a user) anymore so haven't been paying much attention to it.</div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div>Note that there are some tools (llvm-readobj, llvm-symbolizer) which are not GNU compatible, and go their own way in output styles and command-line processing. These both have switches and tool aliases that allow them to be used in a GNU-like manner though too.<br></div></div></div></blockquote><div><br></div><div>Taking it on faith that the llvm binutils are implemented as a relatively thin layer on top of libraries,</div></div></div></blockquote><div>I can confirm that they are all essentially wrappers around libObject (except objcopy/strip, since it mutates) -- although not as thin as we'd like them to be, sadly. Any work towards that is greatly appreciated.</div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div> </div></div></div></blockquote><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div>perhaps we should ship 'objdump' which takes the same arguments as gnu objdump and does our best effort at matching the semantics, and also ship llvm-objdump which is under no obligation to match arguments or the precise semantics. Optionally as the same file which checks the name it was invoked as. That would avoid a proliferation of strip-all-gnu and similar.<br></div></div></div></blockquote><div>There may be some subtleties that prevent this. The tools actually inspect the filename -- for instance, take a look at llvm-ar: <a href="https://github.com/llvm/llvm-project/blob/master/llvm/tools/llvm-ar/llvm-ar.cpp#L1205" class="cremed">https://github.com/llvm/llvm-project/blob/master/llvm/tools/llvm-ar/llvm-ar.cpp#L1205</a></div><div>Based on the filename, the same tool might be dlltool, ranlib, lib, or ar. There's no guarantee that the tool will be named exactly "ar" or "llvm-ar" in someone's toolchain -- it may be "${triple}-ar", "llvm-ar-11", "archiver", or whatever someone wants to use. We're already playing games with the filenames, I think playing further games is bound to raise too many surprises/bugs.</div><div><br></div><div>I feel your pain with --strip-all-gnu though. Often the failures I see there are what I'd call "EFS" (ELF filesystem) -- where, as part of a build process, a step will build an object, shove something in an elf section, strip it, and be consumed later. Since llvm-strip is more aggressive (yay smaller binaries), these sections get dropped. Fortunately, the --keep-section, which originated in llvm-strip, was added to fix this and also ported to GNU strip, so you can keep the same command line irrespective of which toolchain you use.</div><div><br></div><div>> Aside from the above query, case sensitive asm doesn't sound like a good feature to me either.</div><div>FTR -- I don't have any opinion on this. But we do have the right to say "that's weird, don't do that". Others more familiar with the situation may explain why it's not weird. [I didn't read the original thread]. As I said at the beginning, we should take these all on a case by case basis.</div><div> </div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div></div><div><br></div><div>Thanks,</div><div><br></div><div>Jon</div></div></div>
_______________________________________________<br>
LLVM Developers mailing list<br>
<a href="mailto:llvm-dev@lists.llvm.org" target="_blank" class="cremed">llvm-dev@lists.llvm.org</a><br>
<a href="https://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev" rel="noreferrer" target="_blank" class="cremed">https://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev</a><br>
</blockquote></div></div>