<div dir="ltr"><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Sat, Feb 8, 2020 at 2:17 PM Nikita Popov <<a href="mailto:nikita.ppv@gmail.com">nikita.ppv@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div>Hi,</div><div><br></div><div>Does the LLVM project perform any kind of tracking for commit-by-commit compile-time changes? It looks like LNT only tracks run-time performance (and to be honest I wasn't able to make heads or tails of the results even for that -- the interface was pretty unintuitive to me.)<br></div><div><br></div><div>While it is "normal" that each new LLVM release regresses compile-time by 2-3%, LLVM 10 seems to be going for a new record here, with optimized builds regressing by around 5-15%, and that's already after mitigating the largest regression: <a href="https://perf.rust-lang.org/compare.html?start=58b834344fc7b9185e7a50db1ff24e5eb07dae5e&end=f9c17b2d9bd4ca61bb0eb8b226dd61aaf254156c" target="_blank">https://perf.rust-lang.org/compare.html?start=58b834344fc7b9185e7a50db1ff24e5eb07dae5e&end=f9c17b2d9bd4ca61bb0eb8b226dd61aaf254156c</a></div><div><br></div><div>It does not seem like these regressions are specific to Rust either, see for example <a href="https://bugs.llvm.org/show_bug.cgi?id=44408" target="_blank">https://bugs.llvm.org/show_bug.cgi?id=44408</a>.</div><div><br></div><div>The Rust project tracks compile-time results for each commit (see link above), and thanks to that can quickly spot and revert changes that negatively affect performance. I think it would be really great if something similar would exist for LLVM...<br></div></div></blockquote><div><br></div><div>FTR I ended up writing a service for this myself. Pretty graphs available at: <a href="http://llvm-compile-time-tracker.com/graphs.php">http://llvm-compile-time-tracker.com/graphs.php</a>.</div><div><br></div><div>We're on a downwards trend right now, let's keep it that way :)<br></div><div><br></div><div>Regards,<br></div><div>Nikita<br></div></div></div>