<div dir="ltr"><div dir="ltr"><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, 9 Dec 2020 at 18:32, Renato Golin via llvm-dev <<a href="mailto:llvm-dev@lists.llvm.org">llvm-dev@lists.llvm.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr">On Wed, 9 Dec 2020 at 17:06, Romero, Nichols A. <<a href="mailto:naromero@anl.gov" target="_blank">naromero@anl.gov</a>> wrote:<br></div><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">





<div lang="EN-US">
<div>
<p class="MsoNormal">Yes, I am working on identifying some OSS applications and benchmarks.<br></p></div></div></blockquote><div><br></div><div>Awesome!</div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div lang="EN-US"><div><div><div><div><p class="MsoNormal">Are they in some public dashboard like this one? <a href="http://lab.llvm.org:8011/#/console" target="_blank">
http://lab.llvm.org:8011/#/console</a></p></div></div></div></div></div></blockquote><div><br></div><div>Yes, though it's not really obvious (or even easy) to find that out. :(</div><div><br></div><div>You can look at the configuration file:</div><div><a href="https://github.com/llvm/llvm-zorg/blob/master/buildbot/osuosl/master/config/builders.py" target="_blank">https://github.com/llvm/llvm-zorg/blob/master/buildbot/osuosl/master/config/builders.py</a><br></div><div><br></div><div>If the builder is using `ClangBuilder`, just check the ones that have the option: `<span style="box-sizing:border-box;color:rgb(36,41,46);font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap">runTestSuite</span><span style="box-sizing:border-box;font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap">=</span><span style="box-sizing:border-box;font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap">True`</span></div><div><span style="box-sizing:border-box;font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap"><br></span></div><div><span style="box-sizing:border-box;font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap">I can see Arm, AArch64, PPC, IBM-Z, X86.</span></div></div></div></blockquote><div><br></div><div>Note however that many of those aren't building flang :) You might find <a href="http://lab.llvm.org:8011/#/builders/7">this builder</a> of more interest, since it's both building flang and running the test-suite. That's pretty slow and heavy though, so if you start adding fortran support to the test-suite I'd be happy to add it to some of our lighter, fortran-focused builders (such as <a href="http://lab.llvm.org:8011/#/builders/79">this one</a>). Feel free to contact me on the flang slack or via email if there's anything I can help with.</div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div><span style="box-sizing:border-box;font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap">The ones with `testsuite_flags=['</span><span style="color:rgb(3,47,98);font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap">--benchmarking-only']` will be running in benchmark mode and submitting the results to the LNT server.</span></div><div><span style="box-sizing:border-box;font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap"><br></span></div><div><span style="box-sizing:border-box;font-family:SFMono-Regular,Consolas,"Liberation Mono",Menlo,monospace;font-size:12px;white-space:pre-wrap">Other builder types may be doing it, but I don't know about those.</span></div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div lang="EN-US"><div><div><div><div><p class="MsoNormal"><u></u><u></u></p>
<p class="MsoNormal">The goal is to have an analogous set-up to what is done now for C/C++. I am just getting up to speed now on it.<br></p></div></div></div></div></div></blockquote><div><br></div><div>I want to make sure I'm not trying to push you, just giving you the runes that aren't obvious when you first start working on it.</div><div><br></div><div>We have a number of people (including me, many times) excited to add tests or infrastructure to the test-suite only to give up half-way because of the mess it is.</div><div><br></div><div>Folks really did a good number on it in the past few years (CMake support, statistical analysis, benchmark mode), so it's probably a lot easier now than when I had to work on it.</div><div><br></div><div>Good luck and thanks for taking on such a thankless task. :)</div></div></div></blockquote><div><br></div><div>+1, I was considering adding <a href="http://lists.llvm.org/pipermail/flang-dev/2020-July/000434.html">FCVS</a> to the test-suite, but you might get to it before I find the time ;)</div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div>cheers,</div><div>--renato</div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div lang="EN-US"><div><div><div><div>
</div>
</div>
</div>
</div>
</div>

</blockquote></div></div>
_______________________________________________<br>
LLVM Developers mailing list<br>
<a href="mailto:llvm-dev@lists.llvm.org" target="_blank">llvm-dev@lists.llvm.org</a><br>
<a href="https://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev" rel="noreferrer" target="_blank">https://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev</a><br>
</blockquote></div></div>