<div dir="auto">This is super handy Matthias! Would it make sense to put this in a docs/CTMark.rst file? I think a lot more people would be running ctmark with a simple quickstart like this available. (And some of the tips you mentioned downthread).<div dir="auto"><br></div><div dir="auto">Looking at test-suite/CTMark/README.md it has some of the pieces of information, but it doesn't bring it all together like your example and my gut is that some of the tips you mentioned are a better fit in docs/</div><div dir="auto"><br></div><div dir="auto">-- Sean Silva</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Oct 10, 2017 3:07 PM, "Matthias Braun via Phabricator via llvm-commits" <<a href="mailto:llvm-commits@lists.llvm.org">llvm-commits@lists.llvm.org</a>> wrote:<br type="attribution"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">MatzeB added a comment.<br>
<br>
For the record, measuring CTMark can be as easy as this without any LNT involved:<br>
<br>
  git clone <a href="http://llvm.org/git/test-suite.git" rel="noreferrer" target="_blank">http://llvm.org/git/test-<wbr>suite.git</a><br>
  mkdir test-suite-build<br>
  cd test-suite-build<br>
  cmake -DCMAKE_C_COMPILER=/path/to/<wbr>my/clang -GNinja -DTEST_SUITE_SUBDIRS=CTMark -DTEST_SUITE_RUN_BENCHMARKS=<wbr>Off<br>
  ninja<br>
  /path/to/my/llvm/builddir/bin/<wbr>llvm-lit -o result.json .<br>
<br>
Repeat for multiple compilers/patches (or with different -DCMAKE_C_FLAGS etc.) and in the end use compare.py to compare the results of multiple runs.<br>
<br>
<br>
Repository:<br>
  rL LLVM<br>
<br>
<a href="https://reviews.llvm.org/D38154" rel="noreferrer" target="_blank">https://reviews.llvm.org/<wbr>D38154</a><br>
<br>
<br>
<br>
______________________________<wbr>_________________<br>
llvm-commits mailing list<br>
<a href="mailto:llvm-commits@lists.llvm.org">llvm-commits@lists.llvm.org</a><br>
<a href="http://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-commits" rel="noreferrer" target="_blank">http://lists.llvm.org/cgi-bin/<wbr>mailman/listinfo/llvm-commits</a><br>
</blockquote></div></div>