<html><head><meta http-equiv="Content-Type" content="text/html charset=utf-8"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class=""><br class=""><div><blockquote type="cite" class=""><div class="">On Sep 9, 2014, at 1:47 PM, Sean Silva <<a href="mailto:chisophugis@gmail.com" class="">chisophugis@gmail.com</a>> wrote:</div><br class="Apple-interchange-newline"><div class=""><br class="Apple-interchange-newline"><br style="font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: auto; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; widows: auto; word-spacing: 0px; -webkit-text-stroke-width: 0px;" class=""><div class="gmail_quote" style="font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: auto; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; widows: auto; word-spacing: 0px; -webkit-text-stroke-width: 0px;">On Tue, Sep 9, 2014 at 12:53 PM, Quentin Colombet<span class="Apple-converted-space"> </span><span dir="ltr" class=""><<a href="mailto:qcolombet@apple.com" target="_blank" class="">qcolombet@apple.com</a>></span><span class="Apple-converted-space"> </span>wrote:<br class=""><blockquote class="gmail_quote" style="margin: 0px 0px 0px 0.8ex; border-left-width: 1px; border-left-color: rgb(204, 204, 204); border-left-style: solid; padding-left: 1ex;"><div style="word-wrap: break-word;" class="">Hi Chandler,<div class=""><br class=""></div><div class="">I had observed some improvements and regressions with the new lowering.</div><div class=""><br class=""></div><div class="">Here are the numbers for an Ivy Bridge machine fixed at 2900MHz.</div><div class=""><br class=""></div><div class="">I’ll look into the regressions to provide test cases.</div><div class=""><br class=""></div><div class="">** Numbers **</div><div class=""><br class=""></div><div class="">Smaller is better. Only reported tests that run for at least one second.</div><div class="">Reference is the default lowering, Test is the new lowering.</div><div class="">The Os numbers are overall neutral, but the O3 numbers mainly expose regressions.</div><div class=""><br class=""></div><div class="">Note: I can attach the raw numbers if you want.</div></div></blockquote><div class=""><br class=""></div><div class="">That would be great. Please do.</div></div></div></blockquote><div><br class=""></div><div>Alright, here they are :).</div><div><br class=""></div><div>base-perf-Ox.txt: runtime for the default lowering.</div><div>new-perf-Ox.txt: runtime for the new lowering.</div><div><br class=""></div><div>Each line in those files has the following format:</div><div><unit> <benchmark> <perf number></div><div><br class=""></div><div>The units are:</div><div>- min: Minimum of the 7 runs.</div><div>- max: Maximum of the 7 runs.</div><div>- avg: Average of the 7 runs.</div><div>- total: Total of the 7 runs.</div><div>- med: Median of the 7 runs.</div><div>- SD: Standard deviation of the 7 runs.</div><div>- SD%: Standard deviation of the7  runs in percentage.</div><div><br class=""></div><div>-Quentin</div></div></body></html>