<div class="gmail_quote">On Thu, Apr 12, 2012 at 12:19 AM, Jakob Stoklund Olesen <span dir="ltr"><<a href="mailto:stoklund@2pi.dk">stoklund@2pi.dk</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<div style="word-wrap:break-word"><div><div class="h5"><br><div><div>On Apr 11, 2012, at 4:15 PM, Chandler Carruth <<a href="mailto:chandlerc@gmail.com" target="_blank">chandlerc@gmail.com</a>> wrote:</div><br><blockquote type="cite">
<div class="gmail_quote">On Thu, Apr 12, 2012 at 12:13 AM, Jakob Stoklund Olesen <span dir="ltr"><<a href="mailto:stoklund@2pi.dk" target="_blank">stoklund@2pi.dk</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex">

<div>I would run SPEC with many threshold settings, recording aggregate code size and SPEC score. Many days sounds reasonable.</div><div><br></div><div>Thanks for doing this.</div></blockquote></div><br><div>One issue is that I won't have the days for a few weeks... =// I'm over booked at the moment, and doing this in spare time. Are you worried about this in the short term? I can try to run some tests sooner and tweak things if that helps.</div>

</blockquote></div><br></div></div><div>I don't think you can tweak the thresholds sensibly without a large ensemble of benchmarks. I'd rather leave them as is in the short term.</div></div></blockquote><div><br>
</div><div>SGTM (and I agree... in fact, I suspect it will have to be a collaborative effort, in order to get diversity between benchmarks in the test suite, ones you have access to, and ones i have access to... yay fun! ;])</div>
</div>