<div dir="ltr">Here are 2 patches, which are independent of each other.<div><br></div><div>The first splits PrologEpilogInserter into 2 parts : <a href="http://reviews.llvm.org/D16481">http://reviews.llvm.org/D16481</a></div><div>After looking at the code I thought it made more sense for the major split to include whether callee-saved register spills are supported. So for non-virtual targets, virtual registers are not supported and scavenging is optionally supported, and vice versa for virtual targets. The base case includes just frame finalization, prolog/epilog code insertion and FrameIndex elimination. The CSR-supporting case includes CSR spilling and optionally scavenging.</div><div>It's a little bit ugly because e.g. most of the target hooks (even those used in the core pieces like FI elimination) take a pointer to a RegScavenger object which could be null, and there's still a little bit of code in the FI elimination code that takes CSR spilling into account. But I do think it is an improvement, and I'd be interested in feedback. This patch could be ready to land if people are happy with the design.</div><div><br></div><div>The other (<a href="http://reviews.llvm.org/D16483">http://reviews.llvm.org/D16483</a> )is the aforementioned prototype for requiring MachineFunctionPasses to opt-in to supporting virtual registers. It's only done for WebAssembly and X86 so far as a proof of concept. The interesting bit to look at is the way it's implemented (right now it's just a virtual method that's called inside an assert which can be compiled away) and the passes that will opt-in. It's mostly a concrete version of the info I put in my previous post. Before it lands I'll have to update the rest of the targets, and will probably manually expand the SUPPORTS_VIRTUAL_REGISTERS macro which I used for my experimental convenience (unless you think it's actually better that way).</div><div><br></div><div>Thanks for your help,</div><div>-Derek</div></div><br><div class="gmail_quote"><div dir="ltr">On Wed, Jan 13, 2016 at 3:40 PM Quentin Colombet <<a href="mailto:qcolombet@apple.com">qcolombet@apple.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div style="word-wrap:break-word">Hi Derek,<div><br></div><div>Thanks for tackling this.</div><div><br><div></div></div></div><div style="word-wrap:break-word"><div><div><blockquote type="cite"><div>On Jan 13, 2016, at 3:32 PM, Derek Schuff <<a href="mailto:dschuff@google.com" target="_blank">dschuff@google.com</a>> wrote:</div><br><div><div dir="ltr"><div>We had some additional discussion on this. There is a lot of concern generally about post-RA passes which do not expect to have to handle virtual registers; specifically if they unexpectedly start seeing virtual registers, or if they work today but start making assumptions in the future. We discussed considering a mechanism that would require MachineFunctionPasses to "opt-in" and declare that they support virtual registers; this could be enforced via an assert or whatever, and it would be clear and obvious (both for new and existing passes) whether a pass should expect to deal with vregs or not. This kind of thing might also be useful for the purposes MachineRegisterInfo::isSSA() and/or MachineRegisterInfo::tracksLiveness() serve as well<br></div><div><br></div><div>I've been experimenting with such a mechanism (the details of how it would be implemented could be a separate discussion) with X86 and WebAssembly, and looking at what passes run, what would need to be modified, the effects of disabling them, etc.</div><div><br></div><div>Currently the following target-independent passes run after register allocation (ordered and categorized according to how they appear in lib/CodeGen/Passes.cpp):</div><div><div><br></div><div>OptimizedRegAlloc: (run only if there is a RegAllocPass, which is not true for wasm)<br></div><div> StackSlotColoring</div><div> PostRAMachineLICM</div><div>ShrinkWrap</div><div>PrologEpilogInserter</div><div>Machine late optimization:</div><div> BranchFolderPass</div><div> TailDuplicate</div><div> MachineCopyPropagation</div><div> PostRAScheduler</div><div>ExpandPostRAPseudos</div><div>ImplicitNullChecks (optional)</div><div>PostMachineScheduler or PostRAScheduler</div><div>GC:</div><div> GCMachineCodeAnalysis</div><div> GC info printer</div><div>Block Placement:</div><div> MachineBlockPlacement</div><div> MachineBlockPlacementStats</div><div>FuncletLayout</div><div>StackMapLiveness</div><div>LiveDebugValues</div></div><div><br></div><div>All of the pre-regalloc passes (and analyses) would just get marked as supporting virtual registers.</div><div><br></div><div><br></div><div>Here are some notes about passes of interest:</div><div><br></div><div><div>PostRAMachineLICM (if not overriden by the target) is just the same MachineLICM which runs before regalloc and so handles vregs already.</div><div><br></div><div>PrologEpilogInserter has some analysis phases (calculating CSR and frame information, assigning spill slots, calculating frame offsets) and some code insertion phases (inserting CSR spills/restores and prologs/epilogs, eliminating FrameIndex), and finally a scavenging phase. Any of the insertion phases can introduce virtual new registers, after which all subsequent phases must be prepared to handle them. So it might make sense to declare that this pass must support vregs anyway, or try to split it up or otherwise more clearly define which parts must or need not have that support.</div></div></div></div></blockquote><div><br></div></div></div></div><div style="word-wrap:break-word"><div><div><div>When we discussed with JF and Dan, we agreed that split it up was the best solution. The split could be a class specialization for instance. E.g., the main class would not run the scavenger, whereas the specialized class would.</div><div><br></div><div>Cheers,</div><div>-Quentin</div></div></div></div><div style="word-wrap:break-word"><div><div><br><blockquote type="cite"><div><div dir="ltr"><div><div><br></div><div>BranchFolder already handles vregs. A comment at the top of the file mentions that it should stay that way (suggesting that it was fixed up for NVPTX), but that it can't handle SSA.</div><div><br></div><div>TailDuplicate is currently disabled for wasm via TargetMachine::RequiresStructuredCFG()</div><div><br></div><div>MachineCopyPropagation: currently has checks (even for release builds) that there are no vregs, and is currently disabled manually for wasm and NVPTX.</div><div><br></div><div>ExpandPostRAPseudos has 2 parts: LowerSubregToReg expects only physregs and has asserts to ensure it.</div><div>LowerCopy simply calls TargetInstrInfo::copyPhysReg() to emit the instructions for lowering COPYs (wasm's implementation of copyPhysReg() just handles vregs) and is otherwise agnostic.</div><div><br></div><div>MachineBlockPlacement doesn't do anything at all to any MachineInstrs itself, but just relies on TargetInstrInfo methods to update the branches.</div></div><div><br></div><div>I'll post again later with the prototype code.</div><br><br><div class="gmail_quote"><div dir="ltr">On Thu, Dec 10, 2015 at 3:52 PM Derek Schuff <<a href="mailto:dschuff@google.com" target="_blank">dschuff@google.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div class="gmail_quote"><div dir="ltr">On Thu, Dec 10, 2015 at 2:46 PM Matthias Braun via llvm-dev <<a href="mailto:llvm-dev@lists.llvm.org" target="_blank">llvm-dev@lists.llvm.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">To say this first: This whole discussion about using virtregs until emit or having growable physregs is hard to argue without actually having experience trying to go either way.<br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div>Indeed, we are accumulating exactly this experience now, having started with VRegs, as that seems like a more natural fit conceptually. The problem is that we are essentially blocked on this (obviously lack of PEI/frameindex elimination blocks a lot of things) so in order to make further progress and get further experience we will need either a simple change something like the one proposed or to do what NVPTX did and just make our own copy of PEI.</div></div></div><div dir="ltr"><div class="gmail_quote"><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<br>
Problems when using virtregs throughout the backend until emit time:<br>
- The MC layer is using MCPhysReg (which is an uint16_t) and would need retrofitting to support virtregs<br>
- VirtRegs are assumed to have a definition, physregs can appear "out of thin air" in some situations like function parameters, or exception objects appearing in a register when going to a landingpad.<br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div>This is what Dan is trying to address with <a href="http://reviews.llvm.org/D14750" target="_blank">http://reviews.llvm.org/D14750</a>. The discussion on that change is essentially the same as the one going on here.</div></div></div><div dir="ltr"><div class="gmail_quote"><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
- VirtRegs are assumed to be interchangeable, replaceing vreg5 with vreg42 shouldn't affect the program semanic (given they both have the same register class and we have no other defs/uses of vreg42), if you use virtregs for parameter passing this won't be true anymore<br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div>I believe this would be addressed for wasm with a mechanism like that in D14750 (or the current special ARGUMENT pseudos we have now) in combination with the fact that we remap the virtual registers into a different number space in a way that takes the arguments into account, just before emission.</div></div></div><div dir="ltr"><div class="gmail_quote"><div><br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
- regmask clobbers only affect physregs<br>
(- You cannot reuse the existing regalloc infrastructure, but IMO that's not a good idea anyway for virtual ISAs)<br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div>Agreed.</div></div></div><div dir="ltr"><div class="gmail_quote"><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<br>
Problems when allowing the dynamic creation of physregs:<br>
- The current assumption of all register being known at tbalegen time will mean that we probably need bigger changes to support dynamically growing physreg lists and it may take a while until we have flushed out all places that relied on a fixed-register number assumption.<br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div>This seems like a really big deal to me; plus a lot of the discussion above e.g. with regard to what the behavior of the pysical register classes, is about properties which are really only relevant for register allocation (and again I think we agree that we probably don't want to be using the normal register allocator anyway).</div></div></div><div dir="ltr"><div class="gmail_quote"><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
- You probably do not want to compute/modify some information like register class subsets/supersets. However as far as I can see we do not need subregister support for the virtual ISA usecase and may be fine just not allowing the combination of subregs with dynamic physreg creation.<br>
<br></blockquote></div></div><div dir="ltr"><div class="gmail_quote"><div>I think you are right.</div></div></div><div dir="ltr"><div class="gmail_quote"><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Non-Issues:<br>
- Liveness calculation should work as well with virtregs as with physregs<br>
<br>
All in all it seems to me like using virtregs until emission time may take less engineering effort to a point where it is 95% working, but will be a pain to maintain in the long term because we suddenly have physreg like semantics on virtregs for some targets (but not for "normal" ones).<br><br></blockquote><div><br></div></div></div><div dir="ltr"><div class="gmail_quote"><div> Perhaps it would be worthwhile to flesh out a bit more precisely what semantics are required.</div></div></div></blockquote></div></div>
</div></blockquote></div></div></div></blockquote></div>