<div dir="ltr"><div dir="ltr"><div dir="ltr"><div>Hi Lang,</div></div><br><div class="gmail_quote"><div dir="ltr">On Tue, Jan 8, 2019 at 10:05 PM Lang Hames <<a href="mailto:lhames@gmail.com">lhames@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Hi Martin,<div><br></div><div>What is the behavior when your simple program fails on Windows?</div></div></blockquote><div><br></div><div>When I run the simple program, "int main() { return 0; }", on Windows with lli (with orc-lazy) it simply prints the following and then exits:</div><div>
JITDylib "<main>" (ES: 0x000001b6e4ad3670):<br>Search order: [ ("<main>", all) ]<br>Symbol table:<br>    "__cxa_atexit": <not resolved> ( Lazy (MU=0x1b6e4ae3110), [Data] )<br>    "main": <not resolved> ( Lazy (MU=0x1b6e4ae7f10), [Callable] )<br>    "__dso_handle": <not resolved> ( Lazy (MU=0x1b6e4ae3110), [Data] )

</div><div> <br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><br></div><div>Could you attach the IR that clang produces for 'clang -S -emit-llvm main.cpp'?</div></div></blockquote><div><br></div><div>This is the IR:<br></div><div><br></div><div>; ModuleID = 'main.cpp'<br>source_filename = "main.cpp"<br>target datalayout = "e-m:w-i64:64-f80:128-n8:16:32:64-S128"<br>target triple = "x86_64-pc-windows-msvc19.16.27024"<br><br>; Function Attrs: noinline norecurse nounwind optnone uwtable<br>define dso_local i32 @main() #0 {<br>  %1 = alloca i32, align 4<br>  store i32 0, i32* %1, align 4<br>  ret i32 0<br>}<br><br>attributes #0 = { noinline norecurse nounwind optnone uwtable "correctly-rounded-divide-sqrt-fp-math"="false" "disable-tail-calls"="false" "less-precise-fpmad"="false" "min-legal-vector-width"="0" "no-frame-pointer-elim"="false" "no-infs-fp-math"="false" "no-jump-tables"="false" "no-nans-fp-math"="false" "no-signed-zeros-fp-math"="false" "no-trapping-math"="false" "stack-protector-buffer-size"="8" "target-cpu"="x86-64" "target-features"="+fxsr,+mmx,+sse,+sse2,+x87" "unsafe-fp-math"="false" "use-soft-float"="false" }<br><br>!llvm.module.flags = !{!0, !1}<br>!llvm.ident = !{!2}<br><br>!0 = !{i32 1, !"wchar_size", i32 2}<br>!1 = !{i32 7, !"PIC Level", i32 2}<br>!2 = !{!"clang version 8.0.0 (<a href="https://github.com/llvm-mirror/clang.git">https://github.com/llvm-mirror/clang.git</a> f8ec7c38feebd5cccae31acc7a50182b5474bfa9) (<a href="https://github.com/llvm-mirror/llvm.git">https://github.com/llvm-mirror/llvm.git</a> e7e4f1f171d0800bded962cc0181c6af5848d4d0)"}</div><div><br></div><div>I'll gladly try any eventual patches. I could also try to look into it myself, my knowledge and time are both a bit limited though. <br></div><div><br></div><div>//Martin<br></div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><br></div><div>I suspect the problem has to do with the different ways that ORC and MCJIT (and ORC-MCJIT) treat C++ runtime calls. In MCJIT these fall through to the real runtime. As long as there are no global static destructors this works out fine. If static destructors are registered with the program runtime however, they will be executed <i>after</i> the JIT has been torn down which usually leads to crash when the runtime jumps into deallocated JIT'd code. ORC tries to address this by intercepting certain runtime calls (in particular, __cxa_atexit) to register destructors with a simple c++ runtime managed by the JIT. That way the JIT can run static destructors before it deallocates code. I wrote and tested this on Darwin, and have tested it on Linux (though not recently), but I do not have access to a Windows machine to test with so it may well be broken there.</div><div><br></div><div>Cheers,</div><div>Lang. </div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr">On Sat, Jan 5, 2019 at 3:45 AM Martin Andersson via llvm-dev <<a href="mailto:llvm-dev@lists.llvm.org" target="_blank">llvm-dev@lists.llvm.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div>Hi Stefan,</div><div><br></div><div>Thanks for your reply. I tried running my simple example on Linux using lli and it does work fine. So I think the best long-term solution is to migrate my code to the new lazy orc jit. Unfortunately, even the simplest example does not work on Windows:</div><div>int main() { return 0; }</div><div><br></div><div>This is the output:<br></div><div>JITDylib "<main>" (ES: 0x000001b6e4ad3670):<br>Search order: [ ("<main>", all) ]<br>Symbol table:<br>    "__cxa_atexit": <not resolved> ( Lazy (MU=0x1b6e4ae3110), [Data] )<br>    "main": <not resolved> ( Lazy (MU=0x1b6e4ae7f10), [Callable] )<br>    "__dso_handle": <not resolved> ( Lazy (MU=0x1b6e4ae3110), [Data] )<br></div><div><br></div><div>I run with these arguments, and I checked and -fno-use-cxa-atexit is set by clang:</div><div>clang -S -emit-llvm main.cpp</div><div>lli -jit-kind=orc-lazy main.ll</div><div><br></div><div>Using mcjit and orc-mcjit as the jit-kind in lli works fine on Windows.</div><div><br></div><div>I will keep investigating how to best proceed, thanks for pointing me in the right direction.</div><div><br></div><div>//Martin<br></div></div><br><div class="gmail_quote"><div dir="ltr">On Fri, Jan 4, 2019 at 10:49 PM Stefan Gränitz <<a href="mailto:stefan.graenitz@gmail.com" target="_blank">stefan.graenitz@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
  
    
  
  <div bgcolor="#FFFFFF">
    Hi Martin<br>
    <br>
    <blockquote type="cite">
      <div>However, the inline functions are not in that set so they are
        not promoted to strong definitions. Shouldn't functions defined
        in the jitted code be our responsibility?<br>
        [...]<br>
        This program does not work, clang-interpreter crashes because it
        cannot find the symbol for the Test constructor function.<br>
      </div>
      <div><br>
      </div>
      <div>class Test {<br>
            public: Test() {}<br>
        };<br>
        <br>
        int main()<br>
        {<br>
            Test test;<br>
            return 0;<br>
        }</div>
    </blockquote>
    You could compile your example to bitcode and run it with lli. This
    will provide more information and the issue may be discussed easier
    on bitcode level. (Not very familiar with clang-interpreter, but it
    looks more like an example for illustration than a bulletproof
    tool.)<br>
    <br>
    <blockquote type="cite">Looking closer what happens with the
      ResponsibiltySet. When it is created it tries to to find symbols
      for all the names it knows about. Eventually the look up request
      ends up in my application [...]<br>
    </blockquote>
    Instead of using the legacy resolvers you might prefer a fallback
    symbol generator here. The lli tool uses this approach to provide
    symbols from the host process for the JITed code (see:
<a class="gmail-m_-5172448956428010247gmail-m_7768078707790917986gmail-m_-486701154963924152moz-txt-link-freetext" href="https://github.com/llvm-mirror/llvm/blob/8ffa038b3ef4448af8bf31f6c50281779939c774/tools/lli/lli.cpp#L807" target="_blank">https://github.com/llvm-mirror/llvm/blob/8ffa038b3ef4448af8bf31f6c50281779939c774/tools/lli/lli.cpp#L807</a>).<br>
    <br>
    Hope it helps<br>
    Stefan<br>
    <br>
    <div class="gmail-m_-5172448956428010247gmail-m_7768078707790917986gmail-m_-486701154963924152moz-cite-prefix">Am 04.01.19 um 18:49 schrieb Martin
      Andersson via llvm-dev:<br>
    </div>
    <blockquote type="cite">
      
      <div dir="ltr">
        <div dir="ltr">
          <div dir="ltr">
            <div dir="ltr">
              <div dir="ltr">
                <div dir="ltr">
                  <div dir="ltr">
                    <div dir="ltr">
                      <div dir="ltr">
                        <div>Hi,</div>
                        <div><br>
                        </div>
                        <div>I am developing an application that uses
                          the ORC api to JIT compile C++ code using
                          Clang. So far I have done most of the work on
                          Windows, where it now mostly works as
                          expected. However, when I tried to run my
                          application on Linux I ran into some problems.
                          <br>
                        </div>
                        <div><br>
                        </div>
                        <div>The problem I ran into is that symbols for
                          jitted inline functions cannot be resolved.
                          Both LLVM and Clang are checked out with
                          latest master branch.</div>
                        <div><br>
                        </div>
                        <div>It is probably me that is doing something
                          wrong but I cannot figure out what it is. Here
                          is what I found so far. In the file
                          RuntimeDyld.cpp in function loadObjectImpl, a
                          check is made whether a particular function is
                          weak or not. Since inline functions are weak
                          (as I understood it) an attempt is made to
                          promote this symbol to a strong definition.
                          But only if it is present in the
                          "ResponsibilitySet", that check is made on
                          line 273. However, the inline functions are
                          not in that set so they are not promoted to
                          strong definitions. Shouldn't functions
                          defined in the jitted code be our
                          responsibility?</div>
                        <div><br>
                        </div>
                        <div> Looking closer what happens with the
                          ResponsibiltySet. When it is created it tries
                          to to find symbols for all the names it knows
                          about. Eventually the look up request ends up
                          in my application where I use a
                          LegacyIRCompileLayer to search for the symbol
                          in the jitted module. That function call
                          eventually ends up in getSymbol in
                          RTDyldObjectLinkingLayer.h where the symbol is
                          found but it does not have and address
                          (Address is zero and Flags is 50). So an
                          instance of JITSymbol is returned to the
                          LegacyRTDyldObjectLinkingLayer and the
                          findSymbol function which checks if an valid
                          symbol was found (on line 406 in
                          RTDyldObjectLinkingLayer.h). Since the address
                          is zero the JITSymbol is deemed to be not
                          valid, via the bool operator in JITSymbol.h
                          and that is why that particular symbol name
                          does not end up in the ResponsibilitySet. That
                          is as far as I got, I don't know enough about
                          LLVM to understand what the problem is (if
                          any).<br>
                        </div>
                        <div><br>
                        </div>
                        <div>This issue can be replicated with the
                          clang-interpreter application.</div>
                        <div><br>
                        </div>
                        <div>This program does not work,
                          clang-interpreter crashes because it cannot
                          find the symbol for the Test constructor
                          function.<br>
                        </div>
                        <div><br>
                        </div>
                        <div>class Test {<br>
                              public: Test() {}<br>
                          };<br>
                          <br>
                          int main()<br>
                          {<br>
                              Test test;<br>
                              return 0;<br>
                          }</div>
                        <div><br>
                        </div>
                        <div>This program works:</div>
                        <div><br>
                        </div>
                        <div>class Test {<br>
                              public: Test();<br>
                          };<br>
                          <br>
                          Test::Test() { }<br>
                          <br>
                          int main()<br>
                          {<br>
                              Test test;<br>
                              return 0;<br>
                          }<br>
                        </div>
                        <div><br>
                        </div>
                        <div>The first version works on Windows since
                          the inline constructor is not marked as weak.
                          Can anyone enlighten me on what is happening
                          here? Is this the expected behavior, and if it
                          is, what am I doing wrong?</div>
                        <div><br>
                        </div>
                        <div>Btw, I also tried various compiler flags
                          (fno-inline and fno-inline-functions) but
                          those do not help in this case.<br>
                        </div>
                        <div><br>
                        </div>
                        <div>//Martin<br>
                        </div>
                        <div><br>
                        </div>
                      </div>
                    </div>
                  </div>
                </div>
              </div>
            </div>
          </div>
        </div>
      </div>
      <br>
      <fieldset class="gmail-m_-5172448956428010247gmail-m_7768078707790917986gmail-m_-486701154963924152mimeAttachmentHeader"></fieldset>
      <pre class="gmail-m_-5172448956428010247gmail-m_7768078707790917986gmail-m_-486701154963924152moz-quote-pre">_______________________________________________
LLVM Developers mailing list
<a class="gmail-m_-5172448956428010247gmail-m_7768078707790917986gmail-m_-486701154963924152moz-txt-link-abbreviated" href="mailto:llvm-dev@lists.llvm.org" target="_blank">llvm-dev@lists.llvm.org</a>
<a class="gmail-m_-5172448956428010247gmail-m_7768078707790917986gmail-m_-486701154963924152moz-txt-link-freetext" href="http://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev" target="_blank">http://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev</a>
</pre>
    </blockquote>
    <pre class="gmail-m_-5172448956428010247gmail-m_7768078707790917986gmail-m_-486701154963924152moz-signature" cols="72"></pre>
  </div>

</blockquote></div></div></div>
_______________________________________________<br>
LLVM Developers mailing list<br>
<a href="mailto:llvm-dev@lists.llvm.org" target="_blank">llvm-dev@lists.llvm.org</a><br>
<a href="http://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev" rel="noreferrer" target="_blank">http://lists.llvm.org/cgi-bin/mailman/listinfo/llvm-dev</a><br>
</blockquote></div>
</blockquote></div></div></div>