2024 Clojure 状态调查!中分享您的想法。

欢迎!请查阅关于页面获取更多关于此功能的信息。

+52
Clojure
已关闭

Android ART 在字节码上进行编译时验证,并因任何锁定宏的使用而失败。错误看起来就像 CLJ-1829 中的那样(在这种情况下,clojure.core.server/stop-server 调用了锁定宏)

10-16 14:49:26.801 2008-2008/? E/AndroidRuntime: java.lang.VerifyError: 拒绝类 clojure.core.server$stop_server,因为它未通过编译时验证('clojure.core.server$stop_server' 的声明出现在 /data/app/com.clojure_on_android-1/base.apk 中)

原因:正如 Android 问题https://code.google.com/p/android/issues/detail?id=80823上的讨论,这似乎是由于 JVM 规范中“结构化锁定”规定的更严格执行导致的。

看起来在 locking 中的 monitor-enter、monitor-exit 和 try/finally 块的混合创建出 ART 将其标记为未平衡 monitorenter/monitorexit 字节码的路径。特别是,monitorenter 和 monitorexit 本身可能会抛出异常(在空锁定对象上)。Java 字节码对这些情况进行了一些复杂的异常表处理,但据我所知,这不可能不修改 Clojure 编译器来实现。

方法:一种可能的方法是在 Java 的同步块上下文中调用由锁定传入的主体。这通过将问题交给 Java 来避免复杂的字节码问题,但性能影响尚不清楚。

补丁:clj-1472-3.patch

参见:与 Java 同步块的对比分析显示出许多差异
https://gist.github.com/AdamClements/2ae6c4919964b71eb470

审核:由 Alex Miller 审核的 - 我将此标记为已审核,因为我认为这是一个可行的解决方案,修复了该问题,并且由于它使用频率较低,我不太担心性能问题。我将标记我认为另一种处理方法可能是将 locking 做为具有编译器支持的特设形式,但我不确定这是否值得去做,因此我会将此留给 Rich 决定。

已关闭,备注:已修复

41 个回答

0

评论者:eraserhd

使用clj-1472-3.patch,有时可以构建成功。其他时候我得到这个错误

`
致命错误:com.oracle.svm.core.util.VMError$HostedError:具有可重定位指针的对象必须是不变的

    at com.oracle.svm.core.util.VMError.guarantee(VMError.java:85)                                                      
    at com.oracle.svm.hosted.image.NativeImageHeap.choosePartition(NativeImageHeap.java:492)                            
    at com.oracle.svm.hosted.image.NativeImageHeap.addObjectToBootImageHeap(NativeImageHeap.java:451)                   
    at com.oracle.svm.hosted.image.NativeImageHeap.addObject(NativeImageHeap.java:271)                                  
    at com.oracle.svm.hosted.image.NativeImageCodeCache.addConstantToHeap(NativeImageCodeCache.java:369)                
    at com.oracle.svm.hosted.image.NativeImageCodeCache.addConstantsToHeap(NativeImageCodeCache.java:356)               
    at com.oracle.svm.hosted.NativeImageGenerator.doRun(NativeImageGenerator.java:882)                                  
    at com.oracle.svm.hosted.NativeImageGenerator.lambda$run$0(NativeImageGenerator.java:401)                           
    at java.util.concurrent.ForkJoinTask$AdaptedRunnableAction.exec(ForkJoinTask.java:1386)                             
    at java.util.concurrent.ForkJoinTask.doExec(ForkJoinTask.java:289)                                                  
    at java.util.concurrent.ForkJoinPool$WorkQueue.runTask(ForkJoinPool.java:1056)                                      
    at java.util.concurrent.ForkJoinPool.runWorker(ForkJoinPool.java:1692)                                              
    at java.util.concurrent.ForkJoinWorkerThread.run(ForkJoinWorkerThread.java:157)                                     

`

我在Graal rc10上,我发现造成这种错误的最简代码是

`
(ns rep.core
(:gen-class))

(defn- foo [s]
(locking s

42))

(defn -main
[& args]
(foo))
`

将某物锁定(它不是一个参数,如var)可以绕过这个问题。

这似乎像是一个Graal问题,所以我会在那里报告。

0
_评论者:alexmiller_

好的,请更新。我们距离下一个可能包含这个问题的发布版还有一段很长时间,所以好的是得到更多反馈。
0

评论者:bronsa

如果可能的话,我将反对将locking改为新的特殊形式。这将使任何分析相关库变得向前不兼容,并且很可能会在依赖项升级时引起问题

0

评论者:eraserhd

在Graal VM rc11(刚刚发布)中,clj-1472-3.patch可以无问题工作。

0

评论者:jare

从Clojure 1.9迁移到1.10后,开始出现这个错误与GraalVM本地编译有关
最小重复是

`
(ns clj10-graal-repro.core
(:require [clojure.spec.alpha :as s])
(:gen-class))

(s/def ::foo (s/coll-of string?))

(defn -main
[& args]
(println (s/valid? ::foo ["bar"]))
(println clojure-version))
`

我想问题是Clojure 1.10依赖于spec.alpha 0.2.176,该版本(link: https://github.com/clojure/spec.alpha/commit/31165fec69ff86129a1ada8b3f50864922dfc88a 文本:使用锁定)使用了锁定

更多详情见CLJ-2482

0

评论作者:gshayban

我添加了一个补丁(链接:^CLJ-1472-reentrant-finally.patch),使得锁定宏产生的控制流与 javac 生成的 synchronized 块完全相同。这需要编译器的某些帮助。

针对以下代码:

synchronized (o) { int i = 400L; }

javac 输出

0: aload_0

   1: dup
   2: astore_1
   3: monitorenter
   4: ldc2_w        #7           // BEGIN TRY       // long 400l
   7: lstore_2
   8: aload_1
   9: monitorexit               // END TRY
  10: goto          20           // GOTO RET
  13: astore        4         // BEGIN FINALLY
  15: aload_1                     // store exception
  16: monitorexit           // END FINALLY
  17: aload         4             // rethrow
  19: athrow
  20: return
Exception table:
   from    to  target type
       4    10    13   any
      13    17    13   any

注意

  1. 最终代码块在自己的异常表中有自己的异常处理器
  2. monitorenter 在 try 体区域外
  3. 通常,finally 主体会复制到 try 主体中(就像在正常的 TryExpr 中一样)

我使用 Graal 19.0.2 和这个修改过的 clojure,通过 AOT-编译前一个评论的复现,然后调用 Graal 进行测试

native-image -cp src:clojure.jar --initialize-at-build-time=clojure --no-server -H:+ReportUnsupportedElementsAtRuntime --no-fallback clj10_graal_repro.core

成功生成了一个编译过程中无错误的二进制文件。然而,Graal 用户会失望地发现,这个二进制文件不能运行
找不到 clojure/core/server__init.class

可能是因为 Clojure 1.10.1 延迟了 clojure.core.server + 用户的初始化

0
0

评论作者:gshayban

这个补丁以一种微妙的方式出了问题 — 正在修复。

0

评论作者:gshayban

(链接:^CLJ-1472-reentrant-finally2.patch)

0
参考:https://clojure.atlassian.net/browse/CLJ-1472(由 adamclements 报告)
0

你好,

我在使用Clojure Spec的一个项目中遇到了这个问题。我创建了一个简单的项目来重现这个问题:https://github.com/alzadude/cljc-hello-world/tree/graalvm-spec-issue

我试图在应用Clojure补丁后使用Graal native-image来创建一个可运行的二进制文件。然而,当我使用修补过的Clojure jar包时,我还是收到了“监控不平衡”的错误。我做错了什么?

谢谢!

1 在Clojure中使用补丁构建

cd /mnt/d/Projects/clojure
patch -p1 < /mnt/c/Users/alex/Downloads/CLJ-1472-reentrant-finally2.patch
mvn clean
mvn -Plocal install -Dmaven.test.skip=true

2 尝试使用clj/deps.edn创建Graalvm原生映像

cd /mnt/d/Projects/cljc-hello-world
GRAALVM_HOME=/usr/local/graalvm-ce-19.2.0.1/ clojure -Anative-image

即使应用了补丁,我仍然收到“监控不平衡”的错误

Cleaning target
Creating target/classes
  Compiling hello-world.core
Creating target/cljc-hello-world
ERROR! Warning: Aborting stand-alone image build. unbalanced monitors: mismatch at monitorexit, 96|LoadField#lockee__5436__auto__ != 3|LoadField#lockee__5436__auto__
Detailed message:
Call path from entry point to clojure.spec.gen.alpha$dynaload$fn__2628.invoke():
        at clojure.spec.gen.alpha$dynaload$fn__2628.invoke(alpha.clj:21)
        at clojure.lang.AFn.run(AFn.java:22)
        at java.lang.Thread.run(Thread.java:748)
        at com.oracle.svm.core.thread.JavaThreads.threadStartRoutine(JavaThreads.java:460)
        at com.oracle.svm.core.posix.thread.PosixJavaThreads.pthreadStartRoutine(PosixJavaThreads.java:193)
        at com.oracle.svm.core.code.IsolateEnterStub.PosixJavaThreads_pthreadStartRoutine_e1f4a8c0039f8337338252cd8734f63a79b5e3df(generated:0)

Warning: Use -H:+ReportExceptionStackTraces to print stacktrace of underlying exception
Warning: Image 'target/cljc-hello-world' is a fallback image that requires a JDK for execution (use --no-fallback to suppress fallback image generation).

3 尝试使用native-image和显式类路径创建Graalvm原生映像,以排除deps.edn/cambada等问题

cd /mnt/d/Projects/cljc-hello-world
clojure -Auberjar
/usr/local/graalvm-ce-19.2.0.1/bin/native-image --class-path ../clojure/target/clojure-1.11.0-master-SNAPSHOT.jar --report-unsupported-elements-at-runtime --initialize-at-build-time -jar ./target/cljc-hello-world-1.0.0-SNAPSHOT-standalone.jar -H:Name=./target/cljc-hello-world

我仍然收到“监控不平衡”的错误

Build on Server(pid: 10328, port: 64314)*
[./target/cljc-hello-world:10328]    classlist:   5,817.52 ms
[./target/cljc-hello-world:10328]        (cap):   2,576.68 ms
[./target/cljc-hello-world:10328]        setup:   3,923.40 ms
[./target/cljc-hello-world:10328]     analysis:  11,800.59 ms
Warning: Aborting stand-alone image build. unbalanced monitors: mismatch at monitorexit, 96|LoadField#lockee__5436__auto__ != 3|LoadField#lockee__5436__auto__
Detailed message:
Call path from entry point to clojure.spec.gen.alpha$dynaload$fn__2628.invoke():
        at clojure.spec.gen.alpha$dynaload$fn__2628.invoke(alpha.clj:21)
        at clojure.lang.AFn.run(AFn.java:22)
        at java.lang.Thread.run(Thread.java:748)
        at com.oracle.svm.core.thread.JavaThreads.threadStartRoutine(JavaThreads.java:460)
        at com.oracle.svm.core.posix.thread.PosixJavaThreads.pthreadStartRoutine(PosixJavaThreads.java:193)
        at com.oracle.svm.core.code.IsolateEnterStub.PosixJavaThreads_pthreadStartRoutine_e1f4a8c0039f8337338252cd8734f63a79b5e3df(generated:0)

Warning: Use -H:+ReportExceptionStackTraces to print stacktrace of underlying exception
Build on Server(pid: 10328, port: 64314)
[./target/cljc-hello-world:10328]    classlist:     217.19 ms
[./target/cljc-hello-world:10328]        (cap):   1,244.81 ms
[./target/cljc-hello-world:10328]        setup:   1,535.89 ms
[./target/cljc-hello-world:10328]   (typeflow):   1,309.40 ms
[./target/cljc-hello-world:10328]    (objects):   1,430.65 ms
[./target/cljc-hello-world:10328]   (features):     120.57 ms
[./target/cljc-hello-world:10328]     analysis:   2,906.19 ms
[./target/cljc-hello-world:10328]     (clinit):      88.70 ms
[./target/cljc-hello-world:10328]     universe:     250.93 ms
[./target/cljc-hello-world:10328]      (parse):     315.62 ms
[./target/cljc-hello-world:10328]     (inline):     739.40 ms
[./target/cljc-hello-world:10328]    (compile):   3,100.68 ms
[./target/cljc-hello-world:10328]      compile:   4,401.60 ms
[./target/cljc-hello-world:10328]        image:     296.36 ms
[./target/cljc-hello-world:10328]        write:     195.80 ms
[./target/cljc-hello-world:10328]      [total]:   9,868.80 ms
Warning: Image './target/cljc-hello-world' is a fallback image that requires a JDK for execution (use --no-fallback to suppress fallback image generation).
...