在下载依赖时添加重试？

Question

我们的CI运行失败，因为Clojars出现了一个临时错误

构建类路径出错。无法传输工件
rewrite-clj:rewrite-clj:jar:1.1.45 从/到 clojars
(https://repo.clojars.org/): 连接到 repo.clojars.org:443
[repo.clojars.org/146.75.29.128] 失败：连接超时 401 错误
进程以退出代码1完成。

是否考虑在 tools.deps 中添加重试来处理临时故障以下载依赖项看起来是个好主意？

Answer 1

401 表示未经授权。这似乎并不是我们想要重试的错误？

我不确定我们能否区分出哪种植入重试会有价值的情况（一些这可能是通过 Maven 库隐藏的）。

Comments

另一方面，Maven可能会尝试访问多个库来查找包含该构件的库。增加重试机制可能会导致搜索时间更长，或者对所有库增加大量流量。

---

尽管不是401错误，我们经常会遇到类似的错误在CI中。重新运行构建似乎总是可以修复这个问题。

正在下载：从clojars下载 metosin/muuntaja/0.6.8/muuntaja-0.6.8.pom
...
构建classpath时出错。无法读取metosin:muuntaja:jar:0.6.8的构件描述符
org.eclipse.aether.resolution.ArtifactDescriptorException: 无法读取metosin:muuntaja:jar:0.6.8的构件描述符
    在 org.apache.maven.repository.internal.DefaultArtifactDescriptorReader.loadPom(DefaultArtifactDescriptorReader.java:259)
    在 org.apache.maven.repository.internal.DefaultArtifactDescriptorReader.readArtifactDescriptor(DefaultArtifactDescriptorReader.java:175)
    在 org.eclipse.aether.internal.impl.DefaultRepositorySystem.readArtifactDescriptor(DefaultRepositorySystem.java:255)
    在 clojure.tools.deps.alpha.extensions.maven$fn__1061.invokeStatic(maven.clj:132)
    在 clojure.tools.deps.alpha.extensions.maven$fn__1061.invoke(maven.clj:122)
    在 clojure.lang.MultiFn.invoke(MultiFn.java:244)
    在 clojure.tools.deps.alpha$expand_deps$children_task__754$fn__756$fn__757.invoke(alpha.clj:406)
    在 clojure.tools.deps.alpha.util.concurrent$submit_task$task__479.invoke(concurrent.clj:35)
    在 clojure.lang.AFn.call(AFn.java:18)
    在 java.base/java.util.concurrent.FutureTask.run(FutureTask.java:264)
    在 java.base/java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1128)
    在 java.base/java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:628)
    在 java.base/java.lang.Thread.run(Thread.java:829)
原因：org.eclipse.aether.resolution.ArtifactResolutionException: 无法传输构件 metosin:muuntaja:pom:0.6.8 从 clojars (https://repo.clojars.org/): /ci/.m2/repository/metosin/muuntaja/0.6.8/muuntaja-0.6.8.pom.part (文件或目录不存在)
    在 org.eclipse.aether.internal.impl.DefaultArtifactResolver.resolve(DefaultArtifactResolver.java:425)
    在 org.eclipse.aether.internal.impl.DefaultArtifactResolver.resolveArtifacts(DefaultArtifactResolver.java:229)
    在 org.eclipse.aether.internal.impl.DefaultArtifactResolver.resolveArtifact(DefaultArtifactResolver.java:207)
    在 org.apache.maven.repository.internal.DefaultArtifactDescriptorReader.loadPom(DefaultArtifactDescriptorReader.java:244)
    ... 12 more
原因：org.eclipse.aether.transfer.ArtifactTransferException: 无法传输构件 metosin:muuntaja:pom:0.6.8 从 clojars (https://repo.clojars.org/): /ci/.m2/repository/metosin/muuntaja/0.6.8/muuntaja-0.6.8.pom.part (文件或目录不存在)
    在 org.eclipse.aether.connector.basic.ArtifactTransportListener.transferFailed(ArtifactTransportListener.java:52)
    在 org.eclipse.aether.connector.basic.BasicRepositoryConnector$TaskRunner.run(BasicRepositoryConnector.java:369)
    在 org.eclipse.aether.util.concurrency.RunnableErrorForwarder$1.run(RunnableErrorForwarder.java:75)
    在 org.eclipse.aether.connector.basic.BasicRepositoryConnector$DirectExecutor.execute(BasicRepositoryConnector.java:628)
    在 org.eclipse.aether.connector.basic.BasicRepositoryConnector.get(BasicRepositoryConnector.java:262)
    在 org.eclipse.aether.internal.impl.DefaultArtifactResolver.performDownloads(DefaultArtifactResolver.java:514)
    在 org.eclipse.aether.internal.impl.DefaultArtifactResolver.resolve(DefaultArtifactResolver.java:402)
    ... 15 more
原因：java.io.FileNotFoundException: /ci/.m2/repository/metosin/muuntaja/0.6.8/muuntaja-0.6.8.pom.part (文件或目录不存在)
    在 java.base/java.io.FileInputStream.open0(Native Method)
    在 java.base/java.io.FileInputStream.open(FileInputStream.java:219)
    在 java.base/java.io.FileInputStream.<init>(FileInputStream.java:157)
    在 org.eclipse.aether.internal.impl.DefaultFileProcessor.copy(DefaultFileProcessor.java:163) 中
    在 org.eclipse.aether.internal.impl.DefaultFileProcessor.copy(DefaultFileProcessor.java:151) 中
    在 org.eclipse.aether.internal.impl.DefaultFileProcessor.move(DefaultFileProcessor.java:252) 中
    在 org.eclipse.aether.connector.basic.BasicRepositoryConnector$GetTaskRunner.runTask(BasicRepositoryConnector.java:482) 中
    在 org.eclipse.aether.connector.basic.BasicRepositoryConnector$TaskRunner.run(BasicRepositoryConnector.java:364) 中
    ... 还有 20 个更多

---

上面的长错误堆栈是由于缺少本地文件，而不是找不到网络资源的问题

   原因：java.io.FileNotFoundException: /ci/.m2/repository/metosin/muuntaja/0.6.8/muuntaja-0.6.8.pom.part (没有找到文件或目录)

由于对 ci 配置的了解不多，很难说，但可能是共享 /ci 文件系统的问题

---

我刚刚回看了日志，401 是我复制时包含的日志行号。

以下是带时间戳的日志

00:21:14 GMT 下载中：org/clojure/data.codec/0.1.0/data.codec-0.1.0.jar 来自 central
00:21:14 GMT 下载中：com/amazonaws/jmespath-java/1.11.713/jmespath-java-1.11.713.jar 来自 central
00:21:14 GMT 下载中：clj-commons/pomegranate/1.2.1/pomegranate-1.2.1.jar 来自 clojars
00:21:24 GMT 错误构建类路径。无法从/to clojars 传输工件 rewrite-clj:rewrite-clj:jar:1.1.45 (https://repo.clojars.org/):” rel="nofollow" target="_blank">https://repo.clojars.org/): 连接到 repo.clojars.org:443 [repo.clojars.org/146.75.29.128] 失败：连接超时
00:21:24 GMT 错误：进程以退出代码 1 完成。

如果您打算重试，我认为您可能想要捕获 ConnectTimeoutException： https://www.javadoc.io/doc/org.apache.httpcomponents/httpclient/4.3.4/org/apache/http/conn/ConnectTimeoutException.html

---

401 的笑话。

如果我们可以区分工件不存在与服务不可用的情况，我会对这种想法持开放态度。对我来说，并不清楚我们是否有这种机会并能够做到这一点，所以需要进行更多的调查。