为什么在运行测试（本地和CI）时 tools-deps 为什么要重新下载所有依赖

Question

你好，

我正在尝试下载所有依赖，以便CI上的测试和其他步骤不应该再下载。

我运行以下命令下载所有依赖：
clojure -Sdeps '{:mvn/local-repo ".m2"}' -A:dev:test:prod:frontend -Spath > /dev/null
我可以确认 .m2 和 .cpcache 目录都是存在的。

但当我运行
clojure -Sdeps '{:mvn/local-repo ".m2"}' -M:dev:test
所有依赖都会再次下载。

这个现象可以在本地和CI上重现。

描述
{:version "1.10.3.967" :config-files ["/usr/local/Cellar/clojure/1.10.3.967/deps.edn" "/Users/kirill/.clojure/deps.edn" "deps.edn" ] :config-user "/Users/kirill/.clojure/deps.edn" :config-project "deps.edn" :install-dir "/usr/local/Cellar/clojure/1.10.3.967" :config-dir "/Users/kirill/.clojure" :cache-dir ".cpcache" :force false :repro false :main-aliases "" :repl-aliases ""}

Answer 1

请分享一个可以复现此问题的 deps.edn。

Comments

```
  {:deps {;; 平台和系统逻辑
        aero/aero                           {:mvn/version "1.1.6"}
        buddy/buddy-sign                    {:mvn/version "3.2.0"}
        ch.qos.logback/logback-classic      {:mvn/version "1.2.3"}
        clj-htmltopdf/clj-htmltopdf                    {:mvn/version "0.1-alpha7"}
        clojure.java-time/clojure.java-time {:mvn/version "0.3.2"}
        com.novemberain/pantomime              {:mvn/version "2.11.0"}
        cryptohash-clj/cryptohash-clj       {:mvn/version "0.1.6"}
        expound/expound                    {:mvn/version "0.8.7"}
        haversine/haversine                 {:mvn/version "0.1.1"}
        integrant/repl                     {:mvn/version "0.3.2"}
        integrant/integrant                 {:mvn/version "0.8.0"}
        metosin/spec-tools                 {:mvn/version "0.10.4"}
        org.apache.pdfbox/pdfbox              {:mvn/version "2.0.22"}
        org.apache.pdfbox/pdfbox-tools      {:mvn/version "2.0.22"}
        org.bouncycastle/bcprov-jdk15on     {:mvn/version "1.67"}
        org.clojure/clojure              {:mvn/version "1.10.1"}
        org.clojure/core.async              {:mvn/version "1.3.610"}
        org.clojure/core.cache              {:mvn/version "1.0.207"}
        org.clojure/data.csv                {:mvn/version "1.0.0"}
        org.clojure/tools.cli               {:mvn/version "1.0.194"}

        ;; 数据库和SQL
        hikari-cp/hikari-cp       {:mvn/version "2.13.0"}
        honeysql/honeysql         {:mvn/version "1.0.444"}
        lambdaisland/uri          {:mvn/version "1.4.54"}
        migratus/migratus         {:mvn/version "1.3.3"}
        nilenso/honeysql-postgres {:mvn/version "0.4.112"}
        org.clojure/java.jdbc     {:mvn/version "0.7.11"}
        org.postgresql/postgresql {:mvn/version "42.2.18"}

        ;; HTTP和Web
        buddy/buddy-auth      {:mvn/version "2.2.0"}
        clj-http/clj-http     {:mvn/version "3.10.3"}
        hiccup/hiccup         {:mvn/version "1.0.5"}
        metosin/reitit        {:mvn/version "0.5.10"}
        org.clojure/data.json {:mvn/version "1.0.0"}
        ring/ring-defaults    {:mvn/version "0.3.2"}
        ring/ring-json        {:mvn/version "0.5.0"}
        ring/ring             {:mvn/version "1.8.2"}

        与第三方集成
        circleci/rollcage       {:mvn/version "1.0.208"}
        clj-commons/iapetos     {:mvn/version "0.1.11"}
        io.prometheus/simpleclient_hotspot {:mvn/version "0.11.0"}
        clj-commons/clj-ssh     {:mvn/version "0.5.15"}
        com.sun.mail/javax.mail {:mvn/version "1.6.2"}
        ovotech/clj-gcp         {:mvn/version "0.6.11"}}

 :paths ["src/clj" "src/cljc" "resources"]

 :aliases
 {:dev {:extra-paths ["env/dev/clj"]
        :extra-deps  {clj-commons/clj-yaml        {:mvn/version "0.7.0"}}
                      criterium/criterium         {:mvn/version "0.4.6"}
                      pogonos/pogonos             {:mvn/version "0.1.1"}
                      ubergraph/ubergraph         {:mvn 版本 "0.8.2"}
                      vlaaad/reveal               {:mvn 版本 "1.3.196"}

                      ;; to be deleted?
                      binaryage/devtools {:mvn 版本 "0.9.10"}}}

  :prod {:extra-paths ["env/prod/clj"]}

  :repl {:extra-paths ["env/dev/resources"]
         :ns-default  cockpit.repl
         :jvm-opts    ["-Dvlaaad.reveal.prefs={:font-size 30 :font-family \"Roboto\"}"]}

  :test {:extra-paths ["test" "test-resources"]
         :extra-deps {clj-http-fake/clj-http-fake {:mvn 版本 "1.0.3"}
                      nubank/matcher-combinators  {:mvn 版本 "3.1.4"}
                      cloverage/cloverage           {:mvn 版本 "1.2.2"}
                      lambdaisland/kaocha {:mvn 版本 "1.0.887"}
                      lambdaisland/kaocha-cloverage {:mvn 版本 "1.0.75"}
                      lambdaisland/kaocha-junit-xml {:mvn 版本 "0.0.76"}}
         :main-opts  ["-m" "kaocha.runner"]}

  :uberjar {:replace-deps {com.github.seancorfield/depstar {:mvn 版本 "2.1.278"}}
            :exec-fn      hf.depstar/uberjar
            :exec-args    {:jar             "app.jar"
                           :compile-aliases [:prod]
                           :aot             true
                           :main-class      app.server}}

  :frontend {:replace-paths ["src/cljs" "src/cljc"]
             :deps  {thheller/shadow-cljs        {:mvn 版本 "2.9.10"}
                     camel-snake-kebab           {:mvn 版本 "0.4.1"}
                     cljs-ajax                   {:mvn 版本 "0.8.0"}
                     cljs-http                   {:mvn 版本 "0.1.45"}
                     com.andrewmcveigh/cljs-time {:mvn/version "0.5.2"}
                     day8.re-frame/http-fx       {:mvn/version "0.1.6"}
                     metosin/reitit              {:mvn/version "0.3.10"}
                     re-frame                    {:mvn/version "1.2.0"}
                     reagent                     {:mvn/version "1.0.0"}
                     tongue                      {:mvn/version "0.3.0"}
                     fork                      {:mvn/version "2.2.4"}
                     phrase                      {:mvn/version "0.3-alpha4"}
                     binaryage/oops              {:mvn/version "0.7.0"}
             :main-opts  ["-m" "shadow.cljs.devtools.cli"]}}}
```

我期望的第一个命令应该是获取所有依赖项
```
clojure -Sdeps '{:mvn/local-repo ".m2"}' -A:dev:test:prod:frontend -Spath
```

当我运行测试时，期望不获取任何依赖项
```
clojure -Sdeps '{:mvn/local-repo ".m2"}' -M:dev:test --profile :ci
```
```

---

我还没有深入了解这个问题，但通过指定不同的别名，你会得到不同的依赖项集，所以它会下载新的依赖项版本。

例如，第一个未使用honeysql，而第二个使用了，因此必须下载。如果这两个计算有版本差异，那么第二个可能会下载它已经拥有的库的新版本。

再次运行你列出的任何一个命令都不会下载新的库，问题在于这些命令是不同的依赖项集，所以你假设不应该发生下载的假设是不正确的。

---

啊，对了，`frontedn` 排除了很多依赖。这也挺合理的。

感谢你的检查。

Answer 2

当使用 -Sdeps 时，永远不会使用缓存（因为命令行上的依赖项不是缓存键计算的一部分）。

Comments

谢谢你的回答！
是否有办法避免在依赖已获取的情况下再次下载冗余依赖？（当使用项目本地的 `.m2` 目录时）？

---

为了清晰起见，我将对此进行回顾。类路径缓存没有被使用，但仓库中的 JAR 应该被使用，并且你不应该看到它下载已经存在于本地仓库中的依赖项。我无法使用类似你的示例来重现这个问题（尽管我没有你的 deps.edn，所以不能确切知晓）。