通过使用 keyword-identical? 提高 select-keys 的性能？

Question

{{select-keys}} 使用 {{not=}} 来比较关键字。相反，使用 {{keyword-identical?}} 可以带来不错的速度提升（平均值为 1.34，基于基准测试和引擎）。请注意，使用 {{identical?}} 和 {{lookup-sentinel}} 并不会提升性能。

速度提升摘要


            V8: 1.15, 1.08, 1.08
  SpiderMonkey: 1.71, 1.48, 1.67
JavaScriptCore: 1.33, 1.35, 1.25
       Nashorn: 1.16, 1.04, 0.97
       ChakraCore: 1.59, 1.66, 1.72



之前

使用V8进行基准测试
;;; select-keys
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000 runs, 179 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000 runs, 121 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000 runs, 183 msecs

使用SpiderMonkey进行基准测试
;;; select-keys
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000 runs, 251 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000 runs, 201 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000 runs, 290 msecs

使用JavaScriptCore进行基准测试
;;; select-keys
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000 runs, 112 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000 runs, 73 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000 runs, 119 msecs

使用Nashorn进行基准测试
;;; select-keys
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000 runs, 1277 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000 runs, 524 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000 runs, 635 msecs

使用ChakraCore进行基准测试
;;; select-keys
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000 runs, 463 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000 runs, 268 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000 runs, 414 msecs


之后


使用V8进行基准测试
;;; select-keys
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000 runs, 155 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000 runs, 112 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000 runs, 169 msecs

使用SpiderMonkey进行基准测试
;;; select-keys
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000 runs, 146 msecs
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000 runs, 135 msecs
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，173毫秒

使用JavaScriptCore进行基准测试
;;; select-keys
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，84毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，54毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，95毫秒

使用Nashorn进行基准测试
;;; select-keys
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，1099毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，502毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，648毫秒

使用ChakraCore进行基准测试
;;; select-keys
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，292毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，151毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，240毫秒

Answer 1

评论由：slipset 发布

仅仅为了提醒大家，在 CLJ-1789 中，用 reduce 重新实现 select-keys 产生了显著的加速。
添加了一个补丁来展示这个过程。

Answer 2

评论由：mfikes 发布

以下是 Erik 补丁的性能数据

`

        V8: 0.81, 1.14, 1.30

SpiderMonkey: 1.49, 1.31, 1.58
JavaScriptCore: 1.02, 0.99, 0.96

   Nashorn: 1.13, 1.17, 1.21
ChakraCore: 1.27, 1.35, 1.28

`

之后

`
使用V8进行基准测试
;;; select-keys
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，220毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，106毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，141毫秒

使用SpiderMonkey进行基准测试
;;; select-keys
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，169毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，153毫秒
[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000 runs, 183 msecs

使用JavaScriptCore进行基准测试
;;; select-keys
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，110毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，74毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，124毫秒

使用Nashorn进行基准测试
;;; select-keys
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，1128毫秒
数据[m{:a 1, :b 2, :c 3, :d 4}]，使用)，200000次运行，447毫秒
[[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000次运行，524毫秒

使用ChakraCore进行基准测试
;;; select-keys
[[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000次运行，366毫秒
[[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000次运行，199毫秒
[[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000次运行，323毫秒
`

Answer 3

评论由：slipset 发布

同时上传了一个不含瞬时的补丁。

Answer 4

评论由：mfikes 发布

由于CLJ-1789补丁在大映射中表现得更好，这里使用该票据中的数据进行了额外的性能测试，测试了附加给我原补丁以及Erik后续的补丁。您可以看到CLJ-1789方法对ClojureScript也很有益。

Erik，我看到你附加了一个第三个补丁。我建议为每个这样的补丁添加性能数字，以便更易于评估补丁在高级优化下的效果。

`
引擎关键字-identical? CLJ-1789

        V8:               1.13      1.29

SpiderMonkey：1.89 2.39
JavaScriptCore：1.02 0.96

   Nashorn:               1.12      1.42
ChakraCore:               1.68      1.82

`

之前

`
使用V8进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，373毫秒

使用SpiderMonkey进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，668毫秒

使用JavaScriptCore进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，200毫秒

使用Nashorn进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，2236毫秒

使用ChakraCore进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，1074毫秒
`

(keyword-identical?)后

`
使用V8进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，330毫秒

使用SpiderMonkey进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，353毫秒

使用JavaScriptCore进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，197毫秒

使用Nashorn进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，1991毫秒

使用ChakraCore进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，640毫秒
`

CLJ-1789后

`
使用V8进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，290毫秒

使用SpiderMonkey进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，279毫秒

使用JavaScriptCore进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，209毫秒

使用Nashorn进行基准测试
;;; select-keys
[[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000次运行，1578毫秒

使用ChakraCore进行基准测试
;;; select-keys
[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000 runs, 591 msecs
`

Answer 5

评论由：slipset 发布

这两个补丁应该现在都有基准测试了

Answer 6

评论由：slipset 发布

啊，关于更大映射的评论，我认为性能 transient 位取决于选择键的大小，
例：如果不使用conj!，则映射中找到的更多选择键将获得更大收益。

Answer 7

评论由：mfikes 发布

运行这4个基准测试

[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c]), 200000 runs}[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :x]), 200000 runs[m {:a 1, :b 2, :c 3, :d 4}], (select-keys m [:a :b :c :x :y :z]), 200000 runs[m {:a "b", :c "d", :b "b", :d "d", :e "e", :f "f", :g "g"}], (select-keys m [:a :c :b :d :e :f :g]), 200000 runs

与所有5种引擎配合3个附加补丁，在我的机器上产生以下速度提升

`
CLJS-2383.patch

        V8: 1.11, 1.10, 1.64, 1.18  Avg: 1.26

SpiderMonkey: 2.36, 1.46, 1.79, 2.02 平均：1.91
JavaScriptCore: 1.28, 1.34, 1.23, 1.49 平均：1.34

   Nashorn: 1.19, 1.17, 1.06, 1.29  Avg: 1.18
ChakraCore: 1.61, 1.78, 1.75, 2.11  Avg: 1.81
                            Overall avg: 1.50
     Avg excluding Nashorn & ChakraCore: 1.50

0001-CLJS-2383-Speed-up-select-keys.patch

        V8: 0.70, 0.95, 1.05, 1.23  Avg: 0.98

SpiderMonkey: 1.20, 1.09, 1.05, 2.03 平均：1.34
JavaScriptCore: 0.78, 0.84, 0.83, 1.02 平均：0.87

   Nashorn: 1.18, 1.08, 1.02, 1.48  Avg: 1.19
ChakraCore: 1.00, 1.12, 1.19, 1.75  Avg: 1.27
                            Overall avg: 1.13
     Avg excluding Nashorn & ChakraCore: 1.06	

0002-CLJS-2383-Speed-up-select-keys-no-transient.patch

        V8: 1.28, 1.45, 1.37, 1.33  Avg: 1.36

SpiderMonkey: 1.54, 1.44, 1.70, 2.17 平均：1.71
JavaScriptCore: 1.01, 0.99, 1.03, 1.13 平均：1.04

   Nashorn: 1.39, 1.21, 1.14, 1.26  Avg: 1.25
ChakraCore: 1.20, 1.23, 1.19, 1.39  Avg: 1.25
                            Overall avg: 1.32
     Avg excluding Nashorn & ChakraCore: 1.37	

`

Answer 8

评论由：mfikes 发布

总结：如果应用，CLJS-2383.patch 将提供所有补丁中最大的速度提升，所以要应用它。

Answer 9

参考：https://clojure.atlassian.net/browse/CLJS-2383（由mfikes报告）