adriangbot commented on PR #20820:
URL: https://github.com/apache/datafusion/pull/20820#issuecomment-4129240621

   ๐Ÿค– Benchmark completed (GKE) | 
[trigger](https://github.com/apache/datafusion/pull/20820#issuecomment-4129068139)
   
   <details><summary>Details</summary>
   <p>
   
   ```
   Comparing HEAD and alamb_morsel_api
   --------------------
   Benchmark clickbench_1.json
   --------------------
   
โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”“
   โ”ƒ Query     โ”ƒ                                  HEAD โ”ƒ                       
alamb_morsel_api โ”ƒ       Change โ”ƒ
   
โ”กโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ฉ
   โ”‚ QQuery 0  โ”‚           0.77 / 1.11 ยฑ0.62 / 2.34 ms โ”‚            0.77 / 1.12 
ยฑ0.64 / 2.40 ms โ”‚    no change โ”‚
   โ”‚ QQuery 1  โ”‚        14.50 / 14.92 ยฑ0.43 / 15.74 ms โ”‚         20.84 / 21.90 
ยฑ0.75 / 23.16 ms โ”‚ 1.47x slower โ”‚
   โ”‚ QQuery 2  โ”‚        41.58 / 41.94 ยฑ0.22 / 42.23 ms โ”‚         43.15 / 43.57 
ยฑ0.57 / 44.68 ms โ”‚    no change โ”‚
   โ”‚ QQuery 3  โ”‚        37.52 / 38.24 ยฑ1.03 / 40.27 ms โ”‚         39.09 / 39.51 
ยฑ0.23 / 39.79 ms โ”‚    no change โ”‚
   โ”‚ QQuery 4  โ”‚     270.04 / 277.23 ยฑ8.02 / 291.61 ms โ”‚      273.75 / 279.65 
ยฑ4.74 / 286.01 ms โ”‚    no change โ”‚
   โ”‚ QQuery 5  โ”‚     451.01 / 457.74 ยฑ6.34 / 467.79 ms โ”‚      452.33 / 460.63 
ยฑ7.44 / 469.78 ms โ”‚    no change โ”‚
   โ”‚ QQuery 6  โ”‚           6.66 / 7.06 ยฑ0.27 / 7.51 ms โ”‚            7.06 / 7.38 
ยฑ0.17 / 7.53 ms โ”‚    no change โ”‚
   โ”‚ QQuery 7  โ”‚        16.33 / 16.93 ยฑ0.81 / 18.51 ms โ”‚         21.23 / 22.08 
ยฑ0.69 / 22.96 ms โ”‚ 1.30x slower โ”‚
   โ”‚ QQuery 8  โ”‚     392.74 / 396.58 ยฑ3.45 / 401.97 ms โ”‚      399.48 / 404.91 
ยฑ5.94 / 413.28 ms โ”‚    no change โ”‚
   โ”‚ QQuery 9  โ”‚     615.28 / 623.11 ยฑ6.10 / 628.40 ms โ”‚     617.54 / 632.86 
ยฑ10.04 / 642.34 ms โ”‚    no change โ”‚
   โ”‚ QQuery 10 โ”‚        91.97 / 93.45 ยฑ1.60 / 96.39 ms โ”‚        93.87 / 97.64 
ยฑ4.05 / 105.31 ms โ”‚    no change โ”‚
   โ”‚ QQuery 11 โ”‚     102.43 / 103.48 ยฑ0.61 / 104.23 ms โ”‚      107.33 / 110.08 
ยฑ2.26 / 112.58 ms โ”‚ 1.06x slower โ”‚
   โ”‚ QQuery 12 โ”‚     466.01 / 470.24 ยฑ3.39 / 476.41 ms โ”‚      469.59 / 480.13 
ยฑ9.92 / 498.52 ms โ”‚    no change โ”‚
   โ”‚ QQuery 13 โ”‚    518.04 / 536.37 ยฑ12.41 / 550.32 ms โ”‚      526.72 / 542.00 
ยฑ8.93 / 553.86 ms โ”‚    no change โ”‚
   โ”‚ QQuery 14 โ”‚     470.06 / 479.18 ยฑ7.46 / 489.00 ms โ”‚      470.64 / 480.03 
ยฑ5.75 / 488.08 ms โ”‚    no change โ”‚
   โ”‚ QQuery 15 โ”‚     339.08 / 344.10 ยฑ3.37 / 348.72 ms โ”‚     347.81 / 369.93 
ยฑ17.69 / 400.33 ms โ”‚ 1.08x slower โ”‚
   โ”‚ QQuery 16 โ”‚     705.14 / 712.14 ยฑ5.04 / 717.80 ms โ”‚      714.81 / 721.56 
ยฑ7.57 / 733.58 ms โ”‚    no change โ”‚
   โ”‚ QQuery 17 โ”‚     701.65 / 706.29 ยฑ5.88 / 717.83 ms โ”‚      713.99 / 723.04 
ยฑ7.87 / 736.17 ms โ”‚    no change โ”‚
   โ”‚ QQuery 18 โ”‚ 1423.96 / 1474.26 ยฑ30.24 / 1512.76 ms โ”‚  1407.87 / 1477.47 
ยฑ41.05 / 1522.37 ms โ”‚    no change โ”‚
   โ”‚ QQuery 19 โ”‚        35.83 / 38.79 ยฑ3.30 / 45.24 ms โ”‚       38.23 / 51.75 
ยฑ24.96 / 101.62 ms โ”‚ 1.33x slower โ”‚
   โ”‚ QQuery 20 โ”‚    612.40 / 628.57 ยฑ18.98 / 664.82 ms โ”‚     619.40 / 637.12 
ยฑ16.11 / 659.10 ms โ”‚    no change โ”‚
   โ”‚ QQuery 21 โ”‚     698.13 / 702.22 ยฑ4.33 / 709.78 ms โ”‚     709.40 / 740.72 
ยฑ25.20 / 769.23 ms โ”‚ 1.05x slower โ”‚
   โ”‚ QQuery 22 โ”‚  1342.50 / 1349.75 ยฑ6.97 / 1362.24 ms โ”‚  1404.14 / 1421.48 
ยฑ16.08 / 1448.10 ms โ”‚ 1.05x slower โ”‚
   โ”‚ QQuery 23 โ”‚ 3681.63 / 3703.57 ยฑ17.76 / 3727.14 ms โ”‚  3724.73 / 3768.04 
ยฑ48.97 / 3859.99 ms โ”‚    no change โ”‚
   โ”‚ QQuery 24 โ”‚     210.99 / 216.26 ยฑ4.61 / 224.71 ms โ”‚      215.71 / 221.12 
ยฑ4.88 / 230.23 ms โ”‚    no change โ”‚
   โ”‚ QQuery 25 โ”‚     181.33 / 182.89 ยฑ1.19 / 184.53 ms โ”‚      184.44 / 190.90 
ยฑ5.46 / 198.88 ms โ”‚    no change โ”‚
   โ”‚ QQuery 26 โ”‚     213.55 / 215.00 ยฑ1.22 / 216.82 ms โ”‚      213.93 / 216.78 
ยฑ2.67 / 221.12 ms โ”‚    no change โ”‚
   โ”‚ QQuery 27 โ”‚     742.05 / 744.16 ยฑ2.62 / 749.00 ms โ”‚     746.64 / 762.38 
ยฑ14.80 / 784.23 ms โ”‚    no change โ”‚
   โ”‚ QQuery 28 โ”‚ 8454.22 / 8501.69 ยฑ27.18 / 8530.55 ms โ”‚ 8412.85 / 8593.32 
ยฑ256.26 / 9102.54 ms โ”‚    no change โ”‚
   โ”‚ QQuery 29 โ”‚        47.46 / 51.88 ยฑ3.57 / 56.63 ms โ”‚         52.31 / 56.16 
ยฑ4.00 / 63.89 ms โ”‚ 1.08x slower โ”‚
   โ”‚ QQuery 30 โ”‚    441.51 / 452.51 ยฑ13.07 / 474.61 ms โ”‚      454.83 / 462.74 
ยฑ5.83 / 469.51 ms โ”‚    no change โ”‚
   โ”‚ QQuery 31 โ”‚     436.50 / 445.23 ยฑ5.82 / 453.63 ms โ”‚      441.99 / 458.90 
ยฑ9.21 / 467.53 ms โ”‚    no change โ”‚
   โ”‚ QQuery 32 โ”‚ 1025.69 / 1061.79 ยฑ37.01 / 1126.97 ms โ”‚  1219.36 / 1242.06 
ยฑ13.12 / 1257.93 ms โ”‚ 1.17x slower โ”‚
   โ”‚ QQuery 33 โ”‚ 1477.38 / 1487.91 ยฑ10.09 / 1503.72 ms โ”‚  1567.45 / 1615.96 
ยฑ37.79 / 1679.38 ms โ”‚ 1.09x slower โ”‚
   โ”‚ QQuery 34 โ”‚  1495.44 / 1509.47 ยฑ9.35 / 1522.41 ms โ”‚  1574.09 / 1651.40 
ยฑ41.69 / 1686.42 ms โ”‚ 1.09x slower โ”‚
   โ”‚ QQuery 35 โ”‚     364.03 / 369.51 ยฑ4.71 / 376.82 ms โ”‚     370.98 / 384.57 
ยฑ19.52 / 423.10 ms โ”‚    no change โ”‚
   โ”‚ QQuery 36 โ”‚     118.92 / 127.55 ยฑ4.81 / 132.79 ms โ”‚     126.85 / 145.68 
ยฑ10.38 / 157.96 ms โ”‚ 1.14x slower โ”‚
   โ”‚ QQuery 37 โ”‚        54.05 / 56.37 ยฑ1.26 / 57.86 ms โ”‚        55.92 / 63.08 
ยฑ11.91 / 86.80 ms โ”‚ 1.12x slower โ”‚
   โ”‚ QQuery 38 โ”‚        82.04 / 83.38 ยฑ1.03 / 85.12 ms โ”‚      101.49 / 102.81 
ยฑ1.27 / 104.76 ms โ”‚ 1.23x slower โ”‚
   โ”‚ QQuery 39 โ”‚     217.69 / 229.05 ยฑ6.10 / 235.41 ms โ”‚      275.12 / 286.81 
ยฑ6.22 / 293.78 ms โ”‚ 1.25x slower โ”‚
   โ”‚ QQuery 40 โ”‚        23.36 / 25.71 ยฑ1.66 / 27.98 ms โ”‚         23.41 / 27.20 
ยฑ3.84 / 32.31 ms โ”‚ 1.06x slower โ”‚
   โ”‚ QQuery 41 โ”‚        19.89 / 21.27 ยฑ1.33 / 23.02 ms โ”‚         21.13 / 24.01 
ยฑ2.87 / 28.47 ms โ”‚ 1.13x slower โ”‚
   โ”‚ QQuery 42 โ”‚        19.85 / 21.03 ยฑ1.14 / 23.19 ms โ”‚         20.51 / 21.75 
ยฑ1.10 / 23.81 ms โ”‚    no change โ”‚
   
โ””โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”˜
   โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”“
   โ”ƒ Benchmark Summary               โ”ƒ            โ”ƒ
   โ”กโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ฉ
   โ”‚ Total Time (HEAD)               โ”‚ 29019.93ms โ”‚
   โ”‚ Total Time (alamb_morsel_api)   โ”‚ 30062.22ms โ”‚
   โ”‚ Average Time (HEAD)             โ”‚   674.88ms โ”‚
   โ”‚ Average Time (alamb_morsel_api) โ”‚   699.12ms โ”‚
   โ”‚ Queries Faster                  โ”‚          0 โ”‚
   โ”‚ Queries Slower                  โ”‚         17 โ”‚
   โ”‚ Queries with No Change          โ”‚         26 โ”‚
   โ”‚ Queries with Failure            โ”‚          0 โ”‚
   โ””โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”˜
   ```
   
   </p>
   </details>
   
   <details><summary>Resource Usage</summary>
   
   **clickbench_1 โ€” base (merge-base)**
   | Metric | Value |
   |--------|-------|
   | Wall time | 146.1s |
   | Peak memory | 37.3 GiB |
   | Avg memory | 27.4 GiB |
   | CPU user | 1343.0s |
   | CPU sys | 87.0s |
   | Disk read | 0 B |
   | Disk write | 22.5 MiB |
   
   **clickbench_1 โ€” branch**
   | Metric | Value |
   |--------|-------|
   | Wall time | 151.1s |
   | Peak memory | 35.2 GiB |
   | Avg memory | 25.2 GiB |
   | CPU user | 1349.7s |
   | CPU sys | 107.7s |
   | Disk read | 0 B |
   | Disk write | 800.0 KiB |
   
   </details>
   
   
   ---
   [File an issue](https://github.com/adriangb/datafusion-benchmarking/issues) 
against this benchmark runner


-- 
This is an automated message from the Apache Git Service.
To respond to the message, please log on to GitHub and use the
URL above to go to the specific comment.

To unsubscribe, e-mail: [email protected]

For queries about this service, please contact Infrastructure at:
[email protected]


---------------------------------------------------------------------
To unsubscribe, e-mail: [email protected]
For additional commands, e-mail: [email protected]

Reply via email to