adriangbot commented on PR #20820: URL: https://github.com/apache/datafusion/pull/20820#issuecomment-4128024548
๐ค Benchmark completed (GKE) | [trigger](https://github.com/apache/datafusion/pull/20820#issuecomment-4127842665) <details><summary>Details</summary> <p> ``` Comparing HEAD and alamb_morsel_api -------------------- Benchmark clickbench_1.json -------------------- โโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโ โ Query โ HEAD โ alamb_morsel_api โ Change โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ QQuery 0 โ 0.78 / 1.14 ยฑ0.66 / 2.47 ms โ 0.78 / 1.12 ยฑ0.65 / 2.42 ms โ no change โ โ QQuery 1 โ 14.26 / 14.55 ยฑ0.39 / 15.31 ms โ 19.63 / 21.97 ยฑ1.27 / 23.44 ms โ 1.51x slower โ โ QQuery 2 โ 41.33 / 41.80 ยฑ0.37 / 42.47 ms โ 56.48 / 60.60 ยฑ4.54 / 68.66 ms โ 1.45x slower โ โ QQuery 3 โ 37.94 / 38.49 ยฑ0.74 / 39.93 ms โ 48.84 / 56.09 ยฑ7.30 / 69.08 ms โ 1.46x slower โ โ QQuery 4 โ 271.15 / 273.58 ยฑ2.22 / 276.71 ms โ 372.57 / 389.81 ยฑ13.60 / 406.73 ms โ 1.42x slower โ โ QQuery 5 โ 448.36 / 458.04 ยฑ4.87 / 461.12 ms โ 498.46 / 567.52 ยฑ77.48 / 671.85 ms โ 1.24x slower โ โ QQuery 6 โ 6.21 / 6.54 ยฑ0.30 / 6.91 ms โ 7.21 / 7.61 ยฑ0.27 / 8.00 ms โ 1.16x slower โ โ QQuery 7 โ 15.98 / 16.49 ยฑ0.53 / 17.50 ms โ 21.65 / 23.45 ยฑ2.69 / 28.78 ms โ 1.42x slower โ โ QQuery 8 โ 403.09 / 411.13 ยฑ7.20 / 423.03 ms โ 538.05 / 607.45 ยฑ42.33 / 662.18 ms โ 1.48x slower โ โ QQuery 9 โ 607.99 / 622.63 ยฑ7.91 / 630.01 ms โ 926.96 / 987.62 ยฑ43.28 / 1046.10 ms โ 1.59x slower โ โ QQuery 10 โ 92.96 / 95.51 ยฑ3.52 / 102.39 ms โ 121.05 / 151.37 ยฑ19.94 / 175.13 ms โ 1.58x slower โ โ QQuery 11 โ 105.16 / 106.38 ยฑ1.02 / 107.59 ms โ 144.87 / 182.87 ยฑ25.25 / 220.64 ms โ 1.72x slower โ โ QQuery 12 โ 470.62 / 474.57 ยฑ5.43 / 485.33 ms โ 477.88 / 508.27 ยฑ40.03 / 587.53 ms โ 1.07x slower โ โ QQuery 13 โ 521.99 / 535.57 ยฑ7.91 / 546.42 ms โ 495.81 / 570.58 ยฑ69.32 / 667.97 ms โ 1.07x slower โ โ QQuery 14 โ 469.47 / 479.37 ยฑ6.14 / 485.86 ms โ 488.81 / 530.15 ยฑ72.78 / 675.58 ms โ 1.11x slower โ โ QQuery 15 โ 337.66 / 349.49 ยฑ7.28 / 360.46 ms โ 477.97 / 509.52 ยฑ31.84 / 557.66 ms โ 1.46x slower โ โ QQuery 16 โ 699.86 / 714.28 ยฑ10.42 / 731.86 ms โ 968.40 / 1057.62 ยฑ62.36 / 1142.26 ms โ 1.48x slower โ โ QQuery 17 โ 703.81 / 709.98 ยฑ5.23 / 719.24 ms โ 961.19 / 1065.49 ยฑ67.57 / 1137.30 ms โ 1.50x slower โ โ QQuery 18 โ 1404.48 / 1457.22 ยฑ29.01 / 1481.83 ms โ 1757.78 / 2020.78 ยฑ161.91 / 2226.37 ms โ 1.39x slower โ โ QQuery 19 โ 39.55 / 65.99 ยฑ30.23 / 119.53 ms โ 40.13 / 52.43 ยฑ10.34 / 70.37 ms โ +1.26x faster โ โ QQuery 20 โ 615.93 / 637.50 ยฑ29.59 / 696.02 ms โ 1040.58 / 1120.78 ยฑ53.90 / 1206.34 ms โ 1.76x slower โ โ QQuery 21 โ 700.82 / 704.17 ยฑ3.75 / 711.40 ms โ 1247.91 / 1510.88 ยฑ260.02 / 1856.37 ms โ 2.15x slower โ โ QQuery 22 โ 1351.14 / 1358.81 ยฑ8.30 / 1374.80 ms โ 2336.00 / 2788.14 ยฑ417.32 / 3429.55 ms โ 2.05x slower โ โ QQuery 23 โ 3660.20 / 3687.93 ยฑ21.65 / 3714.61 ms โ 6600.31 / 7149.48 ยฑ856.07 / 8853.73 ms โ 1.94x slower โ โ QQuery 24 โ 215.01 / 217.58 ยฑ2.95 / 222.86 ms โ 305.77 / 318.93 ยฑ9.91 / 333.51 ms โ 1.47x slower โ โ QQuery 25 โ 181.13 / 184.70 ยฑ2.93 / 188.79 ms โ 201.06 / 206.15 ยฑ3.25 / 211.25 ms โ 1.12x slower โ โ QQuery 26 โ 212.86 / 217.03 ยฑ2.76 / 220.85 ms โ 292.66 / 323.09 ยฑ25.90 / 365.23 ms โ 1.49x slower โ โ QQuery 27 โ 743.53 / 746.53 ยฑ2.23 / 750.22 ms โ 1306.64 / 1348.10 ยฑ41.70 / 1412.88 ms โ 1.81x slower โ โ QQuery 28 โ 8501.93 / 8540.65 ยฑ34.23 / 8601.75 ms โ 12663.00 / 13409.65 ยฑ909.93 / 14979.48 ms โ 1.57x slower โ โ QQuery 29 โ 47.42 / 52.97 ยฑ6.00 / 64.50 ms โ 70.01 / 73.91 ยฑ5.51 / 84.60 ms โ 1.40x slower โ โ QQuery 30 โ 454.31 / 461.57 ยฑ5.44 / 469.70 ms โ 458.92 / 539.49 ยฑ43.91 / 590.50 ms โ 1.17x slower โ โ QQuery 31 โ 423.55 / 433.70 ยฑ10.95 / 454.36 ms โ 486.92 / 519.40 ยฑ33.25 / 582.44 ms โ 1.20x slower โ โ QQuery 32 โ 1019.33 / 1052.22 ยฑ31.60 / 1112.16 ms โ 1126.15 / 1140.34 ยฑ13.03 / 1164.77 ms โ 1.08x slower โ โ QQuery 33 โ 1480.21 / 1500.36 ยฑ12.88 / 1514.86 ms โ 2291.52 / 2342.55 ยฑ49.24 / 2435.19 ms โ 1.56x slower โ โ QQuery 34 โ 1514.12 / 1547.50 ยฑ22.88 / 1574.62 ms โ 2225.96 / 2364.66 ยฑ82.82 / 2462.43 ms โ 1.53x slower โ โ QQuery 35 โ 364.90 / 370.19 ยฑ5.24 / 379.18 ms โ 473.28 / 531.15 ยฑ49.75 / 619.55 ms โ 1.43x slower โ โ QQuery 36 โ 126.06 / 130.02 ยฑ3.29 / 134.94 ms โ 143.40 / 153.46 ยฑ5.24 / 158.34 ms โ 1.18x slower โ โ QQuery 37 โ 56.08 / 57.76 ยฑ0.89 / 58.62 ms โ 58.56 / 76.03 ยฑ9.14 / 85.51 ms โ 1.32x slower โ โ QQuery 38 โ 83.78 / 86.00 ยฑ1.61 / 88.62 ms โ 101.41 / 103.43 ยฑ1.55 / 105.34 ms โ 1.20x slower โ โ QQuery 39 โ 222.08 / 233.50 ยฑ7.93 / 246.94 ms โ 236.64 / 262.83 ยฑ29.98 / 306.45 ms โ 1.13x slower โ โ QQuery 40 โ 23.60 / 27.44 ยฑ4.47 / 34.29 ms โ 23.39 / 27.27 ยฑ4.43 / 33.69 ms โ no change โ โ QQuery 41 โ 21.26 / 21.70 ยฑ0.36 / 22.36 ms โ 21.08 / 22.70 ยฑ1.84 / 26.12 ms โ no change โ โ QQuery 42 โ 19.79 / 20.32 ยฑ0.41 / 20.89 ms โ 20.15 / 21.35 ยฑ1.00 / 22.81 ms โ 1.05x slower โ โโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโ โ Benchmark Summary โ โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ Total Time (HEAD) โ 29162.92ms โ โ Total Time (alamb_morsel_api) โ 45726.06ms โ โ Average Time (HEAD) โ 678.21ms โ โ Average Time (alamb_morsel_api) โ 1063.40ms โ โ Queries Faster โ 1 โ โ Queries Slower โ 39 โ โ Queries with No Change โ 3 โ โ Queries with Failure โ 0 โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโ ``` </p> </details> <details><summary>Resource Usage</summary> **clickbench_1 โ base (merge-base)** | Metric | Value | |--------|-------| | Wall time | 146.9s | | Peak memory | 37.0 GiB | | Avg memory | 27.8 GiB | | CPU user | 1344.6s | | CPU sys | 91.3s | | Disk read | 0 B | | Disk write | 21.8 MiB | **clickbench_1 โ branch** | Metric | Value | |--------|-------| | Wall time | 229.7s | | Peak memory | 36.9 GiB | | Avg memory | 28.4 GiB | | CPU user | 1336.7s | | CPU sys | 92.8s | | Disk read | 0 B | | Disk write | 160.0 KiB | </details> --- [File an issue](https://github.com/adriangb/datafusion-benchmarking/issues) against this benchmark runner -- This is an automated message from the Apache Git Service. To respond to the message, please log on to GitHub and use the URL above to go to the specific comment. To unsubscribe, e-mail: [email protected] For queries about this service, please contact Infrastructure at: [email protected] --------------------------------------------------------------------- To unsubscribe, e-mail: [email protected] For additional commands, e-mail: [email protected]
