adriangbot commented on PR #21190: URL: https://github.com/apache/datafusion/pull/21190#issuecomment-4138507738
๐ค Benchmark completed (GKE) | [trigger](https://github.com/apache/datafusion/pull/21190#issuecomment-4138342074) <details><summary>Details</summary> <p> ``` Comparing HEAD and alamb_opener -------------------- Benchmark clickbench_partitioned.json -------------------- โโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโ โ Query โ HEAD โ alamb_opener โ Change โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ QQuery 0 โ 1.48 / 4.83 ยฑ6.50 / 17.84 ms โ 1.33 / 4.53 ยฑ6.31 / 17.14 ms โ +1.07x faster โ โ QQuery 1 โ 14.81 / 15.05 ยฑ0.17 / 15.32 ms โ 14.44 / 14.68 ยฑ0.21 / 15.05 ms โ no change โ โ QQuery 2 โ 43.95 / 44.23 ยฑ0.19 / 44.47 ms โ 44.11 / 44.33 ยฑ0.16 / 44.47 ms โ no change โ โ QQuery 3 โ 40.76 / 43.96 ยฑ2.81 / 48.11 ms โ 43.47 / 44.20 ยฑ0.63 / 45.02 ms โ no change โ โ QQuery 4 โ 292.46 / 313.63 ยฑ12.59 / 327.71 ms โ 293.56 / 314.67 ยฑ13.82 / 329.96 ms โ no change โ โ QQuery 5 โ 348.86 / 370.25 ยฑ14.12 / 390.63 ms โ 345.03 / 356.77 ยฑ8.65 / 368.82 ms โ no change โ โ QQuery 6 โ 4.97 / 6.26 ยฑ0.87 / 7.57 ms โ 5.08 / 5.44 ยฑ0.23 / 5.79 ms โ +1.15x faster โ โ QQuery 7 โ 16.71 / 17.21 ยฑ0.31 / 17.67 ms โ 17.21 / 17.47 ยฑ0.26 / 17.92 ms โ no change โ โ QQuery 8 โ 423.50 / 444.39 ยฑ18.71 / 473.53 ms โ 450.05 / 477.22 ยฑ14.27 / 489.95 ms โ 1.07x slower โ โ QQuery 9 โ 654.35 / 684.15 ยฑ17.90 / 709.92 ms โ 721.90 / 729.99 ยฑ6.53 / 740.50 ms โ 1.07x slower โ โ QQuery 10 โ 90.62 / 94.17 ยฑ4.23 / 102.17 ms โ 95.70 / 101.11 ยฑ6.70 / 114.06 ms โ 1.07x slower โ โ QQuery 11 โ 105.43 / 108.83 ยฑ3.18 / 114.21 ms โ 110.10 / 112.74 ยฑ1.43 / 114.07 ms โ no change โ โ QQuery 12 โ 343.17 / 356.76 ยฑ13.44 / 381.63 ms โ 372.41 / 378.26 ยฑ3.61 / 382.57 ms โ 1.06x slower โ โ QQuery 13 โ 479.75 / 485.44 ยฑ5.47 / 492.31 ms โ 479.80 / 499.70 ยฑ11.47 / 515.18 ms โ no change โ โ QQuery 14 โ 345.02 / 364.10 ยฑ15.71 / 390.30 ms โ 364.88 / 378.17 ยฑ10.96 / 389.92 ms โ no change โ โ QQuery 15 โ 366.42 / 395.69 ยฑ17.51 / 417.07 ms โ 412.48 / 426.60 ยฑ15.44 / 456.25 ms โ 1.08x slower โ โ QQuery 16 โ 731.70 / 755.74 ยฑ18.37 / 774.43 ms โ 745.31 / 783.82 ยฑ26.59 / 819.09 ms โ no change โ โ QQuery 17 โ 736.37 / 760.77 ยฑ18.27 / 782.85 ms โ 735.72 / 762.73 ยฑ18.73 / 793.67 ms โ no change โ โ QQuery 18 โ 1469.86 / 1553.32 ยฑ55.13 / 1627.80 ms โ 1501.43 / 1540.07 ยฑ35.28 / 1583.67 ms โ no change โ โ QQuery 19 โ 38.57 / 77.76 ยฑ77.13 / 232.02 ms โ 38.64 / 49.82 ยฑ14.02 / 75.19 ms โ +1.56x faster โ โ QQuery 20 โ 738.65 / 757.52 ยฑ22.87 / 792.50 ms โ 724.52 / 748.76 ยฑ27.84 / 800.05 ms โ no change โ โ QQuery 21 โ 782.11 / 793.23 ยฑ7.60 / 805.59 ms โ 767.33 / 776.91 ยฑ7.98 / 787.63 ms โ no change โ โ QQuery 22 โ 1148.16 / 1158.57 ยฑ11.73 / 1181.26 ms โ 1140.25 / 1147.63 ยฑ4.64 / 1152.68 ms โ no change โ โ QQuery 23 โ 3124.37 / 3162.45 ยฑ35.74 / 3225.22 ms โ 3118.84 / 3144.98 ยฑ24.56 / 3188.72 ms โ no change โ โ QQuery 24 โ 103.28 / 104.86 ยฑ2.00 / 108.48 ms โ 97.77 / 101.32 ยฑ2.95 / 105.13 ms โ no change โ โ QQuery 25 โ 139.45 / 143.33 ยฑ3.22 / 148.64 ms โ 138.61 / 140.27 ยฑ1.15 / 141.61 ms โ no change โ โ QQuery 26 โ 100.13 / 104.99 ยฑ3.69 / 110.17 ms โ 99.93 / 103.27 ยฑ2.69 / 106.93 ms โ no change โ โ QQuery 27 โ 853.09 / 864.30 ยฑ13.07 / 889.92 ms โ 864.67 / 871.09 ยฑ5.28 / 876.42 ms โ no change โ โ QQuery 28 โ 7737.29 / 7848.43 ยฑ64.28 / 7923.97 ms โ 7848.94 / 7860.87 ยฑ13.04 / 7885.91 ms โ no change โ โ QQuery 29 โ 51.13 / 55.27 ยฑ5.11 / 65.24 ms โ 54.84 / 57.17 ยฑ2.86 / 62.63 ms โ no change โ โ QQuery 30 โ 368.34 / 383.97 ยฑ9.40 / 394.69 ms โ 361.90 / 382.18 ยฑ13.53 / 404.17 ms โ no change โ โ QQuery 31 โ 387.55 / 394.26 ยฑ4.28 / 401.04 ms โ 377.90 / 386.47 ยฑ6.64 / 398.16 ms โ no change โ โ QQuery 32 โ 1287.76 / 1329.69 ยฑ40.40 / 1378.10 ms โ 1039.03 / 1105.94 ยฑ36.29 / 1143.82 ms โ +1.20x faster โ โ QQuery 33 โ 1517.16 / 1573.31 ยฑ41.30 / 1640.29 ms โ 1491.39 / 1547.24 ยฑ52.88 / 1626.82 ms โ no change โ โ QQuery 34 โ 1503.28 / 1538.95 ยฑ29.98 / 1580.10 ms โ 1591.93 / 1609.62 ยฑ11.74 / 1628.86 ms โ no change โ โ QQuery 35 โ 390.03 / 425.77 ยฑ29.07 / 458.69 ms โ 447.75 / 460.41 ยฑ7.30 / 470.07 ms โ 1.08x slower โ โ QQuery 36 โ 113.12 / 125.58 ยฑ7.85 / 137.87 ms โ 122.48 / 131.00 ยฑ4.98 / 137.47 ms โ no change โ โ QQuery 37 โ 49.93 / 51.59 ยฑ1.17 / 52.74 ms โ 51.45 / 54.45 ยฑ2.81 / 58.85 ms โ 1.06x slower โ โ QQuery 38 โ 76.39 / 78.62 ยฑ1.72 / 80.63 ms โ 77.62 / 79.68 ยฑ1.82 / 81.96 ms โ no change โ โ QQuery 39 โ 214.10 / 229.44 ยฑ12.07 / 248.21 ms โ 215.35 / 227.90 ยฑ9.34 / 239.71 ms โ no change โ โ QQuery 40 โ 27.31 / 28.70 ยฑ1.08 / 30.00 ms โ 24.59 / 28.35 ยฑ2.49 / 32.43 ms โ no change โ โ QQuery 41 โ 20.91 / 22.39 ยฑ0.90 / 23.52 ms โ 21.28 / 23.49 ยฑ1.90 / 26.42 ms โ no change โ โ QQuery 42 โ 20.27 / 21.03 ยฑ0.48 / 21.74 ms โ 19.10 / 20.25 ยฑ0.72 / 21.15 ms โ no change โ โโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโ โ Benchmark Summary โ โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ Total Time (HEAD) โ 28092.81ms โ โ Total Time (alamb_opener) โ 28051.60ms โ โ Average Time (HEAD) โ 653.32ms โ โ Average Time (alamb_opener) โ 652.36ms โ โ Queries Faster โ 4 โ โ Queries Slower โ 7 โ โ Queries with No Change โ 32 โ โ Queries with Failure โ 0 โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโ ``` </p> </details> <details><summary>Resource Usage</summary> **clickbench_partitioned โ base (merge-base)** | Metric | Value | |--------|-------| | Wall time | 141.6s | | Peak memory | 39.7 GiB | | Avg memory | 29.0 GiB | | CPU user | 1318.5s | | CPU sys | 105.6s | | Disk read | 0 B | | Disk write | 2.8 GiB | **clickbench_partitioned โ branch** | Metric | Value | |--------|-------| | Wall time | 141.5s | | Peak memory | 42.0 GiB | | Avg memory | 32.5 GiB | | CPU user | 1326.4s | | CPU sys | 98.9s | | Disk read | 0 B | | Disk write | 764.0 KiB | </details> --- [File an issue](https://github.com/adriangb/datafusion-benchmarking/issues) against this benchmark runner -- This is an automated message from the Apache Git Service. To respond to the message, please log on to GitHub and use the URL above to go to the specific comment. To unsubscribe, e-mail: [email protected] For queries about this service, please contact Infrastructure at: [email protected] --------------------------------------------------------------------- To unsubscribe, e-mail: [email protected] For additional commands, e-mail: [email protected]
