adriangbot commented on PR #20481: URL: https://github.com/apache/datafusion/pull/20481#issuecomment-4053401601
๐ค Benchmark completed (GKE) | [trigger](https://github.com/apache/datafusion/pull/20481#issuecomment-4053325926) <details><summary>Details</summary> <p> ``` Comparing HEAD and parquet-morsel-driven-execution-237164415184908839 -------------------- Benchmark tpcds_sf1.json -------------------- โโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโ โ Query โ HEAD โ parquet-morsel-driven-execution-237164415184908839 โ Change โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ QQuery 1 โ 48.95 / 51.06 ยฑ1.09 / 52.09 ms โ 50.22 / 51.36 ยฑ0.81 / 52.34 ms โ no change โ โ QQuery 2 โ 152.79 / 154.78 ยฑ1.30 / 156.62 ms โ 59.66 / 61.09 ยฑ0.94 / 62.26 ms โ +2.53x faster โ โ QQuery 3 โ 119.02 / 119.42 ยฑ0.29 / 119.86 ms โ 27.61 / 27.79 ยฑ0.15 / 28.02 ms โ +4.30x faster โ โ QQuery 4 โ 1359.71 / 1391.54 ยฑ16.45 / 1407.18 ms โ 298.02 / 304.41 ยฑ4.20 / 309.77 ms โ +4.57x faster โ โ QQuery 5 โ 186.01 / 187.97 ยฑ1.47 / 189.92 ms โ 75.32 / 76.81 ยฑ0.92 / 77.98 ms โ +2.45x faster โ โ QQuery 6 โ 996.39 / 1022.99 ยฑ40.65 / 1103.92 ms โ 863.92 / 871.63 ยฑ7.43 / 881.67 ms โ +1.17x faster โ โ QQuery 7 โ 354.10 / 360.61 ยฑ4.15 / 366.01 ms โ 82.82 / 84.42 ยฑ1.65 / 87.60 ms โ +4.27x faster โ โ QQuery 8 โ 124.28 / 125.41 ยฑ1.09 / 127.45 ms โ 35.82 / 37.59 ยฑ1.17 / 39.22 ms โ +3.34x faster โ โ QQuery 9 โ 113.41 / 121.84 ยฑ8.87 / 139.04 ms โ 106.76 / 107.72 ยฑ0.91 / 109.36 ms โ +1.13x faster โ โ QQuery 10 โ 114.63 / 115.66 ยฑ0.96 / 117.20 ms โ 78.40 / 78.92 ยฑ0.38 / 79.43 ms โ +1.47x faster โ โ QQuery 11 โ 970.78 / 979.03 ยฑ5.72 / 986.09 ms โ 228.08 / 234.77 ยฑ3.94 / 239.95 ms โ +4.17x faster โ โ QQuery 12 โ 47.82 / 49.38 ยฑ1.15 / 50.81 ms โ 26.81 / 28.17 ยฑ1.57 / 31.04 ms โ +1.75x faster โ โ QQuery 13 โ 403.07 / 405.90 ยฑ2.91 / 411.35 ms โ 100.29 / 102.12 ยฑ2.24 / 106.32 ms โ +3.97x faster โ โ QQuery 14 โ 1101.36 / 1107.12 ยฑ4.46 / 1112.22 ms โ 554.07 / 575.61 ยฑ27.69 / 629.17 ms โ +1.92x faster โ โ QQuery 15 โ 18.14 / 18.86 ยฑ0.54 / 19.77 ms โ 19.02 / 19.94 ยฑ0.97 / 21.77 ms โ 1.06x slower โ โ QQuery 16 โ 46.56 / 47.24 ยฑ0.53 / 47.89 ms โ 46.92 / 48.48 ยฑ0.97 / 49.45 ms โ no change โ โ QQuery 17 โ 250.71 / 253.32 ยฑ1.71 / 255.63 ms โ 81.05 / 83.16 ยฑ1.20 / 84.61 ms โ +3.05x faster โ โ QQuery 18 โ 133.12 / 134.10 ยฑ0.79 / 134.98 ms โ 99.22 / 100.79 ยฑ0.91 / 101.94 ms โ +1.33x faster โ โ QQuery 19 โ 162.27 / 165.21 ยฑ1.83 / 167.33 ms โ 45.88 / 46.41 ยฑ0.45 / 47.11 ms โ +3.56x faster โ โ QQuery 20 โ 15.66 / 16.61 ยฑ0.78 / 17.90 ms โ 15.73 / 16.26 ยฑ0.67 / 17.56 ms โ no change โ โ QQuery 21 โ 23.38 / 24.62 ยฑ0.64 / 25.11 ms โ 24.80 / 25.36 ยฑ0.47 / 26.23 ms โ no change โ โ QQuery 22 โ 518.29 / 524.91 ยฑ5.45 / 532.63 ms โ 140.36 / 142.14 ยฑ1.39 / 143.94 ms โ +3.69x faster โ โ QQuery 23 โ 952.24 / 958.78 ยฑ4.90 / 965.35 ms โ 1048.38 / 1052.07 ยฑ3.15 / 1056.83 ms โ 1.10x slower โ โ QQuery 24 โ 439.83 / 440.85 ยฑ0.77 / 441.83 ms โ 205.25 / 208.67 ยฑ4.99 / 218.49 ms โ +2.11x faster โ โ QQuery 25 โ 366.17 / 368.92 ยฑ1.62 / 370.77 ms โ 102.34 / 132.89 ยฑ33.36 / 176.28 ms โ +2.78x faster โ โ QQuery 26 โ 86.22 / 88.43 ยฑ2.50 / 93.14 ms โ 55.53 / 58.45 ยฑ3.03 / 64.24 ms โ +1.51x faster โ โ QQuery 27 โ 351.76 / 355.90 ยฑ2.94 / 360.63 ms โ 80.95 / 82.73 ยฑ1.19 / 83.96 ms โ +4.30x faster โ โ QQuery 28 โ 154.87 / 156.88 ยฑ1.68 / 159.77 ms โ 117.96 / 119.80 ยฑ1.47 / 121.89 ms โ +1.31x faster โ โ QQuery 29 โ 308.72 / 313.17 ยฑ2.58 / 316.73 ms โ 92.31 / 125.08 ยฑ24.89 / 146.33 ms โ +2.50x faster โ โ QQuery 30 โ 49.76 / 51.26 ยฑ1.16 / 52.92 ms โ 46.65 / 49.55 ยฑ1.80 / 51.31 ms โ no change โ โ QQuery 31 โ 184.73 / 188.68 ยฑ2.36 / 191.83 ms โ 112.79 / 115.85 ยฑ2.16 / 118.35 ms โ +1.63x faster โ โ QQuery 32 โ 62.91 / 64.51 ยฑ1.60 / 67.35 ms โ 25.13 / 26.05 ยฑ0.78 / 27.13 ms โ +2.48x faster โ โ QQuery 33 โ 152.20 / 152.93 ยฑ0.51 / 153.63 ms โ 51.26 / 55.55 ยฑ6.08 / 67.59 ms โ +2.75x faster โ โ QQuery 34 โ 110.70 / 113.16 ยฑ1.91 / 116.24 ms โ 44.78 / 45.57 ยฑ0.80 / 47.06 ms โ +2.48x faster โ โ QQuery 35 โ 117.93 / 118.76 ยฑ0.51 / 119.38 ms โ 92.58 / 93.26 ยฑ0.88 / 94.89 ms โ +1.27x faster โ โ QQuery 36 โ 220.02 / 226.25 ยฑ4.62 / 233.07 ms โ 66.33 / 70.64 ยฑ2.93 / 74.50 ms โ +3.20x faster โ โ QQuery 37 โ 192.63 / 195.32 ยฑ1.85 / 197.34 ms โ 37.26 / 37.76 ยฑ0.45 / 38.44 ms โ +5.17x faster โ โ QQuery 38 โ 92.21 / 98.46 ยฑ3.70 / 103.12 ms โ 114.48 / 116.88 ยฑ1.84 / 119.54 ms โ 1.19x slower โ โ QQuery 39 โ 139.58 / 142.10 ยฑ1.81 / 144.56 ms โ 139.77 / 142.27 ยฑ1.50 / 143.77 ms โ no change โ โ QQuery 40 โ 118.15 / 124.29 ยฑ5.59 / 134.81 ms โ 59.25 / 66.01 ยฑ9.25 / 84.13 ms โ +1.88x faster โ โ QQuery 41 โ 18.11 / 19.11 ยฑ0.92 / 20.78 ms โ 20.00 / 20.55 ยฑ0.62 / 21.69 ms โ 1.08x slower โ โ QQuery 42 โ 112.06 / 113.93 ยฑ1.86 / 117.09 ms โ 26.06 / 26.50 ยฑ0.36 / 26.98 ms โ +4.30x faster โ โ QQuery 43 โ 89.60 / 90.88 ยฑ1.64 / 94.04 ms โ 23.73 / 23.97 ยฑ0.18 / 24.18 ms โ +3.79x faster โ โ QQuery 44 โ 17.35 / 17.94 ยฑ0.53 / 18.89 ms โ 17.13 / 17.84 ยฑ0.68 / 19.12 ms โ no change โ โ QQuery 45 โ 56.63 / 57.37 ยฑ0.46 / 57.85 ms โ 37.43 / 39.08 ยฑ1.28 / 40.91 ms โ +1.47x faster โ โ QQuery 46 โ 238.99 / 242.60 ยฑ2.22 / 244.80 ms โ 67.52 / 68.55 ยฑ0.71 / 69.59 ms โ +3.54x faster โ โ QQuery 47 โ 743.17 / 749.23 ยฑ4.77 / 757.07 ms โ 143.59 / 144.69 ยฑ0.95 / 146.30 ms โ +5.18x faster โ โ QQuery 48 โ 285.66 / 292.60 ยฑ5.56 / 298.50 ms โ 94.00 / 95.81 ยฑ1.86 / 99.36 ms โ +3.05x faster โ โ QQuery 49 โ 265.89 / 268.26 ยฑ2.69 / 272.44 ms โ 88.01 / 88.95 ยฑ1.14 / 91.12 ms โ +3.02x faster โ โ QQuery 50 โ 246.47 / 250.06 ยฑ3.85 / 257.50 ms โ 89.81 / 95.16 ยฑ3.38 / 99.16 ms โ +2.63x faster โ โ QQuery 51 โ 195.45 / 199.05 ยฑ2.99 / 203.31 ms โ 89.57 / 91.22 ยฑ1.14 / 92.94 ms โ +2.18x faster โ โ QQuery 52 โ 111.95 / 112.84 ยฑ0.83 / 113.83 ms โ 26.67 / 27.47 ยฑ0.92 / 29.24 ms โ +4.11x faster โ โ QQuery 53 โ 108.80 / 110.94 ยฑ1.90 / 113.66 ms โ 24.20 / 25.13 ยฑ1.17 / 27.37 ms โ +4.41x faster โ โ QQuery 54 โ 155.81 / 156.76 ยฑ0.59 / 157.61 ms โ 66.04 / 67.15 ยฑ0.98 / 68.90 ms โ +2.33x faster โ โ QQuery 55 โ 110.03 / 112.44 ยฑ2.15 / 116.21 ms โ 25.56 / 25.94 ยฑ0.21 / 26.20 ms โ +4.34x faster โ โ QQuery 56 โ 151.69 / 153.48 ยฑ1.67 / 156.16 ms โ 52.44 / 52.72 ยฑ0.31 / 53.17 ms โ +2.91x faster โ โ QQuery 57 โ 193.08 / 195.65 ยฑ1.77 / 198.28 ms โ 191.89 / 193.63 ยฑ1.71 / 196.69 ms โ no change โ โ QQuery 58 โ 306.54 / 314.68 ยฑ5.37 / 321.03 ms โ 122.70 / 132.89 ยฑ8.33 / 142.90 ms โ +2.37x faster โ โ QQuery 59 โ 207.74 / 210.02 ยฑ1.97 / 213.64 ms โ 60.48 / 61.48 ยฑ0.88 / 63.11 ms โ +3.42x faster โ โ QQuery 60 โ 153.36 / 154.77 ยฑ1.10 / 156.22 ms โ 55.06 / 55.35 ยฑ0.36 / 56.04 ms โ +2.80x faster โ โ QQuery 61 โ 181.75 / 184.22 ยฑ1.44 / 186.24 ms โ 63.81 / 84.81 ยฑ40.68 / 166.17 ms โ +2.17x faster โ โ QQuery 62 โ 906.62 / 935.31 ยฑ28.14 / 987.85 ms โ 873.44 / 913.07 ยฑ45.85 / 998.58 ms โ no change โ โ QQuery 63 โ 110.11 / 112.07 ยฑ1.56 / 113.83 ms โ 24.91 / 27.34 ยฑ1.91 / 30.24 ms โ +4.10x faster โ โ QQuery 64 โ 727.95 / 730.50 ยฑ2.79 / 735.68 ms โ 404.46 / 477.05 ยฑ123.84 / 723.70 ms โ +1.53x faster โ โ QQuery 65 โ 260.82 / 264.03 ยฑ2.94 / 269.48 ms โ 50.80 / 52.80 ยฑ1.24 / 54.46 ms โ +5.00x faster โ โ QQuery 66 โ 255.45 / 261.09 ยฑ3.25 / 264.01 ms โ 170.69 / 176.01 ยฑ3.56 / 181.23 ms โ +1.48x faster โ โ QQuery 67 โ 342.81 / 345.17 ยฑ3.14 / 351.14 ms โ 414.61 / 422.32 ยฑ6.99 / 433.76 ms โ 1.22x slower โ โ QQuery 68 โ 285.38 / 288.57 ยฑ2.63 / 292.88 ms โ 61.85 / 64.51 ยฑ3.18 / 69.87 ms โ +4.47x faster โ โ QQuery 69 โ 113.75 / 114.77 ยฑ0.80 / 115.71 ms โ 73.11 / 74.44 ยฑ0.86 / 75.42 ms โ +1.54x faster โ โ QQuery 70 โ 345.76 / 361.41 ยฑ8.30 / 369.87 ms โ 102.86 / 111.77 ยฑ9.93 / 128.57 ms โ +3.23x faster โ โ QQuery 71 โ 139.60 / 143.67 ยฑ2.12 / 145.40 ms โ 37.70 / 38.63 ยฑ0.61 / 39.51 ms โ +3.72x faster โ โ QQuery 72 โ 731.84 / 749.79 ยฑ10.51 / 761.28 ms โ 477.03 / 493.81 ยฑ12.95 / 515.88 ms โ +1.52x faster โ โ QQuery 73 โ 108.32 / 110.28 ยฑ1.50 / 112.34 ms โ 43.20 / 45.37 ยฑ1.69 / 47.53 ms โ +2.43x faster โ โ QQuery 74 โ 601.53 / 604.76 ยฑ1.74 / 606.54 ms โ 138.84 / 141.48 ยฑ1.69 / 144.08 ms โ +4.27x faster โ โ QQuery 75 โ 295.58 / 297.49 ยฑ1.37 / 299.57 ms โ 165.95 / 172.81 ยฑ3.87 / 177.41 ms โ +1.72x faster โ โ QQuery 76 โ 138.03 / 138.73 ยฑ0.41 / 139.20 ms โ 40.78 / 41.86 ยฑ0.87 / 43.23 ms โ +3.31x faster โ โ QQuery 77 โ 204.15 / 205.14 ยฑ0.57 / 205.70 ms โ 66.65 / 67.90 ยฑ0.76 / 68.80 ms โ +3.02x faster โ โ QQuery 78 โ 363.51 / 366.75 ยฑ2.47 / 371.16 ms โ 133.54 / 138.74 ยฑ6.29 / 150.57 ms โ +2.64x faster โ โ QQuery 79 โ 239.44 / 242.58 ยฑ2.51 / 245.80 ms โ 66.05 / 67.27 ยฑ0.90 / 68.57 ms โ +3.61x faster โ โ QQuery 80 โ 342.28 / 344.26 ยฑ1.70 / 347.14 ms โ 106.50 / 111.20 ยฑ3.50 / 116.90 ms โ +3.10x faster โ โ QQuery 81 โ 31.52 / 33.14 ยฑ1.40 / 35.30 ms โ 37.10 / 38.59 ยฑ0.92 / 39.48 ms โ 1.16x slower โ โ QQuery 82 โ 205.71 / 208.11 ยฑ1.66 / 210.19 ms โ 36.48 / 37.26 ยฑ0.42 / 37.67 ms โ +5.59x faster โ โ QQuery 83 โ 47.26 / 48.90 ยฑ1.74 / 52.20 ms โ 49.62 / 50.66 ยฑ0.96 / 51.94 ms โ no change โ โ QQuery 84 โ 53.16 / 53.85 ยฑ0.40 / 54.29 ms โ 45.45 / 46.85 ยฑ0.91 / 48.26 ms โ +1.15x faster โ โ QQuery 85 โ 153.21 / 156.43 ยฑ2.14 / 159.81 ms โ 101.83 / 103.16 ยฑ0.87 / 104.32 ms โ +1.52x faster โ โ QQuery 86 โ 41.94 / 42.71 ยฑ1.09 / 44.87 ms โ 31.07 / 32.01 ยฑ0.66 / 33.00 ms โ +1.33x faster โ โ QQuery 87 โ 93.18 / 96.98 ยฑ4.47 / 104.79 ms โ 112.85 / 116.55 ยฑ1.94 / 118.60 ms โ 1.20x slower โ โ QQuery 88 โ 114.49 / 115.78 ยฑ1.13 / 117.68 ms โ 108.00 / 118.63 ยฑ11.66 / 140.38 ms โ no change โ โ QQuery 89 โ 125.34 / 127.14 ยฑ1.34 / 129.25 ms โ 26.63 / 47.28 ยฑ40.14 / 127.56 ms โ +2.69x faster โ โ QQuery 90 โ 29.16 / 29.36 ยฑ0.17 / 29.55 ms โ 29.79 / 30.56 ยฑ0.58 / 31.37 ms โ no change โ โ QQuery 91 โ 66.71 / 68.62 ยฑ1.68 / 71.43 ms โ 60.10 / 63.47 ยฑ1.85 / 65.27 ms โ +1.08x faster โ โ QQuery 92 โ 63.12 / 63.82 ยฑ0.60 / 64.64 ms โ 31.90 / 32.46 ยฑ0.53 / 33.44 ms โ +1.97x faster โ โ QQuery 93 โ 199.98 / 204.00 ยฑ2.36 / 206.65 ms โ 65.13 / 92.44 ยฑ53.74 / 199.92 ms โ +2.21x faster โ โ QQuery 94 โ 66.77 / 68.07 ยฑ1.27 / 70.43 ms โ 34.20 / 34.95 ยฑ0.51 / 35.52 ms โ +1.95x faster โ โ QQuery 95 โ 141.97 / 146.28 ยฑ3.09 / 149.70 ms โ 112.15 / 113.50 ยฑ1.38 / 116.01 ms โ +1.29x faster โ โ QQuery 96 โ 78.57 / 79.89 ยฑ1.09 / 81.06 ms โ 49.86 / 56.78 ยฑ12.08 / 80.90 ms โ +1.41x faster โ โ QQuery 97 โ 134.65 / 137.69 ยฑ2.38 / 141.67 ms โ 59.56 / 61.01 ยฑ1.54 / 63.70 ms โ +2.26x faster โ โ QQuery 98 โ 153.27 / 157.73 ยฑ3.76 / 164.19 ms โ 37.48 / 38.26 ยฑ0.47 / 38.72 ms โ +4.12x faster โ โ QQuery 99 โ 10781.30 / 10843.94 ยฑ49.67 / 10934.18 ms โ 10776.19 / 10837.85 ยฑ40.24 / 10891.31 ms โ no change โ โโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโ โ Benchmark Summary โ โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ Total Time (HEAD) โ 34841.89ms โ โ Total Time (parquet-morsel-driven-execution-237164415184908839) โ 22753.56ms โ โ Average Time (HEAD) โ 351.94ms โ โ Average Time (parquet-morsel-driven-execution-237164415184908839) โ 229.83ms โ โ Queries Faster โ 79 โ โ Queries Slower โ 7 โ โ Queries with No Change โ 13 โ โ Queries with Failure โ 0 โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโ ``` </p> </details> <details><summary>Resource Usage</summary> **tpcds โ base (merge-base)** | Metric | Value | |--------|-------| | Wall time | 174.5s | | Peak memory | 5.1 GiB | | Avg memory | 4.5 GiB | | CPU user | 276.4s | | CPU sys | 21.4s | | Disk read | 0 B | | Disk write | 637.1 MiB | **tpcds โ branch** | Metric | Value | |--------|-------| | Wall time | 114.1s | | Peak memory | 5.5 GiB | | Avg memory | 4.9 GiB | | CPU user | 290.5s | | CPU sys | 20.9s | | Disk read | 0 B | | Disk write | 772.0 KiB | </details> -- This is an automated message from the Apache Git Service. To respond to the message, please log on to GitHub and use the URL above to go to the specific comment. To unsubscribe, e-mail: [email protected] For queries about this service, please contact Infrastructure at: [email protected] --------------------------------------------------------------------- To unsubscribe, e-mail: [email protected] For additional commands, e-mail: [email protected]
