alamb commented on PR #16170:
URL: https://github.com/apache/datafusion/pull/16170#issuecomment-2950813508

   ๐Ÿค–: Benchmark completed
   
   <details><summary>Details</summary>
   <p>
   
   
   ```
   Comparing HEAD and feat_metadata-on-logical-literal
   --------------------
   Benchmark clickbench_extended.json
   --------------------
   
โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”“
   โ”ƒ Query        โ”ƒ        HEAD โ”ƒ feat_metadata-on-logical-literal โ”ƒ       
Change โ”ƒ
   
โ”กโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ฉ
   โ”‚ QQuery 0     โ”‚  1947.84 ms โ”‚                       1977.34 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 1     โ”‚   697.51 ms โ”‚                        732.40 ms โ”‚ 1.05x 
slower โ”‚
   โ”‚ QQuery 2     โ”‚  1435.42 ms โ”‚                       1473.46 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 3     โ”‚   686.36 ms โ”‚                        680.00 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 4     โ”‚  1460.58 ms โ”‚                       1491.70 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 5     โ”‚ 15570.48 ms โ”‚                      15441.63 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 6     โ”‚  1995.58 ms โ”‚                       2100.00 ms โ”‚ 1.05x 
slower โ”‚
   โ”‚ QQuery 7     โ”‚  2063.07 ms โ”‚                       2023.71 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 8     โ”‚   828.62 ms โ”‚                        838.92 ms โ”‚    no 
change โ”‚
   
โ””โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”˜
   โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”“
   โ”ƒ Benchmark Summary                               โ”ƒ            โ”ƒ
   โ”กโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ฉ
   โ”‚ Total Time (HEAD)                               โ”‚ 26685.45ms โ”‚
   โ”‚ Total Time (feat_metadata-on-logical-literal)   โ”‚ 26759.16ms โ”‚
   โ”‚ Average Time (HEAD)                             โ”‚  2965.05ms โ”‚
   โ”‚ Average Time (feat_metadata-on-logical-literal) โ”‚  2973.24ms โ”‚
   โ”‚ Queries Faster                                  โ”‚          0 โ”‚
   โ”‚ Queries Slower                                  โ”‚          2 โ”‚
   โ”‚ Queries with No Change                          โ”‚          7 โ”‚
   โ”‚ Queries with Failure                            โ”‚          0 โ”‚
   โ””โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”˜
   --------------------
   Benchmark clickbench_partitioned.json
   --------------------
   
โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”“
   โ”ƒ Query        โ”ƒ        HEAD โ”ƒ feat_metadata-on-logical-literal โ”ƒ       
Change โ”ƒ
   
โ”กโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ฉ
   โ”‚ QQuery 0     โ”‚    15.27 ms โ”‚                         15.17 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 1     โ”‚    31.75 ms โ”‚                         32.97 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 2     โ”‚    79.99 ms โ”‚                         80.41 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 3     โ”‚    95.96 ms โ”‚                         97.03 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 4     โ”‚   581.96 ms โ”‚                        586.26 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 5     โ”‚   815.93 ms โ”‚                        835.78 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 6     โ”‚    23.44 ms โ”‚                         23.19 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 7     โ”‚    38.16 ms โ”‚                         36.92 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 8     โ”‚   898.57 ms โ”‚                        900.58 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 9     โ”‚  1169.91 ms โ”‚                       1173.72 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 10    โ”‚   262.73 ms โ”‚                        272.99 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 11    โ”‚   297.50 ms โ”‚                        305.42 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 12    โ”‚   875.76 ms โ”‚                        908.23 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 13    โ”‚  1226.00 ms โ”‚                       1271.09 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 14    โ”‚   810.51 ms โ”‚                        846.11 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 15    โ”‚   802.86 ms โ”‚                        818.68 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 16    โ”‚  1729.26 ms โ”‚                       1726.44 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 17    โ”‚  1660.24 ms โ”‚                       1609.25 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 18    โ”‚  3100.18 ms โ”‚                       3034.41 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 19    โ”‚    83.56 ms โ”‚                         83.33 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 20    โ”‚  1108.98 ms โ”‚                       1159.42 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 21    โ”‚  1297.61 ms โ”‚                       1364.13 ms โ”‚ 1.05x 
slower โ”‚
   โ”‚ QQuery 22    โ”‚  2128.22 ms โ”‚                       2254.26 ms โ”‚ 1.06x 
slower โ”‚
   โ”‚ QQuery 23    โ”‚  7925.60 ms โ”‚                       8277.82 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 24    โ”‚   458.42 ms โ”‚                        477.99 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 25    โ”‚   384.51 ms โ”‚                        410.40 ms โ”‚ 1.07x 
slower โ”‚
   โ”‚ QQuery 26    โ”‚   556.90 ms โ”‚                        540.30 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 27    โ”‚  1545.90 ms โ”‚                       1631.50 ms โ”‚ 1.06x 
slower โ”‚
   โ”‚ QQuery 28    โ”‚ 12411.77 ms โ”‚                      12611.76 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 29    โ”‚   532.50 ms โ”‚                        523.77 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 30    โ”‚   782.06 ms โ”‚                        819.37 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 31    โ”‚   826.92 ms โ”‚                        880.32 ms โ”‚ 1.06x 
slower โ”‚
   โ”‚ QQuery 32    โ”‚  2694.78 ms โ”‚                       2675.31 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 33    โ”‚  3332.02 ms โ”‚                       3358.09 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 34    โ”‚  3367.47 ms โ”‚                       3372.69 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 35    โ”‚  1270.93 ms โ”‚                       1281.59 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 36    โ”‚   125.65 ms โ”‚                        123.75 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 37    โ”‚    55.14 ms โ”‚                         57.00 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 38    โ”‚   126.59 ms โ”‚                        128.04 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 39    โ”‚   197.26 ms โ”‚                        205.22 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 40    โ”‚    45.76 ms โ”‚                         46.50 ms โ”‚    no 
change โ”‚
   โ”‚ QQuery 41    โ”‚    43.23 ms โ”‚                         47.35 ms โ”‚ 1.10x 
slower โ”‚
   โ”‚ QQuery 42    โ”‚    37.80 ms โ”‚                         37.72 ms โ”‚    no 
change โ”‚
   
โ””โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”˜
   โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”“
   โ”ƒ Benchmark Summary                               โ”ƒ            โ”ƒ
   โ”กโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ฉ
   โ”‚ Total Time (HEAD)                               โ”‚ 55855.54ms โ”‚
   โ”‚ Total Time (feat_metadata-on-logical-literal)   โ”‚ 56942.28ms โ”‚
   โ”‚ Average Time (HEAD)                             โ”‚  1298.97ms โ”‚
   โ”‚ Average Time (feat_metadata-on-logical-literal) โ”‚  1324.24ms โ”‚
   โ”‚ Queries Faster                                  โ”‚          0 โ”‚
   โ”‚ Queries Slower                                  โ”‚          6 โ”‚
   โ”‚ Queries with No Change                          โ”‚         37 โ”‚
   โ”‚ Queries with Failure                            โ”‚          0 โ”‚
   โ””โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”˜
   --------------------
   Benchmark tpch_mem_sf1.json
   --------------------
   
โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”“
   โ”ƒ Query        โ”ƒ      HEAD โ”ƒ feat_metadata-on-logical-literal โ”ƒ       Change 
โ”ƒ
   
โ”กโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ฉ
   โ”‚ QQuery 1     โ”‚ 118.98 ms โ”‚                        121.08 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 2     โ”‚  22.23 ms โ”‚                         21.31 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 3     โ”‚  33.70 ms โ”‚                         32.96 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 4     โ”‚  19.92 ms โ”‚                         19.64 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 5     โ”‚  52.01 ms โ”‚                         51.56 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 6     โ”‚  11.93 ms โ”‚                         11.86 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 7     โ”‚  96.23 ms โ”‚                         98.36 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 8     โ”‚  25.64 ms โ”‚                         25.53 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 9     โ”‚  58.07 ms โ”‚                         61.09 ms โ”‚ 1.05x slower 
โ”‚
   โ”‚ QQuery 10    โ”‚  47.96 ms โ”‚                         48.36 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 11    โ”‚  11.11 ms โ”‚                         11.36 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 12    โ”‚  40.83 ms โ”‚                         41.79 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 13    โ”‚  27.43 ms โ”‚                         26.76 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 14    โ”‚   9.87 ms โ”‚                          9.52 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 15    โ”‚  22.73 ms โ”‚                         22.64 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 16    โ”‚  21.77 ms โ”‚                         20.75 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 17    โ”‚  95.11 ms โ”‚                         95.56 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 18    โ”‚ 211.93 ms โ”‚                        207.00 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 19    โ”‚  25.64 ms โ”‚                         28.03 ms โ”‚ 1.09x slower 
โ”‚
   โ”‚ QQuery 20    โ”‚  34.67 ms โ”‚                         35.15 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 21    โ”‚ 157.01 ms โ”‚                        157.52 ms โ”‚    no change 
โ”‚
   โ”‚ QQuery 22    โ”‚  16.28 ms โ”‚                         16.59 ms โ”‚    no change 
โ”‚
   
โ””โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”˜
   โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ณโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”“
   โ”ƒ Benchmark Summary                               โ”ƒ           โ”ƒ
   โ”กโ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ•‡โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”โ”ฉ
   โ”‚ Total Time (HEAD)                               โ”‚ 1161.05ms โ”‚
   โ”‚ Total Time (feat_metadata-on-logical-literal)   โ”‚ 1164.40ms โ”‚
   โ”‚ Average Time (HEAD)                             โ”‚   52.77ms โ”‚
   โ”‚ Average Time (feat_metadata-on-logical-literal) โ”‚   52.93ms โ”‚
   โ”‚ Queries Faster                                  โ”‚         0 โ”‚
   โ”‚ Queries Slower                                  โ”‚         2 โ”‚
   โ”‚ Queries with No Change                          โ”‚        20 โ”‚
   โ”‚ Queries with Failure                            โ”‚         0 โ”‚
   โ””โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”ดโ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”€โ”˜
   ```
   
   
   </p>
   </details>
   
   


-- 
This is an automated message from the Apache Git Service.
To respond to the message, please log on to GitHub and use the
URL above to go to the specific comment.

To unsubscribe, e-mail: github-unsubscr...@datafusion.apache.org

For queries about this service, please contact Infrastructure at:
us...@infra.apache.org


---------------------------------------------------------------------
To unsubscribe, e-mail: github-unsubscr...@datafusion.apache.org
For additional commands, e-mail: github-h...@datafusion.apache.org

Reply via email to