resources/tools/presentation/specifications/report/data_sets.yaml

   1 ################################################################################
   2 ###                            D A T A   S E T S                             ###
   3 ################################################################################
   4
   5 - type: "data-sets"
   6
   7 #   vpp-device-results-ubuntu:
   8 #     csit-vpp-device-2106-ubuntu2004-x86_64-1n-skx:
   9 #       - 169  # rls2106.rel VPP DEV env 7
  10
  11 ################################################################################
  12
  13   # 3n-skx
  14
  15   vpp-3n-skx-hist-iter-new-env:
  16     csit-vpp-perf-report-iterative-2101-3n-skx:
  17       - 14  # rls2009 NDRPDR iter env 6
  18       - 15  # rls2009 NDRPDR iter env 6
  19       - 16  # rls2009 NDRPDR iter env 6
  20       - 17  # rls2009 NDRPDR iter env 6
  21       - 18  # rls2009 NDRPDR iter env 6
  22       - 25  # rls2009 NDRPDR iter env 6
  23       - 26  # rls2009 NDRPDR iter env 6
  24       - 27  # rls2009 NDRPDR iter env 6
  25       - 29  # rls2009 NDRPDR iter env 6
  26       - 31  # rls2009 NDRPDR iter env 6
  27
  28   vpp-3n-skx-prev-iter-old-env:
  29     csit-vpp-perf-report-iterative-2101-3n-skx:
  30       - 36  # rls2101.rel NDRPDR iter env 6
  31       - 37  # rls2101.rel NDRPDR iter env 6
  32       - 38  # rls2101.rel NDRPDR iter env 6
  33       - 39  # rls2101.rel NDRPDR iter env 6
  34       - 40  # rls2101.rel NDRPDR iter env 6
  35       - 41  # rls2101.rel NDRPDR iter env 6
  36       - 42  # rls2101.rel NDRPDR iter env 6
  37       - 47  # rls2101.rel NDRPDR iter env 6
  38       - 48  # rls2101.rel NDRPDR iter env 6
  39       - 50  # rls2101.rel NDRPDR iter env 6
  40
  41   vpp-3n-skx-prev-iter-new-env:
  42     csit-vpp-perf-report-iterative-2106-3n-skx:
  43       - 3   # rls2101.rel NDRPDR iter env 7
  44       - 4   # rls2101.rel NDRPDR iter env 7
  45       - 5   # rls2101.rel NDRPDR iter env 7
  46       - 6   # rls2101.rel NDRPDR iter env 7
  47       - 7   # rls2101.rel NDRPDR iter env 7
  48       - 8   # rls2101.rel NDRPDR iter env 7
  49       - 9   # rls2101.rel NDRPDR iter env 7
  50       - 10  # rls2101.rel NDRPDR iter env 7
  51       - 11  # rls2101.rel NDRPDR iter env 7
  52       - 12  # rls2101.rel NDRPDR iter env 7
  53
  54   vpp-3n-skx-curr-iter:
  55     csit-vpp-perf-report-iterative-2106-3n-skx:
  56       - 61  # rls2101.1.rel NDRPDR iter env 7
  57       - 62  # rls2101.1.rel NDRPDR iter env 7
  58       - 63  # rls2101.1.rel NDRPDR iter env 7
  59       - 64  # rls2101.1.rel NDRPDR iter env 7
  60       - 65  # rls2101.1.rel NDRPDR iter env 7
  61
  62   vpp-3n-skx-curr-iter-best:
  63     csit-vpp-perf-report-iterative-2106-3n-skx:
  64       - 61  # rls2101.1.rel NDRPDR iter env 7
  65
  66   vpp-3n-skx-hist-iter-mrr-new-env:
  67     csit-vpp-perf-report-iterative-2101-3n-skx:
  68       - 34  # rls2009 MRR iter env 6
  69
  70   vpp-3n-skx-prev-iter-mrr-old-env:
  71     csit-vpp-perf-report-iterative-2101-3n-skx:
  72       - 35  # rls2101.rel MRR iter env 6
  73
  74   vpp-3n-skx-prev-iter-mrr-new-env:
  75     csit-vpp-perf-report-iterative-2106-3n-skx:
  76       - 2   # rls2101.rel MRR iter env 7
  77
  78   vpp-3n-skx-curr-iter-mrr:
  79     csit-vpp-perf-report-iterative-2106-3n-skx:
  80       - 60  # rls2101.1.rel MRR iter env 7
  81
  82   vpp-3n-skx-curr-cov:
  83     csit-vpp-perf-report-iterative-2106-3n-skx:
  84       - 61  # rls2101.1.rel NDRPDR iter env 7
  85
  86   # 2n-skx
  87
  88   vpp-2n-skx-hist-iter-new-env:
  89     csit-vpp-perf-report-iterative-2101-2n-skx:
  90       - 22  # rls2009 NDRPDR iter env 6
  91       - 23  # rls2009 NDRPDR iter env 6
  92       - 24  # rls2009 NDRPDR iter env 6
  93       - 25  # rls2009 NDRPDR iter env 6
  94       - 26  # rls2009 NDRPDR iter env 6
  95       - 28  # rls2009 NDRPDR iter env 6
  96       - 39  # rls2009 NDRPDR iter env 6
  97       - 40  # rls2009 NDRPDR iter env 6
  98       - 41  # rls2009 NDRPDR iter env 6
  99       - 44  # rls2009 NDRPDR iter env 6
 100
 101   vpp-2n-skx-prev-iter-old-env:
 102     csit-vpp-perf-report-iterative-2101-2n-skx:
 103       - 63  # rls2101.rel NDRPDR iter env 6
 104       - 69  # rls2101.rel NDRPDR iter env 6
 105       - 70  # rls2101.rel NDRPDR iter env 6
 106       - 75  # rls2101.rel NDRPDR iter env 6
 107       - 76  # rls2101.rel NDRPDR iter env 6
 108       - 77  # rls2101.rel NDRPDR iter env 6
 109       - 82  # rls2101.rel NDRPDR iter env 6
 110       - 85  # rls2101.rel NDRPDR iter env 6
 111       - 86  # rls2101.rel NDRPDR iter env 6
 112       - 94  # rls2101.rel NDRPDR iter env 6
 113       - 89  # rls2101.rel NDRPDR iter RND env 6
 114       - 90  # rls2101.rel NDRPDR iter RND env 6
 115       - 91  # rls2101.rel NDRPDR iter RND env 6
 116       - 92  # rls2101.rel NDRPDR iter RND env 6
 117       - 93  # rls2101.rel NDRPDR iter RND env 6
 118       - 96  # rls2101.rel NDRPDR iter RND env 6
 119       - 98  # rls2101.rel NDRPDR iter RND env 6
 120       - 99  # rls2101.rel NDRPDR iter RND env 6
 121       - 101 # rls2101.rel NDRPDR iter RND env 6
 122       - 102 # rls2101.rel NDRPDR iter RND env 6
 123       - 116 # rls2101.rel NDRPDR iter NAT env 6
 124       - 117 # rls2101.rel NDRPDR iter NAT env 6
 125       - 118 # rls2101.rel NDRPDR iter NAT env 6
 126       - 119 # rls2101.rel NDRPDR iter NAT env 6
 127       - 120 # rls2101.rel NDRPDR iter NAT env 6
 128       - 121 # rls2101.rel NDRPDR iter NAT env 6
 129       - 122 # rls2101.rel NDRPDR iter NAT env 6
 130       - 123 # rls2101.rel NDRPDR iter NAT env 6
 131       - 124 # rls2101.rel NDRPDR iter NAT env 6
 132       - 125 # rls2101.rel NDRPDR iter NAT env 6
 133
 134   vpp-2n-skx-prev-iter-new-env:
 135     csit-vpp-perf-report-iterative-2106-2n-skx:
 136       - 3   # rls2101.rel NDRPDR iter env 7
 137       - 4   # rls2101.rel NDRPDR iter env 7
 138       - 5   # rls2101.rel NDRPDR iter env 7
 139       - 6   # rls2101.rel NDRPDR iter env 7
 140       - 7   # rls2101.rel NDRPDR iter env 7
 141       - 8   # rls2101.rel NDRPDR iter env 7
 142       - 9   # rls2101.rel NDRPDR iter env 7
 143       - 10  # rls2101.rel NDRPDR iter env 7
 144       - 11  # rls2101.rel NDRPDR iter env 7
 145       - 12  # rls2101.rel NDRPDR iter env 7
 146
 147   vpp-2n-skx-curr-iter:
 148     csit-vpp-perf-report-iterative-2106-2n-skx:
 149       - 102 # rls2101.1.rel NDRPDR iter env 7
 150       - 103 # rls2101.1.rel NDRPDR iter env 7
 151       - 104 # rls2101.1.rel NDRPDR iter env 7
 152       - 105 # rls2101.1.rel NDRPDR iter env 7
 153       - 106 # rls2101.1.rel NDRPDR iter env 7
 154
 155   vpp-2n-skx-curr-iter-best:
 156     csit-vpp-perf-report-iterative-2106-2n-skx:
 157       - 102 # rls2101.1.rel NDRPDR iter env 7
 158
 159   vpp-2n-skx-hist-iter-mrr-new-env:
 160     csit-vpp-perf-report-iterative-2101-2n-skx:
 161       - 21  # rls2009 MRR iter env 6
 162
 163   vpp-2n-skx-prev-iter-mrr-old-env:
 164     csit-vpp-perf-report-iterative-2101-2n-skx:
 165       - 62  # rls2101.rel MRR iter env 6
 166
 167   vpp-2n-skx-prev-iter-mrr-new-env:
 168     csit-vpp-perf-report-iterative-2106-2n-skx:
 169       - 2   # rls2009 MRR iter env 7
 170
 171   vpp-2n-skx-curr-iter-mrr:
 172     csit-vpp-perf-report-iterative-2106-2n-skx:
 173       - 101 # rls2101.1.rel MRR iter env 7
 174
 175   vpp-2n-skx-curr-cov:
 176     csit-vpp-perf-report-iterative-2106-2n-skx:
 177       - 102 # rls2101.1.rel NDRPDR iter env 7
 178
 179   # 2n-zn2
 180
 181   vpp-2n-zn2-hist-iter-new-env:
 182     csit-vpp-perf-report-iterative-2101-2n-zn2:
 183       - 9   # rls2009 NDRPDR iter env 6
 184       - 10  # rls2009 NDRPDR iter env 6
 185       - 11  # rls2009 NDRPDR iter env 6
 186       - 12  # rls2009 NDRPDR iter env 6
 187       - 13  # rls2009 NDRPDR iter env 6
 188       - 20  # rls2009 NDRPDR iter env 6
 189       - 21  # rls2009 NDRPDR iter env 6
 190       - 22  # rls2009 NDRPDR iter env 6
 191       - 25  # rls2009 NDRPDR iter env 6
 192       - 26  # rls2009 NDRPDR iter env 6
 193
 194   vpp-2n-zn2-prev-iter-old-env:
 195     csit-vpp-perf-report-iterative-2101-2n-zn2:
 196       - 31  # rls2101.rel NDRPDR iter env 6
 197       - 32  # rls2101.rel NDRPDR iter env 6
 198       - 33  # rls2101.rel NDRPDR iter env 6
 199       - 34  # rls2101.rel NDRPDR iter env 6
 200       - 35  # rls2101.rel NDRPDR iter env 6
 201       - 36  # rls2101.rel NDRPDR iter env 6
 202       - 37  # rls2101.rel NDRPDR iter env 6
 203       - 38  # rls2101.rel NDRPDR iter env 6
 204       - 44  # rls2101.rel NDRPDR iter env 6
 205       - 49  # rls2101.rel NDRPDR iter env 6
 206       - 39  # rls2101.rel NDRPDR iter RND env 6
 207       - 40  # rls2101.rel NDRPDR iter RND env 6
 208       - 41  # rls2101.rel NDRPDR iter RND env 6
 209       - 42  # rls2101.rel NDRPDR iter RND env 6
 210       - 43  # rls2101.rel NDRPDR iter RND env 6
 211       - 45  # rls2101.rel NDRPDR iter RND env 6
 212       - 48  # rls2101.rel NDRPDR iter RND env 6
 213       - 50  # rls2101.rel NDRPDR iter RND env 6
 214       - 51  # rls2101.rel NDRPDR iter RND env 6
 215       - 52  # rls2101.rel NDRPDR iter RND env 6
 216
 217   vpp-2n-zn2-prev-iter-new-env:
 218     csit-vpp-perf-report-iterative-2106-2n-zn2:
 219       - 3   # rls2101.rel NDRPDR iter env 7
 220       - 6   # rls2101.rel NDRPDR iter env 7
 221       - 4   # rls2101.rel NDRPDR iter env 7
 222       - 8   # rls2101.rel NDRPDR iter env 7
 223       - 9   # rls2101.rel NDRPDR iter env 7
 224       - 10  # rls2101.rel NDRPDR iter env 7
 225       - 11  # rls2101.rel NDRPDR iter env 7
 226       - 21  # rls2101.rel NDRPDR iter env 7
 227       - 34  # rls2101.rel NDRPDR iter env 7
 228       - 35  # rls2101.rel NDRPDR iter env 7
 229
 230   vpp-2n-zn2-curr-iter:
 231     csit-vpp-perf-report-iterative-2106-2n-zn2:
 232       - 61  # rls2101.1.rel NDRPDR iter env 7
 233       - 62  # rls2101.1.rel NDRPDR iter env 7
 234       - 63  # rls2101.1.rel NDRPDR iter env 7
 235       - 64  # rls2101.1.rel NDRPDR iter env 7
 236
 237   vpp-2n-zn2-curr-iter-best:
 238     csit-vpp-perf-report-iterative-2106-2n-zn2:
 239       - 61  # rls2101.1.rel NDRPDR iter env 7
 240
 241   vpp-2n-zn2-hist-iter-mrr-new-env:
 242     csit-vpp-perf-report-iterative-2101-2n-zn2:
 243       - 8   # rls2009 MRR iter env6
 244
 245   vpp-2n-zn2-prev-iter-mrr-old-env:
 246     csit-vpp-perf-report-iterative-2101-2n-zn2:
 247       - 30  # rls2101.rel MRR iter env 6
 248
 249   vpp-2n-zn2-prev-iter-mrr-new-env:
 250     csit-vpp-perf-report-iterative-2106-2n-zn2:
 251       - 2   # rls2101.rel MRR iter env 7
 252
 253   vpp-2n-zn2-curr-iter-mrr:
 254     csit-vpp-perf-report-iterative-2106-2n-zn2:
 255       - 60  # rls2101.1.rel MRR iter env 7
 256
 257   vpp-2n-zn2-curr-cov:
 258     csit-vpp-perf-report-iterative-2106-2n-zn2:
 259       - 61  # rls2101.1.rel NDRPDR iter env 7
 260
 261   # 2n-clx
 262
 263   vpp-2n-clx-hist-iter-new-env:
 264     csit-vpp-perf-report-iterative-2101-2n-clx:
 265       - 16  # rls2009 NDRPDR iter env 6
 266       - 17  # rls2009 NDRPDR iter env 6
 267       - 18  # rls2009 NDRPDR iter env 6
 268       - 19  # rls2009 NDRPDR iter env 6
 269       - 20  # rls2009 NDRPDR iter env 6
 270       - 21  # rls2009 NDRPDR iter env 6
 271       - 32  # rls2009 NDRPDR iter env 6
 272       - 33  # rls2009 NDRPDR iter env 6
 273       - 34  # rls2009 NDRPDR iter env 6
 274       - 35  # rls2009 NDRPDR iter env 6
 275       - 146 # rls2009 NDRPDR MLX iter env 6
 276       - 147 # rls2009 NDRPDR MLX iter env 6
 277       - 148 # rls2009 NDRPDR MLX iter env 6
 278       - 149 # rls2009 NDRPDR MLX iter env 6
 279       - 150 # rls2009 NDRPDR MLX iter env 6
 280       - 151 # rls2009 NDRPDR MLX iter env 6
 281       - 152 # rls2009 NDRPDR MLX iter env 6
 282       - 153 # rls2009 NDRPDR MLX iter env 6
 283       - 154 # rls2009 NDRPDR MLX iter env 6
 284       - 155 # rls2009 NDRPDR MLX iter env 6
 285
 286   vpp-2n-clx-prev-iter-old-env:
 287     csit-vpp-perf-report-iterative-2101-2n-clx:
 288       - 54  # rls2101.rel NDRPDR iter env 6
 289       - 59  # rls2101.rel NDRPDR iter env 6
 290       - 60  # rls2101.rel NDRPDR iter env 6
 291       - 63  # rls2101.rel NDRPDR iter env 6
 292       - 66  # rls2101.rel NDRPDR iter env 6
 293       - 68  # rls2101.rel NDRPDR iter env 6
 294       - 73  # rls2101.rel NDRPDR iter env 6
 295       - 75  # rls2101.rel NDRPDR iter env 6
 296       - 86  # rls2101.rel NDRPDR iter env 6
 297       - 90  # rls2101.rel NDRPDR iter env 6
 298       - 80  # rls2101.rel NDRPDR iter RND env 6
 299       - 87  # rls2101.rel NDRPDR iter RND env 6
 300       - 91  # rls2101.rel NDRPDR iter RND env 6
 301       - 92  # rls2101.rel NDRPDR iter RND env 6
 302       - 93  # rls2101.rel NDRPDR iter RND env 6
 303       - 94  # rls2101.rel NDRPDR iter RND env 6
 304       - 95  # rls2101.rel NDRPDR iter RND env 6
 305       - 100 # rls2101.rel NDRPDR iter RND env 6
 306       - 106 # rls2101.rel NDRPDR iter RND env 6
 307       - 108 # rls2101.rel NDRPDR iter RND env 6
 308       - 112 # rls2101.rel NDRPDR iter NAT env 6
 309       - 113 # rls2101.rel NDRPDR iter NAT env 6
 310       - 114 # rls2101.rel NDRPDR iter NAT env 6
 311       - 115 # rls2101.rel NDRPDR iter NAT env 6
 312       - 116 # rls2101.rel NDRPDR iter NAT env 6
 313       - 117 # rls2101.rel NDRPDR iter NAT env 6
 314       - 118 # rls2101.rel NDRPDR iter NAT env 6
 315       - 119 # rls2101.rel NDRPDR iter NAT env 6
 316       - 120 # rls2101.rel NDRPDR iter NAT env 6
 317       - 121 # rls2101.rel NDRPDR iter NAT env 6
 318       - 122 # rls2101.rel NDRPDR iter MLX env 6
 319       - 123 # rls2101.rel NDRPDR iter MLX env 6
 320       - 124 # rls2101.rel NDRPDR iter MLX env 6
 321       - 126 # rls2101.rel NDRPDR iter MLX env 6
 322       - 127 # rls2101.rel NDRPDR iter MLX env 6
 323       - 128 # rls2101.rel NDRPDR iter MLX env 6
 324       - 129 # rls2101.rel NDRPDR iter MLX env 6
 325       - 130 # rls2101.rel NDRPDR iter MLX env 6
 326       - 131 # rls2101.rel NDRPDR iter MLX env 6
 327       - 132 # rls2101.rel NDRPDR iter MLX env 6
 328
 329   vpp-2n-clx-prev-iter-new-env:
 330     csit-vpp-perf-report-iterative-2106-2n-clx:
 331       - 10  # rls2101.rel NDRPDR iter env 7
 332       - 11  # rls2101.rel NDRPDR iter env 7
 333       - 15  # rls2101.rel NDRPDR iter env 7
 334       - 13  # rls2101.rel NDRPDR iter env 7
 335       - 14  # rls2101.rel NDRPDR iter env 7
 336       - 16  # rls2101.rel NDRPDR iter env 7
 337       - 17  # rls2101.rel NDRPDR iter env 7
 338       - 18  # rls2101.rel NDRPDR iter env 7
 339       - 20  # rls2101.rel NDRPDR iter env 7
 340       - 21  # rls2101.rel NDRPDR iter env 7
 341
 342   vpp-2n-clx-curr-iter:
 343     csit-vpp-perf-report-iterative-2106-2n-clx:
 344       - 146 # rls2101.1.rel NDRPDR iter env 7
 345       - 147 # rls2101.1.rel NDRPDR iter env 7
 346       - 148 # rls2101.1.rel NDRPDR iter env 7
 347       - 149 # rls2101.1.rel NDRPDR iter env 7
 348       - 150 # rls2101.1.rel NDRPDR iter env 7
 349
 350   vpp-2n-clx-curr-iter-best:
 351     csit-vpp-perf-report-iterative-2106-2n-clx:
 352       - 146 # rls2101.1.rel NDRPDR iter env 7
 353
 354   vpp-2n-clx-hist-iter-mrr-new-env:
 355     csit-vpp-perf-report-iterative-2101-2n-clx:
 356       - 15  # rls2009 MRR iter env 6
 357       - 142 # rls2009 MRR MLX iter env 6
 358
 359   vpp-2n-clx-prev-iter-mrr-old-env:
 360     csit-vpp-perf-report-iterative-2101-2n-clx:
 361       - 53  # rls2101.rel MRR iter env 6
 362       - 133 # rls2101.rel MRR MLX iter env 6
 363
 364   vpp-2n-clx-prev-iter-mrr-new-env:
 365     csit-vpp-perf-report-iterative-2106-2n-clx:
 366       - 8   # rls2101.rel MRR iter env 7
 367       - 123 # rls2101.rel MRR AF-XDP iter env 7
 368
 369   vpp-2n-clx-curr-iter-mrr:
 370     csit-vpp-perf-report-iterative-2106-2n-clx:
 371       - 145 # rls2101.1.rel MRR iter env 7
 372
 373   vpp-2n-clx-curr-cov:
 374     csit-vpp-perf-report-iterative-2106-2n-clx:
 375       - 146 # rls2101.1.rel NDRPDR iter env 7
 376
 377   # 3n-tsh
 378
 379   vpp-3n-tsh-hist-iter-new-env:
 380     csit-vpp-perf-report-iterative-2101-3n-tsh:
 381       - 8   # rls2009 NDRPDR iter env 6
 382       - 13  # rls2009 NDRPDR iter env 6
 383       - 14  # rls2009 NDRPDR iter env 6
 384       - 15  # rls2009 NDRPDR iter env 6
 385       - 16  # rls2009 NDRPDR iter env 6
 386       - 17  # rls2009 NDRPDR iter env 6
 387       - 18  # rls2009 NDRPDR iter env 6
 388       - 19  # rls2009 NDRPDR iter env 6
 389       - 21  # rls2009 NDRPDR iter env 6
 390
 391   vpp-3n-tsh-prev-iter-old-env:
 392     csit-vpp-perf-report-iterative-2101-3n-tsh:
 393       - 23  # rls2101.rel NDRPDR iter env 6
 394       - 24  # rls2101.rel NDRPDR iter env 6
 395       - 25  # rls2101.rel NDRPDR iter env 6
 396       - 26  # rls2101.rel NDRPDR iter env 6
 397       - 27  # rls2101.rel NDRPDR iter env 6
 398       - 28  # rls2101.rel NDRPDR iter env 6
 399       - 29  # rls2101.rel NDRPDR iter env 6
 400       - 30  # rls2101.rel NDRPDR iter env 6
 401       - 31  # rls2101.rel NDRPDR iter env 6
 402       - 32  # rls2101.rel NDRPDR iter env 6
 403
 404   vpp-3n-tsh-prev-iter-new-env:
 405     # TODO: Replace
 406     # csit-vpp-perf-report-iterative-2106-3n-tsh:
 407     csit-vpp-perf-report-iterative-2101-3n-tsh:
 408       - 23  # rls2101.rel NDRPDR iter env 6
 409       - 24  # rls2101.rel NDRPDR iter env 6
 410       - 25  # rls2101.rel NDRPDR iter env 6
 411       - 26  # rls2101.rel NDRPDR iter env 6
 412       - 27  # rls2101.rel NDRPDR iter env 6
 413       - 28  # rls2101.rel NDRPDR iter env 6
 414       - 29  # rls2101.rel NDRPDR iter env 6
 415       - 30  # rls2101.rel NDRPDR iter env 6
 416       - 31  # rls2101.rel NDRPDR iter env 6
 417       - 32  # rls2101.rel NDRPDR iter env 6
 418
 419   vpp-3n-tsh-curr-iter:
 420     csit-vpp-perf-report-iterative-2106-3n-tsh:
 421       - 32  # rls2101.1.rel NDRPDR iter env 7
 422       - 33  # rls2101.1.rel NDRPDR iter env 7
 423       - 34  # rls2101.1.rel NDRPDR iter env 7
 424       - 35  # rls2101.1.rel NDRPDR iter env 7
 425
 426   vpp-3n-tsh-curr-iter-best:
 427     csit-vpp-perf-report-iterative-2106-3n-tsh:
 428       - 32  # rls2101.1.rel NDRPDR iter env 7
 429
 430   vpp-3n-tsh-hist-iter-mrr-new-env:
 431     csit-vpp-perf-report-iterative-2101-3n-tsh:
 432       - 7   # rls2009 MRR iter env 6
 433
 434   vpp-3n-tsh-prev-iter-mrr-old-env:
 435     csit-vpp-perf-report-iterative-2101-3n-tsh:
 436       - 22  # rls2101.rel MRR iter env 6
 437
 438   vpp-3n-tsh-prev-iter-mrr-new-env:
 439     # TODO: Replace
 440     # csit-vpp-perf-report-iterative-2106-3n-tsh:
 441     csit-vpp-perf-report-iterative-2101-3n-tsh:
 442       - 22  # rls2101.rel MRR iter env 6
 443
 444   vpp-3n-tsh-curr-iter-mrr:
 445     csit-vpp-perf-report-iterative-2106-3n-tsh:
 446       - 31  # rls2101.1.rel MRR iter env 7
 447
 448   vpp-3n-tsh-curr-cov:
 449     csit-vpp-perf-report-iterative-2106-3n-tsh:
 450       - 32  # rls2101.1.rel NDRPDR iter env 7
 451
 452   # 2n-tx2
 453
 454   vpp-2n-tx2-hist-iter-new-env:
 455     csit-vpp-perf-report-iterative-2101-2n-tx2:
 456       - 6   # rls2009 NDRPDR iter env 6
 457       - 7   # rls2009 NDRPDR iter env 6
 458       - 11  # rls2009 NDRPDR iter env 6
 459       - 12  # rls2009 NDRPDR iter env 6
 460       - 13  # rls2009 NDRPDR iter env 6
 461       - 16  # rls2009 NDRPDR iter env 6
 462       - 17  # rls2009 NDRPDR iter env 6
 463       - 18  # rls2009 NDRPDR iter env 6
 464       - 19  # rls2009 NDRPDR iter env 6
 465       - 20  # rls2009 NDRPDR iter env 6
 466
 467   vpp-2n-tx2-prev-iter-old-env:
 468     csit-vpp-perf-report-iterative-2101-2n-tx2:
 469       - 22  # rls2101.rel NDRPDR iter env 6
 470       - 23  # rls2101.rel NDRPDR iter env 6
 471       - 24  # rls2101.rel NDRPDR iter env 6
 472       - 25  # rls2101.rel NDRPDR iter env 6
 473       - 26  # rls2101.rel NDRPDR iter env 6
 474       - 27  # rls2101.rel NDRPDR iter env 6
 475       - 28  # rls2101.rel NDRPDR iter env 6
 476       - 29  # rls2101.rel NDRPDR iter env 6
 477       - 30  # rls2101.rel NDRPDR iter env 6
 478       - 31  # rls2101.rel NDRPDR iter env 6
 479
 480   vpp-2n-tx2-prev-iter-new-env:
 481     # TODO: Replace
 482     # csit-vpp-perf-report-iterative-2106-2n-tx2:
 483     csit-vpp-perf-report-iterative-2101-2n-tx2:
 484       - 22  # rls2101.rel NDRPDR iter env 6
 485       - 23  # rls2101.rel NDRPDR iter env 6
 486       - 24  # rls2101.rel NDRPDR iter env 6
 487       - 25  # rls2101.rel NDRPDR iter env 6
 488       - 26  # rls2101.rel NDRPDR iter env 6
 489       - 27  # rls2101.rel NDRPDR iter env 6
 490       - 28  # rls2101.rel NDRPDR iter env 6
 491       - 29  # rls2101.rel NDRPDR iter env 6
 492       - 30  # rls2101.rel NDRPDR iter env 6
 493       - 31  # rls2101.rel NDRPDR iter env 6
 494
 495   vpp-2n-tx2-curr-iter:
 496     csit-vpp-perf-report-iterative-2106-2n-tx2:
 497       - 43  # rls2101.1.rel NDRPDR iter env 7
 498       - 44  # rls2101.1.rel NDRPDR iter env 7
 499       - 45  # rls2101.1.rel NDRPDR iter env 7
 500       - 46  # rls2101.1.rel NDRPDR iter env 7
 501       - 47  # rls2101.1.rel NDRPDR iter env 7
 502       - 48  # rls2101.1.rel NDRPDR iter env 7
 503       - 49  # rls2101.1.rel NDRPDR iter env 7
 504
 505   vpp-2n-tx2-curr-iter-best:
 506     csit-vpp-perf-report-iterative-2106-2n-tx2:
 507       - 43  # rls2101.1.rel NDRPDR iter env 7
 508
 509   vpp-2n-tx2-hist-iter-mrr-new-env:
 510     csit-vpp-perf-report-iterative-2101-2n-tx2:
 511       - 5   # rls2009 MRR iter env 6
 512
 513   vpp-2n-tx2-prev-iter-mrr-old-env:
 514     csit-vpp-perf-report-iterative-2101-2n-tx2:
 515       - 21  # rls2101.rel MRR iter env 6
 516
 517   vpp-2n-tx2-prev-iter-mrr-new-env:
 518     # TODO: Replace
 519     # csit-vpp-perf-report-iterative-2106-2n-tx2:
 520     csit-vpp-perf-report-iterative-2101-2n-tx2:
 521       - 21  # rls2101.rel MRR iter env 6
 522
 523   vpp-2n-tx2-curr-iter-mrr:
 524     csit-vpp-perf-report-iterative-2106-2n-tx2:
 525       - 42  # rls2101.1.rel MRR iter env 7
 526
 527   vpp-2n-tx2-curr-cov:
 528     csit-vpp-perf-report-iterative-2106-2n-tx2:
 529       - 43  # rls2101.1.rel NDRPDR iter env 7
 530
 531   # 3n-dnv
 532
 533   vpp-3n-dnv-hist-iter-new-env:
 534     csit-vpp-perf-report-iterative-2009-3n-dnv:
 535       - 3   # rls2009 NDRPDR iter env 5
 536       - 6   # rls2009 NDRPDR iter env 5
 537       - 7   # rls2009 NDRPDR iter env 5
 538       - 8   # rls2009 NDRPDR iter env 5
 539       - 10  # rls2009 NDRPDR iter env 5
 540       - 11  # rls2009 NDRPDR iter env 5
 541       - 12  # rls2009 NDRPDR iter env 5
 542       - 14  # rls2009 NDRPDR iter env 5
 543       - 15  # rls2009 NDRPDR iter env 5
 544       - 24  # rls2009 NDRPDR iter env 5
 545
 546   vpp-3n-dnv-prev-iter-old-env:
 547     csit-vpp-perf-report-iterative-2101-3n-dnv:
 548       - 33  # rls2101.rel NDRPDR iter env 6
 549       - 34  # rls2101.rel NDRPDR iter env 6
 550       - 35  # rls2101.rel NDRPDR iter env 6
 551       - 36  # rls2101.rel NDRPDR iter env 6
 552       - 37  # rls2101.rel NDRPDR iter env 6
 553       - 38  # rls2101.rel NDRPDR iter env 6
 554       - 39  # rls2101.rel NDRPDR iter env 6
 555       - 40  # rls2101.rel NDRPDR iter env 6
 556       - 41  # rls2101.rel NDRPDR iter env 6
 557       - 42  # rls2101.rel NDRPDR iter env 6
 558       - 43  # rls2101.rel NDRPDR iter RND env 6
 559       - 44  # rls2101.rel NDRPDR iter RND env 6
 560       - 45  # rls2101.rel NDRPDR iter RND env 6
 561       - 46  # rls2101.rel NDRPDR iter RND env 6
 562       - 47  # rls2101.rel NDRPDR iter RND env 6
 563       - 48  # rls2101.rel NDRPDR iter RND env 6
 564       - 49  # rls2101.rel NDRPDR iter RND env 6
 565       - 50  # rls2101.rel NDRPDR iter RND env 6
 566       - 51  # rls2101.rel NDRPDR iter RND env 6
 567       - 52  # rls2101.rel NDRPDR iter RND env 6
 568
 569   vpp-3n-dnv-prev-iter-new-env:
 570     csit-vpp-perf-report-iterative-2106-3n-dnv:
 571       - 3   # rls2101.rel NDRPDR iter env 7
 572       - 4   # rls2101.rel NDRPDR iter env 7
 573       - 9   # rls2101.rel NDRPDR iter env 7
 574       - 6   # rls2101.rel NDRPDR iter env 7
 575       - 10  # rls2101.rel NDRPDR iter env 7
 576       - 8   # rls2101.rel NDRPDR iter env 7
 577       - 11  # rls2101.rel NDRPDR iter env 7
 578       - 12  # rls2101.rel NDRPDR iter env 7
 579       - 13  # rls2101.rel NDRPDR iter env 7
 580       - 14  # rls2101.rel NDRPDR iter env 7
 581
 582   vpp-3n-dnv-curr-iter:
 583     csit-vpp-perf-report-iterative-2106-3n-dnv:
 584       - 51  # rls2101.1.rel NDRPDR iter env 7
 585       - 52  # rls2101.1.rel NDRPDR iter env 7
 586       - 53  # rls2101.1.rel NDRPDR iter env 7
 587       - 54  # rls2101.1.rel NDRPDR iter env 7
 588       - 55  # rls2101.1.rel NDRPDR iter env 7
 589       - 57  # rls2101.1.rel NDRPDR iter env 7
 590       - 58  # rls2101.1.rel NDRPDR iter env 7
 591       - 59  # rls2101.1.rel NDRPDR iter env 7
 592
 593   vpp-3n-dnv-hist-iter-mrr-new-env:
 594     csit-vpp-perf-report-iterative-2009-3n-dnv:
 595       - 22  # rls2009 MRR iter env 5
 596
 597   vpp-3n-dnv-prev-iter-mrr-old-env:
 598     csit-vpp-perf-report-iterative-2101-3n-dnv:
 599       - 32  # rls2101.rel MRR iter env 6
 600
 601   vpp-3n-dnv-prev-iter-mrr-new-env:
 602     csit-vpp-perf-report-iterative-2106-3n-dnv:
 603       - 2   # rls2101.rel MRR iter env 7
 604
 605   vpp-3n-dnv-curr-iter-mrr:
 606     csit-vpp-perf-report-iterative-2106-3n-dnv:
 607       - 50  # rls2101.1.rel MRR iter env 7
 608
 609   vpp-3n-dnv-curr-cov:
 610     csit-vpp-perf-report-iterative-2106-3n-dnv:
 611       - 51  # rls2101.1.rel NDRPDR iter env 7
 612
 613   # 2n-dnv
 614
 615   vpp-2n-dnv-hist-iter-new-env:
 616     csit-vpp-perf-report-iterative-2009-2n-dnv:
 617       - 3   # rls2009 NDRPDR iter env 5
 618       - 5   # rls2009 NDRPDR iter env 5
 619       - 6   # rls2009 NDRPDR iter env 5
 620       - 7   # rls2009 NDRPDR iter env 5
 621       - 9   # rls2009 NDRPDR iter env 5
 622       - 10  # rls2009 NDRPDR iter env 5
 623       - 11  # rls2009 NDRPDR iter env 5
 624       - 12  # rls2009 NDRPDR iter env 5
 625       - 14  # rls2009 NDRPDR iter env 5
 626       - 15  # rls2009 NDRPDR iter env 5
 627
 628   vpp-2n-dnv-prev-iter-old-env:
 629     csit-vpp-perf-report-iterative-2101-2n-dnv:
 630       - 32  # rls2101.rel NDRPDR iter env 6
 631       - 33  # rls2101.rel NDRPDR iter env 6
 632       - 34  # rls2101.rel NDRPDR iter env 6
 633       - 35  # rls2101.rel NDRPDR iter env 6
 634       - 39  # rls2101.rel NDRPDR iter env 6
 635       - 41  # rls2101.rel NDRPDR iter env 6
 636       - 42  # rls2101.rel NDRPDR iter env 6
 637       - 43  # rls2101.rel NDRPDR iter env 6
 638       - 44  # rls2101.rel NDRPDR iter env 6
 639       - 45  # rls2101.rel NDRPDR iter env 6
 640       - 46  # rls2101.rel NDRPDR iter RND env 6
 641       - 47  # rls2101.rel NDRPDR iter RND env 6
 642       - 48  # rls2101.rel NDRPDR iter RND env 6
 643       - 49  # rls2101.rel NDRPDR iter RND env 6
 644       - 50  # rls2101.rel NDRPDR iter RND env 6
 645       - 51  # rls2101.rel NDRPDR iter RND env 6
 646       - 52  # rls2101.rel NDRPDR iter RND env 6
 647       - 53  # rls2101.rel NDRPDR iter RND env 6
 648       - 54  # rls2101.rel NDRPDR iter RND env 6
 649       - 55  # rls2101.rel NDRPDR iter RND env 6
 650
 651   vpp-2n-dnv-prev-iter-new-env:
 652     csit-vpp-perf-report-iterative-2106-2n-dnv:
 653       - 3   # rls2101.rel NDRPDR iter env 7
 654       - 4   # rls2101.rel NDRPDR iter env 7
 655       - 10  # rls2101.rel NDRPDR iter env 7
 656       - 6   # rls2101.rel NDRPDR iter env 7
 657       - 7   # rls2101.rel NDRPDR iter env 7
 658       - 8   # rls2101.rel NDRPDR iter env 7
 659       - 9   # rls2101.rel NDRPDR iter env 7
 660       - 11  # rls2101.rel NDRPDR iter env 7
 661       - 12  # rls2101.rel NDRPDR iter env 7
 662       - 13  # rls2101.rel NDRPDR iter env 7
 663
 664   vpp-2n-dnv-curr-iter:
 665     csit-vpp-perf-report-iterative-2106-2n-dnv:
 666       - 71  # rls2101.1.rel NDRPDR iter env 7
 667       - 73  # rls2101.1.rel NDRPDR iter env 7
 668       - 74  # rls2101.1.rel NDRPDR iter env 7
 669       - 75  # rls2101.1.rel NDRPDR iter env 7
 670       - 76  # rls2101.1.rel NDRPDR iter env 7
 671       - 77  # rls2101.1.rel NDRPDR iter env 7
 672       - 78  # rls2101.1.rel NDRPDR iter env 7
 673       - 79  # rls2101.1.rel NDRPDR iter env 7
 674       - 80  # rls2101.1.rel NDRPDR iter env 7
 675       - 81  # rls2101.1.rel NDRPDR iter env 7
 676
 677   vpp-2n-dnv-hist-iter-mrr-new-env:
 678     csit-vpp-perf-report-iterative-2009-2n-dnv:
 679       - 13  # rls2009 MRR iter env 5
 680
 681   vpp-2n-dnv-prev-iter-mrr-old-env:
 682     csit-vpp-perf-report-iterative-2101-2n-dnv:
 683       - 31  # rls2101.rel MRR iter env 6
 684
 685   vpp-2n-dnv-prev-iter-mrr-new-env:
 686     csit-vpp-perf-report-iterative-2106-2n-dnv:
 687       - 2   # rls2101.rel MRR iter env 7
 688
 689   vpp-2n-dnv-curr-iter-mrr:
 690     csit-vpp-perf-report-iterative-2106-2n-dnv:
 691       - 72  # rls2101.1.rel MRR iter env 7
 692
 693   vpp-2n-dnv-curr-cov:
 694     csit-vpp-perf-report-iterative-2106-2n-dnv:
 695       - 71  # rls2101.1.rel NDRPDR iter env 7