PAL: Refactor the processing of spec and download
[csit.git] / resources / tools / presentation / specifications / report / data_sets.yaml
1 ################################################################################
2 ###                            D A T A   S E T S                             ###
3 ################################################################################
4
5 - type: "data-sets"
6
7 ################################################################################
8 # Plots:
9
10   # 3n-hsw
11
12   plot-vpp-throughput-lat-tsa-3n-hsw:
13     csit-vpp-perf-report-iterative-2101-3n-hsw:
14       - 64  # rls2101.rel NDRPDR iter env 6
15       - 71  # rls2101.rel NDRPDR iter env 6
16       - 73  # rls2101.rel NDRPDR iter env 6
17       - 74  # rls2101.rel NDRPDR iter env 6
18       - 80  # rls2101.rel NDRPDR iter env 6
19       - 81  # rls2101.rel NDRPDR iter env 6
20       - 82  # rls2101.rel NDRPDR iter env 6
21       - 83  # rls2101.rel NDRPDR iter env 6
22       - 88  # rls2101.rel NDRPDR iter env 6
23       - 89  # rls2101.rel NDRPDR iter env 6
24       - 128 # rls2101.rel NDRPDR iter RND env 6
25       - 129 # rls2101.rel NDRPDR iter RND env 6
26       - 130 # rls2101.rel NDRPDR iter RND env 6
27       - 131 # rls2101.rel NDRPDR iter RND env 6
28       - 132 # rls2101.rel NDRPDR iter RND env 6
29       - 133 # rls2101.rel NDRPDR iter RND env 6
30       - 134 # rls2101.rel NDRPDR iter RND env 6
31       - 135 # rls2101.rel NDRPDR iter RND env 6
32       - 136 # rls2101.rel NDRPDR iter RND env 6
33       - 137 # rls2101.rel NDRPDR iter RND env 6
34
35   plot-vpp-hdrh-lat-3n-hsw:
36     csit-vpp-perf-report-iterative-2101-3n-hsw:
37       - 89  # rls2101.rel NDRPDR iter env 6
38
39   plot-vpp-hdrh-lat-3n-hsw-rnd:
40     csit-vpp-perf-report-iterative-2101-3n-hsw:
41       - 128 # rls2101.rel NDRPDR iter RND env 6
42
43   plot-vpp-ipsec-reconf-3n-hsw:
44     csit-vpp-perf-report-iterative-2101-3n-hsw:
45       - 65  # rls2101.rel NDRPDR reconf iter env 6
46       - 68  # rls2101.rel NDRPDR reconf iter env 6
47       - 77  # rls2101.rel NDRPDR reconf iter env 6
48       - 84  # rls2101.rel NDRPDR reconf iter env 6
49       - 90  # rls2101.rel NDRPDR reconf iter env 6
50       - 96  # rls2101.rel NDRPDR reconf iter env 6
51       - 101 # rls2101.rel NDRPDR reconf iter env 6
52       - 104 # rls2101.rel NDRPDR reconf iter env 6
53       - 105 # rls2101.rel NDRPDR reconf iter env 6
54       - 106 # rls2101.rel NDRPDR reconf iter env 6
55       - 107 # rls2101.rel NDRPDR reconf iter env 6
56       - 108 # rls2101.rel NDRPDR reconf iter env 6
57       - 110 # rls2101.rel NDRPDR reconf iter env 6
58       - 111 # rls2101.rel NDRPDR reconf iter env 6
59       - 112 # rls2101.rel NDRPDR reconf iter env 6
60       - 113 # rls2101.rel NDRPDR reconf iter env 6
61       - 114 # rls2101.rel NDRPDR reconf iter env 6
62       - 115 # rls2101.rel NDRPDR reconf iter env 6
63       - 116 # rls2101.rel NDRPDR reconf iter env 6
64       - 117 # rls2101.rel NDRPDR reconf iter env 6
65
66   plot-vpp-hoststack-3n-hsw:
67     csit-vpp-perf-report-iterative-2101-3n-hsw:
68       - 69  # rls2101.rel Hoststack iter env 6
69       - 70  # rls2101.rel Hoststack iter env 6
70       - 75  # rls2101.rel Hoststack iter env 6
71       - 76  # rls2101.rel Hoststack iter env 6
72       - 78  # rls2101.rel Hoststack iter env 6
73       - 79  # rls2101.rel Hoststack iter env 6
74       - 85  # rls2101.rel Hoststack iter env 6
75       - 86  # rls2101.rel Hoststack iter env 6
76       - 87  # rls2101.rel Hoststack iter env 6
77       - 91  # rls2101.rel Hoststack iter env 6
78       - 92  # rls2101.rel Hoststack iter env 6
79       - 93  # rls2101.rel Hoststack iter env 6
80       - 94  # rls2101.rel Hoststack iter env 6
81       - 95  # rls2101.rel Hoststack iter env 6
82       - 97  # rls2101.rel Hoststack iter env 6
83       - 98  # rls2101.rel Hoststack iter env 6
84       - 99  # rls2101.rel Hoststack iter env 6
85       - 100 # rls2101.rel Hoststack iter env 6
86       - 102 # rls2101.rel Hoststack iter env 6
87       - 103 # rls2101.rel Hoststack iter env 6
88
89   plot-dpdk-throughput-latency-3n-hsw:
90     csit-dpdk-perf-report-iterative-2101-3n-hsw:
91       - 11  # rls2101 NDRPDR iter env 6
92       - 12  # rls2101 NDRPDR iter env 6
93       - 13  # rls2101 NDRPDR iter env 6
94       - 14  # rls2101 NDRPDR iter env 6
95       - 16  # rls2101 NDRPDR iter env 6
96       - 17  # rls2101 NDRPDR iter env 6
97       - 18  # rls2101 NDRPDR iter env 6
98       - 19  # rls2101 NDRPDR iter env 6
99       - 20  # rls2101 NDRPDR iter env 6
100       - 21  # rls2101 NDRPDR iter env 6
101
102   plot-dpdk-hdrh-lat-3n-hsw:
103     csit-dpdk-perf-report-iterative-2101-3n-hsw:
104       - 11  # rls2101 NDRPDR iter env 6
105
106   # 3n-skx
107
108   plot-vpp-throughput-lat-tsa-3n-skx:
109     csit-vpp-perf-report-iterative-2101-3n-skx:
110       - 36  # rls2101.rel NDRPDR iter env 6
111       - 37  # rls2101.rel NDRPDR iter env 6
112       - 38  # rls2101.rel NDRPDR iter env 6
113       - 39  # rls2101.rel NDRPDR iter env 6
114       - 40  # rls2101.rel NDRPDR iter env 6
115       - 41  # rls2101.rel NDRPDR iter env 6
116       - 42  # rls2101.rel NDRPDR iter env 6
117       - 47  # rls2101.rel NDRPDR iter env 6
118       - 48  # rls2101.rel NDRPDR iter env 6
119       - 50  # rls2101.rel NDRPDR iter env 6
120
121   plot-vpp-hdrh-lat-3n-skx:
122     csit-vpp-perf-report-iterative-2101-3n-skx:
123       - 36  # rls2101.rel NDRPDR iter env 6
124
125   #  plot-vpp-nfv-3n-skx-ndrpdr:
126   #    # No data
127   #    csit-vpp-perf-report-iterative-2101-3n-skx:
128
129   #  plot-vpp-nfv-3n-skx-mrr:
130   #    # No data
131   #    csit-vpp-perf-report-iterative-2101-3n-skx:
132
133   plot-dpdk-throughput-latency-3n-skx:
134     csit-dpdk-perf-report-iterative-2101-3n-skx:
135       - 12  # rls2101 NDRPDR iter env 6
136       - 14  # rls2101 NDRPDR iter env 6
137       - 15  # rls2101 NDRPDR iter env 6
138       - 17  # rls2101 NDRPDR iter env 6
139       - 19  # rls2101 NDRPDR iter env 6
140       - 20  # rls2101 NDRPDR iter env 6
141       - 21  # rls2101 NDRPDR iter env 6
142       - 22  # rls2101 NDRPDR iter env 6
143       - 25  # rls2101 NDRPDR iter env 6
144       - 26  # rls2101 NDRPDR iter env 6
145
146   plot-dpdk-hdrh-lat-3n-skx:
147     csit-dpdk-perf-report-iterative-2101-3n-skx:
148       - 12  # rls2101 NDRPDR iter env 6
149
150   # 2n-skx
151
152   plot-vpp-throughput-lat-tsa-2n-skx:
153     csit-vpp-perf-report-iterative-2101-2n-skx:
154       - 63  # rls2101.rel NDRPDR iter env 6
155       - 69  # rls2101.rel NDRPDR iter env 6
156       - 70  # rls2101.rel NDRPDR iter env 6
157       - 75  # rls2101.rel NDRPDR iter env 6
158       - 76  # rls2101.rel NDRPDR iter env 6
159       - 77  # rls2101.rel NDRPDR iter env 6
160       - 82  # rls2101.rel NDRPDR iter env 6
161       - 85  # rls2101.rel NDRPDR iter env 6
162       - 86  # rls2101.rel NDRPDR iter env 6
163       - 94  # rls2101.rel NDRPDR iter env 6
164       - 89  # rls2101.rel NDRPDR iter RND env 6
165       - 90  # rls2101.rel NDRPDR iter RND env 6
166       - 91  # rls2101.rel NDRPDR iter RND env 6
167       - 92  # rls2101.rel NDRPDR iter RND env 6
168       - 93  # rls2101.rel NDRPDR iter RND env 6
169       - 96  # rls2101.rel NDRPDR iter RND env 6
170       - 98  # rls2101.rel NDRPDR iter RND env 6
171       - 99  # rls2101.rel NDRPDR iter RND env 6
172       - 101 # rls2101.rel NDRPDR iter RND env 6
173       - 102 # rls2101.rel NDRPDR iter RND env 6
174       - 116 # rls2101.rel NDRPDR iter NAT env 6
175       - 117 # rls2101.rel NDRPDR iter NAT env 6
176       - 118 # rls2101.rel NDRPDR iter NAT env 6
177       - 119 # rls2101.rel NDRPDR iter NAT env 6
178       - 120 # rls2101.rel NDRPDR iter NAT env 6
179       - 121 # rls2101.rel NDRPDR iter NAT env 6
180       - 122 # rls2101.rel NDRPDR iter NAT env 6
181       - 123 # rls2101.rel NDRPDR iter NAT env 6
182       - 124 # rls2101.rel NDRPDR iter NAT env 6
183       - 125 # rls2101.rel NDRPDR iter NAT env 6
184
185   plot-vpp-hdrh-lat-2n-skx:
186     csit-vpp-perf-report-iterative-2101-2n-skx:
187       - 94  # rls2101.rel NDRPDR iter env 6
188
189   plot-vpp-hdrh-lat-2n-skx-rnd:
190     csit-vpp-perf-report-iterative-2101-2n-skx:
191       - 89  # rls2101.rel NDRPDR iter RND env 6
192
193   plot-vpp-hdrh-lat-2n-skx-nat:
194     csit-vpp-perf-report-iterative-2101-2n-skx:
195       - 118 # rls2101.rel NDRPDR iter NAT env 6
196
197   plot-vpp-soak-2n-skx:
198     csit-vpp-perf-report-iterative-2101-2n-skx:
199       - 68  # rls2101.rel soak env 6
200       - 73  # rls2101.rel soak env 6
201
202   plot-vpp-nfv-2n-skx-ndrpdr:
203     csit-vpp-perf-report-iterative-2101-2n-skx:
204       - 67  # rls2101.rel NDRPDR nf-density iter env 6
205       - 72  # rls2101.rel NDRPDR nf-density iter env 6
206       - 79  # rls2101.rel NDRPDR nf-density iter env 6
207       - 83  # rls2101.rel NDRPDR nf-density iter env 6
208       - 88  # rls2101.rel NDRPDR nf-density iter env 6
209       - 97  # rls2101.rel NDRPDR nf-density iter env 6
210       - 103 # rls2101.rel NDRPDR nf-density iter env 6
211       - 108 # rls2101.rel NDRPDR nf-density iter env 6
212       - 109 # rls2101.rel NDRPDR nf-density iter env 6
213       - 110 # rls2101.rel NDRPDR nf-density iter env 6
214
215   plot-vpp-nfv-2n-skx-mrr:
216     csit-vpp-perf-report-iterative-2101-2n-skx:
217       - 65  # rls2101.rel MRR nf-density iter env 6
218
219   plot-vpp-nfv-reconf-2n-skx:
220     csit-vpp-perf-report-iterative-2101-2n-skx:
221       - 64  # rls2101.rel NDRPDR reconf iter env 6
222       - 66  # rls2101.rel NDRPDR reconf iter env 6
223       - 71  # rls2101.rel NDRPDR reconf iter env 6
224       - 74  # rls2101.rel NDRPDR reconf iter env 6
225       - 78  # rls2101.rel NDRPDR reconf iter env 6
226       - 87  # rls2101.rel NDRPDR reconf iter env 6
227       - 95  # rls2101.rel NDRPDR reconf iter env 6
228       - 100 # rls2101.rel NDRPDR reconf iter env 6
229       - 104 # rls2101.rel NDRPDR reconf iter env 6
230       - 106 # rls2101.rel NDRPDR reconf iter env 6
231
232   plot-vpp-gso-2n-skx:
233     csit-vpp-perf-report-iterative-2101-2n-skx:
234       - 129 # rls2101.rel MRR GSO iter env 6
235
236   plot-dpdk-throughput-latency-2n-skx:
237     csit-dpdk-perf-report-iterative-2101-2n-skx:
238       - 11  # rls2101 NDRPDR iter env 6
239       - 12  # rls2101 NDRPDR iter env 6
240       - 13  # rls2101 NDRPDR iter env 6
241       - 14  # rls2101 NDRPDR iter env 6
242       - 15  # rls2101 NDRPDR iter env 6
243       - 17  # rls2101 NDRPDR iter env 6
244       - 18  # rls2101 NDRPDR iter env 6
245       - 19  # rls2101 NDRPDR iter env 6
246       - 20  # rls2101 NDRPDR iter env 6
247       - 21  # rls2101 NDRPDR iter env 6
248
249   plot-dpdk-hdrh-lat-2n-skx:
250     csit-dpdk-perf-report-iterative-2101-2n-skx:
251       - 11  # rls2101 NDRPDR iter env 6
252
253   # 2n-zn2
254
255   plot-vpp-throughput-lat-tsa-2n-zn2:
256     csit-vpp-perf-report-iterative-2101-2n-zn2:
257       - 31  # rls2101.rel NDRPDR iter env 6
258       - 32  # rls2101.rel NDRPDR iter env 6
259       - 33  # rls2101.rel NDRPDR iter env 6
260       - 34  # rls2101.rel NDRPDR iter env 6
261       - 35  # rls2101.rel NDRPDR iter env 6
262       - 36  # rls2101.rel NDRPDR iter env 6
263       - 37  # rls2101.rel NDRPDR iter env 6
264       - 38  # rls2101.rel NDRPDR iter env 6
265       - 44  # rls2101.rel NDRPDR iter env 6
266       - 49  # rls2101.rel NDRPDR iter env 6
267       - 39  # rls2101.rel NDRPDR iter RND env 6
268       - 40  # rls2101.rel NDRPDR iter RND env 6
269       - 41  # rls2101.rel NDRPDR iter RND env 6
270       - 42  # rls2101.rel NDRPDR iter RND env 6
271       - 43  # rls2101.rel NDRPDR iter RND env 6
272       - 45  # rls2101.rel NDRPDR iter RND env 6
273       - 48  # rls2101.rel NDRPDR iter RND env 6
274       - 50  # rls2101.rel NDRPDR iter RND env 6
275       - 51  # rls2101.rel NDRPDR iter RND env 6
276       - 52  # rls2101.rel NDRPDR iter RND env 6
277
278   plot-vpp-hdrh-lat-2n-zn2:
279     csit-vpp-perf-report-iterative-2101-2n-zn2:
280       - 31  # rls2101.rel NDRPDR iter env 6
281
282   plot-vpp-hdrh-lat-2n-zn2-rnd:
283     csit-vpp-perf-report-iterative-2101-2n-zn2:
284       - 40  # rls2101.rel NDRPDR iter RND env 6
285
286   plot-vpp-gso-2n-zn2:
287     csit-vpp-perf-report-iterative-2101-2n-zn2:
288       - 56  # rls2101.rel MRR GSO iter env 6
289
290   plot-dpdk-throughput-latency-2n-zn2:
291     csit-dpdk-perf-report-iterative-2101-2n-zn2:
292       - 11  # rls2101 NDRPDR iter env 6
293       - 12  # rls2101 NDRPDR iter env 6
294       - 13  # rls2101 NDRPDR iter env 6
295       - 14  # rls2101 NDRPDR iter env 6
296       - 16  # rls2101 NDRPDR iter env 6
297       - 17  # rls2101 NDRPDR iter env 6
298       - 18  # rls2101 NDRPDR iter env 6
299       - 19  # rls2101 NDRPDR iter env 6
300       - 20  # rls2101 NDRPDR iter env 6
301       - 21  # rls2101 NDRPDR iter env 6
302
303   plot-dpdk-hdrh-lat-2n-zn2:
304     csit-dpdk-perf-report-iterative-2101-2n-zn2:
305       - 11  # rls2101 NDRPDR iter env 6
306
307   # 2n-clx
308
309   plot-vpp-throughput-lat-tsa-2n-clx:
310     csit-vpp-perf-report-iterative-2101-2n-clx:
311       - 54  # rls2101.rel NDRPDR iter env 6
312       - 59  # rls2101.rel NDRPDR iter env 6
313       - 60  # rls2101.rel NDRPDR iter env 6
314       - 63  # rls2101.rel NDRPDR iter env 6
315       - 66  # rls2101.rel NDRPDR iter env 6
316       - 68  # rls2101.rel NDRPDR iter env 6
317       - 73  # rls2101.rel NDRPDR iter env 6
318       - 75  # rls2101.rel NDRPDR iter env 6
319       - 86  # rls2101.rel NDRPDR iter env 6
320       - 90  # rls2101.rel NDRPDR iter env 6
321       - 80  # rls2101.rel NDRPDR iter RND env 6
322       - 87  # rls2101.rel NDRPDR iter RND env 6
323       - 91  # rls2101.rel NDRPDR iter RND env 6
324       - 92  # rls2101.rel NDRPDR iter RND env 6
325       - 93  # rls2101.rel NDRPDR iter RND env 6
326       - 94  # rls2101.rel NDRPDR iter RND env 6
327       - 95  # rls2101.rel NDRPDR iter RND env 6
328       - 100 # rls2101.rel NDRPDR iter RND env 6
329       - 106 # rls2101.rel NDRPDR iter RND env 6
330       - 108 # rls2101.rel NDRPDR iter RND env 6
331       - 112 # rls2101.rel NDRPDR iter NAT env 6
332       - 113 # rls2101.rel NDRPDR iter NAT env 6
333       - 114 # rls2101.rel NDRPDR iter NAT env 6
334       - 115 # rls2101.rel NDRPDR iter NAT env 6
335       - 116 # rls2101.rel NDRPDR iter NAT env 6
336       - 117 # rls2101.rel NDRPDR iter NAT env 6
337       - 118 # rls2101.rel NDRPDR iter NAT env 6
338       - 119 # rls2101.rel NDRPDR iter NAT env 6
339       - 120 # rls2101.rel NDRPDR iter NAT env 6
340       - 121 # rls2101.rel NDRPDR iter NAT env 6
341       - 122 # rls2101.rel NDRPDR iter MLX env 6
342       - 123 # rls2101.rel NDRPDR iter MLX env 6
343       - 124 # rls2101.rel NDRPDR iter MLX env 6
344       - 126 # rls2101.rel NDRPDR iter MLX env 6
345       - 127 # rls2101.rel NDRPDR iter MLX env 6
346       - 128 # rls2101.rel NDRPDR iter MLX env 6
347       - 129 # rls2101.rel NDRPDR iter MLX env 6
348       - 130 # rls2101.rel NDRPDR iter MLX env 6
349       - 131 # rls2101.rel NDRPDR iter MLX env 6
350       - 132 # rls2101.rel NDRPDR iter MLX env 6
351
352   plot-vpp-hdrh-lat-2n-clx:
353     csit-vpp-perf-report-iterative-2101-2n-clx:
354       - 75  # rls2101.rel NDRPDR iter env 6
355
356   plot-vpp-hdrh-lat-2n-clx-rnd:
357     csit-vpp-perf-report-iterative-2101-2n-clx:
358       - 87  # rls2101.rel NDRPDR iter RND env 6
359
360   plot-vpp-hdrh-lat-2n-clx-nat:
361     csit-vpp-perf-report-iterative-2101-2n-clx:
362       - 118 # rls2101.rel NDRPDR iter NAT env 6
363
364   plot-vpp-hdrh-lat-2n-clx-mlx:
365     csit-vpp-perf-report-iterative-2101-2n-clx:
366       - 127 # rls2101.rel NDRPDR iter MLX env 6
367
368   plot-vpp-nfv-2n-clx-ndrpdr:
369     csit-vpp-perf-report-iterative-2101-2n-clx:
370       - 57  # rls2101.rel NDRPDR nf-density iter env 6
371       - 62  # rls2101.rel NDRPDR nf-density iter env 6
372       - 70  # rls2101.rel NDRPDR nf-density iter env 6
373       - 71  # rls2101.rel NDRPDR nf-density iter env 6
374       - 82  # rls2101.rel NDRPDR nf-density iter env 6
375       - 88  # rls2101.rel NDRPDR nf-density iter env 6
376       - 89  # rls2101.rel NDRPDR nf-density iter env 6
377       - 96  # rls2101.rel NDRPDR nf-density iter env 6
378       - 97  # rls2101.rel NDRPDR nf-density iter env 6
379       - 98  # rls2101.rel NDRPDR nf-density iter env 6
380
381   plot-vpp-nfv-2n-clx-mrr:
382     csit-vpp-perf-report-iterative-2101-2n-clx:
383       - 72  # rls2101.rel MRR nf-density iter env 6
384
385   plot-vpp-nfv-reconf-2n-clx:
386     csit-vpp-perf-report-iterative-2101-2n-clx:
387       - 55  # rls2101.rel NDRPDR reconf iter env 6
388       - 64  # rls2101.rel NDRPDR reconf iter env 6
389       - 76  # rls2101.rel NDRPDR reconf iter env 6
390       - 83  # rls2101.rel NDRPDR reconf iter env 6
391       - 99  # rls2101.rel NDRPDR reconf iter env 6
392       - 101 # rls2101.rel NDRPDR reconf iter env 6
393       - 102 # rls2101.rel NDRPDR reconf iter env 6
394       - 107 # rls2101.rel NDRPDR reconf iter env 6
395       - 109 # rls2101.rel NDRPDR reconf iter env 6
396       - 110 # rls2101.rel NDRPDR reconf iter env 6
397
398   plot-vpp-soak-2n-clx:
399     csit-vpp-perf-report-iterative-2101-2n-clx:
400       - 58  # rls2101.rel soak env 6
401       - 61  # rls2101.rel soak env 6
402
403   plot-vpp-gso-2n-clx:
404     csit-vpp-perf-report-iterative-2101-2n-clx:
405       - 159 # rls2101.rel MRR GSO iter env 6
406
407   plot-dpdk-throughput-latency-2n-clx:
408     csit-dpdk-perf-report-iterative-2101-2n-clx:
409       - 12  # rls2101 NDRPDR iter env 6
410       - 13  # rls2101 NDRPDR iter env 6
411       - 14  # rls2101 NDRPDR iter env 6
412       - 18  # rls2101 NDRPDR iter env 6
413       - 22  # rls2101 NDRPDR iter env 6
414
415   plot-dpdk-hdrh-lat-2n-clx:
416     csit-dpdk-perf-report-iterative-2101-2n-clx:
417       - 12  # rls2101 NDRPDR iter env 6
418
419   #   # 2n-icx
420   #
421   #   plot-vpp-throughput-lat-tsa-2n-icx:
422   #     intel-csit-vpp-perf-report-iterative-2101-2n-icx:
423   #       - 1   # master NDRPDR iter env 6
424   #
425   #   plot-vpp-hdrh-lat-2n-icx:
426   #     intel-csit-vpp-perf-report-iterative-2101-2n-icx:
427   #       - 1   # master NDRPDR iter env 6
428
429   # 3n-tsh
430
431   plot-vpp-throughput-lat-tsa-3n-tsh:
432     csit-vpp-perf-report-iterative-2101-3n-tsh:
433       - 23  # rls2101.rel NDRPDR iter env 6
434       - 24  # rls2101.rel NDRPDR iter env 6
435       - 25  # rls2101.rel NDRPDR iter env 6
436       - 26  # rls2101.rel NDRPDR iter env 6
437       - 27  # rls2101.rel NDRPDR iter env 6
438       - 28  # rls2101.rel NDRPDR iter env 6
439       - 29  # rls2101.rel NDRPDR iter env 6
440       - 30  # rls2101.rel NDRPDR iter env 6
441       - 31  # rls2101.rel NDRPDR iter env 6
442       - 32  # rls2101.rel NDRPDR iter env 6
443
444   plot-vpp-hdrh-lat-3n-tsh:
445     csit-vpp-perf-report-iterative-2101-3n-tsh:
446       - 23  # rls2101.rel NDRPDR iter env 6
447
448   plot-dpdk-throughput-latency-3n-tsh:
449     csit-dpdk-perf-report-iterative-2101-3n-tsh:
450       - 11  # rls2101 NDRPDR iter env 6
451       - 12  # rls2101 NDRPDR iter env 6
452       - 13  # rls2101 NDRPDR iter env 6
453       - 14  # rls2101 NDRPDR iter env 6
454       - 16  # rls2101 NDRPDR iter env 6
455       - 17  # rls2101 NDRPDR iter env 6
456       - 18  # rls2101 NDRPDR iter env 6
457       - 19  # rls2101 NDRPDR iter env 6
458       - 20  # rls2101 NDRPDR iter env 6
459       - 21  # rls2101 NDRPDR iter env 6
460
461   plot-dpdk-hdrh-lat-3n-tsh:
462     csit-dpdk-perf-report-iterative-2101-3n-tsh:
463       - 21  # rls2101 NDRPDR iter env 6
464
465   # 2n-tx2
466
467   plot-vpp-throughput-lat-tsa-2n-tx2:
468     csit-vpp-perf-report-iterative-2101-2n-tx2:
469       - 22  # rls2101.rel NDRPDR iter env 6
470       - 23  # rls2101.rel NDRPDR iter env 6
471       - 24  # rls2101.rel NDRPDR iter env 6
472       - 25  # rls2101.rel NDRPDR iter env 6
473       - 26  # rls2101.rel NDRPDR iter env 6
474       - 27  # rls2101.rel NDRPDR iter env 6
475       - 28  # rls2101.rel NDRPDR iter env 6
476       - 29  # rls2101.rel NDRPDR iter env 6
477       - 30  # rls2101.rel NDRPDR iter env 6
478       - 31  # rls2101.rel NDRPDR iter env 6
479
480   plot-vpp-hdrh-lat-2n-tx2:
481     csit-vpp-perf-report-iterative-2101-2n-tx2:
482       - 29  # rls2101.rel NDRPDR iter env 6
483
484   plot-dpdk-throughput-latency-2n-tx2:
485     csit-dpdk-perf-report-iterative-2101-2n-tx2:
486       - 4   # rls2101 NDRPDR iter env 6
487       - 6   # rls2101 NDRPDR iter env 6
488       - 7   # rls2101 NDRPDR iter env 6
489       - 8   # rls2101 NDRPDR iter env 6
490       - 9   # rls2101 NDRPDR iter env 6
491       - 10  # rls2101 NDRPDR iter env 6
492       - 11  # rls2101 NDRPDR iter env 6
493       - 12  # rls2101 NDRPDR iter env 6
494       - 13  # rls2101 NDRPDR iter env 6
495       - 14  # rls2101 NDRPDR iter env 6
496
497   plot-dpdk-hdrh-lat-2n-tx2:
498     csit-dpdk-perf-report-iterative-2101-2n-tx2:
499       - 4   # rls2101 NDRPDR iter env 6
500
501   # 3n-dnv
502
503   plot-vpp-throughput-lat-tsa-3n-dnv:
504     csit-vpp-perf-report-iterative-2101-3n-dnv:
505       - 33  # rls2101.rel NDRPDR iter env 6
506       - 34  # rls2101.rel NDRPDR iter env 6
507       - 35  # rls2101.rel NDRPDR iter env 6
508       - 36  # rls2101.rel NDRPDR iter env 6
509       - 37  # rls2101.rel NDRPDR iter env 6
510       - 38  # rls2101.rel NDRPDR iter env 6
511       - 39  # rls2101.rel NDRPDR iter env 6
512       - 40  # rls2101.rel NDRPDR iter env 6
513       - 41  # rls2101.rel NDRPDR iter env 6
514       - 42  # rls2101.rel NDRPDR iter env 6
515       - 43  # rls2101.rel NDRPDR iter RND env 6
516       - 44  # rls2101.rel NDRPDR iter RND env 6
517       - 45  # rls2101.rel NDRPDR iter RND env 6
518       - 46  # rls2101.rel NDRPDR iter RND env 6
519       - 47  # rls2101.rel NDRPDR iter RND env 6
520       - 48  # rls2101.rel NDRPDR iter RND env 6
521       - 49  # rls2101.rel NDRPDR iter RND env 6
522       - 50  # rls2101.rel NDRPDR iter RND env 6
523       - 51  # rls2101.rel NDRPDR iter RND env 6
524       - 52  # rls2101.rel NDRPDR iter RND env 6
525
526   #  plot-dpdk-throughput-latency-3n-dnv:
527   #    # No data
528   #    csit-dpdk-perf-report-iterative-2009-3n-dnv:
529
530   # 2n-dnv
531
532   plot-vpp-throughput-lat-tsa-2n-dnv:
533     csit-vpp-perf-report-iterative-2101-2n-dnv:
534       - 32  # rls2101.rel NDRPDR iter env 6
535       - 33  # rls2101.rel NDRPDR iter env 6
536       - 34  # rls2101.rel NDRPDR iter env 6
537       - 35  # rls2101.rel NDRPDR iter env 6
538       - 39  # rls2101.rel NDRPDR iter env 6
539       - 41  # rls2101.rel NDRPDR iter env 6
540       - 42  # rls2101.rel NDRPDR iter env 6
541       - 43  # rls2101.rel NDRPDR iter env 6
542       - 44  # rls2101.rel NDRPDR iter env 6
543       - 45  # rls2101.rel NDRPDR iter env 6
544       - 46  # rls2101.rel NDRPDR iter RND env 6
545       - 47  # rls2101.rel NDRPDR iter RND env 6
546       - 48  # rls2101.rel NDRPDR iter RND env 6
547       - 49  # rls2101.rel NDRPDR iter RND env 6
548       - 50  # rls2101.rel NDRPDR iter RND env 6
549       - 51  # rls2101.rel NDRPDR iter RND env 6
550       - 52  # rls2101.rel NDRPDR iter RND env 6
551       - 53  # rls2101.rel NDRPDR iter RND env 6
552       - 54  # rls2101.rel NDRPDR iter RND env 6
553       - 55  # rls2101.rel NDRPDR iter RND env 6
554
555   #  plot-dpdk-throughput-latency-2n-dnv:
556   #    # No data
557   #    csit-dpdk-perf-report-iterative-2009-2n-dnv:
558
559 ################################################################################
560 # Simple tables (only one data set):
561
562   # NIC Comparisons
563
564   vpp-nic-comparison-3n-skx:
565     csit-vpp-perf-report-iterative-2101-3n-skx:
566       - 36  # rls2101.rel NDRPDR iter env 6
567       - 37  # rls2101.rel NDRPDR iter env 6
568       - 38  # rls2101.rel NDRPDR iter env 6
569       - 39  # rls2101.rel NDRPDR iter env 6
570       - 40  # rls2101.rel NDRPDR iter env 6
571       - 41  # rls2101.rel NDRPDR iter env 6
572       - 42  # rls2101.rel NDRPDR iter env 6
573       - 47  # rls2101.rel NDRPDR iter env 6
574       - 48  # rls2101.rel NDRPDR iter env 6
575       - 50  # rls2101.rel NDRPDR iter env 6
576
577   vpp-nic-comparison-2n-skx:
578     csit-vpp-perf-report-iterative-2101-2n-skx:
579       - 63  # rls2101.rel NDRPDR iter env 6
580       - 69  # rls2101.rel NDRPDR iter env 6
581       - 70  # rls2101.rel NDRPDR iter env 6
582       - 75  # rls2101.rel NDRPDR iter env 6
583       - 76  # rls2101.rel NDRPDR iter env 6
584       - 77  # rls2101.rel NDRPDR iter env 6
585       - 82  # rls2101.rel NDRPDR iter env 6
586       - 85  # rls2101.rel NDRPDR iter env 6
587       - 86  # rls2101.rel NDRPDR iter env 6
588       - 94  # rls2101.rel NDRPDR iter env 6
589       - 89  # rls2101.rel NDRPDR iter RND env 6
590       - 90  # rls2101.rel NDRPDR iter RND env 6
591       - 91  # rls2101.rel NDRPDR iter RND env 6
592       - 92  # rls2101.rel NDRPDR iter RND env 6
593       - 93  # rls2101.rel NDRPDR iter RND env 6
594       - 96  # rls2101.rel NDRPDR iter RND env 6
595       - 98  # rls2101.rel NDRPDR iter RND env 6
596       - 99  # rls2101.rel NDRPDR iter RND env 6
597       - 101 # rls2101.rel NDRPDR iter RND env 6
598       - 102 # rls2101.rel NDRPDR iter RND env 6
599       - 116 # rls2101.rel NDRPDR iter NAT env 6
600       - 117 # rls2101.rel NDRPDR iter NAT env 6
601       - 118 # rls2101.rel NDRPDR iter NAT env 6
602       - 119 # rls2101.rel NDRPDR iter NAT env 6
603       - 120 # rls2101.rel NDRPDR iter NAT env 6
604       - 121 # rls2101.rel NDRPDR iter NAT env 6
605       - 122 # rls2101.rel NDRPDR iter NAT env 6
606       - 123 # rls2101.rel NDRPDR iter NAT env 6
607       - 124 # rls2101.rel NDRPDR iter NAT env 6
608       - 125 # rls2101.rel NDRPDR iter NAT env 6
609
610   vpp-nic-comparison-3n-skx-mrr:
611     csit-vpp-perf-report-iterative-2101-3n-skx:
612       - 35  # rls2101.rel MRR iter env 6
613
614   vpp-nic-comparison-2n-skx-mrr:
615     csit-vpp-perf-report-iterative-2101-2n-skx:
616       - 62  # rls2101.rel MRR iter env 6
617
618   # Results
619
620   vpp-perf-results-3n-hsw:
621     csit-vpp-perf-report-coverage-2101-3n-hsw:
622       - 1   # rls2101.rel NDRPDR cov env 6 3n-hsw-crypto-00
623       - 2   # rls2101.rel NDRPDR cov env 6 3n-hsw-crypto-01
624       - 3   # rls2101.rel NDRPDR cov env 6 3n-hsw-crypto-02
625       - 4   # rls2101.rel NDRPDR cov env 6 3n-hsw-crypto-03
626       - 5   # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4-00
627       - 6   # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4-01
628       - 7   # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4-02
629       - 8   # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4-03
630       - 9   # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4-04
631       - 10  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4-05
632       - 11  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4-06
633       - 12  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4-07
634       - 13  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4tun-00
635       - 14  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4tun-01
636       - 15  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip4tun-02
637       - 16  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip6-00
638       - 18  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip6-01
639       - 19  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-00
640       - 20  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-01
641       - 21  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-02
642       - 22  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-03
643       - 23  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-04
644       - 24  # rls2101.rel NDRPDR cov env 6 3n-hsw-ip6tun-00
645       - 25  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-05
646       - 26  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-06
647       - 27  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-07
648       - 28  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-08
649       - 29  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-09
650       - 30  # rls2101.rel NDRPDR cov env 6 3n-hsw-l2-10
651       - 31  # rls2101.rel NDRPDR cov env 6 3n-hsw-memif-00
652       - 32  # rls2101.rel NDRPDR cov env 6 3n-hsw-srv6-00
653       - 33  # rls2101.rel NDRPDR cov env 6 3n-hsw-srv6-01
654       - 34  # rls2101.rel NDRPDR cov env 6 3n-hsw-vhost-00
655       - 35  # rls2101.rel NDRPDR cov env 6 3n-hsw-vhost-01
656       - 36  # rls2101.rel NDRPDR cov env 6 3n-hsw-vhost-02
657
658   vpp-perf-results-3n-skx:
659     csit-vpp-perf-report-coverage-2101-3n-skx:
660       - 1   # rls2101.rel NDRPDR cov env 6 3n-skx-crypto-00
661       - 2   # rls2101.rel NDRPDR cov env 6 3n-skx-crypto-01
662       - 3   # rls2101.rel NDRPDR cov env 6 3n-skx-crypto-02
663       - 4   # rls2101.rel NDRPDR cov env 6 3n-skx-crypto-03
664       - 5   # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-00
665       - 16  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-01
666       - 7   # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-02
667       - 17  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-03
668       - 18  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-04
669       - 19  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-05
670       - 20  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-06
671       - 12  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-06
672       - 13  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4tun-00
673       - 26  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4tun-01
674       - 15  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4tun-02
675       - 21  # rls2101.rel NDRPDR cov env 6 3n-skx-ip6-00
676       - 22  # rls2101.rel NDRPDR cov env 6 3n-skx-ip6-01
677       - 23  # rls2101.rel NDRPDR cov env 6 3n-skx-ip6tun-00
678       - 24  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-00
679       - 30  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-01
680       - 27  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-02
681       - 28  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-03
682       - 29  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-04
683       - 31  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-05
684       - 32  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-06
685       - 33  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-07
686       - 34  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-08
687       - 35  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-09
688       - 36  # rls2101.rel NDRPDR cov env 6 3n-skx-l2-10
689       - 37  # rls2101.rel NDRPDR cov env 6 3n-skx-memif-00
690       - 38  # rls2101.rel NDRPDR cov env 6 3n-skx-srv6-00
691       - 39  # rls2101.rel NDRPDR cov env 6 3n-skx-srv6-01
692       - 40  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-00
693       - 41  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-01
694       - 42  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-02
695       - 43  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-03
696
697   vpp-perf-results-2n-skx:
698     csit-vpp-perf-report-coverage-2101-2n-skx:
699       - 1   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-00
700       - 2   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-01
701       - 3   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-02
702       - 4   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-03
703       - 5   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-04
704       - 6   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-05
705       - 7   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-06
706       - 8   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-07
707       - 21  # rls2101.rel NDRPDR cov env 6 2n-skx-ip4tun-00
708       - 22  # rls2101.rel NDRPDR cov env 6 2n-skx-ip4tun-00
709       - 10  # rls2101.rel NDRPDR cov env 6 2n-skx-ip6-00
710       - 11  # rls2101.rel NDRPDR cov env 6 2n-skx-ip6-01
711       - 12  # rls2101.rel NDRPDR cov env 6 2n-skx-l2-00
712       - 13  # rls2101.rel NDRPDR cov env 6 2n-skx-l2-01
713       - 14  # rls2101.rel NDRPDR cov env 6 2n-skx-lb-00
714       - 15  # rls2101.rel NDRPDR cov env 6 2n-skx-memif-00
715       - 16  # rls2101.rel NDRPDR cov env 6 2n-skx-vhost-00
716       - 17  # rls2101.rel NDRPDR cov env 6 2n-skx-vhost-01
717       - 19  # rls2101.rel NDRPDR cov env 6 2n-skx-vts-00
718
719   vpp-perf-results-2n-zn2:
720     csit-vpp-perf-report-coverage-2101-2n-zn2:
721       - 1   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-00
722       - 2   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-01
723       - 3   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-02
724       - 4   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-03
725       - 5   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-04
726       - 6   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-05
727       - 17  # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4tun-00
728       - 18  # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4tun-01
729       - 8   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip6-00
730       - 9   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip6-01
731       - 10  # rls2101.rel NDRPDR cov env 6 2n-zn2-l2-00
732       - 11  # rls2101.rel NDRPDR cov env 6 2n-zn2-l2-01
733       - 12  # rls2101.rel NDRPDR cov env 6 2n-zn2-lb-00
734       - 13  # rls2101.rel NDRPDR cov env 6 2n-zn2-memif-00
735       - 14  # rls2101.rel NDRPDR cov env 6 2n-zn2-vhost-00
736       - 15  # rls2101.rel NDRPDR cov env 6 2n-zn2-vhost-00
737       - 16  # rls2101.rel NDRPDR cov env 6 2n-zn2-vts-00
738
739   vpp-perf-results-2n-clx:
740     csit-vpp-perf-report-coverage-2101-2n-clx:
741       - 1   # rls2101.rel NDRPDR cov env 6 2n-clx-ip4-00
742       - 2   # rls2101.rel NDRPDR cov env 6 2n-clx-ip4-01
743       - 3   # rls2101.rel NDRPDR cov env 6 2n-clx-ip4-02
744       - 4   # rls2101.rel NDRPDR cov env 6 2n-clx-ip4-03
745       - 5   # rls2101.rel NDRPDR cov env 6 2n-clx-ip4-04
746       - 6   # rls2101.rel NDRPDR cov env 6 2n-clx-ip4-05
747       - 7   # rls2101.rel NDRPDR cov env 6 2n-clx-ip4-06
748       - 8   # rls2101.rel NDRPDR cov env 6 2n-clx-ip4-07
749       - 19  # rls2101.rel NDRPDR cov env 6 2n-clx-ip4tun-00
750       - 20  # rls2101.rel NDRPDR cov env 6 2n-clx-ip4tun-00
751       - 10  # rls2101.rel NDRPDR cov env 6 2n-clx-ip6-00
752       - 11  # rls2101.rel NDRPDR cov env 6 2n-clx-ip6-01
753       - 12  # rls2101.rel NDRPDR cov env 6 2n-clx-l2-00
754       - 13  # rls2101.rel NDRPDR cov env 6 2n-clx-l2-01
755       - 14  # rls2101.rel NDRPDR cov env 6 2n-clx-lb-00
756       - 15  # rls2101.rel NDRPDR cov env 6 2n-clx-memif-00
757       - 16  # rls2101.rel NDRPDR cov env 6 2n-clx-vhost-00
758       - 17  # rls2101.rel NDRPDR cov env 6 2n-clx-vhost-01
759       - 18  # rls2101.rel NDRPDR cov env 6 2n-clx-vts-00
760
761   #   vpp-perf-results-2n-icx:
762   #     intel-csit-vpp-perf-report-iterative-2101-2n-icx:
763   #       - 1   # master NDRPDR iter env 6
764
765   vpp-perf-results-3n-tsh:
766     csit-vpp-perf-report-coverage-2101-3n-tsh:
767       - 1   # rls2101.rel NDRPDR cov env 6 3n-tsh-ip4-00
768       - 2   # rls2101.rel NDRPDR cov env 6 3n-tsh-ip4-01
769       - 3   # rls2101.rel NDRPDR cov env 6 3n-tsh-ip4-02
770       - 4   # rls2101.rel NDRPDR cov env 6 3n-tsh-ip4-03
771       - 5   # rls2101.rel NDRPDR cov env 6 3n-tsh-ip4tun-00
772       - 6   # rls2101.rel NDRPDR cov env 6 3n-tsh-ip4tun-01
773       - 7   # rls2101.rel NDRPDR cov env 6 3n-tsh-ip6-00
774       - 8   # rls2101.rel NDRPDR cov env 6 3n-tsh-ip6-01
775       - 9   # rls2101.rel NDRPDR cov env 6 3n-tsh-l2-00
776       - 10  # rls2101.rel NDRPDR cov env 6 3n-tsh-l2-01
777       - 11  # rls2101.rel NDRPDR cov env 6 3n-tsh-l2-02
778       - 12  # rls2101.rel NDRPDR cov env 6 3n-tsh-l2-03
779       - 13  # rls2101.rel NDRPDR cov env 6 3n-tsh-l2-04
780       - 19  # rls2101.rel NDRPDR cov env 6 3n-tsh-memif-00
781       - 15  # rls2101.rel NDRPDR cov env 6 3n-tsh-srv6-00
782       - 16  # rls2101.rel NDRPDR cov env 6 3n-tsh-srv6-01
783       - 17  # rls2101.rel NDRPDR cov env 6 3n-tsh-vhost-00
784       - 18  # rls2101.rel NDRPDR cov env 6 3n-tsh-vhost-01
785
786   vpp-perf-results-2n-tx2:
787     csit-vpp-perf-report-coverage-2101-2n-tx2:
788       - 1   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip4-00
789       - 2   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip4-01
790       - 3   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip4-02
791       - 4   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip4-03
792       - 5   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip4-04
793       - 6   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip4-05
794       - 7   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip4-06
795       - 8   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip6-00
796       - 9   # rls2101.rel NDRPDR cov env 6 2n-tx2-ip6-01
797       - 10  # rls2101.rel NDRPDR cov env 6 2n-tx2-l2-00
798       - 11  # rls2101.rel NDRPDR cov env 6 2n-tx2-l2-01
799       - 12  # rls2101.rel NDRPDR cov env 6 2n-tx2-l2-02
800       - 13  # rls2101.rel NDRPDR cov env 6 2n-tx2-l2-03
801       - 15  # rls2101.rel NDRPDR cov env 6 2n-tx2-l2-04
802
803   vpp-perf-results-3n-dnv:
804     csit-vpp-perf-report-coverage-2101-3n-dnv:
805       - 1   # rls2101.rel NDRPDR cov env 6 3n-dnv-crypto-00
806       - 2   # rls2101.rel NDRPDR cov env 6 3n-dnv-crypto-01
807       - 3   # rls2101.rel NDRPDR cov env 6 3n-dnv-ip4-00
808       - 4   # rls2101.rel NDRPDR cov env 6 3n-dnv-ip4-01
809       - 5   # rls2101.rel NDRPDR cov env 6 3n-dnv-ip4tun-00
810       - 6   # rls2101.rel NDRPDR cov env 6 3n-dnv-ip6-00
811       - 7   # rls2101.rel NDRPDR cov env 6 3n-dnv-ip6-01
812       - 8   # rls2101.rel NDRPDR cov env 6 3n-dnv-l2-00
813       - 9   # rls2101.rel NDRPDR cov env 6 3n-dnv-l2-01
814
815   vpp-perf-results-2n-dnv:
816     csit-vpp-perf-report-coverage-2101-2n-dnv:
817       - 1   # rls2101.rel NDRPDR cov env 6 3n-dnv-ip4-00
818       - 2   # rls2101.rel NDRPDR cov env 6 3n-dnv-ip4-01
819       - 3   # rls2101.rel NDRPDR cov env 6 2n-dnv-ip6-00
820       - 4   # rls2101.rel NDRPDR cov env 6 2n-dnv-ip6-01
821       - 5   # rls2101.rel NDRPDR cov env 6 2n-dnv-l2-00
822       - 6   # rls2101.rel NDRPDR cov env 6 2n-dnv-l2-01
823
824   vpp-mrr-results-3n-hsw:
825     csit-vpp-perf-report-iterative-2101-3n-hsw:
826       - 63  # rls2101.rel MRR iter env 6
827
828   vpp-mrr-results-3n-skx:
829     csit-vpp-perf-report-iterative-2101-3n-skx:
830       - 35  # rls2101.rel MRR iter env 6
831
832   vpp-mrr-results-2n-skx:
833     csit-vpp-perf-report-iterative-2101-2n-skx:
834       - 62  # rls2101.rel MRR iter env 6
835
836   vpp-mrr-results-2n-zn2:
837     csit-vpp-perf-report-iterative-2101-2n-zn2:
838       - 30  # rls2101.rel MRR iter env 6
839
840   vpp-mrr-results-2n-clx:
841     csit-vpp-perf-report-iterative-2101-2n-clx:
842       - 53  # rls2101.rel MRR iter env 6
843
844   #   vpp-mrr-results-2n-icx:
845   #     intel-csit-vpp-perf-report-iterative-2101-2n-icx:
846   #       - 1   # master NDRPDR iter env 6
847
848   vpp-mrr-results-3n-tsh:
849     csit-vpp-perf-report-iterative-2101-3n-tsh:
850       - 22  # rls2101.rel MRR iter env 6
851
852   vpp-mrr-results-2n-tx2:
853     csit-vpp-perf-report-iterative-2101-2n-tx2:
854       - 21  # rls2101.rel MRR iter env 6
855
856   vpp-mrr-results-3n-dnv:
857     csit-vpp-perf-report-iterative-2101-3n-dnv:
858       - 32  # rls2101.rel MRR iter env 6
859
860   vpp-mrr-results-2n-dnv:
861     csit-vpp-perf-report-iterative-2101-2n-dnv:
862       - 31  # rls2101.rel MRR iter env 6
863
864   vpp-device-results-ubuntu:
865     csit-vpp-device-2101-ubuntu1804-1n-skx:
866       - 358  # rls2101.rel VPP DEV env 6
867
868   dpdk-perf-results-3n-hsw:
869     csit-dpdk-perf-report-iterative-2101-3n-hsw:
870       - 11  # rls2101 NDRPDR iter env 6
871
872   dpdk-perf-results-3n-skx:
873     csit-dpdk-perf-report-iterative-2101-3n-skx:
874       - 12  # rls2101 NDRPDR iter env 6
875
876   dpdk-perf-results-2n-skx:
877     csit-dpdk-perf-report-iterative-2101-2n-skx:
878       - 11  # rls2101 NDRPDR iter env 6
879
880   dpdk-perf-results-2n-zn2:
881     csit-dpdk-perf-report-iterative-2101-2n-zn2:
882       - 11  # rls2101 NDRPDR iter env 6
883
884   dpdk-perf-results-2n-clx:
885     csit-dpdk-perf-report-iterative-2101-2n-clx:
886       - 12  # rls2101 NDRPDR iter env 6
887
888   #  dpdk-perf-results-2n-dnv:
889   #    # No data
890   #    csit-dpdk-perf-report-iterative-2009-2n-dnv:
891
892   #  dpdk-perf-results-3n-dnv:
893   #    # No data
894   #    csit-dpdk-perf-report-iterative-2009-3n-dnv:
895
896   dpdk-perf-results-3n-tsh:
897     csit-dpdk-perf-report-iterative-2101-3n-tsh:
898       - 21  # rls2101 NDRPDR iter env 6
899
900   dpdk-perf-results-2n-tx2:
901     csit-dpdk-perf-report-iterative-2101-2n-tx2:
902       - 4   # rls2101 NDRPDR iter env 6
903
904 ################################################################################
905 # Tables (more than one data set)
906
907   # Performance changes
908
909   vpp-performance-changes-3n-hsw-h1:
910     csit-vpp-perf-report-iterative-2009-3n-hsw:
911       - 9   # rls2005 NDRPDR iter env 5
912       - 10  # rls2005 NDRPDR iter env 5
913       - 11  # rls2005 NDRPDR iter env 5
914       - 12  # rls2005 NDRPDR iter env 5
915       - 13  # rls2005 NDRPDR iter env 5
916       - 14  # rls2005 NDRPDR iter env 5
917       - 15  # rls2005 NDRPDR iter env 5
918       - 16  # rls2005 NDRPDR iter env 5
919       - 17  # rls2005 NDRPDR iter env 5
920       - 19  # rls2005 NDRPDR iter env 5
921   vpp-performance-changes-3n-hsw-ref-env-old:
922     csit-vpp-perf-report-iterative-2009-3n-hsw:
923       - 21  # rls2009 NDRPDR iter env 5
924       - 22  # rls2009 NDRPDR iter env 5
925       - 24  # rls2009 NDRPDR iter env 5
926       - 25  # rls2009 NDRPDR iter env 5
927       - 26  # rls2009 NDRPDR iter env 5
928       - 27  # rls2009 NDRPDR iter env 5
929       - 28  # rls2009 NDRPDR iter env 5
930       - 29  # rls2009 NDRPDR iter env 5
931       - 30  # rls2009 NDRPDR iter env 5
932       - 31  # rls2009 NDRPDR iter env 5
933   vpp-performance-changes-3n-hsw-ref-env-new:
934     csit-vpp-perf-report-iterative-2101-3n-hsw:
935       - 19  # rls2009 NDRPDR iter env 6
936       - 20  # rls2009 NDRPDR iter env 6
937       - 21  # rls2009 NDRPDR iter env 6
938       - 22  # rls2009 NDRPDR iter env 6
939       - 23  # rls2009 NDRPDR iter env 6
940       - 24  # rls2009 NDRPDR iter env 6
941       - 25  # rls2009 NDRPDR iter env 6
942       - 26  # rls2009 NDRPDR iter env 6
943       - 27  # rls2009 NDRPDR iter env 6
944       - 28  # rls2009 NDRPDR iter env 6
945   vpp-performance-changes-3n-hsw-cmp:
946     csit-vpp-perf-report-iterative-2101-3n-hsw:
947       - 64  # rls2101.rel NDRPDR iter env 6
948       - 71  # rls2101.rel NDRPDR iter env 6
949       - 73  # rls2101.rel NDRPDR iter env 6
950       - 74  # rls2101.rel NDRPDR iter env 6
951       - 80  # rls2101.rel NDRPDR iter env 6
952       - 81  # rls2101.rel NDRPDR iter env 6
953       - 82  # rls2101.rel NDRPDR iter env 6
954       - 83  # rls2101.rel NDRPDR iter env 6
955       - 88  # rls2101.rel NDRPDR iter env 6
956       - 89  # rls2101.rel NDRPDR iter env 6
957       - 128 # rls2101.rel NDRPDR iter RND env 6
958       - 129 # rls2101.rel NDRPDR iter RND env 6
959       - 130 # rls2101.rel NDRPDR iter RND env 6
960       - 131 # rls2101.rel NDRPDR iter RND env 6
961       - 132 # rls2101.rel NDRPDR iter RND env 6
962       - 133 # rls2101.rel NDRPDR iter RND env 6
963       - 134 # rls2101.rel NDRPDR iter RND env 6
964       - 135 # rls2101.rel NDRPDR iter RND env 6
965       - 136 # rls2101.rel NDRPDR iter RND env 6
966       - 137 # rls2101.rel NDRPDR iter RND env 6
967
968   vpp-performance-changes-3n-skx-h1:
969     csit-vpp-perf-report-iterative-2009-3n-skx:
970       - 13  # rls2005 NDRPDR iter env 5
971       - 18  # rls2005 NDRPDR iter env 5
972       - 19  # rls2005 NDRPDR iter env 5
973       - 41  # rls2005 NDRPDR iter env 5
974       - 43  # rls2005 NDRPDR iter env 5
975       - 44  # rls2005 NDRPDR iter env 5
976       - 45  # rls2005 NDRPDR iter env 5
977       - 46  # rls2005 NDRPDR iter env 5
978       - 48  # rls2005 NDRPDR iter env 5
979       - 49  # rls2005 NDRPDR iter env 5
980   vpp-performance-changes-3n-skx-ref-env-old:
981     csit-vpp-perf-report-iterative-2009-3n-skx:
982       - 26  # rls2009 NDRPDR iter env 5
983       - 27  # rls2009 NDRPDR iter env 5
984       - 28  # rls2009 NDRPDR iter env 5
985       - 29  # rls2009 NDRPDR iter env 5
986       - 35  # rls2009 NDRPDR iter env 5
987       - 36  # rls2009 NDRPDR iter env 5
988       - 37  # rls2009 NDRPDR iter env 5
989       - 38  # rls2009 NDRPDR iter env 5
990       - 39  # rls2009 NDRPDR iter env 5
991       - 40  # rls2009 NDRPDR iter env 5
992   vpp-performance-changes-3n-skx-ref-env-new:
993     csit-vpp-perf-report-iterative-2101-3n-skx:
994       - 14  # rls2009 NDRPDR iter env 6
995       - 15  # rls2009 NDRPDR iter env 6
996       - 16  # rls2009 NDRPDR iter env 6
997       - 17  # rls2009 NDRPDR iter env 6
998       - 18  # rls2009 NDRPDR iter env 6
999       - 25  # rls2009 NDRPDR iter env 6
1000       - 26  # rls2009 NDRPDR iter env 6
1001       - 27  # rls2009 NDRPDR iter env 6
1002       - 29  # rls2009 NDRPDR iter env 6
1003       - 31  # rls2009 NDRPDR iter env 6
1004   vpp-performance-changes-3n-skx-cmp:
1005     csit-vpp-perf-report-iterative-2101-3n-skx:
1006       - 36  # rls2101.rel NDRPDR iter env 6
1007       - 37  # rls2101.rel NDRPDR iter env 6
1008       - 38  # rls2101.rel NDRPDR iter env 6
1009       - 39  # rls2101.rel NDRPDR iter env 6
1010       - 40  # rls2101.rel NDRPDR iter env 6
1011       - 41  # rls2101.rel NDRPDR iter env 6
1012       - 42  # rls2101.rel NDRPDR iter env 6
1013       - 47  # rls2101.rel NDRPDR iter env 6
1014       - 48  # rls2101.rel NDRPDR iter env 6
1015       - 50  # rls2101.rel NDRPDR iter env 6
1016
1017   vpp-performance-changes-2n-skx-h1:
1018     csit-vpp-perf-report-iterative-2009-2n-skx:
1019       - 13  # rls2005 NDRPDR iter env 5
1020       - 16  # rls2005 NDRPDR iter env 5
1021       - 17  # rls2005 NDRPDR iter env 5
1022       - 18  # rls2005 NDRPDR iter env 5
1023       - 19  # rls2005 NDRPDR iter env 5
1024       - 21  # rls2005 NDRPDR iter env 5
1025       - 22  # rls2005 NDRPDR iter env 5
1026       - 23  # rls2005 NDRPDR iter env 5
1027       - 24  # rls2005 NDRPDR iter env 5
1028       - 25  # rls2005 NDRPDR iter env 5
1029   vpp-performance-changes-2n-skx-ref-env-old:
1030     csit-vpp-perf-report-iterative-2009-2n-skx:
1031       - 35  # rls2009 NDRPDR iter env 5
1032       - 36  # rls2009 NDRPDR iter env 5
1033       - 37  # rls2009 NDRPDR iter env 5
1034       - 39  # rls2009 NDRPDR iter env 5
1035       - 40  # rls2009 NDRPDR iter env 5
1036       - 42  # rls2009 NDRPDR iter env 5
1037       - 43  # rls2009 NDRPDR iter env 5
1038       - 44  # rls2009 NDRPDR iter env 5
1039       - 46  # rls2009 NDRPDR iter env 5
1040       - 48  # rls2009 NDRPDR iter env 5
1041       - 110 # rls2009 NDRPDR iter NAT44 env 5
1042       - 111 # rls2009 NDRPDR iter NAT44 env 5
1043       - 112 # rls2009 NDRPDR iter NAT44 env 5
1044       - 113 # rls2009 NDRPDR iter NAT44 env 5
1045       - 114 # rls2009 NDRPDR iter NAT44 env 5
1046       - 115 # rls2009 NDRPDR iter NAT44 env 5
1047       - 116 # rls2009 NDRPDR iter NAT44 env 5
1048       - 118 # rls2009 NDRPDR iter NAT44 env 5
1049       - 119 # rls2009 NDRPDR iter NAT44 env 5
1050       - 121 # rls2009 NDRPDR iter NAT44 env 5
1051   vpp-performance-changes-2n-skx-ref-env-new:
1052     csit-vpp-perf-report-iterative-2101-2n-skx:
1053       - 22  # rls2009 NDRPDR iter env 6
1054       - 23  # rls2009 NDRPDR iter env 6
1055       - 24  # rls2009 NDRPDR iter env 6
1056       - 25  # rls2009 NDRPDR iter env 6
1057       - 26  # rls2009 NDRPDR iter env 6
1058       - 28  # rls2009 NDRPDR iter env 6
1059       - 39  # rls2009 NDRPDR iter env 6
1060       - 40  # rls2009 NDRPDR iter env 6
1061       - 41  # rls2009 NDRPDR iter env 6
1062       - 44  # rls2009 NDRPDR iter env 6
1063   vpp-performance-changes-2n-skx-cmp:
1064     csit-vpp-perf-report-iterative-2101-2n-skx:
1065       - 63  # rls2101.rel NDRPDR iter env 6
1066       - 69  # rls2101.rel NDRPDR iter env 6
1067       - 70  # rls2101.rel NDRPDR iter env 6
1068       - 75  # rls2101.rel NDRPDR iter env 6
1069       - 76  # rls2101.rel NDRPDR iter env 6
1070       - 77  # rls2101.rel NDRPDR iter env 6
1071       - 82  # rls2101.rel NDRPDR iter env 6
1072       - 85  # rls2101.rel NDRPDR iter env 6
1073       - 86  # rls2101.rel NDRPDR iter env 6
1074       - 94  # rls2101.rel NDRPDR iter env 6
1075       - 89  # rls2101.rel NDRPDR iter RND env 6
1076       - 90  # rls2101.rel NDRPDR iter RND env 6
1077       - 91  # rls2101.rel NDRPDR iter RND env 6
1078       - 92  # rls2101.rel NDRPDR iter RND env 6
1079       - 93  # rls2101.rel NDRPDR iter RND env 6
1080       - 96  # rls2101.rel NDRPDR iter RND env 6
1081       - 98  # rls2101.rel NDRPDR iter RND env 6
1082       - 99  # rls2101.rel NDRPDR iter RND env 6
1083       - 101 # rls2101.rel NDRPDR iter RND env 6
1084       - 102 # rls2101.rel NDRPDR iter RND env 6
1085       - 116 # rls2101.rel NDRPDR iter NAT env 6
1086       - 117 # rls2101.rel NDRPDR iter NAT env 6
1087       - 118 # rls2101.rel NDRPDR iter NAT env 6
1088       - 119 # rls2101.rel NDRPDR iter NAT env 6
1089       - 120 # rls2101.rel NDRPDR iter NAT env 6
1090       - 121 # rls2101.rel NDRPDR iter NAT env 6
1091       - 122 # rls2101.rel NDRPDR iter NAT env 6
1092       - 123 # rls2101.rel NDRPDR iter NAT env 6
1093       - 124 # rls2101.rel NDRPDR iter NAT env 6
1094       - 125 # rls2101.rel NDRPDR iter NAT env 6
1095
1096   vpp-performance-changes-2n-clx-h1:
1097     csit-vpp-perf-report-iterative-2009-2n-clx:
1098       - 13  # rls2005 NDRPDR iter env 5
1099       - 15  # rls2005 NDRPDR iter env 5
1100       - 17  # rls2005 NDRPDR iter env 5
1101       - 18  # rls2005 NDRPDR iter env 5
1102       - 19  # rls2005 NDRPDR iter env 5
1103       - 20  # rls2005 NDRPDR iter env 5
1104       - 21  # rls2005 NDRPDR iter env 5
1105       - 22  # rls2005 NDRPDR iter env 5
1106       - 23  # rls2005 NDRPDR iter env 5
1107       - 24  # rls2005 NDRPDR iter env 5
1108   vpp-performance-changes-2n-clx-ref-env-old:
1109     csit-vpp-perf-report-iterative-2009-2n-clx:
1110       - 36  # rls2009 NDRPDR iter env 5
1111       - 39  # rls2009 NDRPDR iter env 5
1112       - 40  # rls2009 NDRPDR iter env 5
1113       - 65  # rls2009 NDRPDR iter env 5
1114       - 66  # rls2009 NDRPDR iter env 5
1115       - 79  # rls2009 NDRPDR iter env 5
1116       - 82  # rls2009 NDRPDR iter env 5
1117       - 88  # rls2009 NDRPDR iter env 5
1118       - 89  # rls2009 NDRPDR iter env 5
1119       - 90  # rls2009 NDRPDR iter env 5
1120       - 114 # rls2009 NDRPDR iter NAT44 env 5
1121       - 115 # rls2009 NDRPDR iter NAT44 env 5
1122       - 116 # rls2009 NDRPDR iter NAT44 env 5
1123       - 117 # rls2009 NDRPDR iter NAT44 env 5
1124       - 118 # rls2009 NDRPDR iter NAT44 env 5
1125       - 119 # rls2009 NDRPDR iter NAT44 env 5
1126       - 121 # rls2009 NDRPDR iter NAT44 env 5
1127       - 122 # rls2009 NDRPDR iter NAT44 env 5
1128       - 123 # rls2009 NDRPDR iter NAT44 env 5
1129       - 126 # rls2009 NDRPDR iter NAT44 env 5
1130   vpp-performance-changes-2n-clx-ref-env-new:
1131     csit-vpp-perf-report-iterative-2101-2n-clx:
1132       - 16  # rls2009 NDRPDR iter env 6
1133       - 17  # rls2009 NDRPDR iter env 6
1134       - 18  # rls2009 NDRPDR iter env 6
1135       - 19  # rls2009 NDRPDR iter env 6
1136       - 20  # rls2009 NDRPDR iter env 6
1137       - 21  # rls2009 NDRPDR iter env 6
1138       - 32  # rls2009 NDRPDR iter env 6
1139       - 33  # rls2009 NDRPDR iter env 6
1140       - 34  # rls2009 NDRPDR iter env 6
1141       - 35  # rls2009 NDRPDR iter env 6
1142       - 146 # rls2009 NDRPDR MLX iter env 6
1143       - 147 # rls2009 NDRPDR MLX iter env 6
1144       - 148 # rls2009 NDRPDR MLX iter env 6
1145       - 149 # rls2009 NDRPDR MLX iter env 6
1146       - 150 # rls2009 NDRPDR MLX iter env 6
1147       - 151 # rls2009 NDRPDR MLX iter env 6
1148       - 152 # rls2009 NDRPDR MLX iter env 6
1149       - 153 # rls2009 NDRPDR MLX iter env 6
1150       - 154 # rls2009 NDRPDR MLX iter env 6
1151       - 155 # rls2009 NDRPDR MLX iter env 6
1152   vpp-performance-changes-2n-clx-cmp:
1153     csit-vpp-perf-report-iterative-2101-2n-clx:
1154       - 54  # rls2101.rel NDRPDR iter env 6
1155       - 59  # rls2101.rel NDRPDR iter env 6
1156       - 60  # rls2101.rel NDRPDR iter env 6
1157       - 63  # rls2101.rel NDRPDR iter env 6
1158       - 66  # rls2101.rel NDRPDR iter env 6
1159       - 68  # rls2101.rel NDRPDR iter env 6
1160       - 73  # rls2101.rel NDRPDR iter env 6
1161       - 75  # rls2101.rel NDRPDR iter env 6
1162       - 86  # rls2101.rel NDRPDR iter env 6
1163       - 90  # rls2101.rel NDRPDR iter env 6
1164       - 80  # rls2101.rel NDRPDR iter RND env 6
1165       - 87  # rls2101.rel NDRPDR iter RND env 6
1166       - 91  # rls2101.rel NDRPDR iter RND env 6
1167       - 92  # rls2101.rel NDRPDR iter RND env 6
1168       - 93  # rls2101.rel NDRPDR iter RND env 6
1169       - 94  # rls2101.rel NDRPDR iter RND env 6
1170       - 95  # rls2101.rel NDRPDR iter RND env 6
1171       - 100 # rls2101.rel NDRPDR iter RND env 6
1172       - 106 # rls2101.rel NDRPDR iter RND env 6
1173       - 108 # rls2101.rel NDRPDR iter RND env 6
1174       - 112 # rls2101.rel NDRPDR iter NAT env 6
1175       - 113 # rls2101.rel NDRPDR iter NAT env 6
1176       - 114 # rls2101.rel NDRPDR iter NAT env 6
1177       - 115 # rls2101.rel NDRPDR iter NAT env 6
1178       - 116 # rls2101.rel NDRPDR iter NAT env 6
1179       - 117 # rls2101.rel NDRPDR iter NAT env 6
1180       - 118 # rls2101.rel NDRPDR iter NAT env 6
1181       - 119 # rls2101.rel NDRPDR iter NAT env 6
1182       - 120 # rls2101.rel NDRPDR iter NAT env 6
1183       - 121 # rls2101.rel NDRPDR iter NAT env 6
1184       - 122 # rls2101.rel NDRPDR iter MLX env 6
1185       - 123 # rls2101.rel NDRPDR iter MLX env 6
1186       - 124 # rls2101.rel NDRPDR iter MLX env 6
1187       - 126 # rls2101.rel NDRPDR iter MLX env 6
1188       - 127 # rls2101.rel NDRPDR iter MLX env 6
1189       - 128 # rls2101.rel NDRPDR iter MLX env 6
1190       - 129 # rls2101.rel NDRPDR iter MLX env 6
1191       - 130 # rls2101.rel NDRPDR iter MLX env 6
1192       - 131 # rls2101.rel NDRPDR iter MLX env 6
1193       - 132 # rls2101.rel NDRPDR iter MLX env 6
1194
1195   vpp-performance-changes-2n-zn2-ref-env-old:
1196     csit-vpp-perf-report-iterative-2009-2n-zn2:
1197       - 17  # rls2009 NDRPDR iter env 5
1198       - 18  # rls2009 NDRPDR iter env 5
1199       - 31  # rls2009 NDRPDR iter env 5
1200       - 33  # rls2009 NDRPDR iter env 5
1201       - 34  # rls2009 NDRPDR iter env 5
1202   vpp-performance-changes-2n-zn2-ref-env-new:
1203     csit-vpp-perf-report-iterative-2101-2n-zn2:
1204       - 9   # rls2009 NDRPDR iter env 6
1205       - 10  # rls2009 NDRPDR iter env 6
1206       - 11  # rls2009 NDRPDR iter env 6
1207       - 12  # rls2009 NDRPDR iter env 6
1208       - 13  # rls2009 NDRPDR iter env 6
1209       - 20  # rls2009 NDRPDR iter env 6
1210       - 21  # rls2009 NDRPDR iter env 6
1211       - 22  # rls2009 NDRPDR iter env 6
1212       - 25  # rls2009 NDRPDR iter env 6
1213       - 26  # rls2009 NDRPDR iter env 6
1214   vpp-performance-changes-2n-zn2-cmp:
1215     csit-vpp-perf-report-iterative-2101-2n-zn2:
1216       - 31  # rls2101.rel NDRPDR iter env 6
1217       - 32  # rls2101.rel NDRPDR iter env 6
1218       - 33  # rls2101.rel NDRPDR iter env 6
1219       - 34  # rls2101.rel NDRPDR iter env 6
1220       - 35  # rls2101.rel NDRPDR iter env 6
1221       - 36  # rls2101.rel NDRPDR iter env 6
1222       - 37  # rls2101.rel NDRPDR iter env 6
1223       - 38  # rls2101.rel NDRPDR iter env 6
1224       - 44  # rls2101.rel NDRPDR iter env 6
1225       - 49  # rls2101.rel NDRPDR iter env 6
1226       - 39  # rls2101.rel NDRPDR iter RND env 6
1227       - 40  # rls2101.rel NDRPDR iter RND env 6
1228       - 41  # rls2101.rel NDRPDR iter RND env 6
1229       - 42  # rls2101.rel NDRPDR iter RND env 6
1230       - 43  # rls2101.rel NDRPDR iter RND env 6
1231       - 45  # rls2101.rel NDRPDR iter RND env 6
1232       - 48  # rls2101.rel NDRPDR iter RND env 6
1233       - 50  # rls2101.rel NDRPDR iter RND env 6
1234       - 51  # rls2101.rel NDRPDR iter RND env 6
1235       - 52  # rls2101.rel NDRPDR iter RND env 6
1236
1237   vpp-performance-changes-2n-dnv-h1:
1238     csit-vpp-perf-report-iterative-2009-2n-dnv:
1239       - 16  # rls2005 NDRPDR iter env 5
1240       - 17  # rls2005 NDRPDR iter env 5
1241       - 18  # rls2005 NDRPDR iter env 5
1242       - 19  # rls2005 NDRPDR iter env 5
1243       - 21  # rls2005 NDRPDR iter env 5
1244       - 24  # rls2005 NDRPDR iter env 5
1245       - 27  # rls2005 NDRPDR iter env 5
1246       - 28  # rls2005 NDRPDR iter env 5
1247       - 29  # rls2005 NDRPDR iter env 5
1248       - 30  # rls2005 NDRPDR iter env 5
1249   vpp-performance-changes-2n-dnv-ref-env-old:
1250     csit-vpp-perf-report-iterative-2009-2n-dnv:
1251       - 3   # rls2009 NDRPDR iter env 5
1252       - 5   # rls2009 NDRPDR iter env 5
1253       - 6   # rls2009 NDRPDR iter env 5
1254       - 7   # rls2009 NDRPDR iter env 5
1255       - 9   # rls2009 NDRPDR iter env 5
1256       - 10  # rls2009 NDRPDR iter env 5
1257       - 11  # rls2009 NDRPDR iter env 5
1258       - 12  # rls2009 NDRPDR iter env 5
1259       - 14  # rls2009 NDRPDR iter env 5
1260       - 15  # rls2009 NDRPDR iter env 5
1261   vpp-performance-changes-2n-dnv-ref-env-new:
1262     # TODO: Re-test in new env
1263     csit-vpp-perf-report-iterative-2009-2n-dnv:
1264       - 3   # rls2009 NDRPDR iter env 5
1265       - 5   # rls2009 NDRPDR iter env 5
1266       - 6   # rls2009 NDRPDR iter env 5
1267       - 7   # rls2009 NDRPDR iter env 5
1268       - 9   # rls2009 NDRPDR iter env 5
1269       - 10  # rls2009 NDRPDR iter env 5
1270       - 11  # rls2009 NDRPDR iter env 5
1271       - 12  # rls2009 NDRPDR iter env 5
1272       - 14  # rls2009 NDRPDR iter env 5
1273       - 15  # rls2009 NDRPDR iter env 5
1274   vpp-performance-changes-2n-dnv-cmp:
1275     csit-vpp-perf-report-iterative-2101-2n-dnv:
1276       - 32  # rls2101.rel NDRPDR iter env 6
1277       - 33  # rls2101.rel NDRPDR iter env 6
1278       - 34  # rls2101.rel NDRPDR iter env 6
1279       - 35  # rls2101.rel NDRPDR iter env 6
1280       - 39  # rls2101.rel NDRPDR iter env 6
1281       - 41  # rls2101.rel NDRPDR iter env 6
1282       - 42  # rls2101.rel NDRPDR iter env 6
1283       - 43  # rls2101.rel NDRPDR iter env 6
1284       - 44  # rls2101.rel NDRPDR iter env 6
1285       - 45  # rls2101.rel NDRPDR iter env 6
1286       - 46  # rls2101.rel NDRPDR iter RND env 6
1287       - 47  # rls2101.rel NDRPDR iter RND env 6
1288       - 48  # rls2101.rel NDRPDR iter RND env 6
1289       - 49  # rls2101.rel NDRPDR iter RND env 6
1290       - 50  # rls2101.rel NDRPDR iter RND env 6
1291       - 51  # rls2101.rel NDRPDR iter RND env 6
1292       - 52  # rls2101.rel NDRPDR iter RND env 6
1293       - 53  # rls2101.rel NDRPDR iter RND env 6
1294       - 54  # rls2101.rel NDRPDR iter RND env 6
1295       - 55  # rls2101.rel NDRPDR iter RND env 6
1296
1297   vpp-performance-changes-3n-dnv-h1:
1298     csit-vpp-perf-report-iterative-2009-3n-dnv:
1299       - 16  # rls2005 NDRPDR iter env 5
1300       - 23  # rls2005 NDRPDR iter env 5
1301       - 25  # rls2005 NDRPDR iter env 5
1302       - 26  # rls2005 NDRPDR iter env 5
1303       - 27  # rls2005 NDRPDR iter env 5
1304       - 28  # rls2005 NDRPDR iter env 5
1305       - 29  # rls2005 NDRPDR iter env 5
1306       - 30  # rls2005 NDRPDR iter env 5
1307       - 31  # rls2005 NDRPDR iter env 5
1308       - 32  # rls2005 NDRPDR iter env 5
1309   vpp-performance-changes-3n-dnv-ref-env-old:
1310     csit-vpp-perf-report-iterative-2009-3n-dnv:
1311       - 3   # rls2009 NDRPDR iter env 5
1312       - 6   # rls2009 NDRPDR iter env 5
1313       - 7   # rls2009 NDRPDR iter env 5
1314       - 8   # rls2009 NDRPDR iter env 5
1315       - 10  # rls2009 NDRPDR iter env 5
1316       - 11  # rls2009 NDRPDR iter env 5
1317       - 12  # rls2009 NDRPDR iter env 5
1318       - 14  # rls2009 NDRPDR iter env 5
1319       - 15  # rls2009 NDRPDR iter env 5
1320       - 24  # rls2009 NDRPDR iter env 5
1321   vpp-performance-changes-3n-dnv-ref-env-new:
1322     # TODO: Re-test in new env
1323     csit-vpp-perf-report-iterative-2009-3n-dnv:
1324       - 3   # rls2009 NDRPDR iter env 5
1325       - 6   # rls2009 NDRPDR iter env 5
1326       - 7   # rls2009 NDRPDR iter env 5
1327       - 8   # rls2009 NDRPDR iter env 5
1328       - 10  # rls2009 NDRPDR iter env 5
1329       - 11  # rls2009 NDRPDR iter env 5
1330       - 12  # rls2009 NDRPDR iter env 5
1331       - 14  # rls2009 NDRPDR iter env 5
1332       - 15  # rls2009 NDRPDR iter env 5
1333       - 24  # rls2009 NDRPDR iter env 5
1334   vpp-performance-changes-3n-dnv-cmp:
1335     csit-vpp-perf-report-iterative-2101-3n-dnv:
1336       - 33  # rls2101.rel NDRPDR iter env 6
1337       - 34  # rls2101.rel NDRPDR iter env 6
1338       - 35  # rls2101.rel NDRPDR iter env 6
1339       - 36  # rls2101.rel NDRPDR iter env 6
1340       - 37  # rls2101.rel NDRPDR iter env 6
1341       - 38  # rls2101.rel NDRPDR iter env 6
1342       - 39  # rls2101.rel NDRPDR iter env 6
1343       - 40  # rls2101.rel NDRPDR iter env 6
1344       - 41  # rls2101.rel NDRPDR iter env 6
1345       - 42  # rls2101.rel NDRPDR iter env 6
1346       - 43  # rls2101.rel NDRPDR iter RND env 6
1347       - 44  # rls2101.rel NDRPDR iter RND env 6
1348       - 45  # rls2101.rel NDRPDR iter RND env 6
1349       - 46  # rls2101.rel NDRPDR iter RND env 6
1350       - 47  # rls2101.rel NDRPDR iter RND env 6
1351       - 48  # rls2101.rel NDRPDR iter RND env 6
1352       - 49  # rls2101.rel NDRPDR iter RND env 6
1353       - 50  # rls2101.rel NDRPDR iter RND env 6
1354       - 51  # rls2101.rel NDRPDR iter RND env 6
1355       - 52  # rls2101.rel NDRPDR iter RND env 6
1356
1357   vpp-performance-changes-3n-tsh-h1:
1358     csit-vpp-perf-report-iterative-2009-3n-tsh:
1359       - 8   # rls2005 NDRPDR iter env 5
1360       - 11  # rls2005 NDRPDR iter env 5
1361       - 12  # rls2005 NDRPDR iter env 5
1362       - 24  # rls2005 NDRPDR iter env 5
1363       - 27  # rls2005 NDRPDR iter env 5
1364       - 29  # rls2005 NDRPDR iter env 5
1365       - 31  # rls2005 NDRPDR iter env 5
1366       - 39  # rls2005 NDRPDR iter env 5
1367       - 40  # rls2005 NDRPDR iter env 5
1368       - 42  # rls2005 NDRPDR iter env 5
1369   vpp-performance-changes-3n-tsh-ref-env-old:
1370     csit-vpp-perf-report-iterative-2009-3n-tsh:
1371       - 14  # rls2009 NDRPDR iter env 5
1372       - 20  # rls2009 NDRPDR iter env 5
1373       - 21  # rls2009 NDRPDR iter env 5
1374       - 22  # rls2009 NDRPDR iter env 5
1375       - 23  # rls2009 NDRPDR iter env 5
1376       - 28  # rls2009 NDRPDR iter env 5
1377       - 30  # rls2009 NDRPDR iter env 5
1378       - 33  # rls2009 NDRPDR iter env 5
1379       - 38  # rls2009 NDRPDR iter env 5
1380       - 41  # rls2009 NDRPDR iter env 5
1381   vpp-performance-changes-3n-tsh-ref-env-new:
1382     csit-vpp-perf-report-iterative-2101-3n-tsh:
1383       - 8   # rls2009 NDRPDR iter env 6
1384       - 13  # rls2009 NDRPDR iter env 6
1385       - 14  # rls2009 NDRPDR iter env 6
1386       - 15  # rls2009 NDRPDR iter env 6
1387       - 16  # rls2009 NDRPDR iter env 6
1388       - 17  # rls2009 NDRPDR iter env 6
1389       - 18  # rls2009 NDRPDR iter env 6
1390       - 19  # rls2009 NDRPDR iter env 6
1391       - 21  # rls2009 NDRPDR iter env 6
1392   vpp-performance-changes-3n-tsh-cmp:
1393     csit-vpp-perf-report-iterative-2101-3n-tsh:
1394       - 23  # rls2101.rel NDRPDR iter env 6
1395       - 24  # rls2101.rel NDRPDR iter env 6
1396       - 25  # rls2101.rel NDRPDR iter env 6
1397       - 26  # rls2101.rel NDRPDR iter env 6
1398       - 27  # rls2101.rel NDRPDR iter env 6
1399       - 28  # rls2101.rel NDRPDR iter env 6
1400       - 29  # rls2101.rel NDRPDR iter env 6
1401       - 30  # rls2101.rel NDRPDR iter env 6
1402       - 31  # rls2101.rel NDRPDR iter env 6
1403       - 32  # rls2101.rel NDRPDR iter env 6
1404
1405   #   vpp-performance-changes-2n-tx2-h1:
1406   #     csit-vpp-perf-report-iterative-2009-2n-tx2:
1407   #       -
1408   #   vpp-performance-changes-2n-tx2-ref-env-old:
1409   #     csit-vpp-perf-report-iterative-2009-2n-tx2:
1410   #       -
1411   vpp-performance-changes-2n-tx2-ref-env-new:
1412     csit-vpp-perf-report-iterative-2101-2n-tx2:
1413       - 6   # rls2009 NDRPDR iter env 6
1414       - 7   # rls2009 NDRPDR iter env 6
1415       - 11  # rls2009 NDRPDR iter env 6
1416       - 12  # rls2009 NDRPDR iter env 6
1417       - 13  # rls2009 NDRPDR iter env 6
1418       - 16  # rls2009 NDRPDR iter env 6
1419       - 17  # rls2009 NDRPDR iter env 6
1420       - 18  # rls2009 NDRPDR iter env 6
1421       - 19  # rls2009 NDRPDR iter env 6
1422       - 20  # rls2009 NDRPDR iter env 6
1423   vpp-performance-changes-2n-tx2-cmp:
1424     csit-vpp-perf-report-iterative-2101-2n-tx2:
1425       - 22  # rls2101.rel NDRPDR iter env 6
1426       - 23  # rls2101.rel NDRPDR iter env 6
1427       - 24  # rls2101.rel NDRPDR iter env 6
1428       - 25  # rls2101.rel NDRPDR iter env 6
1429       - 26  # rls2101.rel NDRPDR iter env 6
1430       - 27  # rls2101.rel NDRPDR iter env 6
1431       - 28  # rls2101.rel NDRPDR iter env 6
1432       - 29  # rls2101.rel NDRPDR iter env 6
1433       - 30  # rls2101.rel NDRPDR iter env 6
1434       - 31  # rls2101.rel NDRPDR iter env 6
1435
1436   vpp-soak-vs-ndr-2n-skx-ref:
1437     csit-vpp-perf-report-iterative-2101-2n-skx:
1438       - 63  # rls2101.rel NDRPDR iter env 6
1439       - 69  # rls2101.rel NDRPDR iter env 6
1440       - 70  # rls2101.rel NDRPDR iter env 6
1441       - 75  # rls2101.rel NDRPDR iter env 6
1442       - 76  # rls2101.rel NDRPDR iter env 6
1443       - 77  # rls2101.rel NDRPDR iter env 6
1444       - 82  # rls2101.rel NDRPDR iter env 6
1445       - 85  # rls2101.rel NDRPDR iter env 6
1446       - 86  # rls2101.rel NDRPDR iter env 6
1447       - 94  # rls2101.rel NDRPDR iter env 6
1448   vpp-soak-vs-ndr-2n-skx-cmp:
1449     csit-vpp-perf-report-iterative-2101-2n-skx:
1450       - 68  # rls2101.rel soak env 6
1451       - 73  # rls2101.rel soak env 6
1452   vpp-soak-vs-ndr-2n-skx:
1453     csit-vpp-perf-report-iterative-2101-2n-skx:
1454       - 63  # rls2101.rel NDRPDR iter env 6
1455       - 69  # rls2101.rel NDRPDR iter env 6
1456       - 70  # rls2101.rel NDRPDR iter env 6
1457       - 75  # rls2101.rel NDRPDR iter env 6
1458       - 76  # rls2101.rel NDRPDR iter env 6
1459       - 77  # rls2101.rel NDRPDR iter env 6
1460       - 82  # rls2101.rel NDRPDR iter env 6
1461       - 85  # rls2101.rel NDRPDR iter env 6
1462       - 86  # rls2101.rel NDRPDR iter env 6
1463       - 94  # rls2101.rel NDRPDR iter env 6
1464       - 68  # rls2101.rel soak env 6
1465       - 73  # rls2101.rel soak env 6
1466
1467   vpp-soak-vs-ndr-2n-clx-ref:
1468     csit-vpp-perf-report-iterative-2101-2n-clx:
1469       - 54  # rls2101.rel NDRPDR iter env 6
1470       - 59  # rls2101.rel NDRPDR iter env 6
1471       - 60  # rls2101.rel NDRPDR iter env 6
1472       - 63  # rls2101.rel NDRPDR iter env 6
1473       - 66  # rls2101.rel NDRPDR iter env 6
1474       - 68  # rls2101.rel NDRPDR iter env 6
1475       - 73  # rls2101.rel NDRPDR iter env 6
1476       - 75  # rls2101.rel NDRPDR iter env 6
1477       - 86  # rls2101.rel NDRPDR iter env 6
1478       - 90  # rls2101.rel NDRPDR iter env 6
1479   vpp-soak-vs-ndr-2n-clx-cmp:
1480     csit-vpp-perf-report-iterative-2101-2n-clx:
1481       - 58  # rls2101.rel soak env 6
1482       - 61  # rls2101.rel soak env 6
1483   vpp-soak-vs-ndr-2n-clx:
1484     csit-vpp-perf-report-iterative-2101-2n-clx:
1485       - 54  # rls2101.rel NDRPDR iter env 6
1486       - 59  # rls2101.rel NDRPDR iter env 6
1487       - 60  # rls2101.rel NDRPDR iter env 6
1488       - 63  # rls2101.rel NDRPDR iter env 6
1489       - 66  # rls2101.rel NDRPDR iter env 6
1490       - 68  # rls2101.rel NDRPDR iter env 6
1491       - 73  # rls2101.rel NDRPDR iter env 6
1492       - 75  # rls2101.rel NDRPDR iter env 6
1493       - 86  # rls2101.rel NDRPDR iter env 6
1494       - 90  # rls2101.rel NDRPDR iter env 6
1495       - 58  # rls2101.rel soak env 6
1496       - 61  # rls2101.rel soak env 6
1497
1498   vpp-performance-changes-3n-hsw-mrr-h1:
1499     csit-vpp-perf-report-iterative-2009-3n-hsw:
1500       - 18  # rls2005 MRR iter env 5
1501   vpp-performance-changes-3n-hsw-mrr-ref-env-old:
1502     csit-vpp-perf-report-iterative-2009-3n-hsw:
1503       - 23  # rls2009 MRR iter env 5
1504   vpp-performance-changes-3n-hsw-mrr-ref-env-new:
1505     csit-vpp-perf-report-iterative-2101-3n-hsw:
1506       - 17  # rls2009 MRR iter env 6
1507   vpp-performance-changes-3n-hsw-mrr-cmp:
1508     csit-vpp-perf-report-iterative-2101-3n-hsw:
1509       - 63  # rls2101.rel MRR iter env 6
1510
1511   vpp-performance-changes-3n-skx-mrr-h1:
1512     csit-vpp-perf-report-iterative-2009-3n-skx:
1513       - 17  # rls2005 MRR iter env 5
1514   vpp-performance-changes-3n-skx-mrr-ref-env-old:
1515     csit-vpp-perf-report-iterative-2009-3n-skx:
1516       - 24  # rls2009 MRR iter env 5
1517   vpp-performance-changes-3n-skx-mrr-ref-env-new:
1518     csit-vpp-perf-report-iterative-2101-3n-skx:
1519       - 34  # rls2009 MRR iter env 6
1520   vpp-performance-changes-3n-skx-mrr-cmp:
1521     csit-vpp-perf-report-iterative-2101-3n-skx:
1522       - 35  # rls2101.rel MRR iter env 6
1523
1524   vpp-performance-changes-2n-skx-mrr-h1:
1525     csit-vpp-perf-report-iterative-2009-2n-skx:
1526       - 20  # rls2005 MRR iter env 5
1527   vpp-performance-changes-2n-skx-mrr-ref-env-old:
1528     csit-vpp-perf-report-iterative-2009-2n-skx:
1529       - 120 # rls2009 MRR iter env 5
1530   vpp-performance-changes-2n-skx-mrr-ref-env-new:
1531     csit-vpp-perf-report-iterative-2101-2n-skx:
1532       - 21  # rls2009 MRR iter env 6
1533   vpp-performance-changes-2n-skx-mrr-cmp:
1534     csit-vpp-perf-report-iterative-2101-2n-skx:
1535       - 62  # rls2101.rel MRR iter env 6
1536
1537   vpp-performance-changes-2n-clx-mrr-h1:
1538     csit-vpp-perf-report-iterative-2009-2n-clx:
1539       - 77  # rls2005 MRR iter env 5
1540   vpp-performance-changes-2n-clx-mrr-ref-env-old:
1541     csit-vpp-perf-report-iterative-2009-2n-clx:
1542       - 125 # rls2009 MRR iter env 5
1543   vpp-performance-changes-2n-clx-mrr-ref-env-new:
1544     csit-vpp-perf-report-iterative-2101-2n-clx:
1545       - 15  # rls2009 MRR iter env 6
1546       - 142 # rls2009 MRR MLX iter env 6
1547   vpp-performance-changes-2n-clx-mrr-cmp:
1548     csit-vpp-perf-report-iterative-2101-2n-clx:
1549       - 53  # rls2101.rel MRR iter env 6
1550       - 133 # rls2101.rel MRR MLX iter env 6
1551
1552   vpp-performance-changes-2n-zn2-mrr-ref-env-old:
1553     csit-vpp-perf-report-iterative-2009-2n-zn2:
1554       - 15  # rls2009 MRR iter env 5
1555   vpp-performance-changes-2n-zn2-mrr-ref-env-new:
1556     csit-vpp-perf-report-iterative-2101-2n-zn2:
1557       - 8   # rls2009 MRR iter env6
1558   vpp-performance-changes-2n-zn2-mrr-cmp:
1559     csit-vpp-perf-report-iterative-2101-2n-zn2:
1560       - 30  # rls2101.rel MRR iter env 6
1561
1562   vpp-performance-changes-2n-dnv-mrr-h1:
1563     csit-vpp-perf-report-iterative-2009-2n-dnv:
1564       - 23  # rls2005 MRR iter env 5
1565   vpp-performance-changes-2n-dnv-mrr-ref-env-old:
1566     csit-vpp-perf-report-iterative-2009-2n-dnv:
1567       - 13  # rls2009 MRR iter env 5
1568   vpp-performance-changes-2n-dnv-mrr-ref-env-new:
1569     # TODO: Re-test in new env
1570     csit-vpp-perf-report-iterative-2009-2n-dnv:
1571       - 13  # rls2009 MRR iter env 5
1572   vpp-performance-changes-2n-dnv-mrr-cmp:
1573     csit-vpp-perf-report-iterative-2101-2n-dnv:
1574       - 31  # rls2101.rel MRR iter env 6
1575
1576   vpp-performance-changes-3n-dnv-mrr-h1:
1577     csit-vpp-perf-report-iterative-2009-3n-dnv:
1578       - 19  # rls2005 MRR iter env 5
1579   vpp-performance-changes-3n-dnv-mrr-ref-env-old:
1580     csit-vpp-perf-report-iterative-2009-3n-dnv:
1581       - 22  # rls2009 MRR iter env 5
1582   vpp-performance-changes-3n-dnv-mrr-ref-env-new:
1583     # TODO: Re-test in new env
1584     csit-vpp-perf-report-iterative-2009-3n-dnv:
1585       - 22  # rls2009 MRR iter env 5
1586   vpp-performance-changes-3n-dnv-mrr-cmp:
1587     csit-vpp-perf-report-iterative-2101-3n-dnv:
1588       - 32  # rls2101.rel MRR iter env 6
1589
1590   vpp-performance-changes-3n-tsh-mrr-h1:
1591     csit-vpp-perf-report-iterative-2009-3n-tsh:
1592       - 13  # rls2005 MRR iter env 5
1593   vpp-performance-changes-3n-tsh-mrr-ref-env-old:
1594     csit-vpp-perf-report-iterative-2009-3n-tsh:
1595       - 15  # rls2009 MRR iter env 5
1596   vpp-performance-changes-3n-tsh-mrr-ref-env-new:
1597     csit-vpp-perf-report-iterative-2101-3n-tsh:
1598       - 7   # rls2009 MRR iter env 6
1599   vpp-performance-changes-3n-tsh-mrr-cmp:
1600     csit-vpp-perf-report-iterative-2101-3n-tsh:
1601       - 22  # rls2101.rel MRR iter env 6
1602
1603   #   vpp-performance-changes-2n-tx2-mrr-h1:
1604   #     csit-vpp-perf-report-iterative-2009-2n-tx2:
1605   #       -
1606   #   vpp-performance-changes-2n-tx2-mrr-ref-env-old:
1607   #     csit-vpp-perf-report-iterative-2009-2n-tx2:
1608   #       -
1609   vpp-performance-changes-2n-tx2-mrr-ref-env-new:
1610     csit-vpp-perf-report-iterative-2101-2n-tx2:
1611       - 5   # rls2009 MRR iter env 6
1612   vpp-performance-changes-2n-tx2-mrr-cmp:
1613     csit-vpp-perf-report-iterative-2101-2n-tx2:
1614       - 21  # rls2101.rel MRR iter env 6
1615
1616   dpdk-performance-changes-3n-hsw-h1:
1617     csit-dpdk-perf-report-iterative-2005-3n-hsw:
1618       - 25  # NDRPDR iter
1619       - 26  # NDRPDR iter
1620       - 27  # NDRPDR iter
1621       - 28  # NDRPDR iter
1622       - 29  # NDRPDR iter
1623       - 30  # NDRPDR iter
1624       - 31  # NDRPDR iter
1625       - 32  # NDRPDR iter
1626       - 33  # NDRPDR iter
1627       - 34  # NDRPDR iter
1628   dpdk-performance-changes-3n-hsw-ref:
1629     csit-dpdk-perf-report-iterative-2009-3n-hsw:
1630       - 6   # NDRPDR iter env5
1631       - 7   # NDRPDR iter env5
1632       - 8   # NDRPDR iter env5
1633       - 9   # NDRPDR iter env5
1634       - 10  # NDRPDR iter env5
1635       - 11  # NDRPDR iter env5
1636       - 12  # NDRPDR iter env5
1637       - 13  # NDRPDR iter env5
1638       - 14  # NDRPDR iter env5
1639       - 15  # NDRPDR iter env5
1640   dpdk-performance-changes-3n-hsw-cmp:
1641     csit-dpdk-perf-report-iterative-2101-3n-hsw:
1642       - 11  # rls2101 NDRPDR iter env 6
1643       - 12  # rls2101 NDRPDR iter env 6
1644       - 13  # rls2101 NDRPDR iter env 6
1645       - 14  # rls2101 NDRPDR iter env 6
1646       - 16  # rls2101 NDRPDR iter env 6
1647       - 17  # rls2101 NDRPDR iter env 6
1648       - 18  # rls2101 NDRPDR iter env 6
1649       - 19  # rls2101 NDRPDR iter env 6
1650       - 20  # rls2101 NDRPDR iter env 6
1651       - 21  # rls2101 NDRPDR iter env 6
1652
1653   dpdk-performance-changes-3n-skx-h1:
1654     csit-dpdk-perf-report-iterative-2005-3n-skx:
1655       - 28  # NDRPDR iter
1656       - 29  # NDRPDR iter
1657       - 30  # NDRPDR iter
1658       - 31  # NDRPDR iter
1659       - 32  # NDRPDR iter
1660       - 33  # NDRPDR iter
1661       - 34  # NDRPDR iter
1662       - 35  # NDRPDR iter
1663       - 36  # NDRPDR iter
1664       - 37  # NDRPDR iter
1665   dpdk-performance-changes-3n-skx-ref:
1666     csit-dpdk-perf-report-iterative-2009-3n-skx:
1667       - 4   # NDRPDR sel env5
1668       - 5   # NDRPDR sel env5
1669       - 6   # NDRPDR sel env5
1670       - 7   # NDRPDR sel env5
1671       - 8   # NDRPDR sel env5
1672       - 9   # NDRPDR sel env5
1673       - 14  # NDRPDR sel env5
1674       - 11  # NDRPDR sel env5
1675       - 12  # NDRPDR sel env5
1676       - 13  # NDRPDR sel env5
1677   dpdk-performance-changes-3n-skx-cmp:
1678     csit-dpdk-perf-report-iterative-2101-3n-skx:
1679       - 12  # rls2101 NDRPDR iter env 6
1680       - 14  # rls2101 NDRPDR iter env 6
1681       - 15  # rls2101 NDRPDR iter env 6
1682       - 17  # rls2101 NDRPDR iter env 6
1683       - 19  # rls2101 NDRPDR iter env 6
1684       - 20  # rls2101 NDRPDR iter env 6
1685       - 21  # rls2101 NDRPDR iter env 6
1686       - 22  # rls2101 NDRPDR iter env 6
1687       - 25  # rls2101 NDRPDR iter env 6
1688       - 26  # rls2101 NDRPDR iter env 6
1689
1690   dpdk-performance-changes-2n-skx-h1:
1691     csit-dpdk-perf-report-iterative-2005-2n-skx:
1692       - 20  # NDRPDR iter
1693       - 21  # NDRPDR iter
1694       - 22  # NDRPDR iter
1695       - 23  # NDRPDR iter
1696       - 24  # NDRPDR iter
1697       - 25  # NDRPDR iter
1698       - 26  # NDRPDR iter
1699       - 27  # NDRPDR iter
1700       - 28  # NDRPDR iter
1701       - 29  # NDRPDR iter
1702   dpdk-performance-changes-2n-skx-ref:
1703     csit-dpdk-perf-report-iterative-2009-2n-skx:
1704       - 4   # NDRPDR iter env5
1705       - 5   # NDRPDR iter env5
1706       - 6   # NDRPDR iter env5
1707       - 7   # NDRPDR iter env5
1708       - 8   # NDRPDR iter env5
1709       - 9   # NDRPDR iter env5
1710       - 10  # NDRPDR iter env5
1711       - 11  # NDRPDR iter env5
1712       - 12  # NDRPDR iter env5
1713       - 13  # NDRPDR iter env5
1714   dpdk-performance-changes-2n-skx-cmp:
1715     csit-dpdk-perf-report-iterative-2101-2n-skx:
1716       - 11  # rls2101 NDRPDR iter env 6
1717       - 12  # rls2101 NDRPDR iter env 6
1718       - 13  # rls2101 NDRPDR iter env 6
1719       - 14  # rls2101 NDRPDR iter env 6
1720       - 15  # rls2101 NDRPDR iter env 6
1721       - 17  # rls2101 NDRPDR iter env 6
1722       - 18  # rls2101 NDRPDR iter env 6
1723       - 19  # rls2101 NDRPDR iter env 6
1724       - 20  # rls2101 NDRPDR iter env 6
1725       - 21  # rls2101 NDRPDR iter env 6
1726
1727   dpdk-performance-changes-2n-clx-h1:
1728     csit-dpdk-perf-report-iterative-2005-2n-clx:
1729       - 20  # NDRPDR iter
1730       - 21  # NDRPDR iter
1731       - 22  # NDRPDR iter
1732       - 23  # NDRPDR iter
1733       - 24  # NDRPDR iter
1734       - 25  # NDRPDR iter
1735       - 26  # NDRPDR iter
1736       - 27  # NDRPDR iter
1737       - 28  # NDRPDR iter
1738       - 29  # NDRPDR iter
1739   dpdk-performance-changes-2n-clx-ref:
1740     csit-dpdk-perf-report-iterative-2009-2n-clx:
1741       - 4   # NDRPDR iter env5
1742       - 5   # NDRPDR iter env5
1743       - 6   # NDRPDR iter env5
1744       - 7   # NDRPDR iter env5
1745       - 8   # NDRPDR iter env5
1746       - 9   # NDRPDR iter env5
1747       - 10  # NDRPDR iter env5
1748       - 11  # NDRPDR iter env5
1749       - 12  # NDRPDR iter env5
1750       - 13  # NDRPDR iter env5
1751   dpdk-performance-changes-2n-clx-cmp:
1752     csit-dpdk-perf-report-iterative-2101-2n-clx:
1753       - 12  # rls2101 NDRPDR iter env 6
1754       - 13  # rls2101 NDRPDR iter env 6
1755       - 14  # rls2101 NDRPDR iter env 6
1756       - 18  # rls2101 NDRPDR iter env 6
1757       - 22  # rls2101 NDRPDR iter env 6
1758
1759   dpdk-performance-changes-2n-zn2-ref:
1760     csit-dpdk-perf-report-iterative-2009-2n-zn2:
1761       - 16  # NDRPDR iter env5
1762       - 21  # NDRPDR iter env5
1763       - 22  # NDRPDR iter env5
1764       - 23  # NDRPDR iter env5
1765       - 24  # NDRPDR iter env5
1766       - 25  # NDRPDR iter env5
1767       - 29  # NDRPDR iter env5
1768   dpdk-performance-changes-2n-zn2-cmp:
1769     csit-dpdk-perf-report-iterative-2101-2n-zn2:
1770       - 11  # rls2101 NDRPDR iter env 6
1771       - 12  # rls2101 NDRPDR iter env 6
1772       - 13  # rls2101 NDRPDR iter env 6
1773       - 14  # rls2101 NDRPDR iter env 6
1774       - 16  # rls2101 NDRPDR iter env 6
1775       - 17  # rls2101 NDRPDR iter env 6
1776       - 18  # rls2101 NDRPDR iter env 6
1777       - 19  # rls2101 NDRPDR iter env 6
1778       - 20  # rls2101 NDRPDR iter env 6
1779       - 21  # rls2101 NDRPDR iter env 6
1780
1781   #  dpdk-performance-changes-2n-dnv-h1:
1782   #    csit-dpdk-perf-verify-2101-2n-dnv:
1783   #      - 9   # NDRPDR sel
1784   #      - 10  # NDRPDR sel
1785   #      - 11  # NDRPDR sel
1786   #      - 12  # NDRPDR sel
1787   #      - 13  # NDRPDR sel
1788   #      - 14  # NDRPDR sel
1789   #      - 15  # NDRPDR sel
1790   #      - 16  # NDRPDR sel
1791   #      - 17  # NDRPDR sel
1792   #      - 18  # NDRPDR sel
1793   #  dpdk-performance-changes-2n-dnv-ref:
1794   #    # No data
1795   #  dpdk-performance-changes-2n-dnv-cmp:
1796   #    # No data
1797   #    csit-dpdk-perf-report-iterative-2009-2n-dnv:
1798
1799   #  dpdk-performance-changes-3n-dnv-h1:
1800   #    csit-dpdk-perf-verify-2101-3n-dnv:
1801   #      - 12  # NDRPDR sel
1802   #      - 13  # NDRPDR sel
1803   #      - 14  # NDRPDR sel
1804   #      - 15  # NDRPDR sel
1805   #      - 16  # NDRPDR sel
1806   #      - 17  # NDRPDR sel
1807   #      - 18  # NDRPDR sel
1808   #      - 19  # NDRPDR sel
1809   #      - 20  # NDRPDR sel
1810   #      - 22  # NDRPDR sel
1811   #  dpdk-performance-changes-3n-dnv-ref:
1812   #    # No data
1813   #  dpdk-performance-changes-3n-dnv-cmp:
1814   #    # No data
1815   #    csit-dpdk-perf-report-iterative-2009-3n-dnv:
1816
1817   dpdk-performance-changes-3n-tsh-h1:
1818     csit-dpdk-perf-report-iterative-2005-3n-tsh:
1819       - 5   # NDRPDR sel
1820   dpdk-performance-changes-3n-tsh-ref:
1821     csit-dpdk-perf-report-iterative-2009-3n-tsh:
1822       - 1   # NDRPDR iter env5
1823       - 2   # NDRPDR iter env5
1824       - 3   # NDRPDR iter env5
1825       - 4   # NDRPDR iter env5
1826       - 5   # NDRPDR iter env5
1827       - 6   # NDRPDR iter env5
1828       - 7   # NDRPDR iter env5
1829       - 9   # NDRPDR iter env5
1830       - 10  # NDRPDR iter env5
1831       - 11  # NDRPDR iter env5
1832   dpdk-performance-changes-3n-tsh-cmp:
1833     csit-dpdk-perf-report-iterative-2101-3n-tsh:
1834       - 11  # rls2101 NDRPDR iter env 6
1835       - 12  # rls2101 NDRPDR iter env 6
1836       - 13  # rls2101 NDRPDR iter env 6
1837       - 14  # rls2101 NDRPDR iter env 6
1838       - 16  # rls2101 NDRPDR iter env 6
1839       - 17  # rls2101 NDRPDR iter env 6
1840       - 18  # rls2101 NDRPDR iter env 6
1841       - 19  # rls2101 NDRPDR iter env 6
1842       - 20  # rls2101 NDRPDR iter env 6
1843       - 21  # rls2101 NDRPDR iter env 6
1844
1845   # Compare testbeds
1846
1847   vpp-compare-testbeds-ref:
1848     csit-vpp-perf-report-iterative-2101-3n-hsw:
1849       - 64  # rls2101.rel NDRPDR iter env 6
1850       - 71  # rls2101.rel NDRPDR iter env 6
1851       - 73  # rls2101.rel NDRPDR iter env 6
1852       - 74  # rls2101.rel NDRPDR iter env 6
1853       - 80  # rls2101.rel NDRPDR iter env 6
1854       - 81  # rls2101.rel NDRPDR iter env 6
1855       - 82  # rls2101.rel NDRPDR iter env 6
1856       - 83  # rls2101.rel NDRPDR iter env 6
1857       - 88  # rls2101.rel NDRPDR iter env 6
1858       - 89  # rls2101.rel NDRPDR iter env 6
1859   vpp-compare-testbeds-cmp:
1860     csit-vpp-perf-report-iterative-2101-3n-skx:
1861       - 36  # rls2101.rel NDRPDR iter env 6
1862       - 37  # rls2101.rel NDRPDR iter env 6
1863       - 38  # rls2101.rel NDRPDR iter env 6
1864       - 39  # rls2101.rel NDRPDR iter env 6
1865       - 40  # rls2101.rel NDRPDR iter env 6
1866       - 41  # rls2101.rel NDRPDR iter env 6
1867       - 42  # rls2101.rel NDRPDR iter env 6
1868       - 47  # rls2101.rel NDRPDR iter env 6
1869       - 48  # rls2101.rel NDRPDR iter env 6
1870       - 50  # rls2101.rel NDRPDR iter env 6
1871
1872   vpp-compare-testbeds-skx-clx-ref:
1873     csit-vpp-perf-report-iterative-2101-2n-skx:
1874       - 63  # rls2101.rel NDRPDR iter env 6
1875       - 69  # rls2101.rel NDRPDR iter env 6
1876       - 70  # rls2101.rel NDRPDR iter env 6
1877       - 75  # rls2101.rel NDRPDR iter env 6
1878       - 76  # rls2101.rel NDRPDR iter env 6
1879       - 77  # rls2101.rel NDRPDR iter env 6
1880       - 82  # rls2101.rel NDRPDR iter env 6
1881       - 85  # rls2101.rel NDRPDR iter env 6
1882       - 86  # rls2101.rel NDRPDR iter env 6
1883       - 94  # rls2101.rel NDRPDR iter env 6
1884       - 89  # rls2101.rel NDRPDR iter RND env 6
1885       - 90  # rls2101.rel NDRPDR iter RND env 6
1886       - 91  # rls2101.rel NDRPDR iter RND env 6
1887       - 92  # rls2101.rel NDRPDR iter RND env 6
1888       - 93  # rls2101.rel NDRPDR iter RND env 6
1889       - 96  # rls2101.rel NDRPDR iter RND env 6
1890       - 98  # rls2101.rel NDRPDR iter RND env 6
1891       - 99  # rls2101.rel NDRPDR iter RND env 6
1892       - 101 # rls2101.rel NDRPDR iter RND env 6
1893       - 102 # rls2101.rel NDRPDR iter RND env 6
1894       - 116 # rls2101.rel NDRPDR iter NAT env 6
1895       - 117 # rls2101.rel NDRPDR iter NAT env 6
1896       - 118 # rls2101.rel NDRPDR iter NAT env 6
1897       - 119 # rls2101.rel NDRPDR iter NAT env 6
1898       - 120 # rls2101.rel NDRPDR iter NAT env 6
1899       - 121 # rls2101.rel NDRPDR iter NAT env 6
1900       - 122 # rls2101.rel NDRPDR iter NAT env 6
1901       - 123 # rls2101.rel NDRPDR iter NAT env 6
1902       - 124 # rls2101.rel NDRPDR iter NAT env 6
1903       - 125 # rls2101.rel NDRPDR iter NAT env 6
1904   vpp-compare-testbeds-skx-clx-cmp:
1905     csit-vpp-perf-report-iterative-2101-2n-clx:
1906       - 54  # rls2101.rel NDRPDR iter env 6
1907       - 59  # rls2101.rel NDRPDR iter env 6
1908       - 60  # rls2101.rel NDRPDR iter env 6
1909       - 63  # rls2101.rel NDRPDR iter env 6
1910       - 66  # rls2101.rel NDRPDR iter env 6
1911       - 68  # rls2101.rel NDRPDR iter env 6
1912       - 73  # rls2101.rel NDRPDR iter env 6
1913       - 75  # rls2101.rel NDRPDR iter env 6
1914       - 86  # rls2101.rel NDRPDR iter env 6
1915       - 90  # rls2101.rel NDRPDR iter env 6
1916       - 80  # rls2101.rel NDRPDR iter RND env 6
1917       - 87  # rls2101.rel NDRPDR iter RND env 6
1918       - 91  # rls2101.rel NDRPDR iter RND env 6
1919       - 92  # rls2101.rel NDRPDR iter RND env 6
1920       - 93  # rls2101.rel NDRPDR iter RND env 6
1921       - 94  # rls2101.rel NDRPDR iter RND env 6
1922       - 95  # rls2101.rel NDRPDR iter RND env 6
1923       - 100 # rls2101.rel NDRPDR iter RND env 6
1924       - 106 # rls2101.rel NDRPDR iter RND env 6
1925       - 108 # rls2101.rel NDRPDR iter RND env 6
1926       - 112 # rls2101.rel NDRPDR iter NAT env 6
1927       - 113 # rls2101.rel NDRPDR iter NAT env 6
1928       - 114 # rls2101.rel NDRPDR iter NAT env 6
1929       - 115 # rls2101.rel NDRPDR iter NAT env 6
1930       - 116 # rls2101.rel NDRPDR iter NAT env 6
1931       - 117 # rls2101.rel NDRPDR iter NAT env 6
1932       - 118 # rls2101.rel NDRPDR iter NAT env 6
1933       - 119 # rls2101.rel NDRPDR iter NAT env 6
1934       - 120 # rls2101.rel NDRPDR iter NAT env 6
1935       - 121 # rls2101.rel NDRPDR iter NAT env 6
1936       - 122 # rls2101.rel NDRPDR iter MLX env 6
1937       - 123 # rls2101.rel NDRPDR iter MLX env 6
1938       - 124 # rls2101.rel NDRPDR iter MLX env 6
1939       - 126 # rls2101.rel NDRPDR iter MLX env 6
1940       - 127 # rls2101.rel NDRPDR iter MLX env 6
1941       - 128 # rls2101.rel NDRPDR iter MLX env 6
1942       - 129 # rls2101.rel NDRPDR iter MLX env 6
1943       - 130 # rls2101.rel NDRPDR iter MLX env 6
1944       - 131 # rls2101.rel NDRPDR iter MLX env 6
1945       - 132 # rls2101.rel NDRPDR iter MLX env 6
1946
1947   #   vpp-compare-testbeds-clx-icx-ref:
1948   #     csit-vpp-perf-report-iterative-2101-2n-clx:
1949   #       - 54  # rls2101.rel NDRPDR iter env 6
1950   #       - 59  # rls2101.rel NDRPDR iter env 6
1951   #       - 60  # rls2101.rel NDRPDR iter env 6
1952   #       - 63  # rls2101.rel NDRPDR iter env 6
1953   #       - 66  # rls2101.rel NDRPDR iter env 6
1954   #       - 68  # rls2101.rel NDRPDR iter env 6
1955   #       - 73  # rls2101.rel NDRPDR iter env 6
1956   #       - 75  # rls2101.rel NDRPDR iter env 6
1957   #       - 86  # rls2101.rel NDRPDR iter env 6
1958   #       - 90  # rls2101.rel NDRPDR iter env 6
1959   #   vpp-compare-testbeds-clx-icx-cmp:
1960   #     intel-csit-vpp-perf-report-iterative-2101-2n-icx:
1961   #       - 1   # master NDRPDR iter env 6
1962
1963   vpp-compare-testbeds-hsw-clx-ref:
1964     csit-vpp-perf-report-iterative-2101-3n-hsw:
1965       - 64  # rls2101.rel NDRPDR iter env 6
1966       - 71  # rls2101.rel NDRPDR iter env 6
1967       - 73  # rls2101.rel NDRPDR iter env 6
1968       - 74  # rls2101.rel NDRPDR iter env 6
1969       - 80  # rls2101.rel NDRPDR iter env 6
1970       - 81  # rls2101.rel NDRPDR iter env 6
1971       - 82  # rls2101.rel NDRPDR iter env 6
1972       - 83  # rls2101.rel NDRPDR iter env 6
1973       - 88  # rls2101.rel NDRPDR iter env 6
1974       - 89  # rls2101.rel NDRPDR iter env 6
1975       - 128 # rls2101.rel NDRPDR iter RND env 6
1976       - 129 # rls2101.rel NDRPDR iter RND env 6
1977       - 130 # rls2101.rel NDRPDR iter RND env 6
1978       - 131 # rls2101.rel NDRPDR iter RND env 6
1979       - 132 # rls2101.rel NDRPDR iter RND env 6
1980       - 133 # rls2101.rel NDRPDR iter RND env 6
1981       - 134 # rls2101.rel NDRPDR iter RND env 6
1982       - 135 # rls2101.rel NDRPDR iter RND env 6
1983       - 136 # rls2101.rel NDRPDR iter RND env 6
1984       - 137 # rls2101.rel NDRPDR iter RND env 6
1985   vpp-compare-testbeds-hsw-clx-cmp:
1986     csit-vpp-perf-report-iterative-2101-2n-clx:
1987       - 54  # rls2101.rel NDRPDR iter env 6
1988       - 59  # rls2101.rel NDRPDR iter env 6
1989       - 60  # rls2101.rel NDRPDR iter env 6
1990       - 63  # rls2101.rel NDRPDR iter env 6
1991       - 66  # rls2101.rel NDRPDR iter env 6
1992       - 68  # rls2101.rel NDRPDR iter env 6
1993       - 73  # rls2101.rel NDRPDR iter env 6
1994       - 75  # rls2101.rel NDRPDR iter env 6
1995       - 90  # rls2101.rel NDRPDR iter env 6
1996       - 80  # rls2101.rel NDRPDR iter RND env 6
1997       - 87  # rls2101.rel NDRPDR iter RND env 6
1998       - 91  # rls2101.rel NDRPDR iter RND env 6
1999       - 92  # rls2101.rel NDRPDR iter RND env 6
2000       - 93  # rls2101.rel NDRPDR iter RND env 6
2001       - 94  # rls2101.rel NDRPDR iter RND env 6
2002       - 95  # rls2101.rel NDRPDR iter RND env 6
2003       - 100 # rls2101.rel NDRPDR iter RND env 6
2004       - 106 # rls2101.rel NDRPDR iter RND env 6
2005       - 108 # rls2101.rel NDRPDR iter RND env 6
2006       - 112 # rls2101.rel NDRPDR iter NAT env 6
2007       - 113 # rls2101.rel NDRPDR iter NAT env 6
2008       - 114 # rls2101.rel NDRPDR iter NAT env 6
2009       - 115 # rls2101.rel NDRPDR iter NAT env 6
2010       - 116 # rls2101.rel NDRPDR iter NAT env 6
2011       - 117 # rls2101.rel NDRPDR iter NAT env 6
2012       - 118 # rls2101.rel NDRPDR iter NAT env 6
2013       - 119 # rls2101.rel NDRPDR iter NAT env 6
2014       - 120 # rls2101.rel NDRPDR iter NAT env 6
2015       - 121 # rls2101.rel NDRPDR iter NAT env 6
2016       - 122 # rls2101.rel NDRPDR iter MLX env 6
2017       - 123 # rls2101.rel NDRPDR iter MLX env 6
2018       - 124 # rls2101.rel NDRPDR iter MLX env 6
2019       - 126 # rls2101.rel NDRPDR iter MLX env 6
2020       - 127 # rls2101.rel NDRPDR iter MLX env 6
2021       - 128 # rls2101.rel NDRPDR iter MLX env 6
2022       - 129 # rls2101.rel NDRPDR iter MLX env 6
2023       - 130 # rls2101.rel NDRPDR iter MLX env 6
2024       - 131 # rls2101.rel NDRPDR iter MLX env 6
2025       - 132 # rls2101.rel NDRPDR iter MLX env 6
2026
2027   vpp-compare-testbeds-mrr-ref:
2028     csit-vpp-perf-report-iterative-2101-3n-hsw:
2029       - 63  # rls2101.rel MRR iter env 6
2030   vpp-compare-testbeds-mrr-cmp:
2031     csit-vpp-perf-report-iterative-2101-3n-skx:
2032       - 35  # rls2101.rel MRR iter env 6
2033
2034   vpp-compare-testbeds-mrr-skx-clx-ref:
2035     csit-vpp-perf-report-iterative-2101-2n-skx:
2036       - 62  # rls2101.rel MRR iter env 6
2037   vpp-compare-testbeds-mrr-skx-clx-cmp:
2038     csit-vpp-perf-report-iterative-2101-2n-clx:
2039       - 53  # rls2101.rel MRR iter env 6
2040
2041   vpp-compare-testbeds-mrr-hsw-clx-ref:
2042     csit-vpp-perf-report-iterative-2101-3n-hsw:
2043       - 63  # rls2101.rel MRR iter env 6
2044   vpp-compare-testbeds-mrr-hsw-clx-cmp:
2045     csit-vpp-perf-report-iterative-2101-2n-clx:
2046       - 53  # rls2101.rel MRR iter env 6
2047
2048   #   vpp-compare-testbeds-mrr-clx-icx-ref:
2049   #     csit-vpp-perf-report-iterative-2101-2n-clx:
2050   #       - 53  # rls2101.rel MRR iter env 6
2051   #   vpp-compare-testbeds-mrr-clx-icx-cmp:
2052   #     intel-csit-vpp-perf-report-iterative-2101-2n-icx:
2053   #       - 1   # master NDRPDR iter env 6
2054
2055   dpdk-compare-testbeds-ref:
2056     csit-dpdk-perf-report-iterative-2101-3n-hsw:
2057       - 11  # rls2101 NDRPDR iter env 6
2058       - 12  # rls2101 NDRPDR iter env 6
2059       - 13  # rls2101 NDRPDR iter env 6
2060       - 14  # rls2101 NDRPDR iter env 6
2061       - 16  # rls2101 NDRPDR iter env 6
2062       - 17  # rls2101 NDRPDR iter env 6
2063       - 18  # rls2101 NDRPDR iter env 6
2064       - 19  # rls2101 NDRPDR iter env 6
2065       - 20  # rls2101 NDRPDR iter env 6
2066       - 21  # rls2101 NDRPDR iter env 6
2067   dpdk-compare-testbeds-cmp:
2068     csit-dpdk-perf-report-iterative-2101-3n-skx:
2069       - 12  # rls2101 NDRPDR iter env 6
2070       - 14  # rls2101 NDRPDR iter env 6
2071       - 15  # rls2101 NDRPDR iter env 6
2072       - 17  # rls2101 NDRPDR iter env 6
2073       - 19  # rls2101 NDRPDR iter env 6
2074       - 20  # rls2101 NDRPDR iter env 6
2075       - 21  # rls2101 NDRPDR iter env 6
2076       - 22  # rls2101 NDRPDR iter env 6
2077       - 25  # rls2101 NDRPDR iter env 6
2078       - 26  # rls2101 NDRPDR iter env 6
2079
2080   dpdk-compare-testbeds-skx-clx-ref:
2081     csit-dpdk-perf-report-iterative-2101-2n-skx:
2082       - 11  # rls2101 NDRPDR iter env 6
2083       - 12  # rls2101 NDRPDR iter env 6
2084       - 13  # rls2101 NDRPDR iter env 6
2085       - 14  # rls2101 NDRPDR iter env 6
2086       - 15  # rls2101 NDRPDR iter env 6
2087       - 17  # rls2101 NDRPDR iter env 6
2088       - 18  # rls2101 NDRPDR iter env 6
2089       - 19  # rls2101 NDRPDR iter env 6
2090       - 20  # rls2101 NDRPDR iter env 6
2091       - 21  # rls2101 NDRPDR iter env 6
2092   dpdk-compare-testbeds-skx-clx-cmp:
2093     csit-dpdk-perf-report-iterative-2101-2n-clx:
2094       - 12  # rls2101 NDRPDR iter env 6
2095       - 13  # rls2101 NDRPDR iter env 6
2096       - 14  # rls2101 NDRPDR iter env 6
2097       - 18  # rls2101 NDRPDR iter env 6
2098       - 22  # rls2101 NDRPDR iter env 6
2099
2100   # Compare topologies
2101
2102   vpp-compare-topologies-ref:
2103     csit-vpp-perf-report-iterative-2101-3n-skx:
2104       - 36  # rls2101.rel NDRPDR iter env 6
2105       - 37  # rls2101.rel NDRPDR iter env 6
2106       - 38  # rls2101.rel NDRPDR iter env 6
2107       - 39  # rls2101.rel NDRPDR iter env 6
2108       - 40  # rls2101.rel NDRPDR iter env 6
2109       - 41  # rls2101.rel NDRPDR iter env 6
2110       - 42  # rls2101.rel NDRPDR iter env 6
2111       - 47  # rls2101.rel NDRPDR iter env 6
2112       - 48  # rls2101.rel NDRPDR iter env 6
2113       - 50  # rls2101.rel NDRPDR iter env 6
2114   vpp-compare-topologies-cmp:
2115     csit-vpp-perf-report-iterative-2101-2n-skx:
2116       - 63  # rls2101.rel NDRPDR iter env 6
2117       - 69  # rls2101.rel NDRPDR iter env 6
2118       - 70  # rls2101.rel NDRPDR iter env 6
2119       - 75  # rls2101.rel NDRPDR iter env 6
2120       - 76  # rls2101.rel NDRPDR iter env 6
2121       - 77  # rls2101.rel NDRPDR iter env 6
2122       - 82  # rls2101.rel NDRPDR iter env 6
2123       - 85  # rls2101.rel NDRPDR iter env 6
2124       - 86  # rls2101.rel NDRPDR iter env 6
2125       - 94  # rls2101.rel NDRPDR iter env 6
2126
2127   vpp-compare-topologies-mrr-ref:
2128     csit-vpp-perf-report-iterative-2101-3n-skx:
2129       - 35  # rls2101.rel MRR iter env 6
2130   vpp-compare-topologies-mrr-cmp:
2131     csit-vpp-perf-report-iterative-2101-2n-skx:
2132       - 62  # rls2101.rel MRR iter env 6
2133
2134   dpdk-compare-topologies-ref:
2135     csit-dpdk-perf-report-iterative-2101-3n-skx:
2136       - 12  # rls2101 NDRPDR iter env 6
2137       - 14  # rls2101 NDRPDR iter env 6
2138       - 15  # rls2101 NDRPDR iter env 6
2139       - 17  # rls2101 NDRPDR iter env 6
2140       - 19  # rls2101 NDRPDR iter env 6
2141       - 20  # rls2101 NDRPDR iter env 6
2142       - 21  # rls2101 NDRPDR iter env 6
2143       - 22  # rls2101 NDRPDR iter env 6
2144       - 25  # rls2101 NDRPDR iter env 6
2145       - 26  # rls2101 NDRPDR iter env 6
2146   dpdk-compare-topologies-cmp:
2147     csit-dpdk-perf-report-iterative-2101-2n-skx:
2148       - 11  # rls2101 NDRPDR iter env 6
2149       - 12  # rls2101 NDRPDR iter env 6
2150       - 13  # rls2101 NDRPDR iter env 6
2151       - 14  # rls2101 NDRPDR iter env 6
2152       - 15  # rls2101 NDRPDR iter env 6
2153       - 17  # rls2101 NDRPDR iter env 6
2154       - 18  # rls2101 NDRPDR iter env 6
2155       - 19  # rls2101 NDRPDR iter env 6
2156       - 20  # rls2101 NDRPDR iter env 6
2157       - 21  # rls2101 NDRPDR iter env 6