Code Review / csit.git / commitdiff
? search:
summary | shortlog | log | commit | commitdiff | review | tree
raw | patch | inline | side by side (parent: df3b539)
Report: Add data 06/31106/1
authorTibor Frank <tifrank@cisco.com>
Thu, 4 Feb 2021 07:16:47 +0000 (08:16 +0100)
committerTibor Frank <tifrank@cisco.com>
Thu, 4 Feb 2021 07:16:47 +0000 (08:16 +0100)
Change-Id: I5243c2b2a9669df4bc57f4d606b4bf0df3d9580c
Signed-off-by: Tibor Frank <tifrank@cisco.com>
resources/tools/presentation/specification.yaml patch | blob | history

diff --git a/resources/tools/presentation/specification.yaml b/resources/tools/presentation/specification.yaml
index 393d24f..2df6803 100644 (file)
--- a/resources/tools/presentation/specification.yaml
+++ b/resources/tools/presentation/specification.yaml
@@ -268,6 +268,7 @@
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-3n-skx:
       csit-vpp-perf-report-iterative-2101-3n-skx:
 
     plot-vpp-hdrh-lat-3n-skx:
       csit-vpp-perf-report-iterative-2101-3n-skx:
@@ -309,11 +310,15 @@
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 96  # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
@@ -321,7 +326,7 @@
 
     plot-vpp-hdrh-lat-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
 
     plot-vpp-hdrh-lat-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
-        - 63  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-2n-skx-rnd:
       csit-vpp-perf-report-iterative-2101-2n-skx:
 
     plot-vpp-hdrh-lat-2n-skx-rnd:
       csit-vpp-perf-report-iterative-2101-2n-skx:
@@ -340,6 +345,7 @@
         - 83  # rls2101.rel NDRPDR nf-density iter env 6
         - 88  # rls2101.rel NDRPDR nf-density iter env 6
         - 97  # rls2101.rel NDRPDR nf-density iter env 6
         - 83  # rls2101.rel NDRPDR nf-density iter env 6
         - 88  # rls2101.rel NDRPDR nf-density iter env 6
         - 97  # rls2101.rel NDRPDR nf-density iter env 6
+        - 103 # rls2101.rel NDRPDR nf-density iter env 6
 
     plot-vpp-nfv-2n-skx-mrr:
       csit-vpp-perf-report-iterative-2101-2n-skx:
 
     plot-vpp-nfv-2n-skx-mrr:
       csit-vpp-perf-report-iterative-2101-2n-skx:
@@ -355,6 +361,8 @@
         - 87  # rls2101.rel NDRPDR reconf iter env 6
         - 95  # rls2101.rel NDRPDR reconf iter env 6
         - 100 # rls2101.rel NDRPDR reconf iter env 6
         - 87  # rls2101.rel NDRPDR reconf iter env 6
         - 95  # rls2101.rel NDRPDR reconf iter env 6
         - 100 # rls2101.rel NDRPDR reconf iter env 6
+        - 104 # rls2101.rel NDRPDR reconf iter env 6
+        - 106 # rls2101.rel NDRPDR reconf iter env 6
 
     plot-dpdk-throughput-latency-2n-skx:
       csit-dpdk-perf-report-iterative-2101-2n-skx:
 
     plot-dpdk-throughput-latency-2n-skx:
       csit-dpdk-perf-report-iterative-2101-2n-skx:
@@ -383,10 +391,12 @@
         - 34  # rls2101.rel NDRPDR iter env 6
         - 35  # rls2101.rel NDRPDR iter env 6
         - 37  # rls2101.rel NDRPDR iter env 6
         - 34  # rls2101.rel NDRPDR iter env 6
         - 35  # rls2101.rel NDRPDR iter env 6
         - 37  # rls2101.rel NDRPDR iter env 6
+        - 38  # rls2101.rel NDRPDR iter env 6
         - 40  # rls2101.rel NDRPDR iter RND env 6
         - 41  # rls2101.rel NDRPDR iter RND env 6
         - 42  # rls2101.rel NDRPDR iter RND env 6
         - 43  # rls2101.rel NDRPDR iter RND env 6
         - 40  # rls2101.rel NDRPDR iter RND env 6
         - 41  # rls2101.rel NDRPDR iter RND env 6
         - 42  # rls2101.rel NDRPDR iter RND env 6
         - 43  # rls2101.rel NDRPDR iter RND env 6
+        - 45  # rls2101.rel NDRPDR iter RND env 6
 
     plot-vpp-hdrh-lat-2n-zn2:
       csit-vpp-perf-report-iterative-2101-2n-zn2:
 
     plot-vpp-hdrh-lat-2n-zn2:
       csit-vpp-perf-report-iterative-2101-2n-zn2:
@@ -423,10 +433,12 @@
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
 
     plot-vpp-hdrh-lat-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
-        - 59  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
 
 #     plot-vpp-hdrh-lat-2n-clx-rnd:
 #       csit-vpp-perf-report-iterative-2101-2n-clx:
 
 #     plot-vpp-hdrh-lat-2n-clx-rnd:
 #       csit-vpp-perf-report-iterative-2101-2n-clx:
@@ -438,6 +450,7 @@
         - 62  # rls2101.rel NDRPDR nf-density iter env 6
         - 70  # rls2101.rel NDRPDR nf-density iter env 6
         - 71  # rls2101.rel NDRPDR nf-density iter env 6
         - 62  # rls2101.rel NDRPDR nf-density iter env 6
         - 70  # rls2101.rel NDRPDR nf-density iter env 6
         - 71  # rls2101.rel NDRPDR nf-density iter env 6
+        - 82  # rls2101.rel NDRPDR nf-density iter env 6
 
     plot-vpp-nfv-2n-clx-mrr:
       csit-vpp-perf-report-iterative-2101-2n-clx:
 
     plot-vpp-nfv-2n-clx-mrr:
       csit-vpp-perf-report-iterative-2101-2n-clx:
@@ -474,6 +487,7 @@
         - 24  # rls2101.rel NDRPDR iter env 6
         - 25  # rls2101.rel NDRPDR iter env 6
         - 26  # rls2101.rel NDRPDR iter env 6
         - 24  # rls2101.rel NDRPDR iter env 6
         - 25  # rls2101.rel NDRPDR iter env 6
         - 26  # rls2101.rel NDRPDR iter env 6
+        - 27  # rls2101.rel NDRPDR iter env 6
         - 28  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-3n-tsh:
         - 28  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-3n-tsh:
@@ -510,6 +524,7 @@
         - 28  # rls2101.rel NDRPDR iter env 6
         - 29  # rls2101.rel NDRPDR iter env 6
         - 30  # rls2101.rel NDRPDR iter env 6
         - 28  # rls2101.rel NDRPDR iter env 6
         - 29  # rls2101.rel NDRPDR iter env 6
         - 30  # rls2101.rel NDRPDR iter env 6
+        - 31  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-2n-tx2:
       csit-vpp-perf-report-iterative-2101-2n-tx2:
 
     plot-vpp-hdrh-lat-2n-tx2:
       csit-vpp-perf-report-iterative-2101-2n-tx2:
@@ -605,6 +620,7 @@
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
 
     vpp-nic-comparison-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
 
     vpp-nic-comparison-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
@@ -615,11 +631,15 @@
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 96  # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
@@ -681,7 +701,7 @@
     vpp-perf-results-2n-skx:
       # csit-vpp-perf-report-coverage-2101-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
     vpp-perf-results-2n-skx:
       # csit-vpp-perf-report-coverage-2101-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
-        - 63  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
 
     vpp-perf-results-2n-zn2:
       csit-vpp-perf-report-iterative-2101-2n-zn2:
 
     vpp-perf-results-2n-zn2:
       csit-vpp-perf-report-iterative-2101-2n-zn2:
@@ -690,7 +710,7 @@
     vpp-perf-results-2n-clx:
       # csit-vpp-perf-report-coverage-2101-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
     vpp-perf-results-2n-clx:
       # csit-vpp-perf-report-coverage-2101-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
-        - 59  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
 
     vpp-perf-results-3n-tsh:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
 
     vpp-perf-results-3n-tsh:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
@@ -907,6 +927,7 @@
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
 
     vpp-performance-changes-2n-skx-h1:
       csit-vpp-perf-report-iterative-2009-2n-skx:
 
     vpp-performance-changes-2n-skx-h1:
       csit-vpp-perf-report-iterative-2009-2n-skx:
@@ -963,11 +984,15 @@
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 96  # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
@@ -1027,6 +1052,8 @@
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
 
     vpp-performance-changes-2n-zn2-ref-env-old:
       csit-vpp-perf-report-iterative-2009-2n-zn2:
 
     vpp-performance-changes-2n-zn2-ref-env-old:
       csit-vpp-perf-report-iterative-2009-2n-zn2:
@@ -1055,10 +1082,12 @@
         - 34  # rls2101.rel NDRPDR iter env 6
         - 35  # rls2101.rel NDRPDR iter env 6
         - 37  # rls2101.rel NDRPDR iter env 6
         - 34  # rls2101.rel NDRPDR iter env 6
         - 35  # rls2101.rel NDRPDR iter env 6
         - 37  # rls2101.rel NDRPDR iter env 6
+        - 38  # rls2101.rel NDRPDR iter env 6
         - 40  # rls2101.rel NDRPDR iter RND env 6
         - 41  # rls2101.rel NDRPDR iter RND env 6
         - 42  # rls2101.rel NDRPDR iter RND env 6
         - 43  # rls2101.rel NDRPDR iter RND env 6
         - 40  # rls2101.rel NDRPDR iter RND env 6
         - 41  # rls2101.rel NDRPDR iter RND env 6
         - 42  # rls2101.rel NDRPDR iter RND env 6
         - 43  # rls2101.rel NDRPDR iter RND env 6
+        - 45  # rls2101.rel NDRPDR iter RND env 6
 
     vpp-performance-changes-2n-dnv-h1:
       csit-vpp-perf-report-iterative-2009-2n-dnv:
 
     vpp-performance-changes-2n-dnv-h1:
       csit-vpp-perf-report-iterative-2009-2n-dnv:
@@ -1214,12 +1243,14 @@
         - 17  # rls2009 NDRPDR iter env 6
         - 18  # rls2009 NDRPDR iter env 6
         - 19  # rls2009 NDRPDR iter env 6
         - 17  # rls2009 NDRPDR iter env 6
         - 18  # rls2009 NDRPDR iter env 6
         - 19  # rls2009 NDRPDR iter env 6
+        - 21  # rls2009 NDRPDR iter env 6
     vpp-performance-changes-3n-tsh-cmp:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
         - 23  # rls2101.rel NDRPDR iter env 6
         - 24  # rls2101.rel NDRPDR iter env 6
         - 25  # rls2101.rel NDRPDR iter env 6
         - 26  # rls2101.rel NDRPDR iter env 6
     vpp-performance-changes-3n-tsh-cmp:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
         - 23  # rls2101.rel NDRPDR iter env 6
         - 24  # rls2101.rel NDRPDR iter env 6
         - 25  # rls2101.rel NDRPDR iter env 6
         - 26  # rls2101.rel NDRPDR iter env 6
+        - 27  # rls2101.rel NDRPDR iter env 6
         - 28  # rls2101.rel NDRPDR iter env 6
 
 #     vpp-performance-changes-2n-tx2-h1:
         - 28  # rls2101.rel NDRPDR iter env 6
 
 #     vpp-performance-changes-2n-tx2-h1:
@@ -1251,6 +1282,7 @@
         - 28  # rls2101.rel NDRPDR iter env 6
         - 29  # rls2101.rel NDRPDR iter env 6
         - 30  # rls2101.rel NDRPDR iter env 6
         - 28  # rls2101.rel NDRPDR iter env 6
         - 29  # rls2101.rel NDRPDR iter env 6
         - 30  # rls2101.rel NDRPDR iter env 6
+        - 31  # rls2101.rel NDRPDR iter env 6
 
     vpp-soak-vs-ndr-2n-skx-ref:
       csit-vpp-perf-report-iterative-2101-2n-skx:
 
     vpp-soak-vs-ndr-2n-skx-ref:
       csit-vpp-perf-report-iterative-2101-2n-skx:
@@ -1261,6 +1293,9 @@
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
     vpp-soak-vs-ndr-2n-skx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 68  # rls2101.rel soak env 6
     vpp-soak-vs-ndr-2n-skx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 68  # rls2101.rel soak env 6
@@ -1274,6 +1309,9 @@
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel soak env 6
         - 73  # rls2101.rel soak env 6
 
         - 68  # rls2101.rel soak env 6
         - 73  # rls2101.rel soak env 6
 
@@ -1285,6 +1323,8 @@
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
     vpp-soak-vs-ndr-2n-clx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 58  # rls2101.rel soak env 6
     vpp-soak-vs-ndr-2n-clx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 58  # rls2101.rel soak env 6
@@ -1297,6 +1337,8 @@
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
         - 58  # rls2101.rel soak env 6
         - 61  # rls2101.rel soak env 6
 
         - 58  # rls2101.rel soak env 6
         - 61  # rls2101.rel soak env 6
 
@@ -1669,6 +1711,7 @@
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
 
     vpp-compare-testbeds-skx-clx-ref:
       csit-vpp-perf-report-iterative-2101-2n-skx:
 
     vpp-compare-testbeds-skx-clx-ref:
       csit-vpp-perf-report-iterative-2101-2n-skx:
@@ -1679,11 +1722,15 @@
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 96  # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
@@ -1696,6 +1743,8 @@
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
 
     vpp-compare-testbeds-hsw-clx-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
 
     vpp-compare-testbeds-hsw-clx-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
@@ -1727,6 +1776,8 @@
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
 
     vpp-compare-testbeds-mrr-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
 
     vpp-compare-testbeds-mrr-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
@@ -1806,6 +1857,7 @@
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
         - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
     vpp-compare-topologies-cmp:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 63  # rls2101.rel NDRPDR iter env 6
     vpp-compare-topologies-cmp:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 63  # rls2101.rel NDRPDR iter env 6
@@ -1815,6 +1867,9 @@
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
 
     vpp-compare-topologies-mrr-ref:
       csit-vpp-perf-report-iterative-2101-3n-skx:
 
     vpp-compare-topologies-mrr-ref:
       csit-vpp-perf-report-iterative-2101-3n-skx:
@@ -2863,6 +2918,7 @@
       - 41  # rls2101.rel NDRPDR iter env 6
       - 42  # rls2101.rel NDRPDR iter env 6
       - 47  # rls2101.rel NDRPDR iter env 6
       - 41  # rls2101.rel NDRPDR iter env 6
       - 42  # rls2101.rel NDRPDR iter env 6
       - 47  # rls2101.rel NDRPDR iter env 6
+      - 48  # rls2101.rel NDRPDR iter env 6
     # csit-vpp-perf-report-coverage-2101-3n-skx:
 
 
     # csit-vpp-perf-report-coverage-2101-3n-skx:
 
 
@@ -2919,11 +2975,15 @@
       - 76  # rls2101.rel NDRPDR iter env 6
       - 77  # rls2101.rel NDRPDR iter env 6
       - 82  # rls2101.rel NDRPDR iter env 6
       - 76  # rls2101.rel NDRPDR iter env 6
       - 77  # rls2101.rel NDRPDR iter env 6
       - 82  # rls2101.rel NDRPDR iter env 6
+      - 85  # rls2101.rel NDRPDR iter env 6
+      - 86  # rls2101.rel NDRPDR iter env 6
+      - 94  # rls2101.rel NDRPDR iter env 6
       - 89  # rls2101.rel NDRPDR iter RND env 6
       - 90  # rls2101.rel NDRPDR iter RND env 6
       - 91  # rls2101.rel NDRPDR iter RND env 6
       - 92  # rls2101.rel NDRPDR iter RND env 6
       - 93  # rls2101.rel NDRPDR iter RND env 6
       - 89  # rls2101.rel NDRPDR iter RND env 6
       - 90  # rls2101.rel NDRPDR iter RND env 6
       - 91  # rls2101.rel NDRPDR iter RND env 6
       - 92  # rls2101.rel NDRPDR iter RND env 6
       - 93  # rls2101.rel NDRPDR iter RND env 6
+      - 96  # rls2101.rel NDRPDR iter RND env 6
       - 98  # rls2101.rel NDRPDR iter RND env 6
       - 99  # rls2101.rel NDRPDR iter RND env 6
       - 101 # rls2101.rel NDRPDR iter RND env 6
       - 98  # rls2101.rel NDRPDR iter RND env 6
       - 99  # rls2101.rel NDRPDR iter RND env 6
       - 101 # rls2101.rel NDRPDR iter RND env 6
@@ -2935,6 +2995,7 @@
       - 83  # rls2101.rel NDRPDR nf-density iter env 6
       - 88  # rls2101.rel NDRPDR nf-density iter env 6
       - 97  # rls2101.rel NDRPDR nf-density iter env 6
       - 83  # rls2101.rel NDRPDR nf-density iter env 6
       - 88  # rls2101.rel NDRPDR nf-density iter env 6
       - 97  # rls2101.rel NDRPDR nf-density iter env 6
+      - 103 # rls2101.rel NDRPDR nf-density iter env 6
       - 64  # rls2101.rel NDRPDR reconf iter env 6
       - 66  # rls2101.rel NDRPDR reconf iter env 6
       - 71  # rls2101.rel NDRPDR reconf iter env 6
       - 64  # rls2101.rel NDRPDR reconf iter env 6
       - 66  # rls2101.rel NDRPDR reconf iter env 6
       - 71  # rls2101.rel NDRPDR reconf iter env 6
@@ -2943,6 +3004,8 @@
       - 87  # rls2101.rel NDRPDR reconf iter env 6
       - 95  # rls2101.rel NDRPDR reconf iter env 6
       - 100 # rls2101.rel NDRPDR reconf iter env 6
       - 87  # rls2101.rel NDRPDR reconf iter env 6
       - 95  # rls2101.rel NDRPDR reconf iter env 6
       - 100 # rls2101.rel NDRPDR reconf iter env 6
+      - 104 # rls2101.rel NDRPDR reconf iter env 6
+      - 106 # rls2101.rel NDRPDR reconf iter env 6
       - 68  # rls2101.rel soak env 6
       - 73  # rls2101.rel soak env 6
     # csit-vpp-perf-report-coverage-2101-2n-skx:
       - 68  # rls2101.rel soak env 6
       - 73  # rls2101.rel soak env 6
     # csit-vpp-perf-report-coverage-2101-2n-skx:
@@ -3000,11 +3063,14 @@
       - 63  # rls2101.rel NDRPDR iter env 6
       - 66  # rls2101.rel NDRPDR iter env 6
       - 68  # rls2101.rel NDRPDR iter env 6
       - 63  # rls2101.rel NDRPDR iter env 6
       - 66  # rls2101.rel NDRPDR iter env 6
       - 68  # rls2101.rel NDRPDR iter env 6
+      - 73  # rls2101.rel NDRPDR iter env 6
+      - 75  # rls2101.rel NDRPDR iter env 6
       - 72  # rls2101.rel MRR nf-density iter env 6
       - 57  # rls2101.rel NDRPDR nf-density iter env 6
       - 62  # rls2101.rel NDRPDR nf-density iter env 6
       - 70  # rls2101.rel NDRPDR nf-density iter env 6
       - 71  # rls2101.rel NDRPDR nf-density iter env 6
       - 72  # rls2101.rel MRR nf-density iter env 6
       - 57  # rls2101.rel NDRPDR nf-density iter env 6
       - 62  # rls2101.rel NDRPDR nf-density iter env 6
       - 70  # rls2101.rel NDRPDR nf-density iter env 6
       - 71  # rls2101.rel NDRPDR nf-density iter env 6
+      - 82  # rls2101.rel NDRPDR nf-density iter env 6
       - 55  # rls2101.rel NDRPDR reconf iter env 6
       - 64  # rls2101.rel NDRPDR reconf iter env 6
       - 76  # rls2101.rel NDRPDR reconf iter env 6
       - 55  # rls2101.rel NDRPDR reconf iter env 6
       - 64  # rls2101.rel NDRPDR reconf iter env 6
       - 76  # rls2101.rel NDRPDR reconf iter env 6
@@ -3039,10 +3105,12 @@
       - 34  # rls2101.rel NDRPDR iter env 6
       - 35  # rls2101.rel NDRPDR iter env 6
       - 37  # rls2101.rel NDRPDR iter env 6
       - 34  # rls2101.rel NDRPDR iter env 6
       - 35  # rls2101.rel NDRPDR iter env 6
       - 37  # rls2101.rel NDRPDR iter env 6
+      - 38  # rls2101.rel NDRPDR iter env 6
       - 40  # rls2101.rel NDRPDR iter RND env 6
       - 41  # rls2101.rel NDRPDR iter RND env 6
       - 42  # rls2101.rel NDRPDR iter RND env 6
       - 43  # rls2101.rel NDRPDR iter RND env 6
       - 40  # rls2101.rel NDRPDR iter RND env 6
       - 41  # rls2101.rel NDRPDR iter RND env 6
       - 42  # rls2101.rel NDRPDR iter RND env 6
       - 43  # rls2101.rel NDRPDR iter RND env 6
+      - 45  # rls2101.rel NDRPDR iter RND env 6
 
     csit-vpp-perf-report-iterative-2009-3n-tsh:
       - 8   # rls2005 NDRPDR iter env 5
 
     csit-vpp-perf-report-iterative-2009-3n-tsh:
       - 8   # rls2005 NDRPDR iter env 5
@@ -3077,11 +3145,13 @@
       - 17  # rls2009 NDRPDR iter env 6
       - 18  # rls2009 NDRPDR iter env 6
       - 19  # rls2009 NDRPDR iter env 6
       - 17  # rls2009 NDRPDR iter env 6
       - 18  # rls2009 NDRPDR iter env 6
       - 19  # rls2009 NDRPDR iter env 6
+      - 21  # rls2009 NDRPDR iter env 6
       - 22  # rls2101.rel MRR iter env 6
       - 23  # rls2101.rel NDRPDR iter env 6
       - 24  # rls2101.rel NDRPDR iter env 6
       - 25  # rls2101.rel NDRPDR iter env 6
       - 26  # rls2101.rel NDRPDR iter env 6
       - 22  # rls2101.rel MRR iter env 6
       - 23  # rls2101.rel NDRPDR iter env 6
       - 24  # rls2101.rel NDRPDR iter env 6
       - 25  # rls2101.rel NDRPDR iter env 6
       - 26  # rls2101.rel NDRPDR iter env 6
+      - 27  # rls2101.rel NDRPDR iter env 6
       - 28  # rls2101.rel NDRPDR iter env 6
 
     csit-vpp-perf-report-iterative-2101-2n-tx2:
       - 28  # rls2101.rel NDRPDR iter env 6
 
     csit-vpp-perf-report-iterative-2101-2n-tx2:
@@ -3106,6 +3176,7 @@
       - 28  # rls2101.rel NDRPDR iter env 6
       - 29  # rls2101.rel NDRPDR iter env 6
       - 30  # rls2101.rel NDRPDR iter env 6
       - 28  # rls2101.rel NDRPDR iter env 6
       - 29  # rls2101.rel NDRPDR iter env 6
       - 30  # rls2101.rel NDRPDR iter env 6
+      - 31  # rls2101.rel NDRPDR iter env 6
 
 
     csit-vpp-perf-report-iterative-2009-3n-dnv:
 
 
     csit-vpp-perf-report-iterative-2009-3n-dnv:
Integration tests