Report: Various fixes
[csit.git] / resources / tools / presentation / specification.yaml
index 7df0d92..ce971c4 100644 (file)
         - 37  # rls2101.rel NDRPDR iter env 6
         - 38  # rls2101.rel NDRPDR iter env 6
         - 39  # rls2101.rel NDRPDR iter env 6
+        - 40  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
+        - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-3n-skx:
       csit-vpp-perf-report-iterative-2101-3n-skx:
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 96  # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
+        - 102 # rls2101.rel NDRPDR iter RND env 6
 
     plot-vpp-hdrh-lat-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
-        - 63  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-2n-skx-rnd:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 79  # rls2101.rel NDRPDR nf-density iter env 6
         - 83  # rls2101.rel NDRPDR nf-density iter env 6
         - 88  # rls2101.rel NDRPDR nf-density iter env 6
+        - 97  # rls2101.rel NDRPDR nf-density iter env 6
+        - 103 # rls2101.rel NDRPDR nf-density iter env 6
+        - 108 # rls2101.rel NDRPDR nf-density iter env 6
+        - 109 # rls2101.rel NDRPDR nf-density iter env 6
+        - 110 # rls2101.rel NDRPDR nf-density iter env 6
 
     plot-vpp-nfv-2n-skx-mrr:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 78  # rls2101.rel NDRPDR reconf iter env 6
         - 87  # rls2101.rel NDRPDR reconf iter env 6
         - 95  # rls2101.rel NDRPDR reconf iter env 6
+        - 100 # rls2101.rel NDRPDR reconf iter env 6
+        - 104 # rls2101.rel NDRPDR reconf iter env 6
+        - 106 # rls2101.rel NDRPDR reconf iter env 6
 
     plot-dpdk-throughput-latency-2n-skx:
       csit-dpdk-perf-report-iterative-2101-2n-skx:
         - 33  # rls2101.rel NDRPDR iter env 6
         - 34  # rls2101.rel NDRPDR iter env 6
         - 35  # rls2101.rel NDRPDR iter env 6
+        - 36  # rls2101.rel NDRPDR iter env 6
         - 37  # rls2101.rel NDRPDR iter env 6
+        - 38  # rls2101.rel NDRPDR iter env 6
         - 40  # rls2101.rel NDRPDR iter RND env 6
+        - 41  # rls2101.rel NDRPDR iter RND env 6
         - 42  # rls2101.rel NDRPDR iter RND env 6
         - 43  # rls2101.rel NDRPDR iter RND env 6
+        - 45  # rls2101.rel NDRPDR iter RND env 6
+        - 48  # rls2101.rel NDRPDR iter RND env 6
+        - 50  # rls2101.rel NDRPDR iter RND env 6
 
     plot-vpp-hdrh-lat-2n-zn2:
       csit-vpp-perf-report-iterative-2101-2n-zn2:
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
+        - 87  # rls2101.rel NDRPDR iter RND env 6
+        - 91  # rls2101.rel NDRPDR iter RND env 6
+        - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 94  # rls2101.rel NDRPDR iter RND env 6
 
     plot-vpp-hdrh-lat-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
-        - 59  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
 
-    plot-vpp-hdrh-lat-2n-clx-rnd:
-      csit-vpp-perf-report-iterative-2101-2n-clx:
-#         -
+    plot-vpp-hdrh-lat-2n-clx-rnd:
+      csit-vpp-perf-report-iterative-2101-2n-clx:
+        - 87  # rls2101.rel NDRPDR iter RND env 6
 
     plot-vpp-nfv-2n-clx-ndrpdr:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 62  # rls2101.rel NDRPDR nf-density iter env 6
         - 70  # rls2101.rel NDRPDR nf-density iter env 6
         - 71  # rls2101.rel NDRPDR nf-density iter env 6
+        - 82  # rls2101.rel NDRPDR nf-density iter env 6
+        - 88  # rls2101.rel NDRPDR nf-density iter env 6
+        - 89  # rls2101.rel NDRPDR nf-density iter env 6
+        - 96  # rls2101.rel NDRPDR nf-density iter env 6
+        - 97  # rls2101.rel NDRPDR nf-density iter env 6
 
     plot-vpp-nfv-2n-clx-mrr:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 55  # rls2101.rel NDRPDR reconf iter env 6
         - 64  # rls2101.rel NDRPDR reconf iter env 6
         - 76  # rls2101.rel NDRPDR reconf iter env 6
+        - 83  # rls2101.rel NDRPDR reconf iter env 6
 
     plot-vpp-soak-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 24  # rls2101.rel NDRPDR iter env 6
         - 25  # rls2101.rel NDRPDR iter env 6
         - 26  # rls2101.rel NDRPDR iter env 6
+        - 27  # rls2101.rel NDRPDR iter env 6
         - 28  # rls2101.rel NDRPDR iter env 6
+        - 29  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-3n-tsh:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
         - 28  # rls2101.rel NDRPDR iter env 6
         - 29  # rls2101.rel NDRPDR iter env 6
         - 30  # rls2101.rel NDRPDR iter env 6
+        - 31  # rls2101.rel NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-2n-tx2:
       csit-vpp-perf-report-iterative-2101-2n-tx2:
         - 37  # rls2101.rel NDRPDR iter env 6
         - 38  # rls2101.rel NDRPDR iter env 6
         - 39  # rls2101.rel NDRPDR iter env 6
+        - 40  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
+        - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
 
     vpp-nic-comparison-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 96  # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
+        - 102 # rls2101.rel NDRPDR iter RND env 6
 
     vpp-nic-comparison-3n-skx-mrr:
       csit-vpp-perf-report-iterative-2101-3n-skx:
         - 36  # rls2101.rel NDRPDR iter env 6
 
     vpp-perf-results-2n-skx:
-      # csit-vpp-perf-report-coverage-2101-2n-skx:
-      csit-vpp-perf-report-iterative-2101-2n-skx:
-        - 63  # rls2101.rel NDRPDR iter env 6
+      csit-vpp-perf-report-coverage-2101-2n-skx:
+        - 1   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-00
+        - 2   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-01
+        - 3   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-02
+        - 4   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-03
+        - 5   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-04
+        - 6   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-05
+        - 7   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-06
+        - 8   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-07
+        - 9   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4tun-00
+        - 10  # rls2101.rel NDRPDR cov env 6 2n-skx-ip6-00
+#        - 11  # rls2101.rel NDRPDR cov env 6 2n-skx-ip6-01
+        - 12  # rls2101.rel NDRPDR cov env 6 2n-skx-l2-00
+        - 13  # rls2101.rel NDRPDR cov env 6 2n-skx-l2-01
+        - 14  # rls2101.rel NDRPDR cov env 6 2n-skx-lb-00
+        - 15  # rls2101.rel NDRPDR cov env 6 2n-skx-memif-00
+#        - 16  # rls2101.rel NDRPDR cov env 6 2n-skx-vhost-00
+#        - 17  # rls2101.rel NDRPDR cov env 6 2n-skx-vhost-01
+#        - 18  # rls2101.rel NDRPDR cov env 6 2n-skx-vts-00
 
     vpp-perf-results-2n-zn2:
       csit-vpp-perf-report-iterative-2101-2n-zn2:
     vpp-perf-results-2n-clx:
       # csit-vpp-perf-report-coverage-2101-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
-        - 59  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
 
     vpp-perf-results-3n-tsh:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
         - 37  # rls2101.rel NDRPDR iter env 6
         - 38  # rls2101.rel NDRPDR iter env 6
         - 39  # rls2101.rel NDRPDR iter env 6
+        - 40  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
+        - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
 
     vpp-performance-changes-2n-skx-h1:
       csit-vpp-perf-report-iterative-2009-2n-skx:
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 96  # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
+        - 102 # rls2101.rel NDRPDR iter RND env 6
 
     vpp-performance-changes-2n-clx-h1:
       csit-vpp-perf-report-iterative-2009-2n-clx:
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
+        - 87  # rls2101.rel NDRPDR iter RND env 6
+        - 91  # rls2101.rel NDRPDR iter RND env 6
+        - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 94  # rls2101.rel NDRPDR iter RND env 6
 
     vpp-performance-changes-2n-zn2-ref-env-old:
       csit-vpp-perf-report-iterative-2009-2n-zn2:
         - 33  # rls2101.rel NDRPDR iter env 6
         - 34  # rls2101.rel NDRPDR iter env 6
         - 35  # rls2101.rel NDRPDR iter env 6
+        - 36  # rls2101.rel NDRPDR iter env 6
         - 37  # rls2101.rel NDRPDR iter env 6
+        - 38  # rls2101.rel NDRPDR iter env 6
         - 40  # rls2101.rel NDRPDR iter RND env 6
+        - 41  # rls2101.rel NDRPDR iter RND env 6
         - 42  # rls2101.rel NDRPDR iter RND env 6
         - 43  # rls2101.rel NDRPDR iter RND env 6
+        - 45  # rls2101.rel NDRPDR iter RND env 6
+        - 48  # rls2101.rel NDRPDR iter RND env 6
+        - 50  # rls2101.rel NDRPDR iter RND env 6
 
     vpp-performance-changes-2n-dnv-h1:
       csit-vpp-perf-report-iterative-2009-2n-dnv:
         - 17  # rls2009 NDRPDR iter env 6
         - 18  # rls2009 NDRPDR iter env 6
         - 19  # rls2009 NDRPDR iter env 6
+        - 21  # rls2009 NDRPDR iter env 6
     vpp-performance-changes-3n-tsh-cmp:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
         - 23  # rls2101.rel NDRPDR iter env 6
         - 24  # rls2101.rel NDRPDR iter env 6
         - 25  # rls2101.rel NDRPDR iter env 6
         - 26  # rls2101.rel NDRPDR iter env 6
+        - 27  # rls2101.rel NDRPDR iter env 6
         - 28  # rls2101.rel NDRPDR iter env 6
+        - 29  # rls2101.rel NDRPDR iter env 6
 
 #     vpp-performance-changes-2n-tx2-h1:
 #       csit-vpp-perf-report-iterative-2009-2n-tx2:
         - 28  # rls2101.rel NDRPDR iter env 6
         - 29  # rls2101.rel NDRPDR iter env 6
         - 30  # rls2101.rel NDRPDR iter env 6
+        - 31  # rls2101.rel NDRPDR iter env 6
 
     vpp-soak-vs-ndr-2n-skx-ref:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
     vpp-soak-vs-ndr-2n-skx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 68  # rls2101.rel soak env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel soak env 6
         - 73  # rls2101.rel soak env 6
 
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
     vpp-soak-vs-ndr-2n-clx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 58  # rls2101.rel soak env 6
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
         - 58  # rls2101.rel soak env 6
         - 61  # rls2101.rel soak env 6
 
         - 37  # rls2101.rel NDRPDR iter env 6
         - 38  # rls2101.rel NDRPDR iter env 6
         - 39  # rls2101.rel NDRPDR iter env 6
+        - 40  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
+        - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
 
     vpp-compare-testbeds-skx-clx-ref:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
         - 89  # rls2101.rel NDRPDR iter RND env 6
         - 90  # rls2101.rel NDRPDR iter RND env 6
         - 91  # rls2101.rel NDRPDR iter RND env 6
         - 92  # rls2101.rel NDRPDR iter RND env 6
         - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 96  # rls2101.rel NDRPDR iter RND env 6
         - 98  # rls2101.rel NDRPDR iter RND env 6
         - 99  # rls2101.rel NDRPDR iter RND env 6
         - 101 # rls2101.rel NDRPDR iter RND env 6
+        - 102 # rls2101.rel NDRPDR iter RND env 6
     vpp-compare-testbeds-skx-clx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 54  # rls2101.rel NDRPDR iter env 6
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
+        - 87  # rls2101.rel NDRPDR iter RND env 6
+        - 91  # rls2101.rel NDRPDR iter RND env 6
+        - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 94  # rls2101.rel NDRPDR iter RND env 6
 
     vpp-compare-testbeds-hsw-clx-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
         - 63  # rls2101.rel NDRPDR iter env 6
         - 66  # rls2101.rel NDRPDR iter env 6
         - 68  # rls2101.rel NDRPDR iter env 6
+        - 73  # rls2101.rel NDRPDR iter env 6
+        - 75  # rls2101.rel NDRPDR iter env 6
+        - 87  # rls2101.rel NDRPDR iter RND env 6
+        - 91  # rls2101.rel NDRPDR iter RND env 6
+        - 93  # rls2101.rel NDRPDR iter RND env 6
+        - 94  # rls2101.rel NDRPDR iter RND env 6
 
     vpp-compare-testbeds-mrr-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
         - 37  # rls2101.rel NDRPDR iter env 6
         - 38  # rls2101.rel NDRPDR iter env 6
         - 39  # rls2101.rel NDRPDR iter env 6
+        - 40  # rls2101.rel NDRPDR iter env 6
         - 41  # rls2101.rel NDRPDR iter env 6
         - 42  # rls2101.rel NDRPDR iter env 6
+        - 47  # rls2101.rel NDRPDR iter env 6
+        - 48  # rls2101.rel NDRPDR iter env 6
     vpp-compare-topologies-cmp:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 63  # rls2101.rel NDRPDR iter env 6
         - 76  # rls2101.rel NDRPDR iter env 6
         - 77  # rls2101.rel NDRPDR iter env 6
         - 82  # rls2101.rel NDRPDR iter env 6
+        - 85  # rls2101.rel NDRPDR iter env 6
+        - 86  # rls2101.rel NDRPDR iter env 6
+        - 94  # rls2101.rel NDRPDR iter env 6
 
     vpp-compare-topologies-mrr-ref:
       csit-vpp-perf-report-iterative-2101-3n-skx:
         titlefont:
           size: 14
         autorange: False
-        fixedrange: False
+        fixedrange: True
         gridcolor: "rgb(230, 230, 230)"
         linecolor: "rgb(220, 220, 220)"
         linewidth: 1
         showline: True
         showticklabels: True
         tickcolor: "rgb(220, 220, 220)"
-        tickvals: [1, 2, 1e1, 20, 1e2, 1e3, 1e4, 1e5, 1e6, 1e7, 1e8, 1e9]
-        ticktext: [0, 50, 90, 95, 99, 99.9, 99.99, 99.999, 99.9999, 99.99999, 99.999999, 99.9999999]
+        tickvals: [1, 2, 1e1, 20, 1e2, 1e3, 1e4, 1e5, 1e6]
+        ticktext: [0, 50, 90, 95, 99, 99.9, 99.99, 99.999, 99.9999]
         tickfont:
           size: 14
       yaxis:
       - 37  # rls2101.rel NDRPDR iter env 6
       - 38  # rls2101.rel NDRPDR iter env 6
       - 39  # rls2101.rel NDRPDR iter env 6
+      - 40  # rls2101.rel NDRPDR iter env 6
       - 41  # rls2101.rel NDRPDR iter env 6
       - 42  # rls2101.rel NDRPDR iter env 6
+      - 47  # rls2101.rel NDRPDR iter env 6
+      - 48  # rls2101.rel NDRPDR iter env 6
     # csit-vpp-perf-report-coverage-2101-3n-skx:
 
 
       - 76  # rls2101.rel NDRPDR iter env 6
       - 77  # rls2101.rel NDRPDR iter env 6
       - 82  # rls2101.rel NDRPDR iter env 6
+      - 85  # rls2101.rel NDRPDR iter env 6
+      - 86  # rls2101.rel NDRPDR iter env 6
+      - 94  # rls2101.rel NDRPDR iter env 6
       - 89  # rls2101.rel NDRPDR iter RND env 6
       - 90  # rls2101.rel NDRPDR iter RND env 6
       - 91  # rls2101.rel NDRPDR iter RND env 6
       - 92  # rls2101.rel NDRPDR iter RND env 6
       - 93  # rls2101.rel NDRPDR iter RND env 6
+      - 96  # rls2101.rel NDRPDR iter RND env 6
       - 98  # rls2101.rel NDRPDR iter RND env 6
       - 99  # rls2101.rel NDRPDR iter RND env 6
       - 101 # rls2101.rel NDRPDR iter RND env 6
+      - 102 # rls2101.rel NDRPDR iter RND env 6
       - 65  # rls2101.rel MRR nf-density iter env 6
       - 67  # rls2101.rel NDRPDR nf-density iter env 6
       - 72  # rls2101.rel NDRPDR nf-density iter env 6
       - 79  # rls2101.rel NDRPDR nf-density iter env 6
       - 83  # rls2101.rel NDRPDR nf-density iter env 6
       - 88  # rls2101.rel NDRPDR nf-density iter env 6
+      - 97  # rls2101.rel NDRPDR nf-density iter env 6
+      - 103 # rls2101.rel NDRPDR nf-density iter env 6
+      - 108 # rls2101.rel NDRPDR nf-density iter env 6
+      - 109 # rls2101.rel NDRPDR nf-density iter env 6
+      - 110 # rls2101.rel NDRPDR nf-density iter env 6
       - 64  # rls2101.rel NDRPDR reconf iter env 6
       - 66  # rls2101.rel NDRPDR reconf iter env 6
       - 71  # rls2101.rel NDRPDR reconf iter env 6
       - 78  # rls2101.rel NDRPDR reconf iter env 6
       - 87  # rls2101.rel NDRPDR reconf iter env 6
       - 95  # rls2101.rel NDRPDR reconf iter env 6
+      - 100 # rls2101.rel NDRPDR reconf iter env 6
+      - 104 # rls2101.rel NDRPDR reconf iter env 6
+      - 106 # rls2101.rel NDRPDR reconf iter env 6
       - 68  # rls2101.rel soak env 6
       - 73  # rls2101.rel soak env 6
-    # csit-vpp-perf-report-coverage-2101-2n-skx:
+    csit-vpp-perf-report-coverage-2101-2n-skx:
+      - 1   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-00
+      - 2   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-01
+      - 3   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-02
+      - 4   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-03
+      - 5   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-04
+      - 6   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-05
+      - 7   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-06
+      - 8   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4-07
+      - 9   # rls2101.rel NDRPDR cov env 6 2n-skx-ip4tun-00
+      - 10  # rls2101.rel NDRPDR cov env 6 2n-skx-ip6-00
+#       - 11  # rls2101.rel NDRPDR cov env 6 2n-skx-ip6-01
+      - 12  # rls2101.rel NDRPDR cov env 6 2n-skx-l2-00
+      - 13  # rls2101.rel NDRPDR cov env 6 2n-skx-l2-01
+      - 14  # rls2101.rel NDRPDR cov env 6 2n-skx-lb-00
+      - 15  # rls2101.rel NDRPDR cov env 6 2n-skx-memif-00
+#       - 16  # rls2101.rel NDRPDR cov env 6 2n-skx-vhost-00
+#       - 17  # rls2101.rel NDRPDR cov env 6 2n-skx-vhost-01
+#       - 18  # rls2101.rel NDRPDR cov env 6 2n-skx-vts-00
 
 
     csit-vpp-perf-report-iterative-2009-2n-clx:
       - 63  # rls2101.rel NDRPDR iter env 6
       - 66  # rls2101.rel NDRPDR iter env 6
       - 68  # rls2101.rel NDRPDR iter env 6
+      - 73  # rls2101.rel NDRPDR iter env 6
+      - 75  # rls2101.rel NDRPDR iter env 6
+      - 87  # rls2101.rel NDRPDR iter RND env 6
+      - 91  # rls2101.rel NDRPDR iter RND env 6
+      - 93  # rls2101.rel NDRPDR iter RND env 6
+      - 94  # rls2101.rel NDRPDR iter RND env 6
       - 72  # rls2101.rel MRR nf-density iter env 6
       - 57  # rls2101.rel NDRPDR nf-density iter env 6
       - 62  # rls2101.rel NDRPDR nf-density iter env 6
       - 70  # rls2101.rel NDRPDR nf-density iter env 6
       - 71  # rls2101.rel NDRPDR nf-density iter env 6
+      - 82  # rls2101.rel NDRPDR nf-density iter env 6
+      - 88  # rls2101.rel NDRPDR nf-density iter env 6
+      - 89  # rls2101.rel NDRPDR nf-density iter env 6
+      - 96  # rls2101.rel NDRPDR nf-density iter env 6
+      - 97  # rls2101.rel NDRPDR nf-density iter env 6
       - 55  # rls2101.rel NDRPDR reconf iter env 6
       - 64  # rls2101.rel NDRPDR reconf iter env 6
       - 76  # rls2101.rel NDRPDR reconf iter env 6
+      - 83  # rls2101.rel NDRPDR reconf iter env 6
       - 58  # rls2101.rel soak env 6
       - 61  # rls2101.rel soak env 6
     # csit-vpp-perf-report-coverage-2101-2n-clx:
       - 33  # rls2101.rel NDRPDR iter env 6
       - 34  # rls2101.rel NDRPDR iter env 6
       - 35  # rls2101.rel NDRPDR iter env 6
+      - 36  # rls2101.rel NDRPDR iter env 6
       - 37  # rls2101.rel NDRPDR iter env 6
+      - 38  # rls2101.rel NDRPDR iter env 6
       - 40  # rls2101.rel NDRPDR iter RND env 6
+      - 41  # rls2101.rel NDRPDR iter RND env 6
       - 42  # rls2101.rel NDRPDR iter RND env 6
       - 43  # rls2101.rel NDRPDR iter RND env 6
+      - 45  # rls2101.rel NDRPDR iter RND env 6
+      - 48  # rls2101.rel NDRPDR iter RND env 6
+      - 50  # rls2101.rel NDRPDR iter RND env 6
 
     csit-vpp-perf-report-iterative-2009-3n-tsh:
       - 8   # rls2005 NDRPDR iter env 5
       - 17  # rls2009 NDRPDR iter env 6
       - 18  # rls2009 NDRPDR iter env 6
       - 19  # rls2009 NDRPDR iter env 6
+      - 21  # rls2009 NDRPDR iter env 6
       - 22  # rls2101.rel MRR iter env 6
       - 23  # rls2101.rel NDRPDR iter env 6
       - 24  # rls2101.rel NDRPDR iter env 6
       - 25  # rls2101.rel NDRPDR iter env 6
       - 26  # rls2101.rel NDRPDR iter env 6
+      - 27  # rls2101.rel NDRPDR iter env 6
       - 28  # rls2101.rel NDRPDR iter env 6
+      - 29  # rls2101.rel NDRPDR iter env 6
 
     csit-vpp-perf-report-iterative-2101-2n-tx2:
       - 5   # rls2009 MRR iter env 6
       - 28  # rls2101.rel NDRPDR iter env 6
       - 29  # rls2101.rel NDRPDR iter env 6
       - 30  # rls2101.rel NDRPDR iter env 6
+      - 31  # rls2101.rel NDRPDR iter env 6
 
 
     csit-vpp-perf-report-iterative-2009-3n-dnv:
     - "Tests.Vpp.Perf.Ip6.40Ge2P1Xl710-Ethip6-Ip6Base-Ndrpdr.78B-1t1c-ethip6-ip6base-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.40Ge2P1Xl710-Ethip6-Ip6Scale2M-Ndrpdr.78B-1t1c-ethip6-ip6scale2m-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.40Ge2P1Xl710-Ethip6-Ip6Scale2M-rnd-Ndrpdr.78B-1t1c-ethip6-ip6scale2m-rnd-ndrpdr"
+  layout:
     title: "3n-hsw-xl710-78b-1t1c-ip6routing-base-scale-dpdk-pdr"
     layout: "plot-throughput"
 
 - type: "plot"
   title: "Throughput: 2n-tx2-xl710-78b-1t1c-ip6routing-base-scale-dpdk-ndr"
   algorithm: "plot_perf_box_name"
-  output-file: "{DIR[STATIC,VPP]}/2n-tx2-xl710-64b-1t1c-ip4routing-base-scale-dpdk-ndr"
+  output-file: "{DIR[STATIC,VPP]}/2n-tx2-xl710-78b-1t1c-ip6routing-base-scale-dpdk-ndr"
   data: "plot-vpp-throughput-lat-tsa-2n-tx2"
   include:
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Dot1Q-Ip6Base-Ndrpdr.78B-1t1c-dot1q-ip6base-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Ethip6-Ip6Scale2M-Ndrpdr.78B-1t1c-ethip6-ip6scale2m-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Ethip6-Ip6Base-Iacldstbase-Ndrpdr.78B-1t1c-ethip6-ip6base-iacldstbase-ndrpdr"
   layout:
-    title: "2n-tx2-xl710-64b-1t1c-ip4routing-base-scale-dpdk-ndr"
+    title: "2n-tx2-xl710-78b-1t1c-ip4routing-base-scale-dpdk-ndr"
     layout: "plot-throughput"
 
 - type: "plot"
   title: "Throughput: 2n-tx2-xl710-78b-1t1c-ip6routing-base-scale-dpdk-pdr"
   algorithm: "plot_perf_box_name"
-  output-file: "{DIR[STATIC,VPP]}/2n-tx2-xl710-64b-1t1c-ip4routing-base-scale-dpdk-pdr"
+  output-file: "{DIR[STATIC,VPP]}/2n-tx2-xl710-78b-1t1c-ip6routing-base-scale-dpdk-pdr"
   data: "plot-vpp-throughput-lat-tsa-2n-tx2"
   include:
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Dot1Q-Ip6Base-Ndrpdr.78B-1t1c-dot1q-ip6base-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Ethip6-Ip6Scale2M-Ndrpdr.78B-1t1c-ethip6-ip6scale2m-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Ethip6-Ip6Base-Iacldstbase-Ndrpdr.78B-1t1c-ethip6-ip6base-iacldstbase-ndrpdr"
   layout:
-    title: "2n-tx2-xl710-64b-1t1c-ip4routing-base-scale-dpdk-pdr"
+    title: "2n-tx2-xl710-78b-1t1c-ip6routing-base-scale-dpdk-pdr"
     layout: "plot-throughput"
 
 - type: "plot"
 - type: "plot"
   title: "Speedup: 2n-tx2-xl710-78b-ip6routing-base-scale-dpdk-ndr-tsa"
   algorithm: "plot_tsa_name"
-  output-file: "{DIR[STATIC,VPP]}/2n-tx2-xl710-64b-ip4routing-base-scale-dpdk-ndr-tsa"
+  output-file: "{DIR[STATIC,VPP]}/2n-tx2-xl710-78b-ip6routing-base-scale-dpdk-ndr-tsa"
   data: "plot-vpp-throughput-lat-tsa-2n-tx2"
   include:
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Dot1Q-Ip6Base-Ndrpdr.78B-.t.c-dot1q-ip6base-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Ethip6-Ip6Scale2M-Ndrpdr.78B-.t.c-ethip6-ip6scale2m-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Ethip6-Ip6Base-Iacldstbase-Ndrpdr.78B-.t.c-ethip6-ip6base-iacldstbase-ndrpdr"
   layout:
-    title: "2n-tx2-xl710-64b-ip4routing-base-scale-dpdk-ndr-tsa"
+    title: "2n-tx2-xl710-78b-ip6routing-base-scale-dpdk-ndr-tsa"
     layout: "plot-throughput-speedup-analysis"
 
 - type: "plot"
   title: "Speedup: 2n-tx2-xl710-78b-ip6routing-base-scale-dpdk-pdr-tsa"
   algorithm: "plot_tsa_name"
-  output-file: "{DIR[STATIC,VPP]}/2n-tx2-xl710-64b-ip4routing-base-scale-dpdk-pdr-tsa"
+  output-file: "{DIR[STATIC,VPP]}/2n-tx2-xl710-78b-ip6routing-base-scale-dpdk-pdr-tsa"
   data: "plot-vpp-throughput-lat-tsa-2n-tx2"
   include:
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Dot1Q-Ip6Base-Ndrpdr.78B-.t.c-dot1q-ip6base-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Ethip6-Ip6Scale2M-Ndrpdr.78B-.t.c-ethip6-ip6scale2m-ndrpdr"
     - "Tests.Vpp.Perf.Ip6.2N1L-40Ge2P1Xl710-Ethip6-Ip6Base-Iacldstbase-Ndrpdr.78B-.t.c-ethip6-ip6base-iacldstbase-ndrpdr"
   layout:
-    title: "2n-tx2-xl710-64b-ip4routing-base-scale-dpdk-pdr-tsa"
+    title: "2n-tx2-xl710-78b-ip6routing-base-scale-dpdk-pdr-tsa"
     layout: "plot-throughput-speedup-analysis"
 
 - type: "plot"
   output-file: "{DIR[STATIC,DPDK]}/2n-tx2-xl710-64b-1t1c-base-ndr"
   data: "plot-dpdk-throughput-latency-2n-tx2"
   include:
-    - "tests.dpdk.perf.40ge2p1xl710-eth-l2xcbase-testpmd-ndrpdr.64b-1t1c-eth-l2xcbase-testpmd-ndrpdr"
-    - "tests.dpdk.perf.40ge2p1xl710-ethip4-ip4base-l3fwd-ndrpdr.64b-1t1c-ethip4-ip4base-l3fwd-ndrpdr"
+    - "tests.dpdk.perf.2N1L-40ge2p1xl710-eth-l2xcbase-testpmd-ndrpdr.64b-1t1c-eth-l2xcbase-testpmd-ndrpdr"
+    - "tests.dpdk.perf.2N1L-40ge2p1xl710-ethip4-ip4base-l3fwd-ndrpdr.64b-1t1c-ethip4-ip4base-l3fwd-ndrpdr"
   layout:
     title: "2n-tx2-xl710-64b-1t1c-base-ndr"
     layout: "plot-throughput"
   output-file: "{DIR[STATIC,DPDK]}/2n-tx2-xl710-64b-2t2c-base-ndr"
   data: "plot-dpdk-throughput-latency-2n-tx2"
   include:
-    - "tests.dpdk.perf.40ge2p1xl710-eth-l2xcbase-testpmd-ndrpdr.64b-2t2c-eth-l2xcbase-testpmd-ndrpdr"
-    - "tests.dpdk.perf.40ge2p1xl710-ethip4-ip4base-l3fwd-ndrpdr.64b-2t2c-ethip4-ip4base-l3fwd-ndrpdr"
+    - "tests.dpdk.perf.2N1L-40ge2p1xl710-eth-l2xcbase-testpmd-ndrpdr.64b-2t2c-eth-l2xcbase-testpmd-ndrpdr"
+    - "tests.dpdk.perf.2N1L-40ge2p1xl710-ethip4-ip4base-l3fwd-ndrpdr.64b-2t2c-ethip4-ip4base-l3fwd-ndrpdr"
   layout:
     title: "2n-tx2-xl710-64b-2t2c-base-ndr"
     layout: "plot-throughput"
   output-file: "{DIR[STATIC,DPDK]}/2n-tx2-xl710-64b-1t1c-base-pdr"
   data: "plot-dpdk-throughput-latency-2n-tx2"
   include:
-    - "tests.dpdk.perf.40ge2p1xl710-eth-l2xcbase-testpmd-ndrpdr.64b-1t1c-eth-l2xcbase-testpmd-ndrpdr"
-    - "tests.dpdk.perf.40ge2p1xl710-ethip4-ip4base-l3fwd-ndrpdr.64b-1t1c-ethip4-ip4base-l3fwd-ndrpdr"
+    - "tests.dpdk.perf.2N1L-40ge2p1xl710-eth-l2xcbase-testpmd-ndrpdr.64b-1t1c-eth-l2xcbase-testpmd-ndrpdr"
+    - "tests.dpdk.perf.2N1L-40ge2p1xl710-ethip4-ip4base-l3fwd-ndrpdr.64b-1t1c-ethip4-ip4base-l3fwd-ndrpdr"
   layout:
     title: "2n-tx2-xl710-64b-1t1c-base-pdr"
     layout: "plot-throughput"
   output-file: "{DIR[STATIC,DPDK]}/2n-tx2-xl710-64b-2t2c-base-pdr"
   data: "plot-dpdk-throughput-latency-2n-tx2"
   include:
-    - "tests.dpdk.perf.40ge2p1xl710-eth-l2xcbase-testpmd-ndrpdr.64b-2t2c-eth-l2xcbase-testpmd-ndrpdr"
-    - "tests.dpdk.perf.40ge2p1xl710-ethip4-ip4base-l3fwd-ndrpdr.64b-2t2c-ethip4-ip4base-l3fwd-ndrpdr"
+    - "tests.dpdk.perf.2N1L-40ge2p1xl710-eth-l2xcbase-testpmd-ndrpdr.64b-2t2c-eth-l2xcbase-testpmd-ndrpdr"
+    - "tests.dpdk.perf.2N1L-40ge2p1xl710-ethip4-ip4base-l3fwd-ndrpdr.64b-2t2c-ethip4-ip4base-l3fwd-ndrpdr"
   layout:
     title: "2n-tx2-xl710-64b-2t2c-base-pdr"
     layout: "plot-throughput"
   layout:
     layout: "plot-hdrh-latency-percentile-x-log"
 
-- type: "plot"
-  title: "Latency by percentile: 2n-clx RND"
-  algorithm: "plot_hdrh_lat_by_percentile_x_log"
-  output-file: "{DIR[STATIC,VPP]}/hdrh-lat-percentile-2n-clx"
-  output-file-links: "{DIR[LAT,VPP]}/2n_clx.rst"
-  target-links: "../../_static/vpp"
-  data: "plot-vpp-hdrh-lat-2n-clx-rnd"
-  filter: "'2T1C' and 'NIC_Intel-XXV710'"
-  layout:
-    layout: "plot-hdrh-latency-percentile-x-log"
+- type: "plot"
+  title: "Latency by percentile: 2n-clx RND"
+  algorithm: "plot_hdrh_lat_by_percentile_x_log"
+  output-file: "{DIR[STATIC,VPP]}/hdrh-lat-percentile-2n-clx"
+  output-file-links: "{DIR[LAT,VPP]}/2n_clx.rst"
+  target-links: "../../_static/vpp"
+  data: "plot-vpp-hdrh-lat-2n-clx-rnd"
+  filter: "'2T1C' and 'NIC_Intel-XXV710'"
+  layout:
+    layout: "plot-hdrh-latency-percentile-x-log"
 
 - type: "plot"
   title: "Latency by percentile: 3n-hsw"