Report: Add data
[csit.git] / resources / tools / presentation / specification.yaml
index 5c3fe01..b0b50f8 100644 (file)
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
 
     vpp-nic-comparison-3n-hsw:
       # TODO: Add new data
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
 
     vpp-performance-changes-3n-skx:
       csit-vpp-perf-verify-1807-3n-skx:
       - 21  # NDRPDR sel
       - 22  # NDRPDR sel
       - 25  # NDRPDR sel
-      # TODO Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
 
     vpp-nic-comparison-3n-skx:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
 
     vpp-performance-changes-2n-skx:
       csit-vpp-perf-verify-1807-2n-skx:
       - 23  # NDRPDR sel
       - 24  # NDRPDR sel
       - 27  # NDRPDR sel
-      # TODO Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
 
     vpp-nic-comparison-2n-skx:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
 
     vpp-compare-testbeds:
       # TODO: Add new data
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
-      # TODO: Add new data
+      - 42  # NDRPDR sel
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
 
     vpp-compare-testbeds-mrr:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
 
     vpp-compare-topologies:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
-      # TODO: Add new data
+      - 48  # NDRPDR sel
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
 
     vpp-compare-topologies-mrr:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
 
       - 48  # MRR sel
       csit-vpp-perf-verify-1810-3n-hsw:
       - 9   # MRR sel
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
 
     vpp-nic-comparison-3n-hsw-mrr:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
 
       - 11  # MRR sel
       - 12  # MRR sel
       - 13  # MRR sel
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
 
     vpp-nic-comparison-3n-skx-mrr:
-      # TODO: Replace with new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
 
       - 10  # MRR sel
       - 11  # MRR sel
       - 12  # MRR sel
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
 
     vpp-nic-comparison-2n-skx-mrr:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
 
       # TODO: Add FULL data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 38  # NDRPDR full
+      - 43  # NDRPDR full
 
     vpp-perf-results-3n-skx:
-      # TODO: Add FULL data
       csit-vpp-perf-verify-1901-3n-skx:
       - 37  # NDRPDR full
       - 39  # NDRPDR full
       - 40  # NDRPDR full
+      - 49  # NDRPDR full
 
     vpp-perf-results-2n-skx:
       # TODO: Add FULL data
       - 33  # NDRPDR full
 
     vpp-mrr-results-3n-hsw:
-      # TODO: Replace with FULL data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
 
     vpp-mrr-results-3n-skx:
-      # TODO: Replace with FULL data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
 
     vpp-mrr-results-2n-skx:
-      # TODO: Replace with FULL data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
 
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
 
     plot-throughput-speedup-analysis-3n-skx:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
 
     plot-throughput-speedup-analysis-2n-skx:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
 
     plot-vpp-throughput-latency-3n-hsw:
       # TODO: Add new data
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
 
     plot-vpp-soak-2n-skx:
-      # TODO: Replace with new data
-      # csit-vpp-perf-verify-1901-2n-skx:
-      csit-vpp-perf-verify-master-2n-skx:
-      - 248  # SOAK sel
-      - 251  # SOAK sel
+      csit-vpp-perf-verify-1901-2n-skx:
+      - 45  # SOAK sel
 
     plot-vpp-nfv-2n-skx:
       # TODO: Add new data
       - 28  # NFV NDRPDR
       - 29  # NFV NDRPDR
       - 32  # NFV NDRPDR
+      - 39  # NFV NDRPDR
 
     plot-vpp-nfv-2n-skx-mrr:
       # TODO: Add new data
       - 37  # NFV MRR
 
     plot-vpp-throughput-latency-3n-skx:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
 
     plot-vpp-throughput-latency-2n-skx:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
 
     plot-vpp-http-server-performance:
       # TODO: Replace with new data
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
 
     dpdk-performance-changes-3n-skx:
       csit-dpdk-perf-verify-1807-3n-skx:
       - 11  # NDRPDR sel
       - 12  # NDRPDR sel
       - 13  # NDRPDR sel
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
 
     dpdk-performance-changes-2n-skx:
       csit-dpdk-perf-verify-1810-2n-skx:
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
 
     dpdk-compare-testbeds:
-      # TODO: Replace with new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
 
     dpdk-compare-topologies:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
       csit-dpdk-perf-verify-1901-2n-skx:
       - 12  # NDRPDR sel
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
 
     dpdk-perf-results-3n-hsw:
       csit-dpdk-perf-verify-1901-3n-hsw:
-      - 14  # NDRPDR sel
+      - 20  # NDRPDR sel
 
     dpdk-perf-results-3n-skx:
       csit-dpdk-perf-verify-1901-3n-skx:
-      - 9   # NDRPDR sel F
+      - 13  # NDRPDR sel
 
     dpdk-perf-results-2n-skx:
       csit-dpdk-perf-verify-1901-2n-skx:
-      - 16  # NDRPDR sel
+      - 21  # NDRPDR sel
 
     plot-dpdk-throughput-latency-3n-hsw:
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
 
     plot-dpdk-throughput-latency-3n-skx:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
 
     plot-dpdk-throughput-latency-2n-skx:
       csit-dpdk-perf-verify-1901-2n-skx:
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
 
     # HoneyComb Functional
     hc-func-results:
     - 40  # NDRPDR sel
     - 44  # NDRPDR sel
     - 47  # NDRPDR sel
-    - 24  # WRK
-    - 25  # WRK
-    - 23  # WRK
-    - 26  # WRK
-    - 27  # WRK
-    - 28  # WRK
-    - 29  # WRK
-    - 30  # WRK
-    - 32  # WRK
-    - 35  # WRK
     csit-vpp-perf-verify-1810-3n-hsw:
     - 9   # MRR sel
     - 20  # NDRPDR full
     csit-vpp-perf-verify-1901-3n-hsw:
     - 35  # MRR sel
     - 38  # NDRPDR full
+    - 43  # NDRPDR full
     - 10  # NDRPDR sel
     - 18  # NDRPDR sel F
     - 19  # NDRPDR sel
     - 31  # NDRPDR sel
     - 36  # NDRPDR sel
     - 40  # NDRPDR sel
+    - 42  # NDRPDR sel
     csit-vpp-perf-verify-1807-3n-skx:
     - 31  # MRR full
     - 28  # MRR sel
     - 37  # NDRPDR full
     - 39  # NDRPDR full
     - 40  # NDRPDR full
+    - 49  # NDRPDR full
     - 18  # NDRPDR sel
     - 19  # NDRPDR sel
     - 20  # NDRPDR sel
     - 36  # NDRPDR sel
     - 38  # NDRPDR sel
     - 47  # NDRPDR sel
+    - 48  # NDRPDR sel
     csit-vpp-perf-verify-1807-2n-skx:
     - 27  # MRR full
     - 31  # MRR sel
     - 31  # NDRPDR sel
     - 34  # NDRPDR sel
     - 40  # NDRPDR sel
+    - 42  # NDRPDR sel
+    - 43  # NDRPDR sel
     - 24  # NFV MRR
     - 26  # NFV MRR
     - 27  # NFV MRR
     - 28  # NFV NDRPDR
     - 29  # NFV NDRPDR
     - 32  # NFV NDRPDR
-    csit-vpp-perf-verify-master-2n-skx:
-    - 248  # SOAK sel
-    - 251  # SOAK sel
+    - 39  # NFV NDRPDR
+    - 45  # SOAK
     csit-ligato-perf-verify-1810-3n-hsw:
     - 5   # full
     - 6   # sel
     csit-dpdk-perf-verify-1901-3n-hsw:
     - 13  # NDRPDR sel
     - 14  # NDRPDR sel
+    - 16  # NDRPDR sel
+    - 17  # NDRPDR sel
+    - 18  # NDRPDR sel
+    - 19  # NDRPDR sel
+    - 20  # NDRPDR sel
+    - 21  # NDRPDR sel
+    - 22  # NDRPDR sel
     csit-dpdk-perf-verify-1807-3n-skx:
     - 1   # NDRPDR sel
     - 2   # NDRPDR sel
     - 7   # NDRPDR sel
     - 8   # NDRPDR sel
     - 9   # NDRPDR sel
+    - 10  # NDRPDR sel
+    - 11  # NDRPDR sel
+    - 12  # NDRPDR sel
+    - 13  # NDRPDR sel
     csit-dpdk-perf-verify-1810-2n-skx:
     - 3   # NDRPDR sel
     - 4   # NDRPDR sel
     - 14  # NDRPDR sel
     - 15  # NDRPDR sel
     - 16  # NDRPDR sel
+    - 17  # NDRPDR sel
+    - 18  # NDRPDR sel
+    - 19  # NDRPDR sel
+    - 20  # NDRPDR sel
+    - 21  # NDRPDR sel
     csit-vpp-functional-1901-ubuntu1604-virl:
     - 48
     csit-vpp-functional-1901-centos7-virl:
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
   data: "vpp-performance-changes-3n-hsw"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'1T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
   data: "vpp-performance-changes-3n-hsw"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
   data: "vpp-performance-changes-3n-hsw"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'1T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
   data: "vpp-performance-changes-3n-hsw"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   data: "vpp-performance-changes-3n-skx"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   data: "vpp-performance-changes-3n-skx"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'4T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   data: "vpp-performance-changes-3n-skx"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   data: "vpp-performance-changes-3n-skx"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'4T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
   data: "vpp-performance-changes-2n-skx"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
   data: "vpp-performance-changes-2n-skx"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'4T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
   data: "vpp-performance-changes-2n-skx"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
   data: "vpp-performance-changes-2n-skx"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'4T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   data: "vpp-compare-testbeds"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'NIC_Intel-X710' and 'NDRPDR' and '1C'"
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   data: "vpp-compare-testbeds"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'NIC_Intel-X710' and 'NDRPDR' and '2C'"
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   data: "vpp-compare-testbeds"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'NIC_Intel-X710' and 'NDRPDR' and '1C'"
       - 31  # NDRPDR sel
       - 36  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   data: "vpp-compare-testbeds"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'NIC_Intel-X710' and 'NDRPDR' and '2C'"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   compare:
     title: "2-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
   data: "vpp-compare-topologies"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'NDRPDR' and '1C'"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   compare:
     title: "2-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
   data: "vpp-compare-topologies"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'NDRPDR' and '2C'"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   compare:
     title: "2-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
   data: "vpp-compare-topologies"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'NDRPDR' and '1C'"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-3n-skx:
       - 18  # NDRPDR sel
       - 19  # NDRPDR sel
       - 36  # NDRPDR sel
       - 38  # NDRPDR sel
       - 47  # NDRPDR sel
+      - 48  # NDRPDR sel
   compare:
     title: "2-Node Skx"
     data:
-      # TODO: Add new data:
       csit-vpp-perf-verify-1901-2n-skx:
       - 5   # NDRPDR sel
       - 12  # NDRPDR sel
       - 31  # NDRPDR sel
       - 34  # NDRPDR sel
       - 40  # NDRPDR sel
+      - 42  # NDRPDR sel
+      - 43  # NDRPDR sel
   data: "vpp-compare-topologies"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'NDRPDR' and '2C'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
   data: "vpp-performance-changes-3n-hsw-mrr"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
   data: "vpp-performance-changes-3n-hsw-mrr"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
   data: "vpp-performance-changes-3n-hsw-mrr"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   data: "vpp-performance-changes-3n-skx-mrr"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   data: "vpp-performance-changes-3n-skx-mrr"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   data: "vpp-performance-changes-3n-skx-mrr"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
   data: "vpp-performance-changes-2n-skx-mrr"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
   data: "vpp-performance-changes-2n-skx-mrr"
   reference:
     title: "3-Node Hsw"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   data: "vpp-compare-testbeds-mrr"
   reference:
     title: "3-Node Hsw"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   data: "vpp-compare-testbeds-mrr"
   reference:
     title: "3-Node Hsw"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-hsw:
       - 35  # MRR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   data: "vpp-compare-testbeds-mrr"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   compare:
     title: "2-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
   data: "vpp-compare-topologies-mrr"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   compare:
     title: "2-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
   data: "vpp-compare-topologies-mrr"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-3n-skx:
       - 32  # MRR sel
   compare:
     title: "2-Node Skx"
     data:
-      # TODO: Add new data
       csit-vpp-perf-verify-1901-2n-skx:
       - 22  # MRR sel
   data: "vpp-compare-topologies-mrr"
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
   data: "dpdk-performance-changes-3n-hsw"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'1T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
   data: "dpdk-performance-changes-3n-hsw"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
   data: "dpdk-performance-changes-3n-hsw"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'1T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
   data: "dpdk-performance-changes-3n-hsw"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
   data: "dpdk-performance-changes-3n-skx"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
   data: "dpdk-performance-changes-3n-skx"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'4T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
   data: "dpdk-performance-changes-3n-skx"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   compare:
     title: "rls1901"
     data:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
   data: "dpdk-performance-changes-3n-skx"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'4T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
   data: "dpdk-compare-testbeds"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'NIC_Intel-X710' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
   compare:
     title: "2-Node Skx"
     data:
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
   data: "dpdk-compare-topologies"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'NDRPDR'" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   reference:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
   compare:
     title: "2-Node Skx"
     data:
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
   data: "dpdk-compare-topologies"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'NDRPDR'" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       csit-dpdk-perf-verify-1901-3n-hsw:
       - 13  # NDRPDR sel
       - 14  # NDRPDR sel
+      - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
+      - 22  # NDRPDR sel
   compare:
     title: "3-Node Skx"
     data:
-      # TODO: Add new data
       csit-dpdk-perf-verify-1901-3n-skx:
       - 3   # NDRPDR sel
       - 5   # NDRPDR sel
       - 7   # NDRPDR sel
       - 8   # NDRPDR sel
       - 9   # NDRPDR sel
+      - 10  # NDRPDR sel
+      - 11  # NDRPDR sel
+      - 12  # NDRPDR sel
+      - 13  # NDRPDR sel
   data: "dpdk-compare-testbeds"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'NIC_Intel-X710' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
   data: "dpdk-performance-changes-2n-skx"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
   data: "dpdk-performance-changes-2n-skx"
   include-tests: "PDR" # "PDR" | "NDR" | "MRR"
   filter: "'4T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
   data: "dpdk-performance-changes-2n-skx"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'2T1C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
       - 14  # NDRPDR sel
       - 15  # NDRPDR sel
       - 16  # NDRPDR sel
+      - 17  # NDRPDR sel
+      - 18  # NDRPDR sel
+      - 19  # NDRPDR sel
+      - 20  # NDRPDR sel
+      - 21  # NDRPDR sel
   data: "dpdk-performance-changes-2n-skx"
   include-tests: "NDR" # "PDR" | "NDR" | "MRR"
   filter: "'4T2C' and ('NDRPDR' or 'NDRPDRDISC')" # "('NDRPDR' or 'NDRPDRDISC')" | "'MRR'"
   - "tags"
   sort:
   - "L2PATCH"
-  - "L2XCBASE"
-  - "L2BDMACLRN"
-  - "IP4FWD"
-  - "IP6FWD"
+#  - "L2XCBASE"
+#  - "L2BDMACLRN"
+#  - "IP4FWD"
+#  - "IP6FWD"
   - "VHOST"
   layout:
     title: "30min Soak Test (PLRsearch)"
   - "tags"
   sort:
   - "L2PATCH"
-  - "L2XCBASE"
-  - "L2BDMACLRN"
-  - "IP4FWD"
-  - "IP6FWD"
+#  - "L2XCBASE"
+#  - "L2BDMACLRN"
+#  - "IP4FWD"
+#  - "IP6FWD"
   - "VHOST"
   layout:
     title: "30min Soak Test (PLRsearch)"