Code Review / csit.git / blobdiff
? search:
summary | shortlog | log | commit | commitdiff | review | tree
raw | inline | side by side
Report: Add data
[csit.git] / resources / tools / presentation / specification.yaml
diff --git a/resources/tools/presentation/specification.yaml b/resources/tools/presentation/specification.yaml
index 6f49f1c..c4a9bdd 100644 (file)
--- a/resources/tools/presentation/specification.yaml
+++ b/resources/tools/presentation/specification.yaml
@@ -275,6 +275,7 @@
         - 46  # NDRPDR sel
         - 47  # NDRPDR sel
         - 48  # NDRPDR sel
+        - 49  # NDRPDR sel
 
     plot-vpp-hdrh-lat-3n-skx:
       csit-vpp-perf-verify-2001-3n-skx:
@@ -287,6 +288,7 @@
         - 46  # NDRPDR sel
         - 47  # NDRPDR sel
         - 48  # NDRPDR sel
+        - 49  # NDRPDR sel
 
     plot-vpp-nfv-3n-skx-mrr:
       csit-vpp-perf-verify-2001-3n-skx:
@@ -297,9 +299,23 @@
         - 29  # NDRPDR sel xxv710
         - 33  # NDRPDR sel xxv710
         - 34  # NDRPDR sel xxv710
+        - 35  # NDRPDR sel xxv710
+        - 36  # NDRPDR sel xxv710
+        - 37  # NDRPDR sel xxv710
+        - 41  # NDRPDR sel xxv710
+        - 42  # NDRPDR sel xxv710
+        - 43  # NDRPDR sel xxv710
+        - 45  # NDRPDR sel xxv710
         - 30  # NDRPDR sel x710
         - 31  # NDRPDR sel x710
         - 32  # NDRPDR sel x710
+        - 38  # NDRPDR sel x710
+        - 39  # NDRPDR sel x710
+        - 40  # NDRPDR sel x710
+        - 44  # NDRPDR sel x710
+        - 46  # NDRPDR sel x710
+        - 47  # NDRPDR sel x710
+        - 48  # NDRPDR sel x710
 
     plot-dpdk-hdrh-lat-3n-skx:
       csit-dpdk-perf-verify-2001-3n-skx:
@@ -308,7 +324,6 @@
     # 2n-skx
 
     plot-vpp-throughput-lat-tsa-2n-skx:
-      # TODO: Add the data
       csit-vpp-perf-verify-2001-2n-skx:
         - 92  # NDRPDR sel
         - 93  # NDRPDR sel
@@ -319,6 +334,17 @@
         - 98  # NDRPDR sel
         - 99  # NDRPDR sel
         - 100 # NDRPDR sel
+        - 102 # NDRPDR sel
+        - 129 # NDRPDR sel addition
+        - 130 # NDRPDR sel addition
+        - 131 # NDRPDR sel addition
+        - 132 # NDRPDR sel addition
+        - 133 # NDRPDR sel addition
+        - 134 # NDRPDR sel addition
+        - 135 # NDRPDR sel addition
+        - 136 # NDRPDR sel addition
+        - 137 # NDRPDR sel addition
+        - 138 # NDRPDR sel addition
 
     plot-vpp-hdrh-lat-2n-skx:
       csit-vpp-perf-verify-2001-2n-skx:
@@ -374,6 +400,8 @@
         - 43  # NDRPDR sel xxv710
         - 46  # NDRPDR sel xxv710
         - 47  # NDRPDR sel xxv710
+        - 52  # NDRPDR sel xxv710
+        - 53  # NDRPDR sel xxv710
         - 38  # NDRPDR sel x710
         - 39  # NDRPDR sel x710
         - 40  # NDRPDR sel x710
@@ -382,6 +410,8 @@
         - 48  # NDRPDR sel x710
         - 49  # NDRPDR sel x710
         - 50  # NDRPDR sel x710
+        - 51  # NDRPDR sel x710
+        - 54  # NDRPDR sel x710
 
     plot-dpdk-hdrh-lat-2n-skx:
       csit-dpdk-perf-verify-2001-2n-skx:
@@ -573,9 +603,9 @@
         - 46  # NDRPDR sel
         - 47  # NDRPDR sel
         - 48  # NDRPDR sel
+        - 49  # NDRPDR sel
 
     vpp-nic-comparison-2n-skx:
-      # TODO: Add the data
       csit-vpp-perf-verify-2001-2n-skx:
         - 92  # NDRPDR sel
         - 93  # NDRPDR sel
@@ -586,6 +616,17 @@
         - 98  # NDRPDR sel
         - 99  # NDRPDR sel
         - 100 # NDRPDR sel
+        - 102 # NDRPDR sel
+        - 129 # NDRPDR sel addition
+        - 130 # NDRPDR sel addition
+        - 131 # NDRPDR sel addition
+        - 132 # NDRPDR sel addition
+        - 133 # NDRPDR sel addition
+        - 134 # NDRPDR sel addition
+        - 135 # NDRPDR sel addition
+        - 136 # NDRPDR sel addition
+        - 137 # NDRPDR sel addition
+        - 138 # NDRPDR sel addition
 
     vpp-nic-comparison-3n-skx-mrr:
       csit-vpp-perf-verify-2001-3n-skx:
@@ -594,6 +635,7 @@
     vpp-nic-comparison-2n-skx-mrr:
       csit-vpp-perf-verify-2001-2n-skx:
         - 101 # MRR sel
+        - 128 # MRR sel addition
 
     # Results
 
@@ -702,6 +744,7 @@
     vpp-mrr-results-2n-skx:
       csit-vpp-perf-verify-2001-2n-skx:
         - 101 # MRR sel
+        - 128 # MRR sel addition
 
     vpp-mrr-results-2n-clx:
       csit-vpp-perf-verify-2001-2n-clx:
@@ -832,6 +875,7 @@
         - 46  # NDRPDR sel
         - 47  # NDRPDR sel
         - 48  # NDRPDR sel
+        - 49  # NDRPDR sel
     vpp-performance-changes-3n-skx:
       - "vpp-performance-changes-3n-skx-h1"
       - "vpp-performance-changes-3n-skx-ref"
@@ -862,7 +906,6 @@
         - 45  # NDRPDR sel
         - 46  # NDRPDR sel
     vpp-performance-changes-2n-skx-cmp:
-      # TODO: Add the data
       csit-vpp-perf-verify-2001-2n-skx:
         - 92  # NDRPDR sel
         - 93  # NDRPDR sel
@@ -873,6 +916,17 @@
         - 98  # NDRPDR sel
         - 99  # NDRPDR sel
         - 100 # NDRPDR sel
+        - 102 # NDRPDR sel
+        - 129 # NDRPDR sel addition
+        - 130 # NDRPDR sel addition
+        - 131 # NDRPDR sel addition
+        - 132 # NDRPDR sel addition
+        - 133 # NDRPDR sel addition
+        - 134 # NDRPDR sel addition
+        - 135 # NDRPDR sel addition
+        - 136 # NDRPDR sel addition
+        - 137 # NDRPDR sel addition
+        - 138 # NDRPDR sel addition
     vpp-performance-changes-2n-skx:
       - "vpp-performance-changes-2n-skx-h1"
       - "vpp-performance-changes-2n-skx-ref"
@@ -987,6 +1041,17 @@
         - 98  # NDRPDR sel
         - 99  # NDRPDR sel
         - 100 # NDRPDR sel
+        - 102 # NDRPDR sel
+        - 129 # NDRPDR sel addition
+        - 130 # NDRPDR sel addition
+        - 131 # NDRPDR sel addition
+        - 132 # NDRPDR sel addition
+        - 133 # NDRPDR sel addition
+        - 134 # NDRPDR sel addition
+        - 135 # NDRPDR sel addition
+        - 136 # NDRPDR sel addition
+        - 137 # NDRPDR sel addition
+        - 138 # NDRPDR sel addition
     vpp-soak-vs-ndr-2n-skx-cmp:
       # TODO: Replace
       # csit-vpp-perf-verify-2001-2n-skx:
@@ -1004,6 +1069,17 @@
         - 98  # NDRPDR sel
         - 99  # NDRPDR sel
         - 100 # NDRPDR sel
+        - 102 # NDRPDR sel
+        - 129 # NDRPDR sel addition
+        - 130 # NDRPDR sel addition
+        - 131 # NDRPDR sel addition
+        - 132 # NDRPDR sel addition
+        - 133 # NDRPDR sel addition
+        - 134 # NDRPDR sel addition
+        - 135 # NDRPDR sel addition
+        - 136 # NDRPDR sel addition
+        - 137 # NDRPDR sel addition
+        - 138 # NDRPDR sel addition
         - 83  # SOAK
         - 86  # SOAK
 
@@ -1075,6 +1151,7 @@
     vpp-performance-changes-2n-skx-mrr-cmp:
       csit-vpp-perf-verify-2001-2n-skx:
         - 101 # MRR sel
+        - 128 # MRR sel addition
     vpp-performance-changes-2n-skx-mrr:
       - "vpp-performance-changes-2n-skx-mrr-h1"
       - "vpp-performance-changes-2n-skx-mrr-ref"
@@ -1202,9 +1279,23 @@
         - 29  # NDRPDR sel xxv710
         - 33  # NDRPDR sel xxv710
         - 34  # NDRPDR sel xxv710
+        - 35  # NDRPDR sel xxv710
+        - 36  # NDRPDR sel xxv710
+        - 37  # NDRPDR sel xxv710
+        - 41  # NDRPDR sel xxv710
+        - 42  # NDRPDR sel xxv710
+        - 43  # NDRPDR sel xxv710
+        - 45  # NDRPDR sel xxv710
         - 30  # NDRPDR sel x710
         - 31  # NDRPDR sel x710
         - 32  # NDRPDR sel x710
+        - 38  # NDRPDR sel x710
+        - 39  # NDRPDR sel x710
+        - 40  # NDRPDR sel x710
+        - 44  # NDRPDR sel x710
+        - 46  # NDRPDR sel x710
+        - 47  # NDRPDR sel x710
+        - 48  # NDRPDR sel x710
     dpdk-performance-changes-3n-skx:
       - "dpdk-performance-changes-3n-skx-h1"
       - "dpdk-performance-changes-3n-skx-ref"
@@ -1244,6 +1335,8 @@
         - 43  # NDRPDR sel xxv710
         - 46  # NDRPDR sel xxv710
         - 47  # NDRPDR sel xxv710
+        - 52  # NDRPDR sel xxv710
+        - 53  # NDRPDR sel xxv710
         - 38  # NDRPDR sel x710
         - 39  # NDRPDR sel x710
         - 40  # NDRPDR sel x710
@@ -1252,6 +1345,8 @@
         - 48  # NDRPDR sel x710
         - 49  # NDRPDR sel x710
         - 50  # NDRPDR sel x710
+        - 51  # NDRPDR sel x710
+        - 54  # NDRPDR sel x710
     dpdk-performance-changes-2n-skx:
       - "dpdk-performance-changes-2n-skx-h1"
       - "dpdk-performance-changes-2n-skx-ref"
@@ -1278,12 +1373,12 @@
         - 46  # NDRPDR sel
         - 47  # NDRPDR sel
         - 48  # NDRPDR sel
+        - 49  # NDRPDR sel
     vpp-compare-testbeds:
       - "vpp-compare-testbeds-ref"
       - "vpp-compare-testbeds-cmp"
 
     vpp-compare-testbeds-skx-clx-ref:
-      # TODO: Add the data
       csit-vpp-perf-verify-2001-2n-skx:
         - 92  # NDRPDR sel
         - 93  # NDRPDR sel
@@ -1294,6 +1389,17 @@
         - 98  # NDRPDR sel
         - 99  # NDRPDR sel
         - 100 # NDRPDR sel
+        - 102 # NDRPDR sel
+        - 129 # NDRPDR sel addition
+        - 130 # NDRPDR sel addition
+        - 131 # NDRPDR sel addition
+        - 132 # NDRPDR sel addition
+        - 133 # NDRPDR sel addition
+        - 134 # NDRPDR sel addition
+        - 135 # NDRPDR sel addition
+        - 136 # NDRPDR sel addition
+        - 137 # NDRPDR sel addition
+        - 138 # NDRPDR sel addition
     vpp-compare-testbeds-skx-clx-cmp:
       csit-vpp-perf-verify-2001-2n-clx:
         - 28  # NDRPDR sel
@@ -1351,6 +1457,7 @@
     vpp-compare-testbeds-mrr-skx-clx-ref:
       csit-vpp-perf-verify-2001-2n-skx:
         - 101 # MRR sel
+        - 128 # MRR sel addition
     vpp-compare-testbeds-mrr-skx-clx-cmp:
       csit-vpp-perf-verify-2001-2n-clx:
         - 39  # MRR
@@ -1395,9 +1502,23 @@
         - 29  # NDRPDR sel xxv710
         - 33  # NDRPDR sel xxv710
         - 34  # NDRPDR sel xxv710
+        - 35  # NDRPDR sel xxv710
+        - 36  # NDRPDR sel xxv710
+        - 37  # NDRPDR sel xxv710
+        - 41  # NDRPDR sel xxv710
+        - 42  # NDRPDR sel xxv710
+        - 43  # NDRPDR sel xxv710
+        - 45  # NDRPDR sel xxv710
         - 30  # NDRPDR sel x710
         - 31  # NDRPDR sel x710
         - 32  # NDRPDR sel x710
+        - 38  # NDRPDR sel x710
+        - 39  # NDRPDR sel x710
+        - 40  # NDRPDR sel x710
+        - 44  # NDRPDR sel x710
+        - 46  # NDRPDR sel x710
+        - 47  # NDRPDR sel x710
+        - 48  # NDRPDR sel x710
     dpdk-compare-testbeds:
       - "dpdk-compare-testbeds-ref"
       - "dpdk-compare-testbeds-cmp"
@@ -1412,6 +1533,8 @@
         - 43  # NDRPDR sel xxv710
         - 46  # NDRPDR sel xxv710
         - 47  # NDRPDR sel xxv710
+        - 52  # NDRPDR sel xxv710
+        - 53  # NDRPDR sel xxv710
         - 38  # NDRPDR sel x710
         - 39  # NDRPDR sel x710
         - 40  # NDRPDR sel x710
@@ -1420,6 +1543,8 @@
         - 48  # NDRPDR sel x710
         - 49  # NDRPDR sel x710
         - 50  # NDRPDR sel x710
+        - 51  # NDRPDR sel x710
+        - 54  # NDRPDR sel x710
     dpdk-compare-testbeds-skx-clx-cmp:
       csit-dpdk-perf-verify-2001-2n-clx:
         - 15  # NDRPDR sel
@@ -1456,6 +1581,7 @@
         - 46  # NDRPDR sel
         - 47  # NDRPDR sel
         - 48  # NDRPDR sel
+        - 49  # NDRPDR sel
     vpp-compare-topologies-cmp:
       # TODO: Add the data
       csit-vpp-perf-verify-2001-2n-skx:
@@ -1468,6 +1594,17 @@
         - 98  # NDRPDR sel
         - 99  # NDRPDR sel
         - 100 # NDRPDR sel
+        - 102 # NDRPDR sel
+        - 129 # NDRPDR sel addition
+        - 130 # NDRPDR sel addition
+        - 131 # NDRPDR sel addition
+        - 132 # NDRPDR sel addition
+        - 133 # NDRPDR sel addition
+        - 134 # NDRPDR sel addition
+        - 135 # NDRPDR sel addition
+        - 136 # NDRPDR sel addition
+        - 137 # NDRPDR sel addition
+        - 138 # NDRPDR sel addition
     vpp-compare-topologies:
       - "vpp-compare-topologies-ref"
       - "vpp-compare-topologies-cmp"
@@ -1478,6 +1615,7 @@
     vpp-compare-topologies-mrr-cmp:
       csit-vpp-perf-verify-2001-2n-skx:
         - 101 # MRR sel
+        - 128 # MRR sel addition
     vpp-compare-topologies-mrr:
       - "vpp-compare-topologies-mrr-ref"
       - "vpp-compare-topologies-mrr-cmp"
@@ -1487,9 +1625,23 @@
         - 29  # NDRPDR sel xxv710
         - 33  # NDRPDR sel xxv710
         - 34  # NDRPDR sel xxv710
+        - 35  # NDRPDR sel xxv710
+        - 36  # NDRPDR sel xxv710
+        - 37  # NDRPDR sel xxv710
+        - 41  # NDRPDR sel xxv710
+        - 42  # NDRPDR sel xxv710
+        - 43  # NDRPDR sel xxv710
+        - 45  # NDRPDR sel xxv710
         - 30  # NDRPDR sel x710
         - 31  # NDRPDR sel x710
         - 32  # NDRPDR sel x710
+        - 38  # NDRPDR sel x710
+        - 39  # NDRPDR sel x710
+        - 40  # NDRPDR sel x710
+        - 44  # NDRPDR sel x710
+        - 46  # NDRPDR sel x710
+        - 47  # NDRPDR sel x710
+        - 48  # NDRPDR sel x710
     dpdk-compare-topologies-cmp:
       csit-dpdk-perf-verify-2001-2n-skx:
         - 35  # NDRPDR sel xxv710
@@ -1500,6 +1652,8 @@
         - 43  # NDRPDR sel xxv710
         - 46  # NDRPDR sel xxv710
         - 47  # NDRPDR sel xxv710
+        - 52  # NDRPDR sel xxv710
+        - 53  # NDRPDR sel xxv710
         - 38  # NDRPDR sel x710
         - 39  # NDRPDR sel x710
         - 40  # NDRPDR sel x710
@@ -1508,6 +1662,8 @@
         - 48  # NDRPDR sel x710
         - 49  # NDRPDR sel x710
         - 50  # NDRPDR sel x710
+        - 51  # NDRPDR sel x710
+        - 54  # NDRPDR sel x710
     dpdk-compare-topologies:
       - "dpdk-compare-topologies-ref"
       - "dpdk-compare-topologies-cmp"
@@ -2296,6 +2452,7 @@
       - 46  # NDRPDR sel
       - 47  # NDRPDR sel
       - 48  # NDRPDR sel
+      - 49  # NDRPDR sel
       - 50  # MRR sel
 
     csit-vpp-perf-verify-1904-2n-skx:
@@ -2332,13 +2489,10 @@
       - 97  # NDRPDR sel vhost
       - 98  # NDRPDR sel vhost
       - 69  # MRR sel
-      - 22  # NFV
-      - 31  # NFV
-      - 32  # NFV
-      - 71  # NFV MRR
-      - 113 # NFV reconf sel - to be removed
-      - 114 # NFV reconf sel - to be removed
-      - 115 # NFV reconf sel - to be removed
+#      - 22  # NFV
+#      - 31  # NFV
+#      - 32  # NFV
+#      - 71  # NFV MRR
     csit-vpp-perf-verify-2001-2n-skx:
       - 92  # NDRPDR sel
       - 93  # NDRPDR sel
@@ -2349,7 +2503,19 @@
       - 98  # NDRPDR sel
       - 99  # NDRPDR sel
       - 100 # NDRPDR sel
+      - 102 # NDRPDR sel
+      - 129 # NDRPDR sel addition
+      - 130 # NDRPDR sel addition
+      - 131 # NDRPDR sel addition
+      - 132 # NDRPDR sel addition
+      - 133 # NDRPDR sel addition
+      - 134 # NDRPDR sel addition
+      - 135 # NDRPDR sel addition
+      - 136 # NDRPDR sel addition
+      - 137 # NDRPDR sel addition
+      - 138 # NDRPDR sel addition
       - 101 # MRR sel
+      - 128 # MRR sel addition
 
     csit-vpp-perf-verify-2001-2n-clx:
       - 28  # NDRPDR sel
@@ -2565,9 +2731,23 @@
       - 29  # NDRPDR sel xxv710
       - 33  # NDRPDR sel xxv710
       - 34  # NDRPDR sel xxv710
+      - 35  # NDRPDR sel xxv710
+      - 36  # NDRPDR sel xxv710
+      - 37  # NDRPDR sel xxv710
+      - 41  # NDRPDR sel xxv710
+      - 42  # NDRPDR sel xxv710
+      - 43  # NDRPDR sel xxv710
+      - 45  # NDRPDR sel xxv710
       - 30  # NDRPDR sel x710
       - 31  # NDRPDR sel x710
       - 32  # NDRPDR sel x710
+      - 38  # NDRPDR sel x710
+      - 39  # NDRPDR sel x710
+      - 40  # NDRPDR sel x710
+      - 44  # NDRPDR sel x710
+      - 46  # NDRPDR sel x710
+      - 47  # NDRPDR sel x710
+      - 48  # NDRPDR sel x710
 
     csit-dpdk-perf-verify-1904-2n-skx:
       - 2   # NDRPDR sel
@@ -2600,6 +2780,8 @@
       - 43  # NDRPDR sel xxv710
       - 46  # NDRPDR sel xxv710
       - 47  # NDRPDR sel xxv710
+      - 52  # NDRPDR sel xxv710
+      - 53  # NDRPDR sel xxv710
       - 38  # NDRPDR sel x710
       - 39  # NDRPDR sel x710
       - 40  # NDRPDR sel x710
@@ -2608,6 +2790,8 @@
       - 48  # NDRPDR sel x710
       - 49  # NDRPDR sel x710
       - 50  # NDRPDR sel x710
+      - 51  # NDRPDR sel x710
+      - 54  # NDRPDR sel x710
 
 
     csit-dpdk-perf-verify-2001-2n-clx:
@@ -4048,7 +4232,7 @@
     data: "vpp-performance-changes-3n-skx-mrr-cmp"
   data: "vpp-performance-changes-3n-skx-mrr"
   include-tests: "MRR" # "PDR" | "NDR" | "MRR"
-  filter: "'2T1C' and 'MRR' and not 'NF_DENSITY'"
+  filter: "'2T1C' and 'MRR' and 'NIC_Intel-XXV710' and not 'NF_DENSITY'"
   parameters:
   - "name"
   - "parent"
@@ -4070,7 +4254,7 @@
     data: "vpp-performance-changes-3n-skx-mrr-cmp"
   data: "vpp-performance-changes-3n-skx-mrr"
   include-tests: "MRR" # "PDR" | "NDR" | "MRR"
-  filter: "'4T2C' and 'MRR' and not 'NF_DENSITY'"
+  filter: "'4T2C' and 'MRR' and 'NIC_Intel-XXV710' and not 'NF_DENSITY'"
   parameters:
   - "name"
   - "parent"
@@ -4092,7 +4276,7 @@
     data: "vpp-performance-changes-3n-skx-mrr-cmp"
   data: "vpp-performance-changes-3n-skx-mrr"
   include-tests: "MRR" # "PDR" | "NDR" | "MRR"
-  filter: "'8T4C' and 'MRR' and not 'NF_DENSITY'"
+  filter: "'8T4C' and 'MRR' and 'NIC_Intel-XXV710' and not 'NF_DENSITY'"
   parameters:
   - "name"
   - "parent"
@@ -4114,7 +4298,7 @@
     data: "vpp-performance-changes-2n-skx-mrr-cmp"
   data: "vpp-performance-changes-2n-skx-mrr"
   include-tests: "MRR" # "PDR" | "NDR" | "MRR"
-  filter: "'2T1C' and 'MRR' and not 'NF_DENSITY'"
+  filter: "'2T1C' and 'MRR' and 'NIC_Intel-XXV710' and not 'NF_DENSITY'"
   parameters:
   - "name"
   - "parent"
@@ -4136,7 +4320,7 @@
     data: "vpp-performance-changes-2n-skx-mrr-cmp"
   data: "vpp-performance-changes-2n-skx-mrr"
   include-tests: "MRR" # "PDR" | "NDR" | "MRR"
-  filter: "'4T2C' and 'MRR' and not 'NF_DENSITY'"
+  filter: "'4T2C' and 'MRR' and 'NIC_Intel-XXV710' and not 'NF_DENSITY'"
   parameters:
   - "name"
   - "parent"
@@ -4158,7 +4342,7 @@
     data: "vpp-performance-changes-2n-skx-mrr-cmp"
   data: "vpp-performance-changes-2n-skx-mrr"
   include-tests: "MRR" # "PDR" | "NDR" | "MRR"
-  filter: "'8T4C' and 'MRR' and not 'NF_DENSITY'"
+  filter: "'8T4C' and 'MRR' and 'NIC_Intel-XXV710' and not 'NF_DENSITY'"
   parameters:
   - "name"
   - "parent"
Integration tests