Code Review / csit.git / blobdiff
? search:
summary | shortlog | log | commit | commitdiff | review | tree
raw | inline | side by side
Report: Add data, 2n-tx2 latency graphs
[csit.git] / resources / tools / presentation / specification.yaml
diff --git a/resources/tools/presentation/specification.yaml b/resources/tools/presentation/specification.yaml
index 3eefe87..7ccc315 100644 (file)
--- a/resources/tools/presentation/specification.yaml
+++ b/resources/tools/presentation/specification.yaml
@@ -292,6 +292,7 @@
         - 15  # rls2101.rc2 NDRPDR iter env 6
         - 16  # rls2101.rc2 NDRPDR iter env 6
         - 17  # rls2101.rc2 NDRPDR iter env 6
+        - 18  # rls2101.rc2 NDRPDR iter env 6
         - 19  # rls2101.rc2 NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-2n-zn2:
@@ -322,6 +323,7 @@
         - 23  # rls2101.rc2 NDRPDR iter env 6
         - 24  # rls2101.rc2 NDRPDR iter env 6
         - 29  # rls2101.rc2 NDRPDR iter env 6
+        - 30  # rls2101.rc2 NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
@@ -361,10 +363,11 @@
       csit-vpp-perf-report-iterative-2101-3n-tsh:
         - 10  # rls2101.rc2 NDRPDR iter env 6
         - 11  # rls2101.rc2 NDRPDR iter env 6
+        - 12  # rls2101.rc2 NDRPDR iter env 6
 
     plot-vpp-hdrh-lat-3n-tsh:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
-        - 10  # rls2101.rc2 NDRPDR iter env 6
+        - 12  # rls2101.rc2 NDRPDR iter env 6
 
     plot-dpdk-throughput-latency-3n-tsh:
       csit-dpdk-perf-report-iterative-2101-3n-tsh:
@@ -409,16 +412,7 @@
 
     plot-vpp-throughput-lat-tsa-3n-dnv:
       csit-vpp-perf-report-iterative-2101-3n-dnv:
-        - 16  # rls2101.rc2 NDRPDR iter env 6
-        - 17  # rls2101.rc2 NDRPDR iter env 6
-        - 18  # rls2101.rc2 NDRPDR iter env 6
-        - 19  # rls2101.rc2 NDRPDR iter env 6
-        - 20  # rls2101.rc2 NDRPDR iter env 6
-        - 21  # rls2101.rc2 NDRPDR iter env 6
-        - 22  # rls2101.rc2 NDRPDR iter env 6
-        - 23  # rls2101.rc2 NDRPDR iter env 6
-        - 24  # rls2101.rc2 NDRPDR iter env 6
-        - 25  # rls2101.rc2 NDRPDR iter env 6
+        - 29  # rls2101.rc2 NDRPDR iter env 6
 
 #    plot-dpdk-throughput-latency-3n-dnv:
 #      # No data
@@ -428,16 +422,8 @@
 
     plot-vpp-throughput-lat-tsa-2n-dnv:
       csit-vpp-perf-report-iterative-2101-2n-dnv:
-        - 16  # rls2101.rc2 NDRPDR iter env 6
-        - 17  # rls2101.rc2 NDRPDR iter env 6
-        - 18  # rls2101.rc2 NDRPDR iter env 6
-        - 19  # rls2101.rc2 NDRPDR iter env 6
-        - 20  # rls2101.rc2 NDRPDR iter env 6
-        - 21  # rls2101.rc2 NDRPDR iter env 6
-        - 22  # rls2101.rc2 NDRPDR iter env 6
-        - 23  # rls2101.rc2 NDRPDR iter env 6
-        - 24  # rls2101.rc2 NDRPDR iter env 6
-        - 25  # rls2101.rc2 NDRPDR iter env 6
+        - 26  # rls2101.rc2 NDRPDR iter env 6
+        - 28  # rls2101.rc2 NDRPDR iter env 6
 
 #    plot-dpdk-throughput-latency-2n-dnv:
 #      # No data
@@ -499,7 +485,7 @@
 
     vpp-perf-results-3n-tsh:
       csit-vpp-perf-report-iterative-2101-3n-tsh:
-        - 10  # rls2101.rc2 NDRPDR iter env 6
+        - 12  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-perf-results-2n-tx2:
       csit-vpp-perf-report-iterative-2101-2n-tx2:
@@ -508,12 +494,12 @@
     vpp-perf-results-3n-dnv:
       # csit-vpp-perf-report-coverage-2101-3n-dnv:
       csit-vpp-perf-report-iterative-2101-3n-dnv:
-        - 16  # rls2101.rc2 NDRPDR iter env 6
+        - 29  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-perf-results-2n-dnv:
       # csit-vpp-perf-report-coverage-2101-2n-dnv:
       csit-vpp-perf-report-iterative-2101-2n-dnv:
-        - 16  # rls2101.rc2 NDRPDR iter env 6
+        - 28  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-mrr-results-3n-hsw:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
@@ -728,6 +714,8 @@
         - 25  # rls2009 NDRPDR iter env 6
         - 26  # rls2009 NDRPDR iter env 6
         - 28  # rls2009 NDRPDR iter env 6
+        - 39  # rls2009 NDRPDR iter env 6
+        - 41  # rls2009 NDRPDR iter env 6
     vpp-performance-changes-2n-skx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-skx:
         - 30  # rls2101.rc2 NDRPDR iter env 6
@@ -784,6 +772,7 @@
         - 23  # rls2101.rc2 NDRPDR iter env 6
         - 24  # rls2101.rc2 NDRPDR iter env 6
         - 29  # rls2101.rc2 NDRPDR iter env 6
+        - 30  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-performance-changes-2n-zn2-ref-env-old:
       csit-vpp-perf-report-iterative-2009-2n-zn2:
@@ -804,6 +793,7 @@
         - 15  # rls2101.rc2 NDRPDR iter env 6
         - 16  # rls2101.rc2 NDRPDR iter env 6
         - 17  # rls2101.rc2 NDRPDR iter env 6
+        - 18  # rls2101.rc2 NDRPDR iter env 6
         - 19  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-performance-changes-2n-dnv-h1:
@@ -845,16 +835,8 @@
         - 15  # rls2009 NDRPDR iter env 5
     vpp-performance-changes-2n-dnv-cmp:
       csit-vpp-perf-report-iterative-2101-2n-dnv:
-        - 16  # rls2101.rc2 NDRPDR iter env 6
-        - 17  # rls2101.rc2 NDRPDR iter env 6
-        - 18  # rls2101.rc2 NDRPDR iter env 6
-        - 19  # rls2101.rc2 NDRPDR iter env 6
-        - 20  # rls2101.rc2 NDRPDR iter env 6
-        - 21  # rls2101.rc2 NDRPDR iter env 6
-        - 22  # rls2101.rc2 NDRPDR iter env 6
-        - 23  # rls2101.rc2 NDRPDR iter env 6
-        - 24  # rls2101.rc2 NDRPDR iter env 6
-        - 25  # rls2101.rc2 NDRPDR iter env 6
+        - 26  # rls2101.rc2 NDRPDR iter env 6
+        - 28  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-performance-changes-3n-dnv-h1:
       csit-vpp-perf-report-iterative-2009-3n-dnv:
@@ -895,16 +877,7 @@
         - 24  # rls2009 NDRPDR iter env 5
     vpp-performance-changes-3n-dnv-cmp:
       csit-vpp-perf-report-iterative-2101-3n-dnv:
-        - 16  # rls2101.rc2 NDRPDR iter env 6
-        - 17  # rls2101.rc2 NDRPDR iter env 6
-        - 18  # rls2101.rc2 NDRPDR iter env 6
-        - 19  # rls2101.rc2 NDRPDR iter env 6
-        - 20  # rls2101.rc2 NDRPDR iter env 6
-        - 21  # rls2101.rc2 NDRPDR iter env 6
-        - 22  # rls2101.rc2 NDRPDR iter env 6
-        - 23  # rls2101.rc2 NDRPDR iter env 6
-        - 24  # rls2101.rc2 NDRPDR iter env 6
-        - 25  # rls2101.rc2 NDRPDR iter env 6
+        - 29  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-performance-changes-3n-tsh-h1:
       csit-vpp-perf-report-iterative-2009-3n-tsh:
@@ -938,6 +911,7 @@
       csit-vpp-perf-report-iterative-2101-3n-tsh:
         - 10  # rls2101.rc2 NDRPDR iter env 6
         - 11  # rls2101.rc2 NDRPDR iter env 6
+        - 12  # rls2101.rc2 NDRPDR iter env 6
 
 #     vpp-performance-changes-2n-tx2-h1:
 #       csit-vpp-perf-report-iterative-2009-2n-tx2:
@@ -951,6 +925,7 @@
         - 7   # rls2009 NDRPDR iter env 6
         - 11  # rls2009 NDRPDR iter env 6
         - 12  # rls2009 NDRPDR iter env 6
+        - 13  # rls2009 NDRPDR iter env 6
     vpp-performance-changes-2n-tx2-cmp:
       csit-vpp-perf-report-iterative-2101-2n-tx2:
         - 8   # rls2101.rc2 NDRPDR iter env 6
@@ -978,6 +953,7 @@
         - 23  # rls2101.rc2 NDRPDR iter env 6
         - 24  # rls2101.rc2 NDRPDR iter env 6
         - 29  # rls2101.rc2 NDRPDR iter env 6
+        - 30  # rls2101.rc2 NDRPDR iter env 6
     vpp-soak-vs-ndr-2n-clx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 28  # rls2101.rc2 soak env 6
@@ -986,6 +962,7 @@
         - 23  # rls2101.rc2 NDRPDR iter env 6
         - 24  # rls2101.rc2 NDRPDR iter env 6
         - 29  # rls2101.rc2 NDRPDR iter env 6
+        - 30  # rls2101.rc2 NDRPDR iter env 6
         - 28  # rls2101.rc2 soak env 6
 
     vpp-performance-changes-3n-hsw-mrr-h1:
@@ -1366,6 +1343,7 @@
         - 23  # rls2101.rc2 NDRPDR iter env 6
         - 24  # rls2101.rc2 NDRPDR iter env 6
         - 29  # rls2101.rc2 NDRPDR iter env 6
+        - 30  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-compare-testbeds-hsw-clx-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
@@ -1384,6 +1362,7 @@
         - 23  # rls2101.rc2 NDRPDR iter env 6
         - 24  # rls2101.rc2 NDRPDR iter env 6
         - 29  # rls2101.rc2 NDRPDR iter env 6
+        - 30  # rls2101.rc2 NDRPDR iter env 6
 
     vpp-compare-testbeds-mrr-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
@@ -2479,6 +2458,8 @@
       - 25  # rls2009 NDRPDR iter env 6
       - 26  # rls2009 NDRPDR iter env 6
       - 28  # rls2009 NDRPDR iter env 6
+      - 39  # rls2009 NDRPDR iter env 6
+      - 41  # rls2009 NDRPDR iter env 6
       - 29  # rls2101.rc2 MRR iter env 6
       - 30  # rls2101.rc2 NDRPDR iter env 6
       - 31  # rls2101.rc2 NDRPDR iter env 6
@@ -2538,6 +2519,7 @@
       - 23  # rls2101.rc2 NDRPDR iter env 6
       - 24  # rls2101.rc2 NDRPDR iter env 6
       - 29  # rls2101.rc2 NDRPDR iter env 6
+      - 30  # rls2101.rc2 NDRPDR iter env 6
       - 25  # rls2101.rc2 MRR nf-density iter env 6
       - 26  # rls2101.rc2 NDRPDR nf-density iter env 6
       - 27  # rls2101.rc2 NDRPDR reconf iter env 6
@@ -2563,6 +2545,7 @@
       - 15  # rls2101.rc2 NDRPDR iter env 6
       - 16  # rls2101.rc2 NDRPDR iter env 6
       - 17  # rls2101.rc2 NDRPDR iter env 6
+      - 18  # rls2101.rc2 NDRPDR iter env 6
       - 19  # rls2101.rc2 NDRPDR iter env 6
 
     csit-vpp-perf-report-iterative-2009-3n-tsh:
@@ -2595,6 +2578,7 @@
       - 9   # rls2101.rc2 MRR iter env 6
       - 10  # rls2101.rc2 NDRPDR iter env 6
       - 11  # rls2101.rc2 NDRPDR iter env 6
+      - 12  # rls2101.rc2 NDRPDR iter env 6
 
     csit-vpp-perf-report-iterative-2101-2n-tx2:
       - 5   # rls2009 MRR iter env 6
@@ -2602,6 +2586,7 @@
       - 7   # rls2009 NDRPDR iter env 6
       - 11  # rls2009 NDRPDR iter env 6
       - 12  # rls2009 NDRPDR iter env 6
+      - 13  # rls2009 NDRPDR iter env 6
       - 9   # rls2101.rc2 MRR iter env 6
       - 8   # rls2101.rc2 NDRPDR iter env 6
       - 10  # rls2101.rc2 NDRPDR iter env 6
@@ -2632,16 +2617,7 @@
       - 22  # rls2009 MRR iter env 5
     csit-vpp-perf-report-iterative-2101-3n-dnv:
       - 15  # rls2101.rc2 MRR iter env 6
-      - 16  # rls2101.rc2 NDRPDR iter env 6
-      - 17  # rls2101.rc2 NDRPDR iter env 6
-      - 18  # rls2101.rc2 NDRPDR iter env 6
-      - 19  # rls2101.rc2 NDRPDR iter env 6
-      - 20  # rls2101.rc2 NDRPDR iter env 6
-      - 21  # rls2101.rc2 NDRPDR iter env 6
-      - 22  # rls2101.rc2 NDRPDR iter env 6
-      - 23  # rls2101.rc2 NDRPDR iter env 6
-      - 24  # rls2101.rc2 NDRPDR iter env 6
-      - 25  # rls2101.rc2 NDRPDR iter env 6
+      - 29  # rls2101.rc2 NDRPDR iter env 6
     # csit-vpp-perf-report-coverage-2101-3n-dnv:
 
 
@@ -2670,16 +2646,8 @@
       - 13  # rls2009 MRR iter env 5
     csit-vpp-perf-report-iterative-2101-2n-dnv:
       - 15  # rls2101.rc2 MRR iter env 6
-      - 16  # rls2101.rc2 NDRPDR iter env 6
-      - 17  # rls2101.rc2 NDRPDR iter env 6
-      - 18  # rls2101.rc2 NDRPDR iter env 6
-      - 19  # rls2101.rc2 NDRPDR iter env 6
-      - 20  # rls2101.rc2 NDRPDR iter env 6
-      - 21  # rls2101.rc2 NDRPDR iter env 6
-      - 22  # rls2101.rc2 NDRPDR iter env 6
-      - 23  # rls2101.rc2 NDRPDR iter env 6
-      - 24  # rls2101.rc2 NDRPDR iter env 6
-      - 25  # rls2101.rc2 NDRPDR iter env 6
+      - 26  # rls2101.rc2 NDRPDR iter env 6
+      - 28  # rls2101.rc2 NDRPDR iter env 6
     # csit-vpp-perf-report-coverage-2101-2n-dnv:
 
 
@@ -3933,7 +3901,7 @@
     - title: "2009.0-5"
       data-set: "vpp-performance-changes-2n-dnv-ref-env-old"
 #     - title: "2009.0-6"
-#       data-set: "vpp-performance-changes-3n-dnv-ref-env-new"
+#       data-set: "vpp-performance-changes-2n-dnv-ref-env-new"
     - title: "2101.0-6"
       data-set: "vpp-performance-changes-2n-dnv-cmp"
   comparisons:
@@ -3964,7 +3932,7 @@
     - title: "2009.0-5"
       data-set: "vpp-performance-changes-2n-dnv-ref-env-old"
 #     - title: "2009.0-6"
-#       data-set: "vpp-performance-changes-3n-dnv-ref-env-new"
+#       data-set: "vpp-performance-changes-2n-dnv-ref-env-new"
     - title: "2101.0-6"
       data-set: "vpp-performance-changes-2n-dnv-cmp"
   comparisons:
@@ -3995,7 +3963,7 @@
     - title: "2009.0-5"
       data-set: "vpp-performance-changes-2n-dnv-ref-env-old"
 #     - title: "2009.0-6"
-#       data-set: "vpp-performance-changes-3n-dnv-ref-env-new"
+#       data-set: "vpp-performance-changes-2n-dnv-ref-env-new"
     - title: "2101.0-6"
       data-set: "vpp-performance-changes-2n-dnv-cmp"
   comparisons:
@@ -4026,7 +3994,7 @@
     - title: "2009.0-5"
       data-set: "vpp-performance-changes-2n-dnv-ref-env-old"
 #     - title: "2009.0-6"
-#       data-set: "vpp-performance-changes-3n-dnv-ref-env-new"
+#       data-set: "vpp-performance-changes-2n-dnv-ref-env-new"
     - title: "2101.0-6"
       data-set: "vpp-performance-changes-2n-dnv-cmp"
   comparisons:
@@ -5271,18 +5239,6 @@
     - '2009.0-6 vs 2009.0-5: Compares CSIT environment current vs previous with previous VPP code.'
     - '2101.0-6 vs 2009.0-6: Compares VPP code current vs previous in the current CSIT environment.'
 
-
-
-
-
-
-
-
-
-
-
-
-
 # VPP Performance Changes 2n-dnv 1t1c mrr
 - type: "table"
   title: "VPP Performance Changes 2n-dnv 1t1c mrr"
Integration tests