Code Review / csit.git / blobdiff
? search:
summary | shortlog | log | commit | commitdiff | review | tree
raw | inline | side by side
Report: Add data
[csit.git] / resources / tools / presentation / specification.yaml
diff --git a/resources/tools/presentation/specification.yaml b/resources/tools/presentation/specification.yaml
index dd56e76..5a45ffe 100644 (file)
--- a/resources/tools/presentation/specification.yaml
+++ b/resources/tools/presentation/specification.yaml
@@ -333,7 +333,7 @@
         - 122 # rls2101.rel NDRPDR iter NAT env 6
         - 123 # rls2101.rel NDRPDR iter NAT env 6
         - 124 # rls2101.rel NDRPDR iter NAT env 6
-#         - 125 # rls2101.rel NDRPDR iter NAT env 6
+        - 125 # rls2101.rel NDRPDR iter NAT env 6
 
     plot-vpp-hdrh-lat-2n-skx:
       csit-vpp-perf-report-iterative-2101-2n-skx:
@@ -478,11 +478,11 @@
         - 114 # rls2101.rel NDRPDR iter NAT env 6
         - 115 # rls2101.rel NDRPDR iter NAT env 6
         - 116 # rls2101.rel NDRPDR iter NAT env 6
-#         - 117 # rls2101.rel NDRPDR iter NAT env 6
+        - 117 # rls2101.rel NDRPDR iter NAT env 6
         - 118 # rls2101.rel NDRPDR iter NAT env 6
         - 119 # rls2101.rel NDRPDR iter NAT env 6
         - 120 # rls2101.rel NDRPDR iter NAT env 6
-#         - 121 # rls2101.rel NDRPDR iter NAT env 6
+        - 121 # rls2101.rel NDRPDR iter NAT env 6
 
     plot-vpp-hdrh-lat-2n-clx:
       csit-vpp-perf-report-iterative-2101-2n-clx:
@@ -722,7 +722,7 @@
         - 122 # rls2101.rel NDRPDR iter NAT env 6
         - 123 # rls2101.rel NDRPDR iter NAT env 6
         - 124 # rls2101.rel NDRPDR iter NAT env 6
-#         - 125 # rls2101.rel NDRPDR iter NAT env 6
+        - 125 # rls2101.rel NDRPDR iter NAT env 6
 
     vpp-nic-comparison-3n-skx-mrr:
       csit-vpp-perf-report-iterative-2101-3n-skx:
@@ -783,8 +783,8 @@
         - 7   # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-02
 #         - 17  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-03
         - 18  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-04
-#         - 19  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-05
-#         - 20  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-06
+        - 19  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-05
+        - 20  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-06
         - 12  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-06
         - 13  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4tun-00
         - 26  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4tun-01
@@ -807,7 +807,7 @@
         - 38  # rls2101.rel NDRPDR cov env 6 3n-skx-srv6-00
         - 39  # rls2101.rel NDRPDR cov env 6 3n-skx-srv6-01
 #         - 40  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-00
-#         - 41  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-01
+        - 41  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-01
         - 42  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-02
         - 43  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-03
 
@@ -834,8 +834,24 @@
         - 19  # rls2101.rel NDRPDR cov env 6 2n-skx-vts-00
 
     vpp-perf-results-2n-zn2:
-      csit-vpp-perf-report-iterative-2101-2n-zn2:
-        - 31  # rls2101.rel NDRPDR iter env 6
+      csit-vpp-perf-report-coverage-2101-2n-zn2:
+        - 1   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-00
+        - 2   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-01
+        - 3   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-02
+#         - 4   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-03
+        - 5   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-04
+        - 6   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-05
+        - 17  # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4tun-00
+#         - 18  # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4tun-01
+        - 8   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip6-00
+        - 9   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip6-01
+        - 10  # rls2101.rel NDRPDR cov env 6 2n-zn2-l2-00
+        - 11  # rls2101.rel NDRPDR cov env 6 2n-zn2-l2-01
+        - 12  # rls2101.rel NDRPDR cov env 6 2n-zn2-lb-00
+        - 13  # rls2101.rel NDRPDR cov env 6 2n-zn2-memif-00
+        - 14  # rls2101.rel NDRPDR cov env 6 2n-zn2-vhost-00
+        - 15  # rls2101.rel NDRPDR cov env 6 2n-zn2-vhost-00
+#         - 16  # rls2101.rel NDRPDR cov env 6 2n-zn2-vts-00
 
     vpp-perf-results-2n-clx:
       csit-vpp-perf-report-coverage-2101-2n-clx:
@@ -1167,7 +1183,7 @@
         - 122 # rls2101.rel NDRPDR iter NAT env 6
         - 123 # rls2101.rel NDRPDR iter NAT env 6
         - 124 # rls2101.rel NDRPDR iter NAT env 6
-#         - 125 # rls2101.rel NDRPDR iter NAT env 6
+        - 125 # rls2101.rel NDRPDR iter NAT env 6
 
     vpp-performance-changes-2n-clx-h1:
       csit-vpp-perf-report-iterative-2009-2n-clx:
@@ -1242,11 +1258,11 @@
         - 114 # rls2101.rel NDRPDR iter NAT env 6
         - 115 # rls2101.rel NDRPDR iter NAT env 6
         - 116 # rls2101.rel NDRPDR iter NAT env 6
-#         - 117 # rls2101.rel NDRPDR iter NAT env 6
+        - 117 # rls2101.rel NDRPDR iter NAT env 6
         - 118 # rls2101.rel NDRPDR iter NAT env 6
         - 119 # rls2101.rel NDRPDR iter NAT env 6
         - 120 # rls2101.rel NDRPDR iter NAT env 6
-#         - 121 # rls2101.rel NDRPDR iter NAT env 6
+        - 121 # rls2101.rel NDRPDR iter NAT env 6
 
     vpp-performance-changes-2n-zn2-ref-env-old:
       csit-vpp-perf-report-iterative-2009-2n-zn2:
@@ -1954,7 +1970,7 @@
         - 122 # rls2101.rel NDRPDR iter NAT env 6
         - 123 # rls2101.rel NDRPDR iter NAT env 6
         - 124 # rls2101.rel NDRPDR iter NAT env 6
-#         - 125 # rls2101.rel NDRPDR iter NAT env 6
+        - 125 # rls2101.rel NDRPDR iter NAT env 6
     vpp-compare-testbeds-skx-clx-cmp:
       csit-vpp-perf-report-iterative-2101-2n-clx:
         - 54  # rls2101.rel NDRPDR iter env 6
@@ -1982,11 +1998,11 @@
         - 114 # rls2101.rel NDRPDR iter NAT env 6
         - 115 # rls2101.rel NDRPDR iter NAT env 6
         - 116 # rls2101.rel NDRPDR iter NAT env 6
-#         - 117 # rls2101.rel NDRPDR iter NAT env 6
+        - 117 # rls2101.rel NDRPDR iter NAT env 6
         - 118 # rls2101.rel NDRPDR iter NAT env 6
         - 119 # rls2101.rel NDRPDR iter NAT env 6
         - 120 # rls2101.rel NDRPDR iter NAT env 6
-#         - 121 # rls2101.rel NDRPDR iter NAT env 6
+        - 121 # rls2101.rel NDRPDR iter NAT env 6
 
     vpp-compare-testbeds-hsw-clx-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
@@ -2036,11 +2052,11 @@
         - 114 # rls2101.rel NDRPDR iter NAT env 6
         - 115 # rls2101.rel NDRPDR iter NAT env 6
         - 116 # rls2101.rel NDRPDR iter NAT env 6
-#         - 117 # rls2101.rel NDRPDR iter NAT env 6
+        - 117 # rls2101.rel NDRPDR iter NAT env 6
         - 118 # rls2101.rel NDRPDR iter NAT env 6
         - 119 # rls2101.rel NDRPDR iter NAT env 6
         - 120 # rls2101.rel NDRPDR iter NAT env 6
-#         - 121 # rls2101.rel NDRPDR iter NAT env 6
+        - 121 # rls2101.rel NDRPDR iter NAT env 6
 
     vpp-compare-testbeds-mrr-ref:
       csit-vpp-perf-report-iterative-2101-3n-hsw:
@@ -3194,8 +3210,8 @@
       - 7   # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-02
 #       - 17  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-03
       - 18  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-04
-#       - 19  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-05
-#       - 20  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-06
+      - 19  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-05
+      - 20  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-06
       - 12  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4-06
       - 13  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4tun-00
       - 26  # rls2101.rel NDRPDR cov env 6 3n-skx-ip4tun-01
@@ -3218,7 +3234,7 @@
       - 38  # rls2101.rel NDRPDR cov env 6 3n-skx-srv6-00
       - 39  # rls2101.rel NDRPDR cov env 6 3n-skx-srv6-01
 #       - 40  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-00
-#       - 41  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-01
+      - 41  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-01
       - 42  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-02
       - 43  # rls2101.rel NDRPDR cov env 6 3n-skx-vhost-03
 
@@ -3297,7 +3313,7 @@
       - 122 # rls2101.rel NDRPDR iter NAT env 6
       - 123 # rls2101.rel NDRPDR iter NAT env 6
       - 124 # rls2101.rel NDRPDR iter NAT env 6
-#       - 125 # rls2101.rel NDRPDR iter NAT env 6
+      - 125 # rls2101.rel NDRPDR iter NAT env 6
       - 65  # rls2101.rel MRR nf-density iter env 6
       - 67  # rls2101.rel NDRPDR nf-density iter env 6
       - 72  # rls2101.rel NDRPDR nf-density iter env 6
@@ -3413,11 +3429,11 @@
       - 114 # rls2101.rel NDRPDR iter NAT env 6
       - 115 # rls2101.rel NDRPDR iter NAT env 6
       - 116 # rls2101.rel NDRPDR iter NAT env 6
-#       - 117 # rls2101.rel NDRPDR iter NAT env 6
+      - 117 # rls2101.rel NDRPDR iter NAT env 6
       - 118 # rls2101.rel NDRPDR iter NAT env 6
       - 119 # rls2101.rel NDRPDR iter NAT env 6
       - 120 # rls2101.rel NDRPDR iter NAT env 6
-#       - 121 # rls2101.rel NDRPDR iter NAT env 6
+      - 121 # rls2101.rel NDRPDR iter NAT env 6
       - 72  # rls2101.rel MRR nf-density iter env 6
       - 57  # rls2101.rel NDRPDR nf-density iter env 6
       - 62  # rls2101.rel NDRPDR nf-density iter env 6
@@ -3502,6 +3518,24 @@
       - 50  # rls2101.rel NDRPDR iter RND env 6
       - 51  # rls2101.rel NDRPDR iter RND env 6
       - 52  # rls2101.rel NDRPDR iter RND env 6
+    csit-vpp-perf-report-coverage-2101-2n-zn2:
+      - 1   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-00
+      - 2   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-01
+      - 3   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-02
+#       - 4   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-03
+      - 5   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-04
+      - 6   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4-05
+      - 17  # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4tun-00
+#       - 18  # rls2101.rel NDRPDR cov env 6 2n-zn2-ip4tun-01
+      - 8   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip6-00
+      - 9   # rls2101.rel NDRPDR cov env 6 2n-zn2-ip6-01
+      - 10  # rls2101.rel NDRPDR cov env 6 2n-zn2-l2-00
+      - 11  # rls2101.rel NDRPDR cov env 6 2n-zn2-l2-01
+      - 12  # rls2101.rel NDRPDR cov env 6 2n-zn2-lb-00
+      - 13  # rls2101.rel NDRPDR cov env 6 2n-zn2-memif-00
+      - 14  # rls2101.rel NDRPDR cov env 6 2n-zn2-vhost-00
+      - 15  # rls2101.rel NDRPDR cov env 6 2n-zn2-vhost-00
+#       - 16  # rls2101.rel NDRPDR cov env 6 2n-zn2-vts-00
 
     csit-vpp-perf-report-iterative-2009-3n-tsh:
       - 8   # rls2005 NDRPDR iter env 5
@@ -3908,8 +3942,8 @@
   format:
     html:
     - full
-#     pdf:
-#     - minimal
+    pdf:
+    - minimal
 
 ################################################################################
 ###                               T A B L E S                                ###
Integration tests