Code Review / csit.git / blobdiff
? search:
summary | shortlog | log | commit | commitdiff | review | tree
raw | inline | side by side
Report: Add rc1, dpdk, re-test data
[csit.git] / resources / tools / presentation / specifications / report / data_sets.yaml
diff --git a/resources/tools/presentation/specifications/report/data_sets.yaml b/resources/tools/presentation/specifications/report/data_sets.yaml
index b291df1..5aae6f7 100644 (file)
--- a/resources/tools/presentation/specifications/report/data_sets.yaml
+++ b/resources/tools/presentation/specifications/report/data_sets.yaml
@@ -45,8 +45,10 @@
       - 7   # rls2202.rel NDRPDR iter env 10
       - 8   # rls2202.rel NDRPDR iter env 10
       - 9   # rls2202.rel NDRPDR iter env 10
+      - 10  # rls2202.rel NDRPDR iter env 10
       - 11  # rls2202.rel NDRPDR iter env 10
       - 12  # rls2202.rel NDRPDR iter env 10
+      - 13  # rls2202.rel NDRPDR iter env 10
       - 14  # rls2202.rel NDRPDR iter env 10
 
   vpp-3n-skx-curr-iter:
@@ -99,13 +101,10 @@
       - 46  # rls2202.rel hoststack iter env 9
       - 47  # rls2202.rel hoststack iter env 9
 
-  vpp-3n-skx-prev-iter-hoststack-new-env:
-    csit-vpp-perf-report-iterative-2206-3n-skx:
-      - 3   # rls2206.rc1 hoststack iter env 10
-
   vpp-3n-skx-curr-iter-hoststack:
     csit-vpp-perf-report-iterative-2206-3n-skx:
-      - 3   # rls2206.rc1 hoststack iter env 10
+      - 15  # rls2206.rc1 hoststack iter env 10
+      - 16  # rls2206.rc1 hoststack iter env 10
 
   vpp-3n-skx-curr-cov:
     # csit-vpp-perf-report-coverage-2206-3n-skx:
@@ -189,11 +188,13 @@
       - 10  # rls2202.rel NDRPDR iter env 10
       - 11  # rls2202.rel NDRPDR iter env 10
       - 12  # rls2202.rel NDRPDR iter env 10
+      - 13  # rls2202.rel NDRPDR iter env 10
       - 14  # rls2202.rel NDRPDR iter env 10
       - 15  # rls2202.rel NDRPDR iter env 10
       - 16  # rls2202.rel NDRPDR iter env 10
       - 17  # rls2202.rel NDRPDR iter env 10
       - 18  # rls2202.rel NDRPDR iter env 10
+      - 19  # rls2202.rel NDRPDR iter env 10
 
   vpp-2n-skx-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-skx:
@@ -375,10 +376,14 @@
     csit-vpp-perf-report-iterative-2206-2n-zn2:
       - 6   # rls2202.rel NDRPDR iter env 10
       - 7   # rls2202.rel NDRPDR iter env 10
+      - 19  # rls2202.rel NDRPDR iter env 10
+      - 24  # rls2202.rel NDRPDR iter env 10
+      - 25  # rls2202.rel NDRPDR iter env 10
+      - 28  # rls2202.rel NDRPDR iter env 10
 
   vpp-2n-zn2-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-zn2:
-      - 2   # rls2206.rc1 NDRPDR iter env 10
+      - 17  # rls2206.rc1 NDRPDR iter env 10
 
   vpp-2n-zn2-curr-iter-best:
     csit-vpp-perf-report-iterative-2206-2n-zn2:
@@ -398,7 +403,7 @@
 
   vpp-2n-zn2-prev-iter-mrr-new-env:
     csit-vpp-perf-report-iterative-2206-2n-zn2:
-      - 5   # rls2202.rel MRR iter env 10
+      - 22  # rls2202.rel MRR iter env 10
 
   vpp-2n-zn2-curr-iter-mrr:
     csit-vpp-perf-report-iterative-2206-2n-zn2:
@@ -447,6 +452,7 @@
       - 9   # rls2206 NDRPDR iter env 10
       - 10  # rls2206 NDRPDR iter env 10
       - 12  # rls2206 NDRPDR iter env 10
+      - 13  # rls2206 NDRPDR iter env 10
 
   dpdk-2n-zn2-curr-iter-best:
     csit-dpdk-perf-report-iterative-2206-2n-zn2:
@@ -486,6 +492,12 @@
       - 14  # rls2202.rel NDRPDR iter env 10
       - 16  # rls2202.rel NDRPDR iter env 10
       - 17  # rls2202.rel NDRPDR iter env 10
+      - 18  # rls2202.rel NDRPDR iter env 10
+      - 20  # rls2202.rel NDRPDR iter env 10
+      - 21  # rls2202.rel NDRPDR iter env 10
+      - 23  # rls2202.rel NDRPDR iter env 10
+      - 24  # rls2202.rel NDRPDR iter env 10
+      - 25  # rls2202.rel NDRPDR iter env 10
 
   vpp-2n-clx-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-clx:
@@ -610,10 +622,13 @@
       - 1   # rls2206 NDRPDR iter env 10
       - 2   # rls2206 NDRPDR iter env 10
       - 3   # rls2206 NDRPDR iter env 10
+      - 4   # rls2206 NDRPDR iter env 10
       - 5   # rls2206 NDRPDR iter env 10
       - 6   # rls2206 NDRPDR iter env 10
       - 7   # rls2206 NDRPDR iter env 10
+      - 8   # rls2206 NDRPDR iter env 10
       - 10  # rls2206 NDRPDR iter env 10
+      - 11  # rls2206 NDRPDR iter env 10
 
   dpdk-2n-clx-curr-iter-best:
     csit-dpdk-perf-report-iterative-2206-2n-clx:
@@ -652,6 +667,13 @@
       - 4   # rls2202.rel NDRPDR iter env 10
       - 5   # rls2202.rel NDRPDR iter env 10
       - 6   # rls2202.rel NDRPDR iter env 10
+      - 9   # rls2202.rel NDRPDR iter env 10
+      - 12  # rls2202.rel NDRPDR iter env 10
+      - 14  # rls2202.rel NDRPDR iter env 10
+      - 15  # rls2202.rel NDRPDR iter env 10
+      - 16  # rls2202.rel NDRPDR iter env 10
+      - 17  # rls2202.rel NDRPDR iter env 10
+      - 18  # rls2202.rel NDRPDR iter env 10
 
   vpp-3n-tsh-curr-iter:
     csit-vpp-perf-report-iterative-2206-3n-tsh:
@@ -759,6 +781,13 @@
       - 4   # rls2202.rel NDRPDR iter env 10
       - 5   # rls2202.rel NDRPDR iter env 10
       - 7   # rls2202.rel NDRPDR iter env 10
+      - 9   # rls2202.rel NDRPDR iter env 10
+      - 13  # rls2202.rel NDRPDR iter env 10
+      - 14  # rls2202.rel NDRPDR iter env 10
+      - 15  # rls2202.rel NDRPDR iter env 10
+      # - 16  # rls2202.rel NDRPDR iter env 10
+      - 17  # rls2202.rel NDRPDR iter env 10
+      - 18  # rls2202.rel NDRPDR iter env 10
 
   vpp-2n-tx2-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-tx2:
@@ -1021,62 +1050,62 @@
     csit-vpp-perf-report-coverage-2202-2n-aws:
       - 1   # rls2202.rel NDRPDR cov env 9
 
-  # 3n-aws
-
-  vpp-3n-aws-hist-iter:
-    csit-vpp-perf-report-iterative-2110-3n-aws:
-      - 34  # rls2110.rel NDRPDR iter env 8
-      - 35  # rls2110.rel NDRPDR iter env 8
-      - 36  # rls2110.rel NDRPDR iter env 8
-      - 37  # rls2110.rel NDRPDR iter env 8
-      - 38  # rls2110.rel NDRPDR iter env 8
-      - 39  # rls2110.rel NDRPDR iter env 8
-      - 40  # rls2110.rel NDRPDR iter env 8
-      - 41  # rls2110.rel NDRPDR iter env 8
-      - 42  # rls2110.rel NDRPDR iter env 8
-      - 43  # rls2110.rel NDRPDR iter env 8
-
-  vpp-3n-aws-prev-iter:
-    csit-vpp-perf-report-iterative-2202-3n-aws:
-      - 12  # rls2202.rel NDRPDR iter env 9
-      - 13  # rls2202.rel NDRPDR iter env 9
-      - 14  # rls2202.rel NDRPDR iter env 9
-      - 16  # rls2202.rel NDRPDR iter env 9
-      - 17  # rls2202.rel NDRPDR iter env 9
-      - 18  # rls2202.rel NDRPDR iter env 9
-      - 19  # rls2202.rel NDRPDR iter env 9
-      - 20  # rls2202.rel NDRPDR iter env 9
-      - 21  # rls2202.rel NDRPDR iter env 9
-      - 22  # rls2202.rel NDRPDR iter env 9
-
-  vpp-3n-aws-curr-iter:
-    # csit-vpp-perf-report-iterative-2206-3n-aws:
-    csit-vpp-perf-report-iterative-2202-3n-aws:
-      - 12  # rls2202.rel NDRPDR iter env 9
-
-  vpp-3n-aws-curr-iter-best:
-    # csit-vpp-perf-report-iterative-2206-3n-aws:
-    csit-vpp-perf-report-iterative-2202-3n-aws:
-      - 12  # rls2202.rel NDRPDR iter env 9
-
-  vpp-3n-aws-hist-iter-mrr:
-    csit-vpp-perf-report-iterative-2110-3n-aws:
-      - 33  # rls2110.rel MRR iter env 8
-
-  vpp-3n-aws-prev-iter-mrr:
-    csit-vpp-perf-report-iterative-2202-3n-aws:
-      - 11  # rls2202.rel MRR iter env 9
-
-  vpp-3n-aws-curr-iter-mrr:
-    # csit-vpp-perf-report-iterative-2206-3n-aws:
-    csit-vpp-perf-report-iterative-2202-3n-aws:
-      - 11  # rls2202.rel MRR iter env 9
-
-  vpp-3n-aws-curr-cov:
-    # csit-vpp-perf-report-coverage-2206-3n-aws:
-    # csit-vpp-perf-report-iterative-2206-3n-aws:
-    csit-vpp-perf-report-coverage-2202-3n-aws:
-      - 1   # rls2202.rel NDRPDR cov env 9
+  # # 3n-aws
+
+  # vpp-3n-aws-hist-iter:
+  #   csit-vpp-perf-report-iterative-2110-3n-aws:
+  #     - 34  # rls2110.rel NDRPDR iter env 8
+  #     - 35  # rls2110.rel NDRPDR iter env 8
+  #     - 36  # rls2110.rel NDRPDR iter env 8
+  #     - 37  # rls2110.rel NDRPDR iter env 8
+  #     - 38  # rls2110.rel NDRPDR iter env 8
+  #     - 39  # rls2110.rel NDRPDR iter env 8
+  #     - 40  # rls2110.rel NDRPDR iter env 8
+  #     - 41  # rls2110.rel NDRPDR iter env 8
+  #     - 42  # rls2110.rel NDRPDR iter env 8
+  #     - 43  # rls2110.rel NDRPDR iter env 8
+
+  # vpp-3n-aws-prev-iter:
+  #   csit-vpp-perf-report-iterative-2202-3n-aws:
+  #     - 12  # rls2202.rel NDRPDR iter env 9
+  #     - 13  # rls2202.rel NDRPDR iter env 9
+  #     - 14  # rls2202.rel NDRPDR iter env 9
+  #     - 16  # rls2202.rel NDRPDR iter env 9
+  #     - 17  # rls2202.rel NDRPDR iter env 9
+  #     - 18  # rls2202.rel NDRPDR iter env 9
+  #     - 19  # rls2202.rel NDRPDR iter env 9
+  #     - 20  # rls2202.rel NDRPDR iter env 9
+  #     - 21  # rls2202.rel NDRPDR iter env 9
+  #     - 22  # rls2202.rel NDRPDR iter env 9
+
+  # vpp-3n-aws-curr-iter:
+  #   # csit-vpp-perf-report-iterative-2206-3n-aws:
+  #   csit-vpp-perf-report-iterative-2202-3n-aws:
+  #     - 12  # rls2202.rel NDRPDR iter env 9
+
+  # vpp-3n-aws-curr-iter-best:
+  #   # csit-vpp-perf-report-iterative-2206-3n-aws:
+  #   csit-vpp-perf-report-iterative-2202-3n-aws:
+  #     - 12  # rls2202.rel NDRPDR iter env 9
+
+  # vpp-3n-aws-hist-iter-mrr:
+  #   csit-vpp-perf-report-iterative-2110-3n-aws:
+  #     - 33  # rls2110.rel MRR iter env 8
+
+  # vpp-3n-aws-prev-iter-mrr:
+  #   csit-vpp-perf-report-iterative-2202-3n-aws:
+  #     - 11  # rls2202.rel MRR iter env 9
+
+  # vpp-3n-aws-curr-iter-mrr:
+  #   # csit-vpp-perf-report-iterative-2206-3n-aws:
+  #   csit-vpp-perf-report-iterative-2202-3n-aws:
+  #     - 11  # rls2202.rel MRR iter env 9
+
+  # vpp-3n-aws-curr-cov:
+  #   # csit-vpp-perf-report-coverage-2206-3n-aws:
+  #   # csit-vpp-perf-report-iterative-2206-3n-aws:
+  #   csit-vpp-perf-report-coverage-2202-3n-aws:
+  #     - 1   # rls2202.rel NDRPDR cov env 9
 
   # 2n-icx
 
@@ -1099,6 +1128,11 @@
   vpp-2n-icx-prev-iter-new-env:
     csit-vpp-perf-report-iterative-2206-2n-icx:
       - 10  # rls2202.rel NDRPDR iter env 10
+      - 15  # rls2202.rel NDRPDR iter env 10
+      - 16  # rls2202.rel NDRPDR iter env 10
+      - 20  # rls2202.rel NDRPDR iter env 10
+      - 21  # rls2202.rel NDRPDR iter env 10
+      - 24  # rls2202.rel NDRPDR iter env 10
 
   vpp-2n-icx-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-icx:
@@ -1168,16 +1202,13 @@
 
   dpdk-2n-icx-curr-iter:
     csit-dpdk-perf-report-iterative-2206-2n-icx:
-      # - 1   # rls2206 NDRPDR iter env 10
+      - 1   # rls2206 NDRPDR iter env 10
       - 2   # rls2206 NDRPDR iter env 10
       - 3   # rls2206 NDRPDR iter env 10
-      # - 4   # rls2206 NDRPDR iter env 10
       - 5   # rls2206 NDRPDR iter env 10
-      # - 6   # rls2206 NDRPDR iter env 10
-      # - 7   # rls2206 NDRPDR iter env 10
-      # - 8   # rls2206 NDRPDR iter env 10
+      - 7   # rls2206 NDRPDR iter env 10
       - 9   # rls2206 NDRPDR iter env 10
-      # - 10  # rls2206 NDRPDR iter env 10
+      - 11  # rls2206 NDRPDR iter env 10
 
   dpdk-2n-icx-curr-iter-best:
     csit-dpdk-perf-report-iterative-2206-2n-icx:
@@ -1206,7 +1237,13 @@
       - 4   # rls2202.rel NDRPDR iter env 10
       - 5   # rls2202.rel NDRPDR iter env 10
       - 6   # rls2202.rel NDRPDR iter env 10
+      - 7   # rls2202.rel NDRPDR iter env 10
       - 8   # rls2202.rel NDRPDR iter env 10
+      - 9   # rls2202.rel NDRPDR iter env 10
+      - 13  # rls2202.rel NDRPDR iter env 10
+      - 14  # rls2202.rel NDRPDR iter env 10
+      - 15  # rls2202.rel NDRPDR iter env 10
+      - 16  # rls2202.rel NDRPDR iter env 10
 
   vpp-3n-icx-curr-iter:
     csit-vpp-perf-report-iterative-2206-3n-icx:
@@ -1263,3 +1300,39 @@
   dpdk-3n-icx-curr-iter-best:
     csit-dpdk-perf-report-iterative-2206-3n-icx:
       - 1   # rls2206 NDRPDR iter env 10
+
+  # 3n-alt
+
+  vpp-3n-alt-curr-iter:
+    csit-vpp-perf-report-iterative-2206-3n-alt:
+      - 2   # rls2206.rc1 NDRPDR iter env 10
+
+  vpp-3n-alt-curr-iter-best:
+    csit-vpp-perf-report-iterative-2206-3n-alt:
+      - 2   # rls2206.rc1 NDRPDR iter env 10
+
+  vpp-3n-alt-curr-iter-mrr:
+    csit-vpp-perf-report-iterative-2206-3n-alt:
+      - 1   # rls2206.rc1 MRR iter env 10
+
+  vpp-3n-alt-curr-cov:
+    # csit-vpp-perf-report-coverage-2206-3n-alt:
+    csit-vpp-perf-report-iterative-2206-3n-alt:
+      - 2   # rls2206.rc1 NDRPDR iter env 10
+
+  dpdk-3n-alt-curr-iter:
+    csit-dpdk-perf-report-iterative-2206-3n-alt:
+      - 1   # rls2206 NDRPDR iter env 10
+      - 2   # rls2206 NDRPDR iter env 10
+      - 3   # rls2206 NDRPDR iter env 10
+      - 4   # rls2206 NDRPDR iter env 10
+      - 5   # rls2206 NDRPDR iter env 10
+      - 6   # rls2206 NDRPDR iter env 10
+      - 7   # rls2206 NDRPDR iter env 10
+      - 8   # rls2206 NDRPDR iter env 10
+      - 9   # rls2206 NDRPDR iter env 10
+      - 10  # rls2206 NDRPDR iter env 10
+
+  dpdk-3n-alt-curr-iter-best:
+    csit-dpdk-perf-report-iterative-2206-3n-alt:
+      - 1   # rls2206 NDRPDR iter env 10
Integration tests