Code Review / csit.git / blobdiff
? search:
summary | shortlog | log | commit | commitdiff | review | tree
raw | inline | side by side
Report: Add NAT44 tests
[csit.git] / resources / tools / presentation / specifications / report / data_sets.yaml
diff --git a/resources/tools/presentation/specifications/report/data_sets.yaml b/resources/tools/presentation/specifications/report/data_sets.yaml
index 7e8a5b6..5c71340 100644 (file)
--- a/resources/tools/presentation/specifications/report/data_sets.yaml
+++ b/resources/tools/presentation/specifications/report/data_sets.yaml
@@ -243,6 +243,16 @@
       - 17  # rls2202.rel NDRPDR iter env 10
       - 18  # rls2202.rel NDRPDR iter env 10
       - 19  # rls2202.rel NDRPDR iter env 10
+      - 100 # rls2202.rel NDRPDR iter env 10 NA44
+      - 101 # rls2202.rel NDRPDR iter env 10 NA44
+      - 102 # rls2202.rel NDRPDR iter env 10 NA44
+      - 103 # rls2202.rel NDRPDR iter env 10 NA44
+      - 104 # rls2202.rel NDRPDR iter env 10 NA44
+      - 105 # rls2202.rel NDRPDR iter env 10 NA44
+      - 106 # rls2202.rel NDRPDR iter env 10 NA44
+      - 107 # rls2202.rel NDRPDR iter env 10 NA44
+      - 108 # rls2202.rel NDRPDR iter env 10 NA44
+      - 109 # rls2202.rel NDRPDR iter env 10 NA44
 
   vpp-2n-skx-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-skx:
@@ -256,6 +266,16 @@
       - 77  # rls2206.rel NDRPDR iter env 10
       - 79  # rls2206.rel NDRPDR iter env 10
       - 80  # rls2206.rel NDRPDR iter env 10
+      - 89  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 90  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 91  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 92  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 93  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 94  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 95  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 96  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 97  # rls2206.rel NDRPDR iter env 10 NAT44
+      - 98  # rls2206.rel NDRPDR iter env 10 NAT44
 
   vpp-2n-skx-curr-iter-best:
     csit-vpp-perf-report-iterative-2206-2n-skx:
@@ -272,10 +292,12 @@
   vpp-2n-skx-prev-iter-mrr-new-env:
     csit-vpp-perf-report-iterative-2202-2n-skx:
       - 9   # rls2202.rel MRR iter env 10
+      - 99  # rls2202.rel MRR iter env 10 NAT44
 
   vpp-2n-skx-curr-iter-mrr:
     csit-vpp-perf-report-iterative-2206-2n-skx:
       - 49  # rls2206.rel MRR iter env 10
+      - 88  # rls2206.rel MRR iter env 10 NAT44
 
   vpp-2n-skx-curr-soak:
     csit-vpp-perf-report-iterative-2206-2n-skx:
@@ -496,15 +518,15 @@
   vpp-2n-zn2-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-zn2:
       - 47  # rls2206.rel NDRPDR iter env 10
-      # - 48  # rls2206.rel NDRPDR iter env 10
+      - 48  # rls2206.rel NDRPDR iter env 10
       - 49  # rls2206.rel NDRPDR iter env 10
       - 50  # rls2206.rel NDRPDR iter env 10
       - 51  # rls2206.rel NDRPDR iter env 10
       - 52  # rls2206.rel NDRPDR iter env 10
       - 53  # rls2206.rel NDRPDR iter env 10
       - 54  # rls2206.rel NDRPDR iter env 10
-      # - 55  # rls2206.rel NDRPDR iter env 10
-      # - 56  # rls2206.rel NDRPDR iter env 10
+      - 55  # rls2206.rel NDRPDR iter env 10
+      - 56  # rls2206.rel NDRPDR iter env 10
 
   vpp-2n-zn2-curr-iter-best:
     csit-vpp-perf-report-iterative-2206-2n-zn2:
@@ -532,21 +554,21 @@
 
   vpp-2n-zn2-curr-cov:
     csit-vpp-perf-report-coverage-2206-2n-zn2:
-      # - 1   # rls2206.rel NDRPDR cov env 10
+      - 1   # rls2206.rel NDRPDR cov env 10
       - 2   # rls2206.rel NDRPDR cov env 10
       - 3   # rls2206.rel NDRPDR cov env 10
-      # - 4   # rls2206.rel NDRPDR cov env 10
+      - 4   # rls2206.rel NDRPDR cov env 10
       - 5   # rls2206.rel NDRPDR cov env 10
       - 6   # rls2206.rel NDRPDR cov env 10
       - 7   # rls2206.rel NDRPDR cov env 10
-      # - 8   # rls2206.rel NDRPDR cov env 10
+      - 8   # rls2206.rel NDRPDR cov env 10
       - 9   # rls2206.rel NDRPDR cov env 10
-      # - 10  # rls2206.rel NDRPDR cov env 10
+      - 10  # rls2206.rel NDRPDR cov env 10
       - 11  # rls2206.rel NDRPDR cov env 10
       - 12  # rls2206.rel NDRPDR cov env 10
-      # - 13  # rls2206.rel NDRPDR cov env 10
-      # - 14  # rls2206.rel NDRPDR cov env 10
-      # - 15  # rls2206.rel NDRPDR cov env 10
+      - 13  # rls2206.rel NDRPDR cov env 10
+      - 14  # rls2206.rel NDRPDR cov env 10
+      - 15  # rls2206.rel NDRPDR cov env 10
 
   dpdk-2n-zn2-hist-iter:
     csit-dpdk-perf-report-iterative-2110-2n-zn2:
@@ -631,6 +653,16 @@
       - 94  # rls2202.rel NDRPDR iter env 10
       - 95  # rls2202.rel NDRPDR iter env 10
       - 96  # rls2202.rel NDRPDR iter env 10
+      - 161 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 162 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 163 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 164 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 165 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 166 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 167 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 168 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 169 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 170 # rls2202.rel NDRPDR iter env 10 NAT44
 
   vpp-2n-clx-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-clx:
@@ -644,6 +676,16 @@
       - 126 # rls2206.rel NDRPDR iter env 10
       - 129 # rls2206.rel NDRPDR iter env 10
       - 130 # rls2206.rel NDRPDR iter env 10
+      - 150 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 151 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 152 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 153 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 154 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 155 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 156 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 157 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 158 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 159 # rls2206.rel NDRPDR iter env 10 NAT44
 
   vpp-2n-clx-curr-iter-best:
     csit-vpp-perf-report-iterative-2206-2n-clx:
@@ -660,10 +702,12 @@
   vpp-2n-clx-prev-iter-mrr-new-env:
     csit-vpp-perf-report-iterative-2206-2n-clx:
       - 43  # rls2202.rel MRR iter env 10
+      - 160 # rls2202.rel MRR iter env 10 NAT44
 
   vpp-2n-clx-curr-iter-mrr:
     csit-vpp-perf-report-iterative-2206-2n-clx:
       - 97  # rls2206.rel MRR iter env 10
+      - 149 # rls2206.rel MRR iter env 10 NAT44
 
   vpp-2n-clx-curr-iter-gso:
     csit-vpp-perf-report-iterative-2206-2n-clx:
@@ -1411,6 +1455,16 @@
       - 114 # rls2202.rel NDRPDR iter env 10
       - 115 # rls2202.rel NDRPDR iter env 10
       - 116 # rls2202.rel NDRPDR iter env 10
+      - 129 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 130 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 131 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 132 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 133 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 134 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 135 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 136 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 137 # rls2202.rel NDRPDR iter env 10 NAT44
+      - 138 # rls2202.rel NDRPDR iter env 10 NAT44
 
   vpp-2n-icx-curr-iter:
     csit-vpp-perf-report-iterative-2206-2n-icx:
@@ -1424,6 +1478,16 @@
       - 100 # rls2206.rel NDRPDR iter env 10
       - 102 # rls2206.rel NDRPDR iter env 10
       - 103 # rls2206.rel NDRPDR iter env 10
+      - 118 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 119 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 120 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 121 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 122 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 123 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 124 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 125 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 126 # rls2206.rel NDRPDR iter env 10 NAT44
+      - 127 # rls2206.rel NDRPDR iter env 10 NAT44
 
   vpp-2n-icx-curr-iter-best:
     csit-vpp-perf-report-iterative-2206-2n-icx:
@@ -1436,10 +1500,12 @@
   vpp-2n-icx-prev-iter-mrr-new-env:
     csit-vpp-perf-report-iterative-2206-2n-icx:
       - 106 # rls2202.rel MRR iter env 10
+      - 128 # rls2202.rel MRR iter env 10 NAT44
 
   vpp-2n-icx-curr-iter-mrr:
     csit-vpp-perf-report-iterative-2206-2n-icx:
       - 68  # rls2206.rel MRR iter env 10
+      - 117 # rls2206.rel MRR iter env 10 NAT44
 
   vpp-2n-icx-curr-nfv-ndrpdr:
     csit-vpp-perf-report-iterative-2206-2n-icx:
@@ -1577,14 +1643,14 @@
   vpp-3n-icx-prev-iter-new-env:
     csit-vpp-perf-report-iterative-2206-3n-icx:
       - 60  # rls2202.rel NDRPDR iter env 10
-      # - 61  # rls2202.rel NDRPDR iter env 10
+      - 61  # rls2202.rel NDRPDR iter env 10
       - 62  # rls2202.rel NDRPDR iter env 10
       - 63  # rls2202.rel NDRPDR iter env 10
       - 64  # rls2202.rel NDRPDR iter env 10
       - 65  # rls2202.rel NDRPDR iter env 10
       - 66  # rls2202.rel NDRPDR iter env 10
       - 67  # rls2202.rel NDRPDR iter env 10
-      # - 68  # rls2202.rel NDRPDR iter env 10
+      - 68  # rls2202.rel NDRPDR iter env 10
       - 69  # rls2202.rel NDRPDR iter env 10
 
   vpp-3n-icx-curr-iter:
@@ -1695,9 +1761,9 @@
       - 23  # rls2206.rel NDRPDR iter env 10
       - 24  # rls2206.rel NDRPDR iter env 10
       - 25  # rls2206.rel NDRPDR iter env 10
-      # - 26  # rls2206.rel NDRPDR iter env 10
-      # - 27  # rls2206.rel NDRPDR iter env 10
-      # - 28  # rls2206.rel NDRPDR iter env 10
+      - 26  # rls2206.rel NDRPDR iter env 10
+      - 27  # rls2206.rel NDRPDR iter env 10
+      - 28  # rls2206.rel NDRPDR iter env 10
       - 29  # rls2206.rel NDRPDR iter env 10
 
   vpp-3n-alt-curr-iter-best:
@@ -1710,23 +1776,23 @@
 
   vpp-3n-alt-curr-cov:
     csit-vpp-perf-report-coverage-2206-3n-alt:
-      # - 1   # rls2206.rel NDRPDR iter env 10
+      - 1   # rls2206.rel NDRPDR iter env 10
       - 2   # rls2206.rel NDRPDR iter env 10
       - 3   # rls2206.rel NDRPDR iter env 10
-      # - 4   # rls2206.rel NDRPDR iter env 10
+      - 4   # rls2206.rel NDRPDR iter env 10
       - 5   # rls2206.rel NDRPDR iter env 10
       - 6   # rls2206.rel NDRPDR iter env 10
-      # - 7   # rls2206.rel NDRPDR iter env 10
-      # - 8   # rls2206.rel NDRPDR iter env 10
-      # - 9   # rls2206.rel NDRPDR iter env 10
+      - 7   # rls2206.rel NDRPDR iter env 10
+      - 8   # rls2206.rel NDRPDR iter env 10
+      - 9   # rls2206.rel NDRPDR iter env 10
       - 10  # rls2206.rel NDRPDR iter env 10
       - 11  # rls2206.rel NDRPDR iter env 10
-      # - 12  # rls2206.rel NDRPDR iter env 10
-      # - 13  # rls2206.rel NDRPDR iter env 10
-      # - 14  # rls2206.rel NDRPDR iter env 10
-      # - 15  # rls2206.rel NDRPDR iter env 10
-      # - 16  # rls2206.rel NDRPDR iter env 10
-      # - 17  # rls2206.rel NDRPDR iter env 10
+      - 12  # rls2206.rel NDRPDR iter env 10
+      - 13  # rls2206.rel NDRPDR iter env 10
+      - 14  # rls2206.rel NDRPDR iter env 10
+      - 15  # rls2206.rel NDRPDR iter env 10
+      - 16  # rls2206.rel NDRPDR iter env 10
+      - 17  # rls2206.rel NDRPDR iter env 10
 
   dpdk-3n-alt-curr-iter:
     csit-dpdk-perf-report-iterative-2206-3n-alt:
Integration tests