Code Review / csit.git / commitdiff
? search:
summary | shortlog | log | commit | commitdiff | review | tree
raw | patch | inline | side by side (parent: 154f6b2)
Report: Add data 03/34203/1
authorTibor Frank <tifrank@cisco.com>
Fri, 22 Oct 2021 07:56:01 +0000 (09:56 +0200)
committerTibor Frank <tifrank@cisco.com>
Fri, 22 Oct 2021 07:56:01 +0000 (09:56 +0200)
Change-Id: I58dbbc6020cd695dc8c81155636fb8375ecd78b8
Signed-off-by: Tibor Frank <tifrank@cisco.com>
resources/tools/presentation/specifications/report/data_sets.yaml patch | blob | history
resources/tools/presentation/specifications/report/elements.yaml patch | blob | history

diff --git a/resources/tools/presentation/specifications/report/data_sets.yaml b/resources/tools/presentation/specifications/report/data_sets.yaml
index 71a2f09..108086b 100644 (file)
--- a/resources/tools/presentation/specifications/report/data_sets.yaml
+++ b/resources/tools/presentation/specifications/report/data_sets.yaml
@@ -94,13 +94,22 @@
       - 2   # rls2110.rc2 NDRPDR cov env 8
       - 3   # rls2110.rc2 NDRPDR cov env 8
       - 4   # rls2110.rc2 NDRPDR cov env 8
       - 2   # rls2110.rc2 NDRPDR cov env 8
       - 3   # rls2110.rc2 NDRPDR cov env 8
       - 4   # rls2110.rc2 NDRPDR cov env 8
-#      - 5   # rls2110.rc2 NDRPDR cov env 8
+      - 5   # rls2110.rc2 NDRPDR cov env 8
       - 6   # rls2110.rc2 NDRPDR cov env 8
       - 7   # rls2110.rc2 NDRPDR cov env 8
       - 8   # rls2110.rc2 NDRPDR cov env 8
       - 6   # rls2110.rc2 NDRPDR cov env 8
       - 7   # rls2110.rc2 NDRPDR cov env 8
       - 8   # rls2110.rc2 NDRPDR cov env 8
+#      - 9   # rls2110.rc2 NDRPDR cov env 8
       - 10  # rls2110.rc2 NDRPDR cov env 8
       - 11  # rls2110.rc2 NDRPDR cov env 8
       - 10  # rls2110.rc2 NDRPDR cov env 8
       - 11  # rls2110.rc2 NDRPDR cov env 8
+      - 12  # rls2110.rc2 NDRPDR cov env 8
+      - 13  # rls2110.rc2 NDRPDR cov env 8
       - 14  # rls2110.rc2 NDRPDR cov env 8
       - 14  # rls2110.rc2 NDRPDR cov env 8
+      - 15  # rls2110.rc2 NDRPDR cov env 8
+      - 16  # rls2110.rc2 NDRPDR cov env 8
+#      - 17  # rls2110.rc2 NDRPDR cov env 8
+      - 18  # rls2110.rc2 NDRPDR cov env 8
+      - 19  # rls2110.rc2 NDRPDR cov env 8
+      - 20  # rls2110.rc2 NDRPDR cov env 8
 
   dpdk-3n-skx-hist-iter:
     csit-dpdk-perf-report-iterative-2101-3n-skx:
 
   dpdk-3n-skx-hist-iter:
     csit-dpdk-perf-report-iterative-2101-3n-skx:
@@ -366,6 +375,10 @@
     csit-trex-perf-report-iterative-2110-2n-skx:
       - 3   # rls2110.rc2 NDRPDR iter env 8
 
     csit-trex-perf-report-iterative-2110-2n-skx:
       - 3   # rls2110.rc2 NDRPDR iter env 8
 
+  trex-2n-skx-curr-cov:
+    csit-trex-perf-report-coverage-2110-2n-skx:
+      - 2   # rls2110.rc2 NDRPDR cov env 8
+
   # 2n-zn2
 
   vpp-2n-zn2-hist-iter-new-env:
   # 2n-zn2
 
   vpp-2n-zn2-hist-iter-new-env:
@@ -420,6 +433,7 @@
       - 20  # rls2106.rel NDRPDR iter env 8
       - 21  # rls2106.rel NDRPDR iter env 8
       - 22  # rls2106.rel NDRPDR iter env 8
       - 20  # rls2106.rel NDRPDR iter env 8
       - 21  # rls2106.rel NDRPDR iter env 8
       - 22  # rls2106.rel NDRPDR iter env 8
+      - 23  # rls2106.rel NDRPDR iter env 8
       - 28  # rls2106.rel NDRPDR iter env 8
       - 31  # rls2106.rel NDRPDR iter env 8
       - 32  # rls2106.rel NDRPDR iter env 8
       - 28  # rls2106.rel NDRPDR iter env 8
       - 31  # rls2106.rel NDRPDR iter env 8
       - 32  # rls2106.rel NDRPDR iter env 8
@@ -661,7 +675,7 @@
 
   vpp-2n-clx-curr-cov:
     csit-vpp-perf-report-coverage-2110-2n-clx:
 
   vpp-2n-clx-curr-cov:
     csit-vpp-perf-report-coverage-2110-2n-clx:
-#      - 1   # rls2110.rc2 NDRPDR cov env 8
+      - 1   # rls2110.rc2 NDRPDR cov env 8
       - 2   # rls2110.rc2 NDRPDR cov env 8
       - 3   # rls2110.rc2 NDRPDR cov env 8
       - 4   # rls2110.rc2 NDRPDR cov env 8
       - 2   # rls2110.rc2 NDRPDR cov env 8
       - 3   # rls2110.rc2 NDRPDR cov env 8
       - 4   # rls2110.rc2 NDRPDR cov env 8
@@ -671,11 +685,11 @@
       - 8   # rls2110.rc2 NDRPDR cov env 8
       - 9   # rls2110.rc2 NDRPDR cov env 8
       - 10  # rls2110.rc2 NDRPDR cov env 8
       - 8   # rls2110.rc2 NDRPDR cov env 8
       - 9   # rls2110.rc2 NDRPDR cov env 8
       - 10  # rls2110.rc2 NDRPDR cov env 8
-#      - 11  # rls2110.rc2 NDRPDR cov env 8
-#      - 12  # rls2110.rc2 NDRPDR cov env 8
+      - 11  # rls2110.rc2 NDRPDR cov env 8
+      - 12  # rls2110.rc2 NDRPDR cov env 8
       - 13  # rls2110.rc2 NDRPDR cov env 8
       - 14  # rls2110.rc2 NDRPDR cov env 8
       - 13  # rls2110.rc2 NDRPDR cov env 8
       - 14  # rls2110.rc2 NDRPDR cov env 8
-#      - 15  # rls2110.rc2 NDRPDR cov env 8
+      - 15  # rls2110.rc2 NDRPDR cov env 8
       - 16  # rls2110.rc2 NDRPDR cov env 8
       - 17  # rls2110.rc2 NDRPDR cov env 8
 
       - 16  # rls2110.rc2 NDRPDR cov env 8
       - 17  # rls2110.rc2 NDRPDR cov env 8
 
@@ -761,6 +775,7 @@
   vpp-3n-tsh-curr-iter:
     csit-vpp-perf-report-iterative-2110-3n-tsh:
       - 25  # rls2110.rc2 NDRPDR iter env 8
   vpp-3n-tsh-curr-iter:
     csit-vpp-perf-report-iterative-2110-3n-tsh:
       - 25  # rls2110.rc2 NDRPDR iter env 8
+      - 26  # rls2110.rc2 NDRPDR cov env 8
       - 27  # rls2110.rc2 NDRPDR iter env 8
       - 28  # rls2110.rc2 NDRPDR iter env 8
       - 29  # rls2110.rc2 NDRPDR iter env 8
       - 27  # rls2110.rc2 NDRPDR iter env 8
       - 28  # rls2110.rc2 NDRPDR iter env 8
       - 29  # rls2110.rc2 NDRPDR iter env 8
@@ -879,6 +894,7 @@
       - 30  # rls2110.rc2 NDRPDR iter env 8
       - 31  # rls2110.rc2 NDRPDR iter env 8
       - 32  # rls2110.rc2 NDRPDR iter env 8
       - 30  # rls2110.rc2 NDRPDR iter env 8
       - 31  # rls2110.rc2 NDRPDR iter env 8
       - 32  # rls2110.rc2 NDRPDR iter env 8
+      - 33  # rls2110.rc2 NDRPDR cov env 8
       - 34  # rls2110.rc2 NDRPDR iter env 8
 
   vpp-2n-tx2-curr-iter-best:
       - 34  # rls2110.rc2 NDRPDR iter env 8
 
   vpp-2n-tx2-curr-iter-best:
@@ -1003,7 +1019,7 @@
     csit-vpp-perf-report-coverage-2110-3n-dnv:
       - 2   # rls2110.rc2 NDRPDR cov env 8
       - 3   # rls2110.rc2 NDRPDR cov env 8
     csit-vpp-perf-report-coverage-2110-3n-dnv:
       - 2   # rls2110.rc2 NDRPDR cov env 8
       - 3   # rls2110.rc2 NDRPDR cov env 8
-#      - 4   # rls2110.rc2 NDRPDR cov env 8
+      - 4   # rls2110.rc2 NDRPDR cov env 8
       - 5   # rls2110.rc2 NDRPDR cov env 8
       - 6   # rls2110.rc2 NDRPDR cov env 8
       - 7   # rls2110.rc2 NDRPDR cov env 8
       - 5   # rls2110.rc2 NDRPDR cov env 8
       - 6   # rls2110.rc2 NDRPDR cov env 8
       - 7   # rls2110.rc2 NDRPDR cov env 8
@@ -1150,6 +1166,7 @@
     csit-vpp-perf-report-iterative-2110-2n-aws:
       - 9   # rls2110.rc2 NDRPDR iter env 8
       - 10  # rls2110.rc2 NDRPDR iter env 8
     csit-vpp-perf-report-iterative-2110-2n-aws:
       - 9   # rls2110.rc2 NDRPDR iter env 8
       - 10  # rls2110.rc2 NDRPDR iter env 8
+#      - 19  # rls2110.rc2 NDRPDR iter env 8
 
   vpp-2n-aws-curr-iter-best:
     csit-vpp-perf-report-iterative-2110-2n-aws:
 
   vpp-2n-aws-curr-iter-best:
     csit-vpp-perf-report-iterative-2110-2n-aws:
@@ -1157,7 +1174,7 @@
 
   vpp-2n-aws-curr-iter-mrr:
     csit-vpp-perf-report-iterative-2110-2n-aws:
 
   vpp-2n-aws-curr-iter-mrr:
     csit-vpp-perf-report-iterative-2110-2n-aws:
-      - 6   # rls2110.rc2 MRR iter env 8
+      - 18  # rls2110.rc2 MRR iter env 8
 
   vpp-2n-aws-curr-cov:
     # csit-vpp-perf-report-coverage-2110-2n-aws:
 
   vpp-2n-aws-curr-cov:
     # csit-vpp-perf-report-coverage-2110-2n-aws:
@@ -1168,21 +1185,21 @@
 
   vpp-3n-aws-curr-iter:
     csit-vpp-perf-report-iterative-2110-3n-aws:
 
   vpp-3n-aws-curr-iter:
     csit-vpp-perf-report-iterative-2110-3n-aws:
-      - 4   # rls2110.rc1 NDRPDR iter env 8
-      - 11  # rls2110.rc1 NDRPDR iter env 8
+      - 24  # rls2110.rc2 NDRPDR iter env 8
+#      - 26  # rls2110.rc2 NDRPDR iter env 8
 
   vpp-3n-aws-curr-iter-best:
     csit-vpp-perf-report-iterative-2110-3n-aws:
 
   vpp-3n-aws-curr-iter-best:
     csit-vpp-perf-report-iterative-2110-3n-aws:
-      - 11  # rls2110.rc1 NDRPDR iter env 8
+      - 24  # rls2110.rc2 NDRPDR iter env 8
 
   vpp-3n-aws-curr-iter-mrr:
     csit-vpp-perf-report-iterative-2110-3n-aws:
 
   vpp-3n-aws-curr-iter-mrr:
     csit-vpp-perf-report-iterative-2110-3n-aws:
-      - 2   # rls2110.rc1 MRR iter env 8
+      - 25  # rls2110.rc2 MRR iter env 8
 
   vpp-3n-aws-curr-cov:
     # csit-vpp-perf-report-coverage-2110-3n-aws:
     csit-vpp-perf-report-iterative-2110-3n-aws:
 
   vpp-3n-aws-curr-cov:
     # csit-vpp-perf-report-coverage-2110-3n-aws:
     csit-vpp-perf-report-iterative-2110-3n-aws:
-      - 11  # rls2110.rc1 NDRPDR iter env 8
+      - 24  # rls2110.rc2 NDRPDR iter env 8
 
   # 2n-icx
 
 
   # 2n-icx
 
diff --git a/resources/tools/presentation/specifications/report/elements.yaml b/resources/tools/presentation/specifications/report/elements.yaml
index a3578b6..f5f8d2c 100644 (file)
--- a/resources/tools/presentation/specifications/report/elements.yaml
+++ b/resources/tools/presentation/specifications/report/elements.yaml
@@ -5844,7 +5844,7 @@
       data: "data name"
     - title: " |prein| Throughput: |br| 1.  Mpps       Gbps (NDR) |br| 2.  Mpps       Gbps (PDR) |br| |br| One-Way Latency Percentiles in uSec at %PDR load, |br| one set per each direction: |br| 3.  P50  P90  P99       P50  P90  P99 (10% PDR) |br| 4.  P50  P90  P99       P50  P90  P99 (50% PDR) |br| 5.  P50  P90  P99       P50  P90  P99 (90% PDR) |preout| "
       data: "data msg"
       data: "data name"
     - title: " |prein| Throughput: |br| 1.  Mpps       Gbps (NDR) |br| 2.  Mpps       Gbps (PDR) |br| |br| One-Way Latency Percentiles in uSec at %PDR load, |br| one set per each direction: |br| 3.  P50  P90  P99       P50  P90  P99 (10% PDR) |br| 4.  P50  P90  P99       P50  P90  P99 (50% PDR) |br| 5.  P50  P90  P99       P50  P90  P99 (90% PDR) |preout| "
       data: "data msg"
-  data: "trex-2n-skx-curr-iter-best"
+  data: "trex-2n-skx-curr-cov"
   filter: "all"
   remove-ndr: False
   parameters:
   filter: "all"
   remove-ndr: False
   parameters:
@@ -6327,7 +6327,7 @@
   algorithm: "file_test_results"
   output-file: "{DIR[DTR,PERF,TREX,2N,SKX]}"
   dir-tables: "{DIR[DTR,PERF,TREX,2N,SKX]}"
   algorithm: "file_test_results"
   output-file: "{DIR[DTR,PERF,TREX,2N,SKX]}"
   dir-tables: "{DIR[DTR,PERF,TREX,2N,SKX]}"
-  data: "trex-2n-skx-curr-iter-best"
+  data: "trex-2n-skx-curr-cov"
   filter: "all"
   data-start-level: 4
 
   filter: "all"
   data-start-level: 4
 
Integration tests