RCA 2005: Update status in RCA files 57/27857/4
authorVratko Polak <vrpolak@cisco.com>
Fri, 10 Jul 2020 19:06:04 +0000 (21:06 +0200)
committerMaciek Konstantynowicz <mkonstan@cisco.com>
Mon, 13 Jul 2020 15:25:33 +0000 (15:25 +0000)
CSIT-1738, CSIT-1740 and CSIT-1741 are now DONE.

Change-Id: Id9b93ace9464a7e6af64f7860ad1a15c7a287a53
Signed-off-by: Vratko Polak <vrpolak@cisco.com>
resources/tools/presentation/rca/rca-2n-clx-2t1c-pdr-rca1.yaml
resources/tools/presentation/rca/rca-2n-skx-2t1c-ndr-rca1.yaml
resources/tools/presentation/rca/rca-2n-skx-2t1c-pdr-rca1.yaml
resources/tools/presentation/rca/rca-3n-skx-2t1c-pdr-rca1.yaml

index 66f54c6..21125d1 100644 (file)
@@ -34,8 +34,8 @@ footnote: "
     which unified dot1q handling across various tests.
     Previously, this one suite was different (only handling dot1q on one port).
 
-    [5] OPEN Progression in performance of tests running VPP (l2xc) inside VM.
-    Due to relatively high stdev of results, bisecting has not found a cause yet.
+    [5] DONE Progression in performance of tests running VPP (l2xc) inside VM.
+    Consequence of a fix making worker placement deterministic, Gerrit 25309.
     [CSIT-1738]
 
     [7] POSTPONED Possible anomaly, but stdev of results is high.
index 795d79e..8d323a4 100644 (file)
@@ -43,15 +43,16 @@ footnote: "
     The cause is Gerrit 26456, unpinning random seed, needed to make TRex workers
     generate different sequences of packets. [CSIT-1731]
 
-    [5] OPEN Progression in performance of tests running VPP (l2xc) inside VM.
-    Due to relatively high stdev of results, bisecting has not found a cause yet.
+    [5] DONE Progression in performance of tests running VPP (l2xc) inside VM.
+    Consequence of a fix making worker placement deterministic, Gerrit 25309.
     [CSIT-1738]
 
     [7] POSTPONED Possible anomaly, but stdev of results is high.
     Currently, the performance differences are considered to probably be just noise.
 
-    [8] OPEN Regressions in some tests with VPP in VM and using l2xcbase as vswitch.
-    The results have surprisingly small stdev, more investigation needed.
+    [8] DONE Regressions in some tests with VPP in VM.
+    Tests using l2xcbase as vswitch have small enough stdev for bisect.
+    The switch to clang-9 compiler, Gerrit 26744, has been identified as the cause.
     [CSIT-1741]
 
     [9] OPEN Progression in ip6 scale tests. Multiple candidate changes may have
index 1f754f8..496221d 100644 (file)
@@ -35,17 +35,19 @@ footnote: "
     which unified dot1q handling across various tests.
     Previously, this one suite was different (only handling dot1q on one port).
 
-    [4] OPEN Progression in one test. Bisect not started yet. [CSIT-1740]
+    [4] DONE Progression in high performance tests, caused by
+    TRex setting improvement, Gerrit 26445. [CSIT-1740]
 
-    [5] OPEN Progression in performance of tests running VPP (l2xc) inside VM.
-    Due to relatively high stdev of results, bisecting has not found a cause yet.
+    [5] DONE Progression in performance of tests running VPP (l2xc) inside VM.
+    Consequence of a fix making worker placement deterministic, Gerrit 25309.
     [CSIT-1738]
 
     [7] POSTPONED Possible anomaly, but stdev of results is high.
     Currently, the performance differences are considered to probably be just noise.
 
-    [8] OPEN Regressions in some tests with VPP in VM and using l2xcbase as vswitch.
-    The results have surprisingly small stdev, more investigation needed.
+    [8] DONE Regressions in some tests with VPP in VM.
+    Tests using l2xcbase as vswitch have small enough stdev for bisect.
+    The switch to clang-9 compiler, Gerrit 26744, has been identified as the cause.
     [CSIT-1741]
 
     [9] OPEN Progression in ip6 scale tests. Multiple candidate changes may have
index 05f878e..ab578f1 100644 (file)
@@ -21,10 +21,11 @@ imix-2t1c-ethip4ipsec4tnlsw-ip4base-int-aes256gcm: 6
 # see https://yaml-multiline.info/
 
 footnote: "
-    [4] OPEN Progression in one test. Bisect not started yet. [CSIT-1740]
+    [4] DONE Progression in high performance tests, caused by
+    TRex setting improvement, Gerrit 26445. [CSIT-1740]
 
-    [5] OPEN Progression in performance of tests running VPP (l2xc) inside VM.
-    Due to relatively high stdev of results, bisecting has not found a cause yet.
+    [5] DONE Progression in performance of tests running VPP (l2xc) inside VM.
+    Consequence of a fix making worker placement deterministic, Gerrit 25309.
     [CSIT-1738]
 
     [6] OPEN Regression in CSIT, one specific test showing too small stdev
@@ -35,8 +36,9 @@ footnote: "
     [7] POSTPONED Possible anomaly, but stdev of results is high.
     Currently, the performance differences are considered to probably be just noise.
 
-    [8] OPEN Regressions in some tests with VPP in VM and using l2xcbase as vswitch.
-    The results have surprisingly small stdev, more investigation needed.
+    [8] DONE Regressions in some tests with VPP in VM.
+    Tests using l2xcbase as vswitch have small enough stdev for bisect.
+    The switch to clang-9 compiler, Gerrit 26744, has been identified as the cause.
     [CSIT-1741]
 
     [9] OPEN Progression in ip6 scale tests. Multiple candidate changes may have