job_specs: update 2n-tx2 daily and report 56/34256/2
authorJuraj Linkeš <juraj.linkes@pantheon.tech>
Wed, 27 Oct 2021 09:50:11 +0000 (11:50 +0200)
committerJuraj Linkeš <juraj.linkes@pantheon.tech>
Fri, 19 Nov 2021 08:36:45 +0000 (09:36 +0100)
Add newly added spd outbound tests with and without flowcache. These new
test may result in too many mlr tests, so remove the least needed tests,
which are 2m and 1m scale tests. This also unifies which scale tests we
run between af_xdp and dpdk tests.

Also cleanup all 2n-tx2 job specs.

Change-Id: I99bedefcef86f4b921f359f1ebf6c42ebdd8c20f
Signed-off-by: Juraj Linkeš <juraj.linkes@pantheon.tech>
18 files changed:
docs/job_specs/report_coverage/2n-tx2/ip4-00.md
docs/job_specs/report_coverage/2n-tx2/ip4-01.md
docs/job_specs/report_coverage/2n-tx2/ip4-02.md
docs/job_specs/report_coverage/2n-tx2/ip4-03.md
docs/job_specs/report_coverage/2n-tx2/ip4-04.md
docs/job_specs/report_coverage/2n-tx2/ip4-05.md
docs/job_specs/report_coverage/2n-tx2/ip4-06.md
docs/job_specs/report_coverage/2n-tx2/ip6-00.md
docs/job_specs/report_coverage/2n-tx2/ip6-01.md
docs/job_specs/report_coverage/2n-tx2/l2-00.md
docs/job_specs/report_coverage/2n-tx2/l2-01.md
docs/job_specs/report_coverage/2n-tx2/l2-02.md
docs/job_specs/report_coverage/2n-tx2/l2-03.md
docs/job_specs/report_coverage/2n-tx2/l2-04.md
docs/job_specs/report_iterative/2n-tx2/dpdk-mlr-00.md
docs/job_specs/report_iterative/2n-tx2/dpdk-mrr-00.md
docs/job_specs/report_iterative/2n-tx2/vpp-mlr-00.md
docs/job_specs/report_iterative/2n-tx2/vpp-mrr-00.md

index 79744c7..c03b96b 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 84
-### job hrs est. 7.9
-### job hrs real ?.?
-### test mins est. 5.65
-### test mins real 5.65
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 6915bec..deee2ef 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 36
-### job hrs est. 3.7
-### job hrs real 3.7
-### test mins est. 6.17
-### test mins real 6.17
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 48f18bd..7e1df25 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 24
-### job hrs est. 2.6
-### job hrs real 2.6
-### test mins est. 6.5
-### test mins real 6.5
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 3b6a670..567b858 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 24
-### job hrs est. 2.5
-### job hrs real 2.5
-### test mins est. 6.25
-### test mins real 6.25
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index d935ed2..cfbdc7c 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 24
-### job hrs est. 2.6
-### job hrs real 2.6
-### test mins est. 6.5
-### test mins real 6.5
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 5c4221a..a77aa1b 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 24
-### job hrs est. 1.8
-### job hrs real ?.?
-### test mins est. 4.40
-### test mins real 4.40
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 8d0b537..83cecf2 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 24
-### job hrs est. 7.0
-### job hrs real ?.?
-### test mins est. 17.6
-### test mins real 17.6
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index ed9587b..cd99a20 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 36
-### job hrs est. 3.2
-### job hrs real ?.?
-### test mins est. 5.5
-### test mins real 5.5
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 3147317..637ba68 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 36
-### job hrs est. 3.75
-### job hrs real 3.75
-### test mins est. 6.25
-### test mins real 6.25
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 8bfe970..75f7b1b 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 48
-### job hrs est. 4.7
-### job hrs real ?.?
-### test mins est. 5.9
-### test mins real 5.9
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index f6c727a..08a14dc 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 36
-### job hrs est. 3.7
-### job hrs real 3.7
-### test mins est. 6.17
-### test mins real 6.17
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index a2b54db..864be33 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 24
-### job hrs est. 2.6
-### job hrs real 2.6
-### test mins est. 6.5
-### test mins real 6.5
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index c7a0dec..8d851bf 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 24
-### job hrs est. 2.8
-### job hrs real 2.8
-### test mins est. 7
-### test mins real 7
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 06f40f2..ba6a4d7 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 12
-### job hrs est. 1.4
-### job hrs real 1.4
-### test mins est. 7
-### test mins real 7
 ## ./container_memif
 ## ./crypto
 ## ./ip4
index 7df2596..bb9dfcd 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 24
-### job hrs est. 2.75
-### job hrs real 2.75
-### test mins est. 6.88
-### test mins real 6.88
 ### intel-xl710
 #### dpdk-vfio-pci
 ##### eth-l2xcbase-testpmd
index a9d121e..15f28af 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
 ### tests 6
-### job hrs est. 0.2
-### job hrs real [No data available]
-### test mins est. 1.6
-### test mins real [No data available]
 ### intel-xl710
 #### dpdk-vfio-pci
 ##### eth-l2xcbase-testpmd
index d77ab57..3788cca 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
-### tests 189
-### job hrs est. 18.2
-### job hrs real ??.?
-### test mins est. 5.68
-### test mins real 5.68
+### tests 192
 ## ./container_memif
 ### intel-xl710
 #### dpdk-vfio-pci
 1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000tnlsw-ip4base-policy-aes256gcm-udir
 2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000tnlsw-ip4base-policy-aes256gcm-udir
 4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000tnlsw-ip4base-policy-aes256gcm-udir
+##### ethip4ipsec1spe-ip4base-policy-outbound-nocrypto
+1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-ip4base-policy-outbound-nocrypto
+2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-ip4base-policy-outbound-nocrypto
+4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec100spe-ip4base-policy-outbound-nocrypto
+1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-ip4base-policy-outbound-nocrypto
+2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-ip4base-policy-outbound-nocrypto
+4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec1000spe-ip4base-policy-outbound-nocrypto
+1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-ip4base-policy-outbound-nocrypto
+2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-ip4base-policy-outbound-nocrypto
+4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec1spe-cache-ip4base-policy-outbound-nocrypto
+1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-cache-ip4base-policy-outbound-nocrypto
+2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-cache-ip4base-policy-outbound-nocrypto
+4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-cache-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec100spe-cache-ip4base-policy-outbound-nocrypto
+1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-cache-ip4base-policy-outbound-nocrypto
+2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-cache-ip4base-policy-outbound-nocrypto
+4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-cache-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec1000spe-cache-ip4base-policy-outbound-nocrypto
+1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-cache-ip4base-policy-outbound-nocrypto
+2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-cache-ip4base-policy-outbound-nocrypto
+4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-cache-ip4base-policy-outbound-nocrypto
 ## ./ip4
 ### intel-xl710
 #### af_xdp
 1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale200k
 2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale200k
 4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale200k
-##### ethip4-ip4scale2m
-1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale2m
-2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale2m
-4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale2m
 ##### ethip4-ip4base-iacldstbase
 1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4-ip4base-iacldstbase
 2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip4-ip4base-iacldstbase
 1c AND 78b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale200k
 2c AND 78b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale200k
 4c AND 78b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale200k
-##### ethip6-ip6scale2m
-1c AND 78b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale2m
-2c AND 78b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale2m
-4c AND 78b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale2m
 ##### ethip6-ip6base-iacldstbase
 1c AND 78b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip6-ip6base-iacldstbase
 2c AND 78b AND ndrpdr AND xl710 AND drv_vfio_pci AND ethip6-ip6base-iacldstbase
 1c AND 64b AND ndrpdr AND xl710 AND drv_af_xdp AND eth-l2bdscale100kmaclrn
 2c AND 64b AND ndrpdr AND xl710 AND drv_af_xdp AND eth-l2bdscale100kmaclrn
 4c AND 64b AND ndrpdr AND xl710 AND drv_af_xdp AND eth-l2bdscale100kmaclrn
-##### eth-l2bdscale1mmaclrn
-1c AND 64b AND ndrpdr AND xl710 AND drv_af_xdp AND eth-l2bdscale1mmaclrn
-2c AND 64b AND ndrpdr AND xl710 AND drv_af_xdp AND eth-l2bdscale1mmaclrn
-4c AND 64b AND ndrpdr AND xl710 AND drv_af_xdp AND eth-l2bdscale1mmaclrn
 ##### eth-l2xcbase
 1c AND 64b AND ndrpdr AND xl710 AND drv_af_xdp AND eth-l2xcbase
 2c AND 64b AND ndrpdr AND xl710 AND drv_af_xdp AND eth-l2xcbase
 1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND eth-l2bdscale100kmaclrn
 2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND eth-l2bdscale100kmaclrn
 4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND eth-l2bdscale100kmaclrn
-##### eth-l2bdscale1mmaclrn
-1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND eth-l2bdscale1mmaclrn
-2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND eth-l2bdscale1mmaclrn
-4c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND eth-l2bdscale1mmaclrn
 ##### dot1q-l2bdbasemaclrn
 1c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND dot1q-l2bdbasemaclrn
 2c AND 64b AND ndrpdr AND xl710 AND drv_vfio_pci AND dot1q-l2bdbasemaclrn
index de65ae6..61c7cd7 100644 (file)
@@ -1,9 +1,5 @@
 # 2n-tx2
-### tests 186
-### job hrs est. 4.2
-### job hrs real ?.?
-### test mins est. 1.31
-### test mins real 0.89
+### tests 192
 ## ./container_memif
 ### intel-xl710
 #### dpdk-vfio-pci
 1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000tnlsw-ip4base-policy-aes256gcm-udir
 2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000tnlsw-ip4base-policy-aes256gcm-udir
 4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000tnlsw-ip4base-policy-aes256gcm-udir
+##### ethip4ipsec1spe-ip4base-policy-outbound-nocrypto
+1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-ip4base-policy-outbound-nocrypto
+2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-ip4base-policy-outbound-nocrypto
+4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec100spe-ip4base-policy-outbound-nocrypto
+1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-ip4base-policy-outbound-nocrypto
+2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-ip4base-policy-outbound-nocrypto
+4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec1000spe-ip4base-policy-outbound-nocrypto
+1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-ip4base-policy-outbound-nocrypto
+2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-ip4base-policy-outbound-nocrypto
+4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec1spe-cache-ip4base-policy-outbound-nocrypto
+1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-cache-ip4base-policy-outbound-nocrypto
+2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-cache-ip4base-policy-outbound-nocrypto
+4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1spe-cache-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec100spe-cache-ip4base-policy-outbound-nocrypto
+1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-cache-ip4base-policy-outbound-nocrypto
+2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-cache-ip4base-policy-outbound-nocrypto
+4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec100spe-cache-ip4base-policy-outbound-nocrypto
+##### ethip4ipsec1000spe-cache-ip4base-policy-outbound-nocrypto
+1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-cache-ip4base-policy-outbound-nocrypto
+2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-cache-ip4base-policy-outbound-nocrypto
+4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4ipsec1000spe-cache-ip4base-policy-outbound-nocrypto
 ## ./ip4
 ### intel-xl710
 #### af_xdp
 1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale200k
 2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale200k
 4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale200k
-##### ethip4-ip4scale2m
-1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale2m
-2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale2m
-4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4-ip4scale2m
 ##### ethip4-ip4base-iacldstbase
 1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4-ip4base-iacldstbase
 2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND ethip4-ip4base-iacldstbase
 1c AND 78b AND mrr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale200k
 2c AND 78b AND mrr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale200k
 4c AND 78b AND mrr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale200k
-##### ethip6-ip6scale2m
-1c AND 78b AND mrr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale2m
-2c AND 78b AND mrr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale2m
-4c AND 78b AND mrr AND xl710 AND drv_vfio_pci AND ethip6-ip6scale2m
 ##### ethip6-ip6base-iacldstbase
 1c AND 78b AND mrr AND xl710 AND drv_vfio_pci AND ethip6-ip6base-iacldstbase
 2c AND 78b AND mrr AND xl710 AND drv_vfio_pci AND ethip6-ip6base-iacldstbase
 1c AND 64b AND mrr AND xl710 AND drv_af_xdp AND eth-l2bdscale100kmaclrn
 2c AND 64b AND mrr AND xl710 AND drv_af_xdp AND eth-l2bdscale100kmaclrn
 4c AND 64b AND mrr AND xl710 AND drv_af_xdp AND eth-l2bdscale100kmaclrn
-##### eth-l2bdscale1mmaclrn
-1c AND 64b AND mrr AND xl710 AND drv_af_xdp AND eth-l2bdscale1mmaclrn
-2c AND 64b AND mrr AND xl710 AND drv_af_xdp AND eth-l2bdscale1mmaclrn
-4c AND 64b AND mrr AND xl710 AND drv_af_xdp AND eth-l2bdscale1mmaclrn
 ##### eth-l2xcbase
 1c AND 64b AND mrr AND xl710 AND drv_af_xdp AND eth-l2xcbase
 2c AND 64b AND mrr AND xl710 AND drv_af_xdp AND eth-l2xcbase
 1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND eth-l2bdscale100kmaclrn
 2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND eth-l2bdscale100kmaclrn
 4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND eth-l2bdscale100kmaclrn
-##### eth-l2bdscale1mmaclrn
-1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND eth-l2bdscale1mmaclrn
-2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND eth-l2bdscale1mmaclrn
-4c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND eth-l2bdscale1mmaclrn
 ##### dot1q-l2bdbasemaclrn
 1c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND dot1q-l2bdbasemaclrn
 2c AND 64b AND mrr AND xl710 AND drv_vfio_pci AND dot1q-l2bdbasemaclrn