CSIT-1197: Add Comparison Across Testbeds to the Report
[csit.git] / docs / report / vpp_performance_tests / packet_latency_graphs / index.rst
1 Packet Latency
2 ==============
3
4 Plotted results are generated from a single execution of CSIT NDR discovery
5 test. Box plots are used to show the Minimum, Median and Maximum packet
6 latency per test.
7
8 *Title of each graph* is a regex (regular expression) matching all
9 throughput test cases plotted on this graph, *X-axis labels* are indices
10 of individual test suites executed by
11 FD.io test executor vpp performance jobs that created result output file
12 used as data source for the graph, *Y-axis labels* are measured packet Latency
13 [uSec] values, and the *Graph legend* lists the plotted test suites and their
14 indices. Latency is reported for concurrent symmetric bi-directional flows,
15 separately for each direction: i) West-to-East:
16 TGint1-to-SUT1-to-SUT2-to-TGint2, and ii) East-to-West:
17 TGint2-to-SUT2-to-SUT1-to-TGint1.
18
19 .. note::
20
21     Test results have been generated by
22     `FD.io test executor vpp performance job 3n-hsw`_,
23     `FD.io test executor vpp performance job 3n-skx`_ and
24     `FD.io test executor vpp performance job 2n-skx`_ with Robot Framework
25     result files csit-vpp-perf-|srelease|-\*.zip
26     `archived here <../../_static/archive/>`_.
27     Plotted data set size per test case is equal to the number of job executions
28     presented in this report version: **10**.
29
30 .. toctree::
31     :maxdepth: 1
32
33     l2
34     ip4
35     ip6
36     srv6
37     ip4_tunnels
38     ip6_tunnels
39     vm_vhost
40     container_memif
41     container_orchestrated
42     ipsec
43     vts