csit rls1701 report nits and updates:
[csit.git] / docs / report / vpp_performance_tests / packet_throughput_graphs / ipv4_tunnels.rst
1 IPv4 Overlay Tunnels
2 ====================
3
4 Following sections provide a summary of VPP Phy-to-Phy IPv4 Overlay Tunnels
5 performance illustrating NDR throughput (zero packet loss) and PDR throughput
6 (<0.5% packet loss). Performance is reported for VPP running in multiple
7 configurations of VPP worker thread(s), a.k.a. VPP data plane thread (s), and
8 their physical CPU core(s) placement.
9
10 *Title of each graph* is a regex (regular expression) matching all plotted
11 throughput test cases, *X-axis labels* are indeces of csit-vpp-perf-1701 jobs
12 that created result output files used as data sources for the graph,
13 *Y-axis labels* are measured Packets Per Second [pps] values, and the *graph
14 legend* identifes the plotted test suites.
15
16 .. note::
17
18     Data sources for reported test results: i) FD.io test executor jobs
19     `csit-vpp-perf-1701-all
20     <https://jenkins.fd.io/view/csit/job/csit-vpp-perf-1701-all/>`_ and
21     `csit-vpp-perf-1701-long
22     <https://jenkins.fd.io/view/csit/job/csit-vpp-perf-1701-long/>`_
23     , ii) archived FD.io jobs test result `output files
24     <../../_static/archive/>`_.
25
26 NDR Throughput
27 ~~~~~~~~~~~~~~
28
29 VPP NDR Throughput - running in configuration of **one worker thread (1t) on
30 one physical core (1c)** - is presented in the figure below.
31
32 .. raw:: html
33
34     <iframe width="700" height="700" frameborder="0" scrolling="no" src="../../_static/vpp/64B-1t1c-ethip4-ndrdisc.html"></iframe>
35
36 *Figure 1. VPP 1thread 1core - NDR Throughput for Phy-to-Phy IPv4 Overlay
37 Tunnels.*
38
39 CSIT test cases used to generate results presented above can be found in CSIT
40 git repository by filtering with specified regex as follows:
41
42 .. code-block:: bash
43
44     $ csit/tests/perf
45     $ grep -E "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc" *
46
47     10ge2p1x520-ethip4lispip4-ip4base-ndrdisc.robot:| tc01-64B-1t1c-ethip4lispip4-ip4base-ndrdisc
48     10ge2p1x520-ethip4lispip6-ip4base-ndrdisc.robot:| tc01-64B-1t1c-ethip4lispip6-ip4base-ndrdisc
49     10ge2p1x520-ethip4vxlan-l2bdbasemaclrn-ndrdisc.robot:| tc01-64B-1t1c-ethip4vxlan-l2bdbasemaclrn-ndrdisc
50     10ge2p1x520-ethip4vxlan-l2xcbase-ndrdisc.robot:| tc01-64B-1t1c-ethip4vxlan-l2xcbase-ndrdisc
51
52 VPP NDR Throughput - running in configuration of **two worker threads (2t) on
53 two physical cores (2c)** - is presented in the figure below.
54
55 .. raw:: html
56
57     <iframe width="700" height="700" frameborder="0" scrolling="no" src="../../_static/vpp/64B-2t2c-ethip4-ndrdisc.html"></iframe>
58
59 *Figure 2. VPP 2threads 2cores - NDR Throughput for Phy-to-Phy IPv4 Overlay Tunnels.*
60
61 CSIT test cases used to generate results presented above can be found in CSIT
62 git repository by filtering with specified regex as follows:
63
64 .. code-block:: bash
65
66     $ csit/tests/perf
67     $ grep -E "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc" *
68
69     10ge2p1x520-ethip4lispip4-ip4base-ndrdisc.robot:| tc07-64B-2t2c-ethip4lispip4-ip4base-ndrdisc
70     10ge2p1x520-ethip4lispip6-ip4base-ndrdisc.robot:| tc07-64B-2t2c-ethip4lispip6-ip4base-ndrdisc
71     10ge2p1x520-ethip4vxlan-l2bdbasemaclrn-ndrdisc.robot:| tc07-64B-2t2c-ethip4vxlan-l2bdbasemaclrn-ndrdisc
72     10ge2p1x520-ethip4vxlan-l2xcbase-ndrdisc.robot:| tc07-64B-2t2c-ethip4vxlan-l2xcbase-ndrdisc
73
74 VPP NDR Throughput - running in configuration of **four worker threads (4t) on
75 four physical cores (4c)** - is presented in the figure below.
76
77 .. raw:: html
78
79     <iframe width="700" height="700" frameborder="0" scrolling="no" src="../../_static/vpp/64B-4t4c-ethip4-ndrdisc.html"></iframe>
80
81 *Figure 3. VPP 4threads 4cores - NDR Throughput for Phy-to-Phy IPv4 Overlay
82 Tunnels.*
83
84 CSIT test cases used to generate results presented above can be found in CSIT
85 git repository by filtering with specified regex as follows:
86
87 .. code-block:: bash
88
89     $ csit/tests/perf
90     $ grep -E "64B-4t4c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc" *
91
92     10ge2p1x520-ethip4lispip4-ip4base-ndrdisc.robot:| tc13-64B-4t4c-ethip4lispip4-ip4base-ndrdisc
93     10ge2p1x520-ethip4lispip6-ip4base-ndrdisc.robot:| tc13-64B-4t4c-ethip4lispip6-ip4base-ndrdisc
94     10ge2p1x520-ethip4vxlan-l2bdbasemaclrn-ndrdisc.robot:| tc13-64B-4t4c-ethip4vxlan-l2bdbasemaclrn-ndrdisc
95     10ge2p1x520-ethip4vxlan-l2xcbase-ndrdisc.robot:| tc13-64B-4t4c-ethip4vxlan-l2xcbase-ndrdisc
96
97 PDR Throughput
98 ~~~~~~~~~~~~~~
99
100 VPP PDR Throughput - running in configuration of **one worker thread (1t) on one
101 physical core (1c)** - is presented in the figure below. PDR at below 0.5%
102 packet loss ratio.
103
104 .. raw:: html
105
106     <iframe width="700" height="700" frameborder="0" scrolling="no" src="../../_static/vpp/64B-1t1c-ethip4-pdrdisc.html"></iframe>
107
108 *Figure 4. VPP 1thread 1core - PDR Throughput for Phy-to-Phy IPv4 Overlay
109 Tunnels.*
110
111 CSIT test cases used to generate results presented above can be found in CSIT
112 git repository by filtering with specified regex as follows:
113
114 .. code-block:: bash
115
116     $ csit/tests/perf
117     $ grep -E "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc" *
118
119     10ge2p1x520-ethip4lispip4-ip4base-ndrdisc.robot:| tc02-64B-1t1c-ethip4lispip4-ip4base-pdrdisc
120     10ge2p1x520-ethip4lispip6-ip4base-ndrdisc.robot:| tc02-64B-1t1c-ethip4lispip6-ip4base-pdrdisc
121     10ge2p1x520-ethip4vxlan-l2bdbasemaclrn-ndrdisc.robot:| tc02-64B-1t1c-ethip4vxlan-l2bdbasemaclrn-pdrdisc
122     10ge2p1x520-ethip4vxlan-l2xcbase-ndrdisc.robot:| tc02-64B-1t1c-ethip4vxlan-l2xcbase-pdrdisc
123
124 VPP PDR Throughput - running in configuration of **two worker threads (2t) on
125 two physical cores (2c)** - is presented in the figure below.
126
127 .. raw:: html
128
129     <iframe width="700" height="700" frameborder="0" scrolling="no" src="../../_static/vpp/64B-2t2c-ethip4-pdrdisc.html"></iframe>
130
131 *Figure 5. VPP 2thread 2core - PDR Throughput for Phy-to-Phy IPv4 Overlay Tunnels.*
132
133 CSIT test cases used to generate results presented above can be found in CSIT
134 git repository by filtering with specified regex as follows:
135
136 .. code-block:: bash
137
138     $ csit/tests/perf
139     $ grep -E "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc" *
140
141     10ge2p1x520-ethip4lispip4-ip4base-ndrdisc.robot:| tc08-64B-2t2c-ethip4lispip4-ip4base-pdrdisc
142     10ge2p1x520-ethip4lispip6-ip4base-ndrdisc.robot:| tc08-64B-2t2c-ethip4lispip6-ip4base-pdrdisc
143     10ge2p1x520-ethip4vxlan-l2bdbasemaclrn-ndrdisc.robot:| tc08-64B-2t2c-ethip4vxlan-l2bdbasemaclrn-pdrdisc
144     10ge2p1x520-ethip4vxlan-l2xcbase-ndrdisc.robot:| tc08-64B-2t2c-ethip4vxlan-l2xcbase-pdrdisc
145
146 VPP PDR Throughput - running in configuration of **four worker threads (4t) on
147 four physical cores (4c)** - is presented in the figure below.
148
149 .. raw:: html
150
151     <iframe width="700" height="700" frameborder="0" scrolling="no" src="../../_static/vpp/64B-4t4c-ethip4-pdrdisc.html"></iframe>
152
153 *Figure 6. VPP 4thread 4core - PDR Throughput for Phy-to-Phy IPv4 Overlay
154 Tunnels.*
155
156 CSIT test cases used to generate results presented above can be found in CSIT
157 git repository by filtering with specified regex as follows:
158
159 .. code-block:: bash
160
161     $ csit/tests/perf
162     $ grep -E "64B-4t4c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc" *
163
164     10ge2p1x520-ethip4lispip4-ip4base-ndrdisc.robot:| tc14-64B-4t4c-ethip4lispip4-ip4base-pdrdisc
165     10ge2p1x520-ethip4lispip6-ip4base-ndrdisc.robot:| tc14-64B-4t4c-ethip4lispip6-ip4base-pdrdisc
166     10ge2p1x520-ethip4vxlan-l2bdbasemaclrn-ndrdisc.robot:| tc14-64B-4t4c-ethip4vxlan-l2bdbasemaclrn-pdrdisc
167     10ge2p1x520-ethip4vxlan-l2xcbase-ndrdisc.robot:| tc14-64B-4t4c-ethip4vxlan-l2xcbase-pdrdisc
168