CSIT rls1704 report - update to handcrafted sections:
[csit.git] / docs / report / vpp_performance_tests / packet_throughput_graphs / ipv6_tunnels.rst
1 IPv6 Overlay Tunnels
2 ====================
3
4 Following sections include summary graphs of VPP Phy-to-Phy performance
5 with IPv6 Overlay Tunnels, including NDR throughput (zero packet loss)
6 and PDR throughput (<0.5% packet loss). Performance is reported for VPP
7 running in multiple configurations of VPP worker thread(s), a.k.a. VPP
8 data plane thread(s), and their physical CPU core(s) placement.
9
10 Rresults are generated by multiple executions of the same CSIT tests.
11 In order to display variation in measured throughput values, Box-and-
12 whisker plots are used to show their quartiles (Min, 1st quartile / 25th
13 percentile, 2nd quartile / 50th percentile / mean, 3rd quartile / 75th
14 percentile, Max). Outliers are plotted as individual points.
15
16 *Title of each graph* is a regex (regular expression) matching all
17 throughput test cases plotted on this graph, *X-axis labels* are indices
18 of individual test suites executed by csit-vpp-perf-1704-all jobs that
19 created result output files used as data sources for the graph, *Y-axis
20 labels* are measured Packets Per Second [pps] values, and the *Graph
21 legend* lists the plotted test suites and their indices.
22
23 .. note::
24
25     Test results have been generated by FD.io test executor jobs
26     `csit-vpp-perf-1704-all
27     <https://jenkins.fd.io/view/csit/job/csit-vpp-perf-1704-all/>`_,
28     with Robot Framework result files csit-vpp-perf-1704-all-<id>.zip
29     `archived here <../../_static/archive/>`_
30
31 NDR Throughput
32 ~~~~~~~~~~~~~~
33
34 VPP NDR 78B packet throughput in 1t1c setup (1thread, 1core) is presented
35 in the graph below.
36
37 .. raw:: html
38
39     <iframe width="700" height="1000" frameborder="0" scrolling="no" src="../../_static/vpp/78B-1t1c-ethip6-ndrdisc.html"></iframe>
40
41 *Figure 1. VPP 1thread 1core - NDR Throughput for Phy-to-Phy IPv6 Overlay
42 Tunnels.*
43
44 CSIT source code for the test cases used for above plots can be found in CSIT
45 git repository:
46
47 .. code-block:: bash
48
49     $ cd $CSIT/tests/perf
50     $ grep -E "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc" *
51
52     10ge2p1x520-ethip6lispip4-ip6base-ndrdisc.robot:| tc01-78B-1t1c-ethip6lispip4-ip6base-ndrdisc
53     10ge2p1x520-ethip6lispip6-ip6base-ndrdisc.robot:| tc01-78B-1t1c-ethip6lispip6-ip6base-ndrdisc
54
55 VPP NDR 78B packet throughput in 2t2c setup (2thread, 2core) is presented
56 in the graph below.
57
58 .. raw:: html
59
60     <iframe width="700" height="1000" frameborder="0" scrolling="no" src="../../_static/vpp/78B-2t2c-ethip6-ndrdisc.html"></iframe>
61
62 *Figure 2. VPP 2threads 2cores - NDR Throughput for Phy-to-Phy IPv6 Overlay
63 Tunnels.*
64
65 CSIT source code for the test cases used for above plots can be found in CSIT
66 git repository:
67
68 .. code-block:: bash
69
70     $ cd $CSIT/tests/perf
71     $ grep -E "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc" *
72
73     10ge2p1x520-ethip6lispip4-ip6base-ndrdisc.robot:| tc07-78B-2t2c-ethip6lispip4-ip6base-ndrdisc
74     10ge2p1x520-ethip6lispip6-ip6base-ndrdisc.robot:| tc07-78B-2t2c-ethip6lispip6-ip6base-ndrdisc
75
76 PDR Throughput
77 ~~~~~~~~~~~~~~
78
79 VPP PDR 78B packet throughput in 1t1c setup (1thread, 1core) is presented
80 in the graph below. PDR measured for 0.5% packet loss ratio.
81
82 .. raw:: html
83
84     <iframe width="700" height="1000" frameborder="0" scrolling="no" src="../../_static/vpp/78B-1t1c-ethip6-pdrdisc.html"></iframe>
85
86 *Figure 3. VPP 1thread 1core - PDR Throughput for Phy-to-Phy IPv6 Overlay
87 Tunnels.*
88
89 CSIT source code for the test cases used for above plots can be found in CSIT
90 git repository:
91
92 .. code-block:: bash
93
94     $ cd $CSIT/tests/perf
95     $ grep -E "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc" *
96
97     10ge2p1x520-ethip6lispip4-ip6base-ndrdisc.robot:| tc02-78B-1t1c-ethip6lispip4-ip6base-pdrdisc
98     10ge2p1x520-ethip6lispip6-ip6base-ndrdisc.robot:| tc02-78B-1t1c-ethip6lispip6-ip6base-pdrdisc
99
100 VPP PDR 78B packet throughput in 2t2c setup (2thread, 2core) is presented
101 in the graph below. PDR measured for 0.5% packet loss ratio.
102
103 .. raw:: html
104
105     <iframe width="700" height="1000" frameborder="0" scrolling="no" src="../../_static/vpp/78B-2t2c-ethip6-pdrdisc.html"></iframe>
106
107 *Figure 4. VPP 2thread 2core - PDR Throughput for Phy-to-Phy IPv6 Overlay
108 Tunnels.*
109
110 CSIT source code for the test cases used for above plots can be found in CSIT
111 git repository:
112
113 .. code-block:: bash
114
115     $ cd $CSIT/tests/perf
116     $ grep -E "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc" *
117
118     10ge2p1x520-ethip6lispip4-ip6base-ndrdisc.robot:| tc08-78B-2t2c-ethip6lispip4-ip6base-pdrdisc
119     10ge2p1x520-ethip6lispip6-ip6base-ndrdisc.robot:| tc08-78B-2t2c-ethip6lispip6-ip6base-pdrdisc