Fix: CSIT report gen - teardonw data + run_report.sh
[csit.git] / resources / tools / report_gen / run_report.sh
1 #!/bin/bash
2
3 set -x
4
5 WORKING_DIR='_tmp'
6 BUILD_DIR='_build'
7
8 SOURCE_DIR='../../../docs/report'
9 DTR_SOURCE_DIR="${SOURCE_DIR}/detailed_test_results"
10 DTR_PERF_SOURCE_DIR=${DTR_SOURCE_DIR}/vpp_performance_results
11 DTR_TESTPMD_SOURCE_DIR=${DTR_SOURCE_DIR}/testpmd_performance_results
12 DTR_FUNC_SOURCE_DIR=${DTR_SOURCE_DIR}/vpp_functional_results
13 DTR_HONEYCOMB_SOURCE_DIR=${DTR_SOURCE_DIR}/honeycomb_functional_results
14
15 DTC_SOURCE_DIR="${SOURCE_DIR}/detailed_test_configuration"
16 DTC_PERF_SOURCE_DIR=${DTC_SOURCE_DIR}/vpp_performance_configuration
17 DTC_PERF_SOURCE_OPER_DIR=${DTC_SOURCE_DIR}/vpp_performance_operational_data
18 DTC_FUNC_SOURCE_DIR=${DTC_SOURCE_DIR}/vpp_functional_configuration
19
20 STATIC_DIR="${BUILD_DIR}/_static"
21 STATIC_DIR_VPP="${STATIC_DIR}/vpp"
22 STATIC_DIR_TESTPMD="${STATIC_DIR}/testpmd"
23 STATIC_DIR_ARCH="${STATIC_DIR}/archive"
24 CSS_PATCH_FILE="${STATIC_DIR}/theme_overrides.css"
25 JEN_URL='https://jenkins.fd.io/view/csit/job'
26
27 sudo apt-get -y update
28 sudo apt-get -y install libxml2 libxml2-dev libxslt-dev build-essential \
29     zlib1g-dev unzip
30
31 # Clean-up when finished:
32 trap 'rm -rf ${WORKING_DIR}; exit' EXIT
33 trap 'rm -rf ${WORKING_DIR}; exit' ERR
34
35 # Remove the old build:
36 rm -rf ${BUILD_DIR} || true
37 rm -rf ${WORKING_DIR} || true
38
39 # Create working directories
40 mkdir ${BUILD_DIR}
41
42 # Create virtual environment:
43 virtualenv ${WORKING_DIR}/env
44 . ${WORKING_DIR}/env/bin/activate
45
46 # Install Sphinx:
47 pip install -r requirements.txt
48
49 export PYTHONPATH=`pwd`
50
51 # Download raw outputs for plots
52 echo Downloading raw outputs for plots ...
53 mkdir -p ${STATIC_DIR_VPP}
54 mkdir -p ${STATIC_DIR_TESTPMD}
55 mkdir -p ${STATIC_DIR_ARCH}
56
57 ### VPP PERFORMANCE SOURCE DATA
58
59 JEN_FILE_PERF='output_perf_data.xml'
60 JEN_JOB='csit-vpp-perf-1704-all'
61 JEN_BUILD=(6)
62
63 for i in "${JEN_BUILD[@]}"; do
64     curl -fs ${JEN_URL}/${JEN_JOB}/${i}/artifact/${JEN_FILE_PERF} \
65         -o ${STATIC_DIR_VPP}/${JEN_JOB}-${i}.xml
66     curl -fs ${JEN_URL}/${JEN_JOB}/${i}/artifact/\*zip\*/archive.zip \
67         -o ${STATIC_DIR_ARCH}/${JEN_JOB}-${i}.zip
68 done
69
70 # DELETE ME
71 #cp ./${JEN_JOB}-${JEN_BUILD[-1]}.zip ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD[-1]}.zip
72
73 unzip -o ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD[-1]}.zip -d ${WORKING_DIR}/
74 # L2 Ethernet Switching
75 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
76     --output ${DTR_PERF_SOURCE_DIR}/vpp_performance_results_l2.rst \
77     --formatting rst --start 3 --level 2 \
78     --regex ".+(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndr" \
79     --title "L2 Ethernet Switching"
80 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
81     --output ${DTC_PERF_SOURCE_DIR}/vpp_performance_configuration_l2.rst \
82     --data "VAT_H" -f "rst" --start 3 --level 2 \
83     --regex ".+(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndr" \
84     --title "L2 Ethernet Switching"
85 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
86     -o ${DTC_PERF_SOURCE_OPER_DIR}/vpp_performance_operational_data_l2.rst \
87     --data "SH_RUN" -f "rst" --start 3 --level 2 \
88     --regex ".+(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndr" \
89     --title "L2 Ethernet Switching"
90 # IPv4 Routed-Forwarding
91 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
92     --output ${DTR_PERF_SOURCE_DIR}/vpp_performance_results_ipv4.rst \
93     --formatting rst --start 3 --level 2 \
94     --regex ".+ethip4-ip4[a-z0-9]+-[a-z-]*ndr" \
95     --title "IPv4 Routed-Forwarding"
96 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
97     --output ${DTC_PERF_SOURCE_DIR}/vpp_performance_configuration_ipv4.rst \
98     --data "VAT_H" -f "rst" --start 3 --level 2 \
99     --regex ".+ethip4-ip4[a-z0-9]+-[a-z-]*ndr" \
100     --title "IPv4 Routed-Forwarding"
101 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
102     -o ${DTC_PERF_SOURCE_OPER_DIR}/vpp_performance_operational_data_ipv4.rst \
103     --data "SH_RUN" -f "rst" --start 3 --level 2 \
104     --regex ".+ethip4-ip4[a-z0-9]+-[a-z-]*ndr" \
105     --title "IPv4 Routed-Forwarding"
106 # IPv6 Routed-Forwarding
107 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
108     --output ${DTR_PERF_SOURCE_DIR}/vpp_performance_results_ipv6.rst \
109     --formatting rst --start 3 --level 2 \
110     --regex ".+ethip6-ip6[a-z0-9]+-[a-z-]*ndr" \
111     --title "IPv6 Routed-Forwarding"
112 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
113     --output ${DTC_PERF_SOURCE_DIR}/vpp_performance_configuration_ipv6.rst \
114     --data "VAT_H" -f "rst" --start 3 --level 2 \
115     --regex ".+ethip6-ip6[a-z0-9]+-[a-z-]*ndr" \
116     --title "IPv6 Routed-Forwarding"
117 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
118     -o ${DTC_PERF_SOURCE_OPER_DIR}/vpp_performance_operational_data_ipv6.rst \
119     --data "SH_RUN" -f "rst" --start 3 --level 2 \
120     --regex ".+ethip6-ip6[a-z0-9]+-[a-z-]*ndr" \
121     --title "IPv6 Routed-Forwarding"
122 # IPv4 Overlay Tunnels
123 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
124     --output ${DTR_PERF_SOURCE_DIR}/vpp_performance_results_ipv4o.rst \
125     --formatting rst --start 3 --level 2 \
126     --regex ".+ethip4[a-z0-9]+-[a-z0-9]*-ndr" \
127     --title "IPv4 Overlay Tunnels"
128 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
129     --output ${DTC_PERF_SOURCE_DIR}/vpp_performance_configuration_ipv4o.rst \
130     --data "VAT_H" -f "rst" --start 3 --level 2 \
131     --regex ".+ethip4[a-z0-9]+-[a-z0-9]*-ndr" \
132     --title "IPv4 Overlay Tunnels"
133 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
134     -o ${DTC_PERF_SOURCE_OPER_DIR}/vpp_performance_operational_data_ipv4o.rst \
135     --data "SH_RUN" -f "rst" --start 3 --level 2 \
136     --regex ".+ethip4[a-z0-9]+-[a-z0-9]*-ndr" \
137     --title "IPv4 Overlay Tunnels"
138 # IPv6 Overlay Tunnels
139 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
140     --output ${DTR_PERF_SOURCE_DIR}/vpp_performance_results_ipv6o.rst \
141     --formatting rst --start 3 --level 2 \
142     --regex ".+ethip6[a-z0-9]+-[a-z0-9]*-ndr" \
143     --title "IPv6 Overlay Tunnels"
144 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
145     --output ${DTC_PERF_SOURCE_DIR}/vpp_performance_configuration_ipv6o.rst \
146     --data "VAT_H" -f "rst" --start 3 --level 2 \
147     --regex ".+ethip6[a-z0-9]+-[a-z0-9]*-ndr" \
148     --title "IPv6 Overlay Tunnels"
149 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
150     -o ${DTC_PERF_SOURCE_OPER_DIR}/vpp_performance_operational_data_ipv6o.rst \
151     --data "SH_RUN" -f "rst" --start 3 --level 2 \
152     --regex ".+ethip6[a-z0-9]+-[a-z0-9]*-ndr" \
153     --title "IPv6 Overlay Tunnels"
154 # VM Vhost Connections
155 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
156     --output ${DTR_PERF_SOURCE_DIR}/vpp_performance_results_vhost.rst \
157     --formatting rst --start 3 --level 2 \
158     --regex ".+vhost.*" \
159     --title "VM Vhost Connections"
160 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
161     --output ${DTC_PERF_SOURCE_DIR}/vpp_performance_configuration_vhost.rst \
162     --data "VAT_H" -f "rst" --start 3 --level 2 \
163     --regex ".+vhost.*" \
164     --title "VM Vhost Connections"
165 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
166     -o ${DTC_PERF_SOURCE_OPER_DIR}/vpp_performance_operational_data_vhost.rst \
167     --data "SH_RUN" -f "rst" --start 3 --level 2 \
168     --regex ".+vhost.*" \
169     --title "VM Vhost Connections"
170 # Crypto in hardware: IP4FWD, IP6FWD
171 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
172     --output ${DTR_PERF_SOURCE_DIR}/vpp_performance_results_ipsec.rst \
173     --formatting rst --start 3 --level 2 \
174     --regex ".+ipsec.*" \
175     --title "Crypto in hardware: IP4FWD, IP6FWD"
176 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
177     --output ${DTC_PERF_SOURCE_DIR}/vpp_performance_configuration_ipsec.rst \
178     --data "VAT_H" -f "rst" --start 3 --level 2 \
179     --regex ".+ipsec.*" \
180     --title "Crypto in hardware: IP4FWD, IP6FWD"
181 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
182     -o ${DTC_PERF_SOURCE_OPER_DIR}/vpp_performance_operational_data_ipsec.rst \
183     --data "SH_RUN" -f "rst" --start 3 --level 2 \
184     --regex ".+ipsec.*" \
185     --title "Crypto in hardware: IP4FWD, IP6FWD"
186 sed -i -e "s@###JOB###@${JEN_JOB}\/${JEN_BUILD[-1]}@g" \
187     ${DTR_PERF_SOURCE_DIR}/index.rst
188 sed -i -e "s@###LINK###@${JEN_URL}\/${JEN_JOB}\/${JEN_BUILD[-1]}@g" \
189     ${DTR_PERF_SOURCE_DIR}/index.rst
190 sed -i -e "s@###JOB###@${JEN_JOB}\/${JEN_BUILD[-1]}@g" \
191     ${DTC_PERF_SOURCE_DIR}/index.rst
192 sed -i -e "s@###LINK###@${JEN_URL}\/${JEN_JOB}\/${JEN_BUILD[-1]}@g" \
193     ${DTC_PERF_SOURCE_DIR}/index.rst
194 sed -i -e "s@###JOB###@${JEN_JOB}\/${JEN_BUILD[-1]}@g" \
195     ${DTC_PERF_SOURCE_OPER_DIR}/index.rst
196 sed -i -e "s@###LINK###@${JEN_URL}\/${JEN_JOB}\/${JEN_BUILD[-1]}@g" \
197     ${DTC_PERF_SOURCE_OPER_DIR}/index.rst
198 rm -f ${DTR_PERF_SOURCE_DIR}/*.json
199 rm -f ${DTC_PERF_SOURCE_DIR}/*.json
200 rm -f ${DTC_PERF_SOURCE_OPER_DIR}/*.json
201
202 ### DPDK PERFORMANCE SOURCE DATA
203
204 JEN_JOB='csit-dpdk-perf-1704-all'
205 JEN_BUILD=(1 2 3 4 5)
206
207 for i in "${JEN_BUILD[@]}"; do
208     curl -fs ${JEN_URL}/${JEN_JOB}/${i}/artifact/${JEN_FILE_PERF} \
209         -o ${STATIC_DIR_TESTPMD}/${JEN_JOB}-${i}.xml
210     curl -fs ${JEN_URL}/${JEN_JOB}/${i}/artifact/\*zip\*/archive.zip \
211        -o ${STATIC_DIR_ARCH}/${JEN_JOB}-${i}.zip
212 done
213
214 # DELETE ME
215 #cp ./${JEN_JOB}-${JEN_BUILD[-1]}.zip ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD[-1]}.zip
216
217 unzip -o ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD[-1]}.zip -d ${WORKING_DIR}/
218 # Testpmd Performance Results
219 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
220     --output ${DTR_TESTPMD_SOURCE_DIR}/testpmd_performance_results.rst \
221     --formatting rst --start 3 --level 2
222 sed -i -e "s@###JOB###@${JEN_JOB}\/${JEN_BUILD[-1]}@g" \
223     ${DTR_TESTPMD_SOURCE_DIR}/index.rst
224 sed -i -e "s@###LINK###@${JEN_URL}\/${JEN_JOB}\/${JEN_BUILD[-1]}@g" \
225     ${DTR_TESTPMD_SOURCE_DIR}/index.rst
226 rm -f ${DTR_TESTPMD_SOURCE_DIR}/*.json
227
228 ### FUNCTIONAL SOURCE DATA
229
230 JEN_JOB='csit-vpp-functional-1704-ubuntu1604-virl'
231 JEN_BUILD=45
232
233 curl -fs ${JEN_URL}/${JEN_JOB}/${JEN_BUILD}/artifact/\*zip\*/archive.zip \
234     -o ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD}.zip
235
236 # DELETE ME
237 #cp ./${JEN_JOB}-${JEN_BUILD}.zip ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD}.zip
238
239 unzip -o ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD}.zip -d ${WORKING_DIR}/
240 # Cop Address Security
241 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
242     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_cop.rst \
243     --formatting rst --start 4 --level 2 \
244     --regex ".+cop.*" \
245     --title "Cop Address Security"
246 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
247     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_cop.rst \
248     --data "VAT_H" -f "rst" --start 4 --level 2 \
249     --regex ".+cop.*" \
250     --title "Cop Address Security"
251 # DHCP Client and proxy
252 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
253     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_dhcp.rst \
254     --formatting rst --start 4 --level 2 \
255     --regex ".+dhcp.*" \
256     --title "DHCP - Client and Proxy"
257 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
258     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_dhcp.rst \
259     --data "VAT_H" -f "rst" --start 4 --level 2 \
260     --regex ".+dhcp.*" \
261     --title "DHCP - Client and Proxy"
262 # GRE Overlay Tunnels
263 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
264     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_gre.rst \
265     --formatting rst --start 4 --level 2 \
266     --regex ".+ethip4gre.*" \
267     --title "GRE Overlay Tunnels"
268 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
269     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_gre.rst \
270     --data "VAT_H" -f "rst" --start 4 --level 2 \
271     --regex ".+ethip4gre.*" \
272     --title "GRE Overlay Tunnels"
273 # iACL Security
274 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
275     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_iacl.rst \
276     --formatting rst --start 4 --level 2 \
277     --regex ".+iacl.*" \
278     --title "iACL Security"
279 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
280     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_iacl.rst \
281     --data "VAT_H" -f "rst" --start 4 --level 2 \
282     --regex ".+iacl.*" \
283     --title "iACL Security"
284 # IPSec - Tunnels and Transport
285 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
286     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_ipsec.rst \
287     --formatting rst --start 4 --level 2 \
288     --regex ".+ipsec(tnl|tpt)+-.*" \
289     --title "IPSec - Tunnels and Transport"
290 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
291     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_ipsec.rst \
292     --data "VAT_H" -f "rst" --start 4 --level 2 \
293     --regex ".+ipsec(tnl|tpt)+-.*" \
294     --title "IPSec - Tunnels and Transport"
295 # IPv4 Routed-Forwarding
296 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
297     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_ipv4.rst \
298     --formatting rst --start 4 --level 2 \
299     --regex ".+ethip4-ip4base-(func|ip4ecmp\-func|ip4proxyarp\-func|ip4arp\-func)+" \
300     --title "IPv4 Routed-Forwarding"
301 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
302     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_ipv4.rst \
303     --data "VAT_H" -f "rst" --start 4 --level 2 \
304     --regex ".+ethip4-ip4base-(func|ip4ecmp\-func|ip4proxyarp\-func|ip4arp\-func)+" \
305     --title "IPv4 Routed-Forwarding"
306 # IPv6 Routed-Forwarding
307 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
308     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_ipv6.rst \
309     --formatting rst --start 4 --level 2 \
310     --regex ".+ethip6-ip6base-(func|ip6ecmp\-func|ip6ra\-func)+" \
311     --title "IPv6 Routed-Forwarding"
312 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
313     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_ipv6.rst \
314     --data "VAT_H" -f "rst" --start 4 --level 2 \
315     --regex ".+ethip6-ip6base-(func|ip6ecmp\-func|ip6ra\-func)+" \
316     --title "IPv6 Routed-Forwarding"
317 # L2BD Ethernet Switching
318 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
319     --output ${DTR_SOURCE_DIR}/vpp_functional_results/vpp_functional_results_l2bd.rst \
320     --formatting rst --start 4 --level 2 \
321     --regex ".+eth-l2bdbasemac(lrn|stc)+-(func|eth\-2vhost|l2shg\-func).*" \
322     --title "L2BD Ethernet Switching"
323 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
324     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_l2bd.rst \
325     --data "VAT_H" -f "rst" --start 4 --level 2 \
326     --regex ".+eth-l2bdbasemac(lrn|stc)+-(func|eth\-2vhost|l2shg\-func).*" \
327     --title "L2BD Ethernet Switching"
328 # L2XC Ethernet Switching
329 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
330     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_l2xc.rst \
331     --formatting rst --start 4 --level 2 \
332     --regex ".+eth-l2xcbase-(eth|func).*" \
333     --title "L2XC Ethernet Switching"
334 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
335     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_l2xc.rst \
336     --data "VAT_H" -f "rst" --start 4 --level 2 \
337     --regex ".+eth-l2xcbase-(eth|func).*" \
338     --title "L2XC Ethernet Switching"
339 # LISP Overlay Tunnels
340 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
341     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_lisp.rst \
342     --formatting rst --start 4 --level 2 \
343     --regex ".+lisp.*" \
344     --title "LISP Overlay Tunnels"
345 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
346     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_lisp.rst \
347     --data "VAT_H" -f "rst" --start 4 --level 2 \
348     --regex ".+lisp.*" \
349     --title "LISP Overlay Tunnels"
350 # QoS Policer Metering
351 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
352     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_policer.rst \
353     --formatting rst --start 4 --level 2 \
354     --regex ".+ipolicemark.*" \
355     --title "QoS Policer Metering"
356 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
357     --output ${DTC_FUNC_SOURCE_DIR}/vpp_performancefunctional_configuration_policer.rst \
358     --data "VAT_H" -f "rst" --start 4 --level 2 \
359     --regex ".+ipolicemark.*" \
360     --title "QoS Policer Metering"
361 # RPF Source Security
362 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
363     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_rpf.rst \
364     --formatting rst --start 4 --level 2 \
365     --regex ".+rpf.*" \
366     --title "RPF Source Security"
367 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
368     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_rpf.rst \
369     --data "VAT_H" -f "rst" --start 4 --level 2 \
370     --regex ".+rpf.*" \
371     --title "RPF Source Security"
372 # Softwire Tunnels
373 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
374     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_softwire.rst \
375     --formatting rst --start 4 --level 2 \
376     --regex ".+swire.*" \
377     --title "Softwire Tunnels"
378 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
379     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_softwire.rst \
380     --data "VAT_H" -f "rst" --start 4 --level 2 \
381     --regex ".+swire.*" \
382     --title "Softwire Tunnels"
383 # Tap Interface
384 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
385     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_tap.rst \
386     --formatting rst --start 4 --level 2 \
387     --regex ".+tap.*" \
388     --title "Tap Interface"
389 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
390     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_tap.rst \
391     --data "VAT_H" -f "rst" --start 4 --level 2 \
392     --regex ".+tap.*" \
393     --title "Tap Interface"
394 # Telemetry - IPFIX and SPAN
395 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
396     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_telemetry.rst \
397     --formatting rst --start 4 --level 2 \
398     --regex ".+(ipfix|spanrx).*" \
399     --title "Telemetry - IPFIX and SPAN"
400 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
401     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_telemetry.rst \
402     --data "VAT_H" -f "rst" --start 4 --level 2 \
403     --regex ".+(ipfix|spanrx).*" \
404     --title "Telemetry - IPFIX and SPAN"
405 # VLAN Tag Translation
406 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
407     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_vlan.rst \
408     --formatting rst --start 4 --level 2 \
409     --regex ".+(dot1q\-|dot1ad\-).*" \
410     --title "VLAN Tag Translation"
411 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
412     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_vlan.rst \
413     --data "VAT_H" -f "rst" --start 4 --level 2 \
414     --regex ".+(dot1q\-|dot1ad\-).*" \
415     --title "VLAN Tag Translation"
416 # VRF Routed-Forwarding
417 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
418     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_vrf.rst \
419     --formatting rst --start 4 --level 2 \
420     --regex ".+ethip(4|6)+-ip(4|6)+basevrf.*" \
421     --title "VRF Routed-Forwarding"
422 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
423     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_vrf.rst \
424     --data "VAT_H" -f "rst" --start 4 --level 2 \
425     --regex ".+ethip(4|6)+-ip(4|6)+basevrf.*" \
426     --title "VRF Routed-Forwarding"
427 # VXLAN Overlay Tunnels
428 python run_robot_data.py -i ${WORKING_DIR}/archive/output.xml \
429     --output ${DTR_FUNC_SOURCE_DIR}/vpp_functional_results_vxlan.rst \
430     --formatting rst --start 4 --level 2 \
431     --regex ".+(ip4vxlan|ip6vxlan).*" \
432     --title "VXLAN Overlay Tunnels"
433 python run_robot_teardown_data.py -i ${WORKING_DIR}/archive/output.xml \
434     --output ${DTC_FUNC_SOURCE_DIR}/vpp_functional_configuration_vxlan.rst \
435     --data "VAT_H" -f "rst" --start 4 --level 2 \
436     --regex ".+(ip4vxlan|ip6vxlan).*" \
437     --title "VXLAN Overlay Tunnels"
438 sed -i -e "s@###JOB###@${JEN_JOB}\/${JEN_BUILD}@g" \
439     ${DTR_FUNC_SOURCE_DIR}/index.rst
440 sed -i -e "s@###LINK###@${JEN_URL}\/${JEN_JOB}\/${JEN_BUILD}@g" \
441     ${DTR_FUNC_SOURCE_DIR}/index.rst
442 sed -i -e "s@###JOB###@${JEN_JOB}\/${JEN_BUILD}@g" \
443     ${DTC_FUNC_SOURCE_DIR}/index.rst
444 sed -i -e "s@###LINK###@${JEN_URL}\/${JEN_JOB}\/${JEN_BUILD}@g" \
445     ${DTC_FUNC_SOURCE_DIR}/index.rst
446 rm -f ${DTR_FUNC_SOURCE_DIR}/*.json
447 rm -f ${DTC_FUNC_SOURCE_DIR}/*.json
448
449 ### HONEYCOMB SOURCE DATA
450
451 JEN_URL='https://jenkins.fd.io/view/hc2vpp/job'
452 JEN_JOB='hc2vpp-csit-integration-1704-ubuntu1604'
453 JEN_BUILD=41
454
455 curl -fs ${JEN_URL}/${JEN_JOB}/${JEN_BUILD}/artifact/\*zip\*/archive.zip \
456     -o ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD}.zip
457
458 # DELETE ME
459 #cp ./${JEN_JOB}-${JEN_BUILD}.zip ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD}.zip
460
461 unzip -o ${STATIC_DIR_ARCH}/${JEN_JOB}-${JEN_BUILD}.zip -d ${WORKING_DIR}/
462 python run_robot_data.py -i ${WORKING_DIR}/archive/csit/output.xml \
463     --output ${DTR_HONEYCOMB_SOURCE_DIR}/honeycomb_functional_results.rst \
464     --formatting rst --start 3 --level 2
465 sed -i -e "s@###JOB###@${JEN_JOB}\/${JEN_BUILD}@g" \
466     ${DTR_HONEYCOMB_SOURCE_DIR}/index.rst
467 sed -i -e "s@###LINK###@${JEN_URL}\/${JEN_JOB}\/${JEN_BUILD}@g" \
468     ${DTR_HONEYCOMB_SOURCE_DIR}/index.rst
469 rm -f ${DTR_HONEYCOMB_SOURCE_DIR}/*.json
470
471 # Generate the documentation:
472
473 DATE=$(date -u '+%d-%b-%Y')
474
475 sphinx-build -v -c . -a -b html -E \
476     -D release=$1 -D version="$1 report - $DATE" \
477     ${SOURCE_DIR} ${BUILD_DIR}/
478
479 # Patch the CSS for tables layout
480 cat - > ${CSS_PATCH_FILE} <<"_EOF"
481 /* override table width restrictions */
482 @media screen and (min-width: 767px) {
483     .wy-table-responsive table td, .wy-table-responsive table th {
484         white-space: normal !important;
485     }
486
487     .wy-table-responsive {
488         font-size: small;
489         margin-bottom: 24px;
490         max-width: 100%;
491         overflow: visible !important;
492     }
493 }
494 _EOF
495
496 # Plot packets per second
497
498 python run_plot.py --input ${STATIC_DIR_VPP} \
499     --output ${STATIC_DIR_VPP}/64B-1t1c-l2-ndrdisc \
500     --title "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc" \
501     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]'
502 python run_plot.py --input ${STATIC_DIR_VPP} \
503     --output ${STATIC_DIR_VPP}/64B-2t2c-l2-ndrdisc \
504     --title "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc" \
505     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]'
506
507 python run_plot.py --input ${STATIC_DIR_VPP} \
508     --output ${STATIC_DIR_VPP}/64B-1t1c-ethip4-ip4-ndrdisc \
509     --title "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc" \
510     --xpath '//*[@framesize="64B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and contains(@tags,"IP4FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]'
511 python run_plot.py --input ${STATIC_DIR_VPP} \
512     --output ${STATIC_DIR_VPP}/64B-2t2c-ethip4-ip4-ndrdisc \
513     --title "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc" \
514     --xpath '//*[@framesize="64B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and contains(@tags,"IP4FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]'
515
516 python run_plot.py --input ${STATIC_DIR_VPP} \
517     --output ${STATIC_DIR_VPP}/78B-1t1c-ethip6-ip6-ndrdisc \
518     --title "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc" \
519     --xpath '//*[@framesize="78B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and contains(@tags,"IP6FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]'
520 python run_plot.py --input ${STATIC_DIR_VPP} \
521     --output ${STATIC_DIR_VPP}/78B-2t2c-ethip6-ip6-ndrdisc \
522     --title "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc" \
523     --xpath '//*[@framesize="78B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and contains(@tags,"IP6FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]'
524
525 python run_plot.py --input ${STATIC_DIR_VPP} \
526     --output ${STATIC_DIR_VPP}/64B-1t1c-ethip4-ndrdisc \
527     --title "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc" \
528     --xpath '//*[@framesize="64B" and contains(@tags,"ENCAP") and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]'
529 python run_plot.py --input ${STATIC_DIR_VPP} \
530     --output ${STATIC_DIR_VPP}/64B-2t2c-ethip4-ndrdisc \
531     --title "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc" \
532     --xpath '//*[@framesize="64B" and contains(@tags,"ENCAP") and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]'
533
534 python run_plot.py --input ${STATIC_DIR_VPP} \
535     --output ${STATIC_DIR_VPP}/78B-1t1c-ethip6-ndrdisc \
536     --title "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc" \
537     --xpath '//*[@framesize="78B" and contains(@tags,"ENCAP") and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]'
538 python run_plot.py --input ${STATIC_DIR_VPP} \
539     --output ${STATIC_DIR_VPP}/78B-2t2c-ethip6-ndrdisc \
540     --title "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc" \
541     --xpath '//*[@framesize="78B" and contains(@tags,"ENCAP") and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]'
542
543 python run_plot.py --input ${STATIC_DIR_VPP} \
544     --output ${STATIC_DIR_VPP}/64B-1t1c-vhost-ndrdisc \
545     --title "64B-1t1c-.*vhost.*-ndrdisc" \
546     --xpath '//*[@framesize="64B" and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and contains(@tags,"VHOST")]'
547 python run_plot.py --input ${STATIC_DIR_VPP} \
548     --output ${STATIC_DIR_VPP}/64B-2t2c-vhost-ndrdisc \
549     --title "64B-2t2c-.*vhost.*-ndrdisc" \
550     --xpath '//*[@framesize="64B" and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and contains(@tags,"VHOST")]'
551
552 python run_plot.py --input ${STATIC_DIR_VPP} \
553     --output ${STATIC_DIR_VPP}/64B-1t1c-ipsechw-ndrdisc \
554     --title "64B-1t1c-.*ipsec.*-ndrdisc" \
555     --xpath '//*[@framesize="64B" and not(contains(@tags, "VHOST")) and contains(@tags, "IP4FWD") and contains(@tags, "NDRDISC") and contains(@tags, "1T1C") and contains(@tags, "IPSECHW") and (contains(@tags, "IPSECTRAN") or contains(@tags, "IPSECTUN"))]'
556 python run_plot.py --input ${STATIC_DIR_VPP} \
557     --output ${STATIC_DIR_VPP}/64B-2t2c-ipsechw-ndrdisc \
558     --title "64B-2t2c-.*ipsec.*-ndrdisc" \
559     --xpath '//*[@framesize="64B" and not(contains(@tags, "VHOST")) and contains(@tags, "IP4FWD") and contains(@tags, "NDRDISC") and contains(@tags, "2T2C") and contains(@tags, "IPSECHW") and (contains(@tags, "IPSECTRAN") or contains(@tags, "IPSECTUN"))]'
560
561 python run_plot.py --input ${STATIC_DIR_VPP} \
562     --output ${STATIC_DIR_VPP}/64B-1t1c-l2-pdrdisc \
563     --title "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc" \
564     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"1T1C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]'
565 python run_plot.py --input ${STATIC_DIR_VPP} \
566     --output ${STATIC_DIR_VPP}/64B-2t2c-l2-pdrdisc \
567     --title "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc" \
568     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"2T2C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]'
569
570 python run_plot.py --input ${STATIC_DIR_VPP} \
571     --output ${STATIC_DIR_VPP}/64B-1t1c-ethip4-ip4-pdrdisc \
572     --title "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc" \
573     --xpath '//*[@framesize="64B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"1T1C") and contains(@tags,"IP4FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]'
574 python run_plot.py --input ${STATIC_DIR_VPP} \
575     --output ${STATIC_DIR_VPP}/64B-2t2c-ethip4-ip4-pdrdisc \
576     --title "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc" \
577     --xpath '//*[@framesize="64B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"2T2C") and contains(@tags,"IP4FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]'
578
579 python run_plot.py --input ${STATIC_DIR_VPP} \
580     --output ${STATIC_DIR_VPP}/78B-1t1c-ethip6-ip6-pdrdisc \
581     --title "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc" \
582     --xpath '//*[@framesize="78B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"1T1C") and contains(@tags,"IP6FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]'
583 python run_plot.py --input ${STATIC_DIR_VPP} \
584     --output ${STATIC_DIR_VPP}/78B-2t2c-ethip6-ip6-pdrdisc \
585     --title "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc" \
586     --xpath '//*[@framesize="78B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"2T2C") and contains(@tags,"IP6FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]'
587
588 python run_plot.py --input ${STATIC_DIR_VPP} \
589     --output ${STATIC_DIR_VPP}/64B-1t1c-ethip4-pdrdisc \
590     --title "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc" \
591     --xpath '//*[@framesize="64B" and contains(@tags,"ENCAP") and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"1T1C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]'
592 python run_plot.py --input ${STATIC_DIR_VPP} \
593     --output ${STATIC_DIR_VPP}/64B-2t2c-ethip4-pdrdisc \
594     --title "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc" \
595     --xpath '//*[@framesize="64B" and contains(@tags,"ENCAP") and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"2T2C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]'
596
597 python run_plot.py --input ${STATIC_DIR_VPP} \
598     --output ${STATIC_DIR_VPP}/78B-1t1c-ethip6-pdrdisc \
599     --title "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc" \
600     --xpath '//*[@framesize="78B" and contains(@tags,"ENCAP") and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"1T1C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]'
601 python run_plot.py --input ${STATIC_DIR_VPP} \
602     --output ${STATIC_DIR_VPP}/78B-2t2c-ethip6-pdrdisc \
603     --title "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc" \
604     --xpath '//*[@framesize="78B" and contains(@tags,"ENCAP") and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"2T2C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]'
605
606 python run_plot.py --input ${STATIC_DIR_VPP} \
607     --output ${STATIC_DIR_VPP}/64B-1t1c-vhost-pdrdisc \
608     --title "64B-1t1c-.*vhost.*-pdrdisc" \
609     --xpath '//*[@framesize="64B" and contains(@tags,"PDRDISC") and contains(@tags,"1T1C") and not(contains(@tags,"NDRDISC")) and contains(@tags,"VHOST")]'
610 python run_plot.py --input ${STATIC_DIR_VPP} \
611     --output ${STATIC_DIR_VPP}/64B-2t2c-vhost-pdrdisc \
612     --title "64B-2t2c-.*vhost.*-pdrdisc" \
613     --xpath '//*[@framesize="64B" and contains(@tags,"PDRDISC") and contains(@tags,"2T2C") and not(contains(@tags,"NDRDISC")) and contains(@tags,"VHOST")]'
614
615 python run_plot.py --input ${STATIC_DIR_VPP} \
616     --output ${STATIC_DIR_VPP}/64B-1t1c-ipsechw-pdrdisc \
617     --title "64B-1t1c-.*ipsec.*-pdrdisc" \
618     --xpath '//*[@framesize="64B" and not(contains(@tags, "VHOST")) and contains(@tags, "IP4FWD") and contains(@tags, "PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags, "1T1C") and contains(@tags, "IPSECHW") and (contains(@tags, "IPSECTRAN") or contains(@tags, "IPSECTUN"))]'
619 python run_plot.py --input ${STATIC_DIR_VPP} \
620     --output ${STATIC_DIR_VPP}/64B-2t2c-ipsechw-pdrdisc \
621     --title "64B-2t2c-.*ipsec.*-pdrdisc" \
622     --xpath '//*[@framesize="64B" and not(contains(@tags, "VHOST")) and contains(@tags, "IP4FWD") and contains(@tags, "PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags, "2T2C") and contains(@tags, "IPSECHW") and (contains(@tags, "IPSECTRAN") or contains(@tags, "IPSECTUN"))]'
623
624 python run_plot.py --input ${STATIC_DIR_TESTPMD} \
625     --output ${STATIC_DIR_TESTPMD}/64B-1t1c-l2-ndrdisc \
626     --title "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc" \
627     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]'
628 python run_plot.py --input ${STATIC_DIR_TESTPMD} \
629     --output ${STATIC_DIR_TESTPMD}/64B-2t2c-l2-ndrdisc \
630     --title "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc" \
631     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]'
632
633 python run_plot.py --input ${STATIC_DIR_TESTPMD} \
634     --output ${STATIC_DIR_TESTPMD}/64B-1t1c-l2-pdrdisc \
635     --title "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc" \
636     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"1T1C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]'
637 python run_plot.py --input ${STATIC_DIR_TESTPMD} \
638     --output ${STATIC_DIR_TESTPMD}/64B-2t2c-l2-pdrdisc \
639     --title "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc" \
640     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"PDRDISC") and not(contains(@tags,"NDRDISC")) and contains(@tags,"2T2C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]'
641
642 # Plot latency
643
644 python run_plot.py --input ${STATIC_DIR_VPP} \
645     --output ${STATIC_DIR_VPP}/64B-1t1c-l2-ndrdisc-lat50 \
646     --title "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc" \
647     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]' --latency lat_50
648 python run_plot.py --input ${STATIC_DIR_VPP} \
649     --output ${STATIC_DIR_VPP}/64B-2t2c-l2-ndrdisc-lat50 \
650     --title "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc" \
651     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]' --latency lat_50
652
653 python run_plot.py --input ${STATIC_DIR_VPP} \
654     --output ${STATIC_DIR_VPP}/64B-1t1c-ethip4-ip4-ndrdisc-lat50 \
655     --title "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc" \
656     --xpath '//*[@framesize="64B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and contains(@tags,"IP4FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]' --latency lat_50
657 python run_plot.py --input ${STATIC_DIR_VPP} \
658     --output ${STATIC_DIR_VPP}/64B-2t2c-ethip4-ip4-ndrdisc-lat50 \
659     --title "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc" \
660     --xpath '//*[@framesize="64B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and contains(@tags,"IP4FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]' --latency lat_50
661
662 python run_plot.py --input ${STATIC_DIR_VPP} \
663     --output ${STATIC_DIR_VPP}/78B-1t1c-ethip6-ip6-ndrdisc-lat50 \
664     --title "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc" \
665     --xpath '//*[@framesize="78B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and contains(@tags,"IP6FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]' --latency lat_50
666 python run_plot.py --input ${STATIC_DIR_VPP} \
667     --output ${STATIC_DIR_VPP}/78B-2t2c-ethip6-ip6-ndrdisc-lat50 \
668     --title "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc" \
669     --xpath '//*[@framesize="78B" and (contains(@tags,"BASE") or contains(@tags,"SCALE") or contains(@tags,"FEATURE")) and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and contains(@tags,"IP6FWD") and not(contains(@tags,"IPSEC")) and not(contains(@tags,"VHOST"))]' --latency lat_50
670
671 python run_plot.py --input ${STATIC_DIR_VPP} \
672     --output ${STATIC_DIR_VPP}/64B-1t1c-ethip4-ndrdisc-lat50 \
673     --title "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc" \
674     --xpath '//*[@framesize="64B" and contains(@tags,"ENCAP") and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]' --latency lat_50
675 python run_plot.py --input ${STATIC_DIR_VPP} \
676     --output ${STATIC_DIR_VPP}/64B-2t2c-ethip4-ndrdisc-lat50 \
677     --title "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc" \
678     --xpath '//*[@framesize="64B" and contains(@tags,"ENCAP") and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]' --latency lat_50
679
680 python run_plot.py --input ${STATIC_DIR_VPP} \
681     --output ${STATIC_DIR_VPP}/78B-1t1c-ethip6-ndrdisc-lat50 \
682     --title "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc" \
683     --xpath '//*[@framesize="78B" and contains(@tags,"ENCAP") and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]' --latency lat_50
684 python run_plot.py --input ${STATIC_DIR_VPP} \
685     --output ${STATIC_DIR_VPP}/78B-2t2c-ethip6-ndrdisc-lat50 \
686     --title "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc" \
687     --xpath '//*[@framesize="78B" and contains(@tags,"ENCAP") and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and (contains(@tags,"VXLAN") or contains(@tags,"VXLANGPE") or contains(@tags,"LISP") or contains(@tags,"LISPGPE") or contains(@tags,"GRE")) and not(contains(@tags,"VHOST"))]' --latency lat_50
688
689 python run_plot.py --input ${STATIC_DIR_VPP} \
690     --output ${STATIC_DIR_VPP}/64B-1t1c-vhost-ndrdisc-lat50 \
691     --title "64B-1t1c-.*vhost.*-ndrdisc" \
692     --xpath '//*[@framesize="64B" and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and contains(@tags,"VHOST")]' --latency lat_50
693 python run_plot.py --input ${STATIC_DIR_VPP} \
694     --output ${STATIC_DIR_VPP}/64B-2t2c-vhost-ndrdisc-lat50 \
695     --title "64B-2t2c-.*vhost.*-ndrdisc" \
696     --xpath '//*[@framesize="64B" and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and contains(@tags,"VHOST")]' --latency lat_50
697
698 python run_plot.py --input ${STATIC_DIR_VPP} \
699     --output ${STATIC_DIR_VPP}/64B-1t1c-ipsechw-ndrdisc-lat50 \
700     --title "64B-1t1c-.*ipsec.*-ndrdisc" \
701     --xpath '//*[@framesize="64B" and not(contains(@tags, "VHOST")) and contains(@tags, "IP4FWD") and contains(@tags, "NDRDISC") and contains(@tags, "1T1C") and contains(@tags, "IPSECHW") and (contains(@tags, "IPSECTRAN") or contains(@tags, "IPSECTUN"))]' --latency lat_50
702 python run_plot.py --input ${STATIC_DIR_VPP} \
703     --output ${STATIC_DIR_VPP}/64B-2t2c-ipsechw-ndrdisc-lat50 \
704     --title "64B-2t2c-.*ipsec.*-ndrdisc" \
705     --xpath '//*[@framesize="64B" and not(contains(@tags, "VHOST")) and contains(@tags, "IP4FWD") and contains(@tags, "NDRDISC") and contains(@tags, "2T2C") and contains(@tags, "IPSECHW") and (contains(@tags, "IPSECTRAN") or contains(@tags, "IPSECTUN"))]' --latency lat_50
706
707 python run_plot.py --input ${STATIC_DIR_TESTPMD} \
708     --output ${STATIC_DIR_TESTPMD}/64B-1t1c-l2-ndrdisc-lat50 \
709     --title "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc" \
710     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"NDRDISC") and contains(@tags,"1T1C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]' --latency lat_50
711 python run_plot.py --input ${STATIC_DIR_TESTPMD} \
712     --output ${STATIC_DIR_TESTPMD}/64B-2t2c-l2-ndrdisc-lat50 \
713     --title "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc" \
714     --xpath '//*[@framesize="64B" and contains(@tags,"BASE") and contains(@tags,"NDRDISC") and contains(@tags,"2T2C") and (contains(@tags,"L2BDMACSTAT") or contains(@tags,"L2BDMACLRN") or contains(@tags,"L2XCFWD")) and not(contains(@tags,"VHOST"))]' --latency lat_50
715
716 # Create archive
717 echo Creating csit.report.tar.gz ...
718 tar -czvf ./csit.report.tar.gz ${BUILD_DIR}

©2016 FD.io a Linux Foundation Collaborative Project. All Rights Reserved.
Linux Foundation is a registered trademark of The Linux Foundation. Linux is a registered trademark of Linus Torvalds.
Please see our privacy policy and terms of use.