Report: Remove *CHK tests from report
[csit.git] / resources / tools / presentation / specification.yaml
1 -
2   type: "environment"
3   configuration:
4     # Debug mode:
5     # - Skip:
6     #   - Download of input data files
7     # - Do:
8     #   - Read data from given zip / xml files
9     #   - Set the configuration as it is done in normal mode
10     # If the section "type: debug" is missing, CFG[DEBUG] is set to 0.
11     CFG[DEBUG]: 0
12
13   paths:
14     # Top level directories:
15     ## Working directory
16     DIR[WORKING]: "_tmp"
17     ## Build directories
18     DIR[BUILD,HTML]: "_build"
19     DIR[BUILD,LATEX]: "_build_latex"
20
21     # Static .rst files
22     DIR[RST]: "../../../docs/report"
23
24     # Working directories
25     ## Input data files (.zip, .xml)
26     DIR[WORKING,DATA]: "{DIR[WORKING]}/data"
27     ## Static source files from git
28     DIR[WORKING,SRC]: "{DIR[WORKING]}/src"
29     DIR[WORKING,SRC,STATIC]: "{DIR[WORKING,SRC]}/_static"
30
31     # Static html content
32     DIR[STATIC]: "{DIR[BUILD,HTML]}/_static"
33     DIR[STATIC,VPP]: "{DIR[STATIC]}/vpp"
34     DIR[STATIC,DPDK]: "{DIR[STATIC]}/dpdk"
35     DIR[STATIC,ARCH]: "{DIR[STATIC]}/archive"
36
37     # Detailed test results
38     DIR[DTR]: "{DIR[WORKING,SRC]}/detailed_test_results"
39     DIR[DTR,PERF,DPDK]: "{DIR[DTR]}/dpdk_performance_results"
40     DIR[DTR,PERF,VPP]: "{DIR[DTR]}/vpp_performance_results"
41     DIR[DTR,PERF,COT]: "{DIR[DTR]}/cot_performance_results"
42     DIR[DTR,PERF,HC]: "{DIR[DTR]}/honeycomb_performance_results"
43     DIR[DTR,FUNC,VPP]: "{DIR[DTR]}/vpp_functional_results"
44     DIR[DTR,FUNC,HC]: "{DIR[DTR]}/honeycomb_functional_results"
45     DIR[DTR,FUNC,NSHSFC]: "{DIR[DTR]}/nshsfc_functional_results"
46     DIR[DTR,PERF,VPP,IMPRV]: "{DIR[WORKING,SRC]}/vpp_performance_tests/performance_improvements"
47
48     # Detailed test configurations
49     DIR[DTC]: "{DIR[WORKING,SRC]}/test_configuration"
50     DIR[DTC,PERF,VPP]: "{DIR[DTC]}/vpp_performance_configuration"
51     DIR[DTC,FUNC,VPP]: "{DIR[DTC]}/vpp_functional_configuration"
52
53     # Detailed tests operational data
54     DIR[DTO]: "{DIR[WORKING,SRC]}/test_operational_data"
55     DIR[DTO,PERF,VPP]: "{DIR[DTO]}/vpp_performance_operational_data"
56
57     # .css patch file to fix tables generated by Sphinx
58     DIR[CSS_PATCH_FILE]: "{DIR[STATIC]}/theme_overrides.css"
59     DIR[CSS_PATCH_FILE2]: "{DIR[WORKING,SRC,STATIC]}/theme_overrides.css"
60
61   urls:
62     URL[JENKINS,CSIT]: "https://jenkins.fd.io/view/csit/job"
63     URL[JENKINS,HC]: "https://jenkins.fd.io/view/hc2vpp/job"
64
65   make-dirs:
66   # List the directories which are created while preparing the environment.
67   # All directories MUST be defined in "paths" section.
68   - "DIR[WORKING,DATA]"
69   - "DIR[STATIC,VPP]"
70   - "DIR[STATIC,DPDK]"
71   - "DIR[STATIC,ARCH]"
72   - "DIR[BUILD,LATEX]"
73   - "DIR[WORKING,SRC]"
74   - "DIR[WORKING,SRC,STATIC]"
75
76   remove-dirs:
77   # List the directories which are deleted while cleaning the environment.
78   # All directories MUST be defined in "paths" section.
79   #- "DIR[BUILD,HTML]"
80
81   build-dirs:
82   # List the directories where the results (build) is stored.
83   # All directories MUST be defined in "paths" section.
84   - "DIR[BUILD,HTML]"
85   - "DIR[BUILD,LATEX]"
86
87 -
88   type: "configuration"
89   data-sets:
90     performance-improvements:
91       csit-vpp-perf-1707-all:
92       - 9
93       - 10
94       - 13
95       - 14
96       - 15
97       - 16
98       - 17
99       - 18
100       - 19
101       - 21
102       csit-vpp-perf-1710-all:
103       - 11
104       - 12
105       - 13
106       - 14
107       - 15
108       - 16
109       - 17
110       - 18
111       - 19
112       - 20
113       csit-ligato-perf-1710-all:
114       - 5
115       - 7
116       - 8
117       - 9
118       - 10
119       - 11
120       - 12
121       - 13
122       - 16
123       - 17
124     vpp-perf-results:
125       csit-vpp-perf-1710-all:
126       - 20
127       - 23
128     vpp-func-results:
129       csit-vpp-functional-1710-ubuntu1604-virl:
130       - 126
131     ligato-perf-results:
132       csit-ligato-perf-1710-all:
133       - 17
134     dpdk-perf-results:
135       csit-dpdk-perf-1710-all:
136       - 13
137     hc-func-results:
138       csit-hc2vpp-verify-func-1710-ubuntu1604:
139       - "lastSuccessfulBuild"
140     nsh-func-results:
141       csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:
142       - 7
143     plot-vpp-throughput-latency:
144       csit-vpp-perf-1710-all:
145       - 11
146       - 12
147       - 13
148       - 14
149       - 15
150       - 16
151       - 17
152       - 18
153       - 19
154       - 20
155     plot-dpdk-throughput-latency:
156       csit-dpdk-perf-1710-all:
157       - 2
158       - 3
159       - 5
160       - 6
161       - 7
162       - 8
163       - 9
164       - 10
165       - 11
166       - 13
167     plot-ligato-throughput-latency:
168       csit-ligato-perf-1710-all:
169       - 5
170       - 7
171       - 8
172       - 9
173       - 10
174       - 11
175       - 12
176       - 13
177       - 16
178       - 17
179   plot-layouts:
180     plot-throughput:
181       xaxis:
182         autorange: True
183         autotick: False
184         fixedrange: False
185         gridcolor: "rgb(238, 238, 238)"
186         linecolor: "rgb(238, 238, 238)"
187         linewidth: 1
188         showgrid: True
189         showline: True
190         showticklabels: True
191         tickcolor: "rgb(238, 238, 238)"
192         tickmode: "linear"
193         title: "Indexed Test Cases"
194         zeroline: False
195       yaxis:
196         gridcolor: "rgb(238, 238, 238)'"
197         hoverformat: ".4s"
198         linecolor: "rgb(238, 238, 238)"
199         linewidth: 1
200         range: []
201         showgrid: True
202         showline: True
203         showticklabels: True
204         tickcolor: "rgb(238, 238, 238)"
205         title: "Packets Per Second [pps]"
206         zeroline: False
207       boxmode: "group"
208       boxgroupgap: 0.5
209       autosize: False
210       margin:
211         t: 50
212         b: 20
213         l: 50
214         r: 20
215       showlegend: True
216       legend:
217         orientation: "h"
218       width: 700
219       height: 1000
220     plot-latency:
221       xaxis:
222         autorange: True
223         autotick: False
224         fixedrange: False
225         gridcolor: "rgb(238, 238, 238)"
226         linecolor: "rgb(238, 238, 238)"
227         linewidth: 1
228         showgrid: True
229         showline: True
230         showticklabels: True
231         tickcolor: "rgb(238, 238, 238)"
232         tickmode: "linear"
233         title: "Indexed Test Cases"
234         zeroline: False
235       yaxis:
236         gridcolor: "rgb(238, 238, 238)'"
237         hoverformat: ""
238         linecolor: "rgb(238, 238, 238)"
239         linewidth: 1
240         range: []
241         showgrid: True
242         showline: True
243         showticklabels: True
244         tickcolor: "rgb(238, 238, 238)"
245         title: "Latency min/avg/max [uSec]"
246         zeroline: False
247       boxmode: "group"
248       boxgroupgap: 0.5
249       autosize: False
250       margin:
251         t: 50
252         b: 20
253         l: 50
254         r: 20
255       showlegend: True
256       legend:
257         orientation: "h"
258       width: 700
259       height: 1000
260
261 -
262   type: "debug"
263   general:
264     input-format: "xml"  # zip or xml
265     extract: "robot-plugin/output.xml"  # Only for zip
266   builds:
267     # The files must be in the directory DIR[WORKING,DATA]
268     csit-dpdk-perf-1707-all:
269     -
270       build: 10
271       file: "{DIR[WORKING,DATA]}/csit-dpdk-perf-1707-all__10.xml"
272     -
273       build: 9
274       file: "{DIR[WORKING,DATA]}/csit-dpdk-perf-1707-all__9.xml"
275     csit-nsh_sfc-verify-func-1707-ubuntu1604-virl:
276     -
277       build: 2
278       file: "{DIR[WORKING,DATA]}/csit-nsh_sfc-verify-func-1707-ubuntu1604-virl-2.xml"
279     csit-vpp-functional-1707-ubuntu1604-virl:
280     -
281       build: lastSuccessfulBuild
282       file: "{DIR[WORKING,DATA]}/csit-vpp-functional-1707-ubuntu1604-virl-lastSuccessfulBuild.xml"
283     hc2vpp-csit-integration-1707-ubuntu1604:
284     -
285       build: lastSuccessfulBuild
286       file: "{DIR[WORKING,DATA]}/hc2vpp-csit-integration-1707-ubuntu1604-lastSuccessfulBuild.xml"
287     csit-vpp-perf-1707-all:
288     -
289       build: 16
290       file: "{DIR[WORKING,DATA]}/csit-vpp-perf-1707-all__16__output.xml"
291     -
292       build: 17
293       file: "{DIR[WORKING,DATA]}/csit-vpp-perf-1707-all__17__output.xml"
294
295 -
296   type: "static"
297   src-path: "{DIR[RST]}"
298   dst-path: "{DIR[WORKING,SRC]}"
299
300 -
301   type: "input"  # Ignored in debug mode
302   general:
303     file-name: "robot-plugin.zip"
304     file-format: ".zip"
305     download-path: "{job}/{build}/robot/report/*zip*/{filename}"
306     extract: "robot-plugin/output.xml"
307   builds:
308     csit-vpp-perf-1707-all:
309     - 9
310     - 10
311     - 13
312     - 14
313     - 15
314     - 16
315     - 17
316     - 18
317     - 19
318     - 21
319     csit-vpp-perf-1710-all:
320     - 11
321     - 12
322     - 13
323     - 14
324     - 15
325     - 16
326     - 17
327     - 18
328     - 19
329     - 20
330     - 23
331     csit-dpdk-perf-1710-all:
332     - 2
333     - 3
334     - 5
335     - 6
336     - 7
337     - 8
338     - 9
339     - 10
340     - 11
341     - 13
342     csit-ligato-perf-1710-all:
343     - 5
344     - 7
345     - 8
346     - 9
347     - 10
348     - 11
349     - 12
350     - 13
351     - 16
352     - 17
353     csit-vpp-functional-1710-ubuntu1604-virl:
354     - 126
355     csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:
356     - 7
357     csit-hc2vpp-verify-func-1710-ubuntu1604:
358     - lastSuccessfulBuild
359
360 -
361   type: "output"
362   format:
363     html:
364     - full
365     pdf:
366     - minimal
367
368 ################################################################################
369 ###                               T A B L E S                                ###
370 ################################################################################
371
372 -
373   type: "table"
374   title: "Performance improvements"
375   algorithm: "table_performance_improvements"
376   template: "{DIR[DTR,PERF,VPP,IMPRV]}/tmpl_performance_improvements.csv"
377   output-file-ext: ".csv"
378   output-file: "{DIR[DTR,PERF,VPP,IMPRV]}/performance_improvements"
379   columns:
380   -
381     title: "Functionality"
382     data: "template 1"
383   -
384     title: "Test Name"
385     data: "template 2"
386   -
387     title: "16.09 mean [Mpps]"
388     data: "template 3"
389   -
390     title: "17.01 mean [Mpps]"
391     data: "template 4"
392   -
393     title: "17.04 mean [Mpps]"
394     data: "template 5"
395   -
396     title: "17.07 mean [Mpps]"
397     data: "data csit-vpp-perf-1707-all mean"
398   -
399     title: "17.10 mean [Mpps]"
400     data: "data csit-vpp-perf-1710-all csit-ligato-perf-1710-all mean"
401   -
402     title: "17.10 stdev [Mpps]"
403     data: "data csit-vpp-perf-1710-all csit-ligato-perf-1710-all stdev"
404   -
405     title: "17.07 to 17.10 change [%]"
406     data: "operation relative_change 5 6"
407   rows: "generated"
408   data:
409     "performance-improvements"
410   filter: "template"
411   parameters:
412   - "throughput"
413
414 -
415   type: "table"
416   title: "Detailed Test Results - VPP Performance Results"
417   algorithm: "table_merged_details"
418   output-file-ext: ".csv"
419   output-file: "{DIR[DTR,PERF,VPP]}/vpp_performance_results"
420   columns:
421   -
422     title: "Name"
423     data: "data name"
424   -
425     title: "Documentation"
426     data: "data doc"
427   -
428     title: "Status"
429     data: "data msg"
430   rows: "generated"
431   data:
432     "vpp-perf-results"
433   filter: "not 'NDRCHK' and not 'PDRCHK'"
434   parameters:
435   - "name"
436   - "parent"
437   - "doc"
438   - "msg"
439
440 -
441   type: "table"
442   title: "Test configuration - VPP Performance Test Configs"
443   algorithm: "table_merged_details"
444   output-file-ext: ".csv"
445   output-file: "{DIR[DTC,PERF,VPP]}/vpp_test_configuration"
446   columns:
447   -
448     title: "Name"
449     data: "data name"
450   -
451     title: "VPP API Test (VAT) Commands History - Commands Used Per Test Case"
452     data: "data vat-history"
453   rows: "generated"
454   data:
455     "vpp-perf-results"
456   filter: "not 'NDRCHK' and not 'PDRCHK'"
457   parameters:
458   - "parent"
459   - "name"
460   - "vat-history"
461
462 -
463   type: "table"
464   title: "Test Operational Data - VPP Performance Operational Data"
465   algorithm: "table_merged_details"
466   output-file-ext: ".csv"
467   output-file: "{DIR[DTO,PERF,VPP]}/vpp_test_operational"
468   columns:
469   -
470     title: "Name"
471     data: "data name"
472   -
473     title: "VPP Operational Data - Outputs of 'show runtime' at NDR packet rate"
474     data: "data show-run"
475   rows: "generated"
476   data:
477     "vpp-perf-results"
478   filter: "not 'NDRCHK' and not 'PDRCHK'"
479   parameters:
480   - "parent"
481   - "name"
482   - "show-run"
483
484 -
485   type: "table"
486   title: "Detailed Test Results - VPP Functional Results"
487   algorithm: "table_details"
488   output-file-ext: ".csv"
489   output-file: "{DIR[DTR,FUNC,VPP]}/vpp_functional_results"
490   columns:
491   -
492     title: "Name"
493     data: "data name"
494   -
495     title: "Documentation"
496     data: "data doc"
497   -
498     title: "Status"
499     data: "data status"
500   rows: "generated"
501   data:
502     "vpp-func-results"
503   filter: "all"
504   parameters:
505   - "name"
506   - "parent"
507   - "doc"
508   - "status"
509
510 -
511   type: "table"
512   title: "Test configuration - VPP Functional Test Configs"
513   algorithm: "table_details"
514   output-file-ext: ".csv"
515   output-file: "{DIR[DTC,FUNC,VPP]}/vpp_functional_configuration"
516   columns:
517   -
518     title: "Name"
519     data: "data name"
520   -
521     title: "VPP API Test (VAT) Commands History - Commands Used Per Test Case"
522     data: "data vat-history"
523   rows: "generated"
524   data:
525     "vpp-func-results"
526   filter: "all"
527   parameters:
528   - "parent"
529   - "name"
530   - "vat-history"
531
532 -
533   type: "table"
534   title: "Detailed Test Results - Container Orchestrated Topologies Performance Results"
535   algorithm: "table_details"
536   output-file-ext: ".csv"
537   output-file: "{DIR[DTR,PERF,COT]}/cot_performance_results"
538   columns:
539   -
540     title: "Name"
541     data: "data name"
542   -
543     title: "Documentation"
544     data: "data doc"
545   -
546     title: "Status"
547     data: "data msg"
548   rows: "generated"
549   data:
550     "ligato-perf-results"
551   filter: "all"
552   parameters:
553   - "name"
554   - "parent"
555   - "doc"
556   - "msg"
557
558 -
559   type: "table"
560   title: "Detailed Test Results - DPDK Performance Results"
561   algorithm: "table_details"
562   output-file-ext: ".csv"
563   output-file: "{DIR[DTR,PERF,DPDK]}/dpdk_performance_results"
564   columns:
565   -
566     title: "Name"
567     data: "data name"
568   -
569     title: "Documentation"
570     data: "data doc"
571   -
572     title: "Status"
573     data: "data msg"
574   rows: "generated"
575   data:
576     "dpdk-perf-results"
577   filter: "all"
578   parameters:
579   - "name"
580   - "parent"
581   - "doc"
582   - "msg"
583
584 -
585   type: "table"
586   title: "Detailed Test Results - Honeycomb Functional Results"
587   algorithm: "table_details"
588   output-file-ext: ".csv"
589   output-file: "{DIR[DTR,FUNC,HC]}/hc_functional_results"
590   columns:
591   -
592     title: "Name"
593     data: "data name"
594   -
595     title: "Documentation"
596     data: "data doc"
597   -
598     title: "Status"
599     data: "data status"
600   rows: "generated"
601   data:
602     "hc-func-results"
603   filter: "all"
604   parameters:
605   - "name"
606   - "parent"
607   - "doc"
608   - "status"
609
610 -
611   type: "table"
612   title: "Detailed Test Results - NSH SFC Functional Results"
613   algorithm: "table_details"
614   output-file-ext: ".csv"
615   output-file: "{DIR[DTR,FUNC,NSHSFC]}/nsh_sfc_functional_results"
616   columns:
617   -
618     title: "Name"
619     data: "data name"
620   -
621     title: "Documentation"
622     data: "data doc"
623   -
624     title: "Status"
625     data: "data status"
626   rows: "generated"
627   data:
628     "nsh-func-results"
629   filter: "all"
630   parameters:
631   - "name"
632   - "parent"
633   - "doc"
634   - "status"
635
636 ################################################################################
637 ###                                F I L E S                                 ###
638 ################################################################################
639
640 -
641   type: "file"
642   title: "VPP Performance Results"
643   algorithm: "file_merged_test_results"
644   output-file-ext: ".rst"
645   output-file: "{DIR[DTR,PERF,VPP]}/vpp_performance_results"
646   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
647   dir-tables: "{DIR[DTR,PERF,VPP]}"
648   data:
649     "vpp-perf-results"
650   filter: "not 'NDRCHK' and not 'PDRCHK'"
651   parameters:
652   - "name"
653   - "doc"
654   - "level"
655   - "parent"
656   data-start-level: 3  # 0, 1, 2, ...
657   chapters-start-level: 2  # 0, 1, 2, ...
658
659 -
660   type: "file"
661   title: "VPP Performance Configuration"
662   algorithm: "file_merged_test_results"
663   output-file-ext: ".rst"
664   output-file: "{DIR[DTC,PERF,VPP]}/vpp_performance_configuration"
665   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
666   dir-tables: "{DIR[DTC,PERF,VPP]}"
667   data:
668     "vpp-perf-results"
669   filter: "not 'NDRCHK' and not 'PDRCHK'"
670   parameters:
671   - "name"
672   - "doc"
673   - "level"
674   - "parent"
675   data-start-level: 3  # 0, 1, 2, ...
676   chapters-start-level: 2  # 0, 1, 2, ...
677
678 -
679   type: "file"
680   title: "VPP Performance Operational Data"
681   algorithm: "file_merged_test_results"
682   output-file-ext: ".rst"
683   output-file: "{DIR[DTO,PERF,VPP]}/vpp_performance_operational_data"
684   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
685   dir-tables: "{DIR[DTO,PERF,VPP]}"
686   data:
687     "vpp-perf-results"
688   filter: "not 'NDRCHK' and not 'PDRCHK'"
689   parameters:
690   - "name"
691   - "doc"
692   - "level"
693   - "parent"
694   data-start-level: 3  # 0, 1, 2, ...
695   chapters-start-level: 2  # 0, 1, 2, ...
696
697 -
698   type: "file"
699   title: "VPP Functional Results"
700   algorithm: "file_test_results"
701   output-file-ext: ".rst"
702   output-file: "{DIR[DTR,FUNC,VPP]}/vpp_functional_results"
703   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
704   dir-tables: "{DIR[DTR,FUNC,VPP]}"
705   data:
706     "vpp-func-results"
707   filter: "all"
708   parameters:
709   - "name"
710   - "doc"
711   - "level"
712   data-start-level: 3  # 0, 1, 2, ...
713   chapters-start-level: 2  # 0, 1, 2, ...
714
715 -
716   type: "file"
717   title: "VPP Functional Configuration"
718   algorithm: "file_test_results"
719   output-file-ext: ".rst"
720   output-file: "{DIR[DTC,FUNC,VPP]}/vpp_functional_configuration"
721   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
722   dir-tables: "{DIR[DTC,FUNC,VPP]}"
723   data:
724     "vpp-func-results"
725   filter: "all"
726   parameters:
727   - "name"
728   - "doc"
729   - "level"
730   data-start-level: 3  # 0, 1, 2, ...
731   chapters-start-level: 2  # 0, 1, 2, ...
732
733 -
734   type: "file"
735   title: "Container Orchestrated Performance Results"
736   algorithm: "file_test_results"
737   output-file-ext: ".rst"
738   output-file: "{DIR[DTR,PERF,COT]}/cot_performance_results"
739   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
740   dir-tables: "{DIR[DTR,PERF,COT]}"
741   data:
742     "ligato-perf-results"
743   filter: "all"
744   parameters:
745   - "name"
746   - "doc"
747   - "level"
748   data-start-level: 2  # 0, 1, 2, ...
749   chapters-start-level: 2  # 0, 1, 2, ...
750
751 -
752   type: "file"
753   title: "DPDK Performance Results"
754   algorithm: "file_test_results"
755   output-file-ext: ".rst"
756   output-file: "{DIR[DTR,PERF,DPDK]}/dpdk_performance_results"
757   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
758   dir-tables: "{DIR[DTR,PERF,DPDK]}"
759   data:
760     "dpdk-perf-results"
761   filter: "all"
762   parameters:
763   - "name"
764   - "doc"
765   - "level"
766   chapters:
767   - "suites"
768   data-start-level: 2  # 0, 1, 2, ...
769   chapters-start-level: 2  # 0, 1, 2, ...
770
771 -
772   type: "file"
773   title: "Honeycomb Functional Results"
774   algorithm: "file_test_results"
775   output-file-ext: ".rst"
776   output-file: "{DIR[DTR,FUNC,HC]}/honeycomb_functional_results"
777   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
778   dir-tables: "{DIR[DTR,FUNC,HC]}"
779   data:
780     "hc-func-results"
781   filter: "all"
782   parameters:
783   - "name"
784   - "doc"
785   - "level"
786   chapters:
787   - "suites"
788   data-start-level: 3  # 0, 1, 2, ...
789   chapters-start-level: 2  # 0, 1, 2, ...
790
791 -
792   type: "file"
793   title: "NSH SFC Functional Results"
794   algorithm: "file_test_results"
795   output-file-ext: ".rst"
796   output-file: "{DIR[DTR,FUNC,NSHSFC]}/nshsfc_functional_results"
797   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
798   dir-tables: "{DIR[DTR,FUNC,NSHSFC]}"
799   data:
800     "nsh-func-results"
801   filter: "all"
802   parameters:
803   - "name"
804   - "doc"
805   - "level"
806   chapters:
807   - "suites"
808   data-start-level: 2  # 0, 1, 2, ...
809   chapters-start-level: 2  # 0, 1, 2, ...
810
811 ################################################################################
812 ###                                P L O T S                                 ###
813 ################################################################################
814
815 # Plot packets per second
816
817 # VPP L2 sel1
818 -
819   type: "plot"
820   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
821   algorithm: "plot_performance_box"
822   output-file-type: ".html"
823   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-ndrdisc"
824   data:
825     "plot-vpp-throughput-latency"
826   # Keep this formatting, the filter is enclosed with " (quotation mark) and
827   # each tag is enclosed with ' (apostrophe).
828   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
829   parameters:
830   - "throughput"
831   - "parent"
832   traces:
833     hoverinfo: "x+y"
834     boxpoints: "outliers"
835     whiskerwidth: 0
836   layout:
837     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
838     layout:
839       "plot-throughput"
840
841 -
842   type: "plot"
843   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
844   algorithm: "plot_performance_box"
845   output-file-type: ".html"
846   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-ndrdisc"
847   data:
848     "plot-vpp-throughput-latency"
849   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
850   parameters:
851   - "throughput"
852   - "parent"
853   traces:
854     hoverinfo: "x+y"
855     boxpoints: "outliers"
856     whiskerwidth: 0
857   layout:
858     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
859     layout:
860       "plot-throughput"
861
862 -
863   type: "plot"
864   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
865   algorithm: "plot_performance_box"
866   output-file-type: ".html"
867   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-pdrdisc"
868   data:
869     "plot-vpp-throughput-latency"
870   filter: "'64B' and ('BASE' or 'SCALE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
871   parameters:
872   - "throughput"
873   - "parent"
874   traces:
875     hoverinfo: "x+y"
876     boxpoints: "outliers"
877     whiskerwidth: 0
878   layout:
879     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
880     layout:
881       "plot-throughput"
882
883 -
884   type: "plot"
885   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
886   algorithm: "plot_performance_box"
887   output-file-type: ".html"
888   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-pdrdisc"
889   data:
890     "plot-vpp-throughput-latency"
891   filter: "'64B' and ('BASE' or 'SCALE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
892   parameters:
893   - "throughput"
894   - "parent"
895   traces:
896     hoverinfo: "x+y"
897     boxpoints: "outliers"
898     whiskerwidth: 0
899   layout:
900     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
901     layout:
902       "plot-throughput"
903
904 # VPP L2 sel2
905 -
906   type: "plot"
907   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
908   algorithm: "plot_performance_box"
909   output-file-type: ".html"
910   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-ndrdisc"
911   data:
912     "plot-vpp-throughput-latency"
913   filter: "'64B' and 'FEATURE' and ('ACL10' or 'ACL50') and '10k_FLOWS' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
914   parameters:
915   - "throughput"
916   - "parent"
917   traces:
918     hoverinfo: "x+y"
919     boxpoints: "outliers"
920     whiskerwidth: 0
921   layout:
922     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
923     layout:
924       "plot-throughput"
925
926 -
927   type: "plot"
928   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
929   algorithm: "plot_performance_box"
930   output-file-type: ".html"
931   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-ndrdisc"
932   data:
933     "plot-vpp-throughput-latency"
934   filter: "'64B' and 'FEATURE' and ('ACL10' or 'ACL50') and '10k_FLOWS' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
935   parameters:
936   - "throughput"
937   - "parent"
938   traces:
939     hoverinfo: "x+y"
940     boxpoints: "outliers"
941     whiskerwidth: 0
942   layout:
943     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
944     layout:
945       "plot-throughput"
946
947 -
948   type: "plot"
949   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
950   algorithm: "plot_performance_box"
951   output-file-type: ".html"
952   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-pdrdisc"
953   data:
954     "plot-vpp-throughput-latency"
955   filter: "'64B' and 'FEATURE' and ('ACL10' or 'ACL50') and '10k_FLOWS' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
956   parameters:
957   - "throughput"
958   - "parent"
959   traces:
960     hoverinfo: "x+y"
961     boxpoints: "outliers"
962     whiskerwidth: 0
963   layout:
964     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
965     layout:
966       "plot-throughput"
967
968 -
969   type: "plot"
970   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
971   algorithm: "plot_performance_box"
972   output-file-type: ".html"
973   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-pdrdisc"
974   data:
975     "plot-vpp-throughput-latency"
976   filter: "'64B' and 'FEATURE' and ('ACL10' or 'ACL50') and '10k_FLOWS' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
977   parameters:
978   - "throughput"
979   - "parent"
980   traces:
981     hoverinfo: "x+y"
982     boxpoints: "outliers"
983     whiskerwidth: 0
984   layout:
985     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
986     layout:
987       "plot-throughput"
988
989 # VPP IP4
990 -
991   type: "plot"
992   title: "VPP Performance 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
993   algorithm: "plot_performance_box"
994   output-file-type: ".html"
995   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-ndrdisc"
996   data:
997     "plot-vpp-throughput-latency"
998   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
999   parameters:
1000   - "throughput"
1001   - "parent"
1002   traces:
1003     hoverinfo: "x+y"
1004     boxpoints: "outliers"
1005     whiskerwidth: 0
1006   layout:
1007     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1008     layout:
1009       "plot-throughput"
1010
1011 -
1012   type: "plot"
1013   title: "VPP Performance 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1014   algorithm: "plot_performance_box"
1015   output-file-type: ".html"
1016   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-ndrdisc"
1017   data:
1018     "plot-vpp-throughput-latency"
1019   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1020   parameters:
1021   - "throughput"
1022   - "parent"
1023   traces:
1024     hoverinfo: "x+y"
1025     boxpoints: "outliers"
1026     whiskerwidth: 0
1027   layout:
1028     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1029     layout:
1030       "plot-throughput"
1031
1032 -
1033   type: "plot"
1034   title: "VPP Performance 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1035   algorithm: "plot_performance_box"
1036   output-file-type: ".html"
1037   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-pdrdisc"
1038   data:
1039     "plot-vpp-throughput-latency"
1040   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1041   parameters:
1042   - "throughput"
1043   - "parent"
1044   traces:
1045     hoverinfo: "x+y"
1046     boxpoints: "outliers"
1047     whiskerwidth: 0
1048   layout:
1049     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1050     layout:
1051       "plot-throughput"
1052
1053 -
1054   type: "plot"
1055   title: "VPP Performance 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1056   algorithm: "plot_performance_box"
1057   output-file-type: ".html"
1058   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-pdrdisc"
1059   data:
1060     "plot-vpp-throughput-latency"
1061   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1062   parameters:
1063   - "throughput"
1064   - "parent"
1065   traces:
1066     hoverinfo: "x+y"
1067     boxpoints: "outliers"
1068     whiskerwidth: 0
1069   layout:
1070     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1071     layout:
1072       "plot-throughput"
1073
1074 # VPP IP6
1075 -
1076   type: "plot"
1077   title: "VPP Performance 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1078   algorithm: "plot_performance_box"
1079   output-file-type: ".html"
1080   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-ndrdisc"
1081   data:
1082     "plot-vpp-throughput-latency"
1083   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1084   parameters:
1085   - "throughput"
1086   - "parent"
1087   traces:
1088     hoverinfo: "x+y"
1089     boxpoints: "outliers"
1090     whiskerwidth: 0
1091   layout:
1092     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1093     layout:
1094       "plot-throughput"
1095
1096 -
1097   type: "plot"
1098   title: "VPP Performance 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1099   algorithm: "plot_performance_box"
1100   output-file-type: ".html"
1101   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-ndrdisc"
1102   data:
1103     "plot-vpp-throughput-latency"
1104   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1105   parameters:
1106   - "throughput"
1107   - "parent"
1108   traces:
1109     hoverinfo: "x+y"
1110     boxpoints: "outliers"
1111     whiskerwidth: 0
1112   layout:
1113     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1114     layout:
1115       "plot-throughput"
1116
1117 -
1118   type: "plot"
1119   title: "VPP Performance 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1120   algorithm: "plot_performance_box"
1121   output-file-type: ".html"
1122   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-pdrdisc"
1123   data:
1124     "plot-vpp-throughput-latency"
1125   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1126   parameters:
1127   - "throughput"
1128   - "parent"
1129   traces:
1130     hoverinfo: "x+y"
1131     boxpoints: "outliers"
1132     whiskerwidth: 0
1133   layout:
1134     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1135     layout:
1136       "plot-throughput"
1137
1138 -
1139   type: "plot"
1140   title: "VPP Performance 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1141   algorithm: "plot_performance_box"
1142   output-file-type: ".html"
1143   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-pdrdisc"
1144   data:
1145     "plot-vpp-throughput-latency"
1146   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1147   parameters:
1148   - "throughput"
1149   - "parent"
1150   traces:
1151     hoverinfo: "x+y"
1152     boxpoints: "outliers"
1153     whiskerwidth: 0
1154   layout:
1155     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1156     layout:
1157       "plot-throughput"
1158
1159 # VPP IP4_overlay
1160 -
1161   type: "plot"
1162   title: "VPP Performance 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1163   algorithm: "plot_performance_box"
1164   output-file-type: ".html"
1165   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ndrdisc"
1166   data:
1167     "plot-vpp-throughput-latency"
1168   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1169   parameters:
1170   - "throughput"
1171   - "parent"
1172   traces:
1173     hoverinfo: "x+y"
1174     boxpoints: "outliers"
1175     whiskerwidth: 0
1176   layout:
1177     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1178     layout:
1179       "plot-throughput"
1180
1181 -
1182   type: "plot"
1183   title: "VPP Performance 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1184   algorithm: "plot_performance_box"
1185   output-file-type: ".html"
1186   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ndrdisc"
1187   data:
1188     "plot-vpp-throughput-latency"
1189   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1190   parameters:
1191   - "throughput"
1192   - "parent"
1193   traces:
1194     hoverinfo: "x+y"
1195     boxpoints: "outliers"
1196     whiskerwidth: 0
1197   layout:
1198     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1199     layout:
1200       "plot-throughput"
1201
1202 -
1203   type: "plot"
1204   title: "VPP Performance 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1205   algorithm: "plot_performance_box"
1206   output-file-type: ".html"
1207   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-pdrdisc"
1208   data:
1209     "plot-vpp-throughput-latency"
1210   filter: "'64B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1211   parameters:
1212   - "throughput"
1213   - "parent"
1214   traces:
1215     hoverinfo: "x+y"
1216     boxpoints: "outliers"
1217     whiskerwidth: 0
1218   layout:
1219     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1220     layout:
1221       "plot-throughput"
1222
1223 -
1224   type: "plot"
1225   title: "VPP Performance 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1226   algorithm: "plot_performance_box"
1227   output-file-type: ".html"
1228   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-pdrdisc"
1229   data:
1230     "plot-vpp-throughput-latency"
1231   filter: "'64B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1232   parameters:
1233   - "throughput"
1234   - "parent"
1235   traces:
1236     hoverinfo: "x+y"
1237     boxpoints: "outliers"
1238     whiskerwidth: 0
1239   layout:
1240     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1241     layout:
1242       "plot-throughput"
1243
1244 # VPP IP6_overlay
1245 -
1246   type: "plot"
1247   title: "VPP Performance 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1248   algorithm: "plot_performance_box"
1249   output-file-type: ".html"
1250   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ndrdisc"
1251   data:
1252     "plot-vpp-throughput-latency"
1253   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1254   parameters:
1255   - "throughput"
1256   - "parent"
1257   traces:
1258     hoverinfo: "x+y"
1259     boxpoints: "outliers"
1260     whiskerwidth: 0
1261   layout:
1262     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1263     layout:
1264       "plot-throughput"
1265
1266 -
1267   type: "plot"
1268   title: "VPP Performance 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1269   algorithm: "plot_performance_box"
1270   output-file-type: ".html"
1271   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ndrdisc"
1272   data:
1273     "plot-vpp-throughput-latency"
1274   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1275   parameters:
1276   - "throughput"
1277   - "parent"
1278   traces:
1279     hoverinfo: "x+y"
1280     boxpoints: "outliers"
1281     whiskerwidth: 0
1282   layout:
1283     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1284     layout:
1285       "plot-throughput"
1286
1287 -
1288   type: "plot"
1289   title: "VPP Performance 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1290   algorithm: "plot_performance_box"
1291   output-file-type: ".html"
1292   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-pdrdisc"
1293   data:
1294     "plot-vpp-throughput-latency"
1295   filter: "'78B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1296   parameters:
1297   - "throughput"
1298   - "parent"
1299   traces:
1300     hoverinfo: "x+y"
1301     boxpoints: "outliers"
1302     whiskerwidth: 0
1303   layout:
1304     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1305     layout:
1306       "plot-throughput"
1307
1308 -
1309   type: "plot"
1310   title: "VPP Performance 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1311   algorithm: "plot_performance_box"
1312   output-file-type: ".html"
1313   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-pdrdisc"
1314   data:
1315     "plot-vpp-throughput-latency"
1316   filter: "'78B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1317   parameters:
1318   - "throughput"
1319   - "parent"
1320   traces:
1321     hoverinfo: "x+y"
1322     boxpoints: "outliers"
1323     whiskerwidth: 0
1324   layout:
1325     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1326     layout:
1327       "plot-throughput"
1328
1329 # VPP VM VHOST
1330 -
1331   type: "plot"
1332   title: "VPP Performance 64B-1t1c-.*vhost.*-ndrdisc"
1333   algorithm: "plot_performance_box"
1334   output-file-type: ".html"
1335   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-ndrdisc"
1336   data:
1337     "plot-vpp-throughput-latency"
1338   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
1339   parameters:
1340   - "throughput"
1341   - "parent"
1342   traces:
1343     hoverinfo: "x+y"
1344     boxpoints: "outliers"
1345     whiskerwidth: 0
1346   layout:
1347     title: "64B-1t1c-.*vhost.*-ndrdisc"
1348     layout:
1349       "plot-throughput"
1350
1351 -
1352   type: "plot"
1353   title: "VPP Performance 64B-2t2c-.*vhost.*-ndrdisc"
1354   algorithm: "plot_performance_box"
1355   output-file-type: ".html"
1356   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-ndrdisc"
1357   data:
1358     "plot-vpp-throughput-latency"
1359   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
1360   parameters:
1361   - "throughput"
1362   - "parent"
1363   traces:
1364     hoverinfo: "x+y"
1365     boxpoints: "outliers"
1366     whiskerwidth: 0
1367   layout:
1368     title: "64B-2t2c-.*vhost.*-ndrdisc"
1369     layout:
1370       "plot-throughput"
1371
1372 -
1373   type: "plot"
1374   title: "VPP Performance 64B-1t1c-.*vhost.*-pdrdisc"
1375   algorithm: "plot_performance_box"
1376   output-file-type: ".html"
1377   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-pdrdisc"
1378   data:
1379     "plot-vpp-throughput-latency"
1380   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
1381   parameters:
1382   - "throughput"
1383   - "parent"
1384   traces:
1385     hoverinfo: "x+y"
1386     boxpoints: "outliers"
1387     whiskerwidth: 0
1388   layout:
1389     title: "64B-1t1c-.*vhost.*-pdrdisc"
1390     layout:
1391       "plot-throughput"
1392
1393 -
1394   type: "plot"
1395   title: "VPP Performance 64B-2t2c-.*vhost.*-pdrdisc"
1396   algorithm: "plot_performance_box"
1397   output-file-type: ".html"
1398   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-pdrdisc"
1399   data:
1400     "plot-vpp-throughput-latency"
1401   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
1402   parameters:
1403   - "throughput"
1404   - "parent"
1405   traces:
1406     hoverinfo: "x+y"
1407     boxpoints: "outliers"
1408     whiskerwidth: 0
1409   layout:
1410     title: "64B-2t2c-.*vhost.*-pdrdisc"
1411     layout:
1412       "plot-throughput"
1413
1414 # VPP VM VHOST SELECTION
1415 -
1416   type: "plot"
1417   title: "VPP Performance 64B-1t1c-.*vhost.*-ndrdisc"
1418   algorithm: "plot_performance_box"
1419   output-file-type: ".html"
1420   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-ndrdisc"
1421   data:
1422     "plot-vpp-throughput-latency"
1423   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
1424   parameters:
1425   - "throughput"
1426   - "parent"
1427   traces:
1428     hoverinfo: "x+y"
1429     boxpoints: "outliers"
1430     whiskerwidth: 0
1431   layout:
1432     title: "64B-1t1c-.*vhost.*-ndrdisc"
1433     layout:
1434       "plot-throughput"
1435
1436 -
1437   type: "plot"
1438   title: "VPP Performance 64B-2t2c-.*vhost.*-ndrdisc"
1439   algorithm: "plot_performance_box"
1440   output-file-type: ".html"
1441   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-ndrdisc"
1442   data:
1443     "plot-vpp-throughput-latency"
1444   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
1445   parameters:
1446   - "throughput"
1447   - "parent"
1448   traces:
1449     hoverinfo: "x+y"
1450     boxpoints: "outliers"
1451     whiskerwidth: 0
1452   layout:
1453     title: "64B-2t2c-.*vhost.*-ndrdisc"
1454     layout:
1455       "plot-throughput"
1456
1457 -
1458   type: "plot"
1459   title: "VPP Performance 64B-1t1c-.*vhost.*-pdrdisc"
1460   algorithm: "plot_performance_box"
1461   output-file-type: ".html"
1462   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-pdrdisc"
1463   data:
1464     "plot-vpp-throughput-latency"
1465   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
1466   parameters:
1467   - "throughput"
1468   - "parent"
1469   traces:
1470     hoverinfo: "x+y"
1471     boxpoints: "outliers"
1472     whiskerwidth: 0
1473   layout:
1474     title: "64B-1t1c-.*vhost.*-pdrdisc"
1475     layout:
1476       "plot-throughput"
1477
1478 -
1479   type: "plot"
1480   title: "VPP Performance 64B-2t2c-.*vhost.*-pdrdisc"
1481   algorithm: "plot_performance_box"
1482   output-file-type: ".html"
1483   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-pdrdisc"
1484   data:
1485     "plot-vpp-throughput-latency"
1486   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
1487   parameters:
1488   - "throughput"
1489   - "parent"
1490   traces:
1491     hoverinfo: "x+y"
1492     boxpoints: "outliers"
1493     whiskerwidth: 0
1494   layout:
1495     title: "64B-2t2c-.*vhost.*-pdrdisc"
1496     layout:
1497       "plot-throughput"
1498
1499 # VPP CRYPTO
1500 -
1501   type: "plot"
1502   title: "VPP Performance 64B-1t1c-.*ipsec.*-ndrdisc"
1503   algorithm: "plot_performance_box"
1504   output-file-type: ".html"
1505   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-ndrdisc"
1506   data:
1507     "plot-vpp-throughput-latency"
1508   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
1509   parameters:
1510   - "throughput"
1511   - "parent"
1512   traces:
1513     hoverinfo: "x+y"
1514     boxpoints: "outliers"
1515     whiskerwidth: 0
1516   layout:
1517     title: "64B-1t1c-.*ipsec.*-ndrdisc"
1518     layout:
1519       "plot-throughput"
1520
1521 -
1522   type: "plot"
1523   title: "VPP Performance 64B-2t2c-.*ipsec.*-ndrdisc"
1524   algorithm: "plot_performance_box"
1525   output-file-type: ".html"
1526   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-ndrdisc"
1527   data:
1528     "plot-vpp-throughput-latency"
1529   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
1530   parameters:
1531   - "throughput"
1532   - "parent"
1533   traces:
1534     hoverinfo: "x+y"
1535     boxpoints: "outliers"
1536     whiskerwidth: 0
1537   layout:
1538     title: "64B-2t2c-.*ipsec.*-ndrdisc"
1539     layout:
1540       "plot-throughput"
1541
1542 -
1543   type: "plot"
1544   title: "VPP Performance 64B-1t1c-.*ipsec.*-pdrdisc"
1545   algorithm: "plot_performance_box"
1546   output-file-type: ".html"
1547   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-pdrdisc"
1548   data:
1549     "plot-vpp-throughput-latency"
1550   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
1551   parameters:
1552   - "throughput"
1553   - "parent"
1554   traces:
1555     hoverinfo: "x+y"
1556     boxpoints: "outliers"
1557     whiskerwidth: 0
1558   layout:
1559     title: "64B-1t1c-.*ipsec.*-pdrdisc"
1560     layout:
1561       "plot-throughput"
1562
1563 -
1564   type: "plot"
1565   title: "VPP Performance 64B-2t2c-.*ipsec.*-pdrdisc"
1566   algorithm: "plot_performance_box"
1567   output-file-type: ".html"
1568   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-pdrdisc"
1569   data:
1570     "plot-vpp-throughput-latency"
1571   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
1572   parameters:
1573   - "throughput"
1574   - "parent"
1575   traces:
1576     hoverinfo: "x+y"
1577     boxpoints: "outliers"
1578     whiskerwidth: 0
1579   layout:
1580     title: "64B-2t2c-.*ipsec.*-pdrdisc"
1581     layout:
1582       "plot-throughput"
1583
1584 # DPDK
1585 -
1586   type: "plot"
1587   title: "DPDK Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1588   algorithm: "plot_performance_box"
1589   output-file-type: ".html"
1590   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-ndrdisc"
1591   data:
1592     "plot-dpdk-throughput-latency"
1593   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1594   parameters:
1595   - "throughput"
1596   - "parent"
1597   traces:
1598     hoverinfo: "x+y"
1599     boxpoints: "outliers"
1600     whiskerwidth: 0
1601   layout:
1602     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1603     layout:
1604       "plot-throughput"
1605
1606 -
1607   type: "plot"
1608   title: "DPDK Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1609   algorithm: "plot_performance_box"
1610   output-file-type: ".html"
1611   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-ndrdisc"
1612   data:
1613     "plot-dpdk-throughput-latency"
1614   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1615   parameters:
1616   - "throughput"
1617   - "parent"
1618   traces:
1619     hoverinfo: "x+y"
1620     boxpoints: "outliers"
1621     whiskerwidth: 0
1622   layout:
1623     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1624     layout:
1625       "plot-throughput"
1626
1627 -
1628   type: "plot"
1629   title: "DPDK Performance 64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
1630   algorithm: "plot_performance_box"
1631   output-file-type: ".html"
1632   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-ndrdisc"
1633   data:
1634     "plot-dpdk-throughput-latency"
1635   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'IP4FWD'"
1636   parameters:
1637   - "throughput"
1638   - "parent"
1639   traces:
1640     hoverinfo: "x+y"
1641     boxpoints: "outliers"
1642     whiskerwidth: 0
1643   layout:
1644     title: "64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
1645     xaxis:
1646       autorange: True
1647       autotick: False
1648       fixedrange: False
1649       gridcolor: "rgb(238, 238, 238)"
1650       linecolor: "rgb(238, 238, 238)"
1651       linewidth: 1
1652       showgrid: True
1653       showline: True
1654       showticklabels: True
1655       tickcolor: "rgb(238, 238, 238)"
1656       tickmode: "linear"
1657       title: "Indexed Test Cases"
1658       zeroline: False
1659     yaxis:
1660       gridcolor: "rgb(238, 238, 238)'"
1661       hoverformat: ".4s"
1662       linecolor: "rgb(238, 238, 238)"
1663       linewidth: 1
1664       range: [2000000, 12000000]
1665       showgrid: True
1666       showline: True
1667       showticklabels: True
1668       tickcolor: "rgb(238, 238, 238)"
1669       title: "Packets Per Second [pps]"
1670       zeroline: False
1671     boxmode: "group"
1672     boxgroupgap: 0.5
1673     autosize: False
1674     margin:
1675       t: 50
1676       b: 20
1677       l: 50
1678       r: 20
1679     showlegend: True
1680     legend:
1681       orientation: "h"
1682     width: 700
1683     height: 1000
1684
1685 -
1686   type: "plot"
1687   title: "DPDK Performance 64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
1688   algorithm: "plot_performance_box"
1689   output-file-type: ".html"
1690   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-ndrdisc"
1691   data:
1692     "plot-dpdk-throughput-latency"
1693   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'IP4FWD'"
1694   parameters:
1695   - "throughput"
1696   - "parent"
1697   traces:
1698     hoverinfo: "x+y"
1699     boxpoints: "outliers"
1700     whiskerwidth: 0
1701   layout:
1702     title: "64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
1703     xaxis:
1704       autorange: True
1705       autotick: False
1706       fixedrange: False
1707       gridcolor: "rgb(238, 238, 238)"
1708       linecolor: "rgb(238, 238, 238)"
1709       linewidth: 1
1710       showgrid: True
1711       showline: True
1712       showticklabels: True
1713       tickcolor: "rgb(238, 238, 238)"
1714       tickmode: "linear"
1715       title: "Indexed Test Cases"
1716       zeroline: False
1717     yaxis:
1718       gridcolor: "rgb(238, 238, 238)'"
1719       hoverformat: ".4s"
1720       linecolor: "rgb(238, 238, 238)"
1721       linewidth: 1
1722       range: [2000000, 12000000]
1723       showgrid: True
1724       showline: True
1725       showticklabels: True
1726       tickcolor: "rgb(238, 238, 238)"
1727       title: "Packets Per Second [pps]"
1728       zeroline: False
1729     boxmode: "group"
1730     boxgroupgap: 0.5
1731     autosize: False
1732     margin:
1733       t: 50
1734       b: 20
1735       l: 50
1736       r: 20
1737     showlegend: True
1738     legend:
1739       orientation: "h"
1740     width: 700
1741     height: 1000
1742
1743 -
1744   type: "plot"
1745   title: "DPDK Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1746   algorithm: "plot_performance_box"
1747   output-file-type: ".html"
1748   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-pdrdisc"
1749   data:
1750     "plot-dpdk-throughput-latency"
1751   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1752   parameters:
1753   - "throughput"
1754   - "parent"
1755   traces:
1756     hoverinfo: "x+y"
1757     boxpoints: "outliers"
1758     whiskerwidth: 0
1759   layout:
1760     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1761     layout:
1762       "plot-throughput"
1763
1764 -
1765   type: "plot"
1766   title: "DPDK Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1767   algorithm: "plot_performance_box"
1768   output-file-type: ".html"
1769   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-pdrdisc"
1770   data:
1771     "plot-dpdk-throughput-latency"
1772   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1773   parameters:
1774   - "throughput"
1775   - "parent"
1776   traces:
1777     hoverinfo: "x+y"
1778     boxpoints: "outliers"
1779     whiskerwidth: 0
1780   layout:
1781     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1782     layout:
1783       "plot-throughput"
1784
1785 -
1786   type: "plot"
1787   title: "DPDK Performance 64B-1t1c-ethip4-ip4base-l3fwd-pdrdisc"
1788   algorithm: "plot_performance_box"
1789   output-file-type: ".html"
1790   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-pdrdisc"
1791   data:
1792     "plot-dpdk-throughput-latency"
1793   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP4FWD'"
1794   parameters:
1795   - "throughput"
1796   - "parent"
1797   traces:
1798     hoverinfo: "x+y"
1799     boxpoints: "outliers"
1800     whiskerwidth: 0
1801   layout:
1802     title: "64B-1t1c-ethip4-ip4base-l3fwd-pdrdisc"
1803     xaxis:
1804       autorange: True
1805       autotick: False
1806       fixedrange: False
1807       gridcolor: "rgb(238, 238, 238)"
1808       linecolor: "rgb(238, 238, 238)"
1809       linewidth: 1
1810       showgrid: True
1811       showline: True
1812       showticklabels: True
1813       tickcolor: "rgb(238, 238, 238)"
1814       tickmode: "linear"
1815       title: "Indexed Test Cases"
1816       zeroline: False
1817     yaxis:
1818       gridcolor: "rgb(238, 238, 238)'"
1819       hoverformat: ".4s"
1820       linecolor: "rgb(238, 238, 238)"
1821       linewidth: 1
1822       range: [20000000, 30000000]
1823       showgrid: True
1824       showline: True
1825       showticklabels: True
1826       tickcolor: "rgb(238, 238, 238)"
1827       title: "Packets Per Second [pps]"
1828       zeroline: False
1829     boxmode: "group"
1830     boxgroupgap: 0.5
1831     autosize: False
1832     margin:
1833       t: 50
1834       b: 20
1835       l: 50
1836       r: 20
1837     showlegend: True
1838     legend:
1839       orientation: "h"
1840     width: 700
1841     height: 1000
1842
1843 -
1844   type: "plot"
1845   title: "DPDK Performance 64B-2t2c-ethip4-ip4base-l3fwd-pdrdisc"
1846   algorithm: "plot_performance_box"
1847   output-file-type: ".html"
1848   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-pdrdisc"
1849   data:
1850     "plot-dpdk-throughput-latency"
1851   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP4FWD'"
1852   parameters:
1853   - "throughput"
1854   - "parent"
1855   traces:
1856     hoverinfo: "x+y"
1857     boxpoints: "outliers"
1858     whiskerwidth: 0
1859   layout:
1860     title: "64B-2t2c-ethip4-ip4base-l3fwd-pdrdisc"
1861     xaxis:
1862       autorange: True
1863       autotick: False
1864       fixedrange: False
1865       gridcolor: "rgb(238, 238, 238)"
1866       linecolor: "rgb(238, 238, 238)"
1867       linewidth: 1
1868       showgrid: True
1869       showline: True
1870       showticklabels: True
1871       tickcolor: "rgb(238, 238, 238)"
1872       tickmode: "linear"
1873       title: "Indexed Test Cases"
1874       zeroline: False
1875     yaxis:
1876       gridcolor: "rgb(238, 238, 238)'"
1877       hoverformat: ".4s"
1878       linecolor: "rgb(238, 238, 238)"
1879       linewidth: 1
1880       range: [20000000, 30000000]
1881       showgrid: True
1882       showline: True
1883       showticklabels: True
1884       tickcolor: "rgb(238, 238, 238)"
1885       title: "Packets Per Second [pps]"
1886       zeroline: False
1887     boxmode: "group"
1888     boxgroupgap: 0.5
1889     autosize: False
1890     margin:
1891       t: 50
1892       b: 20
1893       l: 50
1894       r: 20
1895     showlegend: True
1896     legend:
1897       orientation: "h"
1898     width: 700
1899     height: 1000
1900
1901 # Plot latency
1902
1903 # VPP L2 sel1
1904 -
1905   type: "plot"
1906   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1907   algorithm: "plot_latency_box"
1908   output-file-type: ".html"
1909   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-ndrdisc-lat50"
1910   data:
1911     "plot-vpp-throughput-latency"
1912   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1913   parameters:
1914   - "latency"
1915   - "parent"
1916   traces:
1917     boxmean: False
1918   layout:
1919     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1920     layout:
1921       "plot-latency"
1922
1923 -
1924   type: "plot"
1925   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1926   algorithm: "plot_latency_box"
1927   output-file-type: ".html"
1928   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-ndrdisc-lat50"
1929   data:
1930     "plot-vpp-throughput-latency"
1931   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1932   parameters:
1933   - "latency"
1934   - "parent"
1935   traces:
1936     boxmean: False
1937   layout:
1938     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1939     layout:
1940       "plot-latency"
1941
1942 # VPP L2 sel2
1943 -
1944   type: "plot"
1945   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1946   algorithm: "plot_latency_box"
1947   output-file-type: ".html"
1948   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-ndrdisc-lat50"
1949   data:
1950     "plot-vpp-throughput-latency"
1951   filter: "'64B' and ('FEATURE' and 'ACL50' and '10k_FLOWS') and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1952   parameters:
1953   - "latency"
1954   - "parent"
1955   traces:
1956     boxmean: False
1957   layout:
1958     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1959     layout:
1960       "plot-latency"
1961
1962 -
1963   type: "plot"
1964   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1965   algorithm: "plot_latency_box"
1966   output-file-type: ".html"
1967   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-ndrdisc-lat50"
1968   data:
1969     "plot-vpp-throughput-latency"
1970   filter: "'64B' and ('FEATURE' and 'ACL50' and '10k_FLOWS') and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1971   parameters:
1972   - "latency"
1973   - "parent"
1974   traces:
1975     boxmean: False
1976   layout:
1977     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1978     layout:
1979       "plot-latency"
1980
1981 # VPP IP4
1982 -
1983   type: "plot"
1984   title: "VPP Latency 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1985   algorithm: "plot_latency_box"
1986   output-file-type: ".html"
1987   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-ndrdisc-lat50"
1988   data:
1989     "plot-vpp-throughput-latency"
1990   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1991   parameters:
1992   - "latency"
1993   - "parent"
1994   traces:
1995     boxmean: False
1996   layout:
1997     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1998     layout:
1999       "plot-latency"
2000
2001 -
2002   type: "plot"
2003   title: "VPP Latency 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
2004   algorithm: "plot_latency_box"
2005   output-file-type: ".html"
2006   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-ndrdisc-lat50"
2007   data:
2008     "plot-vpp-throughput-latency"
2009   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
2010   parameters:
2011   - "latency"
2012   - "parent"
2013   traces:
2014     boxmean: False
2015   layout:
2016     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
2017     layout:
2018       "plot-latency"
2019
2020 # VPP IP6
2021 -
2022   type: "plot"
2023   title: "VPP Latency 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
2024   algorithm: "plot_latency_box"
2025   output-file-type: ".html"
2026   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-ndrdisc-lat50"
2027   data:
2028     "plot-vpp-throughput-latency"
2029   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
2030   parameters:
2031   - "latency"
2032   - "parent"
2033   traces:
2034     boxmean: False
2035   layout:
2036     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
2037     layout:
2038       "plot-latency"
2039
2040 -
2041   type: "plot"
2042   title: "VPP Latency 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
2043   algorithm: "plot_latency_box"
2044   output-file-type: ".html"
2045   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-ndrdisc-lat50"
2046   data:
2047     "plot-vpp-throughput-latency"
2048   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
2049   parameters:
2050   - "latency"
2051   - "parent"
2052   traces:
2053     boxmean: False
2054   layout:
2055     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
2056     layout:
2057       "plot-latency"
2058
2059 # VPP IP4_overlay
2060 -
2061   type: "plot"
2062   title: "VPP Latency 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
2063   algorithm: "plot_latency_box"
2064   output-file-type: ".html"
2065   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ndrdisc-lat50"
2066   data:
2067     "plot-vpp-throughput-latency"
2068   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
2069   parameters:
2070   - "latency"
2071   - "parent"
2072   traces:
2073     boxmean: False
2074   layout:
2075     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
2076     layout:
2077       "plot-latency"
2078
2079 -
2080   type: "plot"
2081   title: "VPP Latency 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
2082   algorithm: "plot_latency_box"
2083   output-file-type: ".html"
2084   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ndrdisc-lat50"
2085   data:
2086     "plot-vpp-throughput-latency"
2087   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
2088   parameters:
2089   - "latency"
2090   - "parent"
2091   traces:
2092     boxmean: False
2093   layout:
2094     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
2095     layout:
2096       "plot-latency"
2097
2098 # VPP IP6_overlay
2099 -
2100   type: "plot"
2101   title: "VPP Latency 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
2102   algorithm: "plot_latency_box"
2103   output-file-type: ".html"
2104   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ndrdisc-lat50"
2105   data:
2106     "plot-vpp-throughput-latency"
2107   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
2108   parameters:
2109   - "latency"
2110   - "parent"
2111   traces:
2112     boxmean: False
2113   layout:
2114     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
2115     layout:
2116       "plot-latency"
2117
2118 -
2119   type: "plot"
2120   title: "VPP Latency 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
2121   algorithm: "plot_latency_box"
2122   output-file-type: ".html"
2123   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ndrdisc-lat50"
2124   data:
2125     "plot-vpp-throughput-latency"
2126   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
2127   parameters:
2128   - "latency"
2129   - "parent"
2130   traces:
2131     boxmean: False
2132   layout:
2133     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
2134     layout:
2135       "plot-latency"
2136
2137 # VPP VM VHOST
2138 -
2139   type: "plot"
2140   title: "VPP Latency 64B-1t1c-.*vhost.*-ndrdisc"
2141   algorithm: "plot_latency_box"
2142   output-file-type: ".html"
2143   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-ndrdisc-lat50"
2144   data:
2145     "plot-vpp-throughput-latency"
2146   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2147   parameters:
2148   - "latency"
2149   - "parent"
2150   traces:
2151     boxmean: False
2152   layout:
2153     title: "64B-1t1c-.*vhost.*-ndrdisc"
2154     layout:
2155       "plot-latency"
2156
2157 -
2158   type: "plot"
2159   title: "VPP Latency 64B-2t2c-.*vhost.*-ndrdisc"
2160   algorithm: "plot_latency_box"
2161   output-file-type: ".html"
2162   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-ndrdisc-lat50"
2163   data:
2164     "plot-vpp-throughput-latency"
2165   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2166   parameters:
2167   - "latency"
2168   - "parent"
2169   traces:
2170     boxmean: False
2171   layout:
2172     title: "64B-2t2c-.*vhost.*-ndrdisc"
2173     layout:
2174       "plot-latency"
2175
2176 # VPP VM VHOST selection
2177 -
2178   type: "plot"
2179   title: "VPP Latency 64B-1t1c-.*vhost.*-ndrdisc"
2180   algorithm: "plot_latency_box"
2181   output-file-type: ".html"
2182   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-ndrdisc-lat50"
2183   data:
2184     "plot-vpp-throughput-latency"
2185   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2186   parameters:
2187   - "latency"
2188   - "parent"
2189   traces:
2190     boxmean: False
2191   layout:
2192     title: "64B-1t1c-.*vhost.*-ndrdisc"
2193     layout:
2194       "plot-latency"
2195
2196 -
2197   type: "plot"
2198   title: "VPP Latency 64B-2t2c-.*vhost.*-ndrdisc"
2199   algorithm: "plot_latency_box"
2200   output-file-type: ".html"
2201   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-ndrdisc-lat50"
2202   data:
2203     "plot-vpp-throughput-latency"
2204   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2205   parameters:
2206   - "latency"
2207   - "parent"
2208   traces:
2209     boxmean: False
2210   layout:
2211     title: "64B-2t2c-.*vhost.*-ndrdisc"
2212     layout:
2213       "plot-latency"
2214
2215 # VPP CRYPTO
2216 -
2217   type: "plot"
2218   title: "VPP Latency 64B-1t1c-.*ipsec.*-ndrdisc"
2219   algorithm: "plot_latency_box"
2220   output-file-type: ".html"
2221   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-ndrdisc-lat50"
2222   data:
2223     "plot-vpp-throughput-latency"
2224   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2225   parameters:
2226   - "latency"
2227   - "parent"
2228   traces:
2229     boxmean: False
2230   layout:
2231     title: "64B-1t1c-.*ipsec.*-ndrdisc"
2232     layout:
2233       "plot-latency"
2234
2235 -
2236   type: "plot"
2237   title: "VPP Latency 64B-2t2c-.*ipsec.*-ndrdisc"
2238   algorithm: "plot_latency_box"
2239   output-file-type: ".html"
2240   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-ndrdisc-lat50"
2241   data:
2242     "plot-vpp-throughput-latency"
2243   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2244   parameters:
2245   - "latency"
2246   - "parent"
2247   traces:
2248     boxmean: False
2249   layout:
2250     title: "64B-2t2c-.*ipsec.*-ndrdisc"
2251     layout:
2252       "plot-latency"
2253
2254 # DPDK
2255 -
2256   type: "plot"
2257   title: "DPDK Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2258   algorithm: "plot_latency_box"
2259   output-file-type: ".html"
2260   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-ndrdisc-lat50"
2261   data:
2262     "plot-dpdk-throughput-latency"
2263   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2264   parameters:
2265   - "latency"
2266   - "parent"
2267   traces:
2268     boxmean: False
2269   layout:
2270     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2271     layout:
2272       "plot-latency"
2273
2274 -
2275   type: "plot"
2276   title: "DPDK Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2277   algorithm: "plot_latency_box"
2278   output-file-type: ".html"
2279   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-ndrdisc-lat50"
2280   data:
2281     "plot-dpdk-throughput-latency"
2282   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2283   parameters:
2284   - "latency"
2285   - "parent"
2286   traces:
2287     boxmean: False
2288   layout:
2289     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2290     layout:
2291       "plot-latency"
2292
2293 -
2294   type: "plot"
2295   title: "DPDK Latency 64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
2296   algorithm: "plot_latency_box"
2297   output-file-type: ".html"
2298   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-ndrdisc-lat50"
2299   data:
2300     "plot-dpdk-throughput-latency"
2301   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'IP4FWD'"
2302   parameters:
2303   - "latency"
2304   - "parent"
2305   traces:
2306     boxmean: False
2307   layout:
2308     title: "64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
2309     layout:
2310       "plot-latency"
2311
2312 -
2313   type: "plot"
2314   title: "DPDK Latency 64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
2315   algorithm: "plot_latency_box"
2316   output-file-type: ".html"
2317   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-ndrdisc-lat50"
2318   data:
2319     "plot-dpdk-throughput-latency"
2320   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'IP4FWD'"
2321   parameters:
2322   - "latency"
2323   - "parent"
2324   traces:
2325     boxmean: False
2326   layout:
2327     title: "64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
2328     layout:
2329       "plot-latency"
2330
2331 # Ligato - Throughput
2332
2333 # Container memif
2334 -
2335   type: "plot"
2336   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2337   algorithm: "plot_performance_box"
2338   output-file-type: ".html"
2339   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-memif-ndrdisc"
2340   data:
2341     "plot-vpp-throughput-latency"
2342   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2343   parameters:
2344   - "throughput"
2345   - "parent"
2346   traces:
2347     hoverinfo: "x+y"
2348     boxpoints: "outliers"
2349     whiskerwidth: 0
2350   layout:
2351     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2352     layout:
2353       "plot-throughput"
2354
2355 -
2356   type: "plot"
2357   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2358   algorithm: "plot_performance_box"
2359   output-file-type: ".html"
2360   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-memif-ndrdisc"
2361   data:
2362     "plot-vpp-throughput-latency"
2363   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2364   parameters:
2365   - "throughput"
2366   - "parent"
2367   traces:
2368     hoverinfo: "x+y"
2369     boxpoints: "outliers"
2370     whiskerwidth: 0
2371   layout:
2372     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2373     layout:
2374       "plot-throughput"
2375
2376 -
2377   type: "plot"
2378   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
2379   algorithm: "plot_performance_box"
2380   output-file-type: ".html"
2381   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-memif-pdrdisc"
2382   data:
2383     "plot-vpp-throughput-latency"
2384   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2385   parameters:
2386   - "throughput"
2387   - "parent"
2388   traces:
2389     hoverinfo: "x+y"
2390     boxpoints: "outliers"
2391     whiskerwidth: 0
2392   layout:
2393     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
2394     layout:
2395       "plot-throughput"
2396
2397 -
2398   type: "plot"
2399   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
2400   algorithm: "plot_performance_box"
2401   output-file-type: ".html"
2402   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-memif-pdrdisc"
2403   data:
2404     "plot-vpp-throughput-latency"
2405   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2406   parameters:
2407   - "throughput"
2408   - "parent"
2409   traces:
2410     hoverinfo: "x+y"
2411     boxpoints: "outliers"
2412     whiskerwidth: 0
2413   layout:
2414     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
2415     layout:
2416       "plot-throughput"
2417
2418 # Container orchestrated
2419 -
2420   type: "plot"
2421   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2422   algorithm: "plot_performance_box"
2423   output-file-type: ".html"
2424   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-orchestrated-ndrdisc"
2425   data:
2426     "plot-ligato-throughput-latency"
2427   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2428   parameters:
2429   - "throughput"
2430   - "parent"
2431   traces:
2432     hoverinfo: "x+y"
2433     boxpoints: "outliers"
2434     whiskerwidth: 0
2435   layout:
2436     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2437     layout:
2438       "plot-throughput"
2439
2440 -
2441   type: "plot"
2442   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2443   algorithm: "plot_performance_box"
2444   output-file-type: ".html"
2445   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-orchestrated-ndrdisc"
2446   data:
2447     "plot-ligato-throughput-latency"
2448   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2449   parameters:
2450   - "throughput"
2451   - "parent"
2452   traces:
2453     hoverinfo: "x+y"
2454     boxpoints: "outliers"
2455     whiskerwidth: 0
2456   layout:
2457     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2458     layout:
2459       "plot-throughput"
2460
2461 -
2462   type: "plot"
2463   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
2464   algorithm: "plot_performance_box"
2465   output-file-type: ".html"
2466   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-orchestrated-pdrdisc"
2467   data:
2468     "plot-ligato-throughput-latency"
2469   filter: "'64B' and ('BASE' or 'SCALE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2470   parameters:
2471   - "throughput"
2472   - "parent"
2473   traces:
2474     hoverinfo: "x+y"
2475     boxpoints: "outliers"
2476     whiskerwidth: 0
2477   layout:
2478     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
2479     layout:
2480       "plot-throughput"
2481
2482 -
2483   type: "plot"
2484   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
2485   algorithm: "plot_performance_box"
2486   output-file-type: ".html"
2487   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-orchestrated-pdrdisc"
2488   data:
2489     "plot-ligato-throughput-latency"
2490   filter: "'64B' and ('BASE' or 'SCALE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2491   parameters:
2492   - "throughput"
2493   - "parent"
2494   traces:
2495     hoverinfo: "x+y"
2496     boxpoints: "outliers"
2497     whiskerwidth: 0
2498   layout:
2499     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
2500     layout:
2501       "plot-throughput"
2502
2503 # Ligato - Latency
2504
2505 # Container memif
2506 -
2507   type: "plot"
2508   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2509   algorithm: "plot_latency_box"
2510   output-file-type: ".html"
2511   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-memif-ndrdisc-lat50"
2512   data:
2513     "plot-vpp-throughput-latency"
2514   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2515   parameters:
2516   - "latency"
2517   - "parent"
2518   traces:
2519     boxmean: False
2520   layout:
2521     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2522     layout:
2523       "plot-latency"
2524
2525 -
2526   type: "plot"
2527   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2528   algorithm: "plot_latency_box"
2529   output-file-type: ".html"
2530   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-memif-ndrdisc-lat50"
2531   data:
2532     "plot-vpp-throughput-latency"
2533   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2534   parameters:
2535   - "latency"
2536   - "parent"
2537   traces:
2538     boxmean: False
2539   layout:
2540     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2541     layout:
2542       "plot-latency"
2543
2544 # Container orchestrated
2545 -
2546   type: "plot"
2547   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2548   algorithm: "plot_latency_box"
2549   output-file-type: ".html"
2550   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-orchestrated-ndrdisc-lat50"
2551   data:
2552     "plot-ligato-throughput-latency"
2553   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2554   parameters:
2555   - "latency"
2556   - "parent"
2557   traces:
2558     boxmean: False
2559   layout:
2560     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2561     layout:
2562       "plot-latency"
2563
2564 -
2565   type: "plot"
2566   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2567   algorithm: "plot_latency_box"
2568   output-file-type: ".html"
2569   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-orchestrated-ndrdisc-lat50"
2570   data:
2571     "plot-ligato-throughput-latency"
2572   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2573   parameters:
2574   - "latency"
2575   - "parent"
2576   traces:
2577     boxmean: False
2578   layout:
2579     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
2580     layout:
2581       "plot-latency"

©2016 FD.io a Linux Foundation Collaborative Project. All Rights Reserved.
Linux Foundation is a registered trademark of The Linux Foundation. Linux is a registered trademark of Linus Torvalds.
Please see our privacy policy and terms of use.