PAL: Perf improvements - more data sources
[csit.git] / resources / tools / presentation / specification.yaml
1 -
2   type: "environment"
3   configuration:
4     # Debug mode:
5     # - Skip:
6     #   - Download of input data files
7     # - Do:
8     #   - Read data from given zip / xml files
9     #   - Set the configuration as it is done in normal mode
10     # If the section "type: debug" is missing, CFG[DEBUG] is set to 0.
11     CFG[DEBUG]: 0
12
13   paths:
14     # Top level directories:
15     ## Working directory
16     DIR[WORKING]: "_tmp"
17     ## Build directories
18     DIR[BUILD,HTML]: "_build"
19     DIR[BUILD,LATEX]: "_build_latex"
20
21     # Static .rst files
22     DIR[RST]: "../../../docs/report"
23
24     # Working directories
25     ## Input data files (.zip, .xml)
26     DIR[WORKING,DATA]: "{DIR[WORKING]}/data"
27     ## Static source files from git
28     DIR[WORKING,SRC]: "{DIR[WORKING]}/src"
29     DIR[WORKING,SRC,STATIC]: "{DIR[WORKING,SRC]}/_static"
30
31     # Static html content
32     DIR[STATIC]: "{DIR[BUILD,HTML]}/_static"
33     DIR[STATIC,VPP]: "{DIR[STATIC]}/vpp"
34     DIR[STATIC,DPDK]: "{DIR[STATIC]}/dpdk"
35     DIR[STATIC,ARCH]: "{DIR[STATIC]}/archive"
36
37     # Detailed test results
38     DIR[DTR]: "{DIR[WORKING,SRC]}/detailed_test_results"
39     DIR[DTR,PERF,DPDK]: "{DIR[DTR]}/dpdk_performance_results"
40     DIR[DTR,PERF,VPP]: "{DIR[DTR]}/vpp_performance_results"
41     DIR[DTR,PERF,COT]: "{DIR[DTR]}/cot_performance_results"
42     DIR[DTR,PERF,HC]: "{DIR[DTR]}/honeycomb_performance_results"
43     DIR[DTR,FUNC,VPP]: "{DIR[DTR]}/vpp_functional_results"
44     DIR[DTR,FUNC,HC]: "{DIR[DTR]}/honeycomb_functional_results"
45     DIR[DTR,FUNC,NSHSFC]: "{DIR[DTR]}/nshsfc_functional_results"
46     DIR[DTR,PERF,VPP,IMPRV]: "{DIR[WORKING,SRC]}/vpp_performance_tests/performance_improvements"
47
48     # Detailed test configurations
49     DIR[DTC]: "{DIR[WORKING,SRC]}/test_configuration"
50     DIR[DTC,PERF,VPP]: "{DIR[DTC]}/vpp_performance_configuration"
51     DIR[DTC,FUNC,VPP]: "{DIR[DTC]}/vpp_functional_configuration"
52
53     # Detailed tests operational data
54     DIR[DTO]: "{DIR[WORKING,SRC]}/test_operational_data"
55     DIR[DTO,PERF,VPP]: "{DIR[DTO]}/vpp_performance_operational_data"
56
57     # .css patch file to fix tables generated by Sphinx
58     DIR[CSS_PATCH_FILE]: "{DIR[STATIC]}/theme_overrides.css"
59     DIR[CSS_PATCH_FILE2]: "{DIR[WORKING,SRC,STATIC]}/theme_overrides.css"
60
61   urls:
62     URL[JENKINS,CSIT]: "https://jenkins.fd.io/view/csit/job"
63     URL[JENKINS,HC]: "https://jenkins.fd.io/view/hc2vpp/job"
64
65   make-dirs:
66   # List the directories which are created while preparing the environment.
67   # All directories MUST be defined in "paths" section.
68   - "DIR[WORKING,DATA]"
69   - "DIR[STATIC,VPP]"
70   - "DIR[STATIC,DPDK]"
71   - "DIR[STATIC,ARCH]"
72   - "DIR[BUILD,LATEX]"
73   - "DIR[WORKING,SRC]"
74   - "DIR[WORKING,SRC,STATIC]"
75
76   remove-dirs:
77   # List the directories which are deleted while cleaning the environment.
78   # All directories MUST be defined in "paths" section.
79   #- "DIR[BUILD,HTML]"
80
81   build-dirs:
82   # List the directories where the results (build) is stored.
83   # All directories MUST be defined in "paths" section.
84   - "DIR[BUILD,HTML]"
85   - "DIR[BUILD,LATEX]"
86
87 -
88   type: "debug"
89   general:
90     input-format: "xml"  # zip or xml
91     extract: "robot-plugin/output.xml"  # Only for zip
92   builds:
93     # The files must be in the directory DIR[WORKING,DATA]
94     csit-dpdk-perf-1707-all:
95     -
96       build: 10
97       file: "{DIR[WORKING,DATA]}/csit-dpdk-perf-1707-all__10.xml"
98     -
99       build: 9
100       file: "{DIR[WORKING,DATA]}/csit-dpdk-perf-1707-all__9.xml"
101     csit-nsh_sfc-verify-func-1707-ubuntu1604-virl:
102     -
103       build: 2
104       file: "{DIR[WORKING,DATA]}/csit-nsh_sfc-verify-func-1707-ubuntu1604-virl-2.xml"
105     csit-vpp-functional-1707-ubuntu1604-virl:
106     -
107       build: lastSuccessfulBuild
108       file: "{DIR[WORKING,DATA]}/csit-vpp-functional-1707-ubuntu1604-virl-lastSuccessfulBuild.xml"
109     hc2vpp-csit-integration-1707-ubuntu1604:
110     -
111       build: lastSuccessfulBuild
112       file: "{DIR[WORKING,DATA]}/hc2vpp-csit-integration-1707-ubuntu1604-lastSuccessfulBuild.xml"
113     csit-vpp-perf-1707-all:
114     -
115       build: 16
116       file: "{DIR[WORKING,DATA]}/csit-vpp-perf-1707-all__16__output.xml"
117     -
118       build: 17
119       file: "{DIR[WORKING,DATA]}/csit-vpp-perf-1707-all__17__output.xml"
120
121 -
122   type: "static"
123   src-path: "{DIR[RST]}"
124   dst-path: "{DIR[WORKING,SRC]}"
125
126 -
127   type: "input"  # Ignored in debug mode
128   general:
129     file-name: "robot-plugin.zip"
130     file-format: ".zip"
131     download-path: "{job}/{build}/robot/report/*zip*/{filename}"
132     extract: "robot-plugin/output.xml"
133   builds:
134     csit-vpp-perf-1707-all:
135     - 9
136     - 10
137     - 13
138     - 14
139     - 15
140     - 16
141     - 17
142     - 18
143     - 19
144     - 21
145     csit-vpp-perf-1710-all:
146     - 11
147     - 12
148     - 13
149     - 14
150     - 15
151     - 16
152     - 17
153     - 18
154     - 19
155     - 20
156     csit-dpdk-perf-1710-all:
157     - 2
158     - 3
159     - 5
160     - 6
161     - 7
162     - 8
163     - 9
164     - 10
165     - 11
166     - 13
167     csit-ligato-perf-1710-all:
168     - 5
169     - 7
170     - 8
171     - 9
172     - 10
173     - 11
174     - 12
175     - 13
176     - 16
177     - 17
178     csit-vpp-functional-1710-ubuntu1604-virl:
179     - 126
180     csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:
181     - 7
182     csit-hc2vpp-verify-func-1710-ubuntu1604:
183     - lastSuccessfulBuild
184
185 -
186   type: "output"
187   format:
188     html:
189     - full
190     pdf:
191     - minimal
192
193 ################################################################################
194 ###                               T A B L E S                                ###
195 ################################################################################
196
197 -
198   type: "table"
199   title: "Performance improvements"
200   algorithm: "table_performance_improvements"
201   template: "{DIR[DTR,PERF,VPP,IMPRV]}/tmpl_performance_improvements.csv"
202   output-file-ext: ".csv"
203   output-file: "{DIR[DTR,PERF,VPP,IMPRV]}/performance_improvements"
204   columns:
205   -
206     title: "Functionality"
207     data: "template 1"
208   -
209     title: "Test Name"
210     data: "template 2"
211   -
212     title: "16.09 mean [Mpps]"
213     data: "template 3"
214   -
215     title: "17.01 mean [Mpps]"
216     data: "template 4"
217   -
218     title: "17.04 mean [Mpps]"
219     data: "template 5"
220   -
221     title: "17.07 mean [Mpps]"
222     data: "data csit-vpp-perf-1707-all mean"
223   -
224     title: "17.10 mean [Mpps]"
225     data: "data csit-vpp-perf-1710-all csit-ligato-perf-1710-all mean"
226   -
227     title: "17.10 stdev [Mpps]"
228     data: "data csit-vpp-perf-1710-all csit-ligato-perf-1710-all stdev"
229   -
230     title: "17.07 to 17.10 change [%]"
231     data: "operation relative_change 5 6"
232   rows: "generated"
233   data:
234     csit-vpp-perf-1707-all:
235     - 9
236     - 10
237     - 13
238     - 14
239     - 15
240     - 16
241     - 17
242     - 18
243     - 19
244     - 21
245     csit-vpp-perf-1710-all:
246     - 11
247     - 12
248     - 13
249     - 14
250     - 15
251     - 16
252     - 17
253     - 18
254     - 19
255     - 20
256     csit-ligato-perf-1710-all:
257     - 5
258     - 7
259     - 8
260     - 9
261     - 10
262     - 11
263     - 12
264     - 13
265     - 16
266     - 17
267   filter: "template"
268   parameters:
269   - "throughput"
270
271 -
272   type: "table"
273   title: "Detailed Test Results - VPP Performance Results"
274   algorithm: "table_merged_details"
275   output-file-ext: ".csv"
276   output-file: "{DIR[DTR,PERF,VPP]}/vpp_performance_results"
277   columns:
278   -
279     title: "Name"
280     data: "data name"
281   -
282     title: "Documentation"
283     data: "data doc"
284   -
285     title: "Status"
286     data: "data msg"
287   rows: "generated"
288   data:
289     csit-vpp-perf-1710-all:
290     - 20
291 #    - 23
292   filter: "all"
293   parameters:
294   - "name"
295   - "parent"
296   - "doc"
297   - "msg"
298
299 -
300   type: "table"
301   title: "Test configuration - VPP Performance Test Configs"
302   algorithm: "table_merged_details"
303   output-file-ext: ".csv"
304   output-file: "{DIR[DTC,PERF,VPP]}/vpp_test_configuration"
305   columns:
306   -
307     title: "Name"
308     data: "data name"
309   -
310     title: "VPP API Test (VAT) Commands History - Commands Used Per Test Case"
311     data: "data vat-history"
312   rows: "generated"
313   data:
314     csit-vpp-perf-1710-all:
315     - 20
316 #    - 23
317   filter: "all"
318   parameters:
319   - "parent"
320   - "name"
321   - "vat-history"
322
323 -
324   type: "table"
325   title: "Test Operational Data - VPP Performance Operational Data"
326   algorithm: "table_merged_details"
327   output-file-ext: ".csv"
328   output-file: "{DIR[DTO,PERF,VPP]}/vpp_test_operational"
329   columns:
330   -
331     title: "Name"
332     data: "data name"
333   -
334     title: "VPP Operational Data - Outputs of 'show runtime' at NDR packet rate"
335     data: "data show-run"
336   rows: "generated"
337   data:
338     csit-vpp-perf-1710-all:
339     - 20
340 #    - 23
341   filter: "all"
342   parameters:
343   - "parent"
344   - "name"
345   - "show-run"
346
347 -
348   type: "table"
349   title: "Detailed Test Results - VPP Functional Results"
350   algorithm: "table_details"
351   output-file-ext: ".csv"
352   output-file: "{DIR[DTR,FUNC,VPP]}/vpp_functional_results"
353   columns:
354   -
355     title: "Name"
356     data: "data name"
357   -
358     title: "Documentation"
359     data: "data doc"
360   -
361     title: "Status"
362     data: "data status"
363   rows: "generated"
364   data:
365     csit-vpp-functional-1710-ubuntu1604-virl:
366     - 126
367   filter: "all"
368   parameters:
369   - "name"
370   - "parent"
371   - "doc"
372   - "status"
373
374 -
375   type: "table"
376   title: "Test configuration - VPP Functional Test Configs"
377   algorithm: "table_details"
378   output-file-ext: ".csv"
379   output-file: "{DIR[DTC,FUNC,VPP]}/vpp_functional_configuration"
380   columns:
381   -
382     title: "Name"
383     data: "data name"
384   -
385     title: "VPP API Test (VAT) Commands History - Commands Used Per Test Case"
386     data: "data vat-history"
387   rows: "generated"
388   data:
389     csit-vpp-functional-1710-ubuntu1604-virl:
390     - 126
391   filter: "all"
392   parameters:
393   - "parent"
394   - "name"
395   - "vat-history"
396
397 -
398   type: "table"
399   title: "Detailed Test Results - Container Orchestrated Topologies Performance Results"
400   algorithm: "table_details"
401   output-file-ext: ".csv"
402   output-file: "{DIR[DTR,PERF,COT]}/cot_performance_results"
403   columns:
404   -
405     title: "Name"
406     data: "data name"
407   -
408     title: "Documentation"
409     data: "data doc"
410   -
411     title: "Status"
412     data: "data msg"
413   rows: "generated"
414   data:
415     csit-ligato-perf-1710-all:
416     - 17
417   filter: "all"
418   parameters:
419   - "name"
420   - "parent"
421   - "doc"
422   - "msg"
423
424 -
425   type: "table"
426   title: "Detailed Test Results - DPDK Performance Results"
427   algorithm: "table_details"
428   output-file-ext: ".csv"
429   output-file: "{DIR[DTR,PERF,DPDK]}/dpdk_performance_results"
430   columns:
431   -
432     title: "Name"
433     data: "data name"
434   -
435     title: "Documentation"
436     data: "data doc"
437   -
438     title: "Status"
439     data: "data msg"
440   rows: "generated"
441   data:
442     csit-dpdk-perf-1710-all:
443     - 13
444   filter: "all"
445   parameters:
446   - "name"
447   - "parent"
448   - "doc"
449   - "msg"
450
451 -
452   type: "table"
453   title: "Detailed Test Results - Honeycomb Functional Results"
454   algorithm: "table_details"
455   output-file-ext: ".csv"
456   output-file: "{DIR[DTR,FUNC,HC]}/hc_functional_results"
457   columns:
458   -
459     title: "Name"
460     data: "data name"
461   -
462     title: "Documentation"
463     data: "data doc"
464   -
465     title: "Status"
466     data: "data status"
467   rows: "generated"
468   data:
469     csit-hc2vpp-verify-func-1710-ubuntu1604:
470     - "lastSuccessfulBuild"
471   filter: "all"
472   parameters:
473   - "name"
474   - "parent"
475   - "doc"
476   - "status"
477
478 -
479   type: "table"
480   title: "Detailed Test Results - NSH SFC Functional Results"
481   algorithm: "table_details"
482   output-file-ext: ".csv"
483   output-file: "{DIR[DTR,FUNC,NSHSFC]}/nsh_sfc_functional_results"
484   columns:
485   -
486     title: "Name"
487     data: "data name"
488   -
489     title: "Documentation"
490     data: "data doc"
491   -
492     title: "Status"
493     data: "data status"
494   rows: "generated"
495   data:
496     csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:
497     - 7
498   filter: "all"
499   parameters:
500   - "name"
501   - "parent"
502   - "doc"
503   - "status"
504
505 ################################################################################
506 ###                                F I L E S                                 ###
507 ################################################################################
508
509 -
510   type: "file"
511   title: "VPP Performance Results"
512   algorithm: "file_merged_test_results"
513   output-file-ext: ".rst"
514   output-file: "{DIR[DTR,PERF,VPP]}/vpp_performance_results"
515   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
516   dir-tables: "{DIR[DTR,PERF,VPP]}"
517   data:
518     csit-vpp-perf-1710-all:
519     - 20
520 #    - 23
521   filter: "all"
522   parameters:
523   - "name"
524   - "doc"
525   - "level"
526   - "parent"
527   data-start-level: 3  # 0, 1, 2, ...
528   chapters-start-level: 2  # 0, 1, 2, ...
529
530 -
531   type: "file"
532   title: "VPP Performance Configuration"
533   algorithm: "file_merged_test_results"
534   output-file-ext: ".rst"
535   output-file: "{DIR[DTC,PERF,VPP]}/vpp_performance_configuration"
536   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
537   dir-tables: "{DIR[DTC,PERF,VPP]}"
538   data:
539     csit-vpp-perf-1710-all:
540     - 20
541 #    - 23
542   filter: "all"
543   parameters:
544   - "name"
545   - "doc"
546   - "level"
547   - "parent"
548   data-start-level: 3  # 0, 1, 2, ...
549   chapters-start-level: 2  # 0, 1, 2, ...
550
551 -
552   type: "file"
553   title: "VPP Performance Operational Data"
554   algorithm: "file_merged_test_results"
555   output-file-ext: ".rst"
556   output-file: "{DIR[DTO,PERF,VPP]}/vpp_performance_operational_data"
557   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
558   dir-tables: "{DIR[DTO,PERF,VPP]}"
559   data:
560     csit-vpp-perf-1710-all:
561     - 20
562 #    - 23
563   filter: "all"
564   parameters:
565   - "name"
566   - "doc"
567   - "level"
568   - "parent"
569   data-start-level: 3  # 0, 1, 2, ...
570   chapters-start-level: 2  # 0, 1, 2, ...
571
572 -
573   type: "file"
574   title: "VPP Functional Results"
575   algorithm: "file_test_results"
576   output-file-ext: ".rst"
577   output-file: "{DIR[DTR,FUNC,VPP]}/vpp_functional_results"
578   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
579   dir-tables: "{DIR[DTR,FUNC,VPP]}"
580   data:
581     csit-vpp-functional-1710-ubuntu1604-virl:
582     - 126
583   filter: "all"
584   parameters:
585   - "name"
586   - "doc"
587   - "level"
588   data-start-level: 3  # 0, 1, 2, ...
589   chapters-start-level: 2  # 0, 1, 2, ...
590
591 -
592   type: "file"
593   title: "VPP Functional Configuration"
594   algorithm: "file_test_results"
595   output-file-ext: ".rst"
596   output-file: "{DIR[DTC,FUNC,VPP]}/vpp_functional_configuration"
597   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
598   dir-tables: "{DIR[DTC,FUNC,VPP]}"
599   data:
600     csit-vpp-functional-1710-ubuntu1604-virl:
601     - 126
602   filter: "all"
603   parameters:
604   - "name"
605   - "doc"
606   - "level"
607   data-start-level: 3  # 0, 1, 2, ...
608   chapters-start-level: 2  # 0, 1, 2, ...
609
610 -
611   type: "file"
612   title: "Container Orchestrated Performance Results"
613   algorithm: "file_test_results"
614   output-file-ext: ".rst"
615   output-file: "{DIR[DTR,PERF,COT]}/cot_performance_results"
616   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
617   dir-tables: "{DIR[DTR,PERF,COT]}"
618   data:
619     csit-ligato-perf-1710-all:
620     - 17
621   filter: "all"
622   parameters:
623   - "name"
624   - "doc"
625   - "level"
626   data-start-level: 2  # 0, 1, 2, ...
627   chapters-start-level: 2  # 0, 1, 2, ...
628
629 -
630   type: "file"
631   title: "DPDK Performance Results"
632   algorithm: "file_test_results"
633   output-file-ext: ".rst"
634   output-file: "{DIR[DTR,PERF,DPDK]}/dpdk_performance_results"
635   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
636   dir-tables: "{DIR[DTR,PERF,DPDK]}"
637   data:
638     csit-dpdk-perf-1710-all:
639     - 13
640   filter: "all"
641   parameters:
642   - "name"
643   - "doc"
644   - "level"
645   chapters:
646   - "suites"
647   data-start-level: 2  # 0, 1, 2, ...
648   chapters-start-level: 2  # 0, 1, 2, ...
649
650 -
651   type: "file"
652   title: "Honeycomb Functional Results"
653   algorithm: "file_test_results"
654   output-file-ext: ".rst"
655   output-file: "{DIR[DTR,FUNC,HC]}/honeycomb_functional_results"
656   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
657   dir-tables: "{DIR[DTR,FUNC,HC]}"
658   data:
659     csit-hc2vpp-verify-func-1710-ubuntu1604:
660     - "lastSuccessfulBuild"
661   filter: "all"
662   parameters:
663   - "name"
664   - "doc"
665   - "level"
666   chapters:
667   - "suites"
668   data-start-level: 3  # 0, 1, 2, ...
669   chapters-start-level: 2  # 0, 1, 2, ...
670
671 -
672   type: "file"
673   title: "NSH SFC Functional Results"
674   algorithm: "file_test_results"
675   output-file-ext: ".rst"
676   output-file: "{DIR[DTR,FUNC,NSHSFC]}/nshsfc_functional_results"
677   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
678   dir-tables: "{DIR[DTR,FUNC,NSHSFC]}"
679   data:
680     csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:
681     - 7
682   filter: "all"
683   parameters:
684   - "name"
685   - "doc"
686   - "level"
687   chapters:
688   - "suites"
689   data-start-level: 2  # 0, 1, 2, ...
690   chapters-start-level: 2  # 0, 1, 2, ...
691
692 ################################################################################
693 ###                                P L O T S                                 ###
694 ################################################################################
695
696 # Plot packets per second
697
698 # VPP L2 sel1
699 -
700   type: "plot"
701   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
702   algorithm: "plot_performance_box"
703   output-file-type: ".html"
704   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-ndrdisc"
705   data:
706     csit-vpp-perf-1710-all:
707     - 11
708     - 12
709     - 13
710     - 14
711     - 15
712     - 16
713     - 17
714     - 18
715     - 19
716     - 20
717   # Keep this formatting, the filter is enclosed with " (quotation mark) and
718   # each tag is enclosed with ' (apostrophe).
719   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
720   parameters:
721   - "throughput"
722   - "parent"
723   traces:
724     hoverinfo: "x+y"
725     boxpoints: "outliers"
726     whiskerwidth: 0
727   layout:
728     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
729     xaxis:
730       autorange: True
731       autotick: False
732       fixedrange: False
733       gridcolor: "rgb(238, 238, 238)"
734       linecolor: "rgb(238, 238, 238)"
735       linewidth: 1
736       showgrid: True
737       showline: True
738       showticklabels: True
739       tickcolor: "rgb(238, 238, 238)"
740       tickmode: "linear"
741       title: "Indexed Test Cases"
742       zeroline: False
743     yaxis:
744       gridcolor: "rgb(238, 238, 238)'"
745       hoverformat: ".4s"
746       linecolor: "rgb(238, 238, 238)"
747       linewidth: 1
748       range: []
749       showgrid: True
750       showline: True
751       showticklabels: True
752       tickcolor: "rgb(238, 238, 238)"
753       title: "Packets Per Second [pps]"
754       zeroline: False
755     boxmode: "group"
756     boxgroupgap: 0.5
757     autosize: False
758     margin:
759       t: 50
760       b: 20
761       l: 50
762       r: 20
763     showlegend: True
764     legend:
765       orientation: "h"
766     width: 700
767     height: 1000
768
769 -
770   type: "plot"
771   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
772   algorithm: "plot_performance_box"
773   output-file-type: ".html"
774   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-ndrdisc"
775   data:
776     csit-vpp-perf-1710-all:
777     - 11
778     - 12
779     - 13
780     - 14
781     - 15
782     - 16
783     - 17
784     - 18
785     - 19
786     - 20
787   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
788   parameters:
789   - "throughput"
790   - "parent"
791   traces:
792     hoverinfo: "x+y"
793     boxpoints: "outliers"
794     whiskerwidth: 0
795   layout:
796     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
797     xaxis:
798       autorange: True
799       autotick: False
800       fixedrange: False
801       gridcolor: "rgb(238, 238, 238)"
802       linecolor: "rgb(238, 238, 238)"
803       linewidth: 1
804       showgrid: True
805       showline: True
806       showticklabels: True
807       tickcolor: "rgb(238, 238, 238)"
808       tickmode: "linear"
809       title: "Indexed Test Cases"
810       zeroline: False
811     yaxis:
812       gridcolor: "rgb(238, 238, 238)'"
813       hoverformat: ".4s"
814       linecolor: "rgb(238, 238, 238)"
815       linewidth: 1
816       range: []
817       showgrid: True
818       showline: True
819       showticklabels: True
820       tickcolor: "rgb(238, 238, 238)"
821       title: "Packets Per Second [pps]"
822       zeroline: False
823     boxmode: "group"
824     boxgroupgap: 0.5
825     autosize: False
826     margin:
827       t: 50
828       b: 20
829       l: 50
830       r: 20
831     showlegend: True
832     legend:
833       orientation: "h"
834     width: 700
835     height: 1000
836
837 -
838   type: "plot"
839   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
840   algorithm: "plot_performance_box"
841   output-file-type: ".html"
842   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-pdrdisc"
843   data:
844     csit-vpp-perf-1710-all:
845     - 11
846     - 12
847     - 13
848     - 14
849     - 15
850     - 16
851     - 17
852     - 18
853     - 19
854     - 20
855   filter: "'64B' and ('BASE' or 'SCALE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
856   parameters:
857   - "throughput"
858   - "parent"
859   traces:
860     hoverinfo: "x+y"
861     boxpoints: "outliers"
862     whiskerwidth: 0
863   layout:
864     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
865     xaxis:
866       autorange: True
867       autotick: False
868       fixedrange: False
869       gridcolor: "rgb(238, 238, 238)"
870       linecolor: "rgb(238, 238, 238)"
871       linewidth: 1
872       showgrid: True
873       showline: True
874       showticklabels: True
875       tickcolor: "rgb(238, 238, 238)"
876       tickmode: "linear"
877       title: "Indexed Test Cases"
878       zeroline: False
879     yaxis:
880       gridcolor: "rgb(238, 238, 238)'"
881       hoverformat: ".4s"
882       linecolor: "rgb(238, 238, 238)"
883       linewidth: 1
884       range: []
885       showgrid: True
886       showline: True
887       showticklabels: True
888       tickcolor: "rgb(238, 238, 238)"
889       title: "Packets Per Second [pps]"
890       zeroline: False
891     boxmode: "group"
892     boxgroupgap: 0.5
893     autosize: False
894     margin:
895       t: 50
896       b: 20
897       l: 50
898       r: 20
899     showlegend: True
900     legend:
901       orientation: "h"
902     width: 700
903     height: 1000
904
905 -
906   type: "plot"
907   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
908   algorithm: "plot_performance_box"
909   output-file-type: ".html"
910   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-pdrdisc"
911   data:
912     csit-vpp-perf-1710-all:
913     - 11
914     - 12
915     - 13
916     - 14
917     - 15
918     - 16
919     - 17
920     - 18
921     - 19
922     - 20
923   filter: "'64B' and ('BASE' or 'SCALE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
924   parameters:
925   - "throughput"
926   - "parent"
927   traces:
928     hoverinfo: "x+y"
929     boxpoints: "outliers"
930     whiskerwidth: 0
931   layout:
932     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
933     xaxis:
934       autorange: True
935       autotick: False
936       fixedrange: False
937       gridcolor: "rgb(238, 238, 238)"
938       linecolor: "rgb(238, 238, 238)"
939       linewidth: 1
940       showgrid: True
941       showline: True
942       showticklabels: True
943       tickcolor: "rgb(238, 238, 238)"
944       tickmode: "linear"
945       title: "Indexed Test Cases"
946       zeroline: False
947     yaxis:
948       gridcolor: "rgb(238, 238, 238)'"
949       hoverformat: ".4s"
950       linecolor: "rgb(238, 238, 238)"
951       linewidth: 1
952       range: []
953       showgrid: True
954       showline: True
955       showticklabels: True
956       tickcolor: "rgb(238, 238, 238)"
957       title: "Packets Per Second [pps]"
958       zeroline: False
959     boxmode: "group"
960     boxgroupgap: 0.5
961     autosize: False
962     margin:
963       t: 50
964       b: 20
965       l: 50
966       r: 20
967     showlegend: True
968     legend:
969       orientation: "h"
970     width: 700
971     height: 1000
972
973 # VPP L2 sel2
974 -
975   type: "plot"
976   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
977   algorithm: "plot_performance_box"
978   output-file-type: ".html"
979   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-ndrdisc"
980   data:
981     csit-vpp-perf-1710-all:
982     - 11
983     - 12
984     - 13
985     - 14
986     - 15
987     - 16
988     - 17
989     - 18
990     - 19
991     - 20
992   filter: "'64B' and 'FEATURE' and ('ACL10' or 'ACL50') and '10k_FLOWS' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
993   parameters:
994   - "throughput"
995   - "parent"
996   traces:
997     hoverinfo: "x+y"
998     boxpoints: "outliers"
999     whiskerwidth: 0
1000   layout:
1001     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1002     xaxis:
1003       autorange: True
1004       autotick: False
1005       fixedrange: False
1006       gridcolor: "rgb(238, 238, 238)"
1007       linecolor: "rgb(238, 238, 238)"
1008       linewidth: 1
1009       showgrid: True
1010       showline: True
1011       showticklabels: True
1012       tickcolor: "rgb(238, 238, 238)"
1013       tickmode: "linear"
1014       title: "Indexed Test Cases"
1015       zeroline: False
1016     yaxis:
1017       gridcolor: "rgb(238, 238, 238)'"
1018       hoverformat: ".4s"
1019       linecolor: "rgb(238, 238, 238)"
1020       linewidth: 1
1021       range: [0, 8000000]
1022       showgrid: True
1023       showline: True
1024       showticklabels: True
1025       tickcolor: "rgb(238, 238, 238)"
1026       title: "Packets Per Second [pps]"
1027       zeroline: False
1028     boxmode: "group"
1029     boxgroupgap: 0.5
1030     autosize: False
1031     margin:
1032       t: 50
1033       b: 20
1034       l: 50
1035       r: 20
1036     showlegend: True
1037     legend:
1038       orientation: "h"
1039     width: 700
1040     height: 1000
1041
1042 -
1043   type: "plot"
1044   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1045   algorithm: "plot_performance_box"
1046   output-file-type: ".html"
1047   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-ndrdisc"
1048   data:
1049     csit-vpp-perf-1710-all:
1050     - 11
1051     - 12
1052     - 13
1053     - 14
1054     - 15
1055     - 16
1056     - 17
1057     - 18
1058     - 19
1059     - 20
1060   filter: "'64B' and 'FEATURE' and ('ACL10' or 'ACL50') and '10k_FLOWS' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1061   parameters:
1062   - "throughput"
1063   - "parent"
1064   traces:
1065     hoverinfo: "x+y"
1066     boxpoints: "outliers"
1067     whiskerwidth: 0
1068   layout:
1069     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
1070     xaxis:
1071       autorange: True
1072       autotick: False
1073       fixedrange: False
1074       gridcolor: "rgb(238, 238, 238)"
1075       linecolor: "rgb(238, 238, 238)"
1076       linewidth: 1
1077       showgrid: True
1078       showline: True
1079       showticklabels: True
1080       tickcolor: "rgb(238, 238, 238)"
1081       tickmode: "linear"
1082       title: "Indexed Test Cases"
1083       zeroline: False
1084     yaxis:
1085       gridcolor: "rgb(238, 238, 238)'"
1086       hoverformat: ".4s"
1087       linecolor: "rgb(238, 238, 238)"
1088       linewidth: 1
1089       range: [5000000, 12000000]
1090       showgrid: True
1091       showline: True
1092       showticklabels: True
1093       tickcolor: "rgb(238, 238, 238)"
1094       title: "Packets Per Second [pps]"
1095       zeroline: False
1096     boxmode: "group"
1097     boxgroupgap: 0.5
1098     autosize: False
1099     margin:
1100       t: 50
1101       b: 20
1102       l: 50
1103       r: 20
1104     showlegend: True
1105     legend:
1106       orientation: "h"
1107     width: 700
1108     height: 1000
1109
1110 -
1111   type: "plot"
1112   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1113   algorithm: "plot_performance_box"
1114   output-file-type: ".html"
1115   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-pdrdisc"
1116   data:
1117     csit-vpp-perf-1710-all:
1118     - 11
1119     - 12
1120     - 13
1121     - 14
1122     - 15
1123     - 16
1124     - 17
1125     - 18
1126     - 19
1127     - 20
1128   filter: "'64B' and 'FEATURE' and ('ACL10' or 'ACL50') and '10k_FLOWS' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1129   parameters:
1130   - "throughput"
1131   - "parent"
1132   traces:
1133     hoverinfo: "x+y"
1134     boxpoints: "outliers"
1135     whiskerwidth: 0
1136   layout:
1137     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1138     xaxis:
1139       autorange: True
1140       autotick: False
1141       fixedrange: False
1142       gridcolor: "rgb(238, 238, 238)"
1143       linecolor: "rgb(238, 238, 238)"
1144       linewidth: 1
1145       showgrid: True
1146       showline: True
1147       showticklabels: True
1148       tickcolor: "rgb(238, 238, 238)"
1149       tickmode: "linear"
1150       title: "Indexed Test Cases"
1151       zeroline: False
1152     yaxis:
1153       gridcolor: "rgb(238, 238, 238)'"
1154       hoverformat: ".4s"
1155       linecolor: "rgb(238, 238, 238)"
1156       linewidth: 1
1157       range: [0, 8000000]
1158       showgrid: True
1159       showline: True
1160       showticklabels: True
1161       tickcolor: "rgb(238, 238, 238)"
1162       title: "Packets Per Second [pps]"
1163       zeroline: False
1164     boxmode: "group"
1165     boxgroupgap: 0.5
1166     autosize: False
1167     margin:
1168       t: 50
1169       b: 20
1170       l: 50
1171       r: 20
1172     showlegend: True
1173     legend:
1174       orientation: "h"
1175     width: 700
1176     height: 1000
1177
1178 -
1179   type: "plot"
1180   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1181   algorithm: "plot_performance_box"
1182   output-file-type: ".html"
1183   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-pdrdisc"
1184   data:
1185     csit-vpp-perf-1710-all:
1186     - 11
1187     - 12
1188     - 13
1189     - 14
1190     - 15
1191     - 16
1192     - 17
1193     - 18
1194     - 19
1195     - 20
1196   filter: "'64B' and 'FEATURE' and ('ACL10' or 'ACL50') and '10k_FLOWS' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1197   parameters:
1198   - "throughput"
1199   - "parent"
1200   traces:
1201     hoverinfo: "x+y"
1202     boxpoints: "outliers"
1203     whiskerwidth: 0
1204   layout:
1205     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1206     xaxis:
1207       autorange: True
1208       autotick: False
1209       fixedrange: False
1210       gridcolor: "rgb(238, 238, 238)"
1211       linecolor: "rgb(238, 238, 238)"
1212       linewidth: 1
1213       showgrid: True
1214       showline: True
1215       showticklabels: True
1216       tickcolor: "rgb(238, 238, 238)"
1217       tickmode: "linear"
1218       title: "Indexed Test Cases"
1219       zeroline: False
1220     yaxis:
1221       gridcolor: "rgb(238, 238, 238)'"
1222       hoverformat: ".4s"
1223       linecolor: "rgb(238, 238, 238)"
1224       linewidth: 1
1225       range: [5000000, 12000000]
1226       showgrid: True
1227       showline: True
1228       showticklabels: True
1229       tickcolor: "rgb(238, 238, 238)"
1230       title: "Packets Per Second [pps]"
1231       zeroline: False
1232     boxmode: "group"
1233     boxgroupgap: 0.5
1234     autosize: False
1235     margin:
1236       t: 50
1237       b: 20
1238       l: 50
1239       r: 20
1240     showlegend: True
1241     legend:
1242       orientation: "h"
1243     width: 700
1244     height: 1000
1245
1246 # VPP IP4
1247 -
1248   type: "plot"
1249   title: "VPP Performance 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1250   algorithm: "plot_performance_box"
1251   output-file-type: ".html"
1252   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-ndrdisc"
1253   data:
1254     csit-vpp-perf-1710-all:
1255     - 11
1256     - 12
1257     - 13
1258     - 14
1259     - 15
1260     - 16
1261     - 17
1262     - 18
1263     - 19
1264     - 20
1265   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1266   parameters:
1267   - "throughput"
1268   - "parent"
1269   traces:
1270     hoverinfo: "x+y"
1271     boxpoints: "outliers"
1272     whiskerwidth: 0
1273   layout:
1274     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1275     xaxis:
1276       autorange: True
1277       autotick: False
1278       fixedrange: False
1279       gridcolor: "rgb(238, 238, 238)"
1280       linecolor: "rgb(238, 238, 238)"
1281       linewidth: 1
1282       showgrid: True
1283       showline: True
1284       showticklabels: True
1285       tickcolor: "rgb(238, 238, 238)"
1286       tickmode: "linear"
1287       title: "Indexed Test Cases"
1288       zeroline: False
1289     yaxis:
1290       gridcolor: "rgb(238, 238, 238)'"
1291       hoverformat: ".4s"
1292       linecolor: "rgb(238, 238, 238)"
1293       linewidth: 1
1294       range: []
1295       showgrid: True
1296       showline: True
1297       showticklabels: True
1298       tickcolor: "rgb(238, 238, 238)"
1299       title: "Packets Per Second [pps]"
1300       zeroline: False
1301     boxmode: "group"
1302     boxgroupgap: 0.5
1303     autosize: False
1304     margin:
1305       t: 50
1306       b: 20
1307       l: 50
1308       r: 20
1309     showlegend: True
1310     legend:
1311       orientation: "h"
1312     width: 700
1313     height: 1000
1314
1315 -
1316   type: "plot"
1317   title: "VPP Performance 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1318   algorithm: "plot_performance_box"
1319   output-file-type: ".html"
1320   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-ndrdisc"
1321   data:
1322     csit-vpp-perf-1710-all:
1323     - 11
1324     - 12
1325     - 13
1326     - 14
1327     - 15
1328     - 16
1329     - 17
1330     - 18
1331     - 19
1332     - 20
1333   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1334   parameters:
1335   - "throughput"
1336   - "parent"
1337   traces:
1338     hoverinfo: "x+y"
1339     boxpoints: "outliers"
1340     whiskerwidth: 0
1341   layout:
1342     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1343     xaxis:
1344       autorange: True
1345       autotick: False
1346       fixedrange: False
1347       gridcolor: "rgb(238, 238, 238)"
1348       linecolor: "rgb(238, 238, 238)"
1349       linewidth: 1
1350       showgrid: True
1351       showline: True
1352       showticklabels: True
1353       tickcolor: "rgb(238, 238, 238)"
1354       tickmode: "linear"
1355       title: "Indexed Test Cases"
1356       zeroline: False
1357     yaxis:
1358       gridcolor: "rgb(238, 238, 238)'"
1359       hoverformat: ".4s"
1360       linecolor: "rgb(238, 238, 238)"
1361       linewidth: 1
1362       range: []
1363       showgrid: True
1364       showline: True
1365       showticklabels: True
1366       tickcolor: "rgb(238, 238, 238)"
1367       title: "Packets Per Second [pps]"
1368       zeroline: False
1369     boxmode: "group"
1370     boxgroupgap: 0.5
1371     autosize: False
1372     margin:
1373       t: 50
1374       b: 20
1375       l: 50
1376       r: 20
1377     showlegend: True
1378     legend:
1379       orientation: "h"
1380     width: 700
1381     height: 1000
1382
1383 -
1384   type: "plot"
1385   title: "VPP Performance 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1386   algorithm: "plot_performance_box"
1387   output-file-type: ".html"
1388   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-pdrdisc"
1389   data:
1390     csit-vpp-perf-1710-all:
1391     - 11
1392     - 12
1393     - 13
1394     - 14
1395     - 15
1396     - 16
1397     - 17
1398     - 18
1399     - 19
1400     - 20
1401   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1402   parameters:
1403   - "throughput"
1404   - "parent"
1405   traces:
1406     hoverinfo: "x+y"
1407     boxpoints: "outliers"
1408     whiskerwidth: 0
1409   layout:
1410     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1411     xaxis:
1412       autorange: True
1413       autotick: False
1414       fixedrange: False
1415       gridcolor: "rgb(238, 238, 238)"
1416       linecolor: "rgb(238, 238, 238)"
1417       linewidth: 1
1418       showgrid: True
1419       showline: True
1420       showticklabels: True
1421       tickcolor: "rgb(238, 238, 238)"
1422       tickmode: "linear"
1423       title: "Indexed Test Cases"
1424       zeroline: False
1425     yaxis:
1426       gridcolor: "rgb(238, 238, 238)'"
1427       hoverformat: ".4s"
1428       linecolor: "rgb(238, 238, 238)"
1429       linewidth: 1
1430       range: []
1431       showgrid: True
1432       showline: True
1433       showticklabels: True
1434       tickcolor: "rgb(238, 238, 238)"
1435       title: "Packets Per Second [pps]"
1436       zeroline: False
1437     boxmode: "group"
1438     boxgroupgap: 0.5
1439     autosize: False
1440     margin:
1441       t: 50
1442       b: 20
1443       l: 50
1444       r: 20
1445     showlegend: True
1446     legend:
1447       orientation: "h"
1448     width: 700
1449     height: 1000
1450
1451 -
1452   type: "plot"
1453   title: "VPP Performance 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1454   algorithm: "plot_performance_box"
1455   output-file-type: ".html"
1456   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-pdrdisc"
1457   data:
1458     csit-vpp-perf-1710-all:
1459     - 11
1460     - 12
1461     - 13
1462     - 14
1463     - 15
1464     - 16
1465     - 17
1466     - 18
1467     - 19
1468     - 20
1469   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1470   parameters:
1471   - "throughput"
1472   - "parent"
1473   traces:
1474     hoverinfo: "x+y"
1475     boxpoints: "outliers"
1476     whiskerwidth: 0
1477   layout:
1478     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1479     xaxis:
1480       autorange: True
1481       autotick: False
1482       fixedrange: False
1483       gridcolor: "rgb(238, 238, 238)"
1484       linecolor: "rgb(238, 238, 238)"
1485       linewidth: 1
1486       showgrid: True
1487       showline: True
1488       showticklabels: True
1489       tickcolor: "rgb(238, 238, 238)"
1490       tickmode: "linear"
1491       title: "Indexed Test Cases"
1492       zeroline: False
1493     yaxis:
1494       gridcolor: "rgb(238, 238, 238)'"
1495       hoverformat: ".4s"
1496       linecolor: "rgb(238, 238, 238)"
1497       linewidth: 1
1498       range: []
1499       showgrid: True
1500       showline: True
1501       showticklabels: True
1502       tickcolor: "rgb(238, 238, 238)"
1503       title: "Packets Per Second [pps]"
1504       zeroline: False
1505     boxmode: "group"
1506     boxgroupgap: 0.5
1507     autosize: False
1508     margin:
1509       t: 50
1510       b: 20
1511       l: 50
1512       r: 20
1513     showlegend: True
1514     legend:
1515       orientation: "h"
1516     width: 700
1517     height: 1000
1518
1519 # VPP IP6
1520 -
1521   type: "plot"
1522   title: "VPP Performance 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1523   algorithm: "plot_performance_box"
1524   output-file-type: ".html"
1525   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-ndrdisc"
1526   data:
1527     csit-vpp-perf-1710-all:
1528     - 11
1529     - 12
1530     - 13
1531     - 14
1532     - 15
1533     - 16
1534     - 17
1535     - 18
1536     - 19
1537     - 20
1538   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1539   parameters:
1540   - "throughput"
1541   - "parent"
1542   traces:
1543     hoverinfo: "x+y"
1544     boxpoints: "outliers"
1545     whiskerwidth: 0
1546   layout:
1547     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1548     xaxis:
1549       autorange: True
1550       autotick: False
1551       fixedrange: False
1552       gridcolor: "rgb(238, 238, 238)"
1553       linecolor: "rgb(238, 238, 238)"
1554       linewidth: 1
1555       showgrid: True
1556       showline: True
1557       showticklabels: True
1558       tickcolor: "rgb(238, 238, 238)"
1559       tickmode: "linear"
1560       title: "Indexed Test Cases"
1561       zeroline: False
1562     yaxis:
1563       gridcolor: "rgb(238, 238, 238)'"
1564       hoverformat: ".4s"
1565       linecolor: "rgb(238, 238, 238)"
1566       linewidth: 1
1567       range: []
1568       showgrid: True
1569       showline: True
1570       showticklabels: True
1571       tickcolor: "rgb(238, 238, 238)"
1572       title: "Packets Per Second [pps]"
1573       zeroline: False
1574     boxmode: "group"
1575     boxgroupgap: 0.5
1576     autosize: False
1577     margin:
1578       t: 50
1579       b: 20
1580       l: 50
1581       r: 20
1582     showlegend: True
1583     legend:
1584       orientation: "h"
1585     width: 700
1586     height: 1000
1587
1588 -
1589   type: "plot"
1590   title: "VPP Performance 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1591   algorithm: "plot_performance_box"
1592   output-file-type: ".html"
1593   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-ndrdisc"
1594   data:
1595     csit-vpp-perf-1710-all:
1596     - 11
1597     - 12
1598     - 13
1599     - 14
1600     - 15
1601     - 16
1602     - 17
1603     - 18
1604     - 19
1605     - 20
1606   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1607   parameters:
1608   - "throughput"
1609   - "parent"
1610   traces:
1611     hoverinfo: "x+y"
1612     boxpoints: "outliers"
1613     whiskerwidth: 0
1614   layout:
1615     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1616     xaxis:
1617       autorange: True
1618       autotick: False
1619       fixedrange: False
1620       gridcolor: "rgb(238, 238, 238)"
1621       linecolor: "rgb(238, 238, 238)"
1622       linewidth: 1
1623       showgrid: True
1624       showline: True
1625       showticklabels: True
1626       tickcolor: "rgb(238, 238, 238)"
1627       tickmode: "linear"
1628       title: "Indexed Test Cases"
1629       zeroline: False
1630     yaxis:
1631       gridcolor: "rgb(238, 238, 238)'"
1632       hoverformat: ".4s"
1633       linecolor: "rgb(238, 238, 238)"
1634       linewidth: 1
1635       range: []
1636       showgrid: True
1637       showline: True
1638       showticklabels: True
1639       tickcolor: "rgb(238, 238, 238)"
1640       title: "Packets Per Second [pps]"
1641       zeroline: False
1642     boxmode: "group"
1643     boxgroupgap: 0.5
1644     autosize: False
1645     margin:
1646       t: 50
1647       b: 20
1648       l: 50
1649       r: 20
1650     showlegend: True
1651     legend:
1652       orientation: "h"
1653     width: 700
1654     height: 1000
1655
1656 -
1657   type: "plot"
1658   title: "VPP Performance 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1659   algorithm: "plot_performance_box"
1660   output-file-type: ".html"
1661   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-pdrdisc"
1662   data:
1663     csit-vpp-perf-1710-all:
1664     - 11
1665     - 12
1666     - 13
1667     - 14
1668     - 15
1669     - 16
1670     - 17
1671     - 18
1672     - 19
1673     - 20
1674   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1675   parameters:
1676   - "throughput"
1677   - "parent"
1678   traces:
1679     hoverinfo: "x+y"
1680     boxpoints: "outliers"
1681     whiskerwidth: 0
1682   layout:
1683     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1684     xaxis:
1685       autorange: True
1686       autotick: False
1687       fixedrange: False
1688       gridcolor: "rgb(238, 238, 238)"
1689       linecolor: "rgb(238, 238, 238)"
1690       linewidth: 1
1691       showgrid: True
1692       showline: True
1693       showticklabels: True
1694       tickcolor: "rgb(238, 238, 238)"
1695       tickmode: "linear"
1696       title: "Indexed Test Cases"
1697       zeroline: False
1698     yaxis:
1699       gridcolor: "rgb(238, 238, 238)'"
1700       hoverformat: ".4s"
1701       linecolor: "rgb(238, 238, 238)"
1702       linewidth: 1
1703       range: []
1704       showgrid: True
1705       showline: True
1706       showticklabels: True
1707       tickcolor: "rgb(238, 238, 238)"
1708       title: "Packets Per Second [pps]"
1709       zeroline: False
1710     boxmode: "group"
1711     boxgroupgap: 0.5
1712     autosize: False
1713     margin:
1714       t: 50
1715       b: 20
1716       l: 50
1717       r: 20
1718     showlegend: True
1719     legend:
1720       orientation: "h"
1721     width: 700
1722     height: 1000
1723
1724 -
1725   type: "plot"
1726   title: "VPP Performance 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1727   algorithm: "plot_performance_box"
1728   output-file-type: ".html"
1729   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-pdrdisc"
1730   data:
1731     csit-vpp-perf-1710-all:
1732     - 11
1733     - 12
1734     - 13
1735     - 14
1736     - 15
1737     - 16
1738     - 17
1739     - 18
1740     - 19
1741     - 20
1742   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1743   parameters:
1744   - "throughput"
1745   - "parent"
1746   traces:
1747     hoverinfo: "x+y"
1748     boxpoints: "outliers"
1749     whiskerwidth: 0
1750   layout:
1751     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1752     xaxis:
1753       autorange: True
1754       autotick: False
1755       fixedrange: False
1756       gridcolor: "rgb(238, 238, 238)"
1757       linecolor: "rgb(238, 238, 238)"
1758       linewidth: 1
1759       showgrid: True
1760       showline: True
1761       showticklabels: True
1762       tickcolor: "rgb(238, 238, 238)"
1763       tickmode: "linear"
1764       title: "Indexed Test Cases"
1765       zeroline: False
1766     yaxis:
1767       gridcolor: "rgb(238, 238, 238)'"
1768       hoverformat: ".4s"
1769       linecolor: "rgb(238, 238, 238)"
1770       linewidth: 1
1771       range: []
1772       showgrid: True
1773       showline: True
1774       showticklabels: True
1775       tickcolor: "rgb(238, 238, 238)"
1776       title: "Packets Per Second [pps]"
1777       zeroline: False
1778     boxmode: "group"
1779     boxgroupgap: 0.5
1780     autosize: False
1781     margin:
1782       t: 50
1783       b: 20
1784       l: 50
1785       r: 20
1786     showlegend: True
1787     legend:
1788       orientation: "h"
1789     width: 700
1790     height: 1000
1791
1792 # VPP IP4_overlay
1793 -
1794   type: "plot"
1795   title: "VPP Performance 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1796   algorithm: "plot_performance_box"
1797   output-file-type: ".html"
1798   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ndrdisc"
1799   data:
1800     csit-vpp-perf-1710-all:
1801     - 11
1802     - 12
1803     - 13
1804     - 14
1805     - 15
1806     - 16
1807     - 17
1808     - 18
1809     - 19
1810     - 20
1811   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1812   parameters:
1813   - "throughput"
1814   - "parent"
1815   traces:
1816     hoverinfo: "x+y"
1817     boxpoints: "outliers"
1818     whiskerwidth: 0
1819   layout:
1820     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1821     xaxis:
1822       autorange: True
1823       autotick: False
1824       fixedrange: False
1825       gridcolor: "rgb(238, 238, 238)"
1826       linecolor: "rgb(238, 238, 238)"
1827       linewidth: 1
1828       showgrid: True
1829       showline: True
1830       showticklabels: True
1831       tickcolor: "rgb(238, 238, 238)"
1832       tickmode: "linear"
1833       title: "Indexed Test Cases"
1834       zeroline: False
1835     yaxis:
1836       gridcolor: "rgb(238, 238, 238)'"
1837       hoverformat: ".4s"
1838       linecolor: "rgb(238, 238, 238)"
1839       linewidth: 1
1840       range: []
1841       showgrid: True
1842       showline: True
1843       showticklabels: True
1844       tickcolor: "rgb(238, 238, 238)"
1845       title: "Packets Per Second [pps]"
1846       zeroline: False
1847     boxmode: "group"
1848     boxgroupgap: 0.5
1849     autosize: False
1850     margin:
1851       t: 50
1852       b: 20
1853       l: 50
1854       r: 20
1855     showlegend: True
1856     legend:
1857       orientation: "h"
1858     width: 700
1859     height: 1000
1860
1861 -
1862   type: "plot"
1863   title: "VPP Performance 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1864   algorithm: "plot_performance_box"
1865   output-file-type: ".html"
1866   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ndrdisc"
1867   data:
1868     csit-vpp-perf-1710-all:
1869     - 11
1870     - 12
1871     - 13
1872     - 14
1873     - 15
1874     - 16
1875     - 17
1876     - 18
1877     - 19
1878     - 20
1879   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1880   parameters:
1881   - "throughput"
1882   - "parent"
1883   traces:
1884     hoverinfo: "x+y"
1885     boxpoints: "outliers"
1886     whiskerwidth: 0
1887   layout:
1888     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1889     xaxis:
1890       autorange: True
1891       autotick: False
1892       fixedrange: False
1893       gridcolor: "rgb(238, 238, 238)"
1894       linecolor: "rgb(238, 238, 238)"
1895       linewidth: 1
1896       showgrid: True
1897       showline: True
1898       showticklabels: True
1899       tickcolor: "rgb(238, 238, 238)"
1900       tickmode: "linear"
1901       title: "Indexed Test Cases"
1902       zeroline: False
1903     yaxis:
1904       gridcolor: "rgb(238, 238, 238)'"
1905       hoverformat: ".4s"
1906       linecolor: "rgb(238, 238, 238)"
1907       linewidth: 1
1908       range: []
1909       showgrid: True
1910       showline: True
1911       showticklabels: True
1912       tickcolor: "rgb(238, 238, 238)"
1913       title: "Packets Per Second [pps]"
1914       zeroline: False
1915     boxmode: "group"
1916     boxgroupgap: 0.5
1917     autosize: False
1918     margin:
1919       t: 50
1920       b: 20
1921       l: 50
1922       r: 20
1923     showlegend: True
1924     legend:
1925       orientation: "h"
1926     width: 700
1927     height: 1000
1928
1929 -
1930   type: "plot"
1931   title: "VPP Performance 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1932   algorithm: "plot_performance_box"
1933   output-file-type: ".html"
1934   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-pdrdisc"
1935   data:
1936     csit-vpp-perf-1710-all:
1937     - 11
1938     - 12
1939     - 13
1940     - 14
1941     - 15
1942     - 16
1943     - 17
1944     - 18
1945     - 19
1946     - 20
1947   filter: "'64B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1948   parameters:
1949   - "throughput"
1950   - "parent"
1951   traces:
1952     hoverinfo: "x+y"
1953     boxpoints: "outliers"
1954     whiskerwidth: 0
1955   layout:
1956     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1957     xaxis:
1958       autorange: True
1959       autotick: False
1960       fixedrange: False
1961       gridcolor: "rgb(238, 238, 238)"
1962       linecolor: "rgb(238, 238, 238)"
1963       linewidth: 1
1964       showgrid: True
1965       showline: True
1966       showticklabels: True
1967       tickcolor: "rgb(238, 238, 238)"
1968       tickmode: "linear"
1969       title: "Indexed Test Cases"
1970       zeroline: False
1971     yaxis:
1972       gridcolor: "rgb(238, 238, 238)'"
1973       hoverformat: ".4s"
1974       linecolor: "rgb(238, 238, 238)"
1975       linewidth: 1
1976       range: []
1977       showgrid: True
1978       showline: True
1979       showticklabels: True
1980       tickcolor: "rgb(238, 238, 238)"
1981       title: "Packets Per Second [pps]"
1982       zeroline: False
1983     boxmode: "group"
1984     boxgroupgap: 0.5
1985     autosize: False
1986     margin:
1987       t: 50
1988       b: 20
1989       l: 50
1990       r: 20
1991     showlegend: True
1992     legend:
1993       orientation: "h"
1994     width: 700
1995     height: 1000
1996
1997 -
1998   type: "plot"
1999   title: "VPP Performance 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
2000   algorithm: "plot_performance_box"
2001   output-file-type: ".html"
2002   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-pdrdisc"
2003   data:
2004     csit-vpp-perf-1710-all:
2005     - 11
2006     - 12
2007     - 13
2008     - 14
2009     - 15
2010     - 16
2011     - 17
2012     - 18
2013     - 19
2014     - 20
2015   filter: "'64B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
2016   parameters:
2017   - "throughput"
2018   - "parent"
2019   traces:
2020     hoverinfo: "x+y"
2021     boxpoints: "outliers"
2022     whiskerwidth: 0
2023   layout:
2024     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
2025     xaxis:
2026       autorange: True
2027       autotick: False
2028       fixedrange: False
2029       gridcolor: "rgb(238, 238, 238)"
2030       linecolor: "rgb(238, 238, 238)"
2031       linewidth: 1
2032       showgrid: True
2033       showline: True
2034       showticklabels: True
2035       tickcolor: "rgb(238, 238, 238)"
2036       tickmode: "linear"
2037       title: "Indexed Test Cases"
2038       zeroline: False
2039     yaxis:
2040       gridcolor: "rgb(238, 238, 238)'"
2041       hoverformat: ".4s"
2042       linecolor: "rgb(238, 238, 238)"
2043       linewidth: 1
2044       range: []
2045       showgrid: True
2046       showline: True
2047       showticklabels: True
2048       tickcolor: "rgb(238, 238, 238)"
2049       title: "Packets Per Second [pps]"
2050       zeroline: False
2051     boxmode: "group"
2052     boxgroupgap: 0.5
2053     autosize: False
2054     margin:
2055       t: 50
2056       b: 20
2057       l: 50
2058       r: 20
2059     showlegend: True
2060     legend:
2061       orientation: "h"
2062     width: 700
2063     height: 1000
2064
2065 # VPP IP6_overlay
2066 -
2067   type: "plot"
2068   title: "VPP Performance 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
2069   algorithm: "plot_performance_box"
2070   output-file-type: ".html"
2071   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ndrdisc"
2072   data:
2073     csit-vpp-perf-1710-all:
2074     - 11
2075     - 12
2076     - 13
2077     - 14
2078     - 15
2079     - 16
2080     - 17
2081     - 18
2082     - 19
2083     - 20
2084   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
2085   parameters:
2086   - "throughput"
2087   - "parent"
2088   traces:
2089     hoverinfo: "x+y"
2090     boxpoints: "outliers"
2091     whiskerwidth: 0
2092   layout:
2093     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
2094     xaxis:
2095       autorange: True
2096       autotick: False
2097       fixedrange: False
2098       gridcolor: "rgb(238, 238, 238)"
2099       linecolor: "rgb(238, 238, 238)"
2100       linewidth: 1
2101       showgrid: True
2102       showline: True
2103       showticklabels: True
2104       tickcolor: "rgb(238, 238, 238)"
2105       tickmode: "linear"
2106       title: "Indexed Test Cases"
2107       zeroline: False
2108     yaxis:
2109       gridcolor: "rgb(238, 238, 238)'"
2110       hoverformat: ".4s"
2111       linecolor: "rgb(238, 238, 238)"
2112       linewidth: 1
2113       range: []
2114       showgrid: True
2115       showline: True
2116       showticklabels: True
2117       tickcolor: "rgb(238, 238, 238)"
2118       title: "Packets Per Second [pps]"
2119       zeroline: False
2120     boxmode: "group"
2121     boxgroupgap: 0.5
2122     autosize: False
2123     margin:
2124       t: 50
2125       b: 20
2126       l: 50
2127       r: 20
2128     showlegend: True
2129     legend:
2130       orientation: "h"
2131     width: 700
2132     height: 1000
2133
2134 -
2135   type: "plot"
2136   title: "VPP Performance 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
2137   algorithm: "plot_performance_box"
2138   output-file-type: ".html"
2139   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ndrdisc"
2140   data:
2141     csit-vpp-perf-1710-all:
2142     - 11
2143     - 12
2144     - 13
2145     - 14
2146     - 15
2147     - 16
2148     - 17
2149     - 18
2150     - 19
2151     - 20
2152   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
2153   parameters:
2154   - "throughput"
2155   - "parent"
2156   traces:
2157     hoverinfo: "x+y"
2158     boxpoints: "outliers"
2159     whiskerwidth: 0
2160   layout:
2161     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
2162     xaxis:
2163       autorange: True
2164       autotick: False
2165       fixedrange: False
2166       gridcolor: "rgb(238, 238, 238)"
2167       linecolor: "rgb(238, 238, 238)"
2168       linewidth: 1
2169       showgrid: True
2170       showline: True
2171       showticklabels: True
2172       tickcolor: "rgb(238, 238, 238)"
2173       tickmode: "linear"
2174       title: "Indexed Test Cases"
2175       zeroline: False
2176     yaxis:
2177       gridcolor: "rgb(238, 238, 238)'"
2178       hoverformat: ".4s"
2179       linecolor: "rgb(238, 238, 238)"
2180       linewidth: 1
2181       range: []
2182       showgrid: True
2183       showline: True
2184       showticklabels: True
2185       tickcolor: "rgb(238, 238, 238)"
2186       title: "Packets Per Second [pps]"
2187       zeroline: False
2188     boxmode: "group"
2189     boxgroupgap: 0.5
2190     autosize: False
2191     margin:
2192       t: 50
2193       b: 20
2194       l: 50
2195       r: 20
2196     showlegend: True
2197     legend:
2198       orientation: "h"
2199     width: 700
2200     height: 1000
2201
2202 -
2203   type: "plot"
2204   title: "VPP Performance 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
2205   algorithm: "plot_performance_box"
2206   output-file-type: ".html"
2207   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-pdrdisc"
2208   data:
2209     csit-vpp-perf-1710-all:
2210     - 11
2211     - 12
2212     - 13
2213     - 14
2214     - 15
2215     - 16
2216     - 17
2217     - 18
2218     - 19
2219     - 20
2220   filter: "'78B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
2221   parameters:
2222   - "throughput"
2223   - "parent"
2224   traces:
2225     hoverinfo: "x+y"
2226     boxpoints: "outliers"
2227     whiskerwidth: 0
2228   layout:
2229     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
2230     xaxis:
2231       autorange: True
2232       autotick: False
2233       fixedrange: False
2234       gridcolor: "rgb(238, 238, 238)"
2235       linecolor: "rgb(238, 238, 238)"
2236       linewidth: 1
2237       showgrid: True
2238       showline: True
2239       showticklabels: True
2240       tickcolor: "rgb(238, 238, 238)"
2241       tickmode: "linear"
2242       title: "Indexed Test Cases"
2243       zeroline: False
2244     yaxis:
2245       gridcolor: "rgb(238, 238, 238)'"
2246       hoverformat: ".4s"
2247       linecolor: "rgb(238, 238, 238)"
2248       linewidth: 1
2249       range: []
2250       showgrid: True
2251       showline: True
2252       showticklabels: True
2253       tickcolor: "rgb(238, 238, 238)"
2254       title: "Packets Per Second [pps]"
2255       zeroline: False
2256     boxmode: "group"
2257     boxgroupgap: 0.5
2258     autosize: False
2259     margin:
2260       t: 50
2261       b: 20
2262       l: 50
2263       r: 20
2264     showlegend: True
2265     legend:
2266       orientation: "h"
2267     width: 700
2268     height: 1000
2269
2270 -
2271   type: "plot"
2272   title: "VPP Performance 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
2273   algorithm: "plot_performance_box"
2274   output-file-type: ".html"
2275   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-pdrdisc"
2276   data:
2277     csit-vpp-perf-1710-all:
2278     - 11
2279     - 12
2280     - 13
2281     - 14
2282     - 15
2283     - 16
2284     - 17
2285     - 18
2286     - 19
2287     - 20
2288   filter: "'78B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
2289   parameters:
2290   - "throughput"
2291   - "parent"
2292   traces:
2293     hoverinfo: "x+y"
2294     boxpoints: "outliers"
2295     whiskerwidth: 0
2296   layout:
2297     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
2298     xaxis:
2299       autorange: True
2300       autotick: False
2301       fixedrange: False
2302       gridcolor: "rgb(238, 238, 238)"
2303       linecolor: "rgb(238, 238, 238)"
2304       linewidth: 1
2305       showgrid: True
2306       showline: True
2307       showticklabels: True
2308       tickcolor: "rgb(238, 238, 238)"
2309       tickmode: "linear"
2310       title: "Indexed Test Cases"
2311       zeroline: False
2312     yaxis:
2313       gridcolor: "rgb(238, 238, 238)'"
2314       hoverformat: ".4s"
2315       linecolor: "rgb(238, 238, 238)"
2316       linewidth: 1
2317       range: []
2318       showgrid: True
2319       showline: True
2320       showticklabels: True
2321       tickcolor: "rgb(238, 238, 238)"
2322       title: "Packets Per Second [pps]"
2323       zeroline: False
2324     boxmode: "group"
2325     boxgroupgap: 0.5
2326     autosize: False
2327     margin:
2328       t: 50
2329       b: 20
2330       l: 50
2331       r: 20
2332     showlegend: True
2333     legend:
2334       orientation: "h"
2335     width: 700
2336     height: 1000
2337
2338 # VPP VM VHOST
2339 -
2340   type: "plot"
2341   title: "VPP Performance 64B-1t1c-.*vhost.*-ndrdisc"
2342   algorithm: "plot_performance_box"
2343   output-file-type: ".html"
2344   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-ndrdisc"
2345   data:
2346     csit-vpp-perf-1710-all:
2347     - 11
2348     - 12
2349     - 13
2350     - 14
2351     - 15
2352     - 16
2353     - 17
2354     - 18
2355     - 19
2356     - 20
2357   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2358   parameters:
2359   - "throughput"
2360   - "parent"
2361   traces:
2362     hoverinfo: "x+y"
2363     boxpoints: "outliers"
2364     whiskerwidth: 0
2365   layout:
2366     title: "64B-1t1c-.*vhost.*-ndrdisc"
2367     xaxis:
2368       autorange: True
2369       autotick: False
2370       fixedrange: False
2371       gridcolor: "rgb(238, 238, 238)"
2372       linecolor: "rgb(238, 238, 238)"
2373       linewidth: 1
2374       showgrid: True
2375       showline: True
2376       showticklabels: True
2377       tickcolor: "rgb(238, 238, 238)"
2378       tickmode: "linear"
2379       title: "Indexed Test Cases"
2380       zeroline: False
2381     yaxis:
2382       gridcolor: "rgb(238, 238, 238)'"
2383       hoverformat: ".4s"
2384       linecolor: "rgb(238, 238, 238)"
2385       linewidth: 1
2386       range: []
2387       showgrid: True
2388       showline: True
2389       showticklabels: True
2390       tickcolor: "rgb(238, 238, 238)"
2391       title: "Packets Per Second [pps]"
2392       zeroline: False
2393     boxmode: "group"
2394     boxgroupgap: 0.5
2395     autosize: False
2396     margin:
2397       t: 50
2398       b: 20
2399       l: 50
2400       r: 20
2401     showlegend: True
2402     legend:
2403       orientation: "h"
2404     width: 700
2405     height: 1000
2406
2407 -
2408   type: "plot"
2409   title: "VPP Performance 64B-2t2c-.*vhost.*-ndrdisc"
2410   algorithm: "plot_performance_box"
2411   output-file-type: ".html"
2412   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-ndrdisc"
2413   data:
2414     csit-vpp-perf-1710-all:
2415     - 11
2416     - 12
2417     - 13
2418     - 14
2419     - 15
2420     - 16
2421     - 17
2422     - 18
2423     - 19
2424     - 20
2425   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2426   parameters:
2427   - "throughput"
2428   - "parent"
2429   traces:
2430     hoverinfo: "x+y"
2431     boxpoints: "outliers"
2432     whiskerwidth: 0
2433   layout:
2434     title: "64B-2t2c-.*vhost.*-ndrdisc"
2435     xaxis:
2436       autorange: True
2437       autotick: False
2438       fixedrange: False
2439       gridcolor: "rgb(238, 238, 238)"
2440       linecolor: "rgb(238, 238, 238)"
2441       linewidth: 1
2442       showgrid: True
2443       showline: True
2444       showticklabels: True
2445       tickcolor: "rgb(238, 238, 238)"
2446       tickmode: "linear"
2447       title: "Indexed Test Cases"
2448       zeroline: False
2449     yaxis:
2450       gridcolor: "rgb(238, 238, 238)'"
2451       hoverformat: ".4s"
2452       linecolor: "rgb(238, 238, 238)"
2453       linewidth: 1
2454       range: []
2455       showgrid: True
2456       showline: True
2457       showticklabels: True
2458       tickcolor: "rgb(238, 238, 238)"
2459       title: "Packets Per Second [pps]"
2460       zeroline: False
2461     boxmode: "group"
2462     boxgroupgap: 0.5
2463     autosize: False
2464     margin:
2465       t: 50
2466       b: 20
2467       l: 50
2468       r: 20
2469     showlegend: True
2470     legend:
2471       orientation: "h"
2472     width: 700
2473     height: 1000
2474
2475 -
2476   type: "plot"
2477   title: "VPP Performance 64B-1t1c-.*vhost.*-pdrdisc"
2478   algorithm: "plot_performance_box"
2479   output-file-type: ".html"
2480   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-pdrdisc"
2481   data:
2482     csit-vpp-perf-1710-all:
2483     - 11
2484     - 12
2485     - 13
2486     - 14
2487     - 15
2488     - 16
2489     - 17
2490     - 18
2491     - 19
2492     - 20
2493   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2494   parameters:
2495   - "throughput"
2496   - "parent"
2497   traces:
2498     hoverinfo: "x+y"
2499     boxpoints: "outliers"
2500     whiskerwidth: 0
2501   layout:
2502     title: "64B-1t1c-.*vhost.*-pdrdisc"
2503     xaxis:
2504       autorange: True
2505       autotick: False
2506       fixedrange: False
2507       gridcolor: "rgb(238, 238, 238)"
2508       linecolor: "rgb(238, 238, 238)"
2509       linewidth: 1
2510       showgrid: True
2511       showline: True
2512       showticklabels: True
2513       tickcolor: "rgb(238, 238, 238)"
2514       tickmode: "linear"
2515       title: "Indexed Test Cases"
2516       zeroline: False
2517     yaxis:
2518       gridcolor: "rgb(238, 238, 238)'"
2519       hoverformat: ".4s"
2520       linecolor: "rgb(238, 238, 238)"
2521       linewidth: 1
2522       range: []
2523       showgrid: True
2524       showline: True
2525       showticklabels: True
2526       tickcolor: "rgb(238, 238, 238)"
2527       title: "Packets Per Second [pps]"
2528       zeroline: False
2529     boxmode: "group"
2530     boxgroupgap: 0.5
2531     autosize: False
2532     margin:
2533       t: 50
2534       b: 20
2535       l: 50
2536       r: 20
2537     showlegend: True
2538     legend:
2539       orientation: "h"
2540     width: 700
2541     height: 1000
2542
2543 -
2544   type: "plot"
2545   title: "VPP Performance 64B-2t2c-.*vhost.*-pdrdisc"
2546   algorithm: "plot_performance_box"
2547   output-file-type: ".html"
2548   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-pdrdisc"
2549   data:
2550     csit-vpp-perf-1710-all:
2551     - 11
2552     - 12
2553     - 13
2554     - 14
2555     - 15
2556     - 16
2557     - 17
2558     - 18
2559     - 19
2560     - 20
2561   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2562   parameters:
2563   - "throughput"
2564   - "parent"
2565   traces:
2566     hoverinfo: "x+y"
2567     boxpoints: "outliers"
2568     whiskerwidth: 0
2569   layout:
2570     title: "64B-2t2c-.*vhost.*-pdrdisc"
2571     xaxis:
2572       autorange: True
2573       autotick: False
2574       fixedrange: False
2575       gridcolor: "rgb(238, 238, 238)"
2576       linecolor: "rgb(238, 238, 238)"
2577       linewidth: 1
2578       showgrid: True
2579       showline: True
2580       showticklabels: True
2581       tickcolor: "rgb(238, 238, 238)"
2582       tickmode: "linear"
2583       title: "Indexed Test Cases"
2584       zeroline: False
2585     yaxis:
2586       gridcolor: "rgb(238, 238, 238)'"
2587       hoverformat: ".4s"
2588       linecolor: "rgb(238, 238, 238)"
2589       linewidth: 1
2590       range: []
2591       showgrid: True
2592       showline: True
2593       showticklabels: True
2594       tickcolor: "rgb(238, 238, 238)"
2595       title: "Packets Per Second [pps]"
2596       zeroline: False
2597     boxmode: "group"
2598     boxgroupgap: 0.5
2599     autosize: False
2600     margin:
2601       t: 50
2602       b: 20
2603       l: 50
2604       r: 20
2605     showlegend: True
2606     legend:
2607       orientation: "h"
2608     width: 700
2609     height: 1000
2610
2611 # VPP VM VHOST SELECTION
2612 -
2613   type: "plot"
2614   title: "VPP Performance 64B-1t1c-.*vhost.*-ndrdisc"
2615   algorithm: "plot_performance_box"
2616   output-file-type: ".html"
2617   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-ndrdisc"
2618   data:
2619     csit-vpp-perf-1710-all:
2620     - 11
2621     - 12
2622     - 13
2623     - 14
2624     - 15
2625     - 16
2626     - 17
2627     - 18
2628     - 19
2629     - 20
2630   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2631   parameters:
2632   - "throughput"
2633   - "parent"
2634   traces:
2635     hoverinfo: "x+y"
2636     boxpoints: "outliers"
2637     whiskerwidth: 0
2638   layout:
2639     title: "64B-1t1c-.*vhost.*-ndrdisc"
2640     xaxis:
2641       autorange: True
2642       autotick: False
2643       fixedrange: False
2644       gridcolor: "rgb(238, 238, 238)"
2645       linecolor: "rgb(238, 238, 238)"
2646       linewidth: 1
2647       showgrid: True
2648       showline: True
2649       showticklabels: True
2650       tickcolor: "rgb(238, 238, 238)"
2651       tickmode: "linear"
2652       title: "Indexed Test Cases"
2653       zeroline: False
2654     yaxis:
2655       gridcolor: "rgb(238, 238, 238)'"
2656       hoverformat: ".4s"
2657       linecolor: "rgb(238, 238, 238)"
2658       linewidth: 1
2659       range: []
2660       showgrid: True
2661       showline: True
2662       showticklabels: True
2663       tickcolor: "rgb(238, 238, 238)"
2664       title: "Packets Per Second [pps]"
2665       zeroline: False
2666     boxmode: "group"
2667     boxgroupgap: 0.5
2668     autosize: False
2669     margin:
2670       t: 50
2671       b: 20
2672       l: 50
2673       r: 20
2674     showlegend: True
2675     legend:
2676       orientation: "h"
2677     width: 700
2678     height: 1000
2679
2680 -
2681   type: "plot"
2682   title: "VPP Performance 64B-2t2c-.*vhost.*-ndrdisc"
2683   algorithm: "plot_performance_box"
2684   output-file-type: ".html"
2685   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-ndrdisc"
2686   data:
2687     csit-vpp-perf-1710-all:
2688     - 11
2689     - 12
2690     - 13
2691     - 14
2692     - 15
2693     - 16
2694     - 17
2695     - 18
2696     - 19
2697     - 20
2698   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2699   parameters:
2700   - "throughput"
2701   - "parent"
2702   traces:
2703     hoverinfo: "x+y"
2704     boxpoints: "outliers"
2705     whiskerwidth: 0
2706   layout:
2707     title: "64B-2t2c-.*vhost.*-ndrdisc"
2708     xaxis:
2709       autorange: True
2710       autotick: False
2711       fixedrange: False
2712       gridcolor: "rgb(238, 238, 238)"
2713       linecolor: "rgb(238, 238, 238)"
2714       linewidth: 1
2715       showgrid: True
2716       showline: True
2717       showticklabels: True
2718       tickcolor: "rgb(238, 238, 238)"
2719       tickmode: "linear"
2720       title: "Indexed Test Cases"
2721       zeroline: False
2722     yaxis:
2723       gridcolor: "rgb(238, 238, 238)'"
2724       hoverformat: ".4s"
2725       linecolor: "rgb(238, 238, 238)"
2726       linewidth: 1
2727       range: []
2728       showgrid: True
2729       showline: True
2730       showticklabels: True
2731       tickcolor: "rgb(238, 238, 238)"
2732       title: "Packets Per Second [pps]"
2733       zeroline: False
2734     boxmode: "group"
2735     boxgroupgap: 0.5
2736     autosize: False
2737     margin:
2738       t: 50
2739       b: 20
2740       l: 50
2741       r: 20
2742     showlegend: True
2743     legend:
2744       orientation: "h"
2745     width: 700
2746     height: 1000
2747
2748 -
2749   type: "plot"
2750   title: "VPP Performance 64B-1t1c-.*vhost.*-pdrdisc"
2751   algorithm: "plot_performance_box"
2752   output-file-type: ".html"
2753   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-pdrdisc"
2754   data:
2755     csit-vpp-perf-1710-all:
2756     - 11
2757     - 12
2758     - 13
2759     - 14
2760     - 15
2761     - 16
2762     - 17
2763     - 18
2764     - 19
2765     - 20
2766   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2767   parameters:
2768   - "throughput"
2769   - "parent"
2770   traces:
2771     hoverinfo: "x+y"
2772     boxpoints: "outliers"
2773     whiskerwidth: 0
2774   layout:
2775     title: "64B-1t1c-.*vhost.*-pdrdisc"
2776     xaxis:
2777       autorange: True
2778       autotick: False
2779       fixedrange: False
2780       gridcolor: "rgb(238, 238, 238)"
2781       linecolor: "rgb(238, 238, 238)"
2782       linewidth: 1
2783       showgrid: True
2784       showline: True
2785       showticklabels: True
2786       tickcolor: "rgb(238, 238, 238)"
2787       tickmode: "linear"
2788       title: "Indexed Test Cases"
2789       zeroline: False
2790     yaxis:
2791       gridcolor: "rgb(238, 238, 238)'"
2792       hoverformat: ".4s"
2793       linecolor: "rgb(238, 238, 238)"
2794       linewidth: 1
2795       range: []
2796       showgrid: True
2797       showline: True
2798       showticklabels: True
2799       tickcolor: "rgb(238, 238, 238)"
2800       title: "Packets Per Second [pps]"
2801       zeroline: False
2802     boxmode: "group"
2803     boxgroupgap: 0.5
2804     autosize: False
2805     margin:
2806       t: 50
2807       b: 20
2808       l: 50
2809       r: 20
2810     showlegend: True
2811     legend:
2812       orientation: "h"
2813     width: 700
2814     height: 1000
2815
2816 -
2817   type: "plot"
2818   title: "VPP Performance 64B-2t2c-.*vhost.*-pdrdisc"
2819   algorithm: "plot_performance_box"
2820   output-file-type: ".html"
2821   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-pdrdisc"
2822   data:
2823     csit-vpp-perf-1710-all:
2824     - 11
2825     - 12
2826     - 13
2827     - 14
2828     - 15
2829     - 16
2830     - 17
2831     - 18
2832     - 19
2833     - 20
2834   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2835   parameters:
2836   - "throughput"
2837   - "parent"
2838   traces:
2839     hoverinfo: "x+y"
2840     boxpoints: "outliers"
2841     whiskerwidth: 0
2842   layout:
2843     title: "64B-2t2c-.*vhost.*-pdrdisc"
2844     xaxis:
2845       autorange: True
2846       autotick: False
2847       fixedrange: False
2848       gridcolor: "rgb(238, 238, 238)"
2849       linecolor: "rgb(238, 238, 238)"
2850       linewidth: 1
2851       showgrid: True
2852       showline: True
2853       showticklabels: True
2854       tickcolor: "rgb(238, 238, 238)"
2855       tickmode: "linear"
2856       title: "Indexed Test Cases"
2857       zeroline: False
2858     yaxis:
2859       gridcolor: "rgb(238, 238, 238)'"
2860       hoverformat: ".4s"
2861       linecolor: "rgb(238, 238, 238)"
2862       linewidth: 1
2863       range: []
2864       showgrid: True
2865       showline: True
2866       showticklabels: True
2867       tickcolor: "rgb(238, 238, 238)"
2868       title: "Packets Per Second [pps]"
2869       zeroline: False
2870     boxmode: "group"
2871     boxgroupgap: 0.5
2872     autosize: False
2873     margin:
2874       t: 50
2875       b: 20
2876       l: 50
2877       r: 20
2878     showlegend: True
2879     legend:
2880       orientation: "h"
2881     width: 700
2882     height: 1000
2883
2884 # VPP CRYPTO
2885 -
2886   type: "plot"
2887   title: "VPP Performance 64B-1t1c-.*ipsec.*-ndrdisc"
2888   algorithm: "plot_performance_box"
2889   output-file-type: ".html"
2890   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-ndrdisc"
2891   data:
2892     csit-vpp-perf-1710-all:
2893     - 11
2894     - 12
2895     - 13
2896     - 14
2897     - 15
2898     - 16
2899     - 17
2900     - 18
2901     - 19
2902     - 20
2903   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2904   parameters:
2905   - "throughput"
2906   - "parent"
2907   traces:
2908     hoverinfo: "x+y"
2909     boxpoints: "outliers"
2910     whiskerwidth: 0
2911   layout:
2912     title: "64B-1t1c-.*ipsec.*-ndrdisc"
2913     xaxis:
2914       autorange: True
2915       autotick: False
2916       fixedrange: False
2917       gridcolor: "rgb(238, 238, 238)"
2918       linecolor: "rgb(238, 238, 238)"
2919       linewidth: 1
2920       showgrid: True
2921       showline: True
2922       showticklabels: True
2923       tickcolor: "rgb(238, 238, 238)"
2924       tickmode: "linear"
2925       title: "Indexed Test Cases"
2926       zeroline: False
2927     yaxis:
2928       gridcolor: "rgb(238, 238, 238)'"
2929       hoverformat: ".4s"
2930       linecolor: "rgb(238, 238, 238)"
2931       linewidth: 1
2932       range: []
2933       showgrid: True
2934       showline: True
2935       showticklabels: True
2936       tickcolor: "rgb(238, 238, 238)"
2937       title: "Packets Per Second [pps]"
2938       zeroline: False
2939     boxmode: "group"
2940     boxgroupgap: 0.5
2941     autosize: False
2942     margin:
2943       t: 50
2944       b: 20
2945       l: 50
2946       r: 20
2947     showlegend: True
2948     legend:
2949       orientation: "h"
2950     width: 700
2951     height: 1000
2952
2953 -
2954   type: "plot"
2955   title: "VPP Performance 64B-2t2c-.*ipsec.*-ndrdisc"
2956   algorithm: "plot_performance_box"
2957   output-file-type: ".html"
2958   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-ndrdisc"
2959   data:
2960     csit-vpp-perf-1710-all:
2961     - 11
2962     - 12
2963     - 13
2964     - 14
2965     - 15
2966     - 16
2967     - 17
2968     - 18
2969     - 19
2970     - 20
2971   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2972   parameters:
2973   - "throughput"
2974   - "parent"
2975   traces:
2976     hoverinfo: "x+y"
2977     boxpoints: "outliers"
2978     whiskerwidth: 0
2979   layout:
2980     title: "64B-2t2c-.*ipsec.*-ndrdisc"
2981     xaxis:
2982       autorange: True
2983       autotick: False
2984       fixedrange: False
2985       gridcolor: "rgb(238, 238, 238)"
2986       linecolor: "rgb(238, 238, 238)"
2987       linewidth: 1
2988       showgrid: True
2989       showline: True
2990       showticklabels: True
2991       tickcolor: "rgb(238, 238, 238)"
2992       tickmode: "linear"
2993       title: "Indexed Test Cases"
2994       zeroline: False
2995     yaxis:
2996       gridcolor: "rgb(238, 238, 238)'"
2997       hoverformat: ".4s"
2998       linecolor: "rgb(238, 238, 238)"
2999       linewidth: 1
3000       range: []
3001       showgrid: True
3002       showline: True
3003       showticklabels: True
3004       tickcolor: "rgb(238, 238, 238)"
3005       title: "Packets Per Second [pps]"
3006       zeroline: False
3007     boxmode: "group"
3008     boxgroupgap: 0.5
3009     autosize: False
3010     margin:
3011       t: 50
3012       b: 20
3013       l: 50
3014       r: 20
3015     showlegend: True
3016     legend:
3017       orientation: "h"
3018     width: 700
3019     height: 1000
3020
3021 -
3022   type: "plot"
3023   title: "VPP Performance 64B-1t1c-.*ipsec.*-pdrdisc"
3024   algorithm: "plot_performance_box"
3025   output-file-type: ".html"
3026   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-pdrdisc"
3027   data:
3028     csit-vpp-perf-1710-all:
3029     - 11
3030     - 12
3031     - 13
3032     - 14
3033     - 15
3034     - 16
3035     - 17
3036     - 18
3037     - 19
3038     - 20
3039   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
3040   parameters:
3041   - "throughput"
3042   - "parent"
3043   traces:
3044     hoverinfo: "x+y"
3045     boxpoints: "outliers"
3046     whiskerwidth: 0
3047   layout:
3048     title: "64B-1t1c-.*ipsec.*-pdrdisc"
3049     xaxis:
3050       autorange: True
3051       autotick: False
3052       fixedrange: False
3053       gridcolor: "rgb(238, 238, 238)"
3054       linecolor: "rgb(238, 238, 238)"
3055       linewidth: 1
3056       showgrid: True
3057       showline: True
3058       showticklabels: True
3059       tickcolor: "rgb(238, 238, 238)"
3060       tickmode: "linear"
3061       title: "Indexed Test Cases"
3062       zeroline: False
3063     yaxis:
3064       gridcolor: "rgb(238, 238, 238)'"
3065       hoverformat: ".4s"
3066       linecolor: "rgb(238, 238, 238)"
3067       linewidth: 1
3068       range: []
3069       showgrid: True
3070       showline: True
3071       showticklabels: True
3072       tickcolor: "rgb(238, 238, 238)"
3073       title: "Packets Per Second [pps]"
3074       zeroline: False
3075     boxmode: "group"
3076     boxgroupgap: 0.5
3077     autosize: False
3078     margin:
3079       t: 50
3080       b: 20
3081       l: 50
3082       r: 20
3083     showlegend: True
3084     legend:
3085       orientation: "h"
3086     width: 700
3087     height: 1000
3088
3089 -
3090   type: "plot"
3091   title: "VPP Performance 64B-2t2c-.*ipsec.*-pdrdisc"
3092   algorithm: "plot_performance_box"
3093   output-file-type: ".html"
3094   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-pdrdisc"
3095   data:
3096     csit-vpp-perf-1710-all:
3097     - 11
3098     - 12
3099     - 13
3100     - 14
3101     - 15
3102     - 16
3103     - 17
3104     - 18
3105     - 19
3106     - 20
3107   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
3108   parameters:
3109   - "throughput"
3110   - "parent"
3111   traces:
3112     hoverinfo: "x+y"
3113     boxpoints: "outliers"
3114     whiskerwidth: 0
3115   layout:
3116     title: "64B-2t2c-.*ipsec.*-pdrdisc"
3117     xaxis:
3118       autorange: True
3119       autotick: False
3120       fixedrange: False
3121       gridcolor: "rgb(238, 238, 238)"
3122       linecolor: "rgb(238, 238, 238)"
3123       linewidth: 1
3124       showgrid: True
3125       showline: True
3126       showticklabels: True
3127       tickcolor: "rgb(238, 238, 238)"
3128       tickmode: "linear"
3129       title: "Indexed Test Cases"
3130       zeroline: False
3131     yaxis:
3132       gridcolor: "rgb(238, 238, 238)'"
3133       hoverformat: ".4s"
3134       linecolor: "rgb(238, 238, 238)"
3135       linewidth: 1
3136       range: []
3137       showgrid: True
3138       showline: True
3139       showticklabels: True
3140       tickcolor: "rgb(238, 238, 238)"
3141       title: "Packets Per Second [pps]"
3142       zeroline: False
3143     boxmode: "group"
3144     boxgroupgap: 0.5
3145     autosize: False
3146     margin:
3147       t: 50
3148       b: 20
3149       l: 50
3150       r: 20
3151     showlegend: True
3152     legend:
3153       orientation: "h"
3154     width: 700
3155     height: 1000
3156
3157 # DPDK
3158 -
3159   type: "plot"
3160   title: "DPDK Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3161   algorithm: "plot_performance_box"
3162   output-file-type: ".html"
3163   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-ndrdisc"
3164   data:
3165     csit-dpdk-perf-1710-all:
3166     - 2
3167     - 3
3168     - 5
3169     - 6
3170     - 7
3171     - 8
3172     - 9
3173     - 10
3174     - 11
3175     - 13
3176   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3177   parameters:
3178   - "throughput"
3179   - "parent"
3180   traces:
3181     hoverinfo: "x+y"
3182     boxpoints: "outliers"
3183     whiskerwidth: 0
3184   layout:
3185     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3186     xaxis:
3187       autorange: True
3188       autotick: False
3189       fixedrange: False
3190       gridcolor: "rgb(238, 238, 238)"
3191       linecolor: "rgb(238, 238, 238)"
3192       linewidth: 1
3193       showgrid: True
3194       showline: True
3195       showticklabels: True
3196       tickcolor: "rgb(238, 238, 238)"
3197       tickmode: "linear"
3198       title: "Indexed Test Cases"
3199       zeroline: False
3200     yaxis:
3201       gridcolor: "rgb(238, 238, 238)'"
3202       hoverformat: ".4s"
3203       linecolor: "rgb(238, 238, 238)"
3204       linewidth: 1
3205       range: []
3206       showgrid: True
3207       showline: True
3208       showticklabels: True
3209       tickcolor: "rgb(238, 238, 238)"
3210       title: "Packets Per Second [pps]"
3211       zeroline: False
3212     boxmode: "group"
3213     boxgroupgap: 0.5
3214     autosize: False
3215     margin:
3216       t: 50
3217       b: 20
3218       l: 50
3219       r: 20
3220     showlegend: True
3221     legend:
3222       orientation: "h"
3223     width: 700
3224     height: 1000
3225
3226 -
3227   type: "plot"
3228   title: "DPDK Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3229   algorithm: "plot_performance_box"
3230   output-file-type: ".html"
3231   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-ndrdisc"
3232   data:
3233     csit-dpdk-perf-1710-all:
3234     - 2
3235     - 3
3236     - 5
3237     - 6
3238     - 7
3239     - 8
3240     - 9
3241     - 10
3242     - 11
3243     - 13
3244   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3245   parameters:
3246   - "throughput"
3247   - "parent"
3248   traces:
3249     hoverinfo: "x+y"
3250     boxpoints: "outliers"
3251     whiskerwidth: 0
3252   layout:
3253     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3254     xaxis:
3255       autorange: True
3256       autotick: False
3257       fixedrange: False
3258       gridcolor: "rgb(238, 238, 238)"
3259       linecolor: "rgb(238, 238, 238)"
3260       linewidth: 1
3261       showgrid: True
3262       showline: True
3263       showticklabels: True
3264       tickcolor: "rgb(238, 238, 238)"
3265       tickmode: "linear"
3266       title: "Indexed Test Cases"
3267       zeroline: False
3268     yaxis:
3269       gridcolor: "rgb(238, 238, 238)'"
3270       hoverformat: ".4s"
3271       linecolor: "rgb(238, 238, 238)"
3272       linewidth: 1
3273       range: []
3274       showgrid: True
3275       showline: True
3276       showticklabels: True
3277       tickcolor: "rgb(238, 238, 238)"
3278       title: "Packets Per Second [pps]"
3279       zeroline: False
3280     boxmode: "group"
3281     boxgroupgap: 0.5
3282     autosize: False
3283     margin:
3284       t: 50
3285       b: 20
3286       l: 50
3287       r: 20
3288     showlegend: True
3289     legend:
3290       orientation: "h"
3291     width: 700
3292     height: 1000
3293
3294 -
3295   type: "plot"
3296   title: "DPDK Performance 64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
3297   algorithm: "plot_performance_box"
3298   output-file-type: ".html"
3299   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-ndrdisc"
3300   data:
3301     csit-dpdk-perf-1710-all:
3302     - 2
3303     - 3
3304     - 5
3305     - 6
3306     - 7
3307     - 8
3308     - 9
3309     - 10
3310     - 11
3311     - 13
3312   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'IP4FWD'"
3313   parameters:
3314   - "throughput"
3315   - "parent"
3316   traces:
3317     hoverinfo: "x+y"
3318     boxpoints: "outliers"
3319     whiskerwidth: 0
3320   layout:
3321     title: "64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
3322     xaxis:
3323       autorange: True
3324       autotick: False
3325       fixedrange: False
3326       gridcolor: "rgb(238, 238, 238)"
3327       linecolor: "rgb(238, 238, 238)"
3328       linewidth: 1
3329       showgrid: True
3330       showline: True
3331       showticklabels: True
3332       tickcolor: "rgb(238, 238, 238)"
3333       tickmode: "linear"
3334       title: "Indexed Test Cases"
3335       zeroline: False
3336     yaxis:
3337       gridcolor: "rgb(238, 238, 238)'"
3338       hoverformat: ".4s"
3339       linecolor: "rgb(238, 238, 238)"
3340       linewidth: 1
3341       range: [2000000, 12000000]
3342       showgrid: True
3343       showline: True
3344       showticklabels: True
3345       tickcolor: "rgb(238, 238, 238)"
3346       title: "Packets Per Second [pps]"
3347       zeroline: False
3348     boxmode: "group"
3349     boxgroupgap: 0.5
3350     autosize: False
3351     margin:
3352       t: 50
3353       b: 20
3354       l: 50
3355       r: 20
3356     showlegend: True
3357     legend:
3358       orientation: "h"
3359     width: 700
3360     height: 1000
3361
3362 -
3363   type: "plot"
3364   title: "DPDK Performance 64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
3365   algorithm: "plot_performance_box"
3366   output-file-type: ".html"
3367   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-ndrdisc"
3368   data:
3369     csit-dpdk-perf-1710-all:
3370     - 2
3371     - 3
3372     - 5
3373     - 6
3374     - 7
3375     - 8
3376     - 9
3377     - 10
3378     - 11
3379     - 13
3380   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'IP4FWD'"
3381   parameters:
3382   - "throughput"
3383   - "parent"
3384   traces:
3385     hoverinfo: "x+y"
3386     boxpoints: "outliers"
3387     whiskerwidth: 0
3388   layout:
3389     title: "64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
3390     xaxis:
3391       autorange: True
3392       autotick: False
3393       fixedrange: False
3394       gridcolor: "rgb(238, 238, 238)"
3395       linecolor: "rgb(238, 238, 238)"
3396       linewidth: 1
3397       showgrid: True
3398       showline: True
3399       showticklabels: True
3400       tickcolor: "rgb(238, 238, 238)"
3401       tickmode: "linear"
3402       title: "Indexed Test Cases"
3403       zeroline: False
3404     yaxis:
3405       gridcolor: "rgb(238, 238, 238)'"
3406       hoverformat: ".4s"
3407       linecolor: "rgb(238, 238, 238)"
3408       linewidth: 1
3409       range: [2000000, 12000000]
3410       showgrid: True
3411       showline: True
3412       showticklabels: True
3413       tickcolor: "rgb(238, 238, 238)"
3414       title: "Packets Per Second [pps]"
3415       zeroline: False
3416     boxmode: "group"
3417     boxgroupgap: 0.5
3418     autosize: False
3419     margin:
3420       t: 50
3421       b: 20
3422       l: 50
3423       r: 20
3424     showlegend: True
3425     legend:
3426       orientation: "h"
3427     width: 700
3428     height: 1000
3429
3430 -
3431   type: "plot"
3432   title: "DPDK Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3433   algorithm: "plot_performance_box"
3434   output-file-type: ".html"
3435   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-pdrdisc"
3436   data:
3437     csit-dpdk-perf-1710-all:
3438     - 2
3439     - 3
3440     - 5
3441     - 6
3442     - 7
3443     - 8
3444     - 9
3445     - 10
3446     - 11
3447     - 13
3448   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3449   parameters:
3450   - "throughput"
3451   - "parent"
3452   traces:
3453     hoverinfo: "x+y"
3454     boxpoints: "outliers"
3455     whiskerwidth: 0
3456   layout:
3457     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3458     xaxis:
3459       autorange: True
3460       autotick: False
3461       fixedrange: False
3462       gridcolor: "rgb(238, 238, 238)"
3463       linecolor: "rgb(238, 238, 238)"
3464       linewidth: 1
3465       showgrid: True
3466       showline: True
3467       showticklabels: True
3468       tickcolor: "rgb(238, 238, 238)"
3469       tickmode: "linear"
3470       title: "Indexed Test Cases"
3471       zeroline: False
3472     yaxis:
3473       gridcolor: "rgb(238, 238, 238)'"
3474       hoverformat: ".4s"
3475       linecolor: "rgb(238, 238, 238)"
3476       linewidth: 1
3477       range: []
3478       showgrid: True
3479       showline: True
3480       showticklabels: True
3481       tickcolor: "rgb(238, 238, 238)"
3482       title: "Packets Per Second [pps]"
3483       zeroline: False
3484     boxmode: "group"
3485     boxgroupgap: 0.5
3486     autosize: False
3487     margin:
3488       t: 50
3489       b: 20
3490       l: 50
3491       r: 20
3492     showlegend: True
3493     legend:
3494       orientation: "h"
3495     width: 700
3496     height: 1000
3497
3498 -
3499   type: "plot"
3500   title: "DPDK Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3501   algorithm: "plot_performance_box"
3502   output-file-type: ".html"
3503   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-pdrdisc"
3504   data:
3505     csit-dpdk-perf-1710-all:
3506     - 2
3507     - 3
3508     - 5
3509     - 6
3510     - 7
3511     - 8
3512     - 9
3513     - 10
3514     - 11
3515     - 13
3516   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3517   parameters:
3518   - "throughput"
3519   - "parent"
3520   traces:
3521     hoverinfo: "x+y"
3522     boxpoints: "outliers"
3523     whiskerwidth: 0
3524   layout:
3525     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3526     xaxis:
3527       autorange: True
3528       autotick: False
3529       fixedrange: False
3530       gridcolor: "rgb(238, 238, 238)"
3531       linecolor: "rgb(238, 238, 238)"
3532       linewidth: 1
3533       showgrid: True
3534       showline: True
3535       showticklabels: True
3536       tickcolor: "rgb(238, 238, 238)"
3537       tickmode: "linear"
3538       title: "Indexed Test Cases"
3539       zeroline: False
3540     yaxis:
3541       gridcolor: "rgb(238, 238, 238)'"
3542       hoverformat: ".4s"
3543       linecolor: "rgb(238, 238, 238)"
3544       linewidth: 1
3545       range: []
3546       showgrid: True
3547       showline: True
3548       showticklabels: True
3549       tickcolor: "rgb(238, 238, 238)"
3550       title: "Packets Per Second [pps]"
3551       zeroline: False
3552     boxmode: "group"
3553     boxgroupgap: 0.5
3554     autosize: False
3555     margin:
3556       t: 50
3557       b: 20
3558       l: 50
3559       r: 20
3560     showlegend: True
3561     legend:
3562       orientation: "h"
3563     width: 700
3564     height: 1000
3565
3566 -
3567   type: "plot"
3568   title: "DPDK Performance 64B-1t1c-ethip4-ip4base-l3fwd-pdrdisc"
3569   algorithm: "plot_performance_box"
3570   output-file-type: ".html"
3571   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-pdrdisc"
3572   data:
3573     csit-dpdk-perf-1710-all:
3574     - 2
3575     - 3
3576     - 5
3577     - 6
3578     - 7
3579     - 8
3580     - 9
3581     - 10
3582     - 11
3583     - 13
3584   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP4FWD'"
3585   parameters:
3586   - "throughput"
3587   - "parent"
3588   traces:
3589     hoverinfo: "x+y"
3590     boxpoints: "outliers"
3591     whiskerwidth: 0
3592   layout:
3593     title: "64B-1t1c-ethip4-ip4base-l3fwd-pdrdisc"
3594     xaxis:
3595       autorange: True
3596       autotick: False
3597       fixedrange: False
3598       gridcolor: "rgb(238, 238, 238)"
3599       linecolor: "rgb(238, 238, 238)"
3600       linewidth: 1
3601       showgrid: True
3602       showline: True
3603       showticklabels: True
3604       tickcolor: "rgb(238, 238, 238)"
3605       tickmode: "linear"
3606       title: "Indexed Test Cases"
3607       zeroline: False
3608     yaxis:
3609       gridcolor: "rgb(238, 238, 238)'"
3610       hoverformat: ".4s"
3611       linecolor: "rgb(238, 238, 238)"
3612       linewidth: 1
3613       range: [20000000, 30000000]
3614       showgrid: True
3615       showline: True
3616       showticklabels: True
3617       tickcolor: "rgb(238, 238, 238)"
3618       title: "Packets Per Second [pps]"
3619       zeroline: False
3620     boxmode: "group"
3621     boxgroupgap: 0.5
3622     autosize: False
3623     margin:
3624       t: 50
3625       b: 20
3626       l: 50
3627       r: 20
3628     showlegend: True
3629     legend:
3630       orientation: "h"
3631     width: 700
3632     height: 1000
3633
3634 -
3635   type: "plot"
3636   title: "DPDK Performance 64B-2t2c-ethip4-ip4base-l3fwd-pdrdisc"
3637   algorithm: "plot_performance_box"
3638   output-file-type: ".html"
3639   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-pdrdisc"
3640   data:
3641     csit-dpdk-perf-1710-all:
3642     - 2
3643     - 3
3644     - 5
3645     - 6
3646     - 7
3647     - 8
3648     - 9
3649     - 10
3650     - 11
3651     - 13
3652   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP4FWD'"
3653   parameters:
3654   - "throughput"
3655   - "parent"
3656   traces:
3657     hoverinfo: "x+y"
3658     boxpoints: "outliers"
3659     whiskerwidth: 0
3660   layout:
3661     title: "64B-2t2c-ethip4-ip4base-l3fwd-pdrdisc"
3662     xaxis:
3663       autorange: True
3664       autotick: False
3665       fixedrange: False
3666       gridcolor: "rgb(238, 238, 238)"
3667       linecolor: "rgb(238, 238, 238)"
3668       linewidth: 1
3669       showgrid: True
3670       showline: True
3671       showticklabels: True
3672       tickcolor: "rgb(238, 238, 238)"
3673       tickmode: "linear"
3674       title: "Indexed Test Cases"
3675       zeroline: False
3676     yaxis:
3677       gridcolor: "rgb(238, 238, 238)'"
3678       hoverformat: ".4s"
3679       linecolor: "rgb(238, 238, 238)"
3680       linewidth: 1
3681       range: [20000000, 30000000]
3682       showgrid: True
3683       showline: True
3684       showticklabels: True
3685       tickcolor: "rgb(238, 238, 238)"
3686       title: "Packets Per Second [pps]"
3687       zeroline: False
3688     boxmode: "group"
3689     boxgroupgap: 0.5
3690     autosize: False
3691     margin:
3692       t: 50
3693       b: 20
3694       l: 50
3695       r: 20
3696     showlegend: True
3697     legend:
3698       orientation: "h"
3699     width: 700
3700     height: 1000
3701
3702 # Plot latency
3703
3704 # VPP L2 sel1
3705 -
3706   type: "plot"
3707   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3708   algorithm: "plot_latency_box"
3709   output-file-type: ".html"
3710   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-ndrdisc-lat50"
3711   data:
3712     csit-vpp-perf-1710-all:
3713     - 11
3714     - 12
3715     - 13
3716     - 14
3717     - 15
3718     - 16
3719     - 17
3720     - 18
3721     - 19
3722     - 20
3723   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3724   parameters:
3725   - "latency"
3726   - "parent"
3727   traces:
3728     boxmean: False
3729   layout:
3730     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3731     xaxis:
3732       autorange: True
3733       autotick: False
3734       fixedrange: False
3735       gridcolor: "rgb(238, 238, 238)"
3736       linecolor: "rgb(238, 238, 238)"
3737       linewidth: 1
3738       showgrid: True
3739       showline: True
3740       showticklabels: True
3741       tickcolor: "rgb(238, 238, 238)"
3742       tickmode: "linear"
3743       title: "Indexed Test Cases"
3744       zeroline: False
3745     yaxis:
3746       gridcolor: "rgb(238, 238, 238)'"
3747       hoverformat: ""
3748       linecolor: "rgb(238, 238, 238)"
3749       linewidth: 1
3750       range: []
3751       showgrid: True
3752       showline: True
3753       showticklabels: True
3754       tickcolor: "rgb(238, 238, 238)"
3755       title: "Latency min/avg/max [uSec]"
3756       zeroline: False
3757     boxmode: "group"
3758     boxgroupgap: 0.5
3759     autosize: False
3760     margin:
3761       t: 50
3762       b: 20
3763       l: 50
3764       r: 20
3765     showlegend: True
3766     legend:
3767       orientation: "h"
3768     width: 700
3769     height: 1000
3770
3771 -
3772   type: "plot"
3773   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3774   algorithm: "plot_latency_box"
3775   output-file-type: ".html"
3776   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-ndrdisc-lat50"
3777   data:
3778     csit-vpp-perf-1710-all:
3779     - 11
3780     - 12
3781     - 13
3782     - 14
3783     - 15
3784     - 16
3785     - 17
3786     - 18
3787     - 19
3788     - 20
3789   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3790   parameters:
3791   - "latency"
3792   - "parent"
3793   traces:
3794     boxmean: False
3795   layout:
3796     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3797     xaxis:
3798       autorange: True
3799       autotick: False
3800       fixedrange: False
3801       gridcolor: "rgb(238, 238, 238)"
3802       linecolor: "rgb(238, 238, 238)"
3803       linewidth: 1
3804       showgrid: True
3805       showline: True
3806       showticklabels: True
3807       tickcolor: "rgb(238, 238, 238)"
3808       tickmode: "linear"
3809       title: "Indexed Test Cases"
3810       zeroline: False
3811     yaxis:
3812       gridcolor: "rgb(238, 238, 238)'"
3813       hoverformat: ""
3814       linecolor: "rgb(238, 238, 238)"
3815       linewidth: 1
3816       range: []
3817       showgrid: True
3818       showline: True
3819       showticklabels: True
3820       tickcolor: "rgb(238, 238, 238)"
3821       title: "Latency min/avg/max [uSec]"
3822       zeroline: False
3823     boxmode: "group"
3824     boxgroupgap: 0.5
3825     autosize: False
3826     margin:
3827       t: 50
3828       b: 20
3829       l: 50
3830       r: 20
3831     showlegend: True
3832     legend:
3833       orientation: "h"
3834     width: 700
3835     height: 1000
3836
3837 # VPP L2 sel2
3838 -
3839   type: "plot"
3840   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3841   algorithm: "plot_latency_box"
3842   output-file-type: ".html"
3843   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-ndrdisc-lat50"
3844   data:
3845     csit-vpp-perf-1710-all:
3846     - 11
3847     - 12
3848     - 13
3849     - 14
3850     - 15
3851     - 16
3852     - 17
3853     - 18
3854     - 19
3855     - 20
3856   filter: "'64B' and ('FEATURE' and 'ACL50' and '10k_FLOWS') and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3857   parameters:
3858   - "latency"
3859   - "parent"
3860   traces:
3861     boxmean: False
3862   layout:
3863     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3864     xaxis:
3865       autorange: True
3866       autotick: False
3867       fixedrange: False
3868       gridcolor: "rgb(238, 238, 238)"
3869       linecolor: "rgb(238, 238, 238)"
3870       linewidth: 1
3871       showgrid: True
3872       showline: True
3873       showticklabels: True
3874       tickcolor: "rgb(238, 238, 238)"
3875       tickmode: "linear"
3876       title: "Indexed Test Cases"
3877       zeroline: False
3878     yaxis:
3879       gridcolor: "rgb(238, 238, 238)'"
3880       hoverformat: ""
3881       linecolor: "rgb(238, 238, 238)"
3882       linewidth: 1
3883       range: []
3884       showgrid: True
3885       showline: True
3886       showticklabels: True
3887       tickcolor: "rgb(238, 238, 238)"
3888       title: "Latency min/avg/max [uSec]"
3889       zeroline: False
3890     boxmode: "group"
3891     boxgroupgap: 0.5
3892     autosize: False
3893     margin:
3894       t: 50
3895       b: 20
3896       l: 50
3897       r: 20
3898     showlegend: True
3899     legend:
3900       orientation: "h"
3901     width: 700
3902     height: 1000
3903
3904 -
3905   type: "plot"
3906   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3907   algorithm: "plot_latency_box"
3908   output-file-type: ".html"
3909   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-ndrdisc-lat50"
3910   data:
3911     csit-vpp-perf-1710-all:
3912     - 11
3913     - 12
3914     - 13
3915     - 14
3916     - 15
3917     - 16
3918     - 17
3919     - 18
3920     - 19
3921     - 20
3922   filter: "'64B' and ('FEATURE' and 'ACL50' and '10k_FLOWS') and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3923   parameters:
3924   - "latency"
3925   - "parent"
3926   traces:
3927     boxmean: False
3928   layout:
3929     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3930     xaxis:
3931       autorange: True
3932       autotick: False
3933       fixedrange: False
3934       gridcolor: "rgb(238, 238, 238)"
3935       linecolor: "rgb(238, 238, 238)"
3936       linewidth: 1
3937       showgrid: True
3938       showline: True
3939       showticklabels: True
3940       tickcolor: "rgb(238, 238, 238)"
3941       tickmode: "linear"
3942       title: "Indexed Test Cases"
3943       zeroline: False
3944     yaxis:
3945       gridcolor: "rgb(238, 238, 238)'"
3946       hoverformat: ""
3947       linecolor: "rgb(238, 238, 238)"
3948       linewidth: 1
3949       range: []
3950       showgrid: True
3951       showline: True
3952       showticklabels: True
3953       tickcolor: "rgb(238, 238, 238)"
3954       title: "Latency min/avg/max [uSec]"
3955       zeroline: False
3956     boxmode: "group"
3957     boxgroupgap: 0.5
3958     autosize: False
3959     margin:
3960       t: 50
3961       b: 20
3962       l: 50
3963       r: 20
3964     showlegend: True
3965     legend:
3966       orientation: "h"
3967     width: 700
3968     height: 1000
3969
3970 # VPP IP4
3971 -
3972   type: "plot"
3973   title: "VPP Latency 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
3974   algorithm: "plot_latency_box"
3975   output-file-type: ".html"
3976   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-ndrdisc-lat50"
3977   data:
3978     csit-vpp-perf-1710-all:
3979     - 11
3980     - 12
3981     - 13
3982     - 14
3983     - 15
3984     - 16
3985     - 17
3986     - 18
3987     - 19
3988     - 20
3989   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
3990   parameters:
3991   - "latency"
3992   - "parent"
3993   traces:
3994     boxmean: False
3995   layout:
3996     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
3997     xaxis:
3998       autorange: True
3999       autotick: False
4000       fixedrange: False
4001       gridcolor: "rgb(238, 238, 238)"
4002       linecolor: "rgb(238, 238, 238)"
4003       linewidth: 1
4004       showgrid: True
4005       showline: True
4006       showticklabels: True
4007       tickcolor: "rgb(238, 238, 238)"
4008       tickmode: "linear"
4009       title: "Indexed Test Cases"
4010       zeroline: False
4011     yaxis:
4012       gridcolor: "rgb(238, 238, 238)'"
4013       hoverformat: ""
4014       linecolor: "rgb(238, 238, 238)"
4015       linewidth: 1
4016       range: []
4017       showgrid: True
4018       showline: True
4019       showticklabels: True
4020       tickcolor: "rgb(238, 238, 238)"
4021       title: "Latency min/avg/max [uSec]"
4022       zeroline: False
4023     boxmode: "group"
4024     boxgroupgap: 0.5
4025     autosize: False
4026     margin:
4027       t: 50
4028       b: 20
4029       l: 50
4030       r: 20
4031     showlegend: True
4032     legend:
4033       orientation: "h"
4034     width: 700
4035     height: 1000
4036
4037 -
4038   type: "plot"
4039   title: "VPP Latency 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
4040   algorithm: "plot_latency_box"
4041   output-file-type: ".html"
4042   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-ndrdisc-lat50"
4043   data:
4044     csit-vpp-perf-1710-all:
4045     - 11
4046     - 12
4047     - 13
4048     - 14
4049     - 15
4050     - 16
4051     - 17
4052     - 18
4053     - 19
4054     - 20
4055   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
4056   parameters:
4057   - "latency"
4058   - "parent"
4059   traces:
4060     boxmean: False
4061   layout:
4062     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
4063     xaxis:
4064       autorange: True
4065       autotick: False
4066       fixedrange: False
4067       gridcolor: "rgb(238, 238, 238)"
4068       linecolor: "rgb(238, 238, 238)"
4069       linewidth: 1
4070       showgrid: True
4071       showline: True
4072       showticklabels: True
4073       tickcolor: "rgb(238, 238, 238)"
4074       tickmode: "linear"
4075       title: "Indexed Test Cases"
4076       zeroline: False
4077     yaxis:
4078       gridcolor: "rgb(238, 238, 238)'"
4079       hoverformat: ""
4080       linecolor: "rgb(238, 238, 238)"
4081       linewidth: 1
4082       range: []
4083       showgrid: True
4084       showline: True
4085       showticklabels: True
4086       tickcolor: "rgb(238, 238, 238)"
4087       title: "Latency min/avg/max [uSec]"
4088       zeroline: False
4089     boxmode: "group"
4090     boxgroupgap: 0.5
4091     autosize: False
4092     margin:
4093       t: 50
4094       b: 20
4095       l: 50
4096       r: 20
4097     showlegend: True
4098     legend:
4099       orientation: "h"
4100     width: 700
4101     height: 1000
4102
4103 # VPP IP6
4104 -
4105   type: "plot"
4106   title: "VPP Latency 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
4107   algorithm: "plot_latency_box"
4108   output-file-type: ".html"
4109   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-ndrdisc-lat50"
4110   data:
4111     csit-vpp-perf-1710-all:
4112     - 11
4113     - 12
4114     - 13
4115     - 14
4116     - 15
4117     - 16
4118     - 17
4119     - 18
4120     - 19
4121     - 20
4122   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
4123   parameters:
4124   - "latency"
4125   - "parent"
4126   traces:
4127     boxmean: False
4128   layout:
4129     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
4130     xaxis:
4131       autorange: True
4132       autotick: False
4133       fixedrange: False
4134       gridcolor: "rgb(238, 238, 238)"
4135       linecolor: "rgb(238, 238, 238)"
4136       linewidth: 1
4137       showgrid: True
4138       showline: True
4139       showticklabels: True
4140       tickcolor: "rgb(238, 238, 238)"
4141       tickmode: "linear"
4142       title: "Indexed Test Cases"
4143       zeroline: False
4144     yaxis:
4145       gridcolor: "rgb(238, 238, 238)'"
4146       hoverformat: ""
4147       linecolor: "rgb(238, 238, 238)"
4148       linewidth: 1
4149       range: []
4150       showgrid: True
4151       showline: True
4152       showticklabels: True
4153       tickcolor: "rgb(238, 238, 238)"
4154       title: "Latency min/avg/max [uSec]"
4155       zeroline: False
4156     boxmode: "group"
4157     boxgroupgap: 0.5
4158     autosize: False
4159     margin:
4160       t: 50
4161       b: 20
4162       l: 50
4163       r: 20
4164     showlegend: True
4165     legend:
4166       orientation: "h"
4167     width: 700
4168     height: 1000
4169
4170 -
4171   type: "plot"
4172   title: "VPP Latency 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
4173   algorithm: "plot_latency_box"
4174   output-file-type: ".html"
4175   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-ndrdisc-lat50"
4176   data:
4177     csit-vpp-perf-1710-all:
4178     - 11
4179     - 12
4180     - 13
4181     - 14
4182     - 15
4183     - 16
4184     - 17
4185     - 18
4186     - 19
4187     - 20
4188   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
4189   parameters:
4190   - "latency"
4191   - "parent"
4192   traces:
4193     boxmean: False
4194   layout:
4195     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
4196     xaxis:
4197       autorange: True
4198       autotick: False
4199       fixedrange: False
4200       gridcolor: "rgb(238, 238, 238)"
4201       linecolor: "rgb(238, 238, 238)"
4202       linewidth: 1
4203       showgrid: True
4204       showline: True
4205       showticklabels: True
4206       tickcolor: "rgb(238, 238, 238)"
4207       tickmode: "linear"
4208       title: "Indexed Test Cases"
4209       zeroline: False
4210     yaxis:
4211       gridcolor: "rgb(238, 238, 238)'"
4212       hoverformat: ""
4213       linecolor: "rgb(238, 238, 238)"
4214       linewidth: 1
4215       range: []
4216       showgrid: True
4217       showline: True
4218       showticklabels: True
4219       tickcolor: "rgb(238, 238, 238)"
4220       title: "Latency min/avg/max [uSec]"
4221       zeroline: False
4222     boxmode: "group"
4223     boxgroupgap: 0.5
4224     autosize: False
4225     margin:
4226       t: 50
4227       b: 20
4228       l: 50
4229       r: 20
4230     showlegend: True
4231     legend:
4232       orientation: "h"
4233     width: 700
4234     height: 1000
4235
4236 # VPP IP4_overlay
4237 -
4238   type: "plot"
4239   title: "VPP Latency 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
4240   algorithm: "plot_latency_box"
4241   output-file-type: ".html"
4242   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ndrdisc-lat50"
4243   data:
4244     csit-vpp-perf-1710-all:
4245     - 11
4246     - 12
4247     - 13
4248     - 14
4249     - 15
4250     - 16
4251     - 17
4252     - 18
4253     - 19
4254     - 20
4255   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
4256   parameters:
4257   - "latency"
4258   - "parent"
4259   traces:
4260     boxmean: False
4261   layout:
4262     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
4263     xaxis:
4264       autorange: True
4265       autotick: False
4266       fixedrange: False
4267       gridcolor: "rgb(238, 238, 238)"
4268       linecolor: "rgb(238, 238, 238)"
4269       linewidth: 1
4270       showgrid: True
4271       showline: True
4272       showticklabels: True
4273       tickcolor: "rgb(238, 238, 238)"
4274       tickmode: "linear"
4275       title: "Indexed Test Cases"
4276       zeroline: False
4277     yaxis:
4278       gridcolor: "rgb(238, 238, 238)'"
4279       hoverformat: ""
4280       linecolor: "rgb(238, 238, 238)"
4281       linewidth: 1
4282       range: []
4283       showgrid: True
4284       showline: True
4285       showticklabels: True
4286       tickcolor: "rgb(238, 238, 238)"
4287       title: "Latency min/avg/max [uSec]"
4288       zeroline: False
4289     boxmode: "group"
4290     boxgroupgap: 0.5
4291     autosize: False
4292     margin:
4293       t: 50
4294       b: 20
4295       l: 50
4296       r: 20
4297     showlegend: True
4298     legend:
4299       orientation: "h"
4300     width: 700
4301     height: 1000
4302
4303 -
4304   type: "plot"
4305   title: "VPP Latency 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
4306   algorithm: "plot_latency_box"
4307   output-file-type: ".html"
4308   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ndrdisc-lat50"
4309   data:
4310     csit-vpp-perf-1710-all:
4311     - 11
4312     - 12
4313     - 13
4314     - 14
4315     - 15
4316     - 16
4317     - 17
4318     - 18
4319     - 19
4320     - 20
4321   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
4322   parameters:
4323   - "latency"
4324   - "parent"
4325   traces:
4326     boxmean: False
4327   layout:
4328     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
4329     xaxis:
4330       autorange: True
4331       autotick: False
4332       fixedrange: False
4333       gridcolor: "rgb(238, 238, 238)"
4334       linecolor: "rgb(238, 238, 238)"
4335       linewidth: 1
4336       showgrid: True
4337       showline: True
4338       showticklabels: True
4339       tickcolor: "rgb(238, 238, 238)"
4340       tickmode: "linear"
4341       title: "Indexed Test Cases"
4342       zeroline: False
4343     yaxis:
4344       gridcolor: "rgb(238, 238, 238)'"
4345       hoverformat: ""
4346       linecolor: "rgb(238, 238, 238)"
4347       linewidth: 1
4348       range: []
4349       showgrid: True
4350       showline: True
4351       showticklabels: True
4352       tickcolor: "rgb(238, 238, 238)"
4353       title: "Latency min/avg/max [uSec]"
4354       zeroline: False
4355     boxmode: "group"
4356     boxgroupgap: 0.5
4357     autosize: False
4358     margin:
4359       t: 50
4360       b: 20
4361       l: 50
4362       r: 20
4363     showlegend: True
4364     legend:
4365       orientation: "h"
4366     width: 700
4367     height: 1000
4368
4369 # VPP IP6_overlay
4370 -
4371   type: "plot"
4372   title: "VPP Latency 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
4373   algorithm: "plot_latency_box"
4374   output-file-type: ".html"
4375   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ndrdisc-lat50"
4376   data:
4377     csit-vpp-perf-1710-all:
4378     - 11
4379     - 12
4380     - 13
4381     - 14
4382     - 15
4383     - 16
4384     - 17
4385     - 18
4386     - 19
4387     - 20
4388   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
4389   parameters:
4390   - "latency"
4391   - "parent"
4392   traces:
4393     boxmean: False
4394   layout:
4395     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
4396     xaxis:
4397       autorange: True
4398       autotick: False
4399       fixedrange: False
4400       gridcolor: "rgb(238, 238, 238)"
4401       linecolor: "rgb(238, 238, 238)"
4402       linewidth: 1
4403       showgrid: True
4404       showline: True
4405       showticklabels: True
4406       tickcolor: "rgb(238, 238, 238)"
4407       tickmode: "linear"
4408       title: "Indexed Test Cases"
4409       zeroline: False
4410     yaxis:
4411       gridcolor: "rgb(238, 238, 238)'"
4412       hoverformat: ""
4413       linecolor: "rgb(238, 238, 238)"
4414       linewidth: 1
4415       range: []
4416       showgrid: True
4417       showline: True
4418       showticklabels: True
4419       tickcolor: "rgb(238, 238, 238)"
4420       title: "Latency min/avg/max [uSec]"
4421       zeroline: False
4422     boxmode: "group"
4423     boxgroupgap: 0.5
4424     autosize: False
4425     margin:
4426       t: 50
4427       b: 20
4428       l: 50
4429       r: 20
4430     showlegend: True
4431     legend:
4432       orientation: "h"
4433     width: 700
4434     height: 1000
4435
4436 -
4437   type: "plot"
4438   title: "VPP Latency 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
4439   algorithm: "plot_latency_box"
4440   output-file-type: ".html"
4441   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ndrdisc-lat50"
4442   data:
4443     csit-vpp-perf-1710-all:
4444     - 11
4445     - 12
4446     - 13
4447     - 14
4448     - 15
4449     - 16
4450     - 17
4451     - 18
4452     - 19
4453     - 20
4454   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
4455   parameters:
4456   - "latency"
4457   - "parent"
4458   traces:
4459     boxmean: False
4460   layout:
4461     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
4462     xaxis:
4463       autorange: True
4464       autotick: False
4465       fixedrange: False
4466       gridcolor: "rgb(238, 238, 238)"
4467       linecolor: "rgb(238, 238, 238)"
4468       linewidth: 1
4469       showgrid: True
4470       showline: True
4471       showticklabels: True
4472       tickcolor: "rgb(238, 238, 238)"
4473       tickmode: "linear"
4474       title: "Indexed Test Cases"
4475       zeroline: False
4476     yaxis:
4477       gridcolor: "rgb(238, 238, 238)'"
4478       hoverformat: ""
4479       linecolor: "rgb(238, 238, 238)"
4480       linewidth: 1
4481       range: []
4482       showgrid: True
4483       showline: True
4484       showticklabels: True
4485       tickcolor: "rgb(238, 238, 238)"
4486       title: "Latency min/avg/max [uSec]"
4487       zeroline: False
4488     boxmode: "group"
4489     boxgroupgap: 0.5
4490     autosize: False
4491     margin:
4492       t: 50
4493       b: 20
4494       l: 50
4495       r: 20
4496     showlegend: True
4497     legend:
4498       orientation: "h"
4499     width: 700
4500     height: 1000
4501
4502 # VPP VM VHOST
4503 -
4504   type: "plot"
4505   title: "VPP Latency 64B-1t1c-.*vhost.*-ndrdisc"
4506   algorithm: "plot_latency_box"
4507   output-file-type: ".html"
4508   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-ndrdisc-lat50"
4509   data:
4510     csit-vpp-perf-1710-all:
4511     - 11
4512     - 12
4513     - 13
4514     - 14
4515     - 15
4516     - 16
4517     - 17
4518     - 18
4519     - 19
4520     - 20
4521   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
4522   parameters:
4523   - "latency"
4524   - "parent"
4525   traces:
4526     boxmean: False
4527   layout:
4528     title: "64B-1t1c-.*vhost.*-ndrdisc"
4529     xaxis:
4530       autorange: True
4531       autotick: False
4532       fixedrange: False
4533       gridcolor: "rgb(238, 238, 238)"
4534       linecolor: "rgb(238, 238, 238)"
4535       linewidth: 1
4536       showgrid: True
4537       showline: True
4538       showticklabels: True
4539       tickcolor: "rgb(238, 238, 238)"
4540       tickmode: "linear"
4541       title: "Indexed Test Cases"
4542       zeroline: False
4543     yaxis:
4544       gridcolor: "rgb(238, 238, 238)'"
4545       hoverformat: ""
4546       linecolor: "rgb(238, 238, 238)"
4547       linewidth: 1
4548       range: []
4549       showgrid: True
4550       showline: True
4551       showticklabels: True
4552       tickcolor: "rgb(238, 238, 238)"
4553       title: "Latency min/avg/max [uSec]"
4554       zeroline: False
4555     boxmode: "group"
4556     boxgroupgap: 0.5
4557     autosize: False
4558     margin:
4559       t: 50
4560       b: 20
4561       l: 50
4562       r: 20
4563     showlegend: True
4564     legend:
4565       orientation: "h"
4566     width: 700
4567     height: 1000
4568
4569 -
4570   type: "plot"
4571   title: "VPP Latency 64B-2t2c-.*vhost.*-ndrdisc"
4572   algorithm: "plot_latency_box"
4573   output-file-type: ".html"
4574   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-ndrdisc-lat50"
4575   data:
4576     csit-vpp-perf-1710-all:
4577     - 11
4578     - 12
4579     - 13
4580     - 14
4581     - 15
4582     - 16
4583     - 17
4584     - 18
4585     - 19
4586     - 20
4587   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
4588   parameters:
4589   - "latency"
4590   - "parent"
4591   traces:
4592     boxmean: False
4593   layout:
4594     title: "64B-2t2c-.*vhost.*-ndrdisc"
4595     xaxis:
4596       autorange: True
4597       autotick: False
4598       fixedrange: False
4599       gridcolor: "rgb(238, 238, 238)"
4600       linecolor: "rgb(238, 238, 238)"
4601       linewidth: 1
4602       showgrid: True
4603       showline: True
4604       showticklabels: True
4605       tickcolor: "rgb(238, 238, 238)"
4606       tickmode: "linear"
4607       title: "Indexed Test Cases"
4608       zeroline: False
4609     yaxis:
4610       gridcolor: "rgb(238, 238, 238)'"
4611       hoverformat: ""
4612       linecolor: "rgb(238, 238, 238)"
4613       linewidth: 1
4614       range: []
4615       showgrid: True
4616       showline: True
4617       showticklabels: True
4618       tickcolor: "rgb(238, 238, 238)"
4619       title: "Latency min/avg/max [uSec]"
4620       zeroline: False
4621     boxmode: "group"
4622     boxgroupgap: 0.5
4623     autosize: False
4624     margin:
4625       t: 50
4626       b: 20
4627       l: 50
4628       r: 20
4629     showlegend: True
4630     legend:
4631       orientation: "h"
4632     width: 700
4633     height: 1000
4634
4635 # VPP VM VHOST selection
4636 -
4637   type: "plot"
4638   title: "VPP Latency 64B-1t1c-.*vhost.*-ndrdisc"
4639   algorithm: "plot_latency_box"
4640   output-file-type: ".html"
4641   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-ndrdisc-lat50"
4642   data:
4643     csit-vpp-perf-1710-all:
4644     - 11
4645     - 12
4646     - 13
4647     - 14
4648     - 15
4649     - 16
4650     - 17
4651     - 18
4652     - 19
4653     - 20
4654   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
4655   parameters:
4656   - "latency"
4657   - "parent"
4658   traces:
4659     boxmean: False
4660   layout:
4661     title: "64B-1t1c-.*vhost.*-ndrdisc"
4662     xaxis:
4663       autorange: True
4664       autotick: False
4665       fixedrange: False
4666       gridcolor: "rgb(238, 238, 238)"
4667       linecolor: "rgb(238, 238, 238)"
4668       linewidth: 1
4669       showgrid: True
4670       showline: True
4671       showticklabels: True
4672       tickcolor: "rgb(238, 238, 238)"
4673       tickmode: "linear"
4674       title: "Indexed Test Cases"
4675       zeroline: False
4676     yaxis:
4677       gridcolor: "rgb(238, 238, 238)'"
4678       hoverformat: ""
4679       linecolor: "rgb(238, 238, 238)"
4680       linewidth: 1
4681       range: []
4682       showgrid: True
4683       showline: True
4684       showticklabels: True
4685       tickcolor: "rgb(238, 238, 238)"
4686       title: "Latency min/avg/max [uSec]"
4687       zeroline: False
4688     boxmode: "group"
4689     boxgroupgap: 0.5
4690     autosize: False
4691     margin:
4692       t: 50
4693       b: 20
4694       l: 50
4695       r: 20
4696     showlegend: True
4697     legend:
4698       orientation: "h"
4699     width: 700
4700     height: 1000
4701
4702 -
4703   type: "plot"
4704   title: "VPP Latency 64B-2t2c-.*vhost.*-ndrdisc"
4705   algorithm: "plot_latency_box"
4706   output-file-type: ".html"
4707   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-ndrdisc-lat50"
4708   data:
4709     csit-vpp-perf-1710-all:
4710     - 11
4711     - 12
4712     - 13
4713     - 14
4714     - 15
4715     - 16
4716     - 17
4717     - 18
4718     - 19
4719     - 20
4720   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
4721   parameters:
4722   - "latency"
4723   - "parent"
4724   traces:
4725     boxmean: False
4726   layout:
4727     title: "64B-2t2c-.*vhost.*-ndrdisc"
4728     xaxis:
4729       autorange: True
4730       autotick: False
4731       fixedrange: False
4732       gridcolor: "rgb(238, 238, 238)"
4733       linecolor: "rgb(238, 238, 238)"
4734       linewidth: 1
4735       showgrid: True
4736       showline: True
4737       showticklabels: True
4738       tickcolor: "rgb(238, 238, 238)"
4739       tickmode: "linear"
4740       title: "Indexed Test Cases"
4741       zeroline: False
4742     yaxis:
4743       gridcolor: "rgb(238, 238, 238)'"
4744       hoverformat: ""
4745       linecolor: "rgb(238, 238, 238)"
4746       linewidth: 1
4747       range: []
4748       showgrid: True
4749       showline: True
4750       showticklabels: True
4751       tickcolor: "rgb(238, 238, 238)"
4752       title: "Latency min/avg/max [uSec]"
4753       zeroline: False
4754     boxmode: "group"
4755     boxgroupgap: 0.5
4756     autosize: False
4757     margin:
4758       t: 50
4759       b: 20
4760       l: 50
4761       r: 20
4762     showlegend: True
4763     legend:
4764       orientation: "h"
4765     width: 700
4766     height: 1000
4767
4768 # VPP CRYPTO
4769 -
4770   type: "plot"
4771   title: "VPP Latency 64B-1t1c-.*ipsec.*-ndrdisc"
4772   algorithm: "plot_latency_box"
4773   output-file-type: ".html"
4774   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-ndrdisc-lat50"
4775   data:
4776     csit-vpp-perf-1710-all:
4777     - 11
4778     - 12
4779     - 13
4780     - 14
4781     - 15
4782     - 16
4783     - 17
4784     - 18
4785     - 19
4786     - 20
4787   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
4788   parameters:
4789   - "latency"
4790   - "parent"
4791   traces:
4792     boxmean: False
4793   layout:
4794     title: "64B-1t1c-.*ipsec.*-ndrdisc"
4795     xaxis:
4796       autorange: True
4797       autotick: False
4798       fixedrange: False
4799       gridcolor: "rgb(238, 238, 238)"
4800       linecolor: "rgb(238, 238, 238)"
4801       linewidth: 1
4802       showgrid: True
4803       showline: True
4804       showticklabels: True
4805       tickcolor: "rgb(238, 238, 238)"
4806       tickmode: "linear"
4807       title: "Indexed Test Cases"
4808       zeroline: False
4809     yaxis:
4810       gridcolor: "rgb(238, 238, 238)'"
4811       hoverformat: ""
4812       linecolor: "rgb(238, 238, 238)"
4813       linewidth: 1
4814       range: []
4815       showgrid: True
4816       showline: True
4817       showticklabels: True
4818       tickcolor: "rgb(238, 238, 238)"
4819       title: "Latency min/avg/max [uSec]"
4820       zeroline: False
4821     boxmode: "group"
4822     boxgroupgap: 0.5
4823     autosize: False
4824     margin:
4825       t: 50
4826       b: 20
4827       l: 50
4828       r: 20
4829     showlegend: True
4830     legend:
4831       orientation: "h"
4832     width: 700
4833     height: 1000
4834
4835 -
4836   type: "plot"
4837   title: "VPP Latency 64B-2t2c-.*ipsec.*-ndrdisc"
4838   algorithm: "plot_latency_box"
4839   output-file-type: ".html"
4840   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-ndrdisc-lat50"
4841   data:
4842     csit-vpp-perf-1710-all:
4843     - 11
4844     - 12
4845     - 13
4846     - 14
4847     - 15
4848     - 16
4849     - 17
4850     - 18
4851     - 19
4852     - 20
4853   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
4854   parameters:
4855   - "latency"
4856   - "parent"
4857   traces:
4858     boxmean: False
4859   layout:
4860     title: "64B-2t2c-.*ipsec.*-ndrdisc"
4861     xaxis:
4862       autorange: True
4863       autotick: False
4864       fixedrange: False
4865       gridcolor: "rgb(238, 238, 238)"
4866       linecolor: "rgb(238, 238, 238)"
4867       linewidth: 1
4868       showgrid: True
4869       showline: True
4870       showticklabels: True
4871       tickcolor: "rgb(238, 238, 238)"
4872       tickmode: "linear"
4873       title: "Indexed Test Cases"
4874       zeroline: False
4875     yaxis:
4876       gridcolor: "rgb(238, 238, 238)'"
4877       hoverformat: ""
4878       linecolor: "rgb(238, 238, 238)"
4879       linewidth: 1
4880       range: []
4881       showgrid: True
4882       showline: True
4883       showticklabels: True
4884       tickcolor: "rgb(238, 238, 238)"
4885       title: "Latency min/avg/max [uSec]"
4886       zeroline: False
4887     boxmode: "group"
4888     boxgroupgap: 0.5
4889     autosize: False
4890     margin:
4891       t: 50
4892       b: 20
4893       l: 50
4894       r: 20
4895     showlegend: True
4896     legend:
4897       orientation: "h"
4898     width: 700
4899     height: 1000
4900
4901 # DPDK
4902 -
4903   type: "plot"
4904   title: "DPDK Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
4905   algorithm: "plot_latency_box"
4906   output-file-type: ".html"
4907   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-ndrdisc-lat50"
4908   data:
4909     csit-dpdk-perf-1710-all:
4910     - 2
4911     - 3
4912     - 5
4913     - 6
4914     - 7
4915     - 8
4916     - 9
4917     - 10
4918     - 11
4919     - 13
4920   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
4921   parameters:
4922   - "latency"
4923   - "parent"
4924   traces:
4925     boxmean: False
4926   layout:
4927     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
4928     xaxis:
4929       autorange: True
4930       autotick: False
4931       fixedrange: False
4932       gridcolor: "rgb(238, 238, 238)"
4933       linecolor: "rgb(238, 238, 238)"
4934       linewidth: 1
4935       showgrid: True
4936       showline: True
4937       showticklabels: True
4938       tickcolor: "rgb(238, 238, 238)"
4939       tickmode: "linear"
4940       title: "Indexed Test Cases"
4941       zeroline: False
4942     yaxis:
4943       gridcolor: "rgb(238, 238, 238)'"
4944       hoverformat: ""
4945       linecolor: "rgb(238, 238, 238)"
4946       linewidth: 1
4947       range: []
4948       showgrid: True
4949       showline: True
4950       showticklabels: True
4951       tickcolor: "rgb(238, 238, 238)"
4952       title: "Latency min/avg/max [uSec]"
4953       zeroline: False
4954     boxmode: "group"
4955     boxgroupgap: 0.5
4956     autosize: False
4957     margin:
4958       t: 50
4959       b: 20
4960       l: 50
4961       r: 20
4962     showlegend: True
4963     legend:
4964       orientation: "h"
4965     width: 700
4966     height: 1000
4967
4968 -
4969   type: "plot"
4970   title: "DPDK Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
4971   algorithm: "plot_latency_box"
4972   output-file-type: ".html"
4973   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-ndrdisc-lat50"
4974   data:
4975     csit-dpdk-perf-1710-all:
4976     - 2
4977     - 3
4978     - 5
4979     - 6
4980     - 7
4981     - 8
4982     - 9
4983     - 10
4984     - 11
4985     - 13
4986   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
4987   parameters:
4988   - "latency"
4989   - "parent"
4990   traces:
4991     boxmean: False
4992   layout:
4993     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
4994     xaxis:
4995       autorange: True
4996       autotick: False
4997       fixedrange: False
4998       gridcolor: "rgb(238, 238, 238)"
4999       linecolor: "rgb(238, 238, 238)"
5000       linewidth: 1
5001       showgrid: True
5002       showline: True
5003       showticklabels: True
5004       tickcolor: "rgb(238, 238, 238)"
5005       tickmode: "linear"
5006       title: "Indexed Test Cases"
5007       zeroline: False
5008     yaxis:
5009       gridcolor: "rgb(238, 238, 238)'"
5010       hoverformat: ""
5011       linecolor: "rgb(238, 238, 238)"
5012       linewidth: 1
5013       range: []
5014       showgrid: True
5015       showline: True
5016       showticklabels: True
5017       tickcolor: "rgb(238, 238, 238)"
5018       title: "Latency min/avg/max [uSec]"
5019       zeroline: False
5020     boxmode: "group"
5021     boxgroupgap: 0.5
5022     autosize: False
5023     margin:
5024       t: 50
5025       b: 20
5026       l: 50
5027       r: 20
5028     showlegend: True
5029     legend:
5030       orientation: "h"
5031     width: 700
5032     height: 1000
5033
5034 -
5035   type: "plot"
5036   title: "DPDK Latency 64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
5037   algorithm: "plot_latency_box"
5038   output-file-type: ".html"
5039   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-ndrdisc-lat50"
5040   data:
5041     csit-dpdk-perf-1710-all:
5042     - 2
5043     - 3
5044     - 5
5045     - 6
5046     - 7
5047     - 8
5048     - 9
5049     - 10
5050     - 11
5051     - 13
5052   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'IP4FWD'"
5053   parameters:
5054   - "latency"
5055   - "parent"
5056   traces:
5057     boxmean: False
5058   layout:
5059     title: "64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
5060     xaxis:
5061       autorange: True
5062       autotick: False
5063       fixedrange: False
5064       gridcolor: "rgb(238, 238, 238)"
5065       linecolor: "rgb(238, 238, 238)"
5066       linewidth: 1
5067       showgrid: True
5068       showline: True
5069       showticklabels: True
5070       tickcolor: "rgb(238, 238, 238)"
5071       tickmode: "linear"
5072       title: "Indexed Test Cases"
5073       zeroline: False
5074     yaxis:
5075       gridcolor: "rgb(238, 238, 238)'"
5076       hoverformat: ""
5077       linecolor: "rgb(238, 238, 238)"
5078       linewidth: 1
5079       range: []
5080       showgrid: True
5081       showline: True
5082       showticklabels: True
5083       tickcolor: "rgb(238, 238, 238)"
5084       title: "Latency min/avg/max [uSec]"
5085       zeroline: False
5086     boxmode: "group"
5087     boxgroupgap: 0.5
5088     autosize: False
5089     margin:
5090       t: 50
5091       b: 20
5092       l: 50
5093       r: 20
5094     showlegend: True
5095     legend:
5096       orientation: "h"
5097     width: 700
5098     height: 1000
5099
5100 -
5101   type: "plot"
5102   title: "DPDK Latency 64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
5103   algorithm: "plot_latency_box"
5104   output-file-type: ".html"
5105   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-ndrdisc-lat50"
5106   data:
5107     csit-dpdk-perf-1710-all:
5108     - 2
5109     - 3
5110     - 5
5111     - 6
5112     - 7
5113     - 8
5114     - 9
5115     - 10
5116     - 11
5117     - 13
5118   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'IP4FWD'"
5119   parameters:
5120   - "latency"
5121   - "parent"
5122   traces:
5123     boxmean: False
5124   layout:
5125     title: "64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
5126     xaxis:
5127       autorange: True
5128       autotick: False
5129       fixedrange: False
5130       gridcolor: "rgb(238, 238, 238)"
5131       linecolor: "rgb(238, 238, 238)"
5132       linewidth: 1
5133       showgrid: True
5134       showline: True
5135       showticklabels: True
5136       tickcolor: "rgb(238, 238, 238)"
5137       tickmode: "linear"
5138       title: "Indexed Test Cases"
5139       zeroline: False
5140     yaxis:
5141       gridcolor: "rgb(238, 238, 238)'"
5142       hoverformat: ""
5143       linecolor: "rgb(238, 238, 238)"
5144       linewidth: 1
5145       range: []
5146       showgrid: True
5147       showline: True
5148       showticklabels: True
5149       tickcolor: "rgb(238, 238, 238)"
5150       title: "Latency min/avg/max [uSec]"
5151       zeroline: False
5152     boxmode: "group"
5153     boxgroupgap: 0.5
5154     autosize: False
5155     margin:
5156       t: 50
5157       b: 20
5158       l: 50
5159       r: 20
5160     showlegend: True
5161     legend:
5162       orientation: "h"
5163     width: 700
5164     height: 1000
5165
5166 # Ligato - Throughput
5167
5168 # Container memif
5169 -
5170   type: "plot"
5171   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5172   algorithm: "plot_performance_box"
5173   output-file-type: ".html"
5174   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-memif-ndrdisc"
5175   data:
5176     csit-vpp-perf-1710-all:
5177     - 11
5178     - 12
5179     - 13
5180     - 14
5181     - 15
5182     - 16
5183     - 17
5184     - 18
5185     - 19
5186     - 20
5187   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5188   parameters:
5189   - "throughput"
5190   - "parent"
5191   traces:
5192     hoverinfo: "x+y"
5193     boxpoints: "outliers"
5194     whiskerwidth: 0
5195   layout:
5196     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5197     xaxis:
5198       autorange: True
5199       autotick: False
5200       fixedrange: False
5201       gridcolor: "rgb(238, 238, 238)"
5202       linecolor: "rgb(238, 238, 238)"
5203       linewidth: 1
5204       showgrid: True
5205       showline: True
5206       showticklabels: True
5207       tickcolor: "rgb(238, 238, 238)"
5208       tickmode: "linear"
5209       title: "Indexed Test Cases"
5210       zeroline: False
5211     yaxis:
5212       gridcolor: "rgb(238, 238, 238)'"
5213       hoverformat: ".4s"
5214       linecolor: "rgb(238, 238, 238)"
5215       linewidth: 1
5216       range: []
5217       showgrid: True
5218       showline: True
5219       showticklabels: True
5220       tickcolor: "rgb(238, 238, 238)"
5221       title: "Packets Per Second [pps]"
5222       zeroline: False
5223     boxmode: "group"
5224     boxgroupgap: 0.5
5225     autosize: False
5226     margin:
5227       t: 50
5228       b: 20
5229       l: 50
5230       r: 20
5231     showlegend: True
5232     legend:
5233       orientation: "h"
5234     width: 700
5235     height: 1000
5236
5237 -
5238   type: "plot"
5239   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5240   algorithm: "plot_performance_box"
5241   output-file-type: ".html"
5242   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-memif-ndrdisc"
5243   data:
5244     csit-vpp-perf-1710-all:
5245     - 11
5246     - 12
5247     - 13
5248     - 14
5249     - 15
5250     - 16
5251     - 17
5252     - 18
5253     - 19
5254     - 20
5255   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5256   parameters:
5257   - "throughput"
5258   - "parent"
5259   traces:
5260     hoverinfo: "x+y"
5261     boxpoints: "outliers"
5262     whiskerwidth: 0
5263   layout:
5264     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5265     xaxis:
5266       autorange: True
5267       autotick: False
5268       fixedrange: False
5269       gridcolor: "rgb(238, 238, 238)"
5270       linecolor: "rgb(238, 238, 238)"
5271       linewidth: 1
5272       showgrid: True
5273       showline: True
5274       showticklabels: True
5275       tickcolor: "rgb(238, 238, 238)"
5276       tickmode: "linear"
5277       title: "Indexed Test Cases"
5278       zeroline: False
5279     yaxis:
5280       gridcolor: "rgb(238, 238, 238)'"
5281       hoverformat: ".4s"
5282       linecolor: "rgb(238, 238, 238)"
5283       linewidth: 1
5284       range: []
5285       showgrid: True
5286       showline: True
5287       showticklabels: True
5288       tickcolor: "rgb(238, 238, 238)"
5289       title: "Packets Per Second [pps]"
5290       zeroline: False
5291     boxmode: "group"
5292     boxgroupgap: 0.5
5293     autosize: False
5294     margin:
5295       t: 50
5296       b: 20
5297       l: 50
5298       r: 20
5299     showlegend: True
5300     legend:
5301       orientation: "h"
5302     width: 700
5303     height: 1000
5304
5305 -
5306   type: "plot"
5307   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
5308   algorithm: "plot_performance_box"
5309   output-file-type: ".html"
5310   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-memif-pdrdisc"
5311   data:
5312     csit-vpp-perf-1710-all:
5313     - 11
5314     - 12
5315     - 13
5316     - 14
5317     - 15
5318     - 16
5319     - 17
5320     - 18
5321     - 19
5322     - 20
5323   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5324   parameters:
5325   - "throughput"
5326   - "parent"
5327   traces:
5328     hoverinfo: "x+y"
5329     boxpoints: "outliers"
5330     whiskerwidth: 0
5331   layout:
5332     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
5333     xaxis:
5334       autorange: True
5335       autotick: False
5336       fixedrange: False
5337       gridcolor: "rgb(238, 238, 238)"
5338       linecolor: "rgb(238, 238, 238)"
5339       linewidth: 1
5340       showgrid: True
5341       showline: True
5342       showticklabels: True
5343       tickcolor: "rgb(238, 238, 238)"
5344       tickmode: "linear"
5345       title: "Indexed Test Cases"
5346       zeroline: False
5347     yaxis:
5348       gridcolor: "rgb(238, 238, 238)'"
5349       hoverformat: ".4s"
5350       linecolor: "rgb(238, 238, 238)"
5351       linewidth: 1
5352       range: []
5353       showgrid: True
5354       showline: True
5355       showticklabels: True
5356       tickcolor: "rgb(238, 238, 238)"
5357       title: "Packets Per Second [pps]"
5358       zeroline: False
5359     boxmode: "group"
5360     boxgroupgap: 0.5
5361     autosize: False
5362     margin:
5363       t: 50
5364       b: 20
5365       l: 50
5366       r: 20
5367     showlegend: True
5368     legend:
5369       orientation: "h"
5370     width: 700
5371     height: 1000
5372
5373 -
5374   type: "plot"
5375   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
5376   algorithm: "plot_performance_box"
5377   output-file-type: ".html"
5378   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-memif-pdrdisc"
5379   data:
5380     csit-vpp-perf-1710-all:
5381     - 11
5382     - 12
5383     - 13
5384     - 14
5385     - 15
5386     - 16
5387     - 17
5388     - 18
5389     - 19
5390     - 20
5391   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5392   parameters:
5393   - "throughput"
5394   - "parent"
5395   traces:
5396     hoverinfo: "x+y"
5397     boxpoints: "outliers"
5398     whiskerwidth: 0
5399   layout:
5400     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
5401     xaxis:
5402       autorange: True
5403       autotick: False
5404       fixedrange: False
5405       gridcolor: "rgb(238, 238, 238)"
5406       linecolor: "rgb(238, 238, 238)"
5407       linewidth: 1
5408       showgrid: True
5409       showline: True
5410       showticklabels: True
5411       tickcolor: "rgb(238, 238, 238)"
5412       tickmode: "linear"
5413       title: "Indexed Test Cases"
5414       zeroline: False
5415     yaxis:
5416       gridcolor: "rgb(238, 238, 238)'"
5417       hoverformat: ".4s"
5418       linecolor: "rgb(238, 238, 238)"
5419       linewidth: 1
5420       range: []
5421       showgrid: True
5422       showline: True
5423       showticklabels: True
5424       tickcolor: "rgb(238, 238, 238)"
5425       title: "Packets Per Second [pps]"
5426       zeroline: False
5427     boxmode: "group"
5428     boxgroupgap: 0.5
5429     autosize: False
5430     margin:
5431       t: 50
5432       b: 20
5433       l: 50
5434       r: 20
5435     showlegend: True
5436     legend:
5437       orientation: "h"
5438     width: 700
5439     height: 1000
5440
5441 # Container orchestrated
5442 -
5443   type: "plot"
5444   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5445   algorithm: "plot_performance_box"
5446   output-file-type: ".html"
5447   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-orchestrated-ndrdisc"
5448   data:
5449     csit-ligato-perf-1710-all:
5450     - 5
5451     - 7
5452     - 8
5453     - 9
5454     - 10
5455     - 11
5456     - 12
5457     - 13
5458     - 16
5459     - 17
5460   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5461   parameters:
5462   - "throughput"
5463   - "parent"
5464   traces:
5465     hoverinfo: "x+y"
5466     boxpoints: "outliers"
5467     whiskerwidth: 0
5468   layout:
5469     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5470     xaxis:
5471       autorange: True
5472       autotick: False
5473       fixedrange: False
5474       gridcolor: "rgb(238, 238, 238)"
5475       linecolor: "rgb(238, 238, 238)"
5476       linewidth: 1
5477       showgrid: True
5478       showline: True
5479       showticklabels: True
5480       tickcolor: "rgb(238, 238, 238)"
5481       tickmode: "linear"
5482       title: "Indexed Test Cases"
5483       zeroline: False
5484     yaxis:
5485       gridcolor: "rgb(238, 238, 238)'"
5486       hoverformat: ".4s"
5487       linecolor: "rgb(238, 238, 238)"
5488       linewidth: 1
5489       range: []
5490       showgrid: True
5491       showline: True
5492       showticklabels: True
5493       tickcolor: "rgb(238, 238, 238)"
5494       title: "Packets Per Second [pps]"
5495       zeroline: False
5496     boxmode: "group"
5497     boxgroupgap: 0.5
5498     autosize: False
5499     margin:
5500       t: 50
5501       b: 20
5502       l: 50
5503       r: 20
5504     showlegend: True
5505     legend:
5506       orientation: "h"
5507     width: 700
5508     height: 1000
5509
5510 -
5511   type: "plot"
5512   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5513   algorithm: "plot_performance_box"
5514   output-file-type: ".html"
5515   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-orchestrated-ndrdisc"
5516   data:
5517     csit-ligato-perf-1710-all:
5518     - 5
5519     - 7
5520     - 8
5521     - 9
5522     - 10
5523     - 11
5524     - 12
5525     - 13
5526     - 16
5527     - 17
5528   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5529   parameters:
5530   - "throughput"
5531   - "parent"
5532   traces:
5533     hoverinfo: "x+y"
5534     boxpoints: "outliers"
5535     whiskerwidth: 0
5536   layout:
5537     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5538     xaxis:
5539       autorange: True
5540       autotick: False
5541       fixedrange: False
5542       gridcolor: "rgb(238, 238, 238)"
5543       linecolor: "rgb(238, 238, 238)"
5544       linewidth: 1
5545       showgrid: True
5546       showline: True
5547       showticklabels: True
5548       tickcolor: "rgb(238, 238, 238)"
5549       tickmode: "linear"
5550       title: "Indexed Test Cases"
5551       zeroline: False
5552     yaxis:
5553       gridcolor: "rgb(238, 238, 238)'"
5554       hoverformat: ".4s"
5555       linecolor: "rgb(238, 238, 238)"
5556       linewidth: 1
5557       range: []
5558       showgrid: True
5559       showline: True
5560       showticklabels: True
5561       tickcolor: "rgb(238, 238, 238)"
5562       title: "Packets Per Second [pps]"
5563       zeroline: False
5564     boxmode: "group"
5565     boxgroupgap: 0.5
5566     autosize: False
5567     margin:
5568       t: 50
5569       b: 20
5570       l: 50
5571       r: 20
5572     showlegend: True
5573     legend:
5574       orientation: "h"
5575     width: 700
5576     height: 1000
5577
5578 -
5579   type: "plot"
5580   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
5581   algorithm: "plot_performance_box"
5582   output-file-type: ".html"
5583   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-orchestrated-pdrdisc"
5584   data:
5585     csit-ligato-perf-1710-all:
5586     - 5
5587     - 7
5588     - 8
5589     - 9
5590     - 10
5591     - 11
5592     - 12
5593     - 13
5594     - 16
5595     - 17
5596   filter: "'64B' and ('BASE' or 'SCALE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5597   parameters:
5598   - "throughput"
5599   - "parent"
5600   traces:
5601     hoverinfo: "x+y"
5602     boxpoints: "outliers"
5603     whiskerwidth: 0
5604   layout:
5605     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
5606     xaxis:
5607       autorange: True
5608       autotick: False
5609       fixedrange: False
5610       gridcolor: "rgb(238, 238, 238)"
5611       linecolor: "rgb(238, 238, 238)"
5612       linewidth: 1
5613       showgrid: True
5614       showline: True
5615       showticklabels: True
5616       tickcolor: "rgb(238, 238, 238)"
5617       tickmode: "linear"
5618       title: "Indexed Test Cases"
5619       zeroline: False
5620     yaxis:
5621       gridcolor: "rgb(238, 238, 238)'"
5622       hoverformat: ".4s"
5623       linecolor: "rgb(238, 238, 238)"
5624       linewidth: 1
5625       range: []
5626       showgrid: True
5627       showline: True
5628       showticklabels: True
5629       tickcolor: "rgb(238, 238, 238)"
5630       title: "Packets Per Second [pps]"
5631       zeroline: False
5632     boxmode: "group"
5633     boxgroupgap: 0.5
5634     autosize: False
5635     margin:
5636       t: 50
5637       b: 20
5638       l: 50
5639       r: 20
5640     showlegend: True
5641     legend:
5642       orientation: "h"
5643     width: 700
5644     height: 1000
5645
5646 -
5647   type: "plot"
5648   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
5649   algorithm: "plot_performance_box"
5650   output-file-type: ".html"
5651   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-orchestrated-pdrdisc"
5652   data:
5653     csit-ligato-perf-1710-all:
5654     - 5
5655     - 7
5656     - 8
5657     - 9
5658     - 10
5659     - 11
5660     - 12
5661     - 13
5662     - 16
5663     - 17
5664   filter: "'64B' and ('BASE' or 'SCALE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5665   parameters:
5666   - "throughput"
5667   - "parent"
5668   traces:
5669     hoverinfo: "x+y"
5670     boxpoints: "outliers"
5671     whiskerwidth: 0
5672   layout:
5673     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-pdrdisc"
5674     xaxis:
5675       autorange: True
5676       autotick: False
5677       fixedrange: False
5678       gridcolor: "rgb(238, 238, 238)"
5679       linecolor: "rgb(238, 238, 238)"
5680       linewidth: 1
5681       showgrid: True
5682       showline: True
5683       showticklabels: True
5684       tickcolor: "rgb(238, 238, 238)"
5685       tickmode: "linear"
5686       title: "Indexed Test Cases"
5687       zeroline: False
5688     yaxis:
5689       gridcolor: "rgb(238, 238, 238)'"
5690       hoverformat: ".4s"
5691       linecolor: "rgb(238, 238, 238)"
5692       linewidth: 1
5693       range: []
5694       showgrid: True
5695       showline: True
5696       showticklabels: True
5697       tickcolor: "rgb(238, 238, 238)"
5698       title: "Packets Per Second [pps]"
5699       zeroline: False
5700     boxmode: "group"
5701     boxgroupgap: 0.5
5702     autosize: False
5703     margin:
5704       t: 50
5705       b: 20
5706       l: 50
5707       r: 20
5708     showlegend: True
5709     legend:
5710       orientation: "h"
5711     width: 700
5712     height: 1000
5713
5714 # Ligato - Latency
5715
5716 # Container memif
5717 -
5718   type: "plot"
5719   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5720   algorithm: "plot_latency_box"
5721   output-file-type: ".html"
5722   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-memif-ndrdisc-lat50"
5723   data:
5724     csit-vpp-perf-1710-all:
5725     - 11
5726     - 12
5727     - 13
5728     - 14
5729     - 15
5730     - 16
5731     - 17
5732     - 18
5733     - 19
5734     - 20
5735   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5736   parameters:
5737   - "latency"
5738   - "parent"
5739   traces:
5740     boxmean: False
5741   layout:
5742     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5743     xaxis:
5744       autorange: True
5745       autotick: False
5746       fixedrange: False
5747       gridcolor: "rgb(238, 238, 238)"
5748       linecolor: "rgb(238, 238, 238)"
5749       linewidth: 1
5750       showgrid: True
5751       showline: True
5752       showticklabels: True
5753       tickcolor: "rgb(238, 238, 238)"
5754       tickmode: "linear"
5755       title: "Indexed Test Cases"
5756       zeroline: False
5757     yaxis:
5758       gridcolor: "rgb(238, 238, 238)'"
5759       hoverformat: ""
5760       linecolor: "rgb(238, 238, 238)"
5761       linewidth: 1
5762       range: []
5763       showgrid: True
5764       showline: True
5765       showticklabels: True
5766       tickcolor: "rgb(238, 238, 238)"
5767       title: "Latency min/avg/max [uSec]"
5768       zeroline: False
5769     boxmode: "group"
5770     boxgroupgap: 0.5
5771     autosize: False
5772     margin:
5773       t: 50
5774       b: 20
5775       l: 50
5776       r: 20
5777     showlegend: True
5778     legend:
5779       orientation: "h"
5780     width: 700
5781     height: 1000
5782
5783 -
5784   type: "plot"
5785   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5786   algorithm: "plot_latency_box"
5787   output-file-type: ".html"
5788   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-memif-ndrdisc-lat50"
5789   data:
5790     csit-vpp-perf-1710-all:
5791     - 11
5792     - 12
5793     - 13
5794     - 14
5795     - 15
5796     - 16
5797     - 17
5798     - 18
5799     - 19
5800     - 20
5801   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5802   parameters:
5803   - "latency"
5804   - "parent"
5805   traces:
5806     boxmean: False
5807   layout:
5808     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5809     xaxis:
5810       autorange: True
5811       autotick: False
5812       fixedrange: False
5813       gridcolor: "rgb(238, 238, 238)"
5814       linecolor: "rgb(238, 238, 238)"
5815       linewidth: 1
5816       showgrid: True
5817       showline: True
5818       showticklabels: True
5819       tickcolor: "rgb(238, 238, 238)"
5820       tickmode: "linear"
5821       title: "Indexed Test Cases"
5822       zeroline: False
5823     yaxis:
5824       gridcolor: "rgb(238, 238, 238)'"
5825       hoverformat: ""
5826       linecolor: "rgb(238, 238, 238)"
5827       linewidth: 1
5828       range: []
5829       showgrid: True
5830       showline: True
5831       showticklabels: True
5832       tickcolor: "rgb(238, 238, 238)"
5833       title: "Latency min/avg/max [uSec]"
5834       zeroline: False
5835     boxmode: "group"
5836     boxgroupgap: 0.5
5837     autosize: False
5838     margin:
5839       t: 50
5840       b: 20
5841       l: 50
5842       r: 20
5843     showlegend: True
5844     legend:
5845       orientation: "h"
5846     width: 700
5847     height: 1000
5848
5849 # Container orchestrated
5850 -
5851   type: "plot"
5852   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5853   algorithm: "plot_latency_box"
5854   output-file-type: ".html"
5855   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-container-orchestrated-ndrdisc-lat50"
5856   data:
5857     csit-ligato-perf-1710-all:
5858     - 5
5859     - 7
5860     - 8
5861     - 9
5862     - 10
5863     - 11
5864     - 12
5865     - 13
5866     - 16
5867     - 17
5868   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5869   parameters:
5870   - "latency"
5871   - "parent"
5872   traces:
5873     boxmean: False
5874   layout:
5875     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5876     xaxis:
5877       autorange: True
5878       autotick: False
5879       fixedrange: False
5880       gridcolor: "rgb(238, 238, 238)"
5881       linecolor: "rgb(238, 238, 238)"
5882       linewidth: 1
5883       showgrid: True
5884       showline: True
5885       showticklabels: True
5886       tickcolor: "rgb(238, 238, 238)"
5887       tickmode: "linear"
5888       title: "Indexed Test Cases"
5889       zeroline: False
5890     yaxis:
5891       gridcolor: "rgb(238, 238, 238)'"
5892       hoverformat: ""
5893       linecolor: "rgb(238, 238, 238)"
5894       linewidth: 1
5895       range: []
5896       showgrid: True
5897       showline: True
5898       showticklabels: True
5899       tickcolor: "rgb(238, 238, 238)"
5900       title: "Latency min/avg/max [uSec]"
5901       zeroline: False
5902     boxmode: "group"
5903     boxgroupgap: 0.5
5904     autosize: False
5905     margin:
5906       t: 50
5907       b: 20
5908       l: 50
5909       r: 20
5910     showlegend: True
5911     legend:
5912       orientation: "h"
5913     width: 700
5914     height: 1000
5915
5916 -
5917   type: "plot"
5918   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5919   algorithm: "plot_latency_box"
5920   output-file-type: ".html"
5921   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-container-orchestrated-ndrdisc-lat50"
5922   data:
5923     csit-ligato-perf-1710-all:
5924     - 5
5925     - 7
5926     - 8
5927     - 9
5928     - 10
5929     - 11
5930     - 12
5931     - 13
5932     - 16
5933     - 17
5934   filter: "'64B' and ('BASE' or 'SCALE') and 'NDRDISC' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
5935   parameters:
5936   - "latency"
5937   - "parent"
5938   traces:
5939     boxmean: False
5940   layout:
5941     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-memif-ndrdisc"
5942     xaxis:
5943       autorange: True
5944       autotick: False
5945       fixedrange: False
5946       gridcolor: "rgb(238, 238, 238)"
5947       linecolor: "rgb(238, 238, 238)"
5948       linewidth: 1
5949       showgrid: True
5950       showline: True
5951       showticklabels: True
5952       tickcolor: "rgb(238, 238, 238)"
5953       tickmode: "linear"
5954       title: "Indexed Test Cases"
5955       zeroline: False
5956     yaxis:
5957       gridcolor: "rgb(238, 238, 238)'"
5958       hoverformat: ""
5959       linecolor: "rgb(238, 238, 238)"
5960       linewidth: 1
5961       range: []
5962       showgrid: True
5963       showline: True
5964       showticklabels: True
5965       tickcolor: "rgb(238, 238, 238)"
5966       title: "Latency min/avg/max [uSec]"
5967       zeroline: False
5968     boxmode: "group"
5969     boxgroupgap: 0.5
5970     autosize: False
5971     margin:
5972       t: 50
5973       b: 20
5974       l: 50
5975       r: 20
5976     showlegend: True
5977     legend:
5978       orientation: "h"
5979     width: 700
5980     height: 1000