Add vpp perf jobs to report
[csit.git] / resources / tools / presentation / specification.yaml
1 -
2   type: "environment"
3   configuration:
4     # Debug mode:
5     # - Skip:
6     #   - Download of input data files
7     # - Do:
8     #   - Read data from given zip / xml files
9     #   - Set the configuration as it is done in normal mode
10     # If the section "type: debug" is missing, CFG[DEBUG] is set to 0.
11     CFG[DEBUG]: 0
12
13   paths:
14     # Top level directories:
15     ## Working directory
16     DIR[WORKING]: "_tmp"
17     ## Build directories
18     DIR[BUILD,HTML]: "_build"
19     DIR[BUILD,LATEX]: "_build_latex"
20
21     # Static .rst files
22     DIR[RST]: "../../../docs/report"
23
24     # Working directories
25     ## Input data files (.zip, .xml)
26     DIR[WORKING,DATA]: "{DIR[WORKING]}/data"
27     ## Static source files from git
28     DIR[WORKING,SRC]: "{DIR[WORKING]}/src"
29     DIR[WORKING,SRC,STATIC]: "{DIR[WORKING,SRC]}/_static"
30
31     # Static html content
32     DIR[STATIC]: "{DIR[BUILD,HTML]}/_static"
33     DIR[STATIC,VPP]: "{DIR[STATIC]}/vpp"
34     DIR[STATIC,DPDK]: "{DIR[STATIC]}/dpdk"
35     DIR[STATIC,ARCH]: "{DIR[STATIC]}/archive"
36
37     # Detailed test results
38     DIR[DTR]: "{DIR[WORKING,SRC]}/detailed_test_results"
39     DIR[DTR,PERF,DPDK]: "{DIR[DTR]}/dpdk_performance_results"
40     DIR[DTR,PERF,VPP]: "{DIR[DTR]}/vpp_performance_results"
41     DIR[DTR,PERF,HC]: "{DIR[DTR]}/honeycomb_performance_results"
42     DIR[DTR,FUNC,VPP]: "{DIR[DTR]}/vpp_functional_results"
43     DIR[DTR,FUNC,HC]: "{DIR[DTR]}/honeycomb_functional_results"
44     DIR[DTR,FUNC,NSHSFC]: "{DIR[DTR]}/nshsfc_functional_results"
45     DIR[DTR,PERF,VPP,IMPRV]: "{DIR[WORKING,SRC]}/vpp_performance_tests/performance_improvements"
46
47     # Detailed test configurations
48     DIR[DTC]: "{DIR[WORKING,SRC]}/test_configuration"
49     DIR[DTC,PERF,VPP]: "{DIR[DTC]}/vpp_performance_configuration"
50     DIR[DTC,FUNC,VPP]: "{DIR[DTC]}/vpp_functional_configuration"
51
52     # Detailed tests operational data
53     DIR[DTO]: "{DIR[WORKING,SRC]}/test_operational_data"
54     DIR[DTO,PERF,VPP]: "{DIR[DTO]}/vpp_performance_operational_data"
55
56     # .css patch file to fix tables generated by Sphinx
57     DIR[CSS_PATCH_FILE]: "{DIR[STATIC]}/theme_overrides.css"
58     DIR[CSS_PATCH_FILE2]: "{DIR[WORKING,SRC,STATIC]}/theme_overrides.css"
59
60   urls:
61     URL[JENKINS,CSIT]: "https://jenkins.fd.io/view/csit/job"
62     URL[JENKINS,HC]: "https://jenkins.fd.io/view/hc2vpp/job"
63
64   make-dirs:
65   # List the directories which are created while preparing the environment.
66   # All directories MUST be defined in "paths" section.
67   - "DIR[WORKING,DATA]"
68   - "DIR[STATIC,VPP]"
69   - "DIR[STATIC,DPDK]"
70   - "DIR[STATIC,ARCH]"
71   - "DIR[BUILD,LATEX]"
72   - "DIR[WORKING,SRC]"
73   - "DIR[WORKING,SRC,STATIC]"
74
75   remove-dirs:
76   # List the directories which are deleted while cleaning the environment.
77   # All directories MUST be defined in "paths" section.
78   #- "DIR[BUILD,HTML]"
79
80   build-dirs:
81   # List the directories where the results (build) is stored.
82   # All directories MUST be defined in "paths" section.
83   - "DIR[BUILD,HTML]"
84   - "DIR[BUILD,LATEX]"
85
86 -
87   type: "debug"
88   general:
89     input-format: "xml"  # zip or xml
90     extract: "robot-plugin/output.xml"  # Only for zip
91   builds:
92     # The files must be in the directory DIR[WORKING,DATA]
93     csit-dpdk-perf-1707-all:
94     -
95       build: 10
96       file: "{DIR[WORKING,DATA]}/csit-dpdk-perf-1707-all__10.xml"
97     -
98       build: 9
99       file: "{DIR[WORKING,DATA]}/csit-dpdk-perf-1707-all__9.xml"
100     csit-nsh_sfc-verify-func-1707-ubuntu1604-virl:
101     -
102       build: 2
103       file: "{DIR[WORKING,DATA]}/csit-nsh_sfc-verify-func-1707-ubuntu1604-virl-2.xml"
104     csit-vpp-functional-1707-ubuntu1604-virl:
105     -
106       build: lastSuccessfulBuild
107       file: "{DIR[WORKING,DATA]}/csit-vpp-functional-1707-ubuntu1604-virl-lastSuccessfulBuild.xml"
108     hc2vpp-csit-integration-1707-ubuntu1604:
109     -
110       build: lastSuccessfulBuild
111       file: "{DIR[WORKING,DATA]}/hc2vpp-csit-integration-1707-ubuntu1604-lastSuccessfulBuild.xml"
112     csit-vpp-perf-1707-all:
113     -
114       build: 16
115       file: "{DIR[WORKING,DATA]}/csit-vpp-perf-1707-all__16__output.xml"
116     -
117       build: 17
118       file: "{DIR[WORKING,DATA]}/csit-vpp-perf-1707-all__17__output.xml"
119
120 -
121   type: "static"
122   src-path: "{DIR[RST]}"
123   dst-path: "{DIR[WORKING,SRC]}"
124
125 -
126   type: "input"  # Ignored in debug mode
127   general:
128     file-name: "robot-plugin.zip"
129     file-format: ".zip"
130     download-path: "{job}/{build}/robot/report/*zip*/{filename}"
131     extract: "robot-plugin/output.xml"
132   builds:
133     csit-vpp-perf-1707-all:
134     - 9
135     - 10
136     - 13
137     - 14
138     - 15
139     - 16
140     - 17
141     - 18
142     - 19
143     - 21
144     csit-vpp-perf-1710-all:
145     - 2
146     - 5
147     csit-dpdk-perf-1710-all:
148     - 2
149     - 3
150     csit-vpp-functional-1710-ubuntu1604-virl:
151     - 16
152 #    hc2vpp-csit-perf-master-ubuntu1604:  # REMOVE???
153 #    - 8
154 #    - 9
155     hc2vpp-csit-integration-1710-ubuntu1604:
156     - lastSuccessfulBuild
157 #    csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:  # REMOVE???
158 #    - 2
159
160 -
161   type: "output"
162   format:
163     html:
164     - full
165     pdf:
166     - minimal
167
168 ################################################################################
169 ###                               T A B L E S                                ###
170 ################################################################################
171
172 -
173   type: "table"
174   title: "Performance improvements"
175   algorithm: "table_performance_improvements"
176   template: "{DIR[DTR,PERF,VPP,IMPRV]}/tmpl_performance_improvements.csv"
177   output-file-ext: ".csv"
178   output-file: "{DIR[DTR,PERF,VPP,IMPRV]}/performance_improvements"
179   columns:
180   -
181     title: "Functionality"
182     data: "template 1"
183   -
184     title: "Test Name"
185     data: "template 2"
186   -
187     title: "16.09 mean [Mpps]"
188     data: "template 3"
189   -
190     title: "17.01 mean [Mpps]"
191     data: "template 4"
192   -
193     title: "17.04 mean [Mpps]"
194     data: "template 5"
195   -
196     title: "17.07 mean [Mpps]"
197     data: "data csit-vpp-perf-1707-all mean"
198   -
199     title: "17.10 mean [Mpps]"
200     data: "data csit-vpp-perf-1710-all mean"
201   -
202     title: "17.10 stdev [Mpps]"
203     data: "data csit-vpp-perf-1710-all stdev"
204   -
205     title: "17.07 to 17.10 change [%]"
206     data: "operation relative_change 6 5"
207   rows: "generated"
208   data:
209     csit-vpp-perf-1707-all:
210     - 9
211     - 10
212     - 13
213     - 14
214     - 15
215     - 16
216     - 17
217     - 18
218     - 19
219     - 21
220     csit-vpp-perf-1710-all:
221     - 2
222     - 5
223   filter: "template"
224   parameters:
225   - "throughput"
226
227 -
228   type: "table"
229   title: "Detailed Test Results - VPP Performance Results"
230   algorithm: "table_details"
231   output-file-ext: ".csv"
232   output-file: "{DIR[DTR,PERF,VPP]}/vpp_performance_results"
233   columns:
234   -
235     title: "Name"
236     data: "data name"
237   -
238     title: "Documentation"
239     data: "data doc"
240   -
241     title: "Status"
242     data: "data msg"
243   rows: "generated"
244   data:
245     csit-vpp-perf-1710-all:
246     - 5
247   filter: "all"
248   parameters:
249   - "name"
250   - "parent"
251   - "doc"
252   - "msg"
253
254 -
255   type: "table"
256   title: "Test configuration - VPP Performance Test Configs"
257   algorithm: "table_details"
258   output-file-ext: ".csv"
259   output-file: "{DIR[DTC,PERF,VPP]}/vpp_test_configuration"
260   columns:
261   -
262     title: "Name"
263     data: "data name"
264   -
265     title: "VPP API Test (VAT) Commands History - Commands Used Per Test Case"
266     data: "data vat-history"
267   rows: "generated"
268   data:
269     csit-vpp-perf-1710-all:
270     - 5
271   filter: "all"
272   parameters:
273   - "parent"
274   - "name"
275   - "vat-history"
276
277 -
278   type: "table"
279   title: "Test Operational Data - VPP Performance Operational Data"
280   algorithm: "table_details"
281   output-file-ext: ".csv"
282   output-file: "{DIR[DTO,PERF,VPP]}/vpp_test_operational"
283   columns:
284   -
285     title: "Name"
286     data: "data name"
287   -
288     title: "VPP Operational Data - Outputs of 'show runtime' at NDR packet rate"
289     data: "data show-run"
290   rows: "generated"
291   data:
292     csit-vpp-perf-1710-all:
293     - 5
294   filter: "all"
295   parameters:
296   - "parent"
297   - "name"
298   - "show-run"
299
300 -
301   type: "table"
302   title: "Detailed Test Results - VPP Functional Results"
303   algorithm: "table_details"
304   output-file-ext: ".csv"
305   output-file: "{DIR[DTR,FUNC,VPP]}/vpp_functional_results"
306   columns:
307   -
308     title: "Name"
309     data: "data name"
310   -
311     title: "Documentation"
312     data: "data doc"
313   -
314     title: "Status"
315     data: "data status"
316   rows: "generated"
317   data:
318     csit-vpp-functional-1710-ubuntu1604-virl:
319     - 16
320   filter: "all"
321   parameters:
322   - "name"
323   - "parent"
324   - "doc"
325   - "status"
326
327 -
328   type: "table"
329   title: "Test configuration - VPP Functional Test Configs"
330   algorithm: "table_details"
331   output-file-ext: ".csv"
332   output-file: "{DIR[DTC,FUNC,VPP]}/vpp_functional_configuration"
333   columns:
334   -
335     title: "Name"
336     data: "data name"
337   -
338     title: "VPP API Test (VAT) Commands History - Commands Used Per Test Case"
339     data: "data vat-history"
340   rows: "generated"
341   data:
342     csit-vpp-functional-1710-ubuntu1604-virl:
343     - 16
344   filter: "all"
345   parameters:
346   - "parent"
347   - "name"
348   - "vat-history"
349
350 -
351   type: "table"
352   title: "Detailed Test Results - DPDK Performance Results"
353   algorithm: "table_details"
354   output-file-ext: ".csv"
355   output-file: "{DIR[DTR,PERF,DPDK]}/dpdk_performance_results"
356   columns:
357   -
358     title: "Name"
359     data: "data name"
360   -
361     title: "Documentation"
362     data: "data doc"
363   -
364     title: "Status"
365     data: "data msg"
366   rows: "generated"
367   data:
368     csit-dpdk-perf-1710-all:
369     - 3
370   filter: "all"
371   parameters:
372   - "name"
373   - "parent"
374   - "doc"
375   - "msg"
376
377 -
378   type: "table"
379   title: "Detailed Test Results - Honeycomb Functional Results"
380   algorithm: "table_details"
381   output-file-ext: ".csv"
382   output-file: "{DIR[DTR,FUNC,HC]}/hc_functional_results"
383   columns:
384   -
385     title: "Name"
386     data: "data name"
387   -
388     title: "Documentation"
389     data: "data doc"
390   -
391     title: "Status"
392     data: "data status"
393   rows: "generated"
394   data:
395     hc2vpp-csit-integration-1710-ubuntu1604:
396     - "lastSuccessfulBuild"
397   filter: "all"
398   parameters:
399   - "name"
400   - "parent"
401   - "doc"
402   - "status"
403
404 #-
405 #  type: "table"
406 #  title: "Detailed Test Results - NSH SFC Functional Results"
407 #  algorithm: "table_details"
408 #  output-file-ext: ".csv"
409 #  output-file: "{DIR[DTR,FUNC,NSHSFC]}/nsh_sfc_functional_results"
410 #  columns:
411 #  -
412 #    title: "Name"
413 #    data: "data name"
414 #  -
415 #    title: "Documentation"
416 #    data: "data doc"
417 #  -
418 #    title: "Status"
419 #    data: "data status"
420 #  rows: "generated"
421 #  data:
422 #    csit-nsh_sfc-verify-func-1707-ubuntu1604-virl:
423 #    - 2
424 #  filter: "all"
425 #  parameters:
426 #  - "name"
427 #  - "parent"
428 #  - "doc"
429 #  - "status"
430
431 ################################################################################
432 ###                                F I L E S                                 ###
433 ################################################################################
434
435 -
436   type: "file"
437   title: "VPP Performance Results"
438   algorithm: "file_test_results"
439   output-file-ext: ".rst"
440   output-file: "{DIR[DTR,PERF,VPP]}/vpp_performance_results"
441   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
442   dir-tables: "{DIR[DTR,PERF,VPP]}"
443   data:
444     csit-vpp-perf-1710-all:
445     - 5
446   filter: "all"
447   parameters:
448   - "name"
449   - "doc"
450   - "level"
451   data-start-level: 2  # 0, 1, 2, ...
452   chapters-start-level: 2  # 0, 1, 2, ...
453
454 -
455   type: "file"
456   title: "VPP Performance Configuration"
457   algorithm: "file_test_results"
458   output-file-ext: ".rst"
459   output-file: "{DIR[DTC,PERF,VPP]}/vpp_performance_configuration"
460   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
461   dir-tables: "{DIR[DTC,PERF,VPP]}"
462   data:
463     csit-vpp-perf-1710-all:
464     - 5
465   filter: "all"
466   parameters:
467   - "name"
468   - "doc"
469   - "level"
470   data-start-level: 2  # 0, 1, 2, ...
471   chapters-start-level: 2  # 0, 1, 2, ...
472
473 -
474   type: "file"
475   title: "VPP Performance Operational Data"
476   algorithm: "file_test_results"
477   output-file-ext: ".rst"
478   output-file: "{DIR[DTO,PERF,VPP]}/vpp_performance_operational_data"
479   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
480   dir-tables: "{DIR[DTO,PERF,VPP]}"
481   data:
482     csit-vpp-perf-1710-all:
483     - 5
484   filter: "all"
485   parameters:
486   - "name"
487   - "doc"
488   - "level"
489   data-start-level: 2  # 0, 1, 2, ...
490   chapters-start-level: 2  # 0, 1, 2, ...
491
492 -
493   type: "file"
494   title: "VPP Functional Results"
495   algorithm: "file_test_results"
496   output-file-ext: ".rst"
497   output-file: "{DIR[DTR,FUNC,VPP]}/vpp_functional_results"
498   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
499   dir-tables: "{DIR[DTR,FUNC,VPP]}"
500   data:
501     csit-vpp-functional-1710-ubuntu1604-virl:
502     - 16
503   filter: "all"
504   parameters:
505   - "name"
506   - "doc"
507   - "level"
508   data-start-level: 3  # 0, 1, 2, ...
509   chapters-start-level: 2  # 0, 1, 2, ...
510
511 -
512   type: "file"
513   title: "VPP Functional Configuration"
514   algorithm: "file_test_results"
515   output-file-ext: ".rst"
516   output-file: "{DIR[DTC,FUNC,VPP]}/vpp_functional_configuration"
517   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
518   dir-tables: "{DIR[DTC,FUNC,VPP]}"
519   data:
520     csit-vpp-functional-1710-ubuntu1604-virl:
521     - 16
522   filter: "all"
523   parameters:
524   - "name"
525   - "doc"
526   - "level"
527   data-start-level: 3  # 0, 1, 2, ...
528   chapters-start-level: 2  # 0, 1, 2, ...
529
530 -
531   type: "file"
532   title: "DPDK Performance Results"
533   algorithm: "file_test_results"
534   output-file-ext: ".rst"
535   output-file: "{DIR[DTR,PERF,DPDK]}/dpdk_performance_results"
536   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
537   dir-tables: "{DIR[DTR,PERF,DPDK]}"
538   data:
539     csit-dpdk-perf-1710-all:
540     - 3
541   filter: "all"
542   parameters:
543   - "name"
544   - "doc"
545   - "level"
546   chapters:
547   - "suites"
548   data-start-level: 2  # 0, 1, 2, ...
549   chapters-start-level: 2  # 0, 1, 2, ...
550
551 -
552   type: "file"
553   title: "Honeycomb Functional Results"
554   algorithm: "file_test_results"
555   output-file-ext: ".rst"
556   output-file: "{DIR[DTR,FUNC,HC]}/honeycomb_functional_results"
557   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
558   dir-tables: "{DIR[DTR,FUNC,HC]}"
559   data:
560     hc2vpp-csit-integration-1710-ubuntu1604:
561     - "lastSuccessfulBuild"
562   filter: "all"
563   parameters:
564   - "name"
565   - "doc"
566   - "level"
567   chapters:
568   - "suites"
569   data-start-level: 3  # 0, 1, 2, ...
570   chapters-start-level: 2  # 0, 1, 2, ...
571
572 #-
573 #  type: "file"
574 #  title: "NSH SFC Functional Results"
575 #  algorithm: "file_test_results"
576 #  output-file-ext: ".rst"
577 #  output-file: "{DIR[DTR,FUNC,NSHSFC]}/nshsfc_functional_results"
578 #  file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
579 #  dir-tables: "{DIR[DTR,FUNC,NSHSFC]}"
580 #  data:
581 #    csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:
582 #    - 
583 #  filter: "all"
584 #  parameters:
585 #  - "name"
586 #  - "doc"
587 #  - "level"
588 #  chapters:
589 #  - "suites"
590 #  data-start-level: 2  # 0, 1, 2, ...
591 #  chapters-start-level: 2  # 0, 1, 2, ...
592
593 ################################################################################
594 ###                                P L O T S                                 ###
595 ################################################################################
596
597 # Plot packets per second
598
599 # VPP L2 sel1
600 -
601   type: "plot"
602   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
603   algorithm: "plot_performance_box"
604   output-file-type: ".html"
605   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-ndrdisc"
606   data:
607     csit-vpp-perf-1710-all:
608     - 2
609     - 5
610   # Keep this formatting, the filter is enclosed with " (quotation mark) and
611   # each tag is enclosed with ' (apostrophe).
612   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
613   parameters:
614   - "throughput"
615   - "parent"
616   traces:
617     hoverinfo: "x+y"
618     boxpoints: "outliers"
619     whiskerwidth: 0
620   layout:
621     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
622     xaxis:
623       autorange: True
624       autotick: False
625       fixedrange: False
626       gridcolor: "rgb(238, 238, 238)"
627       linecolor: "rgb(238, 238, 238)"
628       linewidth: 1
629       showgrid: True
630       showline: True
631       showticklabels: True
632       tickcolor: "rgb(238, 238, 238)"
633       tickmode: "linear"
634       title: "Indexed Test Cases"
635       zeroline: False
636     yaxis:
637       gridcolor: "rgb(238, 238, 238)'"
638       hoverformat: ".4s"
639       linecolor: "rgb(238, 238, 238)"
640       linewidth: 1
641       range: []
642       showgrid: True
643       showline: True
644       showticklabels: True
645       tickcolor: "rgb(238, 238, 238)"
646       title: "Packets Per Second [pps]"
647       zeroline: False
648     boxmode: "group"
649     boxgroupgap: 0.5
650     autosize: False
651     margin:
652       t: 50
653       b: 20
654       l: 50
655       r: 20
656     showlegend: True
657     legend:
658       orientation: "h"
659     width: 700
660     height: 1000
661
662 -
663   type: "plot"
664   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
665   algorithm: "plot_performance_box"
666   output-file-type: ".html"
667   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-ndrdisc"
668   data:
669     csit-vpp-perf-1710-all:
670     - 2
671     - 5
672   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
673   parameters:
674   - "throughput"
675   - "parent"
676   traces:
677     hoverinfo: "x+y"
678     boxpoints: "outliers"
679     whiskerwidth: 0
680   layout:
681     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
682     xaxis:
683       autorange: True
684       autotick: False
685       fixedrange: False
686       gridcolor: "rgb(238, 238, 238)"
687       linecolor: "rgb(238, 238, 238)"
688       linewidth: 1
689       showgrid: True
690       showline: True
691       showticklabels: True
692       tickcolor: "rgb(238, 238, 238)"
693       tickmode: "linear"
694       title: "Indexed Test Cases"
695       zeroline: False
696     yaxis:
697       gridcolor: "rgb(238, 238, 238)'"
698       hoverformat: ".4s"
699       linecolor: "rgb(238, 238, 238)"
700       linewidth: 1
701       range: []
702       showgrid: True
703       showline: True
704       showticklabels: True
705       tickcolor: "rgb(238, 238, 238)"
706       title: "Packets Per Second [pps]"
707       zeroline: False
708     boxmode: "group"
709     boxgroupgap: 0.5
710     autosize: False
711     margin:
712       t: 50
713       b: 20
714       l: 50
715       r: 20
716     showlegend: True
717     legend:
718       orientation: "h"
719     width: 700
720     height: 1000
721
722 -
723   type: "plot"
724   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
725   algorithm: "plot_performance_box"
726   output-file-type: ".html"
727   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-pdrdisc"
728   data:
729     csit-vpp-perf-1710-all:
730     - 2
731     - 5
732   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
733   parameters:
734   - "throughput"
735   - "parent"
736   traces:
737     hoverinfo: "x+y"
738     boxpoints: "outliers"
739     whiskerwidth: 0
740   layout:
741     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
742     xaxis:
743       autorange: True
744       autotick: False
745       fixedrange: False
746       gridcolor: "rgb(238, 238, 238)"
747       linecolor: "rgb(238, 238, 238)"
748       linewidth: 1
749       showgrid: True
750       showline: True
751       showticklabels: True
752       tickcolor: "rgb(238, 238, 238)"
753       tickmode: "linear"
754       title: "Indexed Test Cases"
755       zeroline: False
756     yaxis:
757       gridcolor: "rgb(238, 238, 238)'"
758       hoverformat: ".4s"
759       linecolor: "rgb(238, 238, 238)"
760       linewidth: 1
761       range: []
762       showgrid: True
763       showline: True
764       showticklabels: True
765       tickcolor: "rgb(238, 238, 238)"
766       title: "Packets Per Second [pps]"
767       zeroline: False
768     boxmode: "group"
769     boxgroupgap: 0.5
770     autosize: False
771     margin:
772       t: 50
773       b: 20
774       l: 50
775       r: 20
776     showlegend: True
777     legend:
778       orientation: "h"
779     width: 700
780     height: 1000
781
782 -
783   type: "plot"
784   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
785   algorithm: "plot_performance_box"
786   output-file-type: ".html"
787   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-pdrdisc"
788   data:
789     csit-vpp-perf-1710-all:
790     - 2
791     - 5
792   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
793   parameters:
794   - "throughput"
795   - "parent"
796   traces:
797     hoverinfo: "x+y"
798     boxpoints: "outliers"
799     whiskerwidth: 0
800   layout:
801     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
802     xaxis:
803       autorange: True
804       autotick: False
805       fixedrange: False
806       gridcolor: "rgb(238, 238, 238)"
807       linecolor: "rgb(238, 238, 238)"
808       linewidth: 1
809       showgrid: True
810       showline: True
811       showticklabels: True
812       tickcolor: "rgb(238, 238, 238)"
813       tickmode: "linear"
814       title: "Indexed Test Cases"
815       zeroline: False
816     yaxis:
817       gridcolor: "rgb(238, 238, 238)'"
818       hoverformat: ".4s"
819       linecolor: "rgb(238, 238, 238)"
820       linewidth: 1
821       range: []
822       showgrid: True
823       showline: True
824       showticklabels: True
825       tickcolor: "rgb(238, 238, 238)"
826       title: "Packets Per Second [pps]"
827       zeroline: False
828     boxmode: "group"
829     boxgroupgap: 0.5
830     autosize: False
831     margin:
832       t: 50
833       b: 20
834       l: 50
835       r: 20
836     showlegend: True
837     legend:
838       orientation: "h"
839     width: 700
840     height: 1000
841
842 # VPP L2 sel2
843 -
844   type: "plot"
845   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
846   algorithm: "plot_performance_box"
847   output-file-type: ".html"
848   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-ndrdisc"
849   data:
850     csit-vpp-perf-1710-all:
851     - 2
852     - 5
853   filter: "'64B' and 'FEATURE' and 'ACL50' and '10k_FLOWS' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
854   parameters:
855   - "throughput"
856   - "parent"
857   traces:
858     hoverinfo: "x+y"
859     boxpoints: "outliers"
860     whiskerwidth: 0
861   layout:
862     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
863     xaxis:
864       autorange: True
865       autotick: False
866       fixedrange: False
867       gridcolor: "rgb(238, 238, 238)"
868       linecolor: "rgb(238, 238, 238)"
869       linewidth: 1
870       showgrid: True
871       showline: True
872       showticklabels: True
873       tickcolor: "rgb(238, 238, 238)"
874       tickmode: "linear"
875       title: "Indexed Test Cases"
876       zeroline: False
877     yaxis:
878       gridcolor: "rgb(238, 238, 238)'"
879       hoverformat: ".4s"
880       linecolor: "rgb(238, 238, 238)"
881       linewidth: 1
882       range: [0, 8000000]
883       showgrid: True
884       showline: True
885       showticklabels: True
886       tickcolor: "rgb(238, 238, 238)"
887       title: "Packets Per Second [pps]"
888       zeroline: False
889     boxmode: "group"
890     boxgroupgap: 0.5
891     autosize: False
892     margin:
893       t: 50
894       b: 20
895       l: 50
896       r: 20
897     showlegend: True
898     legend:
899       orientation: "h"
900     width: 700
901     height: 1000
902
903 -
904   type: "plot"
905   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
906   algorithm: "plot_performance_box"
907   output-file-type: ".html"
908   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-ndrdisc"
909   data:
910     csit-vpp-perf-1710-all:
911     - 2
912     - 5
913   filter: "'64B' and 'FEATURE' and 'ACL50' and '10k_FLOWS' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
914   parameters:
915   - "throughput"
916   - "parent"
917   traces:
918     hoverinfo: "x+y"
919     boxpoints: "outliers"
920     whiskerwidth: 0
921   layout:
922     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
923     xaxis:
924       autorange: True
925       autotick: False
926       fixedrange: False
927       gridcolor: "rgb(238, 238, 238)"
928       linecolor: "rgb(238, 238, 238)"
929       linewidth: 1
930       showgrid: True
931       showline: True
932       showticklabels: True
933       tickcolor: "rgb(238, 238, 238)"
934       tickmode: "linear"
935       title: "Indexed Test Cases"
936       zeroline: False
937     yaxis:
938       gridcolor: "rgb(238, 238, 238)'"
939       hoverformat: ".4s"
940       linecolor: "rgb(238, 238, 238)"
941       linewidth: 1
942       range: [5000000, 12000000]
943       showgrid: True
944       showline: True
945       showticklabels: True
946       tickcolor: "rgb(238, 238, 238)"
947       title: "Packets Per Second [pps]"
948       zeroline: False
949     boxmode: "group"
950     boxgroupgap: 0.5
951     autosize: False
952     margin:
953       t: 50
954       b: 20
955       l: 50
956       r: 20
957     showlegend: True
958     legend:
959       orientation: "h"
960     width: 700
961     height: 1000
962
963 -
964   type: "plot"
965   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
966   algorithm: "plot_performance_box"
967   output-file-type: ".html"
968   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-pdrdisc"
969   data:
970     csit-vpp-perf-1710-all:
971     - 2
972     - 5
973   filter: "'64B' and 'FEATURE' and 'ACL50' and '10k_FLOWS' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
974   parameters:
975   - "throughput"
976   - "parent"
977   traces:
978     hoverinfo: "x+y"
979     boxpoints: "outliers"
980     whiskerwidth: 0
981   layout:
982     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
983     xaxis:
984       autorange: True
985       autotick: False
986       fixedrange: False
987       gridcolor: "rgb(238, 238, 238)"
988       linecolor: "rgb(238, 238, 238)"
989       linewidth: 1
990       showgrid: True
991       showline: True
992       showticklabels: True
993       tickcolor: "rgb(238, 238, 238)"
994       tickmode: "linear"
995       title: "Indexed Test Cases"
996       zeroline: False
997     yaxis:
998       gridcolor: "rgb(238, 238, 238)'"
999       hoverformat: ".4s"
1000       linecolor: "rgb(238, 238, 238)"
1001       linewidth: 1
1002       range: [0, 8000000]
1003       showgrid: True
1004       showline: True
1005       showticklabels: True
1006       tickcolor: "rgb(238, 238, 238)"
1007       title: "Packets Per Second [pps]"
1008       zeroline: False
1009     boxmode: "group"
1010     boxgroupgap: 0.5
1011     autosize: False
1012     margin:
1013       t: 50
1014       b: 20
1015       l: 50
1016       r: 20
1017     showlegend: True
1018     legend:
1019       orientation: "h"
1020     width: 700
1021     height: 1000
1022
1023 -
1024   type: "plot"
1025   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1026   algorithm: "plot_performance_box"
1027   output-file-type: ".html"
1028   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-pdrdisc"
1029   data:
1030     csit-vpp-perf-1710-all:
1031     - 2
1032     - 5
1033   filter: "'64B' and 'FEATURE' and 'ACL50' and '10k_FLOWS' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1034   parameters:
1035   - "throughput"
1036   - "parent"
1037   traces:
1038     hoverinfo: "x+y"
1039     boxpoints: "outliers"
1040     whiskerwidth: 0
1041   layout:
1042     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1043     xaxis:
1044       autorange: True
1045       autotick: False
1046       fixedrange: False
1047       gridcolor: "rgb(238, 238, 238)"
1048       linecolor: "rgb(238, 238, 238)"
1049       linewidth: 1
1050       showgrid: True
1051       showline: True
1052       showticklabels: True
1053       tickcolor: "rgb(238, 238, 238)"
1054       tickmode: "linear"
1055       title: "Indexed Test Cases"
1056       zeroline: False
1057     yaxis:
1058       gridcolor: "rgb(238, 238, 238)'"
1059       hoverformat: ".4s"
1060       linecolor: "rgb(238, 238, 238)"
1061       linewidth: 1
1062       range: [5000000, 12000000]
1063       showgrid: True
1064       showline: True
1065       showticklabels: True
1066       tickcolor: "rgb(238, 238, 238)"
1067       title: "Packets Per Second [pps]"
1068       zeroline: False
1069     boxmode: "group"
1070     boxgroupgap: 0.5
1071     autosize: False
1072     margin:
1073       t: 50
1074       b: 20
1075       l: 50
1076       r: 20
1077     showlegend: True
1078     legend:
1079       orientation: "h"
1080     width: 700
1081     height: 1000
1082
1083 # VPP IP4
1084 -
1085   type: "plot"
1086   title: "VPP Performance 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1087   algorithm: "plot_performance_box"
1088   output-file-type: ".html"
1089   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-ndrdisc"
1090   data:
1091     csit-vpp-perf-1710-all:
1092     - 2
1093     - 5
1094   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1095   parameters:
1096   - "throughput"
1097   - "parent"
1098   traces:
1099     hoverinfo: "x+y"
1100     boxpoints: "outliers"
1101     whiskerwidth: 0
1102   layout:
1103     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1104     xaxis:
1105       autorange: True
1106       autotick: False
1107       fixedrange: False
1108       gridcolor: "rgb(238, 238, 238)"
1109       linecolor: "rgb(238, 238, 238)"
1110       linewidth: 1
1111       showgrid: True
1112       showline: True
1113       showticklabels: True
1114       tickcolor: "rgb(238, 238, 238)"
1115       tickmode: "linear"
1116       title: "Indexed Test Cases"
1117       zeroline: False
1118     yaxis:
1119       gridcolor: "rgb(238, 238, 238)'"
1120       hoverformat: ".4s"
1121       linecolor: "rgb(238, 238, 238)"
1122       linewidth: 1
1123       range: []
1124       showgrid: True
1125       showline: True
1126       showticklabels: True
1127       tickcolor: "rgb(238, 238, 238)"
1128       title: "Packets Per Second [pps]"
1129       zeroline: False
1130     boxmode: "group"
1131     boxgroupgap: 0.5
1132     autosize: False
1133     margin:
1134       t: 50
1135       b: 20
1136       l: 50
1137       r: 20
1138     showlegend: True
1139     legend:
1140       orientation: "h"
1141     width: 700
1142     height: 1000
1143
1144 -
1145   type: "plot"
1146   title: "VPP Performance 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1147   algorithm: "plot_performance_box"
1148   output-file-type: ".html"
1149   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-ndrdisc"
1150   data:
1151     csit-vpp-perf-1710-all:
1152     - 2
1153     - 5
1154   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1155   parameters:
1156   - "throughput"
1157   - "parent"
1158   traces:
1159     hoverinfo: "x+y"
1160     boxpoints: "outliers"
1161     whiskerwidth: 0
1162   layout:
1163     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1164     xaxis:
1165       autorange: True
1166       autotick: False
1167       fixedrange: False
1168       gridcolor: "rgb(238, 238, 238)"
1169       linecolor: "rgb(238, 238, 238)"
1170       linewidth: 1
1171       showgrid: True
1172       showline: True
1173       showticklabels: True
1174       tickcolor: "rgb(238, 238, 238)"
1175       tickmode: "linear"
1176       title: "Indexed Test Cases"
1177       zeroline: False
1178     yaxis:
1179       gridcolor: "rgb(238, 238, 238)'"
1180       hoverformat: ".4s"
1181       linecolor: "rgb(238, 238, 238)"
1182       linewidth: 1
1183       range: []
1184       showgrid: True
1185       showline: True
1186       showticklabels: True
1187       tickcolor: "rgb(238, 238, 238)"
1188       title: "Packets Per Second [pps]"
1189       zeroline: False
1190     boxmode: "group"
1191     boxgroupgap: 0.5
1192     autosize: False
1193     margin:
1194       t: 50
1195       b: 20
1196       l: 50
1197       r: 20
1198     showlegend: True
1199     legend:
1200       orientation: "h"
1201     width: 700
1202     height: 1000
1203
1204 -
1205   type: "plot"
1206   title: "VPP Performance 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1207   algorithm: "plot_performance_box"
1208   output-file-type: ".html"
1209   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-pdrdisc"
1210   data:
1211     csit-vpp-perf-1710-all:
1212     - 2
1213     - 5
1214   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1215   parameters:
1216   - "throughput"
1217   - "parent"
1218   traces:
1219     hoverinfo: "x+y"
1220     boxpoints: "outliers"
1221     whiskerwidth: 0
1222   layout:
1223     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1224     xaxis:
1225       autorange: True
1226       autotick: False
1227       fixedrange: False
1228       gridcolor: "rgb(238, 238, 238)"
1229       linecolor: "rgb(238, 238, 238)"
1230       linewidth: 1
1231       showgrid: True
1232       showline: True
1233       showticklabels: True
1234       tickcolor: "rgb(238, 238, 238)"
1235       tickmode: "linear"
1236       title: "Indexed Test Cases"
1237       zeroline: False
1238     yaxis:
1239       gridcolor: "rgb(238, 238, 238)'"
1240       hoverformat: ".4s"
1241       linecolor: "rgb(238, 238, 238)"
1242       linewidth: 1
1243       range: []
1244       showgrid: True
1245       showline: True
1246       showticklabels: True
1247       tickcolor: "rgb(238, 238, 238)"
1248       title: "Packets Per Second [pps]"
1249       zeroline: False
1250     boxmode: "group"
1251     boxgroupgap: 0.5
1252     autosize: False
1253     margin:
1254       t: 50
1255       b: 20
1256       l: 50
1257       r: 20
1258     showlegend: True
1259     legend:
1260       orientation: "h"
1261     width: 700
1262     height: 1000
1263
1264 -
1265   type: "plot"
1266   title: "VPP Performance 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1267   algorithm: "plot_performance_box"
1268   output-file-type: ".html"
1269   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-pdrdisc"
1270   data:
1271     csit-vpp-perf-1710-all:
1272     - 2
1273     - 5
1274   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1275   parameters:
1276   - "throughput"
1277   - "parent"
1278   traces:
1279     hoverinfo: "x+y"
1280     boxpoints: "outliers"
1281     whiskerwidth: 0
1282   layout:
1283     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1284     xaxis:
1285       autorange: True
1286       autotick: False
1287       fixedrange: False
1288       gridcolor: "rgb(238, 238, 238)"
1289       linecolor: "rgb(238, 238, 238)"
1290       linewidth: 1
1291       showgrid: True
1292       showline: True
1293       showticklabels: True
1294       tickcolor: "rgb(238, 238, 238)"
1295       tickmode: "linear"
1296       title: "Indexed Test Cases"
1297       zeroline: False
1298     yaxis:
1299       gridcolor: "rgb(238, 238, 238)'"
1300       hoverformat: ".4s"
1301       linecolor: "rgb(238, 238, 238)"
1302       linewidth: 1
1303       range: []
1304       showgrid: True
1305       showline: True
1306       showticklabels: True
1307       tickcolor: "rgb(238, 238, 238)"
1308       title: "Packets Per Second [pps]"
1309       zeroline: False
1310     boxmode: "group"
1311     boxgroupgap: 0.5
1312     autosize: False
1313     margin:
1314       t: 50
1315       b: 20
1316       l: 50
1317       r: 20
1318     showlegend: True
1319     legend:
1320       orientation: "h"
1321     width: 700
1322     height: 1000
1323
1324 # VPP IP6
1325 -
1326   type: "plot"
1327   title: "VPP Performance 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1328   algorithm: "plot_performance_box"
1329   output-file-type: ".html"
1330   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-ndrdisc"
1331   data:
1332     csit-vpp-perf-1710-all:
1333     - 2
1334     - 5
1335   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1336   parameters:
1337   - "throughput"
1338   - "parent"
1339   traces:
1340     hoverinfo: "x+y"
1341     boxpoints: "outliers"
1342     whiskerwidth: 0
1343   layout:
1344     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1345     xaxis:
1346       autorange: True
1347       autotick: False
1348       fixedrange: False
1349       gridcolor: "rgb(238, 238, 238)"
1350       linecolor: "rgb(238, 238, 238)"
1351       linewidth: 1
1352       showgrid: True
1353       showline: True
1354       showticklabels: True
1355       tickcolor: "rgb(238, 238, 238)"
1356       tickmode: "linear"
1357       title: "Indexed Test Cases"
1358       zeroline: False
1359     yaxis:
1360       gridcolor: "rgb(238, 238, 238)'"
1361       hoverformat: ".4s"
1362       linecolor: "rgb(238, 238, 238)"
1363       linewidth: 1
1364       range: []
1365       showgrid: True
1366       showline: True
1367       showticklabels: True
1368       tickcolor: "rgb(238, 238, 238)"
1369       title: "Packets Per Second [pps]"
1370       zeroline: False
1371     boxmode: "group"
1372     boxgroupgap: 0.5
1373     autosize: False
1374     margin:
1375       t: 50
1376       b: 20
1377       l: 50
1378       r: 20
1379     showlegend: True
1380     legend:
1381       orientation: "h"
1382     width: 700
1383     height: 1000
1384
1385 -
1386   type: "plot"
1387   title: "VPP Performance 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1388   algorithm: "plot_performance_box"
1389   output-file-type: ".html"
1390   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-ndrdisc"
1391   data:
1392     csit-vpp-perf-1710-all:
1393     - 2
1394     - 5
1395   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1396   parameters:
1397   - "throughput"
1398   - "parent"
1399   traces:
1400     hoverinfo: "x+y"
1401     boxpoints: "outliers"
1402     whiskerwidth: 0
1403   layout:
1404     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1405     xaxis:
1406       autorange: True
1407       autotick: False
1408       fixedrange: False
1409       gridcolor: "rgb(238, 238, 238)"
1410       linecolor: "rgb(238, 238, 238)"
1411       linewidth: 1
1412       showgrid: True
1413       showline: True
1414       showticklabels: True
1415       tickcolor: "rgb(238, 238, 238)"
1416       tickmode: "linear"
1417       title: "Indexed Test Cases"
1418       zeroline: False
1419     yaxis:
1420       gridcolor: "rgb(238, 238, 238)'"
1421       hoverformat: ".4s"
1422       linecolor: "rgb(238, 238, 238)"
1423       linewidth: 1
1424       range: []
1425       showgrid: True
1426       showline: True
1427       showticklabels: True
1428       tickcolor: "rgb(238, 238, 238)"
1429       title: "Packets Per Second [pps]"
1430       zeroline: False
1431     boxmode: "group"
1432     boxgroupgap: 0.5
1433     autosize: False
1434     margin:
1435       t: 50
1436       b: 20
1437       l: 50
1438       r: 20
1439     showlegend: True
1440     legend:
1441       orientation: "h"
1442     width: 700
1443     height: 1000
1444
1445 -
1446   type: "plot"
1447   title: "VPP Performance 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1448   algorithm: "plot_performance_box"
1449   output-file-type: ".html"
1450   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-pdrdisc"
1451   data:
1452     csit-vpp-perf-1710-all:
1453     - 2
1454     - 5
1455   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1456   parameters:
1457   - "throughput"
1458   - "parent"
1459   traces:
1460     hoverinfo: "x+y"
1461     boxpoints: "outliers"
1462     whiskerwidth: 0
1463   layout:
1464     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1465     xaxis:
1466       autorange: True
1467       autotick: False
1468       fixedrange: False
1469       gridcolor: "rgb(238, 238, 238)"
1470       linecolor: "rgb(238, 238, 238)"
1471       linewidth: 1
1472       showgrid: True
1473       showline: True
1474       showticklabels: True
1475       tickcolor: "rgb(238, 238, 238)"
1476       tickmode: "linear"
1477       title: "Indexed Test Cases"
1478       zeroline: False
1479     yaxis:
1480       gridcolor: "rgb(238, 238, 238)'"
1481       hoverformat: ".4s"
1482       linecolor: "rgb(238, 238, 238)"
1483       linewidth: 1
1484       range: []
1485       showgrid: True
1486       showline: True
1487       showticklabels: True
1488       tickcolor: "rgb(238, 238, 238)"
1489       title: "Packets Per Second [pps]"
1490       zeroline: False
1491     boxmode: "group"
1492     boxgroupgap: 0.5
1493     autosize: False
1494     margin:
1495       t: 50
1496       b: 20
1497       l: 50
1498       r: 20
1499     showlegend: True
1500     legend:
1501       orientation: "h"
1502     width: 700
1503     height: 1000
1504
1505 -
1506   type: "plot"
1507   title: "VPP Performance 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1508   algorithm: "plot_performance_box"
1509   output-file-type: ".html"
1510   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-pdrdisc"
1511   data:
1512     csit-vpp-perf-1710-all:
1513     - 2
1514     - 5
1515   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1516   parameters:
1517   - "throughput"
1518   - "parent"
1519   traces:
1520     hoverinfo: "x+y"
1521     boxpoints: "outliers"
1522     whiskerwidth: 0
1523   layout:
1524     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1525     xaxis:
1526       autorange: True
1527       autotick: False
1528       fixedrange: False
1529       gridcolor: "rgb(238, 238, 238)"
1530       linecolor: "rgb(238, 238, 238)"
1531       linewidth: 1
1532       showgrid: True
1533       showline: True
1534       showticklabels: True
1535       tickcolor: "rgb(238, 238, 238)"
1536       tickmode: "linear"
1537       title: "Indexed Test Cases"
1538       zeroline: False
1539     yaxis:
1540       gridcolor: "rgb(238, 238, 238)'"
1541       hoverformat: ".4s"
1542       linecolor: "rgb(238, 238, 238)"
1543       linewidth: 1
1544       range: []
1545       showgrid: True
1546       showline: True
1547       showticklabels: True
1548       tickcolor: "rgb(238, 238, 238)"
1549       title: "Packets Per Second [pps]"
1550       zeroline: False
1551     boxmode: "group"
1552     boxgroupgap: 0.5
1553     autosize: False
1554     margin:
1555       t: 50
1556       b: 20
1557       l: 50
1558       r: 20
1559     showlegend: True
1560     legend:
1561       orientation: "h"
1562     width: 700
1563     height: 1000
1564
1565 # VPP IP4_overlay
1566 -
1567   type: "plot"
1568   title: "VPP Performance 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1569   algorithm: "plot_performance_box"
1570   output-file-type: ".html"
1571   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ndrdisc"
1572   data:
1573     csit-vpp-perf-1710-all:
1574     - 2
1575     - 5
1576   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1577   parameters:
1578   - "throughput"
1579   - "parent"
1580   traces:
1581     hoverinfo: "x+y"
1582     boxpoints: "outliers"
1583     whiskerwidth: 0
1584   layout:
1585     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1586     xaxis:
1587       autorange: True
1588       autotick: False
1589       fixedrange: False
1590       gridcolor: "rgb(238, 238, 238)"
1591       linecolor: "rgb(238, 238, 238)"
1592       linewidth: 1
1593       showgrid: True
1594       showline: True
1595       showticklabels: True
1596       tickcolor: "rgb(238, 238, 238)"
1597       tickmode: "linear"
1598       title: "Indexed Test Cases"
1599       zeroline: False
1600     yaxis:
1601       gridcolor: "rgb(238, 238, 238)'"
1602       hoverformat: ".4s"
1603       linecolor: "rgb(238, 238, 238)"
1604       linewidth: 1
1605       range: []
1606       showgrid: True
1607       showline: True
1608       showticklabels: True
1609       tickcolor: "rgb(238, 238, 238)"
1610       title: "Packets Per Second [pps]"
1611       zeroline: False
1612     boxmode: "group"
1613     boxgroupgap: 0.5
1614     autosize: False
1615     margin:
1616       t: 50
1617       b: 20
1618       l: 50
1619       r: 20
1620     showlegend: True
1621     legend:
1622       orientation: "h"
1623     width: 700
1624     height: 1000
1625
1626 -
1627   type: "plot"
1628   title: "VPP Performance 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1629   algorithm: "plot_performance_box"
1630   output-file-type: ".html"
1631   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ndrdisc"
1632   data:
1633     csit-vpp-perf-1710-all:
1634     - 2
1635     - 5
1636   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1637   parameters:
1638   - "throughput"
1639   - "parent"
1640   traces:
1641     hoverinfo: "x+y"
1642     boxpoints: "outliers"
1643     whiskerwidth: 0
1644   layout:
1645     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1646     xaxis:
1647       autorange: True
1648       autotick: False
1649       fixedrange: False
1650       gridcolor: "rgb(238, 238, 238)"
1651       linecolor: "rgb(238, 238, 238)"
1652       linewidth: 1
1653       showgrid: True
1654       showline: True
1655       showticklabels: True
1656       tickcolor: "rgb(238, 238, 238)"
1657       tickmode: "linear"
1658       title: "Indexed Test Cases"
1659       zeroline: False
1660     yaxis:
1661       gridcolor: "rgb(238, 238, 238)'"
1662       hoverformat: ".4s"
1663       linecolor: "rgb(238, 238, 238)"
1664       linewidth: 1
1665       range: []
1666       showgrid: True
1667       showline: True
1668       showticklabels: True
1669       tickcolor: "rgb(238, 238, 238)"
1670       title: "Packets Per Second [pps]"
1671       zeroline: False
1672     boxmode: "group"
1673     boxgroupgap: 0.5
1674     autosize: False
1675     margin:
1676       t: 50
1677       b: 20
1678       l: 50
1679       r: 20
1680     showlegend: True
1681     legend:
1682       orientation: "h"
1683     width: 700
1684     height: 1000
1685
1686 -
1687   type: "plot"
1688   title: "VPP Performance 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1689   algorithm: "plot_performance_box"
1690   output-file-type: ".html"
1691   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-pdrdisc"
1692   data:
1693     csit-vpp-perf-1710-all:
1694     - 2
1695     - 5
1696   filter: "'64B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1697   parameters:
1698   - "throughput"
1699   - "parent"
1700   traces:
1701     hoverinfo: "x+y"
1702     boxpoints: "outliers"
1703     whiskerwidth: 0
1704   layout:
1705     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1706     xaxis:
1707       autorange: True
1708       autotick: False
1709       fixedrange: False
1710       gridcolor: "rgb(238, 238, 238)"
1711       linecolor: "rgb(238, 238, 238)"
1712       linewidth: 1
1713       showgrid: True
1714       showline: True
1715       showticklabels: True
1716       tickcolor: "rgb(238, 238, 238)"
1717       tickmode: "linear"
1718       title: "Indexed Test Cases"
1719       zeroline: False
1720     yaxis:
1721       gridcolor: "rgb(238, 238, 238)'"
1722       hoverformat: ".4s"
1723       linecolor: "rgb(238, 238, 238)"
1724       linewidth: 1
1725       range: []
1726       showgrid: True
1727       showline: True
1728       showticklabels: True
1729       tickcolor: "rgb(238, 238, 238)"
1730       title: "Packets Per Second [pps]"
1731       zeroline: False
1732     boxmode: "group"
1733     boxgroupgap: 0.5
1734     autosize: False
1735     margin:
1736       t: 50
1737       b: 20
1738       l: 50
1739       r: 20
1740     showlegend: True
1741     legend:
1742       orientation: "h"
1743     width: 700
1744     height: 1000
1745
1746 -
1747   type: "plot"
1748   title: "VPP Performance 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1749   algorithm: "plot_performance_box"
1750   output-file-type: ".html"
1751   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-pdrdisc"
1752   data:
1753     csit-vpp-perf-1710-all:
1754     - 2
1755     - 5
1756   filter: "'64B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1757   parameters:
1758   - "throughput"
1759   - "parent"
1760   traces:
1761     hoverinfo: "x+y"
1762     boxpoints: "outliers"
1763     whiskerwidth: 0
1764   layout:
1765     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1766     xaxis:
1767       autorange: True
1768       autotick: False
1769       fixedrange: False
1770       gridcolor: "rgb(238, 238, 238)"
1771       linecolor: "rgb(238, 238, 238)"
1772       linewidth: 1
1773       showgrid: True
1774       showline: True
1775       showticklabels: True
1776       tickcolor: "rgb(238, 238, 238)"
1777       tickmode: "linear"
1778       title: "Indexed Test Cases"
1779       zeroline: False
1780     yaxis:
1781       gridcolor: "rgb(238, 238, 238)'"
1782       hoverformat: ".4s"
1783       linecolor: "rgb(238, 238, 238)"
1784       linewidth: 1
1785       range: []
1786       showgrid: True
1787       showline: True
1788       showticklabels: True
1789       tickcolor: "rgb(238, 238, 238)"
1790       title: "Packets Per Second [pps]"
1791       zeroline: False
1792     boxmode: "group"
1793     boxgroupgap: 0.5
1794     autosize: False
1795     margin:
1796       t: 50
1797       b: 20
1798       l: 50
1799       r: 20
1800     showlegend: True
1801     legend:
1802       orientation: "h"
1803     width: 700
1804     height: 1000
1805
1806 # VPP IP6_overlay
1807 -
1808   type: "plot"
1809   title: "VPP Performance 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1810   algorithm: "plot_performance_box"
1811   output-file-type: ".html"
1812   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ndrdisc"
1813   data:
1814     csit-vpp-perf-1710-all:
1815     - 2
1816     - 5
1817   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1818   parameters:
1819   - "throughput"
1820   - "parent"
1821   traces:
1822     hoverinfo: "x+y"
1823     boxpoints: "outliers"
1824     whiskerwidth: 0
1825   layout:
1826     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1827     xaxis:
1828       autorange: True
1829       autotick: False
1830       fixedrange: False
1831       gridcolor: "rgb(238, 238, 238)"
1832       linecolor: "rgb(238, 238, 238)"
1833       linewidth: 1
1834       showgrid: True
1835       showline: True
1836       showticklabels: True
1837       tickcolor: "rgb(238, 238, 238)"
1838       tickmode: "linear"
1839       title: "Indexed Test Cases"
1840       zeroline: False
1841     yaxis:
1842       gridcolor: "rgb(238, 238, 238)'"
1843       hoverformat: ".4s"
1844       linecolor: "rgb(238, 238, 238)"
1845       linewidth: 1
1846       range: []
1847       showgrid: True
1848       showline: True
1849       showticklabels: True
1850       tickcolor: "rgb(238, 238, 238)"
1851       title: "Packets Per Second [pps]"
1852       zeroline: False
1853     boxmode: "group"
1854     boxgroupgap: 0.5
1855     autosize: False
1856     margin:
1857       t: 50
1858       b: 20
1859       l: 50
1860       r: 20
1861     showlegend: True
1862     legend:
1863       orientation: "h"
1864     width: 700
1865     height: 1000
1866
1867 -
1868   type: "plot"
1869   title: "VPP Performance 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1870   algorithm: "plot_performance_box"
1871   output-file-type: ".html"
1872   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ndrdisc"
1873   data:
1874     csit-vpp-perf-1710-all:
1875     - 2
1876     - 5
1877   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1878   parameters:
1879   - "throughput"
1880   - "parent"
1881   traces:
1882     hoverinfo: "x+y"
1883     boxpoints: "outliers"
1884     whiskerwidth: 0
1885   layout:
1886     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1887     xaxis:
1888       autorange: True
1889       autotick: False
1890       fixedrange: False
1891       gridcolor: "rgb(238, 238, 238)"
1892       linecolor: "rgb(238, 238, 238)"
1893       linewidth: 1
1894       showgrid: True
1895       showline: True
1896       showticklabels: True
1897       tickcolor: "rgb(238, 238, 238)"
1898       tickmode: "linear"
1899       title: "Indexed Test Cases"
1900       zeroline: False
1901     yaxis:
1902       gridcolor: "rgb(238, 238, 238)'"
1903       hoverformat: ".4s"
1904       linecolor: "rgb(238, 238, 238)"
1905       linewidth: 1
1906       range: []
1907       showgrid: True
1908       showline: True
1909       showticklabels: True
1910       tickcolor: "rgb(238, 238, 238)"
1911       title: "Packets Per Second [pps]"
1912       zeroline: False
1913     boxmode: "group"
1914     boxgroupgap: 0.5
1915     autosize: False
1916     margin:
1917       t: 50
1918       b: 20
1919       l: 50
1920       r: 20
1921     showlegend: True
1922     legend:
1923       orientation: "h"
1924     width: 700
1925     height: 1000
1926
1927 -
1928   type: "plot"
1929   title: "VPP Performance 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1930   algorithm: "plot_performance_box"
1931   output-file-type: ".html"
1932   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-pdrdisc"
1933   data:
1934     csit-vpp-perf-1710-all:
1935     - 2
1936     - 5
1937   filter: "'78B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1938   parameters:
1939   - "throughput"
1940   - "parent"
1941   traces:
1942     hoverinfo: "x+y"
1943     boxpoints: "outliers"
1944     whiskerwidth: 0
1945   layout:
1946     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1947     xaxis:
1948       autorange: True
1949       autotick: False
1950       fixedrange: False
1951       gridcolor: "rgb(238, 238, 238)"
1952       linecolor: "rgb(238, 238, 238)"
1953       linewidth: 1
1954       showgrid: True
1955       showline: True
1956       showticklabels: True
1957       tickcolor: "rgb(238, 238, 238)"
1958       tickmode: "linear"
1959       title: "Indexed Test Cases"
1960       zeroline: False
1961     yaxis:
1962       gridcolor: "rgb(238, 238, 238)'"
1963       hoverformat: ".4s"
1964       linecolor: "rgb(238, 238, 238)"
1965       linewidth: 1
1966       range: []
1967       showgrid: True
1968       showline: True
1969       showticklabels: True
1970       tickcolor: "rgb(238, 238, 238)"
1971       title: "Packets Per Second [pps]"
1972       zeroline: False
1973     boxmode: "group"
1974     boxgroupgap: 0.5
1975     autosize: False
1976     margin:
1977       t: 50
1978       b: 20
1979       l: 50
1980       r: 20
1981     showlegend: True
1982     legend:
1983       orientation: "h"
1984     width: 700
1985     height: 1000
1986
1987 -
1988   type: "plot"
1989   title: "VPP Performance 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1990   algorithm: "plot_performance_box"
1991   output-file-type: ".html"
1992   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-pdrdisc"
1993   data:
1994     csit-vpp-perf-1710-all:
1995     - 2
1996     - 5
1997   filter: "'78B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1998   parameters:
1999   - "throughput"
2000   - "parent"
2001   traces:
2002     hoverinfo: "x+y"
2003     boxpoints: "outliers"
2004     whiskerwidth: 0
2005   layout:
2006     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
2007     xaxis:
2008       autorange: True
2009       autotick: False
2010       fixedrange: False
2011       gridcolor: "rgb(238, 238, 238)"
2012       linecolor: "rgb(238, 238, 238)"
2013       linewidth: 1
2014       showgrid: True
2015       showline: True
2016       showticklabels: True
2017       tickcolor: "rgb(238, 238, 238)"
2018       tickmode: "linear"
2019       title: "Indexed Test Cases"
2020       zeroline: False
2021     yaxis:
2022       gridcolor: "rgb(238, 238, 238)'"
2023       hoverformat: ".4s"
2024       linecolor: "rgb(238, 238, 238)"
2025       linewidth: 1
2026       range: []
2027       showgrid: True
2028       showline: True
2029       showticklabels: True
2030       tickcolor: "rgb(238, 238, 238)"
2031       title: "Packets Per Second [pps]"
2032       zeroline: False
2033     boxmode: "group"
2034     boxgroupgap: 0.5
2035     autosize: False
2036     margin:
2037       t: 50
2038       b: 20
2039       l: 50
2040       r: 20
2041     showlegend: True
2042     legend:
2043       orientation: "h"
2044     width: 700
2045     height: 1000
2046
2047 # VPP VM VHOST
2048 -
2049   type: "plot"
2050   title: "VPP Performance 64B-1t1c-.*vhost.*-ndrdisc"
2051   algorithm: "plot_performance_box"
2052   output-file-type: ".html"
2053   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-ndrdisc"
2054   data:
2055     csit-vpp-perf-1710-all:
2056     - 2
2057     - 5
2058   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2059   parameters:
2060   - "throughput"
2061   - "parent"
2062   traces:
2063     hoverinfo: "x+y"
2064     boxpoints: "outliers"
2065     whiskerwidth: 0
2066   layout:
2067     title: "64B-1t1c-.*vhost.*-ndrdisc"
2068     xaxis:
2069       autorange: True
2070       autotick: False
2071       fixedrange: False
2072       gridcolor: "rgb(238, 238, 238)"
2073       linecolor: "rgb(238, 238, 238)"
2074       linewidth: 1
2075       showgrid: True
2076       showline: True
2077       showticklabels: True
2078       tickcolor: "rgb(238, 238, 238)"
2079       tickmode: "linear"
2080       title: "Indexed Test Cases"
2081       zeroline: False
2082     yaxis:
2083       gridcolor: "rgb(238, 238, 238)'"
2084       hoverformat: ".4s"
2085       linecolor: "rgb(238, 238, 238)"
2086       linewidth: 1
2087       range: []
2088       showgrid: True
2089       showline: True
2090       showticklabels: True
2091       tickcolor: "rgb(238, 238, 238)"
2092       title: "Packets Per Second [pps]"
2093       zeroline: False
2094     boxmode: "group"
2095     boxgroupgap: 0.5
2096     autosize: False
2097     margin:
2098       t: 50
2099       b: 20
2100       l: 50
2101       r: 20
2102     showlegend: True
2103     legend:
2104       orientation: "h"
2105     width: 700
2106     height: 1000
2107
2108 -
2109   type: "plot"
2110   title: "VPP Performance 64B-2t2c-.*vhost.*-ndrdisc"
2111   algorithm: "plot_performance_box"
2112   output-file-type: ".html"
2113   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-ndrdisc"
2114   data:
2115     csit-vpp-perf-1710-all:
2116     - 2
2117     - 5
2118   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2119   parameters:
2120   - "throughput"
2121   - "parent"
2122   traces:
2123     hoverinfo: "x+y"
2124     boxpoints: "outliers"
2125     whiskerwidth: 0
2126   layout:
2127     title: "64B-2t2c-.*vhost.*-ndrdisc"
2128     xaxis:
2129       autorange: True
2130       autotick: False
2131       fixedrange: False
2132       gridcolor: "rgb(238, 238, 238)"
2133       linecolor: "rgb(238, 238, 238)"
2134       linewidth: 1
2135       showgrid: True
2136       showline: True
2137       showticklabels: True
2138       tickcolor: "rgb(238, 238, 238)"
2139       tickmode: "linear"
2140       title: "Indexed Test Cases"
2141       zeroline: False
2142     yaxis:
2143       gridcolor: "rgb(238, 238, 238)'"
2144       hoverformat: ".4s"
2145       linecolor: "rgb(238, 238, 238)"
2146       linewidth: 1
2147       range: []
2148       showgrid: True
2149       showline: True
2150       showticklabels: True
2151       tickcolor: "rgb(238, 238, 238)"
2152       title: "Packets Per Second [pps]"
2153       zeroline: False
2154     boxmode: "group"
2155     boxgroupgap: 0.5
2156     autosize: False
2157     margin:
2158       t: 50
2159       b: 20
2160       l: 50
2161       r: 20
2162     showlegend: True
2163     legend:
2164       orientation: "h"
2165     width: 700
2166     height: 1000
2167
2168 -
2169   type: "plot"
2170   title: "VPP Performance 64B-1t1c-.*vhost.*-pdrdisc"
2171   algorithm: "plot_performance_box"
2172   output-file-type: ".html"
2173   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-pdrdisc"
2174   data:
2175     csit-vpp-perf-1710-all:
2176     - 2
2177     - 5
2178   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2179   parameters:
2180   - "throughput"
2181   - "parent"
2182   traces:
2183     hoverinfo: "x+y"
2184     boxpoints: "outliers"
2185     whiskerwidth: 0
2186   layout:
2187     title: "64B-1t1c-.*vhost.*-pdrdisc"
2188     xaxis:
2189       autorange: True
2190       autotick: False
2191       fixedrange: False
2192       gridcolor: "rgb(238, 238, 238)"
2193       linecolor: "rgb(238, 238, 238)"
2194       linewidth: 1
2195       showgrid: True
2196       showline: True
2197       showticklabels: True
2198       tickcolor: "rgb(238, 238, 238)"
2199       tickmode: "linear"
2200       title: "Indexed Test Cases"
2201       zeroline: False
2202     yaxis:
2203       gridcolor: "rgb(238, 238, 238)'"
2204       hoverformat: ".4s"
2205       linecolor: "rgb(238, 238, 238)"
2206       linewidth: 1
2207       range: []
2208       showgrid: True
2209       showline: True
2210       showticklabels: True
2211       tickcolor: "rgb(238, 238, 238)"
2212       title: "Packets Per Second [pps]"
2213       zeroline: False
2214     boxmode: "group"
2215     boxgroupgap: 0.5
2216     autosize: False
2217     margin:
2218       t: 50
2219       b: 20
2220       l: 50
2221       r: 20
2222     showlegend: True
2223     legend:
2224       orientation: "h"
2225     width: 700
2226     height: 1000
2227
2228 -
2229   type: "plot"
2230   title: "VPP Performance 64B-2t2c-.*vhost.*-pdrdisc"
2231   algorithm: "plot_performance_box"
2232   output-file-type: ".html"
2233   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-pdrdisc"
2234   data:
2235     csit-vpp-perf-1710-all:
2236     - 2
2237     - 5
2238   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2239   parameters:
2240   - "throughput"
2241   - "parent"
2242   traces:
2243     hoverinfo: "x+y"
2244     boxpoints: "outliers"
2245     whiskerwidth: 0
2246   layout:
2247     title: "64B-2t2c-.*vhost.*-pdrdisc"
2248     xaxis:
2249       autorange: True
2250       autotick: False
2251       fixedrange: False
2252       gridcolor: "rgb(238, 238, 238)"
2253       linecolor: "rgb(238, 238, 238)"
2254       linewidth: 1
2255       showgrid: True
2256       showline: True
2257       showticklabels: True
2258       tickcolor: "rgb(238, 238, 238)"
2259       tickmode: "linear"
2260       title: "Indexed Test Cases"
2261       zeroline: False
2262     yaxis:
2263       gridcolor: "rgb(238, 238, 238)'"
2264       hoverformat: ".4s"
2265       linecolor: "rgb(238, 238, 238)"
2266       linewidth: 1
2267       range: []
2268       showgrid: True
2269       showline: True
2270       showticklabels: True
2271       tickcolor: "rgb(238, 238, 238)"
2272       title: "Packets Per Second [pps]"
2273       zeroline: False
2274     boxmode: "group"
2275     boxgroupgap: 0.5
2276     autosize: False
2277     margin:
2278       t: 50
2279       b: 20
2280       l: 50
2281       r: 20
2282     showlegend: True
2283     legend:
2284       orientation: "h"
2285     width: 700
2286     height: 1000
2287
2288 # VPP VM VHOST SELECTION
2289 -
2290   type: "plot"
2291   title: "VPP Performance 64B-1t1c-.*vhost.*-ndrdisc"
2292   algorithm: "plot_performance_box"
2293   output-file-type: ".html"
2294   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-ndrdisc"
2295   data:
2296     csit-vpp-perf-1710-all:
2297     - 2
2298     - 5
2299   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2300   parameters:
2301   - "throughput"
2302   - "parent"
2303   traces:
2304     hoverinfo: "x+y"
2305     boxpoints: "outliers"
2306     whiskerwidth: 0
2307   layout:
2308     title: "64B-1t1c-.*vhost.*-ndrdisc"
2309     xaxis:
2310       autorange: True
2311       autotick: False
2312       fixedrange: False
2313       gridcolor: "rgb(238, 238, 238)"
2314       linecolor: "rgb(238, 238, 238)"
2315       linewidth: 1
2316       showgrid: True
2317       showline: True
2318       showticklabels: True
2319       tickcolor: "rgb(238, 238, 238)"
2320       tickmode: "linear"
2321       title: "Indexed Test Cases"
2322       zeroline: False
2323     yaxis:
2324       gridcolor: "rgb(238, 238, 238)'"
2325       hoverformat: ".4s"
2326       linecolor: "rgb(238, 238, 238)"
2327       linewidth: 1
2328       range: []
2329       showgrid: True
2330       showline: True
2331       showticklabels: True
2332       tickcolor: "rgb(238, 238, 238)"
2333       title: "Packets Per Second [pps]"
2334       zeroline: False
2335     boxmode: "group"
2336     boxgroupgap: 0.5
2337     autosize: False
2338     margin:
2339       t: 50
2340       b: 20
2341       l: 50
2342       r: 20
2343     showlegend: True
2344     legend:
2345       orientation: "h"
2346     width: 700
2347     height: 1000
2348
2349 -
2350   type: "plot"
2351   title: "VPP Performance 64B-2t2c-.*vhost.*-ndrdisc"
2352   algorithm: "plot_performance_box"
2353   output-file-type: ".html"
2354   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-ndrdisc"
2355   data:
2356     csit-vpp-perf-1710-all:
2357     - 2
2358     - 5
2359   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2360   parameters:
2361   - "throughput"
2362   - "parent"
2363   traces:
2364     hoverinfo: "x+y"
2365     boxpoints: "outliers"
2366     whiskerwidth: 0
2367   layout:
2368     title: "64B-2t2c-.*vhost.*-ndrdisc"
2369     xaxis:
2370       autorange: True
2371       autotick: False
2372       fixedrange: False
2373       gridcolor: "rgb(238, 238, 238)"
2374       linecolor: "rgb(238, 238, 238)"
2375       linewidth: 1
2376       showgrid: True
2377       showline: True
2378       showticklabels: True
2379       tickcolor: "rgb(238, 238, 238)"
2380       tickmode: "linear"
2381       title: "Indexed Test Cases"
2382       zeroline: False
2383     yaxis:
2384       gridcolor: "rgb(238, 238, 238)'"
2385       hoverformat: ".4s"
2386       linecolor: "rgb(238, 238, 238)"
2387       linewidth: 1
2388       range: []
2389       showgrid: True
2390       showline: True
2391       showticklabels: True
2392       tickcolor: "rgb(238, 238, 238)"
2393       title: "Packets Per Second [pps]"
2394       zeroline: False
2395     boxmode: "group"
2396     boxgroupgap: 0.5
2397     autosize: False
2398     margin:
2399       t: 50
2400       b: 20
2401       l: 50
2402       r: 20
2403     showlegend: True
2404     legend:
2405       orientation: "h"
2406     width: 700
2407     height: 1000
2408
2409 -
2410   type: "plot"
2411   title: "VPP Performance 64B-1t1c-.*vhost.*-pdrdisc"
2412   algorithm: "plot_performance_box"
2413   output-file-type: ".html"
2414   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-pdrdisc"
2415   data:
2416     csit-vpp-perf-1710-all:
2417     - 2
2418     - 5
2419   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2420   parameters:
2421   - "throughput"
2422   - "parent"
2423   traces:
2424     hoverinfo: "x+y"
2425     boxpoints: "outliers"
2426     whiskerwidth: 0
2427   layout:
2428     title: "64B-1t1c-.*vhost.*-pdrdisc"
2429     xaxis:
2430       autorange: True
2431       autotick: False
2432       fixedrange: False
2433       gridcolor: "rgb(238, 238, 238)"
2434       linecolor: "rgb(238, 238, 238)"
2435       linewidth: 1
2436       showgrid: True
2437       showline: True
2438       showticklabels: True
2439       tickcolor: "rgb(238, 238, 238)"
2440       tickmode: "linear"
2441       title: "Indexed Test Cases"
2442       zeroline: False
2443     yaxis:
2444       gridcolor: "rgb(238, 238, 238)'"
2445       hoverformat: ".4s"
2446       linecolor: "rgb(238, 238, 238)"
2447       linewidth: 1
2448       range: []
2449       showgrid: True
2450       showline: True
2451       showticklabels: True
2452       tickcolor: "rgb(238, 238, 238)"
2453       title: "Packets Per Second [pps]"
2454       zeroline: False
2455     boxmode: "group"
2456     boxgroupgap: 0.5
2457     autosize: False
2458     margin:
2459       t: 50
2460       b: 20
2461       l: 50
2462       r: 20
2463     showlegend: True
2464     legend:
2465       orientation: "h"
2466     width: 700
2467     height: 1000
2468
2469 -
2470   type: "plot"
2471   title: "VPP Performance 64B-2t2c-.*vhost.*-pdrdisc"
2472   algorithm: "plot_performance_box"
2473   output-file-type: ".html"
2474   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-pdrdisc"
2475   data:
2476     csit-vpp-perf-1710-all:
2477     - 2
2478     - 5
2479   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2480   parameters:
2481   - "throughput"
2482   - "parent"
2483   traces:
2484     hoverinfo: "x+y"
2485     boxpoints: "outliers"
2486     whiskerwidth: 0
2487   layout:
2488     title: "64B-2t2c-.*vhost.*-pdrdisc"
2489     xaxis:
2490       autorange: True
2491       autotick: False
2492       fixedrange: False
2493       gridcolor: "rgb(238, 238, 238)"
2494       linecolor: "rgb(238, 238, 238)"
2495       linewidth: 1
2496       showgrid: True
2497       showline: True
2498       showticklabels: True
2499       tickcolor: "rgb(238, 238, 238)"
2500       tickmode: "linear"
2501       title: "Indexed Test Cases"
2502       zeroline: False
2503     yaxis:
2504       gridcolor: "rgb(238, 238, 238)'"
2505       hoverformat: ".4s"
2506       linecolor: "rgb(238, 238, 238)"
2507       linewidth: 1
2508       range: []
2509       showgrid: True
2510       showline: True
2511       showticklabels: True
2512       tickcolor: "rgb(238, 238, 238)"
2513       title: "Packets Per Second [pps]"
2514       zeroline: False
2515     boxmode: "group"
2516     boxgroupgap: 0.5
2517     autosize: False
2518     margin:
2519       t: 50
2520       b: 20
2521       l: 50
2522       r: 20
2523     showlegend: True
2524     legend:
2525       orientation: "h"
2526     width: 700
2527     height: 1000
2528
2529 # VPP CRYPTO
2530 -
2531   type: "plot"
2532   title: "VPP Performance 64B-1t1c-.*ipsec.*-ndrdisc"
2533   algorithm: "plot_performance_box"
2534   output-file-type: ".html"
2535   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-ndrdisc"
2536   data:
2537     csit-vpp-perf-1710-all:
2538     - 2
2539     - 5
2540   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2541   parameters:
2542   - "throughput"
2543   - "parent"
2544   traces:
2545     hoverinfo: "x+y"
2546     boxpoints: "outliers"
2547     whiskerwidth: 0
2548   layout:
2549     title: "64B-1t1c-.*ipsec.*-ndrdisc"
2550     xaxis:
2551       autorange: True
2552       autotick: False
2553       fixedrange: False
2554       gridcolor: "rgb(238, 238, 238)"
2555       linecolor: "rgb(238, 238, 238)"
2556       linewidth: 1
2557       showgrid: True
2558       showline: True
2559       showticklabels: True
2560       tickcolor: "rgb(238, 238, 238)"
2561       tickmode: "linear"
2562       title: "Indexed Test Cases"
2563       zeroline: False
2564     yaxis:
2565       gridcolor: "rgb(238, 238, 238)'"
2566       hoverformat: ".4s"
2567       linecolor: "rgb(238, 238, 238)"
2568       linewidth: 1
2569       range: []
2570       showgrid: True
2571       showline: True
2572       showticklabels: True
2573       tickcolor: "rgb(238, 238, 238)"
2574       title: "Packets Per Second [pps]"
2575       zeroline: False
2576     boxmode: "group"
2577     boxgroupgap: 0.5
2578     autosize: False
2579     margin:
2580       t: 50
2581       b: 20
2582       l: 50
2583       r: 20
2584     showlegend: True
2585     legend:
2586       orientation: "h"
2587     width: 700
2588     height: 1000
2589
2590 -
2591   type: "plot"
2592   title: "VPP Performance 64B-2t2c-.*ipsec.*-ndrdisc"
2593   algorithm: "plot_performance_box"
2594   output-file-type: ".html"
2595   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-ndrdisc"
2596   data:
2597     csit-vpp-perf-1710-all:
2598     - 2
2599     - 5
2600   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2601   parameters:
2602   - "throughput"
2603   - "parent"
2604   traces:
2605     hoverinfo: "x+y"
2606     boxpoints: "outliers"
2607     whiskerwidth: 0
2608   layout:
2609     title: "64B-2t2c-.*ipsec.*-ndrdisc"
2610     xaxis:
2611       autorange: True
2612       autotick: False
2613       fixedrange: False
2614       gridcolor: "rgb(238, 238, 238)"
2615       linecolor: "rgb(238, 238, 238)"
2616       linewidth: 1
2617       showgrid: True
2618       showline: True
2619       showticklabels: True
2620       tickcolor: "rgb(238, 238, 238)"
2621       tickmode: "linear"
2622       title: "Indexed Test Cases"
2623       zeroline: False
2624     yaxis:
2625       gridcolor: "rgb(238, 238, 238)'"
2626       hoverformat: ".4s"
2627       linecolor: "rgb(238, 238, 238)"
2628       linewidth: 1
2629       range: []
2630       showgrid: True
2631       showline: True
2632       showticklabels: True
2633       tickcolor: "rgb(238, 238, 238)"
2634       title: "Packets Per Second [pps]"
2635       zeroline: False
2636     boxmode: "group"
2637     boxgroupgap: 0.5
2638     autosize: False
2639     margin:
2640       t: 50
2641       b: 20
2642       l: 50
2643       r: 20
2644     showlegend: True
2645     legend:
2646       orientation: "h"
2647     width: 700
2648     height: 1000
2649
2650 -
2651   type: "plot"
2652   title: "VPP Performance 64B-1t1c-.*ipsec.*-pdrdisc"
2653   algorithm: "plot_performance_box"
2654   output-file-type: ".html"
2655   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-pdrdisc"
2656   data:
2657     csit-vpp-perf-1710-all:
2658     - 2
2659     - 5
2660   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2661   parameters:
2662   - "throughput"
2663   - "parent"
2664   traces:
2665     hoverinfo: "x+y"
2666     boxpoints: "outliers"
2667     whiskerwidth: 0
2668   layout:
2669     title: "64B-1t1c-.*ipsec.*-pdrdisc"
2670     xaxis:
2671       autorange: True
2672       autotick: False
2673       fixedrange: False
2674       gridcolor: "rgb(238, 238, 238)"
2675       linecolor: "rgb(238, 238, 238)"
2676       linewidth: 1
2677       showgrid: True
2678       showline: True
2679       showticklabels: True
2680       tickcolor: "rgb(238, 238, 238)"
2681       tickmode: "linear"
2682       title: "Indexed Test Cases"
2683       zeroline: False
2684     yaxis:
2685       gridcolor: "rgb(238, 238, 238)'"
2686       hoverformat: ".4s"
2687       linecolor: "rgb(238, 238, 238)"
2688       linewidth: 1
2689       range: []
2690       showgrid: True
2691       showline: True
2692       showticklabels: True
2693       tickcolor: "rgb(238, 238, 238)"
2694       title: "Packets Per Second [pps]"
2695       zeroline: False
2696     boxmode: "group"
2697     boxgroupgap: 0.5
2698     autosize: False
2699     margin:
2700       t: 50
2701       b: 20
2702       l: 50
2703       r: 20
2704     showlegend: True
2705     legend:
2706       orientation: "h"
2707     width: 700
2708     height: 1000
2709
2710 -
2711   type: "plot"
2712   title: "VPP Performance 64B-2t2c-.*ipsec.*-pdrdisc"
2713   algorithm: "plot_performance_box"
2714   output-file-type: ".html"
2715   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-pdrdisc"
2716   data:
2717     csit-vpp-perf-1710-all:
2718     - 2
2719     - 5
2720   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2721   parameters:
2722   - "throughput"
2723   - "parent"
2724   traces:
2725     hoverinfo: "x+y"
2726     boxpoints: "outliers"
2727     whiskerwidth: 0
2728   layout:
2729     title: "64B-2t2c-.*ipsec.*-pdrdisc"
2730     xaxis:
2731       autorange: True
2732       autotick: False
2733       fixedrange: False
2734       gridcolor: "rgb(238, 238, 238)"
2735       linecolor: "rgb(238, 238, 238)"
2736       linewidth: 1
2737       showgrid: True
2738       showline: True
2739       showticklabels: True
2740       tickcolor: "rgb(238, 238, 238)"
2741       tickmode: "linear"
2742       title: "Indexed Test Cases"
2743       zeroline: False
2744     yaxis:
2745       gridcolor: "rgb(238, 238, 238)'"
2746       hoverformat: ".4s"
2747       linecolor: "rgb(238, 238, 238)"
2748       linewidth: 1
2749       range: []
2750       showgrid: True
2751       showline: True
2752       showticklabels: True
2753       tickcolor: "rgb(238, 238, 238)"
2754       title: "Packets Per Second [pps]"
2755       zeroline: False
2756     boxmode: "group"
2757     boxgroupgap: 0.5
2758     autosize: False
2759     margin:
2760       t: 50
2761       b: 20
2762       l: 50
2763       r: 20
2764     showlegend: True
2765     legend:
2766       orientation: "h"
2767     width: 700
2768     height: 1000
2769
2770 # DPDK
2771 -
2772   type: "plot"
2773   title: "DPDK Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2774   algorithm: "plot_performance_box"
2775   output-file-type: ".html"
2776   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-ndrdisc"
2777   data:
2778     csit-dpdk-perf-1710-all:
2779     - 2
2780     - 3
2781   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2782   parameters:
2783   - "throughput"
2784   - "parent"
2785   traces:
2786     hoverinfo: "x+y"
2787     boxpoints: "outliers"
2788     whiskerwidth: 0
2789   layout:
2790     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2791     xaxis:
2792       autorange: True
2793       autotick: False
2794       fixedrange: False
2795       gridcolor: "rgb(238, 238, 238)"
2796       linecolor: "rgb(238, 238, 238)"
2797       linewidth: 1
2798       showgrid: True
2799       showline: True
2800       showticklabels: True
2801       tickcolor: "rgb(238, 238, 238)"
2802       tickmode: "linear"
2803       title: "Indexed Test Cases"
2804       zeroline: False
2805     yaxis:
2806       gridcolor: "rgb(238, 238, 238)'"
2807       hoverformat: ".4s"
2808       linecolor: "rgb(238, 238, 238)"
2809       linewidth: 1
2810       range: []
2811       showgrid: True
2812       showline: True
2813       showticklabels: True
2814       tickcolor: "rgb(238, 238, 238)"
2815       title: "Packets Per Second [pps]"
2816       zeroline: False
2817     boxmode: "group"
2818     boxgroupgap: 0.5
2819     autosize: False
2820     margin:
2821       t: 50
2822       b: 20
2823       l: 50
2824       r: 20
2825     showlegend: True
2826     legend:
2827       orientation: "h"
2828     width: 700
2829     height: 1000
2830
2831 -
2832   type: "plot"
2833   title: "DPDK Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2834   algorithm: "plot_performance_box"
2835   output-file-type: ".html"
2836   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-ndrdisc"
2837   data:
2838     csit-dpdk-perf-1710-all:
2839     - 2
2840     - 3
2841   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2842   parameters:
2843   - "throughput"
2844   - "parent"
2845   traces:
2846     hoverinfo: "x+y"
2847     boxpoints: "outliers"
2848     whiskerwidth: 0
2849   layout:
2850     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2851     xaxis:
2852       autorange: True
2853       autotick: False
2854       fixedrange: False
2855       gridcolor: "rgb(238, 238, 238)"
2856       linecolor: "rgb(238, 238, 238)"
2857       linewidth: 1
2858       showgrid: True
2859       showline: True
2860       showticklabels: True
2861       tickcolor: "rgb(238, 238, 238)"
2862       tickmode: "linear"
2863       title: "Indexed Test Cases"
2864       zeroline: False
2865     yaxis:
2866       gridcolor: "rgb(238, 238, 238)'"
2867       hoverformat: ".4s"
2868       linecolor: "rgb(238, 238, 238)"
2869       linewidth: 1
2870       range: []
2871       showgrid: True
2872       showline: True
2873       showticklabels: True
2874       tickcolor: "rgb(238, 238, 238)"
2875       title: "Packets Per Second [pps]"
2876       zeroline: False
2877     boxmode: "group"
2878     boxgroupgap: 0.5
2879     autosize: False
2880     margin:
2881       t: 50
2882       b: 20
2883       l: 50
2884       r: 20
2885     showlegend: True
2886     legend:
2887       orientation: "h"
2888     width: 700
2889     height: 1000
2890
2891 -
2892   type: "plot"
2893   title: "DPDK Performance 64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
2894   algorithm: "plot_performance_box"
2895   output-file-type: ".html"
2896   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-ndrdisc"
2897   data:
2898     csit-dpdk-perf-1710-all:
2899     - 2
2900     - 3
2901   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'IP4FWD'"
2902   parameters:
2903   - "throughput"
2904   - "parent"
2905   traces:
2906     hoverinfo: "x+y"
2907     boxpoints: "outliers"
2908     whiskerwidth: 0
2909   layout:
2910     title: "64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
2911     xaxis:
2912       autorange: True
2913       autotick: False
2914       fixedrange: False
2915       gridcolor: "rgb(238, 238, 238)"
2916       linecolor: "rgb(238, 238, 238)"
2917       linewidth: 1
2918       showgrid: True
2919       showline: True
2920       showticklabels: True
2921       tickcolor: "rgb(238, 238, 238)"
2922       tickmode: "linear"
2923       title: "Indexed Test Cases"
2924       zeroline: False
2925     yaxis:
2926       gridcolor: "rgb(238, 238, 238)'"
2927       hoverformat: ".4s"
2928       linecolor: "rgb(238, 238, 238)"
2929       linewidth: 1
2930       range: [2000000, 12000000]
2931       showgrid: True
2932       showline: True
2933       showticklabels: True
2934       tickcolor: "rgb(238, 238, 238)"
2935       title: "Packets Per Second [pps]"
2936       zeroline: False
2937     boxmode: "group"
2938     boxgroupgap: 0.5
2939     autosize: False
2940     margin:
2941       t: 50
2942       b: 20
2943       l: 50
2944       r: 20
2945     showlegend: True
2946     legend:
2947       orientation: "h"
2948     width: 700
2949     height: 1000
2950
2951 -
2952   type: "plot"
2953   title: "DPDK Performance 64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
2954   algorithm: "plot_performance_box"
2955   output-file-type: ".html"
2956   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-ndrdisc"
2957   data:
2958     csit-dpdk-perf-1710-all:
2959     - 2
2960     - 3
2961   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'IP4FWD'"
2962   parameters:
2963   - "throughput"
2964   - "parent"
2965   traces:
2966     hoverinfo: "x+y"
2967     boxpoints: "outliers"
2968     whiskerwidth: 0
2969   layout:
2970     title: "64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
2971     xaxis:
2972       autorange: True
2973       autotick: False
2974       fixedrange: False
2975       gridcolor: "rgb(238, 238, 238)"
2976       linecolor: "rgb(238, 238, 238)"
2977       linewidth: 1
2978       showgrid: True
2979       showline: True
2980       showticklabels: True
2981       tickcolor: "rgb(238, 238, 238)"
2982       tickmode: "linear"
2983       title: "Indexed Test Cases"
2984       zeroline: False
2985     yaxis:
2986       gridcolor: "rgb(238, 238, 238)'"
2987       hoverformat: ".4s"
2988       linecolor: "rgb(238, 238, 238)"
2989       linewidth: 1
2990       range: [2000000, 12000000]
2991       showgrid: True
2992       showline: True
2993       showticklabels: True
2994       tickcolor: "rgb(238, 238, 238)"
2995       title: "Packets Per Second [pps]"
2996       zeroline: False
2997     boxmode: "group"
2998     boxgroupgap: 0.5
2999     autosize: False
3000     margin:
3001       t: 50
3002       b: 20
3003       l: 50
3004       r: 20
3005     showlegend: True
3006     legend:
3007       orientation: "h"
3008     width: 700
3009     height: 1000
3010
3011 -
3012   type: "plot"
3013   title: "DPDK Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3014   algorithm: "plot_performance_box"
3015   output-file-type: ".html"
3016   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-pdrdisc"
3017   data:
3018     csit-dpdk-perf-1710-all:
3019     - 2
3020     - 3
3021   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3022   parameters:
3023   - "throughput"
3024   - "parent"
3025   traces:
3026     hoverinfo: "x+y"
3027     boxpoints: "outliers"
3028     whiskerwidth: 0
3029   layout:
3030     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3031     xaxis:
3032       autorange: True
3033       autotick: False
3034       fixedrange: False
3035       gridcolor: "rgb(238, 238, 238)"
3036       linecolor: "rgb(238, 238, 238)"
3037       linewidth: 1
3038       showgrid: True
3039       showline: True
3040       showticklabels: True
3041       tickcolor: "rgb(238, 238, 238)"
3042       tickmode: "linear"
3043       title: "Indexed Test Cases"
3044       zeroline: False
3045     yaxis:
3046       gridcolor: "rgb(238, 238, 238)'"
3047       hoverformat: ".4s"
3048       linecolor: "rgb(238, 238, 238)"
3049       linewidth: 1
3050       range: []
3051       showgrid: True
3052       showline: True
3053       showticklabels: True
3054       tickcolor: "rgb(238, 238, 238)"
3055       title: "Packets Per Second [pps]"
3056       zeroline: False
3057     boxmode: "group"
3058     boxgroupgap: 0.5
3059     autosize: False
3060     margin:
3061       t: 50
3062       b: 20
3063       l: 50
3064       r: 20
3065     showlegend: True
3066     legend:
3067       orientation: "h"
3068     width: 700
3069     height: 1000
3070
3071 -
3072   type: "plot"
3073   title: "DPDK Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3074   algorithm: "plot_performance_box"
3075   output-file-type: ".html"
3076   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-pdrdisc"
3077   data:
3078     csit-dpdk-perf-1710-all:
3079     - 2
3080     - 3
3081   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3082   parameters:
3083   - "throughput"
3084   - "parent"
3085   traces:
3086     hoverinfo: "x+y"
3087     boxpoints: "outliers"
3088     whiskerwidth: 0
3089   layout:
3090     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3091     xaxis:
3092       autorange: True
3093       autotick: False
3094       fixedrange: False
3095       gridcolor: "rgb(238, 238, 238)"
3096       linecolor: "rgb(238, 238, 238)"
3097       linewidth: 1
3098       showgrid: True
3099       showline: True
3100       showticklabels: True
3101       tickcolor: "rgb(238, 238, 238)"
3102       tickmode: "linear"
3103       title: "Indexed Test Cases"
3104       zeroline: False
3105     yaxis:
3106       gridcolor: "rgb(238, 238, 238)'"
3107       hoverformat: ".4s"
3108       linecolor: "rgb(238, 238, 238)"
3109       linewidth: 1
3110       range: []
3111       showgrid: True
3112       showline: True
3113       showticklabels: True
3114       tickcolor: "rgb(238, 238, 238)"
3115       title: "Packets Per Second [pps]"
3116       zeroline: False
3117     boxmode: "group"
3118     boxgroupgap: 0.5
3119     autosize: False
3120     margin:
3121       t: 50
3122       b: 20
3123       l: 50
3124       r: 20
3125     showlegend: True
3126     legend:
3127       orientation: "h"
3128     width: 700
3129     height: 1000
3130
3131 -
3132   type: "plot"
3133   title: "DPDK Performance 64B-1t1c-ethip4-ip4base-l3fwd-pdrdisc"
3134   algorithm: "plot_performance_box"
3135   output-file-type: ".html"
3136   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-pdrdisc"
3137   data:
3138     csit-dpdk-perf-1710-all:
3139     - 2
3140     - 3
3141   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP4FWD'"
3142   parameters:
3143   - "throughput"
3144   - "parent"
3145   traces:
3146     hoverinfo: "x+y"
3147     boxpoints: "outliers"
3148     whiskerwidth: 0
3149   layout:
3150     title: "64B-1t1c-ethip4-ip4base-l3fwd-pdrdisc"
3151     xaxis:
3152       autorange: True
3153       autotick: False
3154       fixedrange: False
3155       gridcolor: "rgb(238, 238, 238)"
3156       linecolor: "rgb(238, 238, 238)"
3157       linewidth: 1
3158       showgrid: True
3159       showline: True
3160       showticklabels: True
3161       tickcolor: "rgb(238, 238, 238)"
3162       tickmode: "linear"
3163       title: "Indexed Test Cases"
3164       zeroline: False
3165     yaxis:
3166       gridcolor: "rgb(238, 238, 238)'"
3167       hoverformat: ".4s"
3168       linecolor: "rgb(238, 238, 238)"
3169       linewidth: 1
3170       range: [20000000, 30000000]
3171       showgrid: True
3172       showline: True
3173       showticklabels: True
3174       tickcolor: "rgb(238, 238, 238)"
3175       title: "Packets Per Second [pps]"
3176       zeroline: False
3177     boxmode: "group"
3178     boxgroupgap: 0.5
3179     autosize: False
3180     margin:
3181       t: 50
3182       b: 20
3183       l: 50
3184       r: 20
3185     showlegend: True
3186     legend:
3187       orientation: "h"
3188     width: 700
3189     height: 1000
3190
3191 -
3192   type: "plot"
3193   title: "DPDK Performance 64B-2t2c-ethip4-ip4base-l3fwd-pdrdisc"
3194   algorithm: "plot_performance_box"
3195   output-file-type: ".html"
3196   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-pdrdisc"
3197   data:
3198     csit-dpdk-perf-1710-all:
3199     - 2
3200     - 3
3201   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP4FWD'"
3202   parameters:
3203   - "throughput"
3204   - "parent"
3205   traces:
3206     hoverinfo: "x+y"
3207     boxpoints: "outliers"
3208     whiskerwidth: 0
3209   layout:
3210     title: "64B-2t2c-ethip4-ip4base-l3fwd-pdrdisc"
3211     xaxis:
3212       autorange: True
3213       autotick: False
3214       fixedrange: False
3215       gridcolor: "rgb(238, 238, 238)"
3216       linecolor: "rgb(238, 238, 238)"
3217       linewidth: 1
3218       showgrid: True
3219       showline: True
3220       showticklabels: True
3221       tickcolor: "rgb(238, 238, 238)"
3222       tickmode: "linear"
3223       title: "Indexed Test Cases"
3224       zeroline: False
3225     yaxis:
3226       gridcolor: "rgb(238, 238, 238)'"
3227       hoverformat: ".4s"
3228       linecolor: "rgb(238, 238, 238)"
3229       linewidth: 1
3230       range: [20000000, 30000000]
3231       showgrid: True
3232       showline: True
3233       showticklabels: True
3234       tickcolor: "rgb(238, 238, 238)"
3235       title: "Packets Per Second [pps]"
3236       zeroline: False
3237     boxmode: "group"
3238     boxgroupgap: 0.5
3239     autosize: False
3240     margin:
3241       t: 50
3242       b: 20
3243       l: 50
3244       r: 20
3245     showlegend: True
3246     legend:
3247       orientation: "h"
3248     width: 700
3249     height: 1000
3250
3251 # Plot latency
3252
3253 # VPP L2 sel1
3254 -
3255   type: "plot"
3256   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3257   algorithm: "plot_latency_box"
3258   output-file-type: ".html"
3259   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-ndrdisc-lat50"
3260   data:
3261     csit-vpp-perf-1710-all:
3262     - 2
3263     - 5
3264   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3265   parameters:
3266   - "latency"
3267   - "parent"
3268   traces:
3269     boxmean: False
3270   layout:
3271     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3272     xaxis:
3273       autorange: True
3274       autotick: False
3275       fixedrange: False
3276       gridcolor: "rgb(238, 238, 238)"
3277       linecolor: "rgb(238, 238, 238)"
3278       linewidth: 1
3279       showgrid: True
3280       showline: True
3281       showticklabels: True
3282       tickcolor: "rgb(238, 238, 238)"
3283       tickmode: "linear"
3284       title: "Indexed Test Cases"
3285       zeroline: False
3286     yaxis:
3287       gridcolor: "rgb(238, 238, 238)'"
3288       hoverformat: ""
3289       linecolor: "rgb(238, 238, 238)"
3290       linewidth: 1
3291       range: []
3292       showgrid: True
3293       showline: True
3294       showticklabels: True
3295       tickcolor: "rgb(238, 238, 238)"
3296       title: "Latency min/avg/max [uSec]"
3297       zeroline: False
3298     boxmode: "group"
3299     boxgroupgap: 0.5
3300     autosize: False
3301     margin:
3302       t: 50
3303       b: 20
3304       l: 50
3305       r: 20
3306     showlegend: True
3307     legend:
3308       orientation: "h"
3309     width: 700
3310     height: 1000
3311
3312 -
3313   type: "plot"
3314   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3315   algorithm: "plot_latency_box"
3316   output-file-type: ".html"
3317   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-ndrdisc-lat50"
3318   data:
3319     csit-vpp-perf-1710-all:
3320     - 2
3321     - 5
3322   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3323   parameters:
3324   - "latency"
3325   - "parent"
3326   traces:
3327     boxmean: False
3328   layout:
3329     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3330     xaxis:
3331       autorange: True
3332       autotick: False
3333       fixedrange: False
3334       gridcolor: "rgb(238, 238, 238)"
3335       linecolor: "rgb(238, 238, 238)"
3336       linewidth: 1
3337       showgrid: True
3338       showline: True
3339       showticklabels: True
3340       tickcolor: "rgb(238, 238, 238)"
3341       tickmode: "linear"
3342       title: "Indexed Test Cases"
3343       zeroline: False
3344     yaxis:
3345       gridcolor: "rgb(238, 238, 238)'"
3346       hoverformat: ""
3347       linecolor: "rgb(238, 238, 238)"
3348       linewidth: 1
3349       range: []
3350       showgrid: True
3351       showline: True
3352       showticklabels: True
3353       tickcolor: "rgb(238, 238, 238)"
3354       title: "Latency min/avg/max [uSec]"
3355       zeroline: False
3356     boxmode: "group"
3357     boxgroupgap: 0.5
3358     autosize: False
3359     margin:
3360       t: 50
3361       b: 20
3362       l: 50
3363       r: 20
3364     showlegend: True
3365     legend:
3366       orientation: "h"
3367     width: 700
3368     height: 1000
3369
3370 # VPP L2 sel2
3371 -
3372   type: "plot"
3373   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3374   algorithm: "plot_latency_box"
3375   output-file-type: ".html"
3376   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-ndrdisc-lat50"
3377   data:
3378     csit-vpp-perf-1710-all:
3379     - 2
3380     - 5
3381   filter: "'64B' and ('FEATURE' and 'ACL50' and '10k_FLOWS') and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3382   parameters:
3383   - "latency"
3384   - "parent"
3385   traces:
3386     boxmean: False
3387   layout:
3388     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3389     xaxis:
3390       autorange: True
3391       autotick: False
3392       fixedrange: False
3393       gridcolor: "rgb(238, 238, 238)"
3394       linecolor: "rgb(238, 238, 238)"
3395       linewidth: 1
3396       showgrid: True
3397       showline: True
3398       showticklabels: True
3399       tickcolor: "rgb(238, 238, 238)"
3400       tickmode: "linear"
3401       title: "Indexed Test Cases"
3402       zeroline: False
3403     yaxis:
3404       gridcolor: "rgb(238, 238, 238)'"
3405       hoverformat: ""
3406       linecolor: "rgb(238, 238, 238)"
3407       linewidth: 1
3408       range: []
3409       showgrid: True
3410       showline: True
3411       showticklabels: True
3412       tickcolor: "rgb(238, 238, 238)"
3413       title: "Latency min/avg/max [uSec]"
3414       zeroline: False
3415     boxmode: "group"
3416     boxgroupgap: 0.5
3417     autosize: False
3418     margin:
3419       t: 50
3420       b: 20
3421       l: 50
3422       r: 20
3423     showlegend: True
3424     legend:
3425       orientation: "h"
3426     width: 700
3427     height: 1000
3428
3429 -
3430   type: "plot"
3431   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3432   algorithm: "plot_latency_box"
3433   output-file-type: ".html"
3434   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-ndrdisc-lat50"
3435   data:
3436     csit-vpp-perf-1710-all:
3437     - 2
3438     - 5
3439   filter: "'64B' and ('FEATURE' and 'ACL50' and '10k_FLOWS') and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3440   parameters:
3441   - "latency"
3442   - "parent"
3443   traces:
3444     boxmean: False
3445   layout:
3446     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3447     xaxis:
3448       autorange: True
3449       autotick: False
3450       fixedrange: False
3451       gridcolor: "rgb(238, 238, 238)"
3452       linecolor: "rgb(238, 238, 238)"
3453       linewidth: 1
3454       showgrid: True
3455       showline: True
3456       showticklabels: True
3457       tickcolor: "rgb(238, 238, 238)"
3458       tickmode: "linear"
3459       title: "Indexed Test Cases"
3460       zeroline: False
3461     yaxis:
3462       gridcolor: "rgb(238, 238, 238)'"
3463       hoverformat: ""
3464       linecolor: "rgb(238, 238, 238)"
3465       linewidth: 1
3466       range: []
3467       showgrid: True
3468       showline: True
3469       showticklabels: True
3470       tickcolor: "rgb(238, 238, 238)"
3471       title: "Latency min/avg/max [uSec]"
3472       zeroline: False
3473     boxmode: "group"
3474     boxgroupgap: 0.5
3475     autosize: False
3476     margin:
3477       t: 50
3478       b: 20
3479       l: 50
3480       r: 20
3481     showlegend: True
3482     legend:
3483       orientation: "h"
3484     width: 700
3485     height: 1000
3486
3487 # VPP IP4
3488 -
3489   type: "plot"
3490   title: "VPP Latency 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
3491   algorithm: "plot_latency_box"
3492   output-file-type: ".html"
3493   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-ndrdisc-lat50"
3494   data:
3495     csit-vpp-perf-1710-all:
3496     - 2
3497     - 5
3498   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
3499   parameters:
3500   - "latency"
3501   - "parent"
3502   traces:
3503     boxmean: False
3504   layout:
3505     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
3506     xaxis:
3507       autorange: True
3508       autotick: False
3509       fixedrange: False
3510       gridcolor: "rgb(238, 238, 238)"
3511       linecolor: "rgb(238, 238, 238)"
3512       linewidth: 1
3513       showgrid: True
3514       showline: True
3515       showticklabels: True
3516       tickcolor: "rgb(238, 238, 238)"
3517       tickmode: "linear"
3518       title: "Indexed Test Cases"
3519       zeroline: False
3520     yaxis:
3521       gridcolor: "rgb(238, 238, 238)'"
3522       hoverformat: ""
3523       linecolor: "rgb(238, 238, 238)"
3524       linewidth: 1
3525       range: []
3526       showgrid: True
3527       showline: True
3528       showticklabels: True
3529       tickcolor: "rgb(238, 238, 238)"