resources/tools/presentation/specification.yaml

   1 -
   2   type: "environment"
   3   configuration:
   4     # Debug mode:
   5     # - Skip:
   6     #   - Download of input data files
   7     # - Do:
   8     #   - Read data from given zip / xml files
   9     #   - Set the configuration as it is done in normal mode
  10     # If the section "type: debug" is missing, CFG[DEBUG] is set to 0.
  11     CFG[DEBUG]: 0
  12
  13   paths:
  14     # Top level directories:
  15     ## Working directory
  16     DIR[WORKING]: "_tmp"
  17     ## Build directories
  18     DIR[BUILD,HTML]: "_build"
  19     DIR[BUILD,LATEX]: "_build_latex"
  20
  21     # Static .rst files
  22     DIR[RST]: "../../../docs/report"
  23
  24     # Working directories
  25     ## Input data files (.zip, .xml)
  26     DIR[WORKING,DATA]: "{DIR[WORKING]}/data"
  27     ## Static source files from git
  28     DIR[WORKING,SRC]: "{DIR[WORKING]}/src"
  29     DIR[WORKING,SRC,STATIC]: "{DIR[WORKING,SRC]}/_static"
  30
  31     # Static html content
  32     DIR[STATIC]: "{DIR[BUILD,HTML]}/_static"
  33     DIR[STATIC,VPP]: "{DIR[STATIC]}/vpp"
  34     DIR[STATIC,DPDK]: "{DIR[STATIC]}/dpdk"
  35     DIR[STATIC,ARCH]: "{DIR[STATIC]}/archive"
  36
  37     # Detailed test results
  38     DIR[DTR]: "{DIR[WORKING,SRC]}/detailed_test_results"
  39     DIR[DTR,PERF,DPDK]: "{DIR[DTR]}/dpdk_performance_results"
  40     DIR[DTR,PERF,VPP]: "{DIR[DTR]}/vpp_performance_results"
  41     DIR[DTR,PERF,HC]: "{DIR[DTR]}/honeycomb_performance_results"
  42     DIR[DTR,FUNC,VPP]: "{DIR[DTR]}/vpp_functional_results"
  43     DIR[DTR,FUNC,HC]: "{DIR[DTR]}/honeycomb_functional_results"
  44     DIR[DTR,FUNC,NSHSFC]: "{DIR[DTR]}/nshsfc_functional_results"
  45     DIR[DTR,PERF,VPP,IMPRV]: "{DIR[WORKING,SRC]}/vpp_performance_tests/performance_improvements"
  46
  47     # Detailed test configurations
  48     DIR[DTC]: "{DIR[WORKING,SRC]}/test_configuration"
  49     DIR[DTC,PERF,VPP]: "{DIR[DTC]}/vpp_performance_configuration"
  50     DIR[DTC,FUNC,VPP]: "{DIR[DTC]}/vpp_functional_configuration"
  51
  52     # Detailed tests operational data
  53     DIR[DTO]: "{DIR[WORKING,SRC]}/test_operational_data"
  54     DIR[DTO,PERF,VPP]: "{DIR[DTO]}/vpp_performance_operational_data"
  55
  56     # .css patch file to fix tables generated by Sphinx
  57     DIR[CSS_PATCH_FILE]: "{DIR[STATIC]}/theme_overrides.css"
  58     DIR[CSS_PATCH_FILE2]: "{DIR[WORKING,SRC,STATIC]}/theme_overrides.css"
  59
  60   urls:
  61     URL[JENKINS,CSIT]: "https://jenkins.fd.io/view/csit/job"
  62     URL[JENKINS,HC]: "https://jenkins.fd.io/view/hc2vpp/job"
  63
  64   make-dirs:
  65   # List the directories which are created while preparing the environment.
  66   # All directories MUST be defined in "paths" section.
  67   - "DIR[WORKING,DATA]"
  68   - "DIR[STATIC,VPP]"
  69   - "DIR[STATIC,DPDK]"
  70   - "DIR[STATIC,ARCH]"
  71   - "DIR[BUILD,LATEX]"
  72   - "DIR[WORKING,SRC]"
  73   - "DIR[WORKING,SRC,STATIC]"
  74
  75   remove-dirs:
  76   # List the directories which are deleted while cleaning the environment.
  77   # All directories MUST be defined in "paths" section.
  78   #- "DIR[BUILD,HTML]"
  79
  80   build-dirs:
  81   # List the directories where the results (build) is stored.
  82   # All directories MUST be defined in "paths" section.
  83   - "DIR[BUILD,HTML]"
  84   - "DIR[BUILD,LATEX]"
  85
  86 -
  87   type: "debug"
  88   general:
  89     input-format: "xml"  # zip or xml
  90     extract: "robot-plugin/output.xml"  # Only for zip
  91   builds:
  92     # The files must be in the directory DIR[WORKING,DATA]
  93     csit-dpdk-perf-1707-all:
  94     -
  95       build: 10
  96       file: "{DIR[WORKING,DATA]}/csit-dpdk-perf-1707-all__10.xml"
  97     -
  98       build: 9
  99       file: "{DIR[WORKING,DATA]}/csit-dpdk-perf-1707-all__9.xml"
 100     csit-nsh_sfc-verify-func-1707-ubuntu1604-virl:
 101     -
 102       build: 2
 103       file: "{DIR[WORKING,DATA]}/csit-nsh_sfc-verify-func-1707-ubuntu1604-virl-2.xml"
 104     csit-vpp-functional-1707-ubuntu1604-virl:
 105     -
 106       build: lastSuccessfulBuild
 107       file: "{DIR[WORKING,DATA]}/csit-vpp-functional-1707-ubuntu1604-virl-lastSuccessfulBuild.xml"
 108     hc2vpp-csit-integration-1707-ubuntu1604:
 109     -
 110       build: lastSuccessfulBuild
 111       file: "{DIR[WORKING,DATA]}/hc2vpp-csit-integration-1707-ubuntu1604-lastSuccessfulBuild.xml"
 112     csit-vpp-perf-1707-all:
 113     -
 114       build: 16
 115       file: "{DIR[WORKING,DATA]}/csit-vpp-perf-1707-all__16__output.xml"
 116     -
 117       build: 17
 118       file: "{DIR[WORKING,DATA]}/csit-vpp-perf-1707-all__17__output.xml"
 119
 120 -
 121   type: "static"
 122   src-path: "{DIR[RST]}"
 123   dst-path: "{DIR[WORKING,SRC]}"
 124
 125 -
 126   type: "input"  # Ignored in debug mode
 127   general:
 128     file-name: "robot-plugin.zip"
 129     file-format: ".zip"
 130     download-path: "{job}/{build}/robot/report/*zip*/{filename}"
 131     extract: "robot-plugin/output.xml"
 132   builds:
 133     csit-vpp-perf-1707-all:
 134     - 9
 135     - 10
 136     - 13
 137     - 14
 138     - 15
 139     - 16
 140     - 17
 141     - 18
 142     - 19
 143     - 21
 144     csit-vpp-perf-1710-all:
 145     - 2
 146     - 5
 147     csit-dpdk-perf-1710-all:
 148     - 2
 149     - 3
 150     csit-vpp-functional-1710-ubuntu1604-virl:
 151     - 16
 152 #    hc2vpp-csit-perf-master-ubuntu1604:  # REMOVE???
 153 #    - 8
 154 #    - 9
 155     hc2vpp-csit-integration-1710-ubuntu1604:
 156     - lastSuccessfulBuild
 157 #    csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:  # REMOVE???
 158 #    - 2
 159
 160 -
 161   type: "output"
 162   format:
 163     html:
 164     - full
 165     pdf:
 166     - minimal
 167
 168 ################################################################################
 169 ###                               T A B L E S                                ###
 170 ################################################################################
 171
 172 -
 173   type: "table"
 174   title: "Performance improvements"
 175   algorithm: "table_performance_improvements"
 176   template: "{DIR[DTR,PERF,VPP,IMPRV]}/tmpl_performance_improvements.csv"
 177   output-file-ext: ".csv"
 178   output-file: "{DIR[DTR,PERF,VPP,IMPRV]}/performance_improvements"
 179   columns:
 180   -
 181     title: "Functionality"
 182     data: "template 1"
 183   -
 184     title: "Test Name"
 185     data: "template 2"
 186   -
 187     title: "16.09 mean [Mpps]"
 188     data: "template 3"
 189   -
 190     title: "17.01 mean [Mpps]"
 191     data: "template 4"
 192   -
 193     title: "17.04 mean [Mpps]"
 194     data: "template 5"
 195   -
 196     title: "17.07 mean [Mpps]"
 197     data: "data csit-vpp-perf-1707-all mean"
 198   -
 199     title: "17.10 mean [Mpps]"
 200     data: "data csit-vpp-perf-1710-all mean"
 201   -
 202     title: "17.10 stdev [Mpps]"
 203     data: "data csit-vpp-perf-1710-all stdev"
 204   -
 205     title: "17.07 to 17.10 change [%]"
 206     data: "operation relative_change 6 5"
 207   rows: "generated"
 208   data:
 209     csit-vpp-perf-1707-all:
 210     - 9
 211     - 10
 212     - 13
 213     - 14
 214     - 15
 215     - 16
 216     - 17
 217     - 18
 218     - 19
 219     - 21
 220     csit-vpp-perf-1710-all:
 221     - 2
 222     - 5
 223   filter: "template"
 224   parameters:
 225   - "throughput"
 226
 227 -
 228   type: "table"
 229   title: "Detailed Test Results - VPP Performance Results"
 230   algorithm: "table_details"
 231   output-file-ext: ".csv"
 232   output-file: "{DIR[DTR,PERF,VPP]}/vpp_performance_results"
 233   columns:
 234   -
 235     title: "Name"
 236     data: "data name"
 237   -
 238     title: "Documentation"
 239     data: "data doc"
 240   -
 241     title: "Status"
 242     data: "data msg"
 243   rows: "generated"
 244   data:
 245     csit-vpp-perf-1710-all:
 246     - 5
 247   filter: "all"
 248   parameters:
 249   - "name"
 250   - "parent"
 251   - "doc"
 252   - "msg"
 253
 254 -
 255   type: "table"
 256   title: "Test configuration - VPP Performance Test Configs"
 257   algorithm: "table_details"
 258   output-file-ext: ".csv"
 259   output-file: "{DIR[DTC,PERF,VPP]}/vpp_test_configuration"
 260   columns:
 261   -
 262     title: "Name"
 263     data: "data name"
 264   -
 265     title: "VPP API Test (VAT) Commands History - Commands Used Per Test Case"
 266     data: "data vat-history"
 267   rows: "generated"
 268   data:
 269     csit-vpp-perf-1710-all:
 270     - 5
 271   filter: "all"
 272   parameters:
 273   - "parent"
 274   - "name"
 275   - "vat-history"
 276
 277 -
 278   type: "table"
 279   title: "Test Operational Data - VPP Performance Operational Data"
 280   algorithm: "table_details"
 281   output-file-ext: ".csv"
 282   output-file: "{DIR[DTO,PERF,VPP]}/vpp_test_operational"
 283   columns:
 284   -
 285     title: "Name"
 286     data: "data name"
 287   -
 288     title: "VPP Operational Data - Outputs of 'show runtime' at NDR packet rate"
 289     data: "data show-run"
 290   rows: "generated"
 291   data:
 292     csit-vpp-perf-1710-all:
 293     - 5
 294   filter: "all"
 295   parameters:
 296   - "parent"
 297   - "name"
 298   - "show-run"
 299
 300 -
 301   type: "table"
 302   title: "Detailed Test Results - VPP Functional Results"
 303   algorithm: "table_details"
 304   output-file-ext: ".csv"
 305   output-file: "{DIR[DTR,FUNC,VPP]}/vpp_functional_results"
 306   columns:
 307   -
 308     title: "Name"
 309     data: "data name"
 310   -
 311     title: "Documentation"
 312     data: "data doc"
 313   -
 314     title: "Status"
 315     data: "data status"
 316   rows: "generated"
 317   data:
 318     csit-vpp-functional-1710-ubuntu1604-virl:
 319     - 16
 320   filter: "all"
 321   parameters:
 322   - "name"
 323   - "parent"
 324   - "doc"
 325   - "status"
 326
 327 -
 328   type: "table"
 329   title: "Test configuration - VPP Functional Test Configs"
 330   algorithm: "table_details"
 331   output-file-ext: ".csv"
 332   output-file: "{DIR[DTC,FUNC,VPP]}/vpp_functional_configuration"
 333   columns:
 334   -
 335     title: "Name"
 336     data: "data name"
 337   -
 338     title: "VPP API Test (VAT) Commands History - Commands Used Per Test Case"
 339     data: "data vat-history"
 340   rows: "generated"
 341   data:
 342     csit-vpp-functional-1710-ubuntu1604-virl:
 343     - 16
 344   filter: "all"
 345   parameters:
 346   - "parent"
 347   - "name"
 348   - "vat-history"
 349
 350 -
 351   type: "table"
 352   title: "Detailed Test Results - DPDK Performance Results"
 353   algorithm: "table_details"
 354   output-file-ext: ".csv"
 355   output-file: "{DIR[DTR,PERF,DPDK]}/dpdk_performance_results"
 356   columns:
 357   -
 358     title: "Name"
 359     data: "data name"
 360   -
 361     title: "Documentation"
 362     data: "data doc"
 363   -
 364     title: "Status"
 365     data: "data msg"
 366   rows: "generated"
 367   data:
 368     csit-dpdk-perf-1710-all:
 369     - 3
 370   filter: "all"
 371   parameters:
 372   - "name"
 373   - "parent"
 374   - "doc"
 375   - "msg"
 376
 377 -
 378   type: "table"
 379   title: "Detailed Test Results - Honeycomb Functional Results"
 380   algorithm: "table_details"
 381   output-file-ext: ".csv"
 382   output-file: "{DIR[DTR,FUNC,HC]}/hc_functional_results"
 383   columns:
 384   -
 385     title: "Name"
 386     data: "data name"
 387   -
 388     title: "Documentation"
 389     data: "data doc"
 390   -
 391     title: "Status"
 392     data: "data status"
 393   rows: "generated"
 394   data:
 395     hc2vpp-csit-integration-1710-ubuntu1604:
 396     - "lastSuccessfulBuild"
 397   filter: "all"
 398   parameters:
 399   - "name"
 400   - "parent"
 401   - "doc"
 402   - "status"
 403
 404 #-
 405 #  type: "table"
 406 #  title: "Detailed Test Results - NSH SFC Functional Results"
 407 #  algorithm: "table_details"
 408 #  output-file-ext: ".csv"
 409 #  output-file: "{DIR[DTR,FUNC,NSHSFC]}/nsh_sfc_functional_results"
 410 #  columns:
 411 #  -
 412 #    title: "Name"
 413 #    data: "data name"
 414 #  -
 415 #    title: "Documentation"
 416 #    data: "data doc"
 417 #  -
 418 #    title: "Status"
 419 #    data: "data status"
 420 #  rows: "generated"
 421 #  data:
 422 #    csit-nsh_sfc-verify-func-1707-ubuntu1604-virl:
 423 #    - 2
 424 #  filter: "all"
 425 #  parameters:
 426 #  - "name"
 427 #  - "parent"
 428 #  - "doc"
 429 #  - "status"
 430
 431 ################################################################################
 432 ###                                F I L E S                                 ###
 433 ################################################################################
 434
 435 -
 436   type: "file"
 437   title: "VPP Performance Results"
 438   algorithm: "file_test_results"
 439   output-file-ext: ".rst"
 440   output-file: "{DIR[DTR,PERF,VPP]}/vpp_performance_results"
 441   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
 442   dir-tables: "{DIR[DTR,PERF,VPP]}"
 443   data:
 444     csit-vpp-perf-1710-all:
 445     - 5
 446   filter: "all"
 447   parameters:
 448   - "name"
 449   - "doc"
 450   - "level"
 451   data-start-level: 2  # 0, 1, 2, ...
 452   chapters-start-level: 2  # 0, 1, 2, ...
 453
 454 -
 455   type: "file"
 456   title: "VPP Performance Configuration"
 457   algorithm: "file_test_results"
 458   output-file-ext: ".rst"
 459   output-file: "{DIR[DTC,PERF,VPP]}/vpp_performance_configuration"
 460   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
 461   dir-tables: "{DIR[DTC,PERF,VPP]}"
 462   data:
 463     csit-vpp-perf-1710-all:
 464     - 5
 465   filter: "all"
 466   parameters:
 467   - "name"
 468   - "doc"
 469   - "level"
 470   data-start-level: 2  # 0, 1, 2, ...
 471   chapters-start-level: 2  # 0, 1, 2, ...
 472
 473 -
 474   type: "file"
 475   title: "VPP Performance Operational Data"
 476   algorithm: "file_test_results"
 477   output-file-ext: ".rst"
 478   output-file: "{DIR[DTO,PERF,VPP]}/vpp_performance_operational_data"
 479   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
 480   dir-tables: "{DIR[DTO,PERF,VPP]}"
 481   data:
 482     csit-vpp-perf-1710-all:
 483     - 5
 484   filter: "all"
 485   parameters:
 486   - "name"
 487   - "doc"
 488   - "level"
 489   data-start-level: 2  # 0, 1, 2, ...
 490   chapters-start-level: 2  # 0, 1, 2, ...
 491
 492 -
 493   type: "file"
 494   title: "VPP Functional Results"
 495   algorithm: "file_test_results"
 496   output-file-ext: ".rst"
 497   output-file: "{DIR[DTR,FUNC,VPP]}/vpp_functional_results"
 498   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
 499   dir-tables: "{DIR[DTR,FUNC,VPP]}"
 500   data:
 501     csit-vpp-functional-1710-ubuntu1604-virl:
 502     - 16
 503   filter: "all"
 504   parameters:
 505   - "name"
 506   - "doc"
 507   - "level"
 508   data-start-level: 3  # 0, 1, 2, ...
 509   chapters-start-level: 2  # 0, 1, 2, ...
 510
 511 -
 512   type: "file"
 513   title: "VPP Functional Configuration"
 514   algorithm: "file_test_results"
 515   output-file-ext: ".rst"
 516   output-file: "{DIR[DTC,FUNC,VPP]}/vpp_functional_configuration"
 517   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
 518   dir-tables: "{DIR[DTC,FUNC,VPP]}"
 519   data:
 520     csit-vpp-functional-1710-ubuntu1604-virl:
 521     - 16
 522   filter: "all"
 523   parameters:
 524   - "name"
 525   - "doc"
 526   - "level"
 527   data-start-level: 3  # 0, 1, 2, ...
 528   chapters-start-level: 2  # 0, 1, 2, ...
 529
 530 -
 531   type: "file"
 532   title: "DPDK Performance Results"
 533   algorithm: "file_test_results"
 534   output-file-ext: ".rst"
 535   output-file: "{DIR[DTR,PERF,DPDK]}/dpdk_performance_results"
 536   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
 537   dir-tables: "{DIR[DTR,PERF,DPDK]}"
 538   data:
 539     csit-dpdk-perf-1710-all:
 540     - 3
 541   filter: "all"
 542   parameters:
 543   - "name"
 544   - "doc"
 545   - "level"
 546   chapters:
 547   - "suites"
 548   data-start-level: 2  # 0, 1, 2, ...
 549   chapters-start-level: 2  # 0, 1, 2, ...
 550
 551 -
 552   type: "file"
 553   title: "Honeycomb Functional Results"
 554   algorithm: "file_test_results"
 555   output-file-ext: ".rst"
 556   output-file: "{DIR[DTR,FUNC,HC]}/honeycomb_functional_results"
 557   file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
 558   dir-tables: "{DIR[DTR,FUNC,HC]}"
 559   data:
 560     hc2vpp-csit-integration-1710-ubuntu1604:
 561     - "lastSuccessfulBuild"
 562   filter: "all"
 563   parameters:
 564   - "name"
 565   - "doc"
 566   - "level"
 567   chapters:
 568   - "suites"
 569   data-start-level: 3  # 0, 1, 2, ...
 570   chapters-start-level: 2  # 0, 1, 2, ...
 571
 572 #-
 573 #  type: "file"
 574 #  title: "NSH SFC Functional Results"
 575 #  algorithm: "file_test_results"
 576 #  output-file-ext: ".rst"
 577 #  output-file: "{DIR[DTR,FUNC,NSHSFC]}/nshsfc_functional_results"
 578 #  file-header: "\n.. |br| raw:: html\n\n    <br />\n\n\n.. |prein| raw:: html\n\n    <pre>\n\n\n.. |preout| raw:: html\n\n    </pre>\n\n"
 579 #  dir-tables: "{DIR[DTR,FUNC,NSHSFC]}"
 580 #  data:
 581 #    csit-nsh_sfc-verify-func-1710-ubuntu1604-virl:
 582 #    -
 583 #  filter: "all"
 584 #  parameters:
 585 #  - "name"
 586 #  - "doc"
 587 #  - "level"
 588 #  chapters:
 589 #  - "suites"
 590 #  data-start-level: 2  # 0, 1, 2, ...
 591 #  chapters-start-level: 2  # 0, 1, 2, ...
 592
 593 ################################################################################
 594 ###                                P L O T S                                 ###
 595 ################################################################################
 596
 597 # Plot packets per second
 598
 599 # VPP L2 sel1
 600 -
 601   type: "plot"
 602   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
 603   algorithm: "plot_performance_box"
 604   output-file-type: ".html"
 605   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-ndrdisc"
 606   data:
 607     csit-vpp-perf-1710-all:
 608     - 2
 609     - 5
 610   # Keep this formatting, the filter is enclosed with " (quotation mark) and
 611   # each tag is enclosed with ' (apostrophe).
 612   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 613   parameters:
 614   - "throughput"
 615   - "parent"
 616   traces:
 617     hoverinfo: "x+y"
 618     boxpoints: "outliers"
 619     whiskerwidth: 0
 620   layout:
 621     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
 622     xaxis:
 623       autorange: True
 624       autotick: False
 625       fixedrange: False
 626       gridcolor: "rgb(238, 238, 238)"
 627       linecolor: "rgb(238, 238, 238)"
 628       linewidth: 1
 629       showgrid: True
 630       showline: True
 631       showticklabels: True
 632       tickcolor: "rgb(238, 238, 238)"
 633       tickmode: "linear"
 634       title: "Indexed Test Cases"
 635       zeroline: False
 636     yaxis:
 637       gridcolor: "rgb(238, 238, 238)'"
 638       hoverformat: ".4s"
 639       linecolor: "rgb(238, 238, 238)"
 640       linewidth: 1
 641       range: []
 642       showgrid: True
 643       showline: True
 644       showticklabels: True
 645       tickcolor: "rgb(238, 238, 238)"
 646       title: "Packets Per Second [pps]"
 647       zeroline: False
 648     boxmode: "group"
 649     boxgroupgap: 0.5
 650     autosize: False
 651     margin:
 652       t: 50
 653       b: 20
 654       l: 50
 655       r: 20
 656     showlegend: True
 657     legend:
 658       orientation: "h"
 659     width: 700
 660     height: 1000
 661
 662 -
 663   type: "plot"
 664   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
 665   algorithm: "plot_performance_box"
 666   output-file-type: ".html"
 667   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-ndrdisc"
 668   data:
 669     csit-vpp-perf-1710-all:
 670     - 2
 671     - 5
 672   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 673   parameters:
 674   - "throughput"
 675   - "parent"
 676   traces:
 677     hoverinfo: "x+y"
 678     boxpoints: "outliers"
 679     whiskerwidth: 0
 680   layout:
 681     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
 682     xaxis:
 683       autorange: True
 684       autotick: False
 685       fixedrange: False
 686       gridcolor: "rgb(238, 238, 238)"
 687       linecolor: "rgb(238, 238, 238)"
 688       linewidth: 1
 689       showgrid: True
 690       showline: True
 691       showticklabels: True
 692       tickcolor: "rgb(238, 238, 238)"
 693       tickmode: "linear"
 694       title: "Indexed Test Cases"
 695       zeroline: False
 696     yaxis:
 697       gridcolor: "rgb(238, 238, 238)'"
 698       hoverformat: ".4s"
 699       linecolor: "rgb(238, 238, 238)"
 700       linewidth: 1
 701       range: []
 702       showgrid: True
 703       showline: True
 704       showticklabels: True
 705       tickcolor: "rgb(238, 238, 238)"
 706       title: "Packets Per Second [pps]"
 707       zeroline: False
 708     boxmode: "group"
 709     boxgroupgap: 0.5
 710     autosize: False
 711     margin:
 712       t: 50
 713       b: 20
 714       l: 50
 715       r: 20
 716     showlegend: True
 717     legend:
 718       orientation: "h"
 719     width: 700
 720     height: 1000
 721
 722 -
 723   type: "plot"
 724   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
 725   algorithm: "plot_performance_box"
 726   output-file-type: ".html"
 727   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-pdrdisc"
 728   data:
 729     csit-vpp-perf-1710-all:
 730     - 2
 731     - 5
 732   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 733   parameters:
 734   - "throughput"
 735   - "parent"
 736   traces:
 737     hoverinfo: "x+y"
 738     boxpoints: "outliers"
 739     whiskerwidth: 0
 740   layout:
 741     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
 742     xaxis:
 743       autorange: True
 744       autotick: False
 745       fixedrange: False
 746       gridcolor: "rgb(238, 238, 238)"
 747       linecolor: "rgb(238, 238, 238)"
 748       linewidth: 1
 749       showgrid: True
 750       showline: True
 751       showticklabels: True
 752       tickcolor: "rgb(238, 238, 238)"
 753       tickmode: "linear"
 754       title: "Indexed Test Cases"
 755       zeroline: False
 756     yaxis:
 757       gridcolor: "rgb(238, 238, 238)'"
 758       hoverformat: ".4s"
 759       linecolor: "rgb(238, 238, 238)"
 760       linewidth: 1
 761       range: []
 762       showgrid: True
 763       showline: True
 764       showticklabels: True
 765       tickcolor: "rgb(238, 238, 238)"
 766       title: "Packets Per Second [pps]"
 767       zeroline: False
 768     boxmode: "group"
 769     boxgroupgap: 0.5
 770     autosize: False
 771     margin:
 772       t: 50
 773       b: 20
 774       l: 50
 775       r: 20
 776     showlegend: True
 777     legend:
 778       orientation: "h"
 779     width: 700
 780     height: 1000
 781
 782 -
 783   type: "plot"
 784   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
 785   algorithm: "plot_performance_box"
 786   output-file-type: ".html"
 787   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-pdrdisc"
 788   data:
 789     csit-vpp-perf-1710-all:
 790     - 2
 791     - 5
 792   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 793   parameters:
 794   - "throughput"
 795   - "parent"
 796   traces:
 797     hoverinfo: "x+y"
 798     boxpoints: "outliers"
 799     whiskerwidth: 0
 800   layout:
 801     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
 802     xaxis:
 803       autorange: True
 804       autotick: False
 805       fixedrange: False
 806       gridcolor: "rgb(238, 238, 238)"
 807       linecolor: "rgb(238, 238, 238)"
 808       linewidth: 1
 809       showgrid: True
 810       showline: True
 811       showticklabels: True
 812       tickcolor: "rgb(238, 238, 238)"
 813       tickmode: "linear"
 814       title: "Indexed Test Cases"
 815       zeroline: False
 816     yaxis:
 817       gridcolor: "rgb(238, 238, 238)'"
 818       hoverformat: ".4s"
 819       linecolor: "rgb(238, 238, 238)"
 820       linewidth: 1
 821       range: []
 822       showgrid: True
 823       showline: True
 824       showticklabels: True
 825       tickcolor: "rgb(238, 238, 238)"
 826       title: "Packets Per Second [pps]"
 827       zeroline: False
 828     boxmode: "group"
 829     boxgroupgap: 0.5
 830     autosize: False
 831     margin:
 832       t: 50
 833       b: 20
 834       l: 50
 835       r: 20
 836     showlegend: True
 837     legend:
 838       orientation: "h"
 839     width: 700
 840     height: 1000
 841
 842 # VPP L2 sel2
 843 -
 844   type: "plot"
 845   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
 846   algorithm: "plot_performance_box"
 847   output-file-type: ".html"
 848   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-ndrdisc"
 849   data:
 850     csit-vpp-perf-1710-all:
 851     - 2
 852     - 5
 853   filter: "'64B' and 'FEATURE' and 'ACL50' and '10k_FLOWS' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 854   parameters:
 855   - "throughput"
 856   - "parent"
 857   traces:
 858     hoverinfo: "x+y"
 859     boxpoints: "outliers"
 860     whiskerwidth: 0
 861   layout:
 862     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
 863     xaxis:
 864       autorange: True
 865       autotick: False
 866       fixedrange: False
 867       gridcolor: "rgb(238, 238, 238)"
 868       linecolor: "rgb(238, 238, 238)"
 869       linewidth: 1
 870       showgrid: True
 871       showline: True
 872       showticklabels: True
 873       tickcolor: "rgb(238, 238, 238)"
 874       tickmode: "linear"
 875       title: "Indexed Test Cases"
 876       zeroline: False
 877     yaxis:
 878       gridcolor: "rgb(238, 238, 238)'"
 879       hoverformat: ".4s"
 880       linecolor: "rgb(238, 238, 238)"
 881       linewidth: 1
 882       range: [0, 8000000]
 883       showgrid: True
 884       showline: True
 885       showticklabels: True
 886       tickcolor: "rgb(238, 238, 238)"
 887       title: "Packets Per Second [pps]"
 888       zeroline: False
 889     boxmode: "group"
 890     boxgroupgap: 0.5
 891     autosize: False
 892     margin:
 893       t: 50
 894       b: 20
 895       l: 50
 896       r: 20
 897     showlegend: True
 898     legend:
 899       orientation: "h"
 900     width: 700
 901     height: 1000
 902
 903 -
 904   type: "plot"
 905   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
 906   algorithm: "plot_performance_box"
 907   output-file-type: ".html"
 908   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-ndrdisc"
 909   data:
 910     csit-vpp-perf-1710-all:
 911     - 2
 912     - 5
 913   filter: "'64B' and 'FEATURE' and 'ACL50' and '10k_FLOWS' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 914   parameters:
 915   - "throughput"
 916   - "parent"
 917   traces:
 918     hoverinfo: "x+y"
 919     boxpoints: "outliers"
 920     whiskerwidth: 0
 921   layout:
 922     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
 923     xaxis:
 924       autorange: True
 925       autotick: False
 926       fixedrange: False
 927       gridcolor: "rgb(238, 238, 238)"
 928       linecolor: "rgb(238, 238, 238)"
 929       linewidth: 1
 930       showgrid: True
 931       showline: True
 932       showticklabels: True
 933       tickcolor: "rgb(238, 238, 238)"
 934       tickmode: "linear"
 935       title: "Indexed Test Cases"
 936       zeroline: False
 937     yaxis:
 938       gridcolor: "rgb(238, 238, 238)'"
 939       hoverformat: ".4s"
 940       linecolor: "rgb(238, 238, 238)"
 941       linewidth: 1
 942       range: [5000000, 12000000]
 943       showgrid: True
 944       showline: True
 945       showticklabels: True
 946       tickcolor: "rgb(238, 238, 238)"
 947       title: "Packets Per Second [pps]"
 948       zeroline: False
 949     boxmode: "group"
 950     boxgroupgap: 0.5
 951     autosize: False
 952     margin:
 953       t: 50
 954       b: 20
 955       l: 50
 956       r: 20
 957     showlegend: True
 958     legend:
 959       orientation: "h"
 960     width: 700
 961     height: 1000
 962
 963 -
 964   type: "plot"
 965   title: "VPP Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
 966   algorithm: "plot_performance_box"
 967   output-file-type: ".html"
 968   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-pdrdisc"
 969   data:
 970     csit-vpp-perf-1710-all:
 971     - 2
 972     - 5
 973   filter: "'64B' and 'FEATURE' and 'ACL50' and '10k_FLOWS' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 974   parameters:
 975   - "throughput"
 976   - "parent"
 977   traces:
 978     hoverinfo: "x+y"
 979     boxpoints: "outliers"
 980     whiskerwidth: 0
 981   layout:
 982     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
 983     xaxis:
 984       autorange: True
 985       autotick: False
 986       fixedrange: False
 987       gridcolor: "rgb(238, 238, 238)"
 988       linecolor: "rgb(238, 238, 238)"
 989       linewidth: 1
 990       showgrid: True
 991       showline: True
 992       showticklabels: True
 993       tickcolor: "rgb(238, 238, 238)"
 994       tickmode: "linear"
 995       title: "Indexed Test Cases"
 996       zeroline: False
 997     yaxis:
 998       gridcolor: "rgb(238, 238, 238)'"
 999       hoverformat: ".4s"
1000       linecolor: "rgb(238, 238, 238)"
1001       linewidth: 1
1002       range: [0, 8000000]
1003       showgrid: True
1004       showline: True
1005       showticklabels: True
1006       tickcolor: "rgb(238, 238, 238)"
1007       title: "Packets Per Second [pps]"
1008       zeroline: False
1009     boxmode: "group"
1010     boxgroupgap: 0.5
1011     autosize: False
1012     margin:
1013       t: 50
1014       b: 20
1015       l: 50
1016       r: 20
1017     showlegend: True
1018     legend:
1019       orientation: "h"
1020     width: 700
1021     height: 1000
1022
1023 -
1024   type: "plot"
1025   title: "VPP Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1026   algorithm: "plot_performance_box"
1027   output-file-type: ".html"
1028   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-pdrdisc"
1029   data:
1030     csit-vpp-perf-1710-all:
1031     - 2
1032     - 5
1033   filter: "'64B' and 'FEATURE' and 'ACL50' and '10k_FLOWS' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
1034   parameters:
1035   - "throughput"
1036   - "parent"
1037   traces:
1038     hoverinfo: "x+y"
1039     boxpoints: "outliers"
1040     whiskerwidth: 0
1041   layout:
1042     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
1043     xaxis:
1044       autorange: True
1045       autotick: False
1046       fixedrange: False
1047       gridcolor: "rgb(238, 238, 238)"
1048       linecolor: "rgb(238, 238, 238)"
1049       linewidth: 1
1050       showgrid: True
1051       showline: True
1052       showticklabels: True
1053       tickcolor: "rgb(238, 238, 238)"
1054       tickmode: "linear"
1055       title: "Indexed Test Cases"
1056       zeroline: False
1057     yaxis:
1058       gridcolor: "rgb(238, 238, 238)'"
1059       hoverformat: ".4s"
1060       linecolor: "rgb(238, 238, 238)"
1061       linewidth: 1
1062       range: [5000000, 12000000]
1063       showgrid: True
1064       showline: True
1065       showticklabels: True
1066       tickcolor: "rgb(238, 238, 238)"
1067       title: "Packets Per Second [pps]"
1068       zeroline: False
1069     boxmode: "group"
1070     boxgroupgap: 0.5
1071     autosize: False
1072     margin:
1073       t: 50
1074       b: 20
1075       l: 50
1076       r: 20
1077     showlegend: True
1078     legend:
1079       orientation: "h"
1080     width: 700
1081     height: 1000
1082
1083 # VPP IP4
1084 -
1085   type: "plot"
1086   title: "VPP Performance 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1087   algorithm: "plot_performance_box"
1088   output-file-type: ".html"
1089   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-ndrdisc"
1090   data:
1091     csit-vpp-perf-1710-all:
1092     - 2
1093     - 5
1094   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1095   parameters:
1096   - "throughput"
1097   - "parent"
1098   traces:
1099     hoverinfo: "x+y"
1100     boxpoints: "outliers"
1101     whiskerwidth: 0
1102   layout:
1103     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1104     xaxis:
1105       autorange: True
1106       autotick: False
1107       fixedrange: False
1108       gridcolor: "rgb(238, 238, 238)"
1109       linecolor: "rgb(238, 238, 238)"
1110       linewidth: 1
1111       showgrid: True
1112       showline: True
1113       showticklabels: True
1114       tickcolor: "rgb(238, 238, 238)"
1115       tickmode: "linear"
1116       title: "Indexed Test Cases"
1117       zeroline: False
1118     yaxis:
1119       gridcolor: "rgb(238, 238, 238)'"
1120       hoverformat: ".4s"
1121       linecolor: "rgb(238, 238, 238)"
1122       linewidth: 1
1123       range: []
1124       showgrid: True
1125       showline: True
1126       showticklabels: True
1127       tickcolor: "rgb(238, 238, 238)"
1128       title: "Packets Per Second [pps]"
1129       zeroline: False
1130     boxmode: "group"
1131     boxgroupgap: 0.5
1132     autosize: False
1133     margin:
1134       t: 50
1135       b: 20
1136       l: 50
1137       r: 20
1138     showlegend: True
1139     legend:
1140       orientation: "h"
1141     width: 700
1142     height: 1000
1143
1144 -
1145   type: "plot"
1146   title: "VPP Performance 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1147   algorithm: "plot_performance_box"
1148   output-file-type: ".html"
1149   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-ndrdisc"
1150   data:
1151     csit-vpp-perf-1710-all:
1152     - 2
1153     - 5
1154   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1155   parameters:
1156   - "throughput"
1157   - "parent"
1158   traces:
1159     hoverinfo: "x+y"
1160     boxpoints: "outliers"
1161     whiskerwidth: 0
1162   layout:
1163     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
1164     xaxis:
1165       autorange: True
1166       autotick: False
1167       fixedrange: False
1168       gridcolor: "rgb(238, 238, 238)"
1169       linecolor: "rgb(238, 238, 238)"
1170       linewidth: 1
1171       showgrid: True
1172       showline: True
1173       showticklabels: True
1174       tickcolor: "rgb(238, 238, 238)"
1175       tickmode: "linear"
1176       title: "Indexed Test Cases"
1177       zeroline: False
1178     yaxis:
1179       gridcolor: "rgb(238, 238, 238)'"
1180       hoverformat: ".4s"
1181       linecolor: "rgb(238, 238, 238)"
1182       linewidth: 1
1183       range: []
1184       showgrid: True
1185       showline: True
1186       showticklabels: True
1187       tickcolor: "rgb(238, 238, 238)"
1188       title: "Packets Per Second [pps]"
1189       zeroline: False
1190     boxmode: "group"
1191     boxgroupgap: 0.5
1192     autosize: False
1193     margin:
1194       t: 50
1195       b: 20
1196       l: 50
1197       r: 20
1198     showlegend: True
1199     legend:
1200       orientation: "h"
1201     width: 700
1202     height: 1000
1203
1204 -
1205   type: "plot"
1206   title: "VPP Performance 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1207   algorithm: "plot_performance_box"
1208   output-file-type: ".html"
1209   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-pdrdisc"
1210   data:
1211     csit-vpp-perf-1710-all:
1212     - 2
1213     - 5
1214   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1215   parameters:
1216   - "throughput"
1217   - "parent"
1218   traces:
1219     hoverinfo: "x+y"
1220     boxpoints: "outliers"
1221     whiskerwidth: 0
1222   layout:
1223     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1224     xaxis:
1225       autorange: True
1226       autotick: False
1227       fixedrange: False
1228       gridcolor: "rgb(238, 238, 238)"
1229       linecolor: "rgb(238, 238, 238)"
1230       linewidth: 1
1231       showgrid: True
1232       showline: True
1233       showticklabels: True
1234       tickcolor: "rgb(238, 238, 238)"
1235       tickmode: "linear"
1236       title: "Indexed Test Cases"
1237       zeroline: False
1238     yaxis:
1239       gridcolor: "rgb(238, 238, 238)'"
1240       hoverformat: ".4s"
1241       linecolor: "rgb(238, 238, 238)"
1242       linewidth: 1
1243       range: []
1244       showgrid: True
1245       showline: True
1246       showticklabels: True
1247       tickcolor: "rgb(238, 238, 238)"
1248       title: "Packets Per Second [pps]"
1249       zeroline: False
1250     boxmode: "group"
1251     boxgroupgap: 0.5
1252     autosize: False
1253     margin:
1254       t: 50
1255       b: 20
1256       l: 50
1257       r: 20
1258     showlegend: True
1259     legend:
1260       orientation: "h"
1261     width: 700
1262     height: 1000
1263
1264 -
1265   type: "plot"
1266   title: "VPP Performance 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1267   algorithm: "plot_performance_box"
1268   output-file-type: ".html"
1269   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-pdrdisc"
1270   data:
1271     csit-vpp-perf-1710-all:
1272     - 2
1273     - 5
1274   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
1275   parameters:
1276   - "throughput"
1277   - "parent"
1278   traces:
1279     hoverinfo: "x+y"
1280     boxpoints: "outliers"
1281     whiskerwidth: 0
1282   layout:
1283     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*pdrdisc"
1284     xaxis:
1285       autorange: True
1286       autotick: False
1287       fixedrange: False
1288       gridcolor: "rgb(238, 238, 238)"
1289       linecolor: "rgb(238, 238, 238)"
1290       linewidth: 1
1291       showgrid: True
1292       showline: True
1293       showticklabels: True
1294       tickcolor: "rgb(238, 238, 238)"
1295       tickmode: "linear"
1296       title: "Indexed Test Cases"
1297       zeroline: False
1298     yaxis:
1299       gridcolor: "rgb(238, 238, 238)'"
1300       hoverformat: ".4s"
1301       linecolor: "rgb(238, 238, 238)"
1302       linewidth: 1
1303       range: []
1304       showgrid: True
1305       showline: True
1306       showticklabels: True
1307       tickcolor: "rgb(238, 238, 238)"
1308       title: "Packets Per Second [pps]"
1309       zeroline: False
1310     boxmode: "group"
1311     boxgroupgap: 0.5
1312     autosize: False
1313     margin:
1314       t: 50
1315       b: 20
1316       l: 50
1317       r: 20
1318     showlegend: True
1319     legend:
1320       orientation: "h"
1321     width: 700
1322     height: 1000
1323
1324 # VPP IP6
1325 -
1326   type: "plot"
1327   title: "VPP Performance 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1328   algorithm: "plot_performance_box"
1329   output-file-type: ".html"
1330   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-ndrdisc"
1331   data:
1332     csit-vpp-perf-1710-all:
1333     - 2
1334     - 5
1335   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1336   parameters:
1337   - "throughput"
1338   - "parent"
1339   traces:
1340     hoverinfo: "x+y"
1341     boxpoints: "outliers"
1342     whiskerwidth: 0
1343   layout:
1344     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1345     xaxis:
1346       autorange: True
1347       autotick: False
1348       fixedrange: False
1349       gridcolor: "rgb(238, 238, 238)"
1350       linecolor: "rgb(238, 238, 238)"
1351       linewidth: 1
1352       showgrid: True
1353       showline: True
1354       showticklabels: True
1355       tickcolor: "rgb(238, 238, 238)"
1356       tickmode: "linear"
1357       title: "Indexed Test Cases"
1358       zeroline: False
1359     yaxis:
1360       gridcolor: "rgb(238, 238, 238)'"
1361       hoverformat: ".4s"
1362       linecolor: "rgb(238, 238, 238)"
1363       linewidth: 1
1364       range: []
1365       showgrid: True
1366       showline: True
1367       showticklabels: True
1368       tickcolor: "rgb(238, 238, 238)"
1369       title: "Packets Per Second [pps]"
1370       zeroline: False
1371     boxmode: "group"
1372     boxgroupgap: 0.5
1373     autosize: False
1374     margin:
1375       t: 50
1376       b: 20
1377       l: 50
1378       r: 20
1379     showlegend: True
1380     legend:
1381       orientation: "h"
1382     width: 700
1383     height: 1000
1384
1385 -
1386   type: "plot"
1387   title: "VPP Performance 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1388   algorithm: "plot_performance_box"
1389   output-file-type: ".html"
1390   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-ndrdisc"
1391   data:
1392     csit-vpp-perf-1710-all:
1393     - 2
1394     - 5
1395   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1396   parameters:
1397   - "throughput"
1398   - "parent"
1399   traces:
1400     hoverinfo: "x+y"
1401     boxpoints: "outliers"
1402     whiskerwidth: 0
1403   layout:
1404     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
1405     xaxis:
1406       autorange: True
1407       autotick: False
1408       fixedrange: False
1409       gridcolor: "rgb(238, 238, 238)"
1410       linecolor: "rgb(238, 238, 238)"
1411       linewidth: 1
1412       showgrid: True
1413       showline: True
1414       showticklabels: True
1415       tickcolor: "rgb(238, 238, 238)"
1416       tickmode: "linear"
1417       title: "Indexed Test Cases"
1418       zeroline: False
1419     yaxis:
1420       gridcolor: "rgb(238, 238, 238)'"
1421       hoverformat: ".4s"
1422       linecolor: "rgb(238, 238, 238)"
1423       linewidth: 1
1424       range: []
1425       showgrid: True
1426       showline: True
1427       showticklabels: True
1428       tickcolor: "rgb(238, 238, 238)"
1429       title: "Packets Per Second [pps]"
1430       zeroline: False
1431     boxmode: "group"
1432     boxgroupgap: 0.5
1433     autosize: False
1434     margin:
1435       t: 50
1436       b: 20
1437       l: 50
1438       r: 20
1439     showlegend: True
1440     legend:
1441       orientation: "h"
1442     width: 700
1443     height: 1000
1444
1445 -
1446   type: "plot"
1447   title: "VPP Performance 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1448   algorithm: "plot_performance_box"
1449   output-file-type: ".html"
1450   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-pdrdisc"
1451   data:
1452     csit-vpp-perf-1710-all:
1453     - 2
1454     - 5
1455   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1456   parameters:
1457   - "throughput"
1458   - "parent"
1459   traces:
1460     hoverinfo: "x+y"
1461     boxpoints: "outliers"
1462     whiskerwidth: 0
1463   layout:
1464     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1465     xaxis:
1466       autorange: True
1467       autotick: False
1468       fixedrange: False
1469       gridcolor: "rgb(238, 238, 238)"
1470       linecolor: "rgb(238, 238, 238)"
1471       linewidth: 1
1472       showgrid: True
1473       showline: True
1474       showticklabels: True
1475       tickcolor: "rgb(238, 238, 238)"
1476       tickmode: "linear"
1477       title: "Indexed Test Cases"
1478       zeroline: False
1479     yaxis:
1480       gridcolor: "rgb(238, 238, 238)'"
1481       hoverformat: ".4s"
1482       linecolor: "rgb(238, 238, 238)"
1483       linewidth: 1
1484       range: []
1485       showgrid: True
1486       showline: True
1487       showticklabels: True
1488       tickcolor: "rgb(238, 238, 238)"
1489       title: "Packets Per Second [pps]"
1490       zeroline: False
1491     boxmode: "group"
1492     boxgroupgap: 0.5
1493     autosize: False
1494     margin:
1495       t: 50
1496       b: 20
1497       l: 50
1498       r: 20
1499     showlegend: True
1500     legend:
1501       orientation: "h"
1502     width: 700
1503     height: 1000
1504
1505 -
1506   type: "plot"
1507   title: "VPP Performance 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1508   algorithm: "plot_performance_box"
1509   output-file-type: ".html"
1510   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-pdrdisc"
1511   data:
1512     csit-vpp-perf-1710-all:
1513     - 2
1514     - 5
1515   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
1516   parameters:
1517   - "throughput"
1518   - "parent"
1519   traces:
1520     hoverinfo: "x+y"
1521     boxpoints: "outliers"
1522     whiskerwidth: 0
1523   layout:
1524     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*pdrdisc"
1525     xaxis:
1526       autorange: True
1527       autotick: False
1528       fixedrange: False
1529       gridcolor: "rgb(238, 238, 238)"
1530       linecolor: "rgb(238, 238, 238)"
1531       linewidth: 1
1532       showgrid: True
1533       showline: True
1534       showticklabels: True
1535       tickcolor: "rgb(238, 238, 238)"
1536       tickmode: "linear"
1537       title: "Indexed Test Cases"
1538       zeroline: False
1539     yaxis:
1540       gridcolor: "rgb(238, 238, 238)'"
1541       hoverformat: ".4s"
1542       linecolor: "rgb(238, 238, 238)"
1543       linewidth: 1
1544       range: []
1545       showgrid: True
1546       showline: True
1547       showticklabels: True
1548       tickcolor: "rgb(238, 238, 238)"
1549       title: "Packets Per Second [pps]"
1550       zeroline: False
1551     boxmode: "group"
1552     boxgroupgap: 0.5
1553     autosize: False
1554     margin:
1555       t: 50
1556       b: 20
1557       l: 50
1558       r: 20
1559     showlegend: True
1560     legend:
1561       orientation: "h"
1562     width: 700
1563     height: 1000
1564
1565 # VPP IP4_overlay
1566 -
1567   type: "plot"
1568   title: "VPP Performance 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1569   algorithm: "plot_performance_box"
1570   output-file-type: ".html"
1571   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ndrdisc"
1572   data:
1573     csit-vpp-perf-1710-all:
1574     - 2
1575     - 5
1576   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1577   parameters:
1578   - "throughput"
1579   - "parent"
1580   traces:
1581     hoverinfo: "x+y"
1582     boxpoints: "outliers"
1583     whiskerwidth: 0
1584   layout:
1585     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1586     xaxis:
1587       autorange: True
1588       autotick: False
1589       fixedrange: False
1590       gridcolor: "rgb(238, 238, 238)"
1591       linecolor: "rgb(238, 238, 238)"
1592       linewidth: 1
1593       showgrid: True
1594       showline: True
1595       showticklabels: True
1596       tickcolor: "rgb(238, 238, 238)"
1597       tickmode: "linear"
1598       title: "Indexed Test Cases"
1599       zeroline: False
1600     yaxis:
1601       gridcolor: "rgb(238, 238, 238)'"
1602       hoverformat: ".4s"
1603       linecolor: "rgb(238, 238, 238)"
1604       linewidth: 1
1605       range: []
1606       showgrid: True
1607       showline: True
1608       showticklabels: True
1609       tickcolor: "rgb(238, 238, 238)"
1610       title: "Packets Per Second [pps]"
1611       zeroline: False
1612     boxmode: "group"
1613     boxgroupgap: 0.5
1614     autosize: False
1615     margin:
1616       t: 50
1617       b: 20
1618       l: 50
1619       r: 20
1620     showlegend: True
1621     legend:
1622       orientation: "h"
1623     width: 700
1624     height: 1000
1625
1626 -
1627   type: "plot"
1628   title: "VPP Performance 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1629   algorithm: "plot_performance_box"
1630   output-file-type: ".html"
1631   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ndrdisc"
1632   data:
1633     csit-vpp-perf-1710-all:
1634     - 2
1635     - 5
1636   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1637   parameters:
1638   - "throughput"
1639   - "parent"
1640   traces:
1641     hoverinfo: "x+y"
1642     boxpoints: "outliers"
1643     whiskerwidth: 0
1644   layout:
1645     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
1646     xaxis:
1647       autorange: True
1648       autotick: False
1649       fixedrange: False
1650       gridcolor: "rgb(238, 238, 238)"
1651       linecolor: "rgb(238, 238, 238)"
1652       linewidth: 1
1653       showgrid: True
1654       showline: True
1655       showticklabels: True
1656       tickcolor: "rgb(238, 238, 238)"
1657       tickmode: "linear"
1658       title: "Indexed Test Cases"
1659       zeroline: False
1660     yaxis:
1661       gridcolor: "rgb(238, 238, 238)'"
1662       hoverformat: ".4s"
1663       linecolor: "rgb(238, 238, 238)"
1664       linewidth: 1
1665       range: []
1666       showgrid: True
1667       showline: True
1668       showticklabels: True
1669       tickcolor: "rgb(238, 238, 238)"
1670       title: "Packets Per Second [pps]"
1671       zeroline: False
1672     boxmode: "group"
1673     boxgroupgap: 0.5
1674     autosize: False
1675     margin:
1676       t: 50
1677       b: 20
1678       l: 50
1679       r: 20
1680     showlegend: True
1681     legend:
1682       orientation: "h"
1683     width: 700
1684     height: 1000
1685
1686 -
1687   type: "plot"
1688   title: "VPP Performance 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1689   algorithm: "plot_performance_box"
1690   output-file-type: ".html"
1691   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-pdrdisc"
1692   data:
1693     csit-vpp-perf-1710-all:
1694     - 2
1695     - 5
1696   filter: "'64B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1697   parameters:
1698   - "throughput"
1699   - "parent"
1700   traces:
1701     hoverinfo: "x+y"
1702     boxpoints: "outliers"
1703     whiskerwidth: 0
1704   layout:
1705     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1706     xaxis:
1707       autorange: True
1708       autotick: False
1709       fixedrange: False
1710       gridcolor: "rgb(238, 238, 238)"
1711       linecolor: "rgb(238, 238, 238)"
1712       linewidth: 1
1713       showgrid: True
1714       showline: True
1715       showticklabels: True
1716       tickcolor: "rgb(238, 238, 238)"
1717       tickmode: "linear"
1718       title: "Indexed Test Cases"
1719       zeroline: False
1720     yaxis:
1721       gridcolor: "rgb(238, 238, 238)'"
1722       hoverformat: ".4s"
1723       linecolor: "rgb(238, 238, 238)"
1724       linewidth: 1
1725       range: []
1726       showgrid: True
1727       showline: True
1728       showticklabels: True
1729       tickcolor: "rgb(238, 238, 238)"
1730       title: "Packets Per Second [pps]"
1731       zeroline: False
1732     boxmode: "group"
1733     boxgroupgap: 0.5
1734     autosize: False
1735     margin:
1736       t: 50
1737       b: 20
1738       l: 50
1739       r: 20
1740     showlegend: True
1741     legend:
1742       orientation: "h"
1743     width: 700
1744     height: 1000
1745
1746 -
1747   type: "plot"
1748   title: "VPP Performance 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1749   algorithm: "plot_performance_box"
1750   output-file-type: ".html"
1751   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-pdrdisc"
1752   data:
1753     csit-vpp-perf-1710-all:
1754     - 2
1755     - 5
1756   filter: "'64B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
1757   parameters:
1758   - "throughput"
1759   - "parent"
1760   traces:
1761     hoverinfo: "x+y"
1762     boxpoints: "outliers"
1763     whiskerwidth: 0
1764   layout:
1765     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-pdrdisc"
1766     xaxis:
1767       autorange: True
1768       autotick: False
1769       fixedrange: False
1770       gridcolor: "rgb(238, 238, 238)"
1771       linecolor: "rgb(238, 238, 238)"
1772       linewidth: 1
1773       showgrid: True
1774       showline: True
1775       showticklabels: True
1776       tickcolor: "rgb(238, 238, 238)"
1777       tickmode: "linear"
1778       title: "Indexed Test Cases"
1779       zeroline: False
1780     yaxis:
1781       gridcolor: "rgb(238, 238, 238)'"
1782       hoverformat: ".4s"
1783       linecolor: "rgb(238, 238, 238)"
1784       linewidth: 1
1785       range: []
1786       showgrid: True
1787       showline: True
1788       showticklabels: True
1789       tickcolor: "rgb(238, 238, 238)"
1790       title: "Packets Per Second [pps]"
1791       zeroline: False
1792     boxmode: "group"
1793     boxgroupgap: 0.5
1794     autosize: False
1795     margin:
1796       t: 50
1797       b: 20
1798       l: 50
1799       r: 20
1800     showlegend: True
1801     legend:
1802       orientation: "h"
1803     width: 700
1804     height: 1000
1805
1806 # VPP IP6_overlay
1807 -
1808   type: "plot"
1809   title: "VPP Performance 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1810   algorithm: "plot_performance_box"
1811   output-file-type: ".html"
1812   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ndrdisc"
1813   data:
1814     csit-vpp-perf-1710-all:
1815     - 2
1816     - 5
1817   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1818   parameters:
1819   - "throughput"
1820   - "parent"
1821   traces:
1822     hoverinfo: "x+y"
1823     boxpoints: "outliers"
1824     whiskerwidth: 0
1825   layout:
1826     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1827     xaxis:
1828       autorange: True
1829       autotick: False
1830       fixedrange: False
1831       gridcolor: "rgb(238, 238, 238)"
1832       linecolor: "rgb(238, 238, 238)"
1833       linewidth: 1
1834       showgrid: True
1835       showline: True
1836       showticklabels: True
1837       tickcolor: "rgb(238, 238, 238)"
1838       tickmode: "linear"
1839       title: "Indexed Test Cases"
1840       zeroline: False
1841     yaxis:
1842       gridcolor: "rgb(238, 238, 238)'"
1843       hoverformat: ".4s"
1844       linecolor: "rgb(238, 238, 238)"
1845       linewidth: 1
1846       range: []
1847       showgrid: True
1848       showline: True
1849       showticklabels: True
1850       tickcolor: "rgb(238, 238, 238)"
1851       title: "Packets Per Second [pps]"
1852       zeroline: False
1853     boxmode: "group"
1854     boxgroupgap: 0.5
1855     autosize: False
1856     margin:
1857       t: 50
1858       b: 20
1859       l: 50
1860       r: 20
1861     showlegend: True
1862     legend:
1863       orientation: "h"
1864     width: 700
1865     height: 1000
1866
1867 -
1868   type: "plot"
1869   title: "VPP Performance 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1870   algorithm: "plot_performance_box"
1871   output-file-type: ".html"
1872   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ndrdisc"
1873   data:
1874     csit-vpp-perf-1710-all:
1875     - 2
1876     - 5
1877   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1878   parameters:
1879   - "throughput"
1880   - "parent"
1881   traces:
1882     hoverinfo: "x+y"
1883     boxpoints: "outliers"
1884     whiskerwidth: 0
1885   layout:
1886     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
1887     xaxis:
1888       autorange: True
1889       autotick: False
1890       fixedrange: False
1891       gridcolor: "rgb(238, 238, 238)"
1892       linecolor: "rgb(238, 238, 238)"
1893       linewidth: 1
1894       showgrid: True
1895       showline: True
1896       showticklabels: True
1897       tickcolor: "rgb(238, 238, 238)"
1898       tickmode: "linear"
1899       title: "Indexed Test Cases"
1900       zeroline: False
1901     yaxis:
1902       gridcolor: "rgb(238, 238, 238)'"
1903       hoverformat: ".4s"
1904       linecolor: "rgb(238, 238, 238)"
1905       linewidth: 1
1906       range: []
1907       showgrid: True
1908       showline: True
1909       showticklabels: True
1910       tickcolor: "rgb(238, 238, 238)"
1911       title: "Packets Per Second [pps]"
1912       zeroline: False
1913     boxmode: "group"
1914     boxgroupgap: 0.5
1915     autosize: False
1916     margin:
1917       t: 50
1918       b: 20
1919       l: 50
1920       r: 20
1921     showlegend: True
1922     legend:
1923       orientation: "h"
1924     width: 700
1925     height: 1000
1926
1927 -
1928   type: "plot"
1929   title: "VPP Performance 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1930   algorithm: "plot_performance_box"
1931   output-file-type: ".html"
1932   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-pdrdisc"
1933   data:
1934     csit-vpp-perf-1710-all:
1935     - 2
1936     - 5
1937   filter: "'78B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1938   parameters:
1939   - "throughput"
1940   - "parent"
1941   traces:
1942     hoverinfo: "x+y"
1943     boxpoints: "outliers"
1944     whiskerwidth: 0
1945   layout:
1946     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1947     xaxis:
1948       autorange: True
1949       autotick: False
1950       fixedrange: False
1951       gridcolor: "rgb(238, 238, 238)"
1952       linecolor: "rgb(238, 238, 238)"
1953       linewidth: 1
1954       showgrid: True
1955       showline: True
1956       showticklabels: True
1957       tickcolor: "rgb(238, 238, 238)"
1958       tickmode: "linear"
1959       title: "Indexed Test Cases"
1960       zeroline: False
1961     yaxis:
1962       gridcolor: "rgb(238, 238, 238)'"
1963       hoverformat: ".4s"
1964       linecolor: "rgb(238, 238, 238)"
1965       linewidth: 1
1966       range: []
1967       showgrid: True
1968       showline: True
1969       showticklabels: True
1970       tickcolor: "rgb(238, 238, 238)"
1971       title: "Packets Per Second [pps]"
1972       zeroline: False
1973     boxmode: "group"
1974     boxgroupgap: 0.5
1975     autosize: False
1976     margin:
1977       t: 50
1978       b: 20
1979       l: 50
1980       r: 20
1981     showlegend: True
1982     legend:
1983       orientation: "h"
1984     width: 700
1985     height: 1000
1986
1987 -
1988   type: "plot"
1989   title: "VPP Performance 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
1990   algorithm: "plot_performance_box"
1991   output-file-type: ".html"
1992   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-pdrdisc"
1993   data:
1994     csit-vpp-perf-1710-all:
1995     - 2
1996     - 5
1997   filter: "'78B' and 'ENCAP' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
1998   parameters:
1999   - "throughput"
2000   - "parent"
2001   traces:
2002     hoverinfo: "x+y"
2003     boxpoints: "outliers"
2004     whiskerwidth: 0
2005   layout:
2006     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-pdrdisc"
2007     xaxis:
2008       autorange: True
2009       autotick: False
2010       fixedrange: False
2011       gridcolor: "rgb(238, 238, 238)"
2012       linecolor: "rgb(238, 238, 238)"
2013       linewidth: 1
2014       showgrid: True
2015       showline: True
2016       showticklabels: True
2017       tickcolor: "rgb(238, 238, 238)"
2018       tickmode: "linear"
2019       title: "Indexed Test Cases"
2020       zeroline: False
2021     yaxis:
2022       gridcolor: "rgb(238, 238, 238)'"
2023       hoverformat: ".4s"
2024       linecolor: "rgb(238, 238, 238)"
2025       linewidth: 1
2026       range: []
2027       showgrid: True
2028       showline: True
2029       showticklabels: True
2030       tickcolor: "rgb(238, 238, 238)"
2031       title: "Packets Per Second [pps]"
2032       zeroline: False
2033     boxmode: "group"
2034     boxgroupgap: 0.5
2035     autosize: False
2036     margin:
2037       t: 50
2038       b: 20
2039       l: 50
2040       r: 20
2041     showlegend: True
2042     legend:
2043       orientation: "h"
2044     width: 700
2045     height: 1000
2046
2047 # VPP VM VHOST
2048 -
2049   type: "plot"
2050   title: "VPP Performance 64B-1t1c-.*vhost.*-ndrdisc"
2051   algorithm: "plot_performance_box"
2052   output-file-type: ".html"
2053   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-ndrdisc"
2054   data:
2055     csit-vpp-perf-1710-all:
2056     - 2
2057     - 5
2058   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2059   parameters:
2060   - "throughput"
2061   - "parent"
2062   traces:
2063     hoverinfo: "x+y"
2064     boxpoints: "outliers"
2065     whiskerwidth: 0
2066   layout:
2067     title: "64B-1t1c-.*vhost.*-ndrdisc"
2068     xaxis:
2069       autorange: True
2070       autotick: False
2071       fixedrange: False
2072       gridcolor: "rgb(238, 238, 238)"
2073       linecolor: "rgb(238, 238, 238)"
2074       linewidth: 1
2075       showgrid: True
2076       showline: True
2077       showticklabels: True
2078       tickcolor: "rgb(238, 238, 238)"
2079       tickmode: "linear"
2080       title: "Indexed Test Cases"
2081       zeroline: False
2082     yaxis:
2083       gridcolor: "rgb(238, 238, 238)'"
2084       hoverformat: ".4s"
2085       linecolor: "rgb(238, 238, 238)"
2086       linewidth: 1
2087       range: []
2088       showgrid: True
2089       showline: True
2090       showticklabels: True
2091       tickcolor: "rgb(238, 238, 238)"
2092       title: "Packets Per Second [pps]"
2093       zeroline: False
2094     boxmode: "group"
2095     boxgroupgap: 0.5
2096     autosize: False
2097     margin:
2098       t: 50
2099       b: 20
2100       l: 50
2101       r: 20
2102     showlegend: True
2103     legend:
2104       orientation: "h"
2105     width: 700
2106     height: 1000
2107
2108 -
2109   type: "plot"
2110   title: "VPP Performance 64B-2t2c-.*vhost.*-ndrdisc"
2111   algorithm: "plot_performance_box"
2112   output-file-type: ".html"
2113   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-ndrdisc"
2114   data:
2115     csit-vpp-perf-1710-all:
2116     - 2
2117     - 5
2118   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2119   parameters:
2120   - "throughput"
2121   - "parent"
2122   traces:
2123     hoverinfo: "x+y"
2124     boxpoints: "outliers"
2125     whiskerwidth: 0
2126   layout:
2127     title: "64B-2t2c-.*vhost.*-ndrdisc"
2128     xaxis:
2129       autorange: True
2130       autotick: False
2131       fixedrange: False
2132       gridcolor: "rgb(238, 238, 238)"
2133       linecolor: "rgb(238, 238, 238)"
2134       linewidth: 1
2135       showgrid: True
2136       showline: True
2137       showticklabels: True
2138       tickcolor: "rgb(238, 238, 238)"
2139       tickmode: "linear"
2140       title: "Indexed Test Cases"
2141       zeroline: False
2142     yaxis:
2143       gridcolor: "rgb(238, 238, 238)'"
2144       hoverformat: ".4s"
2145       linecolor: "rgb(238, 238, 238)"
2146       linewidth: 1
2147       range: []
2148       showgrid: True
2149       showline: True
2150       showticklabels: True
2151       tickcolor: "rgb(238, 238, 238)"
2152       title: "Packets Per Second [pps]"
2153       zeroline: False
2154     boxmode: "group"
2155     boxgroupgap: 0.5
2156     autosize: False
2157     margin:
2158       t: 50
2159       b: 20
2160       l: 50
2161       r: 20
2162     showlegend: True
2163     legend:
2164       orientation: "h"
2165     width: 700
2166     height: 1000
2167
2168 -
2169   type: "plot"
2170   title: "VPP Performance 64B-1t1c-.*vhost.*-pdrdisc"
2171   algorithm: "plot_performance_box"
2172   output-file-type: ".html"
2173   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-pdrdisc"
2174   data:
2175     csit-vpp-perf-1710-all:
2176     - 2
2177     - 5
2178   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2179   parameters:
2180   - "throughput"
2181   - "parent"
2182   traces:
2183     hoverinfo: "x+y"
2184     boxpoints: "outliers"
2185     whiskerwidth: 0
2186   layout:
2187     title: "64B-1t1c-.*vhost.*-pdrdisc"
2188     xaxis:
2189       autorange: True
2190       autotick: False
2191       fixedrange: False
2192       gridcolor: "rgb(238, 238, 238)"
2193       linecolor: "rgb(238, 238, 238)"
2194       linewidth: 1
2195       showgrid: True
2196       showline: True
2197       showticklabels: True
2198       tickcolor: "rgb(238, 238, 238)"
2199       tickmode: "linear"
2200       title: "Indexed Test Cases"
2201       zeroline: False
2202     yaxis:
2203       gridcolor: "rgb(238, 238, 238)'"
2204       hoverformat: ".4s"
2205       linecolor: "rgb(238, 238, 238)"
2206       linewidth: 1
2207       range: []
2208       showgrid: True
2209       showline: True
2210       showticklabels: True
2211       tickcolor: "rgb(238, 238, 238)"
2212       title: "Packets Per Second [pps]"
2213       zeroline: False
2214     boxmode: "group"
2215     boxgroupgap: 0.5
2216     autosize: False
2217     margin:
2218       t: 50
2219       b: 20
2220       l: 50
2221       r: 20
2222     showlegend: True
2223     legend:
2224       orientation: "h"
2225     width: 700
2226     height: 1000
2227
2228 -
2229   type: "plot"
2230   title: "VPP Performance 64B-2t2c-.*vhost.*-pdrdisc"
2231   algorithm: "plot_performance_box"
2232   output-file-type: ".html"
2233   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-pdrdisc"
2234   data:
2235     csit-vpp-perf-1710-all:
2236     - 2
2237     - 5
2238   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
2239   parameters:
2240   - "throughput"
2241   - "parent"
2242   traces:
2243     hoverinfo: "x+y"
2244     boxpoints: "outliers"
2245     whiskerwidth: 0
2246   layout:
2247     title: "64B-2t2c-.*vhost.*-pdrdisc"
2248     xaxis:
2249       autorange: True
2250       autotick: False
2251       fixedrange: False
2252       gridcolor: "rgb(238, 238, 238)"
2253       linecolor: "rgb(238, 238, 238)"
2254       linewidth: 1
2255       showgrid: True
2256       showline: True
2257       showticklabels: True
2258       tickcolor: "rgb(238, 238, 238)"
2259       tickmode: "linear"
2260       title: "Indexed Test Cases"
2261       zeroline: False
2262     yaxis:
2263       gridcolor: "rgb(238, 238, 238)'"
2264       hoverformat: ".4s"
2265       linecolor: "rgb(238, 238, 238)"
2266       linewidth: 1
2267       range: []
2268       showgrid: True
2269       showline: True
2270       showticklabels: True
2271       tickcolor: "rgb(238, 238, 238)"
2272       title: "Packets Per Second [pps]"
2273       zeroline: False
2274     boxmode: "group"
2275     boxgroupgap: 0.5
2276     autosize: False
2277     margin:
2278       t: 50
2279       b: 20
2280       l: 50
2281       r: 20
2282     showlegend: True
2283     legend:
2284       orientation: "h"
2285     width: 700
2286     height: 1000
2287
2288 # VPP VM VHOST SELECTION
2289 -
2290   type: "plot"
2291   title: "VPP Performance 64B-1t1c-.*vhost.*-ndrdisc"
2292   algorithm: "plot_performance_box"
2293   output-file-type: ".html"
2294   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-ndrdisc"
2295   data:
2296     csit-vpp-perf-1710-all:
2297     - 2
2298     - 5
2299   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2300   parameters:
2301   - "throughput"
2302   - "parent"
2303   traces:
2304     hoverinfo: "x+y"
2305     boxpoints: "outliers"
2306     whiskerwidth: 0
2307   layout:
2308     title: "64B-1t1c-.*vhost.*-ndrdisc"
2309     xaxis:
2310       autorange: True
2311       autotick: False
2312       fixedrange: False
2313       gridcolor: "rgb(238, 238, 238)"
2314       linecolor: "rgb(238, 238, 238)"
2315       linewidth: 1
2316       showgrid: True
2317       showline: True
2318       showticklabels: True
2319       tickcolor: "rgb(238, 238, 238)"
2320       tickmode: "linear"
2321       title: "Indexed Test Cases"
2322       zeroline: False
2323     yaxis:
2324       gridcolor: "rgb(238, 238, 238)'"
2325       hoverformat: ".4s"
2326       linecolor: "rgb(238, 238, 238)"
2327       linewidth: 1
2328       range: []
2329       showgrid: True
2330       showline: True
2331       showticklabels: True
2332       tickcolor: "rgb(238, 238, 238)"
2333       title: "Packets Per Second [pps]"
2334       zeroline: False
2335     boxmode: "group"
2336     boxgroupgap: 0.5
2337     autosize: False
2338     margin:
2339       t: 50
2340       b: 20
2341       l: 50
2342       r: 20
2343     showlegend: True
2344     legend:
2345       orientation: "h"
2346     width: 700
2347     height: 1000
2348
2349 -
2350   type: "plot"
2351   title: "VPP Performance 64B-2t2c-.*vhost.*-ndrdisc"
2352   algorithm: "plot_performance_box"
2353   output-file-type: ".html"
2354   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-ndrdisc"
2355   data:
2356     csit-vpp-perf-1710-all:
2357     - 2
2358     - 5
2359   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2360   parameters:
2361   - "throughput"
2362   - "parent"
2363   traces:
2364     hoverinfo: "x+y"
2365     boxpoints: "outliers"
2366     whiskerwidth: 0
2367   layout:
2368     title: "64B-2t2c-.*vhost.*-ndrdisc"
2369     xaxis:
2370       autorange: True
2371       autotick: False
2372       fixedrange: False
2373       gridcolor: "rgb(238, 238, 238)"
2374       linecolor: "rgb(238, 238, 238)"
2375       linewidth: 1
2376       showgrid: True
2377       showline: True
2378       showticklabels: True
2379       tickcolor: "rgb(238, 238, 238)"
2380       tickmode: "linear"
2381       title: "Indexed Test Cases"
2382       zeroline: False
2383     yaxis:
2384       gridcolor: "rgb(238, 238, 238)'"
2385       hoverformat: ".4s"
2386       linecolor: "rgb(238, 238, 238)"
2387       linewidth: 1
2388       range: []
2389       showgrid: True
2390       showline: True
2391       showticklabels: True
2392       tickcolor: "rgb(238, 238, 238)"
2393       title: "Packets Per Second [pps]"
2394       zeroline: False
2395     boxmode: "group"
2396     boxgroupgap: 0.5
2397     autosize: False
2398     margin:
2399       t: 50
2400       b: 20
2401       l: 50
2402       r: 20
2403     showlegend: True
2404     legend:
2405       orientation: "h"
2406     width: 700
2407     height: 1000
2408
2409 -
2410   type: "plot"
2411   title: "VPP Performance 64B-1t1c-.*vhost.*-pdrdisc"
2412   algorithm: "plot_performance_box"
2413   output-file-type: ".html"
2414   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-pdrdisc"
2415   data:
2416     csit-vpp-perf-1710-all:
2417     - 2
2418     - 5
2419   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2420   parameters:
2421   - "throughput"
2422   - "parent"
2423   traces:
2424     hoverinfo: "x+y"
2425     boxpoints: "outliers"
2426     whiskerwidth: 0
2427   layout:
2428     title: "64B-1t1c-.*vhost.*-pdrdisc"
2429     xaxis:
2430       autorange: True
2431       autotick: False
2432       fixedrange: False
2433       gridcolor: "rgb(238, 238, 238)"
2434       linecolor: "rgb(238, 238, 238)"
2435       linewidth: 1
2436       showgrid: True
2437       showline: True
2438       showticklabels: True
2439       tickcolor: "rgb(238, 238, 238)"
2440       tickmode: "linear"
2441       title: "Indexed Test Cases"
2442       zeroline: False
2443     yaxis:
2444       gridcolor: "rgb(238, 238, 238)'"
2445       hoverformat: ".4s"
2446       linecolor: "rgb(238, 238, 238)"
2447       linewidth: 1
2448       range: []
2449       showgrid: True
2450       showline: True
2451       showticklabels: True
2452       tickcolor: "rgb(238, 238, 238)"
2453       title: "Packets Per Second [pps]"
2454       zeroline: False
2455     boxmode: "group"
2456     boxgroupgap: 0.5
2457     autosize: False
2458     margin:
2459       t: 50
2460       b: 20
2461       l: 50
2462       r: 20
2463     showlegend: True
2464     legend:
2465       orientation: "h"
2466     width: 700
2467     height: 1000
2468
2469 -
2470   type: "plot"
2471   title: "VPP Performance 64B-2t2c-.*vhost.*-pdrdisc"
2472   algorithm: "plot_performance_box"
2473   output-file-type: ".html"
2474   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-pdrdisc"
2475   data:
2476     csit-vpp-perf-1710-all:
2477     - 2
2478     - 5
2479   filter: "'64B' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
2480   parameters:
2481   - "throughput"
2482   - "parent"
2483   traces:
2484     hoverinfo: "x+y"
2485     boxpoints: "outliers"
2486     whiskerwidth: 0
2487   layout:
2488     title: "64B-2t2c-.*vhost.*-pdrdisc"
2489     xaxis:
2490       autorange: True
2491       autotick: False
2492       fixedrange: False
2493       gridcolor: "rgb(238, 238, 238)"
2494       linecolor: "rgb(238, 238, 238)"
2495       linewidth: 1
2496       showgrid: True
2497       showline: True
2498       showticklabels: True
2499       tickcolor: "rgb(238, 238, 238)"
2500       tickmode: "linear"
2501       title: "Indexed Test Cases"
2502       zeroline: False
2503     yaxis:
2504       gridcolor: "rgb(238, 238, 238)'"
2505       hoverformat: ".4s"
2506       linecolor: "rgb(238, 238, 238)"
2507       linewidth: 1
2508       range: []
2509       showgrid: True
2510       showline: True
2511       showticklabels: True
2512       tickcolor: "rgb(238, 238, 238)"
2513       title: "Packets Per Second [pps]"
2514       zeroline: False
2515     boxmode: "group"
2516     boxgroupgap: 0.5
2517     autosize: False
2518     margin:
2519       t: 50
2520       b: 20
2521       l: 50
2522       r: 20
2523     showlegend: True
2524     legend:
2525       orientation: "h"
2526     width: 700
2527     height: 1000
2528
2529 # VPP CRYPTO
2530 -
2531   type: "plot"
2532   title: "VPP Performance 64B-1t1c-.*ipsec.*-ndrdisc"
2533   algorithm: "plot_performance_box"
2534   output-file-type: ".html"
2535   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-ndrdisc"
2536   data:
2537     csit-vpp-perf-1710-all:
2538     - 2
2539     - 5
2540   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2541   parameters:
2542   - "throughput"
2543   - "parent"
2544   traces:
2545     hoverinfo: "x+y"
2546     boxpoints: "outliers"
2547     whiskerwidth: 0
2548   layout:
2549     title: "64B-1t1c-.*ipsec.*-ndrdisc"
2550     xaxis:
2551       autorange: True
2552       autotick: False
2553       fixedrange: False
2554       gridcolor: "rgb(238, 238, 238)"
2555       linecolor: "rgb(238, 238, 238)"
2556       linewidth: 1
2557       showgrid: True
2558       showline: True
2559       showticklabels: True
2560       tickcolor: "rgb(238, 238, 238)"
2561       tickmode: "linear"
2562       title: "Indexed Test Cases"
2563       zeroline: False
2564     yaxis:
2565       gridcolor: "rgb(238, 238, 238)'"
2566       hoverformat: ".4s"
2567       linecolor: "rgb(238, 238, 238)"
2568       linewidth: 1
2569       range: []
2570       showgrid: True
2571       showline: True
2572       showticklabels: True
2573       tickcolor: "rgb(238, 238, 238)"
2574       title: "Packets Per Second [pps]"
2575       zeroline: False
2576     boxmode: "group"
2577     boxgroupgap: 0.5
2578     autosize: False
2579     margin:
2580       t: 50
2581       b: 20
2582       l: 50
2583       r: 20
2584     showlegend: True
2585     legend:
2586       orientation: "h"
2587     width: 700
2588     height: 1000
2589
2590 -
2591   type: "plot"
2592   title: "VPP Performance 64B-2t2c-.*ipsec.*-ndrdisc"
2593   algorithm: "plot_performance_box"
2594   output-file-type: ".html"
2595   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-ndrdisc"
2596   data:
2597     csit-vpp-perf-1710-all:
2598     - 2
2599     - 5
2600   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2601   parameters:
2602   - "throughput"
2603   - "parent"
2604   traces:
2605     hoverinfo: "x+y"
2606     boxpoints: "outliers"
2607     whiskerwidth: 0
2608   layout:
2609     title: "64B-2t2c-.*ipsec.*-ndrdisc"
2610     xaxis:
2611       autorange: True
2612       autotick: False
2613       fixedrange: False
2614       gridcolor: "rgb(238, 238, 238)"
2615       linecolor: "rgb(238, 238, 238)"
2616       linewidth: 1
2617       showgrid: True
2618       showline: True
2619       showticklabels: True
2620       tickcolor: "rgb(238, 238, 238)"
2621       tickmode: "linear"
2622       title: "Indexed Test Cases"
2623       zeroline: False
2624     yaxis:
2625       gridcolor: "rgb(238, 238, 238)'"
2626       hoverformat: ".4s"
2627       linecolor: "rgb(238, 238, 238)"
2628       linewidth: 1
2629       range: []
2630       showgrid: True
2631       showline: True
2632       showticklabels: True
2633       tickcolor: "rgb(238, 238, 238)"
2634       title: "Packets Per Second [pps]"
2635       zeroline: False
2636     boxmode: "group"
2637     boxgroupgap: 0.5
2638     autosize: False
2639     margin:
2640       t: 50
2641       b: 20
2642       l: 50
2643       r: 20
2644     showlegend: True
2645     legend:
2646       orientation: "h"
2647     width: 700
2648     height: 1000
2649
2650 -
2651   type: "plot"
2652   title: "VPP Performance 64B-1t1c-.*ipsec.*-pdrdisc"
2653   algorithm: "plot_performance_box"
2654   output-file-type: ".html"
2655   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-pdrdisc"
2656   data:
2657     csit-vpp-perf-1710-all:
2658     - 2
2659     - 5
2660   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2661   parameters:
2662   - "throughput"
2663   - "parent"
2664   traces:
2665     hoverinfo: "x+y"
2666     boxpoints: "outliers"
2667     whiskerwidth: 0
2668   layout:
2669     title: "64B-1t1c-.*ipsec.*-pdrdisc"
2670     xaxis:
2671       autorange: True
2672       autotick: False
2673       fixedrange: False
2674       gridcolor: "rgb(238, 238, 238)"
2675       linecolor: "rgb(238, 238, 238)"
2676       linewidth: 1
2677       showgrid: True
2678       showline: True
2679       showticklabels: True
2680       tickcolor: "rgb(238, 238, 238)"
2681       tickmode: "linear"
2682       title: "Indexed Test Cases"
2683       zeroline: False
2684     yaxis:
2685       gridcolor: "rgb(238, 238, 238)'"
2686       hoverformat: ".4s"
2687       linecolor: "rgb(238, 238, 238)"
2688       linewidth: 1
2689       range: []
2690       showgrid: True
2691       showline: True
2692       showticklabels: True
2693       tickcolor: "rgb(238, 238, 238)"
2694       title: "Packets Per Second [pps]"
2695       zeroline: False
2696     boxmode: "group"
2697     boxgroupgap: 0.5
2698     autosize: False
2699     margin:
2700       t: 50
2701       b: 20
2702       l: 50
2703       r: 20
2704     showlegend: True
2705     legend:
2706       orientation: "h"
2707     width: 700
2708     height: 1000
2709
2710 -
2711   type: "plot"
2712   title: "VPP Performance 64B-2t2c-.*ipsec.*-pdrdisc"
2713   algorithm: "plot_performance_box"
2714   output-file-type: ".html"
2715   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-pdrdisc"
2716   data:
2717     csit-vpp-perf-1710-all:
2718     - 2
2719     - 5
2720   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
2721   parameters:
2722   - "throughput"
2723   - "parent"
2724   traces:
2725     hoverinfo: "x+y"
2726     boxpoints: "outliers"
2727     whiskerwidth: 0
2728   layout:
2729     title: "64B-2t2c-.*ipsec.*-pdrdisc"
2730     xaxis:
2731       autorange: True
2732       autotick: False
2733       fixedrange: False
2734       gridcolor: "rgb(238, 238, 238)"
2735       linecolor: "rgb(238, 238, 238)"
2736       linewidth: 1
2737       showgrid: True
2738       showline: True
2739       showticklabels: True
2740       tickcolor: "rgb(238, 238, 238)"
2741       tickmode: "linear"
2742       title: "Indexed Test Cases"
2743       zeroline: False
2744     yaxis:
2745       gridcolor: "rgb(238, 238, 238)'"
2746       hoverformat: ".4s"
2747       linecolor: "rgb(238, 238, 238)"
2748       linewidth: 1
2749       range: []
2750       showgrid: True
2751       showline: True
2752       showticklabels: True
2753       tickcolor: "rgb(238, 238, 238)"
2754       title: "Packets Per Second [pps]"
2755       zeroline: False
2756     boxmode: "group"
2757     boxgroupgap: 0.5
2758     autosize: False
2759     margin:
2760       t: 50
2761       b: 20
2762       l: 50
2763       r: 20
2764     showlegend: True
2765     legend:
2766       orientation: "h"
2767     width: 700
2768     height: 1000
2769
2770 # DPDK
2771 -
2772   type: "plot"
2773   title: "DPDK Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2774   algorithm: "plot_performance_box"
2775   output-file-type: ".html"
2776   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-ndrdisc"
2777   data:
2778     csit-dpdk-perf-1710-all:
2779     - 2
2780     - 3
2781   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2782   parameters:
2783   - "throughput"
2784   - "parent"
2785   traces:
2786     hoverinfo: "x+y"
2787     boxpoints: "outliers"
2788     whiskerwidth: 0
2789   layout:
2790     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2791     xaxis:
2792       autorange: True
2793       autotick: False
2794       fixedrange: False
2795       gridcolor: "rgb(238, 238, 238)"
2796       linecolor: "rgb(238, 238, 238)"
2797       linewidth: 1
2798       showgrid: True
2799       showline: True
2800       showticklabels: True
2801       tickcolor: "rgb(238, 238, 238)"
2802       tickmode: "linear"
2803       title: "Indexed Test Cases"
2804       zeroline: False
2805     yaxis:
2806       gridcolor: "rgb(238, 238, 238)'"
2807       hoverformat: ".4s"
2808       linecolor: "rgb(238, 238, 238)"
2809       linewidth: 1
2810       range: []
2811       showgrid: True
2812       showline: True
2813       showticklabels: True
2814       tickcolor: "rgb(238, 238, 238)"
2815       title: "Packets Per Second [pps]"
2816       zeroline: False
2817     boxmode: "group"
2818     boxgroupgap: 0.5
2819     autosize: False
2820     margin:
2821       t: 50
2822       b: 20
2823       l: 50
2824       r: 20
2825     showlegend: True
2826     legend:
2827       orientation: "h"
2828     width: 700
2829     height: 1000
2830
2831 -
2832   type: "plot"
2833   title: "DPDK Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2834   algorithm: "plot_performance_box"
2835   output-file-type: ".html"
2836   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-ndrdisc"
2837   data:
2838     csit-dpdk-perf-1710-all:
2839     - 2
2840     - 3
2841   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
2842   parameters:
2843   - "throughput"
2844   - "parent"
2845   traces:
2846     hoverinfo: "x+y"
2847     boxpoints: "outliers"
2848     whiskerwidth: 0
2849   layout:
2850     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
2851     xaxis:
2852       autorange: True
2853       autotick: False
2854       fixedrange: False
2855       gridcolor: "rgb(238, 238, 238)"
2856       linecolor: "rgb(238, 238, 238)"
2857       linewidth: 1
2858       showgrid: True
2859       showline: True
2860       showticklabels: True
2861       tickcolor: "rgb(238, 238, 238)"
2862       tickmode: "linear"
2863       title: "Indexed Test Cases"
2864       zeroline: False
2865     yaxis:
2866       gridcolor: "rgb(238, 238, 238)'"
2867       hoverformat: ".4s"
2868       linecolor: "rgb(238, 238, 238)"
2869       linewidth: 1
2870       range: []
2871       showgrid: True
2872       showline: True
2873       showticklabels: True
2874       tickcolor: "rgb(238, 238, 238)"
2875       title: "Packets Per Second [pps]"
2876       zeroline: False
2877     boxmode: "group"
2878     boxgroupgap: 0.5
2879     autosize: False
2880     margin:
2881       t: 50
2882       b: 20
2883       l: 50
2884       r: 20
2885     showlegend: True
2886     legend:
2887       orientation: "h"
2888     width: 700
2889     height: 1000
2890
2891 -
2892   type: "plot"
2893   title: "DPDK Performance 64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
2894   algorithm: "plot_performance_box"
2895   output-file-type: ".html"
2896   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-ndrdisc"
2897   data:
2898     csit-dpdk-perf-1710-all:
2899     - 2
2900     - 3
2901   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'IP4FWD'"
2902   parameters:
2903   - "throughput"
2904   - "parent"
2905   traces:
2906     hoverinfo: "x+y"
2907     boxpoints: "outliers"
2908     whiskerwidth: 0
2909   layout:
2910     title: "64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
2911     xaxis:
2912       autorange: True
2913       autotick: False
2914       fixedrange: False
2915       gridcolor: "rgb(238, 238, 238)"
2916       linecolor: "rgb(238, 238, 238)"
2917       linewidth: 1
2918       showgrid: True
2919       showline: True
2920       showticklabels: True
2921       tickcolor: "rgb(238, 238, 238)"
2922       tickmode: "linear"
2923       title: "Indexed Test Cases"
2924       zeroline: False
2925     yaxis:
2926       gridcolor: "rgb(238, 238, 238)'"
2927       hoverformat: ".4s"
2928       linecolor: "rgb(238, 238, 238)"
2929       linewidth: 1
2930       range: [2000000, 12000000]
2931       showgrid: True
2932       showline: True
2933       showticklabels: True
2934       tickcolor: "rgb(238, 238, 238)"
2935       title: "Packets Per Second [pps]"
2936       zeroline: False
2937     boxmode: "group"
2938     boxgroupgap: 0.5
2939     autosize: False
2940     margin:
2941       t: 50
2942       b: 20
2943       l: 50
2944       r: 20
2945     showlegend: True
2946     legend:
2947       orientation: "h"
2948     width: 700
2949     height: 1000
2950
2951 -
2952   type: "plot"
2953   title: "DPDK Performance 64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
2954   algorithm: "plot_performance_box"
2955   output-file-type: ".html"
2956   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-ndrdisc"
2957   data:
2958     csit-dpdk-perf-1710-all:
2959     - 2
2960     - 3
2961   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'IP4FWD'"
2962   parameters:
2963   - "throughput"
2964   - "parent"
2965   traces:
2966     hoverinfo: "x+y"
2967     boxpoints: "outliers"
2968     whiskerwidth: 0
2969   layout:
2970     title: "64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
2971     xaxis:
2972       autorange: True
2973       autotick: False
2974       fixedrange: False
2975       gridcolor: "rgb(238, 238, 238)"
2976       linecolor: "rgb(238, 238, 238)"
2977       linewidth: 1
2978       showgrid: True
2979       showline: True
2980       showticklabels: True
2981       tickcolor: "rgb(238, 238, 238)"
2982       tickmode: "linear"
2983       title: "Indexed Test Cases"
2984       zeroline: False
2985     yaxis:
2986       gridcolor: "rgb(238, 238, 238)'"
2987       hoverformat: ".4s"
2988       linecolor: "rgb(238, 238, 238)"
2989       linewidth: 1
2990       range: [2000000, 12000000]
2991       showgrid: True
2992       showline: True
2993       showticklabels: True
2994       tickcolor: "rgb(238, 238, 238)"
2995       title: "Packets Per Second [pps]"
2996       zeroline: False
2997     boxmode: "group"
2998     boxgroupgap: 0.5
2999     autosize: False
3000     margin:
3001       t: 50
3002       b: 20
3003       l: 50
3004       r: 20
3005     showlegend: True
3006     legend:
3007       orientation: "h"
3008     width: 700
3009     height: 1000
3010
3011 -
3012   type: "plot"
3013   title: "DPDK Performance 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3014   algorithm: "plot_performance_box"
3015   output-file-type: ".html"
3016   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-pdrdisc"
3017   data:
3018     csit-dpdk-perf-1710-all:
3019     - 2
3020     - 3
3021   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3022   parameters:
3023   - "throughput"
3024   - "parent"
3025   traces:
3026     hoverinfo: "x+y"
3027     boxpoints: "outliers"
3028     whiskerwidth: 0
3029   layout:
3030     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3031     xaxis:
3032       autorange: True
3033       autotick: False
3034       fixedrange: False
3035       gridcolor: "rgb(238, 238, 238)"
3036       linecolor: "rgb(238, 238, 238)"
3037       linewidth: 1
3038       showgrid: True
3039       showline: True
3040       showticklabels: True
3041       tickcolor: "rgb(238, 238, 238)"
3042       tickmode: "linear"
3043       title: "Indexed Test Cases"
3044       zeroline: False
3045     yaxis:
3046       gridcolor: "rgb(238, 238, 238)'"
3047       hoverformat: ".4s"
3048       linecolor: "rgb(238, 238, 238)"
3049       linewidth: 1
3050       range: []
3051       showgrid: True
3052       showline: True
3053       showticklabels: True
3054       tickcolor: "rgb(238, 238, 238)"
3055       title: "Packets Per Second [pps]"
3056       zeroline: False
3057     boxmode: "group"
3058     boxgroupgap: 0.5
3059     autosize: False
3060     margin:
3061       t: 50
3062       b: 20
3063       l: 50
3064       r: 20
3065     showlegend: True
3066     legend:
3067       orientation: "h"
3068     width: 700
3069     height: 1000
3070
3071 -
3072   type: "plot"
3073   title: "DPDK Performance 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3074   algorithm: "plot_performance_box"
3075   output-file-type: ".html"
3076   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-pdrdisc"
3077   data:
3078     csit-dpdk-perf-1710-all:
3079     - 2
3080     - 3
3081   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3082   parameters:
3083   - "throughput"
3084   - "parent"
3085   traces:
3086     hoverinfo: "x+y"
3087     boxpoints: "outliers"
3088     whiskerwidth: 0
3089   layout:
3090     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-pdrdisc"
3091     xaxis:
3092       autorange: True
3093       autotick: False
3094       fixedrange: False
3095       gridcolor: "rgb(238, 238, 238)"
3096       linecolor: "rgb(238, 238, 238)"
3097       linewidth: 1
3098       showgrid: True
3099       showline: True
3100       showticklabels: True
3101       tickcolor: "rgb(238, 238, 238)"
3102       tickmode: "linear"
3103       title: "Indexed Test Cases"
3104       zeroline: False
3105     yaxis:
3106       gridcolor: "rgb(238, 238, 238)'"
3107       hoverformat: ".4s"
3108       linecolor: "rgb(238, 238, 238)"
3109       linewidth: 1
3110       range: []
3111       showgrid: True
3112       showline: True
3113       showticklabels: True
3114       tickcolor: "rgb(238, 238, 238)"
3115       title: "Packets Per Second [pps]"
3116       zeroline: False
3117     boxmode: "group"
3118     boxgroupgap: 0.5
3119     autosize: False
3120     margin:
3121       t: 50
3122       b: 20
3123       l: 50
3124       r: 20
3125     showlegend: True
3126     legend:
3127       orientation: "h"
3128     width: 700
3129     height: 1000
3130
3131 -
3132   type: "plot"
3133   title: "DPDK Performance 64B-1t1c-ethip4-ip4base-l3fwd-pdrdisc"
3134   algorithm: "plot_performance_box"
3135   output-file-type: ".html"
3136   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-pdrdisc"
3137   data:
3138     csit-dpdk-perf-1710-all:
3139     - 2
3140     - 3
3141   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '1T1C' and 'IP4FWD'"
3142   parameters:
3143   - "throughput"
3144   - "parent"
3145   traces:
3146     hoverinfo: "x+y"
3147     boxpoints: "outliers"
3148     whiskerwidth: 0
3149   layout:
3150     title: "64B-1t1c-ethip4-ip4base-l3fwd-pdrdisc"
3151     xaxis:
3152       autorange: True
3153       autotick: False
3154       fixedrange: False
3155       gridcolor: "rgb(238, 238, 238)"
3156       linecolor: "rgb(238, 238, 238)"
3157       linewidth: 1
3158       showgrid: True
3159       showline: True
3160       showticklabels: True
3161       tickcolor: "rgb(238, 238, 238)"
3162       tickmode: "linear"
3163       title: "Indexed Test Cases"
3164       zeroline: False
3165     yaxis:
3166       gridcolor: "rgb(238, 238, 238)'"
3167       hoverformat: ".4s"
3168       linecolor: "rgb(238, 238, 238)"
3169       linewidth: 1
3170       range: [20000000, 30000000]
3171       showgrid: True
3172       showline: True
3173       showticklabels: True
3174       tickcolor: "rgb(238, 238, 238)"
3175       title: "Packets Per Second [pps]"
3176       zeroline: False
3177     boxmode: "group"
3178     boxgroupgap: 0.5
3179     autosize: False
3180     margin:
3181       t: 50
3182       b: 20
3183       l: 50
3184       r: 20
3185     showlegend: True
3186     legend:
3187       orientation: "h"
3188     width: 700
3189     height: 1000
3190
3191 -
3192   type: "plot"
3193   title: "DPDK Performance 64B-2t2c-ethip4-ip4base-l3fwd-pdrdisc"
3194   algorithm: "plot_performance_box"
3195   output-file-type: ".html"
3196   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-pdrdisc"
3197   data:
3198     csit-dpdk-perf-1710-all:
3199     - 2
3200     - 3
3201   filter: "'64B' and 'BASE' and 'PDRDISC' and not 'NDRDISC' and '2T2C' and 'IP4FWD'"
3202   parameters:
3203   - "throughput"
3204   - "parent"
3205   traces:
3206     hoverinfo: "x+y"
3207     boxpoints: "outliers"
3208     whiskerwidth: 0
3209   layout:
3210     title: "64B-2t2c-ethip4-ip4base-l3fwd-pdrdisc"
3211     xaxis:
3212       autorange: True
3213       autotick: False
3214       fixedrange: False
3215       gridcolor: "rgb(238, 238, 238)"
3216       linecolor: "rgb(238, 238, 238)"
3217       linewidth: 1
3218       showgrid: True
3219       showline: True
3220       showticklabels: True
3221       tickcolor: "rgb(238, 238, 238)"
3222       tickmode: "linear"
3223       title: "Indexed Test Cases"
3224       zeroline: False
3225     yaxis:
3226       gridcolor: "rgb(238, 238, 238)'"
3227       hoverformat: ".4s"
3228       linecolor: "rgb(238, 238, 238)"
3229       linewidth: 1
3230       range: [20000000, 30000000]
3231       showgrid: True
3232       showline: True
3233       showticklabels: True
3234       tickcolor: "rgb(238, 238, 238)"
3235       title: "Packets Per Second [pps]"
3236       zeroline: False
3237     boxmode: "group"
3238     boxgroupgap: 0.5
3239     autosize: False
3240     margin:
3241       t: 50
3242       b: 20
3243       l: 50
3244       r: 20
3245     showlegend: True
3246     legend:
3247       orientation: "h"
3248     width: 700
3249     height: 1000
3250
3251 # Plot latency
3252
3253 # VPP L2 sel1
3254 -
3255   type: "plot"
3256   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3257   algorithm: "plot_latency_box"
3258   output-file-type: ".html"
3259   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel1-ndrdisc-lat50"
3260   data:
3261     csit-vpp-perf-1710-all:
3262     - 2
3263     - 5
3264   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3265   parameters:
3266   - "latency"
3267   - "parent"
3268   traces:
3269     boxmean: False
3270   layout:
3271     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3272     xaxis:
3273       autorange: True
3274       autotick: False
3275       fixedrange: False
3276       gridcolor: "rgb(238, 238, 238)"
3277       linecolor: "rgb(238, 238, 238)"
3278       linewidth: 1
3279       showgrid: True
3280       showline: True
3281       showticklabels: True
3282       tickcolor: "rgb(238, 238, 238)"
3283       tickmode: "linear"
3284       title: "Indexed Test Cases"
3285       zeroline: False
3286     yaxis:
3287       gridcolor: "rgb(238, 238, 238)'"
3288       hoverformat: ""
3289       linecolor: "rgb(238, 238, 238)"
3290       linewidth: 1
3291       range: []
3292       showgrid: True
3293       showline: True
3294       showticklabels: True
3295       tickcolor: "rgb(238, 238, 238)"
3296       title: "Latency min/avg/max [uSec]"
3297       zeroline: False
3298     boxmode: "group"
3299     boxgroupgap: 0.5
3300     autosize: False
3301     margin:
3302       t: 50
3303       b: 20
3304       l: 50
3305       r: 20
3306     showlegend: True
3307     legend:
3308       orientation: "h"
3309     width: 700
3310     height: 1000
3311
3312 -
3313   type: "plot"
3314   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3315   algorithm: "plot_latency_box"
3316   output-file-type: ".html"
3317   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel1-ndrdisc-lat50"
3318   data:
3319     csit-vpp-perf-1710-all:
3320     - 2
3321     - 5
3322   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3323   parameters:
3324   - "latency"
3325   - "parent"
3326   traces:
3327     boxmean: False
3328   layout:
3329     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3330     xaxis:
3331       autorange: True
3332       autotick: False
3333       fixedrange: False
3334       gridcolor: "rgb(238, 238, 238)"
3335       linecolor: "rgb(238, 238, 238)"
3336       linewidth: 1
3337       showgrid: True
3338       showline: True
3339       showticklabels: True
3340       tickcolor: "rgb(238, 238, 238)"
3341       tickmode: "linear"
3342       title: "Indexed Test Cases"
3343       zeroline: False
3344     yaxis:
3345       gridcolor: "rgb(238, 238, 238)'"
3346       hoverformat: ""
3347       linecolor: "rgb(238, 238, 238)"
3348       linewidth: 1
3349       range: []
3350       showgrid: True
3351       showline: True
3352       showticklabels: True
3353       tickcolor: "rgb(238, 238, 238)"
3354       title: "Latency min/avg/max [uSec]"
3355       zeroline: False
3356     boxmode: "group"
3357     boxgroupgap: 0.5
3358     autosize: False
3359     margin:
3360       t: 50
3361       b: 20
3362       l: 50
3363       r: 20
3364     showlegend: True
3365     legend:
3366       orientation: "h"
3367     width: 700
3368     height: 1000
3369
3370 # VPP L2 sel2
3371 -
3372   type: "plot"
3373   title: "VPP Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3374   algorithm: "plot_latency_box"
3375   output-file-type: ".html"
3376   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-l2-sel2-ndrdisc-lat50"
3377   data:
3378     csit-vpp-perf-1710-all:
3379     - 2
3380     - 5
3381   filter: "'64B' and ('FEATURE' and 'ACL50' and '10k_FLOWS') and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3382   parameters:
3383   - "latency"
3384   - "parent"
3385   traces:
3386     boxmean: False
3387   layout:
3388     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3389     xaxis:
3390       autorange: True
3391       autotick: False
3392       fixedrange: False
3393       gridcolor: "rgb(238, 238, 238)"
3394       linecolor: "rgb(238, 238, 238)"
3395       linewidth: 1
3396       showgrid: True
3397       showline: True
3398       showticklabels: True
3399       tickcolor: "rgb(238, 238, 238)"
3400       tickmode: "linear"
3401       title: "Indexed Test Cases"
3402       zeroline: False
3403     yaxis:
3404       gridcolor: "rgb(238, 238, 238)'"
3405       hoverformat: ""
3406       linecolor: "rgb(238, 238, 238)"
3407       linewidth: 1
3408       range: []
3409       showgrid: True
3410       showline: True
3411       showticklabels: True
3412       tickcolor: "rgb(238, 238, 238)"
3413       title: "Latency min/avg/max [uSec]"
3414       zeroline: False
3415     boxmode: "group"
3416     boxgroupgap: 0.5
3417     autosize: False
3418     margin:
3419       t: 50
3420       b: 20
3421       l: 50
3422       r: 20
3423     showlegend: True
3424     legend:
3425       orientation: "h"
3426     width: 700
3427     height: 1000
3428
3429 -
3430   type: "plot"
3431   title: "VPP Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3432   algorithm: "plot_latency_box"
3433   output-file-type: ".html"
3434   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-l2-sel2-ndrdisc-lat50"
3435   data:
3436     csit-vpp-perf-1710-all:
3437     - 2
3438     - 5
3439   filter: "'64B' and ('FEATURE' and 'ACL50' and '10k_FLOWS') and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
3440   parameters:
3441   - "latency"
3442   - "parent"
3443   traces:
3444     boxmean: False
3445   layout:
3446     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
3447     xaxis:
3448       autorange: True
3449       autotick: False
3450       fixedrange: False
3451       gridcolor: "rgb(238, 238, 238)"
3452       linecolor: "rgb(238, 238, 238)"
3453       linewidth: 1
3454       showgrid: True
3455       showline: True
3456       showticklabels: True
3457       tickcolor: "rgb(238, 238, 238)"
3458       tickmode: "linear"
3459       title: "Indexed Test Cases"
3460       zeroline: False
3461     yaxis:
3462       gridcolor: "rgb(238, 238, 238)'"
3463       hoverformat: ""
3464       linecolor: "rgb(238, 238, 238)"
3465       linewidth: 1
3466       range: []
3467       showgrid: True
3468       showline: True
3469       showticklabels: True
3470       tickcolor: "rgb(238, 238, 238)"
3471       title: "Latency min/avg/max [uSec]"
3472       zeroline: False
3473     boxmode: "group"
3474     boxgroupgap: 0.5
3475     autosize: False
3476     margin:
3477       t: 50
3478       b: 20
3479       l: 50
3480       r: 20
3481     showlegend: True
3482     legend:
3483       orientation: "h"
3484     width: 700
3485     height: 1000
3486
3487 # VPP IP4
3488 -
3489   type: "plot"
3490   title: "VPP Latency 64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
3491   algorithm: "plot_latency_box"
3492   output-file-type: ".html"
3493   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ip4-ndrdisc-lat50"
3494   data:
3495     csit-vpp-perf-1710-all:
3496     - 2
3497     - 5
3498   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
3499   parameters:
3500   - "latency"
3501   - "parent"
3502   traces:
3503     boxmean: False
3504   layout:
3505     title: "64B-1t1c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
3506     xaxis:
3507       autorange: True
3508       autotick: False
3509       fixedrange: False
3510       gridcolor: "rgb(238, 238, 238)"
3511       linecolor: "rgb(238, 238, 238)"
3512       linewidth: 1
3513       showgrid: True
3514       showline: True
3515       showticklabels: True
3516       tickcolor: "rgb(238, 238, 238)"
3517       tickmode: "linear"
3518       title: "Indexed Test Cases"
3519       zeroline: False
3520     yaxis:
3521       gridcolor: "rgb(238, 238, 238)'"
3522       hoverformat: ""
3523       linecolor: "rgb(238, 238, 238)"
3524       linewidth: 1
3525       range: []
3526       showgrid: True
3527       showline: True
3528       showticklabels: True
3529       tickcolor: "rgb(238, 238, 238)"
3530       title: "Latency min/avg/max [uSec]"
3531       zeroline: False
3532     boxmode: "group"
3533     boxgroupgap: 0.5
3534     autosize: False
3535     margin:
3536       t: 50
3537       b: 20
3538       l: 50
3539       r: 20
3540     showlegend: True
3541     legend:
3542       orientation: "h"
3543     width: 700
3544     height: 1000
3545
3546 -
3547   type: "plot"
3548   title: "VPP Latency 64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
3549   algorithm: "plot_latency_box"
3550   output-file-type: ".html"
3551   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ip4-ndrdisc-lat50"
3552   data:
3553     csit-vpp-perf-1710-all:
3554     - 2
3555     - 5
3556   filter: "'64B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
3557   parameters:
3558   - "latency"
3559   - "parent"
3560   traces:
3561     boxmean: False
3562   layout:
3563     title: "64B-2t2c-ethip4-ip4[a-z0-9]+-[a-z-]*ndrdisc"
3564     xaxis:
3565       autorange: True
3566       autotick: False
3567       fixedrange: False
3568       gridcolor: "rgb(238, 238, 238)"
3569       linecolor: "rgb(238, 238, 238)"
3570       linewidth: 1
3571       showgrid: True
3572       showline: True
3573       showticklabels: True
3574       tickcolor: "rgb(238, 238, 238)"
3575       tickmode: "linear"
3576       title: "Indexed Test Cases"
3577       zeroline: False
3578     yaxis:
3579       gridcolor: "rgb(238, 238, 238)'"
3580       hoverformat: ""
3581       linecolor: "rgb(238, 238, 238)"
3582       linewidth: 1
3583       range: []
3584       showgrid: True
3585       showline: True
3586       showticklabels: True
3587       tickcolor: "rgb(238, 238, 238)"
3588       title: "Latency min/avg/max [uSec]"
3589       zeroline: False
3590     boxmode: "group"
3591     boxgroupgap: 0.5
3592     autosize: False
3593     margin:
3594       t: 50
3595       b: 20
3596       l: 50
3597       r: 20
3598     showlegend: True
3599     legend:
3600       orientation: "h"
3601     width: 700
3602     height: 1000
3603
3604 # VPP IP6
3605 -
3606   type: "plot"
3607   title: "VPP Latency 78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
3608   algorithm: "plot_latency_box"
3609   output-file-type: ".html"
3610   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ip6-ndrdisc-lat50"
3611   data:
3612     csit-vpp-perf-1710-all:
3613     - 2
3614     - 5
3615   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
3616   parameters:
3617   - "latency"
3618   - "parent"
3619   traces:
3620     boxmean: False
3621   layout:
3622     title: "78B-1t1c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
3623     xaxis:
3624       autorange: True
3625       autotick: False
3626       fixedrange: False
3627       gridcolor: "rgb(238, 238, 238)"
3628       linecolor: "rgb(238, 238, 238)"
3629       linewidth: 1
3630       showgrid: True
3631       showline: True
3632       showticklabels: True
3633       tickcolor: "rgb(238, 238, 238)"
3634       tickmode: "linear"
3635       title: "Indexed Test Cases"
3636       zeroline: False
3637     yaxis:
3638       gridcolor: "rgb(238, 238, 238)'"
3639       hoverformat: ""
3640       linecolor: "rgb(238, 238, 238)"
3641       linewidth: 1
3642       range: []
3643       showgrid: True
3644       showline: True
3645       showticklabels: True
3646       tickcolor: "rgb(238, 238, 238)"
3647       title: "Latency min/avg/max [uSec]"
3648       zeroline: False
3649     boxmode: "group"
3650     boxgroupgap: 0.5
3651     autosize: False
3652     margin:
3653       t: 50
3654       b: 20
3655       l: 50
3656       r: 20
3657     showlegend: True
3658     legend:
3659       orientation: "h"
3660     width: 700
3661     height: 1000
3662
3663 -
3664   type: "plot"
3665   title: "VPP Latency 78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
3666   algorithm: "plot_latency_box"
3667   output-file-type: ".html"
3668   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ip6-ndrdisc-lat50"
3669   data:
3670     csit-vpp-perf-1710-all:
3671     - 2
3672     - 5
3673   filter: "'78B' and ('BASE' or 'SCALE' or 'FEATURE') and 'NDRDISC' and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
3674   parameters:
3675   - "latency"
3676   - "parent"
3677   traces:
3678     boxmean: False
3679   layout:
3680     title: "78B-2t2c-ethip6-ip6[a-z0-9]+-[a-z-]*ndrdisc"
3681     xaxis:
3682       autorange: True
3683       autotick: False
3684       fixedrange: False
3685       gridcolor: "rgb(238, 238, 238)"
3686       linecolor: "rgb(238, 238, 238)"
3687       linewidth: 1
3688       showgrid: True
3689       showline: True
3690       showticklabels: True
3691       tickcolor: "rgb(238, 238, 238)"
3692       tickmode: "linear"
3693       title: "Indexed Test Cases"
3694       zeroline: False
3695     yaxis:
3696       gridcolor: "rgb(238, 238, 238)'"
3697       hoverformat: ""
3698       linecolor: "rgb(238, 238, 238)"
3699       linewidth: 1
3700       range: []
3701       showgrid: True
3702       showline: True
3703       showticklabels: True
3704       tickcolor: "rgb(238, 238, 238)"
3705       title: "Latency min/avg/max [uSec]"
3706       zeroline: False
3707     boxmode: "group"
3708     boxgroupgap: 0.5
3709     autosize: False
3710     margin:
3711       t: 50
3712       b: 20
3713       l: 50
3714       r: 20
3715     showlegend: True
3716     legend:
3717       orientation: "h"
3718     width: 700
3719     height: 1000
3720
3721 # VPP IP4_overlay
3722 -
3723   type: "plot"
3724   title: "VPP Latency 64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
3725   algorithm: "plot_latency_box"
3726   output-file-type: ".html"
3727   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ethip4-ndrdisc-lat50"
3728   data:
3729     csit-vpp-perf-1710-all:
3730     - 2
3731     - 5
3732   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
3733   parameters:
3734   - "latency"
3735   - "parent"
3736   traces:
3737     boxmean: False
3738   layout:
3739     title: "64B-1t1c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
3740     xaxis:
3741       autorange: True
3742       autotick: False
3743       fixedrange: False
3744       gridcolor: "rgb(238, 238, 238)"
3745       linecolor: "rgb(238, 238, 238)"
3746       linewidth: 1
3747       showgrid: True
3748       showline: True
3749       showticklabels: True
3750       tickcolor: "rgb(238, 238, 238)"
3751       tickmode: "linear"
3752       title: "Indexed Test Cases"
3753       zeroline: False
3754     yaxis:
3755       gridcolor: "rgb(238, 238, 238)'"
3756       hoverformat: ""
3757       linecolor: "rgb(238, 238, 238)"
3758       linewidth: 1
3759       range: []
3760       showgrid: True
3761       showline: True
3762       showticklabels: True
3763       tickcolor: "rgb(238, 238, 238)"
3764       title: "Latency min/avg/max [uSec]"
3765       zeroline: False
3766     boxmode: "group"
3767     boxgroupgap: 0.5
3768     autosize: False
3769     margin:
3770       t: 50
3771       b: 20
3772       l: 50
3773       r: 20
3774     showlegend: True
3775     legend:
3776       orientation: "h"
3777     width: 700
3778     height: 1000
3779
3780 -
3781   type: "plot"
3782   title: "VPP Latency 64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
3783   algorithm: "plot_latency_box"
3784   output-file-type: ".html"
3785   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ethip4-ndrdisc-lat50"
3786   data:
3787     csit-vpp-perf-1710-all:
3788     - 2
3789     - 5
3790   filter: "'64B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
3791   parameters:
3792   - "latency"
3793   - "parent"
3794   traces:
3795     boxmean: False
3796   layout:
3797     title: "64B-2t2c-ethip4[a-z0-9]+-[a-z0-9]*-ndrdisc"
3798     xaxis:
3799       autorange: True
3800       autotick: False
3801       fixedrange: False
3802       gridcolor: "rgb(238, 238, 238)"
3803       linecolor: "rgb(238, 238, 238)"
3804       linewidth: 1
3805       showgrid: True
3806       showline: True
3807       showticklabels: True
3808       tickcolor: "rgb(238, 238, 238)"
3809       tickmode: "linear"
3810       title: "Indexed Test Cases"
3811       zeroline: False
3812     yaxis:
3813       gridcolor: "rgb(238, 238, 238)'"
3814       hoverformat: ""
3815       linecolor: "rgb(238, 238, 238)"
3816       linewidth: 1
3817       range: []
3818       showgrid: True
3819       showline: True
3820       showticklabels: True
3821       tickcolor: "rgb(238, 238, 238)"
3822       title: "Latency min/avg/max [uSec]"
3823       zeroline: False
3824     boxmode: "group"
3825     boxgroupgap: 0.5
3826     autosize: False
3827     margin:
3828       t: 50
3829       b: 20
3830       l: 50
3831       r: 20
3832     showlegend: True
3833     legend:
3834       orientation: "h"
3835     width: 700
3836     height: 1000
3837
3838 # VPP IP6_overlay
3839 -
3840   type: "plot"
3841   title: "VPP Latency 78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
3842   algorithm: "plot_latency_box"
3843   output-file-type: ".html"
3844   output-file: "{DIR[STATIC,VPP]}/78B-1t1c-ethip6-ndrdisc-lat50"
3845   data:
3846     csit-vpp-perf-1710-all:
3847     - 2
3848     - 5
3849   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
3850   parameters:
3851   - "latency"
3852   - "parent"
3853   traces:
3854     boxmean: False
3855   layout:
3856     title: "78B-1t1c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
3857     xaxis:
3858       autorange: True
3859       autotick: False
3860       fixedrange: False
3861       gridcolor: "rgb(238, 238, 238)"
3862       linecolor: "rgb(238, 238, 238)"
3863       linewidth: 1
3864       showgrid: True
3865       showline: True
3866       showticklabels: True
3867       tickcolor: "rgb(238, 238, 238)"
3868       tickmode: "linear"
3869       title: "Indexed Test Cases"
3870       zeroline: False
3871     yaxis:
3872       gridcolor: "rgb(238, 238, 238)'"
3873       hoverformat: ""
3874       linecolor: "rgb(238, 238, 238)"
3875       linewidth: 1
3876       range: []
3877       showgrid: True
3878       showline: True
3879       showticklabels: True
3880       tickcolor: "rgb(238, 238, 238)"
3881       title: "Latency min/avg/max [uSec]"
3882       zeroline: False
3883     boxmode: "group"
3884     boxgroupgap: 0.5
3885     autosize: False
3886     margin:
3887       t: 50
3888       b: 20
3889       l: 50
3890       r: 20
3891     showlegend: True
3892     legend:
3893       orientation: "h"
3894     width: 700
3895     height: 1000
3896
3897 -
3898   type: "plot"
3899   title: "VPP Latency 78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
3900   algorithm: "plot_latency_box"
3901   output-file-type: ".html"
3902   output-file: "{DIR[STATIC,VPP]}/78B-2t2c-ethip6-ndrdisc-lat50"
3903   data:
3904     csit-vpp-perf-1710-all:
3905     - 2
3906     - 5
3907   filter: "'78B' and 'ENCAP' and 'NDRDISC' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST'"
3908   parameters:
3909   - "latency"
3910   - "parent"
3911   traces:
3912     boxmean: False
3913   layout:
3914     title: "78B-2t2c-ethip6[a-z0-9]+-[a-z0-9]*-ndrdisc"
3915     xaxis:
3916       autorange: True
3917       autotick: False
3918       fixedrange: False
3919       gridcolor: "rgb(238, 238, 238)"
3920       linecolor: "rgb(238, 238, 238)"
3921       linewidth: 1
3922       showgrid: True
3923       showline: True
3924       showticklabels: True
3925       tickcolor: "rgb(238, 238, 238)"
3926       tickmode: "linear"
3927       title: "Indexed Test Cases"
3928       zeroline: False
3929     yaxis:
3930       gridcolor: "rgb(238, 238, 238)'"
3931       hoverformat: ""
3932       linecolor: "rgb(238, 238, 238)"
3933       linewidth: 1
3934       range: []
3935       showgrid: True
3936       showline: True
3937       showticklabels: True
3938       tickcolor: "rgb(238, 238, 238)"
3939       title: "Latency min/avg/max [uSec]"
3940       zeroline: False
3941     boxmode: "group"
3942     boxgroupgap: 0.5
3943     autosize: False
3944     margin:
3945       t: 50
3946       b: 20
3947       l: 50
3948       r: 20
3949     showlegend: True
3950     legend:
3951       orientation: "h"
3952     width: 700
3953     height: 1000
3954
3955 # VPP VM VHOST
3956 -
3957   type: "plot"
3958   title: "VPP Latency 64B-1t1c-.*vhost.*-ndrdisc"
3959   algorithm: "plot_latency_box"
3960   output-file-type: ".html"
3961   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel1-ndrdisc-lat50"
3962   data:
3963     csit-vpp-perf-1710-all:
3964     - 2
3965     - 5
3966   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
3967   parameters:
3968   - "latency"
3969   - "parent"
3970   traces:
3971     boxmean: False
3972   layout:
3973     title: "64B-1t1c-.*vhost.*-ndrdisc"
3974     xaxis:
3975       autorange: True
3976       autotick: False
3977       fixedrange: False
3978       gridcolor: "rgb(238, 238, 238)"
3979       linecolor: "rgb(238, 238, 238)"
3980       linewidth: 1
3981       showgrid: True
3982       showline: True
3983       showticklabels: True
3984       tickcolor: "rgb(238, 238, 238)"
3985       tickmode: "linear"
3986       title: "Indexed Test Cases"
3987       zeroline: False
3988     yaxis:
3989       gridcolor: "rgb(238, 238, 238)'"
3990       hoverformat: ""
3991       linecolor: "rgb(238, 238, 238)"
3992       linewidth: 1
3993       range: []
3994       showgrid: True
3995       showline: True
3996       showticklabels: True
3997       tickcolor: "rgb(238, 238, 238)"
3998       title: "Latency min/avg/max [uSec]"
3999       zeroline: False
4000     boxmode: "group"
4001     boxgroupgap: 0.5
4002     autosize: False
4003     margin:
4004       t: 50
4005       b: 20
4006       l: 50
4007       r: 20
4008     showlegend: True
4009     legend:
4010       orientation: "h"
4011     width: 700
4012     height: 1000
4013
4014 -
4015   type: "plot"
4016   title: "VPP Latency 64B-2t2c-.*vhost.*-ndrdisc"
4017   algorithm: "plot_latency_box"
4018   output-file-type: ".html"
4019   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel1-ndrdisc-lat50"
4020   data:
4021     csit-vpp-perf-1710-all:
4022     - 2
4023     - 5
4024   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
4025   parameters:
4026   - "latency"
4027   - "parent"
4028   traces:
4029     boxmean: False
4030   layout:
4031     title: "64B-2t2c-.*vhost.*-ndrdisc"
4032     xaxis:
4033       autorange: True
4034       autotick: False
4035       fixedrange: False
4036       gridcolor: "rgb(238, 238, 238)"
4037       linecolor: "rgb(238, 238, 238)"
4038       linewidth: 1
4039       showgrid: True
4040       showline: True
4041       showticklabels: True
4042       tickcolor: "rgb(238, 238, 238)"
4043       tickmode: "linear"
4044       title: "Indexed Test Cases"
4045       zeroline: False
4046     yaxis:
4047       gridcolor: "rgb(238, 238, 238)'"
4048       hoverformat: ""
4049       linecolor: "rgb(238, 238, 238)"
4050       linewidth: 1
4051       range: []
4052       showgrid: True
4053       showline: True
4054       showticklabels: True
4055       tickcolor: "rgb(238, 238, 238)"
4056       title: "Latency min/avg/max [uSec]"
4057       zeroline: False
4058     boxmode: "group"
4059     boxgroupgap: 0.5
4060     autosize: False
4061     margin:
4062       t: 50
4063       b: 20
4064       l: 50
4065       r: 20
4066     showlegend: True
4067     legend:
4068       orientation: "h"
4069     width: 700
4070     height: 1000
4071
4072 # VPP VM VHOST selection
4073 -
4074   type: "plot"
4075   title: "VPP Latency 64B-1t1c-.*vhost.*-ndrdisc"
4076   algorithm: "plot_latency_box"
4077   output-file-type: ".html"
4078   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-vhost-sel2-ndrdisc-lat50"
4079   data:
4080     csit-vpp-perf-1710-all:
4081     - 2
4082     - 5
4083   filter: "'64B' and 'NDRDISC' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
4084   parameters:
4085   - "latency"
4086   - "parent"
4087   traces:
4088     boxmean: False
4089   layout:
4090     title: "64B-1t1c-.*vhost.*-ndrdisc"
4091     xaxis:
4092       autorange: True
4093       autotick: False
4094       fixedrange: False
4095       gridcolor: "rgb(238, 238, 238)"
4096       linecolor: "rgb(238, 238, 238)"
4097       linewidth: 1
4098       showgrid: True
4099       showline: True
4100       showticklabels: True
4101       tickcolor: "rgb(238, 238, 238)"
4102       tickmode: "linear"
4103       title: "Indexed Test Cases"
4104       zeroline: False
4105     yaxis:
4106       gridcolor: "rgb(238, 238, 238)'"
4107       hoverformat: ""
4108       linecolor: "rgb(238, 238, 238)"
4109       linewidth: 1
4110       range: []
4111       showgrid: True
4112       showline: True
4113       showticklabels: True
4114       tickcolor: "rgb(238, 238, 238)"
4115       title: "Latency min/avg/max [uSec]"
4116       zeroline: False
4117     boxmode: "group"
4118     boxgroupgap: 0.5
4119     autosize: False
4120     margin:
4121       t: 50
4122       b: 20
4123       l: 50
4124       r: 20
4125     showlegend: True
4126     legend:
4127       orientation: "h"
4128     width: 700
4129     height: 1000
4130
4131 -
4132   type: "plot"
4133   title: "VPP Latency 64B-2t2c-.*vhost.*-ndrdisc"
4134   algorithm: "plot_latency_box"
4135   output-file-type: ".html"
4136   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-vhost-sel2-ndrdisc-lat50"
4137   data:
4138     csit-vpp-perf-1710-all:
4139     - 2
4140     - 5
4141   filter: "'64B' and 'NDRDISC' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
4142   parameters:
4143   - "latency"
4144   - "parent"
4145   traces:
4146     boxmean: False
4147   layout:
4148     title: "64B-2t2c-.*vhost.*-ndrdisc"
4149     xaxis:
4150       autorange: True
4151       autotick: False
4152       fixedrange: False
4153       gridcolor: "rgb(238, 238, 238)"
4154       linecolor: "rgb(238, 238, 238)"
4155       linewidth: 1
4156       showgrid: True
4157       showline: True
4158       showticklabels: True
4159       tickcolor: "rgb(238, 238, 238)"
4160       tickmode: "linear"
4161       title: "Indexed Test Cases"
4162       zeroline: False
4163     yaxis:
4164       gridcolor: "rgb(238, 238, 238)'"
4165       hoverformat: ""
4166       linecolor: "rgb(238, 238, 238)"
4167       linewidth: 1
4168       range: []
4169       showgrid: True
4170       showline: True
4171       showticklabels: True
4172       tickcolor: "rgb(238, 238, 238)"
4173       title: "Latency min/avg/max [uSec]"
4174       zeroline: False
4175     boxmode: "group"
4176     boxgroupgap: 0.5
4177     autosize: False
4178     margin:
4179       t: 50
4180       b: 20
4181       l: 50
4182       r: 20
4183     showlegend: True
4184     legend:
4185       orientation: "h"
4186     width: 700
4187     height: 1000
4188
4189 # VPP CRYPTO
4190 -
4191   type: "plot"
4192   title: "VPP Latency 64B-1t1c-.*ipsec.*-ndrdisc"
4193   algorithm: "plot_latency_box"
4194   output-file-type: ".html"
4195   output-file: "{DIR[STATIC,VPP]}/64B-1t1c-ipsechw-ndrdisc-lat50"
4196   data:
4197     csit-vpp-perf-1710-all:
4198     - 2
4199     - 5
4200   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
4201   parameters:
4202   - "latency"
4203   - "parent"
4204   traces:
4205     boxmean: False
4206   layout:
4207     title: "64B-1t1c-.*ipsec.*-ndrdisc"
4208     xaxis:
4209       autorange: True
4210       autotick: False
4211       fixedrange: False
4212       gridcolor: "rgb(238, 238, 238)"
4213       linecolor: "rgb(238, 238, 238)"
4214       linewidth: 1
4215       showgrid: True
4216       showline: True
4217       showticklabels: True
4218       tickcolor: "rgb(238, 238, 238)"
4219       tickmode: "linear"
4220       title: "Indexed Test Cases"
4221       zeroline: False
4222     yaxis:
4223       gridcolor: "rgb(238, 238, 238)'"
4224       hoverformat: ""
4225       linecolor: "rgb(238, 238, 238)"
4226       linewidth: 1
4227       range: []
4228       showgrid: True
4229       showline: True
4230       showticklabels: True
4231       tickcolor: "rgb(238, 238, 238)"
4232       title: "Latency min/avg/max [uSec]"
4233       zeroline: False
4234     boxmode: "group"
4235     boxgroupgap: 0.5
4236     autosize: False
4237     margin:
4238       t: 50
4239       b: 20
4240       l: 50
4241       r: 20
4242     showlegend: True
4243     legend:
4244       orientation: "h"
4245     width: 700
4246     height: 1000
4247
4248 -
4249   type: "plot"
4250   title: "VPP Latency 64B-2t2c-.*ipsec.*-ndrdisc"
4251   algorithm: "plot_latency_box"
4252   output-file-type: ".html"
4253   output-file: "{DIR[STATIC,VPP]}/64B-2t2c-ipsechw-ndrdisc-lat50"
4254   data:
4255     csit-vpp-perf-1710-all:
4256     - 2
4257     - 5
4258   filter: "'64B' and not 'VHOST' and 'IP4FWD' and 'NDRDISC' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN')"
4259   parameters:
4260   - "latency"
4261   - "parent"
4262   traces:
4263     boxmean: False
4264   layout:
4265     title: "64B-2t2c-.*ipsec.*-ndrdisc"
4266     xaxis:
4267       autorange: True
4268       autotick: False
4269       fixedrange: False
4270       gridcolor: "rgb(238, 238, 238)"
4271       linecolor: "rgb(238, 238, 238)"
4272       linewidth: 1
4273       showgrid: True
4274       showline: True
4275       showticklabels: True
4276       tickcolor: "rgb(238, 238, 238)"
4277       tickmode: "linear"
4278       title: "Indexed Test Cases"
4279       zeroline: False
4280     yaxis:
4281       gridcolor: "rgb(238, 238, 238)'"
4282       hoverformat: ""
4283       linecolor: "rgb(238, 238, 238)"
4284       linewidth: 1
4285       range: []
4286       showgrid: True
4287       showline: True
4288       showticklabels: True
4289       tickcolor: "rgb(238, 238, 238)"
4290       title: "Latency min/avg/max [uSec]"
4291       zeroline: False
4292     boxmode: "group"
4293     boxgroupgap: 0.5
4294     autosize: False
4295     margin:
4296       t: 50
4297       b: 20
4298       l: 50
4299       r: 20
4300     showlegend: True
4301     legend:
4302       orientation: "h"
4303     width: 700
4304     height: 1000
4305
4306 # DPDK
4307 -
4308   type: "plot"
4309   title: "DPDK Latency 64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
4310   algorithm: "plot_latency_box"
4311   output-file-type: ".html"
4312   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-l2-ndrdisc-lat50"
4313   data:
4314     csit-dpdk-perf-1710-all:
4315     - 2
4316     - 3
4317   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
4318   parameters:
4319   - "latency"
4320   - "parent"
4321   traces:
4322     boxmean: False
4323   layout:
4324     title: "64B-1t1c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
4325     xaxis:
4326       autorange: True
4327       autotick: False
4328       fixedrange: False
4329       gridcolor: "rgb(238, 238, 238)"
4330       linecolor: "rgb(238, 238, 238)"
4331       linewidth: 1
4332       showgrid: True
4333       showline: True
4334       showticklabels: True
4335       tickcolor: "rgb(238, 238, 238)"
4336       tickmode: "linear"
4337       title: "Indexed Test Cases"
4338       zeroline: False
4339     yaxis:
4340       gridcolor: "rgb(238, 238, 238)'"
4341       hoverformat: ""
4342       linecolor: "rgb(238, 238, 238)"
4343       linewidth: 1
4344       range: []
4345       showgrid: True
4346       showline: True
4347       showticklabels: True
4348       tickcolor: "rgb(238, 238, 238)"
4349       title: "Latency min/avg/max [uSec]"
4350       zeroline: False
4351     boxmode: "group"
4352     boxgroupgap: 0.5
4353     autosize: False
4354     margin:
4355       t: 50
4356       b: 20
4357       l: 50
4358       r: 20
4359     showlegend: True
4360     legend:
4361       orientation: "h"
4362     width: 700
4363     height: 1000
4364
4365 -
4366   type: "plot"
4367   title: "DPDK Latency 64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
4368   algorithm: "plot_latency_box"
4369   output-file-type: ".html"
4370   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-l2-ndrdisc-lat50"
4371   data:
4372     csit-dpdk-perf-1710-all:
4373     - 2
4374     - 3
4375   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
4376   parameters:
4377   - "latency"
4378   - "parent"
4379   traces:
4380     boxmean: False
4381   layout:
4382     title: "64B-2t2c-(eth|dot1q|dot1ad)-(l2xcbase|l2bdbasemaclrn)-ndrdisc"
4383     xaxis:
4384       autorange: True
4385       autotick: False
4386       fixedrange: False
4387       gridcolor: "rgb(238, 238, 238)"
4388       linecolor: "rgb(238, 238, 238)"
4389       linewidth: 1
4390       showgrid: True
4391       showline: True
4392       showticklabels: True
4393       tickcolor: "rgb(238, 238, 238)"
4394       tickmode: "linear"
4395       title: "Indexed Test Cases"
4396       zeroline: False
4397     yaxis:
4398       gridcolor: "rgb(238, 238, 238)'"
4399       hoverformat: ""
4400       linecolor: "rgb(238, 238, 238)"
4401       linewidth: 1
4402       range: []
4403       showgrid: True
4404       showline: True
4405       showticklabels: True
4406       tickcolor: "rgb(238, 238, 238)"
4407       title: "Latency min/avg/max [uSec]"
4408       zeroline: False
4409     boxmode: "group"
4410     boxgroupgap: 0.5
4411     autosize: False
4412     margin:
4413       t: 50
4414       b: 20
4415       l: 50
4416       r: 20
4417     showlegend: True
4418     legend:
4419       orientation: "h"
4420     width: 700
4421     height: 1000
4422
4423 -
4424   type: "plot"
4425   title: "DPDK Latency 64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
4426   algorithm: "plot_latency_box"
4427   output-file-type: ".html"
4428   output-file: "{DIR[STATIC,DPDK]}/64B-1t1c-ipv4-ndrdisc-lat50"
4429   data:
4430     csit-dpdk-perf-1710-all:
4431     - 2
4432     - 3
4433   filter: "'64B' and 'BASE' and 'NDRDISC' and '1T1C' and 'IP4FWD'"
4434   parameters:
4435   - "latency"
4436   - "parent"
4437   traces:
4438     boxmean: False
4439   layout:
4440     title: "64B-1t1c-ethip4-ip4base-l3fwd-ndrdisc"
4441     xaxis:
4442       autorange: True
4443       autotick: False
4444       fixedrange: False
4445       gridcolor: "rgb(238, 238, 238)"
4446       linecolor: "rgb(238, 238, 238)"
4447       linewidth: 1
4448       showgrid: True
4449       showline: True
4450       showticklabels: True
4451       tickcolor: "rgb(238, 238, 238)"
4452       tickmode: "linear"
4453       title: "Indexed Test Cases"
4454       zeroline: False
4455     yaxis:
4456       gridcolor: "rgb(238, 238, 238)'"
4457       hoverformat: ""
4458       linecolor: "rgb(238, 238, 238)"
4459       linewidth: 1
4460       range: []
4461       showgrid: True
4462       showline: True
4463       showticklabels: True
4464       tickcolor: "rgb(238, 238, 238)"
4465       title: "Latency min/avg/max [uSec]"
4466       zeroline: False
4467     boxmode: "group"
4468     boxgroupgap: 0.5
4469     autosize: False
4470     margin:
4471       t: 50
4472       b: 20
4473       l: 50
4474       r: 20
4475     showlegend: True
4476     legend:
4477       orientation: "h"
4478     width: 700
4479     height: 1000
4480
4481 -
4482   type: "plot"
4483   title: "DPDK Latency 64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
4484   algorithm: "plot_latency_box"
4485   output-file-type: ".html"
4486   output-file: "{DIR[STATIC,DPDK]}/64B-2t2c-ipv4-ndrdisc-lat50"
4487   data:
4488     csit-dpdk-perf-1710-all:
4489     - 2
4490     - 3
4491   filter: "'64B' and 'BASE' and 'NDRDISC' and '2T2C' and 'IP4FWD'"
4492   parameters:
4493   - "latency"
4494   - "parent"
4495   traces:
4496     boxmean: False
4497   layout:
4498     title: "64B-2t2c-ethip4-ip4base-l3fwd-ndrdisc"
4499     xaxis:
4500       autorange: True
4501       autotick: False
4502       fixedrange: False
4503       gridcolor: "rgb(238, 238, 238)"
4504       linecolor: "rgb(238, 238, 238)"
4505       linewidth: 1
4506       showgrid: True
4507       showline: True
4508       showticklabels: True
4509       tickcolor: "rgb(238, 238, 238)"
4510       tickmode: "linear"
4511       title: "Indexed Test Cases"
4512       zeroline: False
4513     yaxis:
4514       gridcolor: "rgb(238, 238, 238)'"
4515       hoverformat: ""
4516       linecolor: "rgb(238, 238, 238)"
4517       linewidth: 1
4518       range: []
4519       showgrid: True
4520       showline: True
4521       showticklabels: True
4522       tickcolor: "rgb(238, 238, 238)"
4523       title: "Latency min/avg/max [uSec]"
4524       zeroline: False
4525     boxmode: "group"
4526     boxgroupgap: 0.5
4527     autosize: False
4528     margin:
4529       t: 50
4530       b: 20
4531       l: 50
4532       r: 20
4533     showlegend: True
4534     legend:
4535       orientation: "h"
4536     width: 700
4537     height: 1000