resources/tools/presentation/specification_CPTA.yaml

   1 # Copyright (c) 2018 Cisco and/or its affiliates.
   2 # Licensed under the Apache License, Version 2.0 (the "License");
   3 # you may not use this file except in compliance with the License.
   4 # You may obtain a copy of the License at:
   5 #
   6 #     http://www.apache.org/licenses/LICENSE-2.0
   7 #
   8 # Unless required by applicable law or agreed to in writing, software
   9 # distributed under the License is distributed on an "AS IS" BASIS,
  10 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  11 # See the License for the specific language governing permissions and
  12 # limitations under the License.
  13
  14 # This is the specification of parameters for "Continuous Performance Trending
  15 # and Analysis" feature provided by PAL.
  16
  17 -
  18   type: "environment"
  19   configuration:
  20     # Debug mode:
  21     # - Skip:
  22     #   - Download of input data files
  23     # - Do:
  24     #   - Read data from given zip / xml files
  25     #   - Set the configuration as it is done in normal mode
  26     # If the section "type: debug" is missing, CFG[DEBUG] is set to 0.
  27     CFG[DEBUG]: 0
  28
  29   paths:
  30     # Top level directories:
  31     ## Working directory
  32     DIR[WORKING]: "_tmp"
  33     ## Build directories
  34     DIR[BUILD,HTML]: "_build"
  35     ## Static .rst files
  36     DIR[RST]: "../../../docs/cpta"
  37
  38     # Static html content
  39     DIR[STATIC]: "{DIR[BUILD,HTML]}/_static"
  40     DIR[STATIC,VPP]: "{DIR[STATIC]}/vpp"
  41     # DIR[STATIC,DPDK]: "{DIR[STATIC]}/dpdk"
  42     DIR[STATIC,ARCH]: "{DIR[STATIC]}/archive"
  43
  44     # Working directories
  45     ## Input data files (.zip, .xml)
  46     DIR[WORKING,DATA]: "{DIR[WORKING]}/data"
  47     ## Static source files from git
  48     DIR[WORKING,SRC]: "{DIR[WORKING]}/src"
  49     DIR[WORKING,SRC,STATIC]: "{DIR[WORKING,SRC]}/_static"
  50
  51     # .css patch file
  52     DIR[CSS_PATCH_FILE]: "{DIR[STATIC]}/theme_overrides.css"
  53     DIR[CSS_PATCH_FILE2]: "{DIR[WORKING,SRC,STATIC]}/theme_overrides.css"
  54
  55   urls:
  56     URL[JENKINS,CSIT]: "https://jenkins.fd.io/view/csit/job"
  57     URL[NEXUS,LOG]: "https://logs.fd.io/production/vex-yul-rot-jenkins-1"
  58     URL[NEXUS]: "https://docs.fd.io/csit"
  59     DIR[NEXUS]: "trending/_static/archive"
  60
  61   make-dirs:
  62   # List the directories which are created while preparing the environment.
  63   # All directories MUST be defined in "paths" section.
  64   - "DIR[WORKING,DATA]"
  65   - "DIR[WORKING,SRC,STATIC]"
  66   - "DIR[BUILD,HTML]"
  67   - "DIR[STATIC,VPP]"
  68   - "DIR[STATIC,ARCH]"
  69   build-dirs:
  70   # List the directories where the results (build) is stored.
  71   # All directories MUST be defined in "paths" section.
  72   - "DIR[BUILD,HTML]"
  73
  74 -
  75   type: "configuration"
  76
  77   data-sets:
  78     plot-performance-trending:
  79       csit-vpp-perf-mrr-daily-master:
  80         start: 15
  81         end: "lastCompletedBuild" # "lastSuccessfulBuild"  # take all from the 'start'
  82
  83   plot-layouts:
  84     plot-cpta:
  85       title: ""
  86       autosize: False
  87       showlegend: True
  88       width: 1100
  89       height: 800
  90       yaxis:
  91         showticklabels: True
  92         tickformat: ".3s"
  93         title: "Throughput [Mpps]"
  94         hoverformat: ".4s"
  95         range: []
  96         gridcolor: "rgb(238, 238, 238)"
  97         linecolor: "rgb(238, 238, 238)"
  98         showline: True
  99         zeroline: False
 100         tickcolor: "rgb(238, 238, 238)"
 101         linewidth: 1
 102         showgrid: True
 103       xaxis:
 104         showticklabels: True
 105         title: "VPP Performance Trending Job ID"
 106         autorange: True
 107         showgrid: True
 108         gridcolor: "rgb(238, 238, 238)"
 109         linecolor: "rgb(238, 238, 238)"
 110         fixedrange: False
 111         zeroline: False
 112         tickcolor: "rgb(238, 238, 238)"
 113         showline: True
 114         linewidth: 1
 115         autotick: True
 116       margin:
 117         r: 20
 118         b: 50
 119         t: 50
 120         l: 70
 121       legend:
 122         orientation: "h"
 123         traceorder: "normal"
 124 #        tracegroupgap: 10
 125 #        bordercolor: "rgb(238, 238, 238)"
 126 #        borderwidth: 1
 127       hoverlabel:
 128         namelength: -1
 129
 130 -
 131   type: "debug"
 132   general:
 133     input-format: "xml"  # zip or xml
 134     extract: "robot-plugin/output.xml"  # Only for zip
 135   builds:
 136     # The files must be in the directory DIR[WORKING,DATA]
 137     csit-vpp-perf-mrr-daily-master:
 138     -
 139       build: 1
 140       file: "{DIR[WORKING,DATA]}/output_mrr_1.xml"
 141     -
 142       build: 2
 143       file: "{DIR[WORKING,DATA]}/output_mrr_2.xml"
 144     -
 145       build: 3
 146       file: "{DIR[WORKING,DATA]}/output_mrr_3.xml"
 147     -
 148       build: 4
 149       file: "{DIR[WORKING,DATA]}/output_mrr_4.xml"
 150     -
 151       build: 5
 152       file: "{DIR[WORKING,DATA]}/output_mrr_5.xml"
 153     -
 154       build: 6
 155       file: "{DIR[WORKING,DATA]}/output_mrr_5.xml"
 156     -
 157       build: 7
 158       file: "{DIR[WORKING,DATA]}/output_mrr_5.xml"
 159     -
 160       build: 8
 161       file: "{DIR[WORKING,DATA]}/output_mrr_5.xml"
 162     -
 163       build: 9
 164       file: "{DIR[WORKING,DATA]}/output_mrr_5.xml"
 165     -
 166       build: 10
 167       file: "{DIR[WORKING,DATA]}/output_mrr_5.xml"
 168     -
 169       build: 11
 170       file: "{DIR[WORKING,DATA]}/output_mrr_5.xml"
 171     -
 172       build: 12
 173       file: "{DIR[WORKING,DATA]}/output_mrr_5.xml"
 174
 175 -
 176   type: "static"
 177   src-path: "{DIR[RST]}"
 178   dst-path: "{DIR[WORKING,SRC]}"
 179
 180 -
 181   type: "input"  # Ignored in debug mode
 182   general:
 183     file-name: "output.xml.gz"
 184     file-format: ".gz"
 185     download-path: "{job}/{build}/archives/{filename}"
 186     extract: "output.xml"
 187 #    file-name: "robot-plugin.zip"
 188 #    file-format: ".zip"
 189 #    download-path: "{job}/{build}/robot/report/*zip*/{filename}"
 190 #    extract: "robot-plugin/output.xml"
 191   builds:
 192     csit-vpp-perf-mrr-daily-master:
 193       start: 15
 194       end: "lastCompletedBuild"  # take all from the 'start'
 195
 196 -
 197   type: "output"
 198   output:
 199 #   "report"
 200     "CPTA"  # Continuous Performance Trending and Analysis
 201   format:
 202     html:
 203     - full
 204     pdf:
 205     - minimal
 206
 207 ################################################################################
 208 ###                                 C P T A                                  ###
 209 ################################################################################
 210
 211 # Plots VPP Continuous Performance Trending and Analysis
 212 -
 213   type: "cpta"
 214   title: "Continuous Performance Trending and Analysis"
 215   algorithm: "cpta"
 216   output-file-type: ".html"
 217   output-file: "{DIR[STATIC,VPP]}/cpta"
 218   data: "plot-performance-trending"
 219   plots:
 220
 221 # L2
 222
 223     - title: "VPP 1T1C L2 64B Packet Throughput - {period} Trending"
 224       output-file-name: "l2-1t1c-x520"
 225       data: "plot-performance-trending"
 226       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 227       parameters:
 228       - "result"
 229       periods:
 230       - 1
 231       - 14
 232       # # - 60
 233       layout: "plot-cpta"
 234
 235     - title: "VPP 2T2C L2 64B Packet Throughput - {period} Trending"
 236       output-file-name: "l2-2t2c-x520"
 237       data: "plot-performance-trending"
 238       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 239       parameters:
 240       - "result"
 241       periods:
 242       - 1
 243       - 14
 244       # - 60
 245       layout: "plot-cpta"
 246
 247     - title: "VPP 4T4C L2 64B Packet Throughput - {period} Trending"
 248       output-file-name: "l2-4t4c-x520"
 249       data: "plot-performance-trending"
 250       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '4T4C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 251       parameters:
 252       - "result"
 253       periods:
 254       - 1
 255       - 14
 256       # - 60
 257       layout: "plot-cpta"
 258
 259     - title: "VPP 1T1C L2 64B Packet Throughput - {period} Trending"
 260       output-file-name: "l2-feature-1t1c-x520"
 261       data: "plot-performance-trending"
 262       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'FEATURE' and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 263       parameters:
 264       - "result"
 265       periods:
 266       - 1
 267       - 14
 268       # - 60
 269       layout: "plot-cpta"
 270
 271     - title: "VPP 2T2C L2 64B Packet Throughput - {period} Trending"
 272       output-file-name: "l2-feature-2t2c-x520"
 273       data: "plot-performance-trending"
 274       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'FEATURE' and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 275       parameters:
 276       - "result"
 277       periods:
 278       - 1
 279       - 14
 280       # - 60
 281       layout: "plot-cpta"
 282
 283     - title: "VPP 4T4C L2 64B Packet Throughput - {period} Trending"
 284       output-file-name: "l2-feature-4t4c-x520"
 285       data: "plot-performance-trending"
 286       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'FEATURE' and '4T4C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 287       parameters:
 288       - "result"
 289       periods:
 290       - 1
 291       - 14
 292       # - 60
 293       layout: "plot-cpta"
 294
 295     - title: "VPP 1T1C L2 64B Packet Throughput - {period} Trending"
 296       output-file-name: "l2-1t1c-xl710"
 297       data: "plot-performance-trending"
 298       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 299       parameters:
 300       - "result"
 301       periods:
 302       - 1
 303       - 14
 304       # - 60
 305       layout: "plot-cpta"
 306
 307     - title: "VPP 2T2C L2 64B Packet Throughput - {period} Trending"
 308       output-file-name: "l2-2t2c-xl710"
 309       data: "plot-performance-trending"
 310       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 311       parameters:
 312       - "result"
 313       periods:
 314       - 1
 315       - 14
 316       # - 60
 317       layout: "plot-cpta"
 318
 319     - title: "VPP 4T4C L2 64B Packet Throughput - {period} Trending"
 320       output-file-name: "l2-4t4c-xl710"
 321       data: "plot-performance-trending"
 322       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '4T4C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 323       parameters:
 324       - "result"
 325       periods:
 326       - 1
 327       - 14
 328       # - 60
 329       layout: "plot-cpta"
 330
 331     - title: "VPP 1T1C L2 64B Packet Throughput - {period} Trending"
 332       output-file-name: "l2-1t1c-x710"
 333       data: "plot-performance-trending"
 334       filter: "'NIC_Intel-X710' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '1T1C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 335       parameters:
 336       - "result"
 337       periods:
 338       - 1
 339       - 14
 340       # - 60
 341       layout: "plot-cpta"
 342
 343     - title: "VPP 2T2C L2 64B Packet Throughput - {period} Trending"
 344       output-file-name: "l2-2t2c-x710"
 345       data: "plot-performance-trending"
 346       filter: "'NIC_Intel-X710' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '2T2C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 347       parameters:
 348       - "result"
 349       periods:
 350       - 1
 351       - 14
 352       # - 60
 353       layout: "plot-cpta"
 354
 355     - title: "VPP 4T4C L2 64B Packet Throughput - {period} Trending"
 356       output-file-name: "l2-4t4c-x710"
 357       data: "plot-performance-trending"
 358       filter: "'NIC_Intel-X710' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '4T4C' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST' and not 'MEMIF'"
 359       parameters:
 360       - "result"
 361       periods:
 362       - 1
 363       - 14
 364       # - 60
 365       layout: "plot-cpta"
 366
 367 # IPv4
 368
 369     - title: "VPP 1T1C IPv4 64B Packet Throughput - {period} Trending"
 370       output-file-name: "ip4-1t1c-x520"
 371       data: "plot-performance-trending"
 372       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 373       parameters:
 374       - "result"
 375       periods:
 376       - 1
 377       - 14
 378       # - 60
 379       layout: "plot-cpta"
 380
 381     - title: "VPP 2T2C IPv4 64B Packet Throughput - {period} Trending"
 382       output-file-name: "ip4-2t2c-x520"
 383       data: "plot-performance-trending"
 384       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 385       parameters:
 386       - "result"
 387       periods:
 388       - 1
 389       - 14
 390       # - 60
 391       layout: "plot-cpta"
 392
 393     - title: "VPP 4T4C IPv4 64B Packet Throughput - {period} Trending"
 394       output-file-name: "ip4-4t4c-x520"
 395       data: "plot-performance-trending"
 396       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and ('BASE' or 'SCALE') and '4T4C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 397       parameters:
 398       - "result"
 399       periods:
 400       - 1
 401       - 14
 402       # - 60
 403       layout: "plot-cpta"
 404
 405     - title: "VPP 1T1C IPv4 64B Packet Throughput - {period} Trending"
 406       output-file-name: "ip4-feature-1t1c-x520"
 407       data: "plot-performance-trending"
 408       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'FEATURE' and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 409       parameters:
 410       - "result"
 411       periods:
 412       - 1
 413       - 14
 414       # - 60
 415       layout: "plot-cpta"
 416
 417     - title: "VPP 2T2C IPv4 64B Packet Throughput - {period} Trending"
 418       output-file-name: "ip4-feature-2t2c-x520"
 419       data: "plot-performance-trending"
 420       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'FEATURE' and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 421       parameters:
 422       - "result"
 423       periods:
 424       - 1
 425       - 14
 426       # - 60
 427       layout: "plot-cpta"
 428
 429     - title: "VPP 4T4C IPv4 64B Packet Throughput - {period} Trending"
 430       output-file-name: "ip4-feature-4t4c-x520"
 431       data: "plot-performance-trending"
 432       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'FEATURE' and '4T4C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 433       parameters:
 434       - "result"
 435       periods:
 436       - 1
 437       - 14
 438       # - 60
 439       layout: "plot-cpta"
 440
 441     - title: "VPP 1T1C IPv4 64B Packet Throughput - {period} Trending"
 442       output-file-name: "ip4-1t1c-xl710"
 443       data: "plot-performance-trending"
 444       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and ('BASE' or 'SCALE' or 'FEATURE') and '1T1C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 445       parameters:
 446       - "result"
 447       periods:
 448       - 1
 449       - 14
 450       # - 60
 451       layout: "plot-cpta"
 452
 453     - title: "VPP 2T2C IPv4 64B Packet Throughput - {period} Trending"
 454       output-file-name: "ip4-2t2c-xl710"
 455       data: "plot-performance-trending"
 456       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and ('BASE' or 'SCALE' or 'FEATURE') and '2T2C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 457       parameters:
 458       - "result"
 459       periods:
 460       - 1
 461       - 14
 462       # - 60
 463       layout: "plot-cpta"
 464
 465     - title: "VPP 4T4C IPv4 64B Packet Throughput - {period} Trending"
 466       output-file-name: "ip4-4t4c-xl710"
 467       data: "plot-performance-trending"
 468       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and ('BASE' or 'SCALE' or 'FEATURE') and '4T4C' and 'IP4FWD' and not 'IPSEC' and not 'VHOST'"
 469       parameters:
 470       - "result"
 471       periods:
 472       - 1
 473       - 14
 474       # - 60
 475       layout: "plot-cpta"
 476
 477 # IPv4 Tunnels
 478
 479     - title: "VPP 1T1C IPv4 Tunnels 64B Packet Throughput - {period} Trending"
 480       output-file-name: "ip4-tunnels-1t1c-x520"
 481       data: "plot-performance-trending"
 482       filter: "'NIC_Intel-X520-DA2' and '64B' and 'ENCAP' and 'MRR' and '1T1C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
 483       parameters:
 484       - "result"
 485       periods:
 486       - 1
 487       - 14
 488       # - 60
 489       layout: "plot-cpta"
 490
 491     - title: "VPP 2T2C IPv4 Tunnels 64B Packet Throughput - {period} Trending"
 492       output-file-name: "ip4-tunnels-2t2c-x520"
 493       data: "plot-performance-trending"
 494       filter: "'NIC_Intel-X520-DA2' and '64B' and 'ENCAP' and 'MRR' and '2T2C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
 495       parameters:
 496       - "result"
 497       periods:
 498       - 1
 499       - 14
 500       # - 60
 501       layout: "plot-cpta"
 502
 503     - title: "VPP 4T4C IPv4 Tunnels 64B Packet Throughput - {period} Trending"
 504       output-file-name: "ip4-tunnels-4t4c-x520"
 505       data: "plot-performance-trending"
 506       filter: "'NIC_Intel-X520-DA2' and '64B' and 'ENCAP' and 'MRR' and '4T4C' and ('VXLAN' or 'VXLANGPE' or 'LISP' or 'LISPGPE' or 'GRE') and not 'VHOST' and not 'IPSECHW'"
 507       parameters:
 508       - "result"
 509       periods:
 510       - 1
 511       - 14
 512       # - 60
 513       layout: "plot-cpta"
 514
 515 # IPv6
 516
 517     - title: "VPP 1T1C IPv6 78B Packet Throughput - {period} Trending"
 518       output-file-name: "ip6-1t1c-x520"
 519       data: "plot-performance-trending"
 520       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '78B' and ('BASE' or 'SCALE' or 'FEATURE') and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
 521       parameters:
 522       - "result"
 523       periods:
 524       - 1
 525       - 14
 526       # - 60
 527       layout: "plot-cpta"
 528
 529     - title: "VPP 2T2C IPv6 78B Packet Throughput - {period} Trending"
 530       output-file-name: "ip6-2t2c-x520"
 531       data: "plot-performance-trending"
 532       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '78B' and ('BASE' or 'SCALE' or 'FEATURE') and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
 533       parameters:
 534       - "result"
 535       periods:
 536       - 1
 537       - 14
 538       # - 60
 539       layout: "plot-cpta"
 540
 541     - title: "VPP 4T4C IPv6 78B Packet Throughput - {period} Trending"
 542       output-file-name: "ip6-4t4c-x520"
 543       data: "plot-performance-trending"
 544       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '78B' and ('BASE' or 'SCALE' or 'FEATURE') and '4T4C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
 545       parameters:
 546       - "result"
 547       periods:
 548       - 1
 549       - 14
 550       # - 60
 551       layout: "plot-cpta"
 552
 553     - title: "VPP 1T1C IPv6 78B Packet Throughput - {period} Trending"
 554       output-file-name: "ip6-1t1c-xl710"
 555       data: "plot-performance-trending"
 556       filter: "'NIC_Intel-XL710' and 'MRR' and '78B' and ('BASE' or 'SCALE' or 'FEATURE') and '1T1C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
 557       parameters:
 558       - "result"
 559       periods:
 560       - 1
 561       - 14
 562       # - 60
 563       layout: "plot-cpta"
 564
 565     - title: "VPP 2T2C IPv6 78B Packet Throughput - {period} Trending"
 566       output-file-name: "ip6-2t2c-xl710"
 567       data: "plot-performance-trending"
 568       filter: "'NIC_Intel-XL710' and 'MRR' and '78B' and ('BASE' or 'SCALE' or 'FEATURE') and '2T2C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
 569       parameters:
 570       - "result"
 571       periods:
 572       - 1
 573       - 14
 574       # - 60
 575       layout: "plot-cpta"
 576
 577     - title: "VPP 4T4C IPv6 78B Packet Throughput - {period} Trending"
 578       output-file-name: "ip6-4t4c-xl710"
 579       data: "plot-performance-trending"
 580       filter: "'NIC_Intel-XL710' and 'MRR' and '78B' and ('BASE' or 'SCALE' or 'FEATURE') and '4T4C' and 'IP6FWD' and not 'IPSEC' and not 'VHOST'"
 581       parameters:
 582       - "result"
 583       periods:
 584       - 1
 585       - 14
 586       # - 60
 587       layout: "plot-cpta"
 588
 589 # Container memif
 590
 591     - title: "VPP 1T1C L2 Container memif 64B Packet Throughput - {period} Trending"
 592       output-file-name: "container-memif-l2-1t1c-x520"
 593       data: "plot-performance-trending"
 594       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'BASE' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 595       parameters:
 596       - "result"
 597       periods:
 598       - 1
 599       - 14
 600       # - 60
 601       layout: "plot-cpta"
 602
 603     - title: "VPP 2T2C L2 Container memif 64B Packet Throughput - {period} Trending"
 604       output-file-name: "container-memif-l2-2t2c-x520"
 605       data: "plot-performance-trending"
 606       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'BASE' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 607       parameters:
 608       - "result"
 609       periods:
 610       - 1
 611       - 14
 612       # - 60
 613       layout: "plot-cpta"
 614
 615     - title: "VPP 4T4C L2 Container memif 64B Packet Throughput - {period} Trending"
 616       output-file-name: "container-memif-l2-4t4c-x520"
 617       data: "plot-performance-trending"
 618       filter: "'NIC_Intel-X520-DA2' and 'MRR' and '64B' and 'BASE' and '4T4C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 619       parameters:
 620       - "result"
 621       periods:
 622       - 1
 623       - 14
 624       # - 60
 625       layout: "plot-cpta"
 626
 627     - title: "VPP 1T1C L2 Container memif 64B Packet Throughput - {period} Trending"
 628       output-file-name: "container-memif-l2-1t1c-xl710"
 629       data: "plot-performance-trending"
 630       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and 'BASE' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 631       parameters:
 632       - "result"
 633       periods:
 634       - 1
 635       - 14
 636       # - 60
 637       layout: "plot-cpta"
 638
 639     - title: "VPP 2T2C L2 Container memif 64B Packet Throughput - {period} Trending"
 640       output-file-name: "container-memif-l2-2t2c-xl710"
 641       data: "plot-performance-trending"
 642       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and 'BASE' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 643       parameters:
 644       - "result"
 645       periods:
 646       - 1
 647       - 14
 648       # - 60
 649       layout: "plot-cpta"
 650
 651     - title: "VPP 4T4C L2 Container memif 64B Packet Throughput - {period} Trending"
 652       output-file-name: "container-memif-l2-4t4c-xl710"
 653       data: "plot-performance-trending"
 654       filter: "'NIC_Intel-XL710' and 'MRR' and '64B' and 'BASE' and '4T4C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 655       parameters:
 656       - "result"
 657       periods:
 658       - 1
 659       - 14
 660       # - 60
 661       layout: "plot-cpta"
 662
 663     - title: "VPP 1T1C L2 Container memif IMIX Packet Throughput - {period} Trending"
 664       output-file-name: "container-memif-imix-l2-1t1c-x520"
 665       data: "plot-performance-trending"
 666       filter: "'NIC_Intel-X520-DA2' and 'MRR' and 'IMIX' and 'BASE' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 667       parameters:
 668       - "result"
 669       periods:
 670       - 1
 671       - 14
 672       # - 60
 673       layout: "plot-cpta"
 674
 675     - title: "VPP 2T2C L2 Container memif IMIX Packet Throughput - {period} Trending"
 676       output-file-name: "container-memif-imix-l2-2t2c-x520"
 677       data: "plot-performance-trending"
 678       filter: "'NIC_Intel-X520-DA2' and 'MRR' and 'IMIX' and 'BASE' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 679       parameters:
 680       - "result"
 681       periods:
 682       - 1
 683       - 14
 684       # - 60
 685       layout: "plot-cpta"
 686
 687     - title: "VPP 4T4C L2 Container memif IMIX Packet Throughput - {period} Trending"
 688       output-file-name: "container-memif-imix-l2-4t4c-x520"
 689       data: "plot-performance-trending"
 690       filter: "'NIC_Intel-X520-DA2' and 'MRR' and 'IMIX' and 'BASE' and '4T4C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 691       parameters:
 692       - "result"
 693       periods:
 694       - 1
 695       - 14
 696       # - 60
 697       layout: "plot-cpta"
 698
 699     - title: "VPP 1T1C L2 Container memif IMIX Packet Throughput - {period} Trending"
 700       output-file-name: "container-memif-imix-l2-1t1c-xl710"
 701       data: "plot-performance-trending"
 702       filter: "'NIC_Intel-XL710' and 'MRR' and 'IMIX' and 'BASE' and '1T1C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 703       parameters:
 704       - "result"
 705       periods:
 706       - 1
 707       - 14
 708       # - 60
 709       layout: "plot-cpta"
 710
 711     - title: "VPP 2T2C L2 Container memif IMIX Packet Throughput - {period} Trending"
 712       output-file-name: "container-memif-imix-l2-2t2c-xl710"
 713       data: "plot-performance-trending"
 714       filter: "'NIC_Intel-XL710' and 'MRR' and 'IMIX' and 'BASE' and '2T2C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 715       parameters:
 716       - "result"
 717       periods:
 718       - 1
 719       - 14
 720       # - 60
 721       layout: "plot-cpta"
 722
 723     - title: "VPP 4T4C L2 Container memif IMIX Packet Throughput - {period} Trending"
 724       output-file-name: "container-memif-imix-l2-4t4c-xl710"
 725       data: "plot-performance-trending"
 726       filter: "'NIC_Intel-XL710' and 'MRR' and 'IMIX' and 'BASE' and '4T4C' and 'MEMIF' and ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD') and not 'VHOST'"
 727       parameters:
 728       - "result"
 729       periods:
 730       - 1
 731       - 14
 732       # - 60
 733       layout: "plot-cpta"
 734
 735 # VM vhost
 736
 737     - title: "VPP 1T1C VM vhost ethip4 64B Packet Throughput - {period} Trending"
 738       output-file-name: "vm-vhost-ethip4-1t1c-x520"
 739       data: "plot-performance-trending"
 740       filter: "'NIC_Intel-X520-DA2' and '64B' and 'MRR' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
 741       parameters:
 742       - "result"
 743       periods:
 744       - 1
 745       - 14
 746       # - 60
 747       layout: "plot-cpta"
 748
 749     - title: "VPP 2T2C VM vhost ethip4 64B Packet Throughput - {period} Trending"
 750       output-file-name: "vm-vhost-ethip4-2t2c-x520"
 751       data: "plot-performance-trending"
 752       filter: "'NIC_Intel-X520-DA2' and '64B' and 'MRR' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
 753       parameters:
 754       - "result"
 755       periods:
 756       - 1
 757       - 14
 758       # - 60
 759       layout: "plot-cpta"
 760
 761     - title: "VPP 4T4C VM vhost ethip4 64B Packet Throughput - {period} Trending"
 762       output-file-name: "vm-vhost-ethip4-4t4c-x520"
 763       data: "plot-performance-trending"
 764       filter: "'NIC_Intel-X520-DA2' and '64B' and 'MRR' and '4T4C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
 765       parameters:
 766       - "result"
 767       periods:
 768       - 1
 769       - 14
 770       # - 60
 771       layout: "plot-cpta"
 772
 773     - title: "VPP 1T1C VM vhost eth 64B Packet Throughput - {period} Trending"
 774       output-file-name: "vm-vhost-eth-1t1c-x520"
 775       data: "plot-performance-trending"
 776       filter: "'NIC_Intel-X520-DA2' and '64B' and 'MRR' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 777
 778       parameters:
 779       - "result"
 780       periods:
 781       - 1
 782       - 14
 783       # - 60
 784       layout: "plot-cpta"
 785
 786     - title: "VPP 2T2C VM vhost eth 64B Packet Throughput - {period} Trending"
 787       output-file-name: "vm-vhost-eth-2t2c-x520"
 788       data: "plot-performance-trending"
 789       filter: "'NIC_Intel-X520-DA2' and '64B' and 'MRR' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 790       parameters:
 791       - "result"
 792       periods:
 793       - 1
 794       - 14
 795       # - 60
 796       layout: "plot-cpta"
 797
 798     - title: "VPP 4T4C VM vhost eth 64B Packet Throughput - {period} Trending"
 799       output-file-name: "vm-vhost-eth-4t4c-x520"
 800       data: "plot-performance-trending"
 801       filter: "'NIC_Intel-X520-DA2' and '64B' and 'MRR' and '4T4C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 802       parameters:
 803       - "result"
 804       periods:
 805       - 1
 806       - 14
 807       # - 60
 808       layout: "plot-cpta"
 809
 810     - title: "VPP 1T1C VM vhost eth 64B Packet Throughput - {period} Trending"
 811       output-file-name: "vm-vhost-eth-1t1c-xl710"
 812       data: "plot-performance-trending"
 813       filter: "'NIC_Intel-XL710' and '64B' and 'MRR' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 814
 815       parameters:
 816       - "result"
 817       periods:
 818       - 1
 819       - 14
 820       # - 60
 821       layout: "plot-cpta"
 822
 823     - title: "VPP 2T2C VM vhost eth 64B Packet Throughput - {period} Trending"
 824       output-file-name: "vm-vhost-eth-2t2c-xl710"
 825       data: "plot-performance-trending"
 826       filter: "'NIC_Intel-XL710' and '64B' and 'MRR' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 827       parameters:
 828       - "result"
 829       periods:
 830       - 1
 831       - 14
 832       # - 60
 833       layout: "plot-cpta"
 834
 835     - title: "VPP 4T4C VM vhost eth 64B Packet Throughput - {period} Trending"
 836       output-file-name: "vm-vhost-eth-4t4c-xl710"
 837       data: "plot-performance-trending"
 838       filter: "'NIC_Intel-XL710' and '64B' and 'MRR' and '4T4C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 839       parameters:
 840       - "result"
 841       periods:
 842       - 1
 843       - 14
 844       # - 60
 845       layout: "plot-cpta"
 846
 847     - title: "VPP 1T1C VM vhost eth 64B Packet Throughput - {period} Trending"
 848       output-file-name: "vm-vhost-eth-1t1c-x710"
 849       data: "plot-performance-trending"
 850       filter: "'NIC_Intel-X710' and '64B' and 'MRR' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 851
 852       parameters:
 853       - "result"
 854       periods:
 855       - 1
 856       - 14
 857       # - 60
 858       layout: "plot-cpta"
 859
 860     - title: "VPP 2T2C VM vhost eth 64B Packet Throughput - {period} Trending"
 861       output-file-name: "vm-vhost-eth-2t2c-x710"
 862       data: "plot-performance-trending"
 863       filter: "'NIC_Intel-X710' and '64B' and 'MRR' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 864       parameters:
 865       - "result"
 866       periods:
 867       - 1
 868       - 14
 869       # - 60
 870       layout: "plot-cpta"
 871
 872     - title: "VPP 4T4C VM vhost eth 64B Packet Throughput - {period} Trending"
 873       output-file-name: "vm-vhost-eth-4t4c-x710"
 874       data: "plot-performance-trending"
 875       filter: "'NIC_Intel-X710' and '64B' and 'MRR' and '4T4C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 876       parameters:
 877       - "result"
 878       periods:
 879       - 1
 880       - 14
 881       # - 60
 882       layout: "plot-cpta"
 883
 884     - title: "VPP 1T1C VM vhost ethip4 IMIX Packet Throughput - {period} Trending"
 885       output-file-name: "vm-vhost-imix-ethip4-1t1c-x520"
 886       data: "plot-performance-trending"
 887       filter: "'NIC_Intel-X520-DA2' and 'IMIX' and 'MRR' and '1T1C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
 888       parameters:
 889       - "result"
 890       periods:
 891       - 1
 892       - 14
 893       # - 60
 894       layout: "plot-cpta"
 895
 896     - title: "VPP 2T2C VM vhost ethip4 IMIX Packet Throughput - {period} Trending"
 897       output-file-name: "vm-vhost-imix-ethip4-2t2c-x520"
 898       data: "plot-performance-trending"
 899       filter: "'NIC_Intel-X520-DA2' and 'IMIX' and 'MRR' and '2T2C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
 900       parameters:
 901       - "result"
 902       periods:
 903       - 1
 904       - 14
 905       # - 60
 906       layout: "plot-cpta"
 907
 908     - title: "VPP 4T4C VM vhost ethip4 IMIX Packet Throughput - {period} Trending"
 909       output-file-name: "vm-vhost-imix-ethip4-4t4c-x520"
 910       data: "plot-performance-trending"
 911       filter: "'NIC_Intel-X520-DA2' and 'IMIX' and 'MRR' and '4T4C' and 'VHOST' and not ('L2BDMACSTAT' or 'L2BDMACLRN' or 'L2XCFWD')"
 912       parameters:
 913       - "result"
 914       periods:
 915       - 1
 916       - 14
 917       # - 60
 918       layout: "plot-cpta"
 919
 920     - title: "VPP 1T1C VM vhost eth IMIX Packet Throughput - {period} Trending"
 921       output-file-name: "vm-vhost-imix-eth-1t1c-x520"
 922       data: "plot-performance-trending"
 923       filter: "'NIC_Intel-X520-DA2' and 'IMIX' and 'MRR' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 924
 925       parameters:
 926       - "result"
 927       periods:
 928       - 1
 929       - 14
 930       # - 60
 931       layout: "plot-cpta"
 932
 933     - title: "VPP 2T2C VM vhost eth IMIX Packet Throughput - {period} Trending"
 934       output-file-name: "vm-vhost-imix-eth-2t2c-x520"
 935       data: "plot-performance-trending"
 936       filter: "'NIC_Intel-X520-DA2' and 'IMIX' and 'MRR' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 937       parameters:
 938       - "result"
 939       periods:
 940       - 1
 941       - 14
 942       # - 60
 943       layout: "plot-cpta"
 944
 945     - title: "VPP 4T4C VM vhost eth IMIX Packet Throughput - {period} Trending"
 946       output-file-name: "vm-vhost-imix-eth-4t4c-x520"
 947       data: "plot-performance-trending"
 948       filter: "'NIC_Intel-X520-DA2' and 'IMIX' and 'MRR' and '4T4C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 949       parameters:
 950       - "result"
 951       periods:
 952       - 1
 953       - 14
 954       # - 60
 955       layout: "plot-cpta"
 956
 957     - title: "VPP 1T1C VM vhost eth IMIX Packet Throughput - {period} Trending"
 958       output-file-name: "vm-vhost-imix-eth-1t1c-xl710"
 959       data: "plot-performance-trending"
 960       filter: "'NIC_Intel-XL710' and 'IMIX' and 'MRR' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 961
 962       parameters:
 963       - "result"
 964       periods:
 965       - 1
 966       - 14
 967       # - 60
 968       layout: "plot-cpta"
 969
 970     - title: "VPP 2T2C VM vhost eth IMIX Packet Throughput - {period} Trending"
 971       output-file-name: "vm-vhost-imix-eth-2t2c-xl710"
 972       data: "plot-performance-trending"
 973       filter: "'NIC_Intel-XL710' and 'IMIX' and 'MRR' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 974       parameters:
 975       - "result"
 976       periods:
 977       - 1
 978       - 14
 979       # - 60
 980       layout: "plot-cpta"
 981
 982     - title: "VPP 4T4C VM vhost eth IMIX Packet Throughput - {period} Trending"
 983       output-file-name: "vm-vhost-imix-eth-4t4c-xl710"
 984       data: "plot-performance-trending"
 985       filter: "'NIC_Intel-XL710' and 'IMIX' and 'MRR' and '4T4C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 986       parameters:
 987       - "result"
 988       periods:
 989       - 1
 990       - 14
 991       # - 60
 992       layout: "plot-cpta"
 993
 994     - title: "VPP 1T1C VM vhost eth IMIX Packet Throughput - {period} Trending"
 995       output-file-name: "vm-vhost-imix-eth-1t1c-x710"
 996       data: "plot-performance-trending"
 997       filter: "'NIC_Intel-X710' and 'IMIX' and 'MRR' and '1T1C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
 998
 999       parameters:
1000       - "result"
1001       periods:
1002       - 1
1003       - 14
1004       # - 60
1005       layout: "plot-cpta"
1006
1007     - title: "VPP 2T2C VM vhost eth IMIX Packet Throughput - {period} Trending"
1008       output-file-name: "vm-vhost-imix-eth-2t2c-x710"
1009       data: "plot-performance-trending"
1010       filter: "'NIC_Intel-X710' and 'IMIX' and 'MRR' and '2T2C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
1011       parameters:
1012       - "result"
1013       periods:
1014       - 1
1015       - 14
1016       # - 60
1017       layout: "plot-cpta"
1018
1019     - title: "VPP 4T4C VM vhost eth IMIX Packet Throughput - {period} Trending"
1020       output-file-name: "vm-vhost-imix-eth-4t4c-x710"
1021       data: "plot-performance-trending"
1022       filter: "'NIC_Intel-X710' and 'IMIX' and 'MRR' and '4T4C' and 'VHOST' and not 'VXLAN' and not 'IP4FWD' and not 'DOT1Q' and not '2VM'"
1023       parameters:
1024       - "result"
1025       periods:
1026       - 1
1027       - 14
1028       # - 60
1029       layout: "plot-cpta"
1030
1031 # IPSec
1032
1033     - title: "VPP 1T1C IPSec 64B Packet Throughput - {period} Trending"
1034       output-file-name: "ipsec-1t1c-xl710"
1035       data: "plot-performance-trending"
1036       filter: "'NIC_Intel-XL710' and '64B' and 'IP4FWD' and 'MRR' and '1T1C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN') and not 'VHOST'"
1037       parameters:
1038       - "result"
1039       periods:
1040       - 1
1041       - 14
1042       # - 60
1043       layout: "plot-cpta"
1044
1045     - title: "VPP 2T2C IPSec 64B Packet Throughput - {period} Trending"
1046       output-file-name: "ipsec-2t2c-xl710"
1047       data: "plot-performance-trending"
1048       filter: "'NIC_Intel-XL710' and '64B' and 'IP4FWD' and 'MRR' and '2T2C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN') and not 'VHOST'"
1049       parameters:
1050       - "result"
1051       periods:
1052       - 1
1053       - 14
1054       # - 60
1055       layout: "plot-cpta"
1056
1057     - title: "VPP 4T4C IPSec 64B Packet Throughput - {period} Trending"
1058       output-file-name: "ipsec-4t4c-xl710"
1059       data: "plot-performance-trending"
1060       filter: "'NIC_Intel-XL710' and '64B' and 'IP4FWD' and 'MRR' and '4T4C' and 'IPSECHW' and ('IPSECTRAN' or 'IPSECTUN') and not 'VHOST'"
1061       parameters:
1062       - "result"
1063       periods:
1064       - 1
1065       - 14
1066       # - 60
1067       layout: "plot-cpta"