docs/cpta/introduction/index.rst

   1 VPP MRR Performance Dashboard
   2 =============================
   3
   4 Description
   5 -----------
   6
   7 Dashboard tables list a summary of per test-case VPP MRR performance
   8 trend and trend compliance metrics, and detected number of anomalies.
   9 Data samples come from the CSIT VPP trending MRR jobs executed twice a
  10 day, every 12 hrs (02:00, 14:00 UTC). All trend and anomaly evaluation
  11 is based on a rolling window of <N=14> data samples, covering last 7
  12 days.
  13
  14 Legend to table:
  15
  16     - **Test Case** : name of CSIT test case, naming convention in
  17       `CSIT wiki <https://wiki.fd.io/view/CSIT/csit-test-naming>`_.
  18     - **Trend [Mpps]** : last value of trend.
  19     - **Short-Term Change [%]** : Relative change of last trend value vs. last
  20       week trend value.
  21     - **Long-Term Change [%]** : Relative change of last trend value vs. maximum
  22       of trend values over the last quarter except last week.
  23     - **Regressions [#]** : Number of regressions detected.
  24     - **Progressions [#]** : Number of progressions detected.
  25     - **Outliers [#]** : Number of outliers detected.
  26
  27 All trend and anomaly calculations are defined in :ref:`trending_methodology`.
  28
  29 Tested VPP worker-thread-core combinations (1t1c, 2t2c, 4t4c) are listed
  30 in separate tables in section 1.x. Followed by trending methodology in
  31 section 2. and daily trending graphs in sections 3.x. Daily trending
  32 data used is provided in sections 4.x.
  33
  34 VPP worker on 1t1c
  35 ------------------
  36
  37 .. include:: ../../../_build/_static/vpp/performance-trending-dashboard-1t1c.rst
  38
  39 VPP worker on 2t2c
  40 ------------------
  41
  42 .. include:: ../../../_build/_static/vpp/performance-trending-dashboard-2t2c.rst
  43
  44 VPP worker on 4t4c
  45 ------------------
  46
  47 .. include:: ../../../_build/_static/vpp/performance-trending-dashboard-4t4c.rst