docs/cpta/methodology/trend_presentation.rst

   1 Trend Presentation
   2 ^^^^^^^^^^^^^^^^^^
   3
   4 Failed tests
   5 ~~~~~~~~~~~~
   6
   7 The Failed tests tables list the tests which failed during the last test run.
   8 Separate tables are generated for each testbed.
   9
  10 Regressions and progressions
  11 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^
  12
  13 These tables list tests which encountered a regression or progression during the
  14 specified time period, which is currently set to the last 21 days.
  15
  16 Trendline Graphs
  17 ~~~~~~~~~~~~~~~~
  18
  19 Trendline graphs show measured per run averages of MRR values, NDR or PDR
  20 values, group average values, and detected anomalies.
  21 The graphs are constructed as follows:
  22
  23 - X-axis represents the date in the format MMDD.
  24 - Y-axis represents run-average MRR value, NDR or PDR values in Mpps. For PDR
  25   tests also a graph with average latency at 50% PDR [us] is generated.
  26 - Markers to indicate anomaly classification:
  27
  28   - Regression - red circle.
  29   - Progression - green circle.
  30
  31 - The line shows average MRR value of each group.
  32
  33 In addition the graphs show dynamic labels while hovering over graph data
  34 points, presenting the CSIT build date, measured value, VPP reference, trend job
  35 build ID and the LF testbed ID.