docs/cpta/introduction/introduction.rst

   1 Description
   2 ===========
   3
   4 Performance dashboard tables provide the latest VPP throughput trend,
   5 trend compliance and detected anomalies, all on a per VPP test case
   6 basis.  Linked trendline graphs enable further drill-down into the
   7 trendline compliance, sequence and nature of anomalies, as well as
   8 pointers to performance test builds/logs and VPP (or DPDK) builds.
   9 Performance trending is currently based on the Maximum Receive Rate (MRR) tests.
  10 MRR tests measure the packet forwarding rate under the maximum load offered
  11 by traffic generator over a set trial duration, regardless of packet
  12 loss. See :ref:`trending_methodology` section for more detail including
  13 trend and anomaly calculations.
  14
  15 Data samples are generated by the CSIT VPP (and DPDK) performance trending jobs
  16 executed twice a day (target start: every 12 hrs, 02:00, 14:00 UTC). All
  17 trend and anomaly evaluation is based on an algorithm which divides test runs
  18 into groups according to minimum description length principle.
  19 The trend value is the population average of the results within a group.
  20
  21 Tested VPP worker-thread-core combinations (1t1c, 2t1c, 2t2c, 4t2c, 4t4c, 8t4c)
  22 are listed in separate tables in section 1.x. Followed by trending methodology
  23 in section 2. and trending graphs in sections 3.x. Performance test  data
  24 used for trending graphs is provided in sections 4.x.