resources/tools/doc_gen/src/overview.rst

   1 .. |csit| replace:: Continuous System Integration and Testing
   2
   3 CSIT Description
   4 ================
   5
   6 #. Development of software code for fully automated VPP code testing,
   7    functionality, performance, regression and new functions.
   8
   9 #. Execution of CSIT test suites on VPP code running on LF FD.io virtual and
  10    physical compute environments.
  11
  12 #. Integration with FD.io continuous integration systems (Gerrit, Jenkins and
  13    such).
  14
  15 #. Identified existing FD.io project dependencies and interactions:
  16
  17     - vpp - Vector Packet Processing.
  18     - ci-management - Management repo for Jenkins Job Builder, script and
  19       management related to the Jenkins CI configuration.
  20
  21 Project Scope
  22 -------------
  23
  24 #. Automated regression testing of VPP code changes
  25
  26     - Functionality of VPP data plane, network control plane, management plane
  27       against functional specifications.
  28     - Performance of VPP data plane including non-drop-rate packet throughput
  29       and delay, against established reference benchmarks.
  30     - Performance of network control plane against established reference
  31       benchmarks.
  32     - Performance of management plane against established reference benchmarks.
  33
  34 #. Test case definitions driven by supported and planned VPP functionality,
  35    interfaces and performance:
  36
  37     - Uni-dimensional tests: Data plane, (Network) Control plane, Management
  38       plane.
  39     - Multi-dimensional tests: Use case driven.
  40
  41 #. Integration with FD.io Continuous Integration system including FD.io Gerrit
  42    and Jenkins
  43
  44     - Automated test execution triggered by VPP-VERIFY jobs other VPP and CSIT
  45       project jobs.
  46
  47 #. Integration with LF VPP test execution environment
  48
  49     - Functional tests execution on LF hosted VM environment.
  50     - Performance and functional tests execution on LF hosted physical compute
  51       environment.
  52     - Subset of tests executed on LF hosted physical compute running VIRL
  53       (Virtual Internet Routing Lab).