Report: Add data

Change-Id: I800273d04c3f956e58be727cbf5befa61377fa2b
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Update of VPP_STABLE_VER files

 - use new vpp ref build - ubuntu 18.04:
   21.01-rc0~324-g62877029a

 - use new vpp ref build - centos7:
   21.01-rc0~324_g6287702~b225

Change-Id: I86130eb1df9955395d4145f3ccdd0b07d6456fdf
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Add data

Change-Id: I99836894960f74f9dc283b812e1106ac512db3ae
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: NAT44 Latency

Change-Id: Ifca9e4f5783eea37df30ddfedc80c988f2163ad8
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I1cf61c523d781db3dbeccf89077c50992cb03205
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add NAT44 data

Change-Id: I463bf61d41484738ba5c614b473bcb5457e6abe1
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add NATT44 tests

Change-Id: I3920f881286565029f35bcfa700f36c6701db457
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: Iaa85aaa5179136281ab05325efcf0e91c234a774
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Support existing test types with ASTF

+ Add UDP_CPS, TCP_CPS, UDP_PPS and TCP_PPS suites.
 + Update existing cps traffic profiles.
 + Add missing traffic profiles.
 + UDP:
  + Single burst of 32 packets was confirmed as safe enough for TRex.
  + Maybe 64 could work, but not enough testing for that.
  + Multiple bursts have lead to reduced TRex performance,
    as overlaping bursts (from different client instances)
    tend to fill up the buffers.
 + TCP:
  + Data size set to 11111 bytes, completely arbitrarily.
  + Results look reasonable, so I have kept that.
  - MSS not set at all
 - No tested support for frame size other than 64B.
  - Frame size does not even factor into TCP profiles.
 + So other frame sizes are skipped in autogen.
+ Update tags in related suites.
 - HOSTS_{n} and SRC_USER_{n} should be unified.
 - Questionable clarification on difference between IP4BASE and SCALE.
+ Add NAT state resetters to tests that need them.
 + Resetter is called (if set) before each measurement.
 + If ramp-up is detected, resetter is not set.
+ Rename "mult" argument to "multiplier".
+ Abstracted from packets to transactions.
 + Transaction corresponds to profile.
 + TRex multiplier argument sets target rate in transactions per second.
 + The familiar STL traffic:
  + Bidirectional is considered to be 2 packets per transaction.
  + Unidirectional is considered to be 1 packet per transaction.
 + The newer ASTF traffic:
  + 4 subtypes, each has different number of packets per transaction.
 + For max rate computation:
  + Packets in the more numerous direction are considered.
+ Rely on TRex reported traffic duration for ASTF:
 + Use the server side value.
  - Client side value is higher by an overhead.
  - TRex is not sending traffic during that time.
 + Remove delays from traffic profiles.
  - Those delays would increase the reprted traffic time.
+ Support for scale lmited trials.
 + Only for ASTF profiles, each ASTF profile has limited scale.
 + Scale defined in suite variables.
 + For TRex to send all transactions provided duration value is ignored.
  + The appropriate value is computed in TrafficGenerator.
  + An ad-hoc time constant is added to match the TRex client side time overhead.
  + The profile driver receives the computed duration.
  + Measurement for PLRsearch add a sleep if the computed duration is smaller.
 + Alternative argument for search algos if scale is limited.
  + Both need higher timeout to accomodate big scales.
  + MLRsearch can afford fewer phases.
 + Added a parameter to optionally shorten the duration.
  + Use short duration for runtime stats trial and failure stats trial.
+ Use very large keepalive values in udp profiles to avoid ka packets.
+ No polling in ASTF profile driver.
 - Polling could eliminate the time overhead value.
 + But polling proved to introduce some loss, affecting the results.
+ Handle duration stretching in ASTF by stopping traffic.
 + The stop has several steps so that:
  + The traffic is really stopped entirely.
  + Late packets do not count (maybe as errors).
  + Stats are preserved to read for results (and cleared afterwards).
 + Several quantities added to ReceiveRateMeasurement:
  + Original target duration is preserved (algos need that).
  + Input estimate (tps) for early search iterations.
  + Output estimate (maybe pps) for MRR output.
  + Strict result (unsent counts as loss) for NDR.
+ Use L2 counters (opackets, ipackets) where possible.
 - TRex has trouble processing packets for the L7 ones at high loads.
+ Remove warmup from profile drivers and keywords.
 + Suites should call "Send ramp-up traffic" explicitly if needed.
+ Added parsing for few more counters.
 + Both to use in formulas or just for debug purposes.
- Only 64B cases in autogen, framesize support to be added later.
+ Latency streams during search can be enabled via PERF_USE_LATENCY env var.
+ MLRsearch improvments:
 + Rename argument names to min_rate and max_rate.
 + Use relative receive rate in initial phase.
+ PLRsearch improvements:
 + Careful computation when output (pps) does not match input (tps).
 + Use geometric distribution (instead of Poisson).
  + Helps agains math errors.
  + This should improve estimate stability.
  - But in practice big losses still lead to significant jumps.
+ Traffic generator improvements:
 + send_traffic_on_tg now calls the full set_rate_provider_defaults.
 + _send_traffic_on_tg_internal for the logic without provider defaults.
  + As the internal function is re-used by measure() without affecting defaults.
 + Move _parse_traffic_results just before get_measurement_result.
  + As the latter uses fields set bu the former, it is now easier to read.
 + Multiple sources for approximate duration.
  + Tried from more precise to more available.
 + Includes logic for _pps tests (added in later change).
 + Move explicit type conversions to earlier occurences.
+ Profile driver output field uses semicolons to simplify parsing.
+ Performance Robot lib file split to several smaller ones.
 + performance_actions.robot:
  + Hosts Additional Statistics Action For * keywords.
 + performance_display.robot:
  + Hosts keyword for displaying and verifying results.
  + Change test message to use the correct unit (pps or cps).
 + performance_limits.robot renamed to performance_vars.robot
  + Added many keywords, mostly for accessing test variables.
   + Moved variables for Policer into a new keyword there.
  + Some keywords need sophisticated logic.
  - Other are basically Get Variable Value.
   + But in future more logic can be added, without editing callers.
  + Documentation for the new keywords acts as a documentation for test variables.
 + performance_utils.robot has the rest.
  + Eliminated arguments if the value is in test variable.
  + Small improvements to documentation.
  - Still not enough cleanup with respect to arguments and test variables.
 + Keywords are sorted alphabetically now in each one.
+ Suites:
 + Unified variables table:
  + No colons in comments.
  + ${n_hosts}, ${n_ports} and use them instead hardcoded numbers.
 + Add -cps to existing cps suite names.
  + Remove "trial data overwrite".
  + Compute max rate as in STL suites.
 + Each NAT suite has ip4base suite to compare results to.
  - Those act as indirect TRex calibration.
  - VPP does not lose packets in those.
 + Latency in ASTF suites is disabled hard.
  - As we do not support latency in ASTF profiles yet.
 + Unidirectional tests governed by suite variable, not an argument.
+ Write long argument lists vertically.
 + Prefer to use argument names.
 + In Python, also the last argument is followed by comma.
 + It makes renaming and reordering easier.
 + Similarly applies to prints with long lists of values.
+ A TODO to update api crc file comments.

Change-Id: I84729355edbec051298a9de1162107f88ff5737d
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

job-spec: Add all NAT44 tests

- the specs:
  - docs/job_specs/report_iterative/2n-clx/vpp-mlr-00.md
  - docs/job_specs/report_iterative/2n-clx/vpp-mrr-00.md
  - docs/job_specs/report_iterative/2n-skx/vpp-mlr-00.md
  - docs/job_specs/report_iterative/2n-skx/vpp-mrr-00.md
  take too long. We should consider to remove some tests.
- the coverage specs were split to three parts

Change-Id: I39e2032c76266e159a781d1225cff1a5119d4c85
Signed-off-by: Tibor Frank <tifrank@cisco.com>

tests: Add GSO enabled tests

Change-Id: I409b060f64ae7c6787448ae519fd76d8384e9ffb
Signed-off-by: Martin Balaz <martin.balaz@pantheon.tech>

PAL: Remove debug info from result parser

Change-Id: I9b6c2185e43ed0b33dbeafb3d2757656f9e49bc3
Signed-off-by: Tibor Frank <tifrank@cisco.com>

PAL: Add processing of PPS and CPS tests

Change-Id: I7b15c69c923d47e83c2dc586cdc03ed4ebaeec74
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Configure rls2009.45

Change-Id: I8918f09411254b64abb65a165a0e284f735b306e
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I2394b42e177758a8f3ce4aeeb912b264cf3b457c
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: Ib5acc321ac7d5db7598b30b9783cee06ee8c1462
Signed-off-by: Tibor Frank <tifrank@cisco.com>

CSIT-1597 NAT44 API: dynamic config

- cover API changes in VPP: https://gerrit.fd.io/r/c/vpp/+/29463
- update vpp stable to version 21.01-rc0~283-g5f4f2081c

Change-Id: I079c10e4537448c3b078f22c3fe4ed266a5e2e2c
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Add data

Change-Id: Iaa5fb969b699985da8ec3356aa32fc0cb757affb
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: If03e4adf3672413016058fae85219ae5c7e922db
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Configure 2009.44

Change-Id: I7f7e50610e71af7f2b0dc1eed267a421ffd8aef0
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I657325a2c18a1003c8825037291f1c37962e2c67
Signed-off-by: Tibor Frank <tifrank@cisco.com>

FIX: Namespace deletion

+ Not sure who was doing code.
+ Set interface up should have namespace version

Signed-off-by: pmikus <pmikus@cisco.com>
Change-Id: I1103cddb9dd11e25a8ab0ce3f5126b2db9444749

FIX: Ansible calibration

Force check is doing its job but vt.handoff was deployed later.

vt.handoff (vt = virtualterminal) is a kernel boot parameter unique to
Ubuntu, and is not an upstream kernel boot parameter. Its purpose is to
allow the kernel to maintain the current contents of video memory on a
virtual terminal. So, when the operating system is booting up, when it
moves past the boot loader, vt.handoff allows showing of an aubergine
background, with Plymouth displaying a logo and progress indicator bar
on top of this. Once the display manager comes up, it smoothly replaces
this with a login prompt.

Useless

Signed-off-by: pmikus <pmikus@cisco.com>
Change-Id: I9d6db8833ccbef680fab2b643e9c3525bc709244

VPP-DEVICE: Add check of vpp statistic commands

Change-Id: I87f95c14034d89056f71ffaeccafc1d3b71ff933
Signed-off-by: Jan Gelety <jgelety@cisco.com>

FIX: Ansible asserts

Change-Id: Ib668674a2a267d2ceed458288d21181b2a937778
Signed-off-by: Peter Mikus <pmikus@cisco.com>

Report: Add data

Change-Id: I28cd6e2bfdf6617f7590907fc114681823a2979f
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Update of VPP_STABLE_VER files

 - use new vpp ref build - ubuntu 18.04:
   21.01-rc0~225-gdfffdd7fa

 - use new vpp ref build - centos7:
   21.01-rc0~225_gdfffdd7~b128

Change-Id: I20be4d66130b076abc85c24075e774e261ecd5e0
Signed-off-by: Jan Gelety <jgelety@cisco.com>

FIX: disable sending IPv6 RA messages from VMs

There were occasional Router Advertisement packets received in a Traffic
Generator in VM testcases. Fix by adding config that disables sending
IPv6 RA messages on interfaces in VM VPP config before enabling them.

Also rename related keywords and change descriptions based on
https://docs.fd.io/vpp/21.01/db/d4c/clicmd_src_vnet_ip6-nd.html#clicmd_ip6_nd

Change-Id: I1c2a33337ac91f6039d287b4c2aac388e3a52383
Signed-off-by: Juraj Linkeš <juraj.linkes@pantheon.tech>

Trending: Remove GBP tests

merge after https://gerrit.fd.io/r/c/csit/+/28885

Change-Id: I657f4e219968a8d422af6f5d6fc4727facfafb20
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Tests: Remove GBP

- Specs
- Tests
- Library
- TODO: PAL

Signed-off-by: pmikus <pmikus@cisco.com>
Change-Id: I8890940d56c7a9924d4a5f9365b6bb881610db14

Report: Add data

Change-Id: I17c582de8fa24ffd55b163cfeb727f2951ec647f
Signed-off-by: Tibor Frank <tifrank@cisco.com>

GPL: Replace contribution from Lucian

We need to replace the contribution, because Lucian is not responding,
and thus preventing us to use the new license on his code [0].

See the chain leading to [1] on how this reverts
his contribution, and adds a new fix.
Unfortunately we cannot merge that chain one-by-one,
because Python version is different now,
so verify fails for intermediate changes.

This is the chain squashed into the single change,
so it can be verified and merged.

[0] https://gerrit.fd.io/r/c/csit/+/11530
[1] https://gerrit.fd.io/r/c/csit/+/29481/2

Change-Id: I00ab3786e1d9abc28fed778b36d814d293c49383
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Report: Add data

Change-Id: I82099d75e02369a6b8e3093563f8e8ec62c96c19
Signed-off-by: Tibor Frank <tifrank@cisco.com>

FIX: vpp not started with configuration for nat44ed with 16M sessions

- after merge of commit vppinfra: use heap to store bihash data |
   https://gerrit.fd.io/r/c/vpp/+/29099
  it is necessary to allocate 14GB of memory for main heap in case
  of nat44ed test with 16.5M sessions

Change-Id: I65dccdd4f50382b1b40cdffd2d9031ffb7d3bfa1
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Ansible: Rework grub command line

Signed-off-by: pmikus <pmikus@cisco.com>
Change-Id: I8abfc47e5e816e2ab4b39d7ad7575e672ae19ca6

Trending: Add csit-dpdk-perf-mrr-weekly-master-3n-tsh

Change-Id: Icce2fc809d3f72a6447cc07700df3c6f324af267
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Configure Report 2009.43

Change-Id: I16ce4e2146fa44eace76fb495cc6d007005c215f
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I41209e4a285edb9d6ac5428ea091b36179f3e1ed
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add NICs Comparison for 3n-skx

Change-Id: Ib5dd43bfa823352f2aa623e54bf8de4306675eb6
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Fix static content

Change-Id: I3ba5ea19efd6d8f878aa67bff9bcd237a7a366ff
Signed-off-by: Tibor Frank <tifrank@cisco.com>

vpp_device: fix shim hostname

Replace the hacky grep of /etc/resolv.conf with default docker gateway
IP.

Change-Id: Iec3a4658826f2ba871acb14d511e9c79a1273290
Signed-off-by: Juraj Linkeš <juraj.linkes@pantheon.tech>

Spec: EPYC zn2

Signed-off-by: pmikus <pmikus@cisco.com>
Change-Id: I2dd5602c129f3145ee6aa577929afdd5c2815fcd

report: updates to methodology section including nat44, acl, ipsec

Change-Id: I13464728d903cba14feedd3cfb78226d50f3d4a1
Signed-off-by: Maciek Konstantynowicz <mkonstan@cisco.com>

Report: Fix bugs in release notes

Change-Id: Ib1175c8eb256136e9d4b5342043c2014d99631e6
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Fix bugs in pdf version 2

Change-Id: I2fb1c5593a72fda406a21b3f6cdebae6a1085817
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I7064e2c1a5a679a964f588524392681221f7c80d
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: vpp performance release notes update

Change-Id: I8c7e3af80a976a252a4fd4df223ab6122decc201
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Add data

Change-Id: Ibd0c2bdb9ea9ab166bc9f3ce2d80f711877519e9
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Edit PAL section in the release notes

Change-Id: I8c47ce084ae2cac981e1763b577bc18a406f709e
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add Data, Fix bugs in pdf version

Change-Id: Ie880ee58313603104b2de9681305fc460939e96a
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data, add pdf version

Change-Id: Ia648b4aec15b1ca8e9293373160e740c19abcdb1
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I6c033a1c8b5b191b0e8089a6774aeef309246c5b
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Display limits in speedup graphs

Change-Id: I5be516a5d9a176e47a6e51606b484289e54c2ac9
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Infra: Enable AMD

Signed-off-by: pmikus <pmikus@cisco.com>
Change-Id: I3954157e91aafd370c3ac0843708903d19b84936

Update of VPP_STABLE_VER files

 - use new vpp ref build - ubuntu 18.04:
   21.01-rc0~185-g1ab533cba

 - use new vpp ref build - centos7:
   21.01-rc0~185_g1ab533c~b88

Change-Id: I249399beb11bbe6f325127d7813ca1a175497634
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Add data, fix small bugs

Change-Id: I39981b53640e45c95db20747b61d8af34eb4ce86
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: Ie04617e41f5d8ced902d7a4c2c0662b03d4e135b
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add NAT44 Latency graphs

Change-Id: I23ee9bef5631fde8403650caa96a14d9f920e055
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Configure 2009.42

Change-Id: Ic6f9ba720eb3ed964404789632278f211e576bb2
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I3cd0fa4eea903148e1d108ca7cd8f0e112acf7ab
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Hoststack graphs

Change-Id: I63d06a2933f1749e230f20386ffbd23f14e6f54f
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Update of VPP_STABLE_VER files

 - use new vpp ref build - ubuntu 18.04:
   21.01-rc0~170-g83143710e

 - use new vpp ref build - centos7:
   21.01-rc0~170_g8314371~b72

Change-Id: I57ca5fceb64309ab645cead1a1b22fd0db61b7e4
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Add data

Change-Id: I5f406af65667771ddc1ea80a88f35e6d9aba2ff5
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Set fonts in graphs

Change-Id: I13156df3b8e8d77ed5f83b97ed17e64d7526591f
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I6f12eaf373b76b27939849d6b64083f5edcdca08
Signed-off-by: Tibor Frank <tifrank@cisco.com>

docs: update arm hardware testbed specifications

* Remove decommissioned McBin testbed, but leave leftover mgmt IPs.
* Mark SoftIrons in mgmt IPs section as decommissioned.
* Update Taishan testbed.
* Update arm build servers IPMI status (no longer out-of-order).
* Update new ThunderX2 servers inventory details.

Change-Id: I5f02479745be83158c5507fa740a5c7746090c13
Signed-off-by: Juraj Linkeš <juraj.linkes@pantheon.tech>

vpp_device: updates for 1n-tx2 testbeds

One ThunderX2 9975 server (.69) was replaced with two ThunderX2 9980
(.70, .71) servers. Move the .69 server under ansible perf section in
anticipation of repurposing it for that purpose. Update the ansible
scripts with .70 and .71 config and rename port names in device.sh lib
to reflect the NIC differences between .69 and .70 (and .71).

Change-Id: I88b75648735243e5559175d3192ffcc8fc70071c
Signed-off-by: Juraj Linkeš <juraj.linkes@pantheon.tech>

Report: Add DNV comparison tables and details

Change-Id: I810f22a8bf4dc074e1c01d54fc4f8303b05aef22
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I8468454790108fc992fb3146c0b4cc8a443cf093
Signed-off-by: Tibor Frank <tifrank@cisco.com>

report: added description of CSIT environment ver. 5

Change-Id: Ic42bb1904d3cb7407c5d494f4ca53f0b6fd75d32
Signed-off-by: Maciek Konstantynowicz <mkonstan@cisco.com>

Report: Add data

Change-Id: I2308c87b4c78bc319092e83fbb2326998a94f7ea
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: vpp-device static content update

Change-Id: If78173c4b7fb4d5a0dedd55defeebf44b110be2a
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Update test_environment_tg

+ Yaml formatting as used in code.
+ Mentioned core_mask=STLClient.CORE_MASK_PIN
- No mention of ASTF specifics.

Change-Id: I653cc383f21195275a92ff233768d92b340e684e
Signed-off-by: Vratko Polak <vrpolak@cisco.com>

Report: Add 2n-skx NAT44

Change-Id: I15b371a93d7b1e80fab50bd5ffab83ada3a2fdb2
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: I0c72bd757af3a51cd982fc43ea4f31a12b14441e
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

- DNV VPP tests
- 3n-tsh MRR 2005-5
- MRR Comparisons for skx, hsw and clx

Change-Id: Ibb73e0f8234d2eb27b6a386675492efc9f050247
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add rls data

Change-Id: I104c61ae1aa26fe9d057a16275d8cc2f12abef18
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Fix NAT44

Change-Id: I9c0b8571673a0fc839430a4dce2ef0e8b9b017e2
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Trending: Add NAT44

Change-Id: I57d4b6f0ffa2ebfffbf95fc030bc8da70e46c8bc
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add NAT44

Change-Id: I9bb8340e7921bce32b3bd51b8a54f33bc74f41ec
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add rls data

Change-Id: I903075db92a71964f792d2de42a69ca93103e11d
Signed-off-by: Tibor Frank <tifrank@cisco.com>

job-spec: Add report_iteratve/3n-hsw/hoststack-00.md

Change-Id: I98ad76f5e1d1f9b4a7442aa9925ce68869123ac7
Signed-off-by: Tibor Frank <tifrank@cisco.com>

jop-spec: Add NAT44 tests

Add all which we want to run and disable those which are not ready.

Change-Id: I649ab290a1deec5d1c7de34a7bbe367d78a1e3ff
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Test: Add ramp-up phase to nat44ed-udir tests

Change-Id: I3aa50ec1ef9b0445014daa31e767323060f4a03f
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Add 2005 data

Change-Id: I1a7546d399a7527a46a77629e5f6e2c258c562df
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Framework: Add possibility to send ramp-up traffic

Change-Id: Ie24184ca4ac2d6c7abc32f0f103e10bc402ad93b
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Update 1n-tx2 testbed docs for new thx2 servers

Change-Id: I64e1161bd6accbb478cec5314710ac4a68beda29
Signed-off-by: Jieqiang Wang <jieqiang.wang@arm.com>

Report: Add data

Change-Id: I827efd0850dde4d5d2c2b6e839973278ec8ec0a6
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: Ice3945d471a5597a3d81152bee38eac1f1d91d1c
Signed-off-by: Tibor Frank <tifrank@cisco.com>

test: compute max_translations_per_thread based on worker threads number

Change-Id: I1c638aef886bf37a9feb4a29e4949c7c8f19b717
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Framework: main heap size value multiplication

- default value for main heap size set to 2G
- allow allocation of n x 2G in tests that need it

Change-Id: I02dafe6bc61649d2823486a3e983f66f5a213a88
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Fix specification file

Change-Id: I9a2664d73c0bdc99773fb24394aa59a399ae7a54
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add data

Change-Id: Id55530bb4e9118e73f3630103333b902d07510f6
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Downgrade vpp build to version 21.01-rc0~112-g2c714a0ce

- until socket for stats is fixed

Change-Id: Iab63589246bd9b239be746530e270cb64f0cefe7
Signed-off-by: Jan Gelety <jgelety@cisco.com>

API: Add collection for 29037/3

Change-Id: I98f85a76e24fc471bee520bdf03e4252e81675d0
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Update of VPP_STABLE_VER files

 - use new vpp ref build - ubuntu 18.04:
   21.01-rc0~118-g4537c3092

 - use new vpp ref build - centos7:
   21.01-rc0~118_g4537c30~b21

Change-Id: I8aec51085bb13a32ed5a8627785dbea1b5404342
Signed-off-by: Jan Gelety <jgelety@cisco.com>

Report: Hide DNV in spec

Change-Id: I72a6b07e9785ef6eda05eef43cfee0577ffa7ba6
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add vpp 2n-clx-cx556a, add dpdk 3n-tsh

Change-Id: Ia5b0a70f430a4a26f07c1fa6b7506b839f3813bc
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add vpp2005-env5 data

Change-Id: I23241c399411dfc947f2be524dbe25a3094d03e2
Signed-off-by: Tibor Frank <tifrank@cisco.com>

Report: Add RC2 data

Change-Id: I52666cd0e5c9ebdf8ad12c3b609acf5f58e976ad
Signed-off-by: Tibor Frank <tifrank@cisco.com>