lib/librte_gso/rte_gso.c

   1 /*-
   2  *   BSD LICENSE
   3  *
   4  *   Copyright(c) 2017 Intel Corporation. All rights reserved.
   5  *   All rights reserved.
   6  *
   7  *   Redistribution and use in source and binary forms, with or without
   8  *   modification, are permitted provided that the following conditions
   9  *   are met:
  10  *
  11  *     * Redistributions of source code must retain the above copyright
  12  *       notice, this list of conditions and the following disclaimer.
  13  *     * Redistributions in binary form must reproduce the above copyright
  14  *       notice, this list of conditions and the following disclaimer in
  15  *       the documentation and/or other materials provided with the
  16  *       distribution.
  17  *     * Neither the name of Intel Corporation nor the names of its
  18  *       contributors may be used to endorse or promote products derived
  19  *       from this software without specific prior written permission.
  20  *
  21  *   THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
  22  *   "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
  23  *   LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
  24  *   A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
  25  *   OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
  26  *   SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
  27  *   LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
  28  *   DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
  29  *   THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
  30  *   (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
  31  *   OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
  32  */
  33
  34 #include <errno.h>
  35
  36 #include <rte_log.h>
  37 #include <rte_ethdev.h>
  38
  39 #include "rte_gso.h"
  40 #include "gso_common.h"
  41 #include "gso_tcp4.h"
  42 #include "gso_tunnel_tcp4.h"
  43
  44 int
  45 rte_gso_segment(struct rte_mbuf *pkt,
  46                 const struct rte_gso_ctx *gso_ctx,
  47                 struct rte_mbuf **pkts_out,
  48                 uint16_t nb_pkts_out)
  49 {
  50         struct rte_mempool *direct_pool, *indirect_pool;
  51         struct rte_mbuf *pkt_seg;
  52         uint64_t ol_flags;
  53         uint16_t gso_size;
  54         uint8_t ipid_delta;
  55         int ret = 1;
  56
  57         if (pkt == NULL || pkts_out == NULL || gso_ctx == NULL ||
  58                         nb_pkts_out < 1 ||
  59                         gso_ctx->gso_size < RTE_GSO_SEG_SIZE_MIN ||
  60                         ((gso_ctx->gso_types & (DEV_TX_OFFLOAD_TCP_TSO |
  61                         DEV_TX_OFFLOAD_VXLAN_TNL_TSO |
  62                         DEV_TX_OFFLOAD_GRE_TNL_TSO)) == 0))
  63                 return -EINVAL;
  64
  65         if (gso_ctx->gso_size >= pkt->pkt_len) {
  66                 pkt->ol_flags &= (~PKT_TX_TCP_SEG);
  67                 pkts_out[0] = pkt;
  68                 return 1;
  69         }
  70
  71         direct_pool = gso_ctx->direct_pool;
  72         indirect_pool = gso_ctx->indirect_pool;
  73         gso_size = gso_ctx->gso_size;
  74         ipid_delta = (gso_ctx->flag != RTE_GSO_FLAG_IPID_FIXED);
  75         ol_flags = pkt->ol_flags;
  76
  77         if ((IS_IPV4_VXLAN_TCP4(pkt->ol_flags) &&
  78                         (gso_ctx->gso_types & DEV_TX_OFFLOAD_VXLAN_TNL_TSO)) ||
  79                         ((IS_IPV4_GRE_TCP4(pkt->ol_flags) &&
  80                          (gso_ctx->gso_types & DEV_TX_OFFLOAD_GRE_TNL_TSO)))) {
  81                 pkt->ol_flags &= (~PKT_TX_TCP_SEG);
  82                 ret = gso_tunnel_tcp4_segment(pkt, gso_size, ipid_delta,
  83                                 direct_pool, indirect_pool,
  84                                 pkts_out, nb_pkts_out);
  85         } else if (IS_IPV4_TCP(pkt->ol_flags) &&
  86                         (gso_ctx->gso_types & DEV_TX_OFFLOAD_TCP_TSO)) {
  87                 pkt->ol_flags &= (~PKT_TX_TCP_SEG);
  88                 ret = gso_tcp4_segment(pkt, gso_size, ipid_delta,
  89                                 direct_pool, indirect_pool,
  90                                 pkts_out, nb_pkts_out);
  91         } else {
  92                 /* unsupported packet, skip */
  93                 pkts_out[0] = pkt;
  94                 RTE_LOG(DEBUG, GSO, "Unsupported packet type\n");
  95                 return 1;
  96         }
  97
  98         if (ret > 1) {
  99                 pkt_seg = pkt;
 100                 while (pkt_seg) {
 101                         rte_mbuf_refcnt_update(pkt_seg, -1);
 102                         pkt_seg = pkt_seg->next;
 103                 }
 104         } else if (ret < 0) {
 105                 /* Revert the ol_flags in the event of failure. */
 106                 pkt->ol_flags = ol_flags;
 107         }
 108
 109         return ret;
 110 }