vnet/vnet/l2/l2_output.c

   1 /*
   2  * l2_output.c : layer 2 output packet processing
   3  *
   4  * Copyright (c) 2013 Cisco and/or its affiliates.
   5  * Licensed under the Apache License, Version 2.0 (the "License");
   6  * you may not use this file except in compliance with the License.
   7  * You may obtain a copy of the License at:
   8  *
   9  *     http://www.apache.org/licenses/LICENSE-2.0
  10  *
  11  * Unless required by applicable law or agreed to in writing, software
  12  * distributed under the License is distributed on an "AS IS" BASIS,
  13  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  14  * See the License for the specific language governing permissions and
  15  * limitations under the License.
  16  */
  17
  18 #include <vlib/vlib.h>
  19 #include <vnet/vnet.h>
  20 #include <vnet/pg/pg.h>
  21 #include <vnet/ethernet/ethernet.h>
  22 #include <vlib/cli.h>
  23
  24 #include <vppinfra/error.h>
  25 #include <vppinfra/hash.h>
  26 #include <vnet/l2/feat_bitmap.h>
  27 #include <vnet/l2/l2_output.h>
  28
  29
  30 /* Feature graph node names */
  31 static char *l2output_feat_names[] = {
  32 #define _(sym,name) name,
  33   foreach_l2output_feat
  34 #undef _
  35 };
  36
  37 char **
  38 l2output_get_feat_names (void)
  39 {
  40   return l2output_feat_names;
  41 }
  42
  43 l2output_main_t l2output_main;
  44
  45 typedef struct
  46 {
  47   /* per-pkt trace data */
  48   u8 src[6];
  49   u8 dst[6];
  50   u32 sw_if_index;
  51 } l2output_trace_t;
  52
  53 /* packet trace format function */
  54 static u8 *
  55 format_l2output_trace (u8 * s, va_list * args)
  56 {
  57   CLIB_UNUSED (vlib_main_t * vm) = va_arg (*args, vlib_main_t *);
  58   CLIB_UNUSED (vlib_node_t * node) = va_arg (*args, vlib_node_t *);
  59   l2output_trace_t *t = va_arg (*args, l2output_trace_t *);
  60
  61   s = format (s, "l2-output: sw_if_index %d dst %U src %U",
  62               t->sw_if_index,
  63               format_ethernet_address, t->dst,
  64               format_ethernet_address, t->src);
  65   return s;
  66 }
  67
  68
  69 static char *l2output_error_strings[] = {
  70 #define _(sym,string) string,
  71   foreach_l2output_error
  72 #undef _
  73 };
  74
  75 /**
  76  * Check for split horizon violations.
  77  * Return 0 if split horizon check passes, otherwise return non-zero.
  78  * Packets should not be transmitted out an interface with the same
  79  * split-horizon group as the input interface, except if the @c shg is 0
  80  * in which case the check always passes.
  81  */
  82 static_always_inline u32
  83 split_horizon_violation (u8 shg1, u8 shg2)
  84 {
  85   if (PREDICT_TRUE (shg1 == 0))
  86     {
  87       return 0;
  88     }
  89   else
  90     {
  91       return shg1 == shg2;
  92     }
  93 }
  94
  95
  96 static vlib_node_registration_t l2output_node;
  97
  98 static uword
  99 l2output_node_fn (vlib_main_t * vm,
 100                   vlib_node_runtime_t * node, vlib_frame_t * frame)
 101 {
 102   u32 n_left_from, *from, *to_next;
 103   l2output_next_t next_index;
 104   l2output_main_t *msm = &l2output_main;
 105   vlib_node_t *n = vlib_get_node (vm, l2output_node.index);
 106   u32 node_counter_base_index = n->error_heap_index;
 107   vlib_error_main_t *em = &vm->error_main;
 108   u32 cached_sw_if_index;
 109   u32 cached_next_index;
 110
 111   /* Invalidate cache */
 112   cached_sw_if_index = ~0;
 113   cached_next_index = ~0;       /* warning be gone */
 114
 115   from = vlib_frame_vector_args (frame);
 116   n_left_from = frame->n_vectors;       /* number of packets to process */
 117   next_index = node->cached_next_index;
 118
 119   while (n_left_from > 0)
 120     {
 121       u32 n_left_to_next;
 122
 123       /* get space to enqueue frame to graph node "next_index" */
 124       vlib_get_next_frame (vm, node, next_index, to_next, n_left_to_next);
 125
 126       while (n_left_from >= 6 && n_left_to_next >= 2)
 127         {
 128           u32 bi0, bi1;
 129           vlib_buffer_t *b0, *b1;
 130           u32 next0, next1;
 131           u32 sw_if_index0, sw_if_index1;
 132           ethernet_header_t *h0, *h1;
 133           l2_output_config_t *config0, *config1;
 134           u32 feature_bitmap0, feature_bitmap1;
 135
 136           /* Prefetch next iteration. */
 137           {
 138             vlib_buffer_t *p2, *p3, *p4, *p5;
 139             u32 sw_if_index2, sw_if_index3;
 140
 141             p2 = vlib_get_buffer (vm, from[2]);
 142             p3 = vlib_get_buffer (vm, from[3]);
 143             p4 = vlib_get_buffer (vm, from[4]);
 144             p5 = vlib_get_buffer (vm, from[5]);
 145
 146             /* Prefetch the buffer header for the N+2 loop iteration */
 147             vlib_prefetch_buffer_header (p4, LOAD);
 148             vlib_prefetch_buffer_header (p5, LOAD);
 149             /*
 150              * Note: no need to prefetch packet data.
 151              * This node doesn't reference it.
 152              *
 153              * Prefetch the input config for the N+1 loop iteration
 154              * This depends on the buffer header above
 155              */
 156             sw_if_index2 = vnet_buffer (p2)->sw_if_index[VLIB_TX];
 157             sw_if_index3 = vnet_buffer (p3)->sw_if_index[VLIB_TX];
 158             CLIB_PREFETCH (&msm->configs[sw_if_index2], CLIB_CACHE_LINE_BYTES,
 159                            LOAD);
 160             CLIB_PREFETCH (&msm->configs[sw_if_index3], CLIB_CACHE_LINE_BYTES,
 161                            LOAD);
 162           }
 163
 164           /* speculatively enqueue b0 and b1 to the current next frame */
 165           /* bi is "buffer index", b is pointer to the buffer */
 166           to_next[0] = bi0 = from[0];
 167           to_next[1] = bi1 = from[1];
 168           from += 2;
 169           to_next += 2;
 170           n_left_from -= 2;
 171           n_left_to_next -= 2;
 172
 173           b0 = vlib_get_buffer (vm, bi0);
 174           b1 = vlib_get_buffer (vm, bi1);
 175
 176           /* TX interface handles */
 177           sw_if_index0 = vnet_buffer (b0)->sw_if_index[VLIB_TX];
 178           sw_if_index1 = vnet_buffer (b1)->sw_if_index[VLIB_TX];
 179
 180           if (PREDICT_FALSE ((node->flags & VLIB_NODE_FLAG_TRACE)))
 181             {
 182               h0 = vlib_buffer_get_current (b0);
 183               h1 = vlib_buffer_get_current (b1);
 184               if (b0->flags & VLIB_BUFFER_IS_TRACED)
 185                 {
 186                   l2output_trace_t *t =
 187                     vlib_add_trace (vm, node, b0, sizeof (*t));
 188                   t->sw_if_index = sw_if_index0;
 189                   clib_memcpy (t->src, h0->src_address, 6);
 190                   clib_memcpy (t->dst, h0->dst_address, 6);
 191                 }
 192               if (b1->flags & VLIB_BUFFER_IS_TRACED)
 193                 {
 194                   l2output_trace_t *t =
 195                     vlib_add_trace (vm, node, b1, sizeof (*t));
 196                   t->sw_if_index = sw_if_index1;
 197                   clib_memcpy (t->src, h1->src_address, 6);
 198                   clib_memcpy (t->dst, h1->dst_address, 6);
 199                 }
 200             }
 201
 202           em->counters[node_counter_base_index + L2OUTPUT_ERROR_L2OUTPUT] +=
 203             2;
 204
 205           /* Get config for the output interface */
 206           config0 = vec_elt_at_index (msm->configs, sw_if_index0);
 207           config1 = vec_elt_at_index (msm->configs, sw_if_index1);
 208
 209           /*
 210            * Get features from the config
 211            * TODO: mask out any non-applicable features
 212            */
 213           feature_bitmap0 = config0->feature_bitmap;
 214           feature_bitmap1 = config1->feature_bitmap;
 215
 216           /* Determine next node */
 217           l2_output_dispatch (msm->vlib_main,
 218                               msm->vnet_main,
 219                               node,
 220                               l2output_node.index,
 221                               &cached_sw_if_index,
 222                               &cached_next_index,
 223                               &msm->next_nodes,
 224                               b0, sw_if_index0, feature_bitmap0, &next0);
 225
 226           l2_output_dispatch (msm->vlib_main,
 227                               msm->vnet_main,
 228                               node,
 229                               l2output_node.index,
 230                               &cached_sw_if_index,
 231                               &cached_next_index,
 232                               &msm->next_nodes,
 233                               b1, sw_if_index1, feature_bitmap1, &next1);
 234
 235           if (PREDICT_FALSE (config0->out_vtr_flag))
 236             {
 237               /* Perform pre-vtr EFP filter check if configured */
 238               if (config0->output_vtr.push_and_pop_bytes)
 239                 {
 240                   /*
 241                    * Perform output vlan tag rewrite and the pre-vtr EFP filter check.
 242                    * The EFP Filter only needs to be run if there is an output VTR
 243                    * configured. The flag for the post-vtr EFP Filter node is used
 244                    * to trigger the pre-vtr check as well.
 245                    */
 246                   u32 failed1 = (feature_bitmap0 & L2OUTPUT_FEAT_EFP_FILTER)
 247                     && (l2_efp_filter_process (b0, &(config0->input_vtr)));
 248                   u32 failed2 = l2_vtr_process (b0, &(config0->output_vtr));
 249
 250                   if (PREDICT_FALSE (failed1 | failed2))
 251                     {
 252                       next0 = L2OUTPUT_NEXT_DROP;
 253                       if (failed2)
 254                         {
 255                           b0->error = node->errors[L2OUTPUT_ERROR_VTR_DROP];
 256                         }
 257                       if (failed1)
 258                         {
 259                           b0->error = node->errors[L2OUTPUT_ERROR_EFP_DROP];
 260                         }
 261                     }
 262                 }
 263               // perform the PBB rewrite
 264               else if (config0->output_pbb_vtr.push_and_pop_bytes)
 265                 {
 266                   u32 failed =
 267                     l2_pbb_process (b0, &(config0->output_pbb_vtr));
 268                   if (PREDICT_FALSE (failed))
 269                     {
 270                       next0 = L2OUTPUT_NEXT_DROP;
 271                       b0->error = node->errors[L2OUTPUT_ERROR_VTR_DROP];
 272                     }
 273                 }
 274             }
 275           if (PREDICT_FALSE (config1->out_vtr_flag))
 276             {
 277               /* Perform pre-vtr EFP filter check if configured */
 278               if (config1->output_vtr.push_and_pop_bytes)
 279                 {
 280                   u32 failed1 = (feature_bitmap1 & L2OUTPUT_FEAT_EFP_FILTER)
 281                     && (l2_efp_filter_process (b1, &(config1->input_vtr)));
 282                   u32 failed2 = l2_vtr_process (b1, &(config1->output_vtr));
 283
 284                   if (PREDICT_FALSE (failed1 | failed2))
 285                     {
 286                       next1 = L2OUTPUT_NEXT_DROP;
 287                       if (failed2)
 288                         {
 289                           b1->error = node->errors[L2OUTPUT_ERROR_VTR_DROP];
 290                         }
 291                       if (failed1)
 292                         {
 293                           b1->error = node->errors[L2OUTPUT_ERROR_EFP_DROP];
 294                         }
 295                     }
 296                 }
 297               // perform the PBB rewrite
 298               else if (config1->output_pbb_vtr.push_and_pop_bytes)
 299                 {
 300                   u32 failed =
 301                     l2_pbb_process (b0, &(config1->output_pbb_vtr));
 302                   if (PREDICT_FALSE (failed))
 303                     {
 304                       next1 = L2OUTPUT_NEXT_DROP;
 305                       b1->error = node->errors[L2OUTPUT_ERROR_VTR_DROP];
 306                     }
 307                 }
 308             }
 309
 310           /*
 311            * Perform the split horizon check
 312            * The check can only fail for non-zero shg's
 313            */
 314           if (PREDICT_FALSE (config0->shg + config1->shg))
 315             {
 316               /* one of the checks might fail, check both */
 317               if (split_horizon_violation
 318                   (config0->shg, vnet_buffer (b0)->l2.shg))
 319                 {
 320                   next0 = L2OUTPUT_NEXT_DROP;
 321                   b0->error = node->errors[L2OUTPUT_ERROR_SHG_DROP];
 322                 }
 323               if (split_horizon_violation
 324                   (config1->shg, vnet_buffer (b1)->l2.shg))
 325                 {
 326                   next1 = L2OUTPUT_NEXT_DROP;
 327                   b1->error = node->errors[L2OUTPUT_ERROR_SHG_DROP];
 328                 }
 329             }
 330
 331           /* verify speculative enqueues, maybe switch current next frame */
 332           /* if next0==next1==next_index then nothing special needs to be done */
 333           vlib_validate_buffer_enqueue_x2 (vm, node, next_index,
 334                                            to_next, n_left_to_next,
 335                                            bi0, bi1, next0, next1);
 336         }
 337
 338       while (n_left_from > 0 && n_left_to_next > 0)
 339         {
 340           u32 bi0;
 341           vlib_buffer_t *b0;
 342           u32 next0;
 343           u32 sw_if_index0;
 344           ethernet_header_t *h0;
 345           l2_output_config_t *config0;
 346           u32 feature_bitmap0;
 347
 348           /* speculatively enqueue b0 to the current next frame */
 349           bi0 = from[0];
 350           to_next[0] = bi0;
 351           from += 1;
 352           to_next += 1;
 353           n_left_from -= 1;
 354           n_left_to_next -= 1;
 355
 356           b0 = vlib_get_buffer (vm, bi0);
 357
 358           sw_if_index0 = vnet_buffer (b0)->sw_if_index[VLIB_TX];
 359
 360           if (PREDICT_FALSE ((node->flags & VLIB_NODE_FLAG_TRACE)
 361                              && (b0->flags & VLIB_BUFFER_IS_TRACED)))
 362             {
 363               l2output_trace_t *t =
 364                 vlib_add_trace (vm, node, b0, sizeof (*t));
 365               t->sw_if_index = sw_if_index0;
 366               h0 = vlib_buffer_get_current (b0);
 367               clib_memcpy (t->src, h0->src_address, 6);
 368               clib_memcpy (t->dst, h0->dst_address, 6);
 369             }
 370
 371           em->counters[node_counter_base_index +
 372                        L2OUTPUT_ERROR_L2OUTPUT] += 1;
 373
 374           /* Get config for the output interface */
 375           config0 = vec_elt_at_index (msm->configs, sw_if_index0);
 376
 377           /*
 378            * Get features from the config
 379            * TODO: mask out any non-applicable features
 380            */
 381           feature_bitmap0 = config0->feature_bitmap;
 382
 383           /* Determine next node */
 384           l2_output_dispatch (msm->vlib_main,
 385                               msm->vnet_main,
 386                               node,
 387                               l2output_node.index,
 388                               &cached_sw_if_index,
 389                               &cached_next_index,
 390                               &msm->next_nodes,
 391                               b0, sw_if_index0, feature_bitmap0, &next0);
 392
 393           if (PREDICT_FALSE (config0->out_vtr_flag))
 394             {
 395               /*
 396                * Perform output vlan tag rewrite and the pre-vtr EFP filter check.
 397                * The EFP Filter only needs to be run if there is an output VTR
 398                * configured. The flag for the post-vtr EFP Filter node is used
 399                * to trigger the pre-vtr check as well.
 400                */
 401
 402               if (config0->output_vtr.push_and_pop_bytes)
 403                 {
 404                   /* Perform pre-vtr EFP filter check if configured */
 405                   u32 failed1 = (feature_bitmap0 & L2OUTPUT_FEAT_EFP_FILTER)
 406                     && (l2_efp_filter_process (b0, &(config0->input_vtr)));
 407                   u32 failed2 = l2_vtr_process (b0, &(config0->output_vtr));
 408
 409                   if (PREDICT_FALSE (failed1 | failed2))
 410                     {
 411                       next0 = L2OUTPUT_NEXT_DROP;
 412                       if (failed2)
 413                         {
 414                           b0->error = node->errors[L2OUTPUT_ERROR_VTR_DROP];
 415                         }
 416                       if (failed1)
 417                         {
 418                           b0->error = node->errors[L2OUTPUT_ERROR_EFP_DROP];
 419                         }
 420                     }
 421                 }
 422               // perform the PBB rewrite
 423               else if (config0->output_pbb_vtr.push_and_pop_bytes)
 424                 {
 425                   u32 failed =
 426                     l2_pbb_process (b0, &(config0->output_pbb_vtr));
 427                   if (PREDICT_FALSE (failed))
 428                     {
 429                       next0 = L2OUTPUT_NEXT_DROP;
 430                       b0->error = node->errors[L2OUTPUT_ERROR_VTR_DROP];
 431                     }
 432                 }
 433             }
 434           /* Perform the split horizon check */
 435           if (PREDICT_FALSE
 436               (split_horizon_violation
 437                (config0->shg, vnet_buffer (b0)->l2.shg)))
 438             {
 439               next0 = L2OUTPUT_NEXT_DROP;
 440               b0->error = node->errors[L2OUTPUT_ERROR_SHG_DROP];
 441             }
 442
 443           /* verify speculative enqueue, maybe switch current next frame */
 444           vlib_validate_buffer_enqueue_x1 (vm, node, next_index,
 445                                            to_next, n_left_to_next,
 446                                            bi0, next0);
 447         }
 448
 449       vlib_put_next_frame (vm, node, next_index, n_left_to_next);
 450     }
 451
 452   return frame->n_vectors;
 453 }
 454
 455
 456 /* *INDENT-OFF* */
 457 VLIB_REGISTER_NODE (l2output_node,static) = {
 458   .function = l2output_node_fn,
 459   .name = "l2-output",
 460   .vector_size = sizeof (u32),
 461   .format_trace = format_l2output_trace,
 462   .type = VLIB_NODE_TYPE_INTERNAL,
 463
 464   .n_errors = ARRAY_LEN(l2output_error_strings),
 465   .error_strings = l2output_error_strings,
 466
 467   .n_next_nodes = L2OUTPUT_N_NEXT,
 468
 469   /* edit / add dispositions here */
 470   .next_nodes = {
 471         [L2OUTPUT_NEXT_DROP] = "error-drop",
 472         [L2OUTPUT_NEXT_DEL_TUNNEL] = "l2-output-del-tunnel",
 473   },
 474 };
 475 /* *INDENT-ON* */
 476
 477
 478 #define foreach_l2output_del_tunnel_error       \
 479 _(DROP,     "L2 output to deleted tunnel")
 480
 481 static char *l2output_del_tunnel_error_strings[] = {
 482 #define _(sym,string) string,
 483   foreach_l2output_del_tunnel_error
 484 #undef _
 485 };
 486
 487 typedef enum
 488 {
 489 #define _(sym,str) L2OUTPUT_DEL_TUNNEL_ERROR_##sym,
 490   foreach_l2output_del_tunnel_error
 491 #undef _
 492     L2OUTPUT_DEL_TUNNEL_N_ERROR,
 493 } l2output_del_tunnel_error_t;
 494
 495
 496 /**
 497  * Output node for tunnels which was in L2 BD's but were deleted.
 498  * On deletion of any tunnel which was on a L2 BD, its entry in
 499  * l2_output_main table next_nodes.output_node_index_vec[sw_if_index]
 500  * MUST be set to the value of L2OUTPUT_NEXT_DEL_TUNNEL. Thus, if there
 501  * are stale entries in the L2FIB for this tunnel sw_if_index, l2-output
 502  * will send packets for this sw_if_index to the l2-output-tunnel-del
 503  * node which just setup the proper drop reason before sending packets
 504  * to the error-drop node to drop the packet. Then, stale L2FIB entries
 505  * for delted tunnels won't cause possible packet or memory corrpution.
 506  */
 507 static vlib_node_registration_t l2output_del_tunnel_node;
 508
 509 static uword
 510 l2output_del_tunnel_node_fn (vlib_main_t * vm,
 511                              vlib_node_runtime_t * node, vlib_frame_t * frame)
 512 {
 513   u32 n_left_from, *from, *to_next;
 514   l2output_next_t next_index = 0;
 515
 516   from = vlib_frame_vector_args (frame);
 517   n_left_from = frame->n_vectors;       /* number of packets to process */
 518
 519   while (n_left_from > 0)
 520     {
 521       u32 n_left_to_next;
 522
 523       /* get space to enqueue frame to graph node "next_index" */
 524       vlib_get_next_frame (vm, node, next_index, to_next, n_left_to_next);
 525
 526       while (n_left_from >= 4 && n_left_to_next >= 2)
 527         {
 528           u32 bi0, bi1;
 529           vlib_buffer_t *b0, *b1;
 530
 531           to_next[0] = bi0 = from[0];
 532           to_next[1] = bi1 = from[1];
 533           from += 2;
 534           to_next += 2;
 535           n_left_from -= 2;
 536           n_left_to_next -= 2;
 537           b0 = vlib_get_buffer (vm, bi0);
 538           b1 = vlib_get_buffer (vm, bi1);
 539           b0->error = node->errors[L2OUTPUT_DEL_TUNNEL_ERROR_DROP];
 540           b1->error = node->errors[L2OUTPUT_DEL_TUNNEL_ERROR_DROP];
 541         }
 542
 543       while (n_left_from > 0 && n_left_to_next > 0)
 544         {
 545           u32 bi0;
 546           vlib_buffer_t *b0;
 547
 548           bi0 = from[0];
 549           to_next[0] = bi0;
 550           from += 1;
 551           to_next += 1;
 552           n_left_from -= 1;
 553           n_left_to_next -= 1;
 554           b0 = vlib_get_buffer (vm, bi0);
 555           b0->error = node->errors[L2OUTPUT_DEL_TUNNEL_ERROR_DROP];
 556         }
 557
 558       vlib_put_next_frame (vm, node, next_index, n_left_to_next);
 559     }
 560
 561   return frame->n_vectors;
 562 }
 563
 564 /* *INDENT-OFF* */
 565 VLIB_REGISTER_NODE (l2output_del_tunnel_node,static) = {
 566   .function = l2output_del_tunnel_node_fn,
 567   .name = "l2-output-del-tunnel",
 568   .vector_size = sizeof (u32),
 569   .type = VLIB_NODE_TYPE_INTERNAL,
 570
 571   .n_errors =  ARRAY_LEN(l2output_del_tunnel_error_strings),
 572   .error_strings = l2output_del_tunnel_error_strings,
 573
 574   .n_next_nodes = 1,
 575
 576   /* edit / add dispositions here */
 577   .next_nodes = {
 578         [0] = "error-drop",
 579   },
 580 };
 581 /* *INDENT-ON* */
 582
 583
 584 VLIB_NODE_FUNCTION_MULTIARCH (l2output_node, l2output_node_fn)
 585      clib_error_t *l2output_init (vlib_main_t * vm)
 586 {
 587   l2output_main_t *mp = &l2output_main;
 588
 589   mp->vlib_main = vm;
 590   mp->vnet_main = vnet_get_main ();
 591
 592   /* Create the config vector */
 593   vec_validate (mp->configs, 100);
 594   /* Until we hook up the CLI config, just create 100 sw interface entries  and zero them */
 595
 596   /* Initialize the feature next-node indexes */
 597   feat_bitmap_init_next_nodes (vm,
 598                                l2output_node.index,
 599                                L2OUTPUT_N_FEAT,
 600                                l2output_get_feat_names (),
 601                                mp->next_nodes.feat_next_node_index);
 602
 603   /* Initialize the output node mapping table */
 604   l2output_init_output_node_vec (&mp->next_nodes.output_node_index_vec);
 605
 606   return 0;
 607 }
 608
 609 VLIB_INIT_FUNCTION (l2output_init);
 610
 611 typedef struct
 612 {
 613   u32 node_index;
 614   u32 sw_if_index;
 615 } output_node_mapping_rpc_args_t;
 616
 617 #if DPDK > 0
 618 static void output_node_rpc_callback (output_node_mapping_rpc_args_t * a);
 619
 620 static void
 621 output_node_mapping_send_rpc (u32 node_index, u32 sw_if_index)
 622 {
 623   output_node_mapping_rpc_args_t args;
 624   void vl_api_rpc_call_main_thread (void *fp, u8 * data, u32 data_length);
 625
 626   args.node_index = node_index;
 627   args.sw_if_index = sw_if_index;
 628
 629   vl_api_rpc_call_main_thread (output_node_rpc_callback,
 630                                (u8 *) & args, sizeof (args));
 631 }
 632 #endif
 633
 634
 635 /** Create a mapping in the next node mapping table for the given sw_if_index. */
 636 u32
 637 l2output_create_output_node_mapping (vlib_main_t * vlib_main, vnet_main_t * vnet_main, u32 node_index,  /* index of current node */
 638                                      u32 * output_node_index_vec,
 639                                      u32 sw_if_index)
 640 {
 641
 642   u32 next;                     /* index of next graph node */
 643   vnet_hw_interface_t *hw0;
 644   u32 *node;
 645
 646   hw0 = vnet_get_sup_hw_interface (vnet_main, sw_if_index);
 647
 648 #if DPDK > 0
 649   uword cpu_number;
 650
 651   cpu_number = os_get_cpu_number ();
 652
 653   if (cpu_number)
 654     {
 655       u32 oldflags;
 656
 657       oldflags = __sync_fetch_and_or (&hw0->flags,
 658                                       VNET_HW_INTERFACE_FLAG_L2OUTPUT_MAPPED);
 659
 660       if ((oldflags & VNET_HW_INTERFACE_FLAG_L2OUTPUT_MAPPED))
 661         return L2OUTPUT_NEXT_DROP;
 662
 663       output_node_mapping_send_rpc (node_index, sw_if_index);
 664       return L2OUTPUT_NEXT_DROP;
 665     }
 666 #endif
 667
 668   /* dynamically create graph node arc  */
 669   next = vlib_node_add_next (vlib_main, node_index, hw0->output_node_index);
 670
 671   /* Initialize vector with the mapping */
 672
 673   node = vec_elt_at_index (output_node_index_vec, sw_if_index);
 674   *node = next;
 675
 676   /* reset mapping bit, includes memory barrier */
 677   __sync_fetch_and_and (&hw0->flags, ~VNET_HW_INTERFACE_FLAG_L2OUTPUT_MAPPED);
 678
 679   return next;
 680 }
 681
 682 #if DPDK > 0
 683 void
 684 output_node_rpc_callback (output_node_mapping_rpc_args_t * a)
 685 {
 686   vlib_main_t *vm = vlib_get_main ();
 687   vnet_main_t *vnm = vnet_get_main ();
 688   l2output_main_t *mp = &l2output_main;
 689
 690   (void) l2output_create_output_node_mapping
 691     (vm, vnm, a->node_index, mp->next_nodes.output_node_index_vec,
 692      a->sw_if_index);
 693 }
 694 #endif
 695
 696 /* Get a pointer to the config for the given interface */
 697 l2_output_config_t *
 698 l2output_intf_config (u32 sw_if_index)
 699 {
 700   l2output_main_t *mp = &l2output_main;
 701
 702   vec_validate (mp->configs, sw_if_index);
 703   return vec_elt_at_index (mp->configs, sw_if_index);
 704 }
 705
 706 /** Enable (or disable) the feature in the bitmap for the given interface. */
 707 void
 708 l2output_intf_bitmap_enable (u32 sw_if_index, u32 feature_bitmap, u32 enable)
 709 {
 710   l2output_main_t *mp = &l2output_main;
 711   l2_output_config_t *config;
 712
 713   vec_validate (mp->configs, sw_if_index);
 714   config = vec_elt_at_index (mp->configs, sw_if_index);
 715
 716   if (enable)
 717     {
 718       config->feature_bitmap |= feature_bitmap;
 719     }
 720   else
 721     {
 722       config->feature_bitmap &= ~feature_bitmap;
 723     }
 724 }
 725
 726 /*
 727  * fd.io coding-style-patch-verification: ON
 728  *
 729  * Local Variables:
 730  * eval: (c-set-style "gnu")
 731  * End:
 732  */