Add support for multiple microarchitectures in single binary
[vpp.git] / vnet / vnet / l2 / l2_input.c
1 /*
2  * l2_input.c : layer 2 input packet processing
3  *
4  * Copyright (c) 2013 Cisco and/or its affiliates.
5  * Licensed under the Apache License, Version 2.0 (the "License");
6  * you may not use this file except in compliance with the License.
7  * You may obtain a copy of the License at:
8  *
9  *     http://www.apache.org/licenses/LICENSE-2.0
10  *
11  * Unless required by applicable law or agreed to in writing, software
12  * distributed under the License is distributed on an "AS IS" BASIS,
13  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
14  * See the License for the specific language governing permissions and
15  * limitations under the License.
16  */
17
18 #include <vlib/vlib.h>
19 #include <vnet/vnet.h>
20 #include <vnet/pg/pg.h>
21 #include <vnet/ethernet/ethernet.h>
22 #include <vnet/ethernet/packet.h>
23 #include <vnet/ip/ip_packet.h>
24 #include <vnet/ip/ip4_packet.h>
25 #include <vnet/ip/ip6_packet.h>
26 #include <vlib/cli.h>
27 #include <vnet/l2/l2_input.h>
28 #include <vnet/l2/l2_output.h>
29 #include <vnet/l2/feat_bitmap.h>
30 #include <vnet/l2/l2_bvi.h>
31 #include <vnet/l2/l2_fib.h>
32
33 #include <vppinfra/error.h>
34 #include <vppinfra/hash.h>
35 #include <vppinfra/cache.h>
36
37
38 // Feature graph node names
39 static char * l2input_feat_names[] = {
40 #define _(sym,name) name,
41   foreach_l2input_feat
42 #undef _
43 };
44
45 char **l2input_get_feat_names(void) {
46   return l2input_feat_names;
47 }
48
49
50 typedef struct {
51   /* per-pkt trace data */ 
52   u8 src[6];
53   u8 dst[6];
54   u32 next_index;
55   u32 sw_if_index;
56 } l2input_trace_t;
57
58 /* packet trace format function */
59 static u8 * format_l2input_trace (u8 * s, va_list * args)
60 {
61   CLIB_UNUSED (vlib_main_t * vm) = va_arg (*args, vlib_main_t *);
62   CLIB_UNUSED (vlib_node_t * node) = va_arg (*args, vlib_node_t *);
63   l2input_trace_t * t = va_arg (*args, l2input_trace_t *);
64   
65   s = format (s, "l2-input: sw_if_index %d dst %U src %U",
66               t->sw_if_index,
67               format_ethernet_address, t->dst,
68               format_ethernet_address, t->src);
69   return s;
70 }
71
72 l2input_main_t l2input_main;
73
74 #define foreach_l2input_error                   \
75 _(L2INPUT,     "L2 input packets")              \
76 _(DROP,        "L2 input drops")
77
78 typedef enum {
79 #define _(sym,str) L2INPUT_ERROR_##sym,
80   foreach_l2input_error
81 #undef _
82   L2INPUT_N_ERROR,
83 } l2input_error_t;
84
85 static char * l2input_error_strings[] = {
86 #define _(sym,string) string,
87   foreach_l2input_error
88 #undef _
89 };
90
91 typedef enum {                  /*  */
92   L2INPUT_NEXT_LEARN,
93   L2INPUT_NEXT_FWD,
94   L2INPUT_NEXT_DROP,
95   L2INPUT_N_NEXT,
96 } l2input_next_t;
97
98
99 static_always_inline void
100 classify_and_dispatch (vlib_main_t * vm,
101                        vlib_node_runtime_t * node,
102                        u32 cpu_index, 
103                        l2input_main_t * msm,
104                        vlib_buffer_t * b0,
105                        u32 *next0)
106 {
107   // Load L2 input feature struct
108   // Load bridge domain struct
109   // Parse ethernet header to determine unicast/mcast/broadcast
110   // take L2 input stat
111   // classify packet as IP/UDP/TCP, control, other
112   // mask feature bitmap
113   // go to first node in bitmap
114   // Later: optimize VTM
115   //
116   // For L2XC, 
117   //   set tx sw-if-handle
118  
119   u8 mcast_dmac; 
120   __attribute__((unused)) u8 l2bcast;
121   __attribute__((unused)) u8 l2mcast;
122   __attribute__((unused)) u8 l2_stat_kind;
123   u16 ethertype;
124   u8 protocol;
125   l2_input_config_t *config;
126   l2_bridge_domain_t *bd_config;
127   u16 bd_index0;
128   u32 feature_bitmap;
129   u32 feat_mask;
130   ethernet_header_t * h0;
131   u8 * l3h0;
132   u32 sw_if_index0;
133
134 #define get_u32(addr) ( *((u32 *)(addr)) )
135 #define get_u16(addr) ( *((u16 *)(addr)) )
136 #define STATS_IF_LAYER2_UCAST_INPUT_CNT 0
137 #define STATS_IF_LAYER2_MCAST_INPUT_CNT 1
138 #define STATS_IF_LAYER2_BCAST_INPUT_CNT 2
139
140   sw_if_index0 = vnet_buffer(b0)->sw_if_index[VLIB_RX];
141
142   h0 = vlib_buffer_get_current (b0);
143   l3h0 = (u8 *)h0 + vnet_buffer(b0)->l2.l2_len;
144
145   // Determine L3 packet type. Only need to check the common types.
146   // Used to filter out features that don't apply to common packets.
147   ethertype = clib_net_to_host_u16(get_u16(l3h0 - 2));
148   if (ethertype == ETHERNET_TYPE_IP4) {
149     protocol = ((ip4_header_t *)l3h0)->protocol;
150     if ((protocol == IP_PROTOCOL_UDP) ||
151         (protocol == IP_PROTOCOL_TCP)) {
152       feat_mask = IP_UDP_TCP_FEAT_MASK;
153     } else {
154       feat_mask = IP4_FEAT_MASK;
155     }
156   } else if (ethertype == ETHERNET_TYPE_IP6) {
157     protocol = ((ip6_header_t *)l3h0)->protocol;
158     // Don't bother checking for extension headers for now
159     if ((protocol == IP_PROTOCOL_UDP) ||
160         (protocol == IP_PROTOCOL_TCP)) {
161       feat_mask = IP_UDP_TCP_FEAT_MASK;
162     } else {
163       feat_mask = IP6_FEAT_MASK;
164     }
165   } else if (ethertype == ETHERNET_TYPE_MPLS_UNICAST) {
166     feat_mask = IP6_FEAT_MASK;
167   } else {
168     // allow all features
169     feat_mask = ~0;
170   } 
171
172   // determine layer2 kind for stat and mask
173   mcast_dmac = ethernet_address_cast(h0->dst_address);
174   l2bcast = 0;
175   l2mcast = 0;
176   l2_stat_kind = STATS_IF_LAYER2_UCAST_INPUT_CNT;
177   if (PREDICT_FALSE (mcast_dmac)) {
178     u32 *dsthi = (u32 *) &h0->dst_address[0];
179     u32 *dstlo = (u32 *) &h0->dst_address[2];
180
181     // Disable bridge forwarding (flooding will execute instead if not xconnect)
182     feat_mask &= ~(L2INPUT_FEAT_FWD | L2INPUT_FEAT_UU_FLOOD);
183     if (ethertype != ETHERNET_TYPE_ARP) // Disable ARP-term for non-ARP packet
184         feat_mask &= ~(L2INPUT_FEAT_ARP_TERM);
185
186     // dest mac is multicast or broadcast
187     if ((*dstlo == 0xFFFFFFFF) && (*dsthi == 0xFFFFFFFF)) { 
188       // dest mac == FF:FF:FF:FF:FF:FF
189       l2_stat_kind = STATS_IF_LAYER2_BCAST_INPUT_CNT;
190       l2bcast=1;
191     } else {
192       l2_stat_kind = STATS_IF_LAYER2_MCAST_INPUT_CNT;
193       l2mcast=1;
194     }
195   }
196   // TODO: take l2 stat
197
198   // Get config for the input interface
199   config = vec_elt_at_index(msm->configs, sw_if_index0);
200
201   // Save split horizon group
202   vnet_buffer(b0)->l2.shg = config->shg;
203
204   if (config->xconnect) {
205     // Set the output interface
206     vnet_buffer(b0)->sw_if_index[VLIB_TX] = config->output_sw_if_index;
207
208   } else {
209
210     // Check for from-BVI processing, TX is non-~0 if from BVI loopback
211     // Set SHG for BVI packets to 0 so it is not dropped for VXLAN tunnels
212     if (PREDICT_FALSE (vnet_buffer(b0)->sw_if_index[VLIB_TX] != ~0)) {
213       vnet_buffer(b0)->sw_if_index[VLIB_TX] = ~0;
214       vnet_buffer(b0)->l2.shg = 0;
215     }
216
217     // Do bridge-domain processing
218     bd_index0 = config->bd_index;
219     // save BD ID for next feature graph nodes
220     vnet_buffer(b0)->l2.bd_index = bd_index0;
221
222     // Get config for the bridge domain interface
223     bd_config = vec_elt_at_index(msm->bd_configs, bd_index0);
224
225     // Process bridge domain feature enables.
226     // To perform learning/flooding/forwarding, the corresponding bit
227     // must be enabled in both the input interface config and in the
228     // bridge domain config. In the bd_bitmap, bits for features other
229     // than learning/flooding/forwarding should always be set.
230     feat_mask = feat_mask & bd_config->feature_bitmap;
231   }
232
233   // mask out features from bitmap using packet type and bd config
234   feature_bitmap = config->feature_bitmap & feat_mask;
235
236   // save for next feature graph nodes
237   vnet_buffer(b0)->l2.feature_bitmap = feature_bitmap;
238
239   // Determine the next node
240   *next0 = feat_bitmap_get_next_node_index(msm->feat_next_node_index,
241                                            feature_bitmap);
242 }
243
244
245 static uword
246 l2input_node_fn (vlib_main_t * vm,
247                  vlib_node_runtime_t * node,
248                  vlib_frame_t * frame)
249 {
250   u32 n_left_from, * from, * to_next;
251   l2input_next_t next_index;
252   l2input_main_t * msm = &l2input_main;
253   vlib_node_t *n = vlib_get_node (vm, l2input_node.index);
254   u32 node_counter_base_index = n->error_heap_index;
255   vlib_error_main_t * em = &vm->error_main;
256   u32 cpu_index = os_get_cpu_number();
257
258   from = vlib_frame_vector_args (frame);
259   n_left_from = frame->n_vectors; /* number of packets to process */
260   next_index = node->cached_next_index;
261
262   while (n_left_from > 0)
263     {
264       u32 n_left_to_next;
265
266       /* get space to enqueue frame to graph node "next_index" */
267       vlib_get_next_frame (vm, node, next_index,
268                            to_next, n_left_to_next);
269
270       while (n_left_from >= 6 && n_left_to_next >= 2)
271         {
272           u32 bi0, bi1;
273           vlib_buffer_t * b0, * b1;
274           u32 next0, next1;
275           u32 sw_if_index0, sw_if_index1;
276           
277           /* Prefetch next iteration. */
278           {
279             vlib_buffer_t * p2, * p3, * p4 , * p5;
280             u32 sw_if_index2, sw_if_index3;
281             
282             p2 = vlib_get_buffer (vm, from[2]);
283             p3 = vlib_get_buffer (vm, from[3]);
284             p4 = vlib_get_buffer (vm, from[4]);
285             p5 = vlib_get_buffer (vm, from[5]);
286             
287             // Prefetch the buffer header and packet for the N+2 loop iteration
288             vlib_prefetch_buffer_header (p4, LOAD);
289             vlib_prefetch_buffer_header (p5, LOAD);
290
291             CLIB_PREFETCH (p4->data, CLIB_CACHE_LINE_BYTES, STORE);
292             CLIB_PREFETCH (p5->data, CLIB_CACHE_LINE_BYTES, STORE);
293
294             // Prefetch the input config for the N+1 loop iteration
295             // This depends on the buffer header above
296             sw_if_index2 = vnet_buffer(p2)->sw_if_index[VLIB_RX];
297             sw_if_index3 = vnet_buffer(p3)->sw_if_index[VLIB_RX];
298             CLIB_PREFETCH (&msm->configs[sw_if_index2], CLIB_CACHE_LINE_BYTES, LOAD);
299             CLIB_PREFETCH (&msm->configs[sw_if_index3], CLIB_CACHE_LINE_BYTES, LOAD);
300
301             // Don't bother prefetching the bridge-domain config (which 
302             // depends on the input config above). Only a small number of
303             // bridge domains are expected. Plus the structure is small
304             // and several fit in a cache line.
305           }
306
307           /* speculatively enqueue b0 and b1 to the current next frame */
308           /* bi is "buffer index", b is pointer to the buffer */
309           to_next[0] = bi0 = from[0];
310           to_next[1] = bi1 = from[1];
311           from += 2;
312           to_next += 2;
313           n_left_from -= 2;
314           n_left_to_next -= 2;
315
316           b0 = vlib_get_buffer (vm, bi0);
317           b1 = vlib_get_buffer (vm, bi1);
318
319           if (PREDICT_FALSE((node->flags & VLIB_NODE_FLAG_TRACE))) {
320             /* RX interface handles */
321             sw_if_index0 = vnet_buffer(b0)->sw_if_index[VLIB_RX];
322             sw_if_index1 = vnet_buffer(b1)->sw_if_index[VLIB_RX];
323
324             if (b0->flags & VLIB_BUFFER_IS_TRACED) {
325               ethernet_header_t * h0 = vlib_buffer_get_current (b0);
326               l2input_trace_t *t = 
327                       vlib_add_trace (vm, node, b0, sizeof (*t));
328               t->sw_if_index = sw_if_index0;
329               clib_memcpy(t->src, h0->src_address, 6);
330               clib_memcpy(t->dst, h0->dst_address, 6);
331             }
332             if (b1->flags & VLIB_BUFFER_IS_TRACED) {
333               ethernet_header_t * h1 = vlib_buffer_get_current (b1);
334               l2input_trace_t *t = 
335                       vlib_add_trace (vm, node, b1, sizeof (*t));
336               t->sw_if_index = sw_if_index1;
337               clib_memcpy(t->src, h1->src_address, 6);
338               clib_memcpy(t->dst, h1->dst_address, 6);
339             }
340           }
341
342           em->counters[node_counter_base_index + L2INPUT_ERROR_L2INPUT] += 2;
343
344           classify_and_dispatch (vm,
345                                  node,
346                                  cpu_index, 
347                                  msm,
348                                  b0,
349                                  &next0);
350
351           classify_and_dispatch (vm,
352                                  node,
353                                  cpu_index, 
354                                  msm,
355                                  b1,
356                                  &next1);
357
358           /* verify speculative enqueues, maybe switch current next frame */
359           /* if next0==next1==next_index then nothing special needs to be done */
360           vlib_validate_buffer_enqueue_x2 (vm, node, next_index,
361                                            to_next, n_left_to_next,
362                                            bi0, bi1, next0, next1);
363       }
364       
365       while (n_left_from > 0 && n_left_to_next > 0)
366         {
367           u32 bi0;
368           vlib_buffer_t * b0;
369           u32 next0;
370           u32 sw_if_index0;
371  
372           /* speculatively enqueue b0 to the current next frame */
373           bi0 = from[0];
374           to_next[0] = bi0;
375           from += 1;
376           to_next += 1;
377           n_left_from -= 1;
378           n_left_to_next -= 1;
379
380           b0 = vlib_get_buffer (vm, bi0);
381
382           if (PREDICT_FALSE((node->flags & VLIB_NODE_FLAG_TRACE) 
383                             && (b0->flags & VLIB_BUFFER_IS_TRACED))) {
384             ethernet_header_t * h0 = vlib_buffer_get_current (b0);
385             l2input_trace_t *t = 
386                vlib_add_trace (vm, node, b0, sizeof (*t));
387             sw_if_index0 = vnet_buffer(b0)->sw_if_index[VLIB_RX];
388             t->sw_if_index = sw_if_index0;
389             clib_memcpy(t->src, h0->src_address, 6);
390             clib_memcpy(t->dst, h0->dst_address, 6);
391           }
392
393           em->counters[node_counter_base_index + L2INPUT_ERROR_L2INPUT] += 1;
394
395           classify_and_dispatch (vm,
396                                  node,
397                                  cpu_index, 
398                                  msm,
399                                  b0,
400                                  &next0);
401
402           /* verify speculative enqueue, maybe switch current next frame */
403           vlib_validate_buffer_enqueue_x1 (vm, node, next_index,
404                                            to_next, n_left_to_next,
405                                            bi0, next0);
406         }
407
408       vlib_put_next_frame (vm, node, next_index, n_left_to_next);
409     }
410
411   return frame->n_vectors;
412 }
413
414
415 VLIB_REGISTER_NODE (l2input_node) = {
416   .function = l2input_node_fn,
417   .name = "l2-input",
418   .vector_size = sizeof (u32),
419   .format_trace = format_l2input_trace,
420   .format_buffer = format_ethernet_header_with_length,
421   .type = VLIB_NODE_TYPE_INTERNAL,
422   
423   .n_errors = ARRAY_LEN(l2input_error_strings),
424   .error_strings = l2input_error_strings,
425
426   .n_next_nodes = L2INPUT_N_NEXT,
427
428   /* edit / add dispositions here */
429   .next_nodes = {
430        [L2INPUT_NEXT_LEARN] = "l2-learn",
431        [L2INPUT_NEXT_FWD]   = "l2-fwd",
432        [L2INPUT_NEXT_DROP]  = "error-drop",
433   },
434 };
435
436 VLIB_NODE_FUNCTION_MULTIARCH (l2input_node, l2input_node_fn)
437
438 clib_error_t *l2input_init (vlib_main_t *vm)
439 {
440   l2input_main_t * mp = &l2input_main;
441  
442   mp->vlib_main = vm;
443   mp->vnet_main = vnet_get_main();
444
445   // Get packets RX'd from L2 interfaces
446   ethernet_register_l2_input (vm, l2input_node.index);
447
448   // Create the config vector
449   vec_validate(mp->configs, 100);  
450   // create 100 sw interface entries and zero them
451
452   // Initialize the feature next-node indexes
453   feat_bitmap_init_next_nodes(vm,
454                               l2input_node.index,
455                               L2INPUT_N_FEAT,
456                               l2input_get_feat_names(),
457                               mp->feat_next_node_index);
458
459   return 0;
460 }
461
462 VLIB_INIT_FUNCTION (l2input_init);
463
464
465 // Get a pointer to the config for the given interface
466 l2_input_config_t * l2input_intf_config (u32 sw_if_index)
467 {
468   l2input_main_t * mp = &l2input_main;
469  
470   vec_validate(mp->configs, sw_if_index);  
471   return vec_elt_at_index(mp->configs, sw_if_index);
472 }
473
474 // Enable (or disable) the feature in the bitmap for the given interface
475 u32 l2input_intf_bitmap_enable (u32 sw_if_index,
476                                  u32 feature_bitmap,
477                                  u32 enable)
478 {
479   l2input_main_t * mp = &l2input_main;
480   l2_input_config_t *config;
481  
482   vec_validate(mp->configs, sw_if_index);  
483   config = vec_elt_at_index(mp->configs, sw_if_index);
484
485   if (enable) {
486     config->feature_bitmap |= feature_bitmap;
487   } else {
488     config->feature_bitmap &= ~feature_bitmap;
489   }
490
491   return config->feature_bitmap;
492 }
493
494 u32 l2input_set_bridge_features(u32 bd_index,
495                                  u32 feat_mask, u32 feat_value)
496 {
497   l2_bridge_domain_t * bd_config;
498   vec_validate (l2input_main.bd_configs, bd_index);
499   bd_config = vec_elt_at_index(l2input_main.bd_configs, bd_index);
500   bd_validate (bd_config);
501   bd_config->feature_bitmap = (bd_config->feature_bitmap & ~feat_mask) | feat_value;
502   return bd_config->feature_bitmap;
503 }
504
505 // Set the subinterface to run in l2 or l3 mode.
506 // for L3 mode, just the sw_if_index is specified
507 // for bridged mode, the bd id and bvi flag are also specified
508 // for xconnect mode, the peer sw_if_index is also specified
509 // Return 0 if ok, or non-0 if there was an error
510
511 u32 set_int_l2_mode (vlib_main_t * vm,
512                      vnet_main_t * vnet_main,
513                      u32 mode,
514                      u32 sw_if_index,
515                      u32 bd_index, // for bridged interface
516                      u32 bvi,   // the bridged interface is the BVI
517                      u32 shg,   // the bridged interface's split horizon group
518                      u32 xc_sw_if_index) // peer interface for xconnect
519 {
520   l2input_main_t * mp = &l2input_main;
521   vnet_main_t * vnm = vnet_get_main();
522   vnet_hw_interface_t * hi;
523   l2_output_config_t * out_config;
524   l2_input_config_t * config;
525   l2_bridge_domain_t * bd_config;
526   l2_flood_member_t member;
527   u64 mac;
528   i32 l2_if_adjust = 0; 
529   u32 slot;
530
531   hi = vnet_get_sup_hw_interface (vnet_main, sw_if_index);
532
533   vec_validate(mp->configs, sw_if_index);  
534   config = vec_elt_at_index(mp->configs, sw_if_index);
535
536   if (config->bridge) {
537     // Interface is already in bridge mode. Undo the existing config.
538     bd_config = vec_elt_at_index(mp->bd_configs, config->bd_index);
539
540     // remove interface from flood vector
541     bd_remove_member (bd_config, sw_if_index);
542
543     // undo any BVI-related config
544     if (bd_config->bvi_sw_if_index == sw_if_index) {
545       bd_config->bvi_sw_if_index = ~0;
546       config->bvi = 0;
547
548       // delete the l2fib entry for the bvi interface
549       mac = *((u64 *)hi->hw_address);
550       l2fib_del_entry (mac, config->bd_index);
551
552       // Make loop output node send packet back to ethernet-input node
553       slot = vlib_node_add_named_next_with_slot (
554           vm, hi->tx_node_index, "ethernet-input",
555           VNET_SIMULATED_ETHERNET_TX_NEXT_ETHERNET_INPUT);
556       ASSERT (slot == VNET_SIMULATED_ETHERNET_TX_NEXT_ETHERNET_INPUT);
557     } 
558     l2_if_adjust--;
559   } else if (config->xconnect) {
560     l2_if_adjust--;
561   }
562
563   // Initialize the l2-input configuration for the interface
564   if (mode == MODE_L3) {
565     config->xconnect = 0;
566     config->bridge = 0;
567     config->shg = 0;
568     config->bd_index = 0;
569     config->feature_bitmap = L2INPUT_FEAT_DROP;
570   } else if (mode == MODE_L2_CLASSIFY) {
571       config->xconnect = 1;
572       config->bridge = 0;
573       config->output_sw_if_index = xc_sw_if_index;
574
575       // Make sure last-chance drop is configured
576       config->feature_bitmap |= L2INPUT_FEAT_DROP | L2INPUT_FEAT_CLASSIFY;
577
578       // Make sure bridging features are disabled
579       config->feature_bitmap &= 
580           ~(L2INPUT_FEAT_LEARN | L2INPUT_FEAT_FWD | L2INPUT_FEAT_FLOOD);
581       shg = 0; // not used in xconnect
582
583       // Insure all packets go to ethernet-input
584       ethernet_set_rx_redirect (vnet_main, hi, 1);
585   } else {
586
587     if (mode == MODE_L2_BRIDGE) {
588         /* 
589          * Remove a check that the interface must be an Ethernet.
590          * Specifically so we can bridge to L3 tunnel interfaces.
591          * Here's the check:
592          * if (hi->hw_class_index != ethernet_hw_interface_class.index)
593          * 
594          */
595         if (!hi)
596             return MODE_ERROR_ETH;  // non-ethernet
597
598       config->xconnect = 0;
599       config->bridge = 1;
600       config->bd_index = bd_index;
601
602       // Enable forwarding, flooding, learning and ARP termination by default
603       // (note that ARP term is disabled on BD feature bitmap by default)
604       config->feature_bitmap |= L2INPUT_FEAT_FWD | L2INPUT_FEAT_UU_FLOOD | 
605           L2INPUT_FEAT_FLOOD | L2INPUT_FEAT_LEARN | L2INPUT_FEAT_ARP_TERM;
606
607       // Make sure last-chance drop is configured
608       config->feature_bitmap |= L2INPUT_FEAT_DROP;
609
610       // Make sure xconnect is disabled
611       config->feature_bitmap &= ~L2INPUT_FEAT_XCONNECT;
612
613       // Set up bridge domain
614       vec_validate(mp->bd_configs, bd_index);  
615       bd_config = vec_elt_at_index(mp->bd_configs, bd_index);
616       bd_validate (bd_config);
617
618       // TODO: think: add l2fib entry even for non-bvi interface?
619  
620       // Do BVI interface initializations
621       if (bvi) {
622         // insure BD has no bvi interface (or replace that one with this??)
623         if (bd_config->bvi_sw_if_index != ~0) {
624           return MODE_ERROR_BVI_DEF; // bd already has a bvi interface
625         } 
626         bd_config->bvi_sw_if_index = sw_if_index;
627         config->bvi = 1;
628
629         // create the l2fib entry for the bvi interface
630         mac = *((u64 *)hi->hw_address);
631         l2fib_add_entry (mac, bd_index, sw_if_index, 1, 0, 1);  // static + bvi
632
633         // Disable learning by default. no use since l2fib entry is static.
634         config->feature_bitmap &= ~L2INPUT_FEAT_LEARN;
635
636         // Make loop output node send packet to l2-input node
637         slot = vlib_node_add_named_next_with_slot (
638             vm, hi->tx_node_index, "l2-input",
639             VNET_SIMULATED_ETHERNET_TX_NEXT_ETHERNET_INPUT);
640         ASSERT (slot == VNET_SIMULATED_ETHERNET_TX_NEXT_ETHERNET_INPUT);
641       }
642
643       // Add interface to bridge-domain flood vector
644       member.sw_if_index = sw_if_index;
645       member.flags = bvi ? L2_FLOOD_MEMBER_BVI : L2_FLOOD_MEMBER_NORMAL;
646       member.shg = shg;
647       bd_add_member (bd_config, &member);
648      
649     } else {
650       config->xconnect = 1;
651       config->bridge = 0;
652       config->output_sw_if_index = xc_sw_if_index;
653
654       // Make sure last-chance drop is configured
655       config->feature_bitmap |= L2INPUT_FEAT_DROP;
656
657       // Make sure bridging features are disabled
658       config->feature_bitmap &= ~(L2INPUT_FEAT_LEARN | L2INPUT_FEAT_FWD | L2INPUT_FEAT_FLOOD);
659
660       config->feature_bitmap |= L2INPUT_FEAT_XCONNECT;
661       shg = 0; // not used in xconnect
662     }
663
664     // set up split-horizon group
665     config->shg = shg;
666     out_config = l2output_intf_config (sw_if_index);
667     out_config->shg = shg;
668
669     // Test: remove this when non-IP features can be configured.
670     // Enable a non-IP feature to test IP feature masking
671     // config->feature_bitmap |= L2INPUT_FEAT_CTRL_PKT;
672
673     l2_if_adjust++;
674   }
675
676   // Adjust count of L2 interfaces
677   hi->l2_if_count += l2_if_adjust;
678
679   if (hi->hw_class_index == ethernet_hw_interface_class.index) {
680     if ((hi->l2_if_count == 1) && (l2_if_adjust == 1)) {
681       // Just added first L2 interface on this port
682
683       // Set promiscuous mode on the l2 interface
684       ethernet_set_flags (vnet_main, hi->hw_if_index,
685                           ETHERNET_INTERFACE_FLAG_ACCEPT_ALL);
686
687       // Insure all packets go to ethernet-input
688       ethernet_set_rx_redirect (vnet_main, hi, 1);
689
690     } else if ((hi->l2_if_count == 0) && (l2_if_adjust == -1)) {
691       // Just removed only L2 subinterface on this port
692
693       // Disable promiscuous mode on the l2 interface
694       ethernet_set_flags (vnet_main, hi->hw_if_index, 0);
695
696       // Allow ip packets to go directly to ip4-input etc
697       ethernet_set_rx_redirect (vnet_main, hi, 0);
698     }
699   }
700
701   // Set up the L2/L3 flag in the interface parsing tables
702   ethernet_sw_interface_set_l2_mode(vnm, sw_if_index, (mode!=MODE_L3));
703
704   return 0;
705 }
706
707 // set subinterface in bridging mode with a bridge-domain ID
708 // The CLI format is:
709 //    set interface l2 bridge <interface> <bd> [bvi] [split-horizon-group]
710 static clib_error_t *
711 int_l2_bridge  (vlib_main_t * vm,
712                 unformat_input_t * input,
713                 vlib_cli_command_t * cmd)
714 {
715   vnet_main_t * vnm = vnet_get_main();
716   clib_error_t * error = 0;
717   u32 bd_index, bd_id;
718   u32 sw_if_index;
719   u32 bvi;
720   u32 rc;
721   u32 shg;
722
723   if (! unformat_user (input, unformat_vnet_sw_interface, vnm, &sw_if_index))
724     {
725       error = clib_error_return (0, "unknown interface `%U'",
726                                  format_unformat_error, input);
727       goto done;
728     }
729
730   if (!unformat (input, "%d", &bd_id)) {
731       error = clib_error_return (0, "expected bridge domain ID `%U'",
732                                  format_unformat_error, input);
733       goto done;
734   }
735
736   bd_index = bd_find_or_add_bd_index (&bd_main, bd_id);
737
738   // optional bvi 
739   bvi = unformat (input, "bvi");
740
741   // optional split horizon group
742   shg = 0;
743   (void) unformat (input, "%d", &shg);
744
745   // set the interface mode
746   if ((rc = set_int_l2_mode(vm, vnm, MODE_L2_BRIDGE, sw_if_index, bd_index, bvi, shg, 0))) {
747     if (rc == MODE_ERROR_ETH) {
748       error = clib_error_return (0, "bridged interface must be ethernet",
749                                  format_unformat_error, input);
750     } else if (rc == MODE_ERROR_BVI_DEF) {
751       error = clib_error_return (0, "bridge-domain already has a bvi interface",
752                                  format_unformat_error, input);
753     } else {
754       error = clib_error_return (0, "invalid configuration for interface",
755                                  format_unformat_error, input);
756     }
757     goto done;
758   }
759
760  done:
761   return error;
762 }
763
764 VLIB_CLI_COMMAND (int_l2_bridge_cli, static) = {
765   .path = "set interface l2 bridge",
766   .short_help = "set interface to L2 bridging mode in <bridge-domain ID> [bvi] [shg]",
767   .function = int_l2_bridge,
768 };
769
770 // set subinterface in xconnect mode with another interface
771 // The CLI format is:
772 //    set interface l2 xconnect <interface> <peer interface>
773 static clib_error_t *
774 int_l2_xc (vlib_main_t * vm,
775            unformat_input_t * input,
776            vlib_cli_command_t * cmd)
777 {
778   vnet_main_t * vnm = vnet_get_main();
779   clib_error_t * error = 0;
780   u32 sw_if_index;
781   u32 xc_sw_if_index;
782
783   if (! unformat_user (input, unformat_vnet_sw_interface, vnm, &sw_if_index))
784     {
785       error = clib_error_return (0, "unknown interface `%U'",
786                                  format_unformat_error, input);
787       goto done;
788     }
789
790   if (! unformat_user (input, unformat_vnet_sw_interface, vnm, &xc_sw_if_index))
791     {
792       error = clib_error_return (0, "unknown peer interface `%U'",
793                                  format_unformat_error, input);
794       goto done;
795     }
796
797   // set the interface mode
798   if (set_int_l2_mode(vm, vnm, MODE_L2_XC, sw_if_index, 0, 0, 0, xc_sw_if_index)) {
799       error = clib_error_return (0, "invalid configuration for interface",
800                                  format_unformat_error, input);
801       goto done;
802   }
803
804  done:
805   return error;
806 }
807
808 VLIB_CLI_COMMAND (int_l2_xc_cli, static) = {
809   .path = "set interface l2 xconnect",
810   .short_help = "set interface to L2 cross-connect mode with <peer interface>",
811   .function = int_l2_xc,
812 };
813
814 // set subinterface in L3 mode
815 // The CLI format is:
816 //    set interface l3 <interface>
817 static clib_error_t *
818 int_l3  (vlib_main_t * vm,
819          unformat_input_t * input,
820          vlib_cli_command_t * cmd)
821 {
822   vnet_main_t * vnm = vnet_get_main();
823   clib_error_t * error = 0;
824   u32 sw_if_index;
825
826   if (! unformat_user (input, unformat_vnet_sw_interface, vnm, &sw_if_index))
827     {
828       error = clib_error_return (0, "unknown interface `%U'",
829                                  format_unformat_error, input);
830       goto done;
831     }
832
833   // set the interface mode
834   if (set_int_l2_mode(vm, vnm, MODE_L3, sw_if_index, 0, 0, 0, 0)) {
835       error = clib_error_return (0, "invalid configuration for interface",
836                                  format_unformat_error, input);
837       goto done;
838   }
839
840  done:
841   return error;
842 }
843
844 VLIB_CLI_COMMAND (int_l3_cli, static) = {
845   .path = "set interface l3",
846   .short_help = "set interface to L3 mode",
847   .function = int_l3,
848 };
849
850 // The CLI format is:
851 //    show mode [<if-name1> <if-name2> ...]
852 static clib_error_t *
853 show_int_mode  (vlib_main_t * vm,
854          unformat_input_t * input,
855          vlib_cli_command_t * cmd)
856 {
857   vnet_main_t * vnm = vnet_get_main();
858   clib_error_t * error = 0;
859   char * mode;
860   u8 * args;
861   vnet_interface_main_t * im = &vnm->interface_main;
862   vnet_sw_interface_t * si, * sis = 0;
863   l2input_main_t * mp = &l2input_main;
864   l2_input_config_t * config;
865   
866   while (unformat_check_input (input) != UNFORMAT_END_OF_INPUT)
867     {
868        u32 sw_if_index;
869
870       /* See if user wants to show specific interface */
871       if (unformat (input, "%U", unformat_vnet_sw_interface, vnm, &sw_if_index))
872         {
873           si =  pool_elt_at_index (im->sw_interfaces, sw_if_index);
874           vec_add1 (sis, si[0]);
875         }
876       else
877         {
878           error = clib_error_return (0, "unknown input `%U'",
879                                      format_unformat_error, input);
880           goto done;
881         }
882
883     }
884
885   if (vec_len (sis) == 0) /* Get all interfaces */
886     {
887       /* Gather interfaces. */
888       sis = vec_new (vnet_sw_interface_t, pool_elts (im->sw_interfaces));
889       _vec_len (sis) = 0;
890       pool_foreach (si, im->sw_interfaces, ({ vec_add1 (sis, si[0]); }));
891     }
892   
893   vec_foreach (si, sis)
894     {
895       vec_validate(mp->configs, si->sw_if_index);
896       config = vec_elt_at_index(mp->configs, si->sw_if_index);
897       if (config->bridge) {
898           u32 bd_id;
899           mode = "l2 bridge";
900           bd_id = l2input_main.bd_configs[config->bd_index].bd_id;
901
902           args = format (0, "bd_id %d%s%d", bd_id, 
903                          config->bvi ? " bvi shg " : " shg ", config->shg);
904       } else if (config->xconnect) {
905           mode = "l2 xconnect";
906           args = format (0, "%U",
907           format_vnet_sw_if_index_name,
908           vnm, config->output_sw_if_index);
909       } else {
910         mode = "l3";
911         args = format (0, " ");
912       }
913       vlib_cli_output (vm, "%s %U %v\n",
914         mode,
915         format_vnet_sw_if_index_name,
916         vnm, si->sw_if_index,
917         args);
918       vec_free (args);
919   }
920
921 done:
922   vec_free (sis);
923   
924   return error;
925 }
926
927 VLIB_CLI_COMMAND (show_l2_mode, static) = {
928   .path = "show mode",
929   .short_help = "show mode [<if-name1> <if-name2> ...]",
930   .function = show_int_mode,
931 };
932
933 #define foreach_l2_init_function                \
934 _(feat_bitmap_drop_init)                        \
935 _(l2fib_init)                                   \
936 _(l2_classify_init)                             \
937 _(l2bd_init)                                    \
938 _(l2fwd_init)                                   \
939 _(l2_inacl_init)                                \
940 _(l2input_init)                                 \
941 _(l2_vtr_init)                                  \
942 _(l2_invtr_init)                                \
943 _(l2_efp_filter_init)                           \
944 _(l2learn_init)                                 \
945 _(l2flood_init)                                 \
946 _(l2_outacl_init)                               \
947 _(l2output_init)                                \
948 _(l2_patch_init)                                \
949 _(l2_xcrw_init)
950
951 clib_error_t *l2_init (vlib_main_t * vm)
952 {
953   clib_error_t * error;
954   
955 #define _(a) do {                                                       \
956   if ((error = vlib_call_init_function (vm, a))) return error; }        \
957 while (0);
958   foreach_l2_init_function;
959 #undef _
960   return 0;
961 }
962
963 VLIB_INIT_FUNCTION (l2_init);