dpdk: Add support for Mellanox ConnectX-4 devices
[vpp.git] / src / vnet / interface.c
1 /*
2  * Copyright (c) 2015 Cisco and/or its affiliates.
3  * Licensed under the Apache License, Version 2.0 (the "License");
4  * you may not use this file except in compliance with the License.
5  * You may obtain a copy of the License at:
6  *
7  *     http://www.apache.org/licenses/LICENSE-2.0
8  *
9  * Unless required by applicable law or agreed to in writing, software
10  * distributed under the License is distributed on an "AS IS" BASIS,
11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
12  * See the License for the specific language governing permissions and
13  * limitations under the License.
14  */
15 /*
16  * interface.c: VNET interfaces/sub-interfaces
17  *
18  * Copyright (c) 2008 Eliot Dresselhaus
19  *
20  * Permission is hereby granted, free of charge, to any person obtaining
21  * a copy of this software and associated documentation files (the
22  * "Software"), to deal in the Software without restriction, including
23  * without limitation the rights to use, copy, modify, merge, publish,
24  * distribute, sublicense, and/or sell copies of the Software, and to
25  * permit persons to whom the Software is furnished to do so, subject to
26  * the following conditions:
27  *
28  * The above copyright notice and this permission notice shall be
29  * included in all copies or substantial portions of the Software.
30  *
31  *  THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND,
32  *  EXPRESS OR IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF
33  *  MERCHANTABILITY, FITNESS FOR A PARTICULAR PURPOSE AND
34  *  NONINFRINGEMENT. IN NO EVENT SHALL THE AUTHORS OR COPYRIGHT HOLDERS BE
35  *  LIABLE FOR ANY CLAIM, DAMAGES OR OTHER LIABILITY, WHETHER IN AN ACTION
36  *  OF CONTRACT, TORT OR OTHERWISE, ARISING FROM, OUT OF OR IN CONNECTION
37  *  WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE SOFTWARE.
38  */
39
40 #include <vnet/vnet.h>
41 #include <vnet/plugin/plugin.h>
42 #include <vnet/fib/ip6_fib.h>
43 #include <vnet/adj/adj.h>
44
45 #define VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE (1 << 0)
46 #define VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE (1 << 1)
47
48 static clib_error_t *vnet_hw_interface_set_flags_helper (vnet_main_t * vnm,
49                                                          u32 hw_if_index,
50                                                          u32 flags,
51                                                          u32 helper_flags);
52
53 static clib_error_t *vnet_sw_interface_set_flags_helper (vnet_main_t * vnm,
54                                                          u32 sw_if_index,
55                                                          u32 flags,
56                                                          u32 helper_flags);
57
58 static clib_error_t *vnet_hw_interface_set_class_helper (vnet_main_t * vnm,
59                                                          u32 hw_if_index,
60                                                          u32 hw_class_index,
61                                                          u32 redistribute);
62
63 typedef struct
64 {
65   /* Either sw or hw interface index. */
66   u32 sw_hw_if_index;
67
68   /* Flags. */
69   u32 flags;
70 } vnet_sw_hw_interface_state_t;
71
72 static void
73 serialize_vec_vnet_sw_hw_interface_state (serialize_main_t * m, va_list * va)
74 {
75   vnet_sw_hw_interface_state_t *s =
76     va_arg (*va, vnet_sw_hw_interface_state_t *);
77   u32 n = va_arg (*va, u32);
78   u32 i;
79   for (i = 0; i < n; i++)
80     {
81       serialize_integer (m, s[i].sw_hw_if_index,
82                          sizeof (s[i].sw_hw_if_index));
83       serialize_integer (m, s[i].flags, sizeof (s[i].flags));
84     }
85 }
86
87 static void
88 unserialize_vec_vnet_sw_hw_interface_state (serialize_main_t * m,
89                                             va_list * va)
90 {
91   vnet_sw_hw_interface_state_t *s =
92     va_arg (*va, vnet_sw_hw_interface_state_t *);
93   u32 n = va_arg (*va, u32);
94   u32 i;
95   for (i = 0; i < n; i++)
96     {
97       unserialize_integer (m, &s[i].sw_hw_if_index,
98                            sizeof (s[i].sw_hw_if_index));
99       unserialize_integer (m, &s[i].flags, sizeof (s[i].flags));
100     }
101 }
102
103 static void
104 serialize_vnet_sw_hw_interface_set_flags (serialize_main_t * m, va_list * va)
105 {
106   vnet_sw_hw_interface_state_t *s =
107     va_arg (*va, vnet_sw_hw_interface_state_t *);
108   serialize (m, serialize_vec_vnet_sw_hw_interface_state, s, 1);
109 }
110
111 static void
112 unserialize_vnet_sw_interface_set_flags (serialize_main_t * m, va_list * va)
113 {
114   CLIB_UNUSED (mc_main_t * mc) = va_arg (*va, mc_main_t *);
115   vnet_sw_hw_interface_state_t s;
116
117   unserialize (m, unserialize_vec_vnet_sw_hw_interface_state, &s, 1);
118
119   vnet_sw_interface_set_flags_helper
120     (vnet_get_main (), s.sw_hw_if_index, s.flags,
121      /* helper_flags no redistribution */ 0);
122 }
123
124 static void
125 unserialize_vnet_hw_interface_set_flags (serialize_main_t * m, va_list * va)
126 {
127   CLIB_UNUSED (mc_main_t * mc) = va_arg (*va, mc_main_t *);
128   vnet_sw_hw_interface_state_t s;
129
130   unserialize (m, unserialize_vec_vnet_sw_hw_interface_state, &s, 1);
131
132   vnet_hw_interface_set_flags_helper
133     (vnet_get_main (), s.sw_hw_if_index, s.flags,
134      /* helper_flags no redistribution */ 0);
135 }
136
137 MC_SERIALIZE_MSG (vnet_sw_interface_set_flags_msg, static) =
138 {
139 .name = "vnet_sw_interface_set_flags",.serialize =
140     serialize_vnet_sw_hw_interface_set_flags,.unserialize =
141     unserialize_vnet_sw_interface_set_flags,};
142
143 MC_SERIALIZE_MSG (vnet_hw_interface_set_flags_msg, static) =
144 {
145 .name = "vnet_hw_interface_set_flags",.serialize =
146     serialize_vnet_sw_hw_interface_set_flags,.unserialize =
147     unserialize_vnet_hw_interface_set_flags,};
148
149 void
150 serialize_vnet_interface_state (serialize_main_t * m, va_list * va)
151 {
152   vnet_main_t *vnm = va_arg (*va, vnet_main_t *);
153   vnet_sw_hw_interface_state_t *sts = 0, *st;
154   vnet_sw_interface_t *sif;
155   vnet_hw_interface_t *hif;
156   vnet_interface_main_t *im = &vnm->interface_main;
157
158   /* Serialize hardware interface classes since they may have changed.
159      Must do this before sending up/down flags. */
160   /* *INDENT-OFF* */
161   pool_foreach (hif, im->hw_interfaces, ({
162     vnet_hw_interface_class_t * hw_class = vnet_get_hw_interface_class (vnm, hif->hw_class_index);
163     serialize_cstring (m, hw_class->name);
164   }));
165   /* *INDENT-ON* */
166
167   /* Send sw/hw interface state when non-zero. */
168   /* *INDENT-OFF* */
169   pool_foreach (sif, im->sw_interfaces, ({
170     if (sif->flags != 0)
171       {
172         vec_add2 (sts, st, 1);
173         st->sw_hw_if_index = sif->sw_if_index;
174         st->flags = sif->flags;
175       }
176   }));
177   /* *INDENT-ON* */
178
179   vec_serialize (m, sts, serialize_vec_vnet_sw_hw_interface_state);
180
181   if (sts)
182     _vec_len (sts) = 0;
183
184   /* *INDENT-OFF* */
185   pool_foreach (hif, im->hw_interfaces, ({
186     if (hif->flags != 0)
187       {
188         vec_add2 (sts, st, 1);
189         st->sw_hw_if_index = hif->hw_if_index;
190         st->flags = hif->flags;
191       }
192   }));
193   /* *INDENT-ON* */
194
195   vec_serialize (m, sts, serialize_vec_vnet_sw_hw_interface_state);
196
197   vec_free (sts);
198 }
199
200 void
201 unserialize_vnet_interface_state (serialize_main_t * m, va_list * va)
202 {
203   vnet_main_t *vnm = va_arg (*va, vnet_main_t *);
204   vnet_sw_hw_interface_state_t *sts = 0, *st;
205
206   /* First set interface hardware class. */
207   {
208     vnet_interface_main_t *im = &vnm->interface_main;
209     vnet_hw_interface_t *hif;
210     char *class_name;
211     uword *p;
212     clib_error_t *error;
213
214     /* *INDENT-OFF* */
215     pool_foreach (hif, im->hw_interfaces, ({
216       unserialize_cstring (m, &class_name);
217       p = hash_get_mem (im->hw_interface_class_by_name, class_name);
218       ASSERT (p != 0);
219       error = vnet_hw_interface_set_class_helper (vnm, hif->hw_if_index, p[0], /* redistribute */ 0);
220       if (error)
221         clib_error_report (error);
222       vec_free (class_name);
223     }));
224     /* *INDENT-ON* */
225   }
226
227   vec_unserialize (m, &sts, unserialize_vec_vnet_sw_hw_interface_state);
228   vec_foreach (st, sts)
229     vnet_sw_interface_set_flags_helper (vnm, st->sw_hw_if_index, st->flags,
230                                         /* no distribute */ 0);
231   vec_free (sts);
232
233   vec_unserialize (m, &sts, unserialize_vec_vnet_sw_hw_interface_state);
234   vec_foreach (st, sts)
235     vnet_hw_interface_set_flags_helper (vnm, st->sw_hw_if_index, st->flags,
236                                         /* no distribute */ 0);
237   vec_free (sts);
238 }
239
240 static clib_error_t *
241 call_elf_section_interface_callbacks (vnet_main_t * vnm, u32 if_index,
242                                       u32 flags,
243                                       _vnet_interface_function_list_elt_t **
244                                       elts)
245 {
246   _vnet_interface_function_list_elt_t *elt;
247   vnet_interface_function_priority_t prio;
248   clib_error_t *error = 0;
249
250   for (prio = VNET_ITF_FUNC_PRIORITY_LOW;
251        prio <= VNET_ITF_FUNC_PRIORITY_HIGH; prio++)
252     {
253       elt = elts[prio];
254
255       while (elt)
256         {
257           error = elt->fp (vnm, if_index, flags);
258           if (error)
259             return error;
260           elt = elt->next_interface_function;
261         }
262     }
263   return error;
264 }
265
266 static clib_error_t *
267 call_hw_interface_add_del_callbacks (vnet_main_t * vnm, u32 hw_if_index,
268                                      u32 is_create)
269 {
270   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
271   vnet_hw_interface_class_t *hw_class =
272     vnet_get_hw_interface_class (vnm, hi->hw_class_index);
273   vnet_device_class_t *dev_class =
274     vnet_get_device_class (vnm, hi->dev_class_index);
275   clib_error_t *error = 0;
276
277   if (hw_class->interface_add_del_function
278       && (error =
279           hw_class->interface_add_del_function (vnm, hw_if_index, is_create)))
280     return error;
281
282   if (dev_class->interface_add_del_function
283       && (error =
284           dev_class->interface_add_del_function (vnm, hw_if_index,
285                                                  is_create)))
286     return error;
287
288   error = call_elf_section_interface_callbacks
289     (vnm, hw_if_index, is_create, vnm->hw_interface_add_del_functions);
290
291   return error;
292 }
293
294 static clib_error_t *
295 call_sw_interface_add_del_callbacks (vnet_main_t * vnm, u32 sw_if_index,
296                                      u32 is_create)
297 {
298   return call_elf_section_interface_callbacks
299     (vnm, sw_if_index, is_create, vnm->sw_interface_add_del_functions);
300 }
301
302 #define VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE (1 << 0)
303 #define VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE (1 << 1)
304
305 static clib_error_t *
306 vnet_hw_interface_set_flags_helper (vnet_main_t * vnm, u32 hw_if_index,
307                                     u32 flags, u32 helper_flags)
308 {
309   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
310   vnet_hw_interface_class_t *hw_class =
311     vnet_get_hw_interface_class (vnm, hi->hw_class_index);
312   vnet_device_class_t *dev_class =
313     vnet_get_device_class (vnm, hi->dev_class_index);
314   vlib_main_t *vm = vnm->vlib_main;
315   u32 mask;
316   clib_error_t *error = 0;
317   u32 is_create =
318     (helper_flags & VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE) != 0;
319
320   mask =
321     (VNET_HW_INTERFACE_FLAG_LINK_UP | VNET_HW_INTERFACE_FLAG_DUPLEX_MASK |
322      VNET_HW_INTERFACE_FLAG_SPEED_MASK);
323   flags &= mask;
324
325   /* Call hardware interface add/del callbacks. */
326   if (is_create)
327     call_hw_interface_add_del_callbacks (vnm, hw_if_index, is_create);
328
329   /* Already in the desired state? */
330   if (!is_create && (hi->flags & mask) == flags)
331     goto done;
332
333   /* Some interface classes do not redistribute (e.g. are local). */
334   if (!dev_class->redistribute)
335     helper_flags &= ~VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE;
336
337   if (vm->mc_main
338       && (helper_flags & VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE))
339     {
340       vnet_sw_hw_interface_state_t s;
341       s.sw_hw_if_index = hw_if_index;
342       s.flags = flags;
343       mc_serialize (vm->mc_main, &vnet_hw_interface_set_flags_msg, &s);
344     }
345
346   if ((hi->flags & VNET_HW_INTERFACE_FLAG_LINK_UP) !=
347       (flags & VNET_HW_INTERFACE_FLAG_LINK_UP))
348     {
349       /* Do hardware class (e.g. ethernet). */
350       if (hw_class->link_up_down_function
351           && (error = hw_class->link_up_down_function (vnm, hw_if_index,
352                                                        flags)))
353         goto done;
354
355       error = call_elf_section_interface_callbacks
356         (vnm, hw_if_index, flags, vnm->hw_interface_link_up_down_functions);
357
358       if (error)
359         goto done;
360     }
361
362   hi->flags &= ~mask;
363   hi->flags |= flags;
364
365 done:
366   return error;
367 }
368
369 static clib_error_t *
370 vnet_sw_interface_set_flags_helper (vnet_main_t * vnm, u32 sw_if_index,
371                                     u32 flags, u32 helper_flags)
372 {
373   vnet_sw_interface_t *si = vnet_get_sw_interface (vnm, sw_if_index);
374   vlib_main_t *vm = vnm->vlib_main;
375   u32 mask;
376   clib_error_t *error = 0;
377   u32 is_create =
378     (helper_flags & VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE) != 0;
379   u32 old_flags;
380
381   mask = VNET_SW_INTERFACE_FLAG_ADMIN_UP | VNET_SW_INTERFACE_FLAG_PUNT;
382   flags &= mask;
383
384   if (is_create)
385     {
386       error =
387         call_sw_interface_add_del_callbacks (vnm, sw_if_index, is_create);
388       if (error)
389         goto done;
390
391       if (flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
392         {
393           /* Notify everyone when the interface is created as admin up */
394           error = call_elf_section_interface_callbacks (vnm, sw_if_index,
395                                                         flags,
396                                                         vnm->
397                                                         sw_interface_admin_up_down_functions);
398           if (error)
399             goto done;
400         }
401     }
402   else
403     {
404       vnet_sw_interface_t *si_sup = si;
405
406       /* Check that super interface is in correct state. */
407       if (si->type == VNET_SW_INTERFACE_TYPE_SUB)
408         {
409           si_sup = vnet_get_sw_interface (vnm, si->sup_sw_if_index);
410
411           /* Check to see if we're bringing down the soft interface and if it's parent is up */
412           if ((flags != (si_sup->flags & mask)) &&
413               (!((flags == 0)
414                  && ((si_sup->flags & mask) ==
415                      VNET_SW_INTERFACE_FLAG_ADMIN_UP))))
416             {
417               error = clib_error_return (0, "super-interface %U must be %U",
418                                          format_vnet_sw_interface_name, vnm,
419                                          si_sup,
420                                          format_vnet_sw_interface_flags,
421                                          flags);
422               goto done;
423             }
424         }
425
426       /* Donot change state for slave link of bonded interfaces */
427       if (si->flags & VNET_SW_INTERFACE_FLAG_BOND_SLAVE)
428         {
429           error = clib_error_return
430             (0, "not allowed as %U belong to a BondEthernet interface",
431              format_vnet_sw_interface_name, vnm, si);
432           goto done;
433         }
434
435       /* Already in the desired state? */
436       if ((si->flags & mask) == flags)
437         goto done;
438
439       /* Sub-interfaces of hardware interfaces that do no redistribute,
440          do not redistribute themselves. */
441       if (si_sup->type == VNET_SW_INTERFACE_TYPE_HARDWARE)
442         {
443           vnet_hw_interface_t *hi =
444             vnet_get_hw_interface (vnm, si_sup->hw_if_index);
445           vnet_device_class_t *dev_class =
446             vnet_get_device_class (vnm, hi->dev_class_index);
447           if (!dev_class->redistribute)
448             helper_flags &=
449               ~VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE;
450         }
451
452       if (vm->mc_main
453           && (helper_flags &
454               VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE))
455         {
456           vnet_sw_hw_interface_state_t s;
457           s.sw_hw_if_index = sw_if_index;
458           s.flags = flags;
459           mc_serialize (vm->mc_main, &vnet_sw_interface_set_flags_msg, &s);
460         }
461
462       /* set the flags now before invoking the registered clients
463        * so that the state they query is consistent with the state here notified */
464       old_flags = si->flags;
465       si->flags &= ~mask;
466       si->flags |= flags;
467       if ((flags | old_flags) & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
468         error = call_elf_section_interface_callbacks
469           (vnm, sw_if_index, flags,
470            vnm->sw_interface_admin_up_down_functions);
471       si->flags = old_flags;
472
473       if (error)
474         goto done;
475
476       if (si->type == VNET_SW_INTERFACE_TYPE_HARDWARE)
477         {
478           vnet_hw_interface_t *hi =
479             vnet_get_hw_interface (vnm, si->hw_if_index);
480           vnet_hw_interface_class_t *hw_class =
481             vnet_get_hw_interface_class (vnm, hi->hw_class_index);
482           vnet_device_class_t *dev_class =
483             vnet_get_device_class (vnm, hi->dev_class_index);
484
485           /* save the si admin up flag */
486           old_flags = si->flags;
487
488           /* update si admin up flag in advance if we are going admin down */
489           if (!(flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP))
490             si->flags &= ~VNET_SW_INTERFACE_FLAG_ADMIN_UP;
491
492           if (dev_class->admin_up_down_function
493               && (error = dev_class->admin_up_down_function (vnm,
494                                                              si->hw_if_index,
495                                                              flags)))
496             {
497               /* restore si admin up flag to it's original state on errors */
498               si->flags = old_flags;
499               goto done;
500             }
501
502           if (hw_class->admin_up_down_function
503               && (error = hw_class->admin_up_down_function (vnm,
504                                                             si->hw_if_index,
505                                                             flags)))
506             {
507               /* restore si admin up flag to it's original state on errors */
508               si->flags = old_flags;
509               goto done;
510             }
511
512           /* Admin down implies link down. */
513           if (!(flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
514               && (hi->flags & VNET_HW_INTERFACE_FLAG_LINK_UP))
515             vnet_hw_interface_set_flags_helper (vnm, si->hw_if_index,
516                                                 hi->flags &
517                                                 ~VNET_HW_INTERFACE_FLAG_LINK_UP,
518                                                 helper_flags);
519         }
520     }
521
522   si->flags &= ~mask;
523   si->flags |= flags;
524
525 done:
526   return error;
527 }
528
529 clib_error_t *
530 vnet_hw_interface_set_flags (vnet_main_t * vnm, u32 hw_if_index, u32 flags)
531 {
532   return vnet_hw_interface_set_flags_helper
533     (vnm, hw_if_index, flags,
534      VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE);
535 }
536
537 clib_error_t *
538 vnet_sw_interface_set_flags (vnet_main_t * vnm, u32 sw_if_index, u32 flags)
539 {
540   return vnet_sw_interface_set_flags_helper
541     (vnm, sw_if_index, flags,
542      VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE);
543 }
544
545 static u32
546 vnet_create_sw_interface_no_callbacks (vnet_main_t * vnm,
547                                        vnet_sw_interface_t * template)
548 {
549   vnet_interface_main_t *im = &vnm->interface_main;
550   vnet_sw_interface_t *sw;
551   u32 sw_if_index;
552
553   pool_get (im->sw_interfaces, sw);
554   sw_if_index = sw - im->sw_interfaces;
555
556   sw[0] = template[0];
557
558   sw->flags = 0;
559   sw->sw_if_index = sw_if_index;
560   if (sw->type == VNET_SW_INTERFACE_TYPE_HARDWARE)
561     sw->sup_sw_if_index = sw->sw_if_index;
562
563   /* Allocate counters for this interface. */
564   {
565     u32 i;
566
567     vnet_interface_counter_lock (im);
568
569     for (i = 0; i < vec_len (im->sw_if_counters); i++)
570       {
571         vlib_validate_simple_counter (&im->sw_if_counters[i], sw_if_index);
572         vlib_zero_simple_counter (&im->sw_if_counters[i], sw_if_index);
573       }
574
575     for (i = 0; i < vec_len (im->combined_sw_if_counters); i++)
576       {
577         vlib_validate_combined_counter (&im->combined_sw_if_counters[i],
578                                         sw_if_index);
579         vlib_zero_combined_counter (&im->combined_sw_if_counters[i],
580                                     sw_if_index);
581       }
582
583     vnet_interface_counter_unlock (im);
584   }
585
586   return sw_if_index;
587 }
588
589 clib_error_t *
590 vnet_create_sw_interface (vnet_main_t * vnm, vnet_sw_interface_t * template,
591                           u32 * sw_if_index)
592 {
593   clib_error_t *error;
594   vnet_hw_interface_t *hi;
595   vnet_device_class_t *dev_class;
596
597   hi = vnet_get_sup_hw_interface (vnm, template->sup_sw_if_index);
598   dev_class = vnet_get_device_class (vnm, hi->dev_class_index);
599
600   if (template->type == VNET_SW_INTERFACE_TYPE_SUB &&
601       dev_class->subif_add_del_function)
602     {
603       error = dev_class->subif_add_del_function (vnm, hi->hw_if_index,
604                                                  (struct vnet_sw_interface_t
605                                                   *) template, 1);
606       if (error)
607         return error;
608     }
609
610   *sw_if_index = vnet_create_sw_interface_no_callbacks (vnm, template);
611   error = vnet_sw_interface_set_flags_helper
612     (vnm, *sw_if_index, template->flags,
613      VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE);
614
615   if (error)
616     {
617       /* undo the work done by vnet_create_sw_interface_no_callbacks() */
618       vnet_interface_main_t *im = &vnm->interface_main;
619       vnet_sw_interface_t *sw =
620         pool_elt_at_index (im->sw_interfaces, *sw_if_index);
621       pool_put (im->sw_interfaces, sw);
622     }
623
624   return error;
625 }
626
627 void
628 vnet_delete_sw_interface (vnet_main_t * vnm, u32 sw_if_index)
629 {
630   vnet_interface_main_t *im = &vnm->interface_main;
631   vnet_sw_interface_t *sw =
632     pool_elt_at_index (im->sw_interfaces, sw_if_index);
633
634   /* Make sure the interface is in L3 mode (removed from L2 BD or XConnect) */
635   vlib_main_t *vm = vlib_get_main ();
636   l2_input_config_t *config;
637   config = vec_elt_at_index (l2input_main.configs, sw_if_index);
638   if (config->xconnect)
639     set_int_l2_mode (vm, vnm, MODE_L3, config->output_sw_if_index, 0, 0, 0,
640                      0);
641   if (config->xconnect || config->bridge)
642     set_int_l2_mode (vm, vnm, MODE_L3, sw_if_index, 0, 0, 0, 0);
643
644   /* Bring down interface in case it is up. */
645   if (sw->flags != 0)
646     vnet_sw_interface_set_flags (vnm, sw_if_index, /* flags */ 0);
647
648   call_sw_interface_add_del_callbacks (vnm, sw_if_index, /* is_create */ 0);
649
650   pool_put (im->sw_interfaces, sw);
651 }
652
653 static void
654 setup_tx_node (vlib_main_t * vm,
655                u32 node_index, vnet_device_class_t * dev_class)
656 {
657   vlib_node_t *n = vlib_get_node (vm, node_index);
658
659   n->function = dev_class->tx_function;
660   n->format_trace = dev_class->format_tx_trace;
661
662   vlib_register_errors (vm, node_index,
663                         dev_class->tx_function_n_errors,
664                         dev_class->tx_function_error_strings);
665 }
666
667 static void
668 setup_output_node (vlib_main_t * vm,
669                    u32 node_index, vnet_hw_interface_class_t * hw_class)
670 {
671   vlib_node_t *n = vlib_get_node (vm, node_index);
672   n->format_buffer = hw_class->format_header;
673   n->unformat_buffer = hw_class->unformat_header;
674 }
675
676 /* Register an interface instance. */
677 u32
678 vnet_register_interface (vnet_main_t * vnm,
679                          u32 dev_class_index,
680                          u32 dev_instance,
681                          u32 hw_class_index, u32 hw_instance)
682 {
683   vnet_interface_main_t *im = &vnm->interface_main;
684   vnet_hw_interface_t *hw;
685   vnet_device_class_t *dev_class =
686     vnet_get_device_class (vnm, dev_class_index);
687   vnet_hw_interface_class_t *hw_class =
688     vnet_get_hw_interface_class (vnm, hw_class_index);
689   vlib_main_t *vm = vnm->vlib_main;
690   vnet_feature_config_main_t *fcm;
691   vnet_config_main_t *cm;
692   u32 hw_index, i;
693   char *tx_node_name, *output_node_name;
694
695   pool_get (im->hw_interfaces, hw);
696
697   hw_index = hw - im->hw_interfaces;
698   hw->hw_if_index = hw_index;
699
700   if (dev_class->format_device_name)
701     hw->name = format (0, "%U", dev_class->format_device_name, dev_instance);
702   else if (hw_class->format_interface_name)
703     hw->name = format (0, "%U", hw_class->format_interface_name,
704                        dev_instance);
705   else
706     hw->name = format (0, "%s%x", hw_class->name, dev_instance);
707
708   if (!im->hw_interface_by_name)
709     im->hw_interface_by_name = hash_create_vec ( /* size */ 0,
710                                                 sizeof (hw->name[0]),
711                                                 sizeof (uword));
712
713   hash_set_mem (im->hw_interface_by_name, hw->name, hw_index);
714
715   /* Make hardware interface point to software interface. */
716   {
717     vnet_sw_interface_t sw = {
718       .type = VNET_SW_INTERFACE_TYPE_HARDWARE,
719       .flood_class = VNET_FLOOD_CLASS_NORMAL,
720       .hw_if_index = hw_index
721     };
722     hw->sw_if_index = vnet_create_sw_interface_no_callbacks (vnm, &sw);
723   }
724
725   hw->dev_class_index = dev_class_index;
726   hw->dev_instance = dev_instance;
727   hw->hw_class_index = hw_class_index;
728   hw->hw_instance = hw_instance;
729
730   hw->max_rate_bits_per_sec = 0;
731   hw->min_packet_bytes = 0;
732   hw->per_packet_overhead_bytes = 0;
733   hw->max_l3_packet_bytes[VLIB_RX] = ~0;
734   hw->max_l3_packet_bytes[VLIB_TX] = ~0;
735
736   tx_node_name = (char *) format (0, "%v-tx", hw->name);
737   output_node_name = (char *) format (0, "%v-output", hw->name);
738
739   /* If we have previously deleted interface nodes, re-use them. */
740   if (vec_len (im->deleted_hw_interface_nodes) > 0)
741     {
742       vnet_hw_interface_nodes_t *hn;
743       vnet_interface_output_runtime_t *rt;
744       vlib_node_t *node;
745       vlib_node_runtime_t *nrt;
746
747       hn = vec_end (im->deleted_hw_interface_nodes) - 1;
748
749       hw->tx_node_index = hn->tx_node_index;
750       hw->output_node_index = hn->output_node_index;
751
752       vlib_node_rename (vm, hw->tx_node_index, "%v", tx_node_name);
753       vlib_node_rename (vm, hw->output_node_index, "%v", output_node_name);
754
755       rt = vlib_node_get_runtime_data (vm, hw->output_node_index);
756       ASSERT (rt->is_deleted == 1);
757       rt->is_deleted = 0;
758       rt->hw_if_index = hw_index;
759       rt->sw_if_index = hw->sw_if_index;
760       rt->dev_instance = hw->dev_instance;
761
762       rt = vlib_node_get_runtime_data (vm, hw->tx_node_index);
763       rt->hw_if_index = hw_index;
764       rt->sw_if_index = hw->sw_if_index;
765       rt->dev_instance = hw->dev_instance;
766
767       /* The new class may differ from the old one.
768        * Functions have to be updated. */
769       node = vlib_get_node (vm, hw->output_node_index);
770       node->function = dev_class->flatten_output_chains ?
771         vnet_interface_output_node_flatten_multiarch_select () :
772         vnet_interface_output_node_multiarch_select ();
773       node->format_trace = format_vnet_interface_output_trace;
774       nrt = vlib_node_get_runtime (vm, hw->output_node_index);
775       nrt->function = node->function;
776
777       node = vlib_get_node (vm, hw->tx_node_index);
778       node->function = dev_class->tx_function;
779       node->format_trace = dev_class->format_tx_trace;
780       nrt = vlib_node_get_runtime (vm, hw->tx_node_index);
781       nrt->function = node->function;
782
783       vlib_worker_thread_node_runtime_update ();
784       _vec_len (im->deleted_hw_interface_nodes) -= 1;
785     }
786   else
787     {
788       vlib_node_registration_t r;
789       vnet_interface_output_runtime_t rt = {
790         .hw_if_index = hw_index,
791         .sw_if_index = hw->sw_if_index,
792         .dev_instance = hw->dev_instance,
793         .is_deleted = 0,
794       };
795
796       memset (&r, 0, sizeof (r));
797       r.type = VLIB_NODE_TYPE_INTERNAL;
798       r.runtime_data = &rt;
799       r.runtime_data_bytes = sizeof (rt);
800       r.scalar_size = 0;
801       r.vector_size = sizeof (u32);
802
803       r.flags = VLIB_NODE_FLAG_IS_OUTPUT;
804       r.name = tx_node_name;
805       r.function = dev_class->tx_function;
806
807       hw->tx_node_index = vlib_register_node (vm, &r);
808
809       vlib_node_add_named_next_with_slot (vm, hw->tx_node_index,
810                                           "error-drop",
811                                           VNET_INTERFACE_TX_NEXT_DROP);
812
813       r.flags = 0;
814       r.name = output_node_name;
815       r.function = dev_class->flatten_output_chains ?
816         vnet_interface_output_node_flatten_multiarch_select () :
817         vnet_interface_output_node_multiarch_select ();
818       r.format_trace = format_vnet_interface_output_trace;
819
820       {
821         static char *e[] = {
822           "interface is down",
823           "interface is deleted",
824         };
825
826         r.n_errors = ARRAY_LEN (e);
827         r.error_strings = e;
828       }
829       hw->output_node_index = vlib_register_node (vm, &r);
830
831       vlib_node_add_named_next_with_slot (vm, hw->output_node_index,
832                                           "error-drop",
833                                           VNET_INTERFACE_OUTPUT_NEXT_DROP);
834       vlib_node_add_next_with_slot (vm, hw->output_node_index,
835                                     hw->tx_node_index,
836                                     VNET_INTERFACE_OUTPUT_NEXT_TX);
837
838       /* add interface to the list of "output-interface" feature arc start nodes
839          and clone nexts from 1st interface if it exists */
840       fcm = vnet_feature_get_config_main (im->output_feature_arc_index);
841       cm = &fcm->config_main;
842       i = vec_len (cm->start_node_indices);
843       vec_validate (cm->start_node_indices, i);
844       cm->start_node_indices[i] = hw->output_node_index;
845       if (hw_index)
846         {
847           /* copy nexts from 1st interface */
848           vnet_hw_interface_t *first_hw;
849           vlib_node_t *first_node;
850
851           first_hw = vnet_get_hw_interface (vnm, /* hw_if_index */ 0);
852           first_node = vlib_get_node (vm, first_hw->output_node_index);
853
854           /* 1st 2 nexts are already added above */
855           for (i = 2; i < vec_len (first_node->next_nodes); i++)
856             vlib_node_add_next_with_slot (vm, hw->output_node_index,
857                                           first_node->next_nodes[i], i);
858         }
859     }
860
861   setup_output_node (vm, hw->output_node_index, hw_class);
862   setup_tx_node (vm, hw->tx_node_index, dev_class);
863
864   /* Call all up/down callbacks with zero flags when interface is created. */
865   vnet_sw_interface_set_flags_helper (vnm, hw->sw_if_index, /* flags */ 0,
866                                       VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE);
867   vnet_hw_interface_set_flags_helper (vnm, hw_index, /* flags */ 0,
868                                       VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE);
869
870   return hw_index;
871 }
872
873 void
874 vnet_delete_hw_interface (vnet_main_t * vnm, u32 hw_if_index)
875 {
876   vnet_interface_main_t *im = &vnm->interface_main;
877   vnet_hw_interface_t *hw = vnet_get_hw_interface (vnm, hw_if_index);
878   vlib_main_t *vm = vnm->vlib_main;
879
880   /* If it is up, mark it down. */
881   if (hw->flags != 0)
882     vnet_hw_interface_set_flags (vnm, hw_if_index, /* flags */ 0);
883
884   /* Call delete callbacks. */
885   call_hw_interface_add_del_callbacks (vnm, hw_if_index, /* is_create */ 0);
886
887   /* Delete software interface corresponding to hardware interface. */
888   vnet_delete_sw_interface (vnm, hw->sw_if_index);
889
890   /* Delete any sub-interfaces. */
891   {
892     u32 id, sw_if_index;
893     /* *INDENT-OFF* */
894     hash_foreach (id, sw_if_index, hw->sub_interface_sw_if_index_by_id, ({
895       vnet_delete_sw_interface (vnm, sw_if_index);
896     }));
897     /* *INDENT-ON* */
898   }
899
900   {
901     vnet_hw_interface_nodes_t *dn;
902     vnet_interface_output_runtime_t *rt =
903       vlib_node_get_runtime_data (vm, hw->output_node_index);
904
905     /* Mark node runtime as deleted so output node (if called) will drop packets. */
906     rt->is_deleted = 1;
907
908     vlib_node_rename (vm, hw->output_node_index,
909                       "interface-%d-output-deleted", hw_if_index);
910     vlib_node_rename (vm, hw->tx_node_index, "interface-%d-tx-deleted",
911                       hw_if_index);
912     vec_add2 (im->deleted_hw_interface_nodes, dn, 1);
913     dn->tx_node_index = hw->tx_node_index;
914     dn->output_node_index = hw->output_node_index;
915   }
916
917   hash_unset_mem (im->hw_interface_by_name, hw->name);
918   vec_free (hw->name);
919
920   pool_put (im->hw_interfaces, hw);
921 }
922
923 void
924 vnet_hw_interface_walk_sw (vnet_main_t * vnm,
925                            u32 hw_if_index,
926                            vnet_hw_sw_interface_walk_t fn, void *ctx)
927 {
928   vnet_hw_interface_t *hi;
929   u32 id, sw_if_index;
930
931   hi = vnet_get_hw_interface (vnm, hw_if_index);
932   /* the super first, then the and sub interfaces */
933   fn (vnm, hi->sw_if_index, ctx);
934
935   /* *INDENT-OFF* */
936   hash_foreach (id, sw_if_index,
937                 hi->sub_interface_sw_if_index_by_id,
938   ({
939     fn (vnm, sw_if_index, ctx);
940   }));
941   /* *INDENT-ON* */
942 }
943
944 static void
945 serialize_vnet_hw_interface_set_class (serialize_main_t * m, va_list * va)
946 {
947   u32 hw_if_index = va_arg (*va, u32);
948   char *hw_class_name = va_arg (*va, char *);
949   serialize_integer (m, hw_if_index, sizeof (hw_if_index));
950   serialize_cstring (m, hw_class_name);
951 }
952
953 static void
954 unserialize_vnet_hw_interface_set_class (serialize_main_t * m, va_list * va)
955 {
956   CLIB_UNUSED (mc_main_t * mc) = va_arg (*va, mc_main_t *);
957   vnet_main_t *vnm = vnet_get_main ();
958   u32 hw_if_index;
959   char *hw_class_name;
960   uword *p;
961   clib_error_t *error;
962
963   unserialize_integer (m, &hw_if_index, sizeof (hw_if_index));
964   unserialize_cstring (m, &hw_class_name);
965   p =
966     hash_get (vnm->interface_main.hw_interface_class_by_name, hw_class_name);
967   ASSERT (p != 0);
968   error = vnet_hw_interface_set_class_helper (vnm, hw_if_index, p[0],
969                                               /* redistribute */ 0);
970   if (error)
971     clib_error_report (error);
972 }
973
974 MC_SERIALIZE_MSG (vnet_hw_interface_set_class_msg, static) =
975 {
976 .name = "vnet_hw_interface_set_class",.serialize =
977     serialize_vnet_hw_interface_set_class,.unserialize =
978     unserialize_vnet_hw_interface_set_class,};
979
980 void
981 vnet_hw_interface_init_for_class (vnet_main_t * vnm, u32 hw_if_index,
982                                   u32 hw_class_index, u32 hw_instance)
983 {
984   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
985   vnet_hw_interface_class_t *hc =
986     vnet_get_hw_interface_class (vnm, hw_class_index);
987
988   hi->hw_class_index = hw_class_index;
989   hi->hw_instance = hw_instance;
990   setup_output_node (vnm->vlib_main, hi->output_node_index, hc);
991 }
992
993 static clib_error_t *
994 vnet_hw_interface_set_class_helper (vnet_main_t * vnm, u32 hw_if_index,
995                                     u32 hw_class_index, u32 redistribute)
996 {
997   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
998   vnet_sw_interface_t *si = vnet_get_sw_interface (vnm, hi->sw_if_index);
999   vnet_hw_interface_class_t *old_class =
1000     vnet_get_hw_interface_class (vnm, hi->hw_class_index);
1001   vnet_hw_interface_class_t *new_class =
1002     vnet_get_hw_interface_class (vnm, hw_class_index);
1003   vnet_device_class_t *dev_class =
1004     vnet_get_device_class (vnm, hi->dev_class_index);
1005   clib_error_t *error = 0;
1006
1007   /* New class equals old class?  Nothing to do. */
1008   if (hi->hw_class_index == hw_class_index)
1009     return 0;
1010
1011   /* No need (and incorrect since admin up flag may be set) to do error checking when
1012      receiving unserialize message. */
1013   if (redistribute)
1014     {
1015       if (si->flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
1016         return clib_error_return (0,
1017                                   "%v must be admin down to change class from %s to %s",
1018                                   hi->name, old_class->name, new_class->name);
1019
1020       /* Make sure interface supports given class. */
1021       if ((new_class->is_valid_class_for_interface
1022            && !new_class->is_valid_class_for_interface (vnm, hw_if_index,
1023                                                         hw_class_index))
1024           || (dev_class->is_valid_class_for_interface
1025               && !dev_class->is_valid_class_for_interface (vnm, hw_if_index,
1026                                                            hw_class_index)))
1027         return clib_error_return (0,
1028                                   "%v class cannot be changed from %s to %s",
1029                                   hi->name, old_class->name, new_class->name);
1030
1031       if (vnm->vlib_main->mc_main)
1032         {
1033           mc_serialize (vnm->vlib_main->mc_main,
1034                         &vnet_hw_interface_set_class_msg, hw_if_index,
1035                         new_class->name);
1036           return 0;
1037         }
1038     }
1039
1040   if (old_class->hw_class_change)
1041     old_class->hw_class_change (vnm, hw_if_index, old_class->index,
1042                                 new_class->index);
1043
1044   vnet_hw_interface_init_for_class (vnm, hw_if_index, new_class->index,
1045                                     /* instance */ ~0);
1046
1047   if (new_class->hw_class_change)
1048     new_class->hw_class_change (vnm, hw_if_index, old_class->index,
1049                                 new_class->index);
1050
1051   if (dev_class->hw_class_change)
1052     dev_class->hw_class_change (vnm, hw_if_index, new_class->index);
1053
1054   return error;
1055 }
1056
1057 clib_error_t *
1058 vnet_hw_interface_set_class (vnet_main_t * vnm, u32 hw_if_index,
1059                              u32 hw_class_index)
1060 {
1061   return vnet_hw_interface_set_class_helper (vnm, hw_if_index, hw_class_index,
1062                                              /* redistribute */ 1);
1063 }
1064
1065 static int
1066 vnet_hw_interface_rx_redirect_to_node_helper (vnet_main_t * vnm,
1067                                               u32 hw_if_index,
1068                                               u32 node_index,
1069                                               u32 redistribute)
1070 {
1071   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
1072   vnet_device_class_t *dev_class = vnet_get_device_class
1073     (vnm, hi->dev_class_index);
1074
1075   if (redistribute)
1076     {
1077       /* $$$$ fixme someday maybe */
1078       ASSERT (vnm->vlib_main->mc_main == 0);
1079     }
1080   if (dev_class->rx_redirect_to_node)
1081     {
1082       dev_class->rx_redirect_to_node (vnm, hw_if_index, node_index);
1083       return 0;
1084     }
1085
1086   return VNET_API_ERROR_UNIMPLEMENTED;
1087 }
1088
1089 int
1090 vnet_hw_interface_rx_redirect_to_node (vnet_main_t * vnm, u32 hw_if_index,
1091                                        u32 node_index)
1092 {
1093   return vnet_hw_interface_rx_redirect_to_node_helper (vnm, hw_if_index,
1094                                                        node_index,
1095                                                        1 /* redistribute */ );
1096 }
1097
1098 word
1099 vnet_sw_interface_compare (vnet_main_t * vnm,
1100                            uword sw_if_index0, uword sw_if_index1)
1101 {
1102   vnet_sw_interface_t *sup0 = vnet_get_sup_sw_interface (vnm, sw_if_index0);
1103   vnet_sw_interface_t *sup1 = vnet_get_sup_sw_interface (vnm, sw_if_index1);
1104   vnet_hw_interface_t *h0 = vnet_get_hw_interface (vnm, sup0->hw_if_index);
1105   vnet_hw_interface_t *h1 = vnet_get_hw_interface (vnm, sup1->hw_if_index);
1106
1107   if (h0 != h1)
1108     return vec_cmp (h0->name, h1->name);
1109   return (word) h0->hw_instance - (word) h1->hw_instance;
1110 }
1111
1112 word
1113 vnet_hw_interface_compare (vnet_main_t * vnm,
1114                            uword hw_if_index0, uword hw_if_index1)
1115 {
1116   vnet_hw_interface_t *h0 = vnet_get_hw_interface (vnm, hw_if_index0);
1117   vnet_hw_interface_t *h1 = vnet_get_hw_interface (vnm, hw_if_index1);
1118
1119   if (h0 != h1)
1120     return vec_cmp (h0->name, h1->name);
1121   return (word) h0->hw_instance - (word) h1->hw_instance;
1122 }
1123
1124 int
1125 vnet_sw_interface_is_p2p (vnet_main_t * vnm, u32 sw_if_index)
1126 {
1127   vnet_hw_interface_t *hw = vnet_get_sup_hw_interface (vnm, sw_if_index);
1128   vnet_hw_interface_class_t *hc =
1129     vnet_get_hw_interface_class (vnm, hw->hw_class_index);
1130
1131   return (hc->flags & VNET_HW_INTERFACE_CLASS_FLAG_P2P);
1132 }
1133
1134 clib_error_t *
1135 vnet_interface_init (vlib_main_t * vm)
1136 {
1137   vnet_main_t *vnm = vnet_get_main ();
1138   vnet_interface_main_t *im = &vnm->interface_main;
1139   vlib_buffer_t *b = 0;
1140   vnet_buffer_opaque_t *o = 0;
1141
1142   /*
1143    * Keep people from shooting themselves in the foot.
1144    */
1145   if (sizeof (b->opaque) != sizeof (vnet_buffer_opaque_t))
1146     {
1147 #define _(a) if (sizeof(o->a) > sizeof (o->unused))                     \
1148       clib_warning                                                      \
1149         ("FATAL: size of opaque union subtype %s is %d (max %d)",       \
1150          #a, sizeof(o->a), sizeof (o->unused));
1151       foreach_buffer_opaque_union_subtype;
1152 #undef _
1153
1154       return clib_error_return
1155         (0, "FATAL: size of vlib buffer opaque %d, size of vnet opaque %d",
1156          sizeof (b->opaque), sizeof (vnet_buffer_opaque_t));
1157     }
1158
1159   im->sw_if_counter_lock = clib_mem_alloc_aligned (CLIB_CACHE_LINE_BYTES,
1160                                                    CLIB_CACHE_LINE_BYTES);
1161   im->sw_if_counter_lock[0] = 1;        /* should be no need */
1162
1163   vec_validate (im->sw_if_counters, VNET_N_SIMPLE_INTERFACE_COUNTER - 1);
1164   im->sw_if_counters[VNET_INTERFACE_COUNTER_DROP].name = "drops";
1165   im->sw_if_counters[VNET_INTERFACE_COUNTER_PUNT].name = "punts";
1166   im->sw_if_counters[VNET_INTERFACE_COUNTER_IP4].name = "ip4";
1167   im->sw_if_counters[VNET_INTERFACE_COUNTER_IP6].name = "ip6";
1168   im->sw_if_counters[VNET_INTERFACE_COUNTER_RX_NO_BUF].name = "rx-no-buf";
1169   im->sw_if_counters[VNET_INTERFACE_COUNTER_RX_MISS].name = "rx-miss";
1170   im->sw_if_counters[VNET_INTERFACE_COUNTER_RX_ERROR].name = "rx-error";
1171   im->sw_if_counters[VNET_INTERFACE_COUNTER_TX_ERROR].name = "tx-error";
1172
1173   vec_validate (im->combined_sw_if_counters,
1174                 VNET_N_COMBINED_INTERFACE_COUNTER - 1);
1175   im->combined_sw_if_counters[VNET_INTERFACE_COUNTER_RX].name = "rx";
1176   im->combined_sw_if_counters[VNET_INTERFACE_COUNTER_TX].name = "tx";
1177
1178   im->sw_if_counter_lock[0] = 0;
1179
1180   im->device_class_by_name = hash_create_string ( /* size */ 0,
1181                                                  sizeof (uword));
1182   {
1183     vnet_device_class_t *c;
1184
1185     c = vnm->device_class_registrations;
1186
1187     while (c)
1188       {
1189         c->index = vec_len (im->device_classes);
1190         hash_set_mem (im->device_class_by_name, c->name, c->index);
1191         vec_add1 (im->device_classes, c[0]);
1192         c = c->next_class_registration;
1193       }
1194   }
1195
1196   im->hw_interface_class_by_name = hash_create_string ( /* size */ 0,
1197                                                        sizeof (uword));
1198
1199   im->sw_if_index_by_sup_and_sub = hash_create_mem (0, sizeof (u64),
1200                                                     sizeof (uword));
1201   {
1202     vnet_hw_interface_class_t *c;
1203
1204     c = vnm->hw_interface_class_registrations;
1205
1206     while (c)
1207       {
1208         c->index = vec_len (im->hw_interface_classes);
1209         hash_set_mem (im->hw_interface_class_by_name, c->name, c->index);
1210
1211         if (NULL == c->build_rewrite)
1212           c->build_rewrite = default_build_rewrite;
1213         if (NULL == c->update_adjacency)
1214           c->update_adjacency = default_update_adjacency;
1215
1216         vec_add1 (im->hw_interface_classes, c[0]);
1217         c = c->next_class_registration;
1218       }
1219   }
1220
1221   {
1222     clib_error_t *error;
1223
1224     if ((error = vlib_call_init_function (vm, vnet_interface_cli_init)))
1225       return error;
1226
1227     return error;
1228   }
1229   vnm->interface_tag_by_sw_if_index = hash_create (0, sizeof (uword));
1230 }
1231
1232 VLIB_INIT_FUNCTION (vnet_interface_init);
1233
1234 /* Kludge to renumber interface names [only!] */
1235 int
1236 vnet_interface_name_renumber (u32 sw_if_index, u32 new_show_dev_instance)
1237 {
1238   int rv;
1239   vnet_main_t *vnm = vnet_get_main ();
1240   vnet_interface_main_t *im = &vnm->interface_main;
1241   vnet_hw_interface_t *hi = vnet_get_sup_hw_interface (vnm, sw_if_index);
1242
1243   vnet_device_class_t *dev_class = vnet_get_device_class
1244     (vnm, hi->dev_class_index);
1245
1246   if (dev_class->name_renumber == 0 || dev_class->format_device_name == 0)
1247     return VNET_API_ERROR_UNIMPLEMENTED;
1248
1249   rv = dev_class->name_renumber (hi, new_show_dev_instance);
1250
1251   if (rv)
1252     return rv;
1253
1254   hash_unset_mem (im->hw_interface_by_name, hi->name);
1255   vec_free (hi->name);
1256   /* Use the mapping we set up to call it Ishmael */
1257   hi->name = format (0, "%U", dev_class->format_device_name,
1258                      hi->dev_instance);
1259
1260   hash_set_mem (im->hw_interface_by_name, hi->name, hi->hw_if_index);
1261   return rv;
1262 }
1263
1264 clib_error_t *
1265 vnet_rename_interface (vnet_main_t * vnm, u32 hw_if_index, char *new_name)
1266 {
1267   vnet_interface_main_t *im = &vnm->interface_main;
1268   vlib_main_t *vm = vnm->vlib_main;
1269   vnet_hw_interface_t *hw;
1270   u8 *old_name;
1271   clib_error_t *error = 0;
1272
1273   hw = vnet_get_hw_interface (vnm, hw_if_index);
1274   if (!hw)
1275     {
1276       return clib_error_return (0,
1277                                 "unable to find hw interface for index %u",
1278                                 hw_if_index);
1279     }
1280
1281   old_name = hw->name;
1282
1283   /* set new hw->name */
1284   hw->name = format (0, "%s", new_name);
1285
1286   /* remove the old name to hw_if_index mapping and install the new one */
1287   hash_unset_mem (im->hw_interface_by_name, old_name);
1288   hash_set_mem (im->hw_interface_by_name, hw->name, hw_if_index);
1289
1290   /* rename tx/output nodes */
1291   vlib_node_rename (vm, hw->tx_node_index, "%v-tx", hw->name);
1292   vlib_node_rename (vm, hw->output_node_index, "%v-output", hw->name);
1293
1294   /* free the old name vector */
1295   vec_free (old_name);
1296
1297   return error;
1298 }
1299
1300 static clib_error_t *
1301 vnet_hw_interface_change_mac_address_helper (vnet_main_t * vnm,
1302                                              u32 hw_if_index, u64 mac_address)
1303 {
1304   clib_error_t *error = 0;
1305   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
1306
1307   if (hi->hw_address)
1308     {
1309       vnet_device_class_t *dev_class =
1310         vnet_get_device_class (vnm, hi->dev_class_index);
1311       if (dev_class->mac_addr_change_function)
1312         {
1313           error =
1314             dev_class->mac_addr_change_function (hi, (char *) &mac_address);
1315         }
1316       if (!error)
1317         {
1318           vnet_hw_interface_class_t *hw_class;
1319
1320           hw_class = vnet_get_hw_interface_class (vnm, hi->hw_class_index);
1321
1322           if (NULL != hw_class->mac_addr_change_function)
1323             hw_class->mac_addr_change_function (hi, (char *) &mac_address);
1324         }
1325       else
1326         {
1327           error =
1328             clib_error_return (0,
1329                                "MAC Address Change is not supported on this interface");
1330         }
1331     }
1332   else
1333     {
1334       error =
1335         clib_error_return (0,
1336                            "mac address change is not supported for interface index %u",
1337                            hw_if_index);
1338     }
1339   return error;
1340 }
1341
1342 clib_error_t *
1343 vnet_hw_interface_change_mac_address (vnet_main_t * vnm, u32 hw_if_index,
1344                                       u64 mac_address)
1345 {
1346   return vnet_hw_interface_change_mac_address_helper
1347     (vnm, hw_if_index, mac_address);
1348 }
1349
1350 vnet_l3_packet_type_t
1351 vnet_link_to_l3_proto (vnet_link_t link)
1352 {
1353   switch (link)
1354     {
1355     case VNET_LINK_IP4:
1356       return (VNET_L3_PACKET_TYPE_IP4);
1357     case VNET_LINK_IP6:
1358       return (VNET_L3_PACKET_TYPE_IP6);
1359     case VNET_LINK_MPLS:
1360       return (VNET_L3_PACKET_TYPE_MPLS_UNICAST);
1361     case VNET_LINK_ARP:
1362       return (VNET_L3_PACKET_TYPE_ARP);
1363     case VNET_LINK_ETHERNET:
1364       ASSERT (0);
1365       break;
1366     }
1367   ASSERT (0);
1368   return (0);
1369 }
1370
1371 u8 *
1372 default_build_rewrite (vnet_main_t * vnm,
1373                        u32 sw_if_index,
1374                        vnet_link_t link_type, const void *dst_address)
1375 {
1376   return (NULL);
1377 }
1378
1379 void
1380 default_update_adjacency (vnet_main_t * vnm, u32 sw_if_index, u32 ai)
1381 {
1382   u8 *rewrite;
1383
1384   rewrite = vnet_build_rewrite_for_sw_interface (vnm, sw_if_index,
1385                                                  adj_get_link_type (ai),
1386                                                  NULL);
1387
1388   adj_nbr_update_rewrite (ai, ADJ_NBR_REWRITE_FLAG_COMPLETE, rewrite);
1389 }
1390
1391
1392 /*
1393  * fd.io coding-style-patch-verification: ON
1394  *
1395  * Local Variables:
1396  * eval: (c-set-style "gnu")
1397  * End:
1398  */