vlib: make runtime_data handling thread-local
[vpp.git] / src / vnet / interface.c
1 /*
2  * Copyright (c) 2015 Cisco and/or its affiliates.
3  * Licensed under the Apache License, Version 2.0 (the "License");
4  * you may not use this file except in compliance with the License.
5  * You may obtain a copy of the License at:
6  *
7  *     http://www.apache.org/licenses/LICENSE-2.0
8  *
9  * Unless required by applicable law or agreed to in writing, software
10  * distributed under the License is distributed on an "AS IS" BASIS,
11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
12  * See the License for the specific language governing permissions and
13  * limitations under the License.
14  */
15 /*
16  * interface.c: VNET interfaces/sub-interfaces
17  *
18  * Copyright (c) 2008 Eliot Dresselhaus
19  *
20  * Permission is hereby granted, free of charge, to any person obtaining
21  * a copy of this software and associated documentation files (the
22  * "Software"), to deal in the Software without restriction, including
23  * without limitation the rights to use, copy, modify, merge, publish,
24  * distribute, sublicense, and/or sell copies of the Software, and to
25  * permit persons to whom the Software is furnished to do so, subject to
26  * the following conditions:
27  *
28  * The above copyright notice and this permission notice shall be
29  * included in all copies or substantial portions of the Software.
30  *
31  *  THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND,
32  *  EXPRESS OR IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF
33  *  MERCHANTABILITY, FITNESS FOR A PARTICULAR PURPOSE AND
34  *  NONINFRINGEMENT. IN NO EVENT SHALL THE AUTHORS OR COPYRIGHT HOLDERS BE
35  *  LIABLE FOR ANY CLAIM, DAMAGES OR OTHER LIABILITY, WHETHER IN AN ACTION
36  *  OF CONTRACT, TORT OR OTHERWISE, ARISING FROM, OUT OF OR IN CONNECTION
37  *  WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE SOFTWARE.
38  */
39
40 #include <vnet/vnet.h>
41 #include <vnet/plugin/plugin.h>
42 #include <vnet/fib/ip6_fib.h>
43 #include <vnet/adj/adj.h>
44
45 #define VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE (1 << 0)
46 #define VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE (1 << 1)
47
48 static clib_error_t *vnet_hw_interface_set_flags_helper (vnet_main_t * vnm,
49                                                          u32 hw_if_index,
50                                                          u32 flags,
51                                                          u32 helper_flags);
52
53 static clib_error_t *vnet_sw_interface_set_flags_helper (vnet_main_t * vnm,
54                                                          u32 sw_if_index,
55                                                          u32 flags,
56                                                          u32 helper_flags);
57
58 static clib_error_t *vnet_hw_interface_set_class_helper (vnet_main_t * vnm,
59                                                          u32 hw_if_index,
60                                                          u32 hw_class_index,
61                                                          u32 redistribute);
62
63 typedef struct
64 {
65   /* Either sw or hw interface index. */
66   u32 sw_hw_if_index;
67
68   /* Flags. */
69   u32 flags;
70 } vnet_sw_hw_interface_state_t;
71
72 static void
73 serialize_vec_vnet_sw_hw_interface_state (serialize_main_t * m, va_list * va)
74 {
75   vnet_sw_hw_interface_state_t *s =
76     va_arg (*va, vnet_sw_hw_interface_state_t *);
77   u32 n = va_arg (*va, u32);
78   u32 i;
79   for (i = 0; i < n; i++)
80     {
81       serialize_integer (m, s[i].sw_hw_if_index,
82                          sizeof (s[i].sw_hw_if_index));
83       serialize_integer (m, s[i].flags, sizeof (s[i].flags));
84     }
85 }
86
87 static void
88 unserialize_vec_vnet_sw_hw_interface_state (serialize_main_t * m,
89                                             va_list * va)
90 {
91   vnet_sw_hw_interface_state_t *s =
92     va_arg (*va, vnet_sw_hw_interface_state_t *);
93   u32 n = va_arg (*va, u32);
94   u32 i;
95   for (i = 0; i < n; i++)
96     {
97       unserialize_integer (m, &s[i].sw_hw_if_index,
98                            sizeof (s[i].sw_hw_if_index));
99       unserialize_integer (m, &s[i].flags, sizeof (s[i].flags));
100     }
101 }
102
103 static void
104 serialize_vnet_sw_hw_interface_set_flags (serialize_main_t * m, va_list * va)
105 {
106   vnet_sw_hw_interface_state_t *s =
107     va_arg (*va, vnet_sw_hw_interface_state_t *);
108   serialize (m, serialize_vec_vnet_sw_hw_interface_state, s, 1);
109 }
110
111 static void
112 unserialize_vnet_sw_interface_set_flags (serialize_main_t * m, va_list * va)
113 {
114   CLIB_UNUSED (mc_main_t * mc) = va_arg (*va, mc_main_t *);
115   vnet_sw_hw_interface_state_t s;
116
117   unserialize (m, unserialize_vec_vnet_sw_hw_interface_state, &s, 1);
118
119   vnet_sw_interface_set_flags_helper
120     (vnet_get_main (), s.sw_hw_if_index, s.flags,
121      /* helper_flags no redistribution */ 0);
122 }
123
124 static void
125 unserialize_vnet_hw_interface_set_flags (serialize_main_t * m, va_list * va)
126 {
127   CLIB_UNUSED (mc_main_t * mc) = va_arg (*va, mc_main_t *);
128   vnet_sw_hw_interface_state_t s;
129
130   unserialize (m, unserialize_vec_vnet_sw_hw_interface_state, &s, 1);
131
132   vnet_hw_interface_set_flags_helper
133     (vnet_get_main (), s.sw_hw_if_index, s.flags,
134      /* helper_flags no redistribution */ 0);
135 }
136
137 MC_SERIALIZE_MSG (vnet_sw_interface_set_flags_msg, static) =
138 {
139 .name = "vnet_sw_interface_set_flags",.serialize =
140     serialize_vnet_sw_hw_interface_set_flags,.unserialize =
141     unserialize_vnet_sw_interface_set_flags,};
142
143 MC_SERIALIZE_MSG (vnet_hw_interface_set_flags_msg, static) =
144 {
145 .name = "vnet_hw_interface_set_flags",.serialize =
146     serialize_vnet_sw_hw_interface_set_flags,.unserialize =
147     unserialize_vnet_hw_interface_set_flags,};
148
149 void
150 serialize_vnet_interface_state (serialize_main_t * m, va_list * va)
151 {
152   vnet_main_t *vnm = va_arg (*va, vnet_main_t *);
153   vnet_sw_hw_interface_state_t *sts = 0, *st;
154   vnet_sw_interface_t *sif;
155   vnet_hw_interface_t *hif;
156   vnet_interface_main_t *im = &vnm->interface_main;
157
158   /* Serialize hardware interface classes since they may have changed.
159      Must do this before sending up/down flags. */
160   /* *INDENT-OFF* */
161   pool_foreach (hif, im->hw_interfaces, ({
162     vnet_hw_interface_class_t * hw_class = vnet_get_hw_interface_class (vnm, hif->hw_class_index);
163     serialize_cstring (m, hw_class->name);
164   }));
165   /* *INDENT-ON* */
166
167   /* Send sw/hw interface state when non-zero. */
168   /* *INDENT-OFF* */
169   pool_foreach (sif, im->sw_interfaces, ({
170     if (sif->flags != 0)
171       {
172         vec_add2 (sts, st, 1);
173         st->sw_hw_if_index = sif->sw_if_index;
174         st->flags = sif->flags;
175       }
176   }));
177   /* *INDENT-ON* */
178
179   vec_serialize (m, sts, serialize_vec_vnet_sw_hw_interface_state);
180
181   if (sts)
182     _vec_len (sts) = 0;
183
184   /* *INDENT-OFF* */
185   pool_foreach (hif, im->hw_interfaces, ({
186     if (hif->flags != 0)
187       {
188         vec_add2 (sts, st, 1);
189         st->sw_hw_if_index = hif->hw_if_index;
190         st->flags = hif->flags;
191       }
192   }));
193   /* *INDENT-ON* */
194
195   vec_serialize (m, sts, serialize_vec_vnet_sw_hw_interface_state);
196
197   vec_free (sts);
198 }
199
200 void
201 unserialize_vnet_interface_state (serialize_main_t * m, va_list * va)
202 {
203   vnet_main_t *vnm = va_arg (*va, vnet_main_t *);
204   vnet_sw_hw_interface_state_t *sts = 0, *st;
205
206   /* First set interface hardware class. */
207   {
208     vnet_interface_main_t *im = &vnm->interface_main;
209     vnet_hw_interface_t *hif;
210     char *class_name;
211     uword *p;
212     clib_error_t *error;
213
214     /* *INDENT-OFF* */
215     pool_foreach (hif, im->hw_interfaces, ({
216       unserialize_cstring (m, &class_name);
217       p = hash_get_mem (im->hw_interface_class_by_name, class_name);
218       ASSERT (p != 0);
219       error = vnet_hw_interface_set_class_helper (vnm, hif->hw_if_index, p[0], /* redistribute */ 0);
220       if (error)
221         clib_error_report (error);
222       vec_free (class_name);
223     }));
224     /* *INDENT-ON* */
225   }
226
227   vec_unserialize (m, &sts, unserialize_vec_vnet_sw_hw_interface_state);
228   vec_foreach (st, sts)
229     vnet_sw_interface_set_flags_helper (vnm, st->sw_hw_if_index, st->flags,
230                                         /* no distribute */ 0);
231   vec_free (sts);
232
233   vec_unserialize (m, &sts, unserialize_vec_vnet_sw_hw_interface_state);
234   vec_foreach (st, sts)
235     vnet_hw_interface_set_flags_helper (vnm, st->sw_hw_if_index, st->flags,
236                                         /* no distribute */ 0);
237   vec_free (sts);
238 }
239
240 static clib_error_t *
241 call_elf_section_interface_callbacks (vnet_main_t * vnm, u32 if_index,
242                                       u32 flags,
243                                       _vnet_interface_function_list_elt_t **
244                                       elts)
245 {
246   _vnet_interface_function_list_elt_t *elt;
247   vnet_interface_function_priority_t prio;
248   clib_error_t *error = 0;
249
250   for (prio = VNET_ITF_FUNC_PRIORITY_LOW;
251        prio <= VNET_ITF_FUNC_PRIORITY_HIGH; prio++)
252     {
253       elt = elts[prio];
254
255       while (elt)
256         {
257           error = elt->fp (vnm, if_index, flags);
258           if (error)
259             return error;
260           elt = elt->next_interface_function;
261         }
262     }
263   return error;
264 }
265
266 static clib_error_t *
267 call_hw_interface_add_del_callbacks (vnet_main_t * vnm, u32 hw_if_index,
268                                      u32 is_create)
269 {
270   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
271   vnet_hw_interface_class_t *hw_class =
272     vnet_get_hw_interface_class (vnm, hi->hw_class_index);
273   vnet_device_class_t *dev_class =
274     vnet_get_device_class (vnm, hi->dev_class_index);
275   clib_error_t *error = 0;
276
277   if (hw_class->interface_add_del_function
278       && (error =
279           hw_class->interface_add_del_function (vnm, hw_if_index, is_create)))
280     return error;
281
282   if (dev_class->interface_add_del_function
283       && (error =
284           dev_class->interface_add_del_function (vnm, hw_if_index,
285                                                  is_create)))
286     return error;
287
288   error = call_elf_section_interface_callbacks
289     (vnm, hw_if_index, is_create, vnm->hw_interface_add_del_functions);
290
291   return error;
292 }
293
294 static clib_error_t *
295 call_sw_interface_add_del_callbacks (vnet_main_t * vnm, u32 sw_if_index,
296                                      u32 is_create)
297 {
298   return call_elf_section_interface_callbacks
299     (vnm, sw_if_index, is_create, vnm->sw_interface_add_del_functions);
300 }
301
302 #define VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE (1 << 0)
303 #define VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE (1 << 1)
304
305 static clib_error_t *
306 vnet_hw_interface_set_flags_helper (vnet_main_t * vnm, u32 hw_if_index,
307                                     u32 flags, u32 helper_flags)
308 {
309   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
310   vnet_hw_interface_class_t *hw_class =
311     vnet_get_hw_interface_class (vnm, hi->hw_class_index);
312   vnet_device_class_t *dev_class =
313     vnet_get_device_class (vnm, hi->dev_class_index);
314   vlib_main_t *vm = vnm->vlib_main;
315   u32 mask;
316   clib_error_t *error = 0;
317   u32 is_create =
318     (helper_flags & VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE) != 0;
319
320   mask =
321     (VNET_HW_INTERFACE_FLAG_LINK_UP | VNET_HW_INTERFACE_FLAG_DUPLEX_MASK |
322      VNET_HW_INTERFACE_FLAG_SPEED_MASK);
323   flags &= mask;
324
325   /* Call hardware interface add/del callbacks. */
326   if (is_create)
327     call_hw_interface_add_del_callbacks (vnm, hw_if_index, is_create);
328
329   /* Already in the desired state? */
330   if (!is_create && (hi->flags & mask) == flags)
331     goto done;
332
333   /* Some interface classes do not redistribute (e.g. are local). */
334   if (!dev_class->redistribute)
335     helper_flags &= ~VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE;
336
337   if (vm->mc_main
338       && (helper_flags & VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE))
339     {
340       vnet_sw_hw_interface_state_t s;
341       s.sw_hw_if_index = hw_if_index;
342       s.flags = flags;
343       mc_serialize (vm->mc_main, &vnet_hw_interface_set_flags_msg, &s);
344     }
345
346   if ((hi->flags & VNET_HW_INTERFACE_FLAG_LINK_UP) !=
347       (flags & VNET_HW_INTERFACE_FLAG_LINK_UP))
348     {
349       /* Do hardware class (e.g. ethernet). */
350       if (hw_class->link_up_down_function
351           && (error = hw_class->link_up_down_function (vnm, hw_if_index,
352                                                        flags)))
353         goto done;
354
355       error = call_elf_section_interface_callbacks
356         (vnm, hw_if_index, flags, vnm->hw_interface_link_up_down_functions);
357
358       if (error)
359         goto done;
360     }
361
362   hi->flags &= ~mask;
363   hi->flags |= flags;
364
365 done:
366   return error;
367 }
368
369 static clib_error_t *
370 vnet_sw_interface_set_flags_helper (vnet_main_t * vnm, u32 sw_if_index,
371                                     u32 flags, u32 helper_flags)
372 {
373   vnet_sw_interface_t *si = vnet_get_sw_interface (vnm, sw_if_index);
374   vlib_main_t *vm = vnm->vlib_main;
375   u32 mask;
376   clib_error_t *error = 0;
377   u32 is_create =
378     (helper_flags & VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE) != 0;
379   u32 old_flags;
380
381   mask = VNET_SW_INTERFACE_FLAG_ADMIN_UP | VNET_SW_INTERFACE_FLAG_PUNT;
382   flags &= mask;
383
384   if (is_create)
385     {
386       error =
387         call_sw_interface_add_del_callbacks (vnm, sw_if_index, is_create);
388       if (error)
389         goto done;
390
391       if (flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
392         {
393           /* Notify everyone when the interface is created as admin up */
394           error = call_elf_section_interface_callbacks (vnm, sw_if_index,
395                                                         flags,
396                                                         vnm->
397                                                         sw_interface_admin_up_down_functions);
398           if (error)
399             goto done;
400         }
401     }
402   else
403     {
404       vnet_sw_interface_t *si_sup = si;
405
406       /* Check that super interface is in correct state. */
407       if (si->type == VNET_SW_INTERFACE_TYPE_SUB)
408         {
409           si_sup = vnet_get_sw_interface (vnm, si->sup_sw_if_index);
410
411           /* Check to see if we're bringing down the soft interface and if it's parent is up */
412           if ((flags != (si_sup->flags & mask)) &&
413               (!((flags == 0)
414                  && ((si_sup->flags & mask) ==
415                      VNET_SW_INTERFACE_FLAG_ADMIN_UP))))
416             {
417               error = clib_error_return (0, "super-interface %U must be %U",
418                                          format_vnet_sw_interface_name, vnm,
419                                          si_sup,
420                                          format_vnet_sw_interface_flags,
421                                          flags);
422               goto done;
423             }
424         }
425
426       /* Donot change state for slave link of bonded interfaces */
427       if (si->flags & VNET_SW_INTERFACE_FLAG_BOND_SLAVE)
428         {
429           error = clib_error_return
430             (0, "not allowed as %U belong to a BondEthernet interface",
431              format_vnet_sw_interface_name, vnm, si);
432           goto done;
433         }
434
435       /* Already in the desired state? */
436       if ((si->flags & mask) == flags)
437         goto done;
438
439       /* Sub-interfaces of hardware interfaces that do no redistribute,
440          do not redistribute themselves. */
441       if (si_sup->type == VNET_SW_INTERFACE_TYPE_HARDWARE)
442         {
443           vnet_hw_interface_t *hi =
444             vnet_get_hw_interface (vnm, si_sup->hw_if_index);
445           vnet_device_class_t *dev_class =
446             vnet_get_device_class (vnm, hi->dev_class_index);
447           if (!dev_class->redistribute)
448             helper_flags &=
449               ~VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE;
450         }
451
452       if (vm->mc_main
453           && (helper_flags &
454               VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE))
455         {
456           vnet_sw_hw_interface_state_t s;
457           s.sw_hw_if_index = sw_if_index;
458           s.flags = flags;
459           mc_serialize (vm->mc_main, &vnet_sw_interface_set_flags_msg, &s);
460         }
461
462       /* set the flags now before invoking the registered clients
463        * so that the state they query is consistent with the state here notified */
464       old_flags = si->flags;
465       si->flags &= ~mask;
466       si->flags |= flags;
467       if ((flags | old_flags) & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
468         error = call_elf_section_interface_callbacks
469           (vnm, sw_if_index, flags,
470            vnm->sw_interface_admin_up_down_functions);
471       si->flags = old_flags;
472
473       if (error)
474         goto done;
475
476       if (si->type == VNET_SW_INTERFACE_TYPE_HARDWARE)
477         {
478           vnet_hw_interface_t *hi =
479             vnet_get_hw_interface (vnm, si->hw_if_index);
480           vnet_hw_interface_class_t *hw_class =
481             vnet_get_hw_interface_class (vnm, hi->hw_class_index);
482           vnet_device_class_t *dev_class =
483             vnet_get_device_class (vnm, hi->dev_class_index);
484
485           if ((flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP) &&
486               (si->flags & VNET_SW_INTERFACE_FLAG_ERROR))
487             {
488               error = clib_error_return (0, "Interface in the error state");
489               goto done;
490             }
491
492           /* save the si admin up flag */
493           old_flags = si->flags;
494
495           /* update si admin up flag in advance if we are going admin down */
496           if (!(flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP))
497             si->flags &= ~VNET_SW_INTERFACE_FLAG_ADMIN_UP;
498
499           if (dev_class->admin_up_down_function
500               && (error = dev_class->admin_up_down_function (vnm,
501                                                              si->hw_if_index,
502                                                              flags)))
503             {
504               /* restore si admin up flag to it's original state on errors */
505               si->flags = old_flags;
506               goto done;
507             }
508
509           if (hw_class->admin_up_down_function
510               && (error = hw_class->admin_up_down_function (vnm,
511                                                             si->hw_if_index,
512                                                             flags)))
513             {
514               /* restore si admin up flag to it's original state on errors */
515               si->flags = old_flags;
516               goto done;
517             }
518
519           /* Admin down implies link down. */
520           if (!(flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
521               && (hi->flags & VNET_HW_INTERFACE_FLAG_LINK_UP))
522             vnet_hw_interface_set_flags_helper (vnm, si->hw_if_index,
523                                                 hi->flags &
524                                                 ~VNET_HW_INTERFACE_FLAG_LINK_UP,
525                                                 helper_flags);
526         }
527     }
528
529   si->flags &= ~mask;
530   si->flags |= flags;
531
532 done:
533   return error;
534 }
535
536 clib_error_t *
537 vnet_hw_interface_set_flags (vnet_main_t * vnm, u32 hw_if_index, u32 flags)
538 {
539   return vnet_hw_interface_set_flags_helper
540     (vnm, hw_if_index, flags,
541      VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE);
542 }
543
544 clib_error_t *
545 vnet_sw_interface_set_flags (vnet_main_t * vnm, u32 sw_if_index, u32 flags)
546 {
547   return vnet_sw_interface_set_flags_helper
548     (vnm, sw_if_index, flags,
549      VNET_INTERFACE_SET_FLAGS_HELPER_WANT_REDISTRIBUTE);
550 }
551
552 static u32
553 vnet_create_sw_interface_no_callbacks (vnet_main_t * vnm,
554                                        vnet_sw_interface_t * template)
555 {
556   vnet_interface_main_t *im = &vnm->interface_main;
557   vnet_sw_interface_t *sw;
558   u32 sw_if_index;
559
560   pool_get (im->sw_interfaces, sw);
561   sw_if_index = sw - im->sw_interfaces;
562
563   sw[0] = template[0];
564
565   sw->flags = 0;
566   sw->sw_if_index = sw_if_index;
567   if (sw->type == VNET_SW_INTERFACE_TYPE_HARDWARE)
568     sw->sup_sw_if_index = sw->sw_if_index;
569
570   /* Allocate counters for this interface. */
571   {
572     u32 i;
573
574     vnet_interface_counter_lock (im);
575
576     for (i = 0; i < vec_len (im->sw_if_counters); i++)
577       {
578         vlib_validate_simple_counter (&im->sw_if_counters[i], sw_if_index);
579         vlib_zero_simple_counter (&im->sw_if_counters[i], sw_if_index);
580       }
581
582     for (i = 0; i < vec_len (im->combined_sw_if_counters); i++)
583       {
584         vlib_validate_combined_counter (&im->combined_sw_if_counters[i],
585                                         sw_if_index);
586         vlib_zero_combined_counter (&im->combined_sw_if_counters[i],
587                                     sw_if_index);
588       }
589
590     vnet_interface_counter_unlock (im);
591   }
592
593   return sw_if_index;
594 }
595
596 clib_error_t *
597 vnet_create_sw_interface (vnet_main_t * vnm, vnet_sw_interface_t * template,
598                           u32 * sw_if_index)
599 {
600   clib_error_t *error;
601   vnet_hw_interface_t *hi;
602   vnet_device_class_t *dev_class;
603
604   hi = vnet_get_sup_hw_interface (vnm, template->sup_sw_if_index);
605   dev_class = vnet_get_device_class (vnm, hi->dev_class_index);
606
607   if (template->type == VNET_SW_INTERFACE_TYPE_SUB &&
608       dev_class->subif_add_del_function)
609     {
610       error = dev_class->subif_add_del_function (vnm, hi->hw_if_index,
611                                                  (struct vnet_sw_interface_t
612                                                   *) template, 1);
613       if (error)
614         return error;
615     }
616
617   *sw_if_index = vnet_create_sw_interface_no_callbacks (vnm, template);
618   error = vnet_sw_interface_set_flags_helper
619     (vnm, *sw_if_index, template->flags,
620      VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE);
621
622   if (error)
623     {
624       /* undo the work done by vnet_create_sw_interface_no_callbacks() */
625       vnet_interface_main_t *im = &vnm->interface_main;
626       vnet_sw_interface_t *sw =
627         pool_elt_at_index (im->sw_interfaces, *sw_if_index);
628       pool_put (im->sw_interfaces, sw);
629     }
630
631   return error;
632 }
633
634 void
635 vnet_delete_sw_interface (vnet_main_t * vnm, u32 sw_if_index)
636 {
637   vnet_interface_main_t *im = &vnm->interface_main;
638   vnet_sw_interface_t *sw =
639     pool_elt_at_index (im->sw_interfaces, sw_if_index);
640
641   /* Check if the interface has config and is removed from L2 BD or XConnect */
642   vlib_main_t *vm = vlib_get_main ();
643   l2_input_config_t *config;
644   if (sw_if_index < vec_len (l2input_main.configs))
645     {
646       config = vec_elt_at_index (l2input_main.configs, sw_if_index);
647       if (config->xconnect)
648         set_int_l2_mode (vm, vnm, MODE_L3, config->output_sw_if_index, 0, 0,
649                          0, 0);
650       if (config->xconnect || config->bridge)
651         set_int_l2_mode (vm, vnm, MODE_L3, sw_if_index, 0, 0, 0, 0);
652     }
653
654   /* Bring down interface in case it is up. */
655   if (sw->flags != 0)
656     vnet_sw_interface_set_flags (vnm, sw_if_index, /* flags */ 0);
657
658   call_sw_interface_add_del_callbacks (vnm, sw_if_index, /* is_create */ 0);
659
660   pool_put (im->sw_interfaces, sw);
661 }
662
663 static void
664 setup_tx_node (vlib_main_t * vm,
665                u32 node_index, vnet_device_class_t * dev_class)
666 {
667   vlib_node_t *n = vlib_get_node (vm, node_index);
668
669   n->function = dev_class->tx_function;
670   n->format_trace = dev_class->format_tx_trace;
671
672   vlib_register_errors (vm, node_index,
673                         dev_class->tx_function_n_errors,
674                         dev_class->tx_function_error_strings);
675 }
676
677 static void
678 setup_output_node (vlib_main_t * vm,
679                    u32 node_index, vnet_hw_interface_class_t * hw_class)
680 {
681   vlib_node_t *n = vlib_get_node (vm, node_index);
682   n->format_buffer = hw_class->format_header;
683   n->unformat_buffer = hw_class->unformat_header;
684 }
685
686 /* Register an interface instance. */
687 u32
688 vnet_register_interface (vnet_main_t * vnm,
689                          u32 dev_class_index,
690                          u32 dev_instance,
691                          u32 hw_class_index, u32 hw_instance)
692 {
693   vnet_interface_main_t *im = &vnm->interface_main;
694   vnet_hw_interface_t *hw;
695   vnet_device_class_t *dev_class =
696     vnet_get_device_class (vnm, dev_class_index);
697   vnet_hw_interface_class_t *hw_class =
698     vnet_get_hw_interface_class (vnm, hw_class_index);
699   vlib_main_t *vm = vnm->vlib_main;
700   vnet_feature_config_main_t *fcm;
701   vnet_config_main_t *cm;
702   u32 hw_index, i;
703   char *tx_node_name, *output_node_name;
704
705   pool_get (im->hw_interfaces, hw);
706
707   hw_index = hw - im->hw_interfaces;
708   hw->hw_if_index = hw_index;
709
710   if (dev_class->format_device_name)
711     hw->name = format (0, "%U", dev_class->format_device_name, dev_instance);
712   else if (hw_class->format_interface_name)
713     hw->name = format (0, "%U", hw_class->format_interface_name,
714                        dev_instance);
715   else
716     hw->name = format (0, "%s%x", hw_class->name, dev_instance);
717
718   if (!im->hw_interface_by_name)
719     im->hw_interface_by_name = hash_create_vec ( /* size */ 0,
720                                                 sizeof (hw->name[0]),
721                                                 sizeof (uword));
722
723   hash_set_mem (im->hw_interface_by_name, hw->name, hw_index);
724
725   /* Make hardware interface point to software interface. */
726   {
727     vnet_sw_interface_t sw = {
728       .type = VNET_SW_INTERFACE_TYPE_HARDWARE,
729       .flood_class = VNET_FLOOD_CLASS_NORMAL,
730       .hw_if_index = hw_index
731     };
732     hw->sw_if_index = vnet_create_sw_interface_no_callbacks (vnm, &sw);
733   }
734
735   hw->dev_class_index = dev_class_index;
736   hw->dev_instance = dev_instance;
737   hw->hw_class_index = hw_class_index;
738   hw->hw_instance = hw_instance;
739
740   hw->max_rate_bits_per_sec = 0;
741   hw->min_packet_bytes = 0;
742   hw->per_packet_overhead_bytes = 0;
743   hw->max_l3_packet_bytes[VLIB_RX] = ~0;
744   hw->max_l3_packet_bytes[VLIB_TX] = ~0;
745
746   tx_node_name = (char *) format (0, "%v-tx", hw->name);
747   output_node_name = (char *) format (0, "%v-output", hw->name);
748
749   /* If we have previously deleted interface nodes, re-use them. */
750   if (vec_len (im->deleted_hw_interface_nodes) > 0)
751     {
752       vnet_hw_interface_nodes_t *hn;
753       vlib_node_t *node;
754       vlib_node_runtime_t *nrt;
755
756       hn = vec_end (im->deleted_hw_interface_nodes) - 1;
757
758       hw->tx_node_index = hn->tx_node_index;
759       hw->output_node_index = hn->output_node_index;
760
761       vlib_node_rename (vm, hw->tx_node_index, "%v", tx_node_name);
762       vlib_node_rename (vm, hw->output_node_index, "%v", output_node_name);
763
764       /* *INDENT-OFF* */
765       foreach_vlib_main ({
766         vnet_interface_output_runtime_t *rt;
767
768         rt = vlib_node_get_runtime_data (this_vlib_main, hw->output_node_index);
769         ASSERT (rt->is_deleted == 1);
770         rt->is_deleted = 0;
771         rt->hw_if_index = hw_index;
772         rt->sw_if_index = hw->sw_if_index;
773         rt->dev_instance = hw->dev_instance;
774
775         rt = vlib_node_get_runtime_data (this_vlib_main, hw->tx_node_index);
776         rt->hw_if_index = hw_index;
777         rt->sw_if_index = hw->sw_if_index;
778         rt->dev_instance = hw->dev_instance;
779       });
780       /* *INDENT-ON* */
781
782       /* The new class may differ from the old one.
783        * Functions have to be updated. */
784       node = vlib_get_node (vm, hw->output_node_index);
785       node->function = dev_class->flatten_output_chains ?
786         vnet_interface_output_node_flatten_multiarch_select () :
787         vnet_interface_output_node_multiarch_select ();
788       node->format_trace = format_vnet_interface_output_trace;
789       nrt = vlib_node_get_runtime (vm, hw->output_node_index);
790       nrt->function = node->function;
791
792       node = vlib_get_node (vm, hw->tx_node_index);
793       node->function = dev_class->tx_function;
794       node->format_trace = dev_class->format_tx_trace;
795       nrt = vlib_node_get_runtime (vm, hw->tx_node_index);
796       nrt->function = node->function;
797
798       _vec_len (im->deleted_hw_interface_nodes) -= 1;
799     }
800   else
801     {
802       vlib_node_registration_t r;
803       vnet_interface_output_runtime_t rt = {
804         .hw_if_index = hw_index,
805         .sw_if_index = hw->sw_if_index,
806         .dev_instance = hw->dev_instance,
807         .is_deleted = 0,
808       };
809
810       memset (&r, 0, sizeof (r));
811       r.type = VLIB_NODE_TYPE_INTERNAL;
812       r.runtime_data = &rt;
813       r.runtime_data_bytes = sizeof (rt);
814       r.scalar_size = 0;
815       r.vector_size = sizeof (u32);
816
817       r.flags = VLIB_NODE_FLAG_IS_OUTPUT;
818       r.name = tx_node_name;
819       r.function = dev_class->tx_function;
820
821       hw->tx_node_index = vlib_register_node (vm, &r);
822
823       vlib_node_add_named_next_with_slot (vm, hw->tx_node_index,
824                                           "error-drop",
825                                           VNET_INTERFACE_TX_NEXT_DROP);
826
827       r.flags = 0;
828       r.name = output_node_name;
829       r.function = dev_class->flatten_output_chains ?
830         vnet_interface_output_node_flatten_multiarch_select () :
831         vnet_interface_output_node_multiarch_select ();
832       r.format_trace = format_vnet_interface_output_trace;
833
834       {
835         static char *e[] = {
836           "interface is down",
837           "interface is deleted",
838         };
839
840         r.n_errors = ARRAY_LEN (e);
841         r.error_strings = e;
842       }
843       hw->output_node_index = vlib_register_node (vm, &r);
844
845       vlib_node_add_named_next_with_slot (vm, hw->output_node_index,
846                                           "error-drop",
847                                           VNET_INTERFACE_OUTPUT_NEXT_DROP);
848       vlib_node_add_next_with_slot (vm, hw->output_node_index,
849                                     hw->tx_node_index,
850                                     VNET_INTERFACE_OUTPUT_NEXT_TX);
851
852       /* add interface to the list of "output-interface" feature arc start nodes
853          and clone nexts from 1st interface if it exists */
854       fcm = vnet_feature_get_config_main (im->output_feature_arc_index);
855       cm = &fcm->config_main;
856       i = vec_len (cm->start_node_indices);
857       vec_validate (cm->start_node_indices, i);
858       cm->start_node_indices[i] = hw->output_node_index;
859       if (hw_index)
860         {
861           /* copy nexts from 1st interface */
862           vnet_hw_interface_t *first_hw;
863           vlib_node_t *first_node;
864
865           first_hw = vnet_get_hw_interface (vnm, /* hw_if_index */ 0);
866           first_node = vlib_get_node (vm, first_hw->output_node_index);
867
868           /* 1st 2 nexts are already added above */
869           for (i = 2; i < vec_len (first_node->next_nodes); i++)
870             vlib_node_add_next_with_slot (vm, hw->output_node_index,
871                                           first_node->next_nodes[i], i);
872         }
873     }
874
875   setup_output_node (vm, hw->output_node_index, hw_class);
876   setup_tx_node (vm, hw->tx_node_index, dev_class);
877
878   /* Call all up/down callbacks with zero flags when interface is created. */
879   vnet_sw_interface_set_flags_helper (vnm, hw->sw_if_index, /* flags */ 0,
880                                       VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE);
881   vnet_hw_interface_set_flags_helper (vnm, hw_index, /* flags */ 0,
882                                       VNET_INTERFACE_SET_FLAGS_HELPER_IS_CREATE);
883
884   return hw_index;
885 }
886
887 void
888 vnet_delete_hw_interface (vnet_main_t * vnm, u32 hw_if_index)
889 {
890   vnet_interface_main_t *im = &vnm->interface_main;
891   vnet_hw_interface_t *hw = vnet_get_hw_interface (vnm, hw_if_index);
892   vlib_main_t *vm = vnm->vlib_main;
893
894   /* If it is up, mark it down. */
895   if (hw->flags != 0)
896     vnet_hw_interface_set_flags (vnm, hw_if_index, /* flags */ 0);
897
898   /* Call delete callbacks. */
899   call_hw_interface_add_del_callbacks (vnm, hw_if_index, /* is_create */ 0);
900
901   /* Delete software interface corresponding to hardware interface. */
902   vnet_delete_sw_interface (vnm, hw->sw_if_index);
903
904   /* Delete any sub-interfaces. */
905   {
906     u32 id, sw_if_index;
907     /* *INDENT-OFF* */
908     hash_foreach (id, sw_if_index, hw->sub_interface_sw_if_index_by_id, ({
909       vnet_delete_sw_interface (vnm, sw_if_index);
910     }));
911     /* *INDENT-ON* */
912   }
913
914   {
915     vnet_hw_interface_nodes_t *dn;
916
917     /* *INDENT-OFF* */
918     foreach_vlib_main ({
919       vnet_interface_output_runtime_t *rt =
920         vlib_node_get_runtime_data (this_vlib_main, hw->output_node_index);
921
922       /* Mark node runtime as deleted so output node (if called)
923        * will drop packets. */
924       rt->is_deleted = 1;
925     });
926     /* *INDENT-ON* */
927
928     vlib_node_rename (vm, hw->output_node_index,
929                       "interface-%d-output-deleted", hw_if_index);
930     vlib_node_rename (vm, hw->tx_node_index, "interface-%d-tx-deleted",
931                       hw_if_index);
932     vec_add2 (im->deleted_hw_interface_nodes, dn, 1);
933     dn->tx_node_index = hw->tx_node_index;
934     dn->output_node_index = hw->output_node_index;
935   }
936
937   hash_unset_mem (im->hw_interface_by_name, hw->name);
938   vec_free (hw->name);
939   vec_free (hw->input_node_thread_index_by_queue);
940   vec_free (hw->dq_runtime_index_by_queue);
941
942   pool_put (im->hw_interfaces, hw);
943 }
944
945 void
946 vnet_hw_interface_walk_sw (vnet_main_t * vnm,
947                            u32 hw_if_index,
948                            vnet_hw_sw_interface_walk_t fn, void *ctx)
949 {
950   vnet_hw_interface_t *hi;
951   u32 id, sw_if_index;
952
953   hi = vnet_get_hw_interface (vnm, hw_if_index);
954   /* the super first, then the and sub interfaces */
955   fn (vnm, hi->sw_if_index, ctx);
956
957   /* *INDENT-OFF* */
958   hash_foreach (id, sw_if_index,
959                 hi->sub_interface_sw_if_index_by_id,
960   ({
961     fn (vnm, sw_if_index, ctx);
962   }));
963   /* *INDENT-ON* */
964 }
965
966 static void
967 serialize_vnet_hw_interface_set_class (serialize_main_t * m, va_list * va)
968 {
969   u32 hw_if_index = va_arg (*va, u32);
970   char *hw_class_name = va_arg (*va, char *);
971   serialize_integer (m, hw_if_index, sizeof (hw_if_index));
972   serialize_cstring (m, hw_class_name);
973 }
974
975 static void
976 unserialize_vnet_hw_interface_set_class (serialize_main_t * m, va_list * va)
977 {
978   CLIB_UNUSED (mc_main_t * mc) = va_arg (*va, mc_main_t *);
979   vnet_main_t *vnm = vnet_get_main ();
980   u32 hw_if_index;
981   char *hw_class_name;
982   uword *p;
983   clib_error_t *error;
984
985   unserialize_integer (m, &hw_if_index, sizeof (hw_if_index));
986   unserialize_cstring (m, &hw_class_name);
987   p =
988     hash_get (vnm->interface_main.hw_interface_class_by_name, hw_class_name);
989   ASSERT (p != 0);
990   error = vnet_hw_interface_set_class_helper (vnm, hw_if_index, p[0],
991                                               /* redistribute */ 0);
992   if (error)
993     clib_error_report (error);
994 }
995
996 MC_SERIALIZE_MSG (vnet_hw_interface_set_class_msg, static) =
997 {
998 .name = "vnet_hw_interface_set_class",.serialize =
999     serialize_vnet_hw_interface_set_class,.unserialize =
1000     unserialize_vnet_hw_interface_set_class,};
1001
1002 void
1003 vnet_hw_interface_init_for_class (vnet_main_t * vnm, u32 hw_if_index,
1004                                   u32 hw_class_index, u32 hw_instance)
1005 {
1006   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
1007   vnet_hw_interface_class_t *hc =
1008     vnet_get_hw_interface_class (vnm, hw_class_index);
1009
1010   hi->hw_class_index = hw_class_index;
1011   hi->hw_instance = hw_instance;
1012   setup_output_node (vnm->vlib_main, hi->output_node_index, hc);
1013 }
1014
1015 static clib_error_t *
1016 vnet_hw_interface_set_class_helper (vnet_main_t * vnm, u32 hw_if_index,
1017                                     u32 hw_class_index, u32 redistribute)
1018 {
1019   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
1020   vnet_sw_interface_t *si = vnet_get_sw_interface (vnm, hi->sw_if_index);
1021   vnet_hw_interface_class_t *old_class =
1022     vnet_get_hw_interface_class (vnm, hi->hw_class_index);
1023   vnet_hw_interface_class_t *new_class =
1024     vnet_get_hw_interface_class (vnm, hw_class_index);
1025   vnet_device_class_t *dev_class =
1026     vnet_get_device_class (vnm, hi->dev_class_index);
1027   clib_error_t *error = 0;
1028
1029   /* New class equals old class?  Nothing to do. */
1030   if (hi->hw_class_index == hw_class_index)
1031     return 0;
1032
1033   /* No need (and incorrect since admin up flag may be set) to do error checking when
1034      receiving unserialize message. */
1035   if (redistribute)
1036     {
1037       if (si->flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
1038         return clib_error_return (0,
1039                                   "%v must be admin down to change class from %s to %s",
1040                                   hi->name, old_class->name, new_class->name);
1041
1042       /* Make sure interface supports given class. */
1043       if ((new_class->is_valid_class_for_interface
1044            && !new_class->is_valid_class_for_interface (vnm, hw_if_index,
1045                                                         hw_class_index))
1046           || (dev_class->is_valid_class_for_interface
1047               && !dev_class->is_valid_class_for_interface (vnm, hw_if_index,
1048                                                            hw_class_index)))
1049         return clib_error_return (0,
1050                                   "%v class cannot be changed from %s to %s",
1051                                   hi->name, old_class->name, new_class->name);
1052
1053       if (vnm->vlib_main->mc_main)
1054         {
1055           mc_serialize (vnm->vlib_main->mc_main,
1056                         &vnet_hw_interface_set_class_msg, hw_if_index,
1057                         new_class->name);
1058           return 0;
1059         }
1060     }
1061
1062   if (old_class->hw_class_change)
1063     old_class->hw_class_change (vnm, hw_if_index, old_class->index,
1064                                 new_class->index);
1065
1066   vnet_hw_interface_init_for_class (vnm, hw_if_index, new_class->index,
1067                                     /* instance */ ~0);
1068
1069   if (new_class->hw_class_change)
1070     new_class->hw_class_change (vnm, hw_if_index, old_class->index,
1071                                 new_class->index);
1072
1073   if (dev_class->hw_class_change)
1074     dev_class->hw_class_change (vnm, hw_if_index, new_class->index);
1075
1076   return error;
1077 }
1078
1079 clib_error_t *
1080 vnet_hw_interface_set_class (vnet_main_t * vnm, u32 hw_if_index,
1081                              u32 hw_class_index)
1082 {
1083   return vnet_hw_interface_set_class_helper (vnm, hw_if_index, hw_class_index,
1084                                              /* redistribute */ 1);
1085 }
1086
1087 static int
1088 vnet_hw_interface_rx_redirect_to_node_helper (vnet_main_t * vnm,
1089                                               u32 hw_if_index,
1090                                               u32 node_index,
1091                                               u32 redistribute)
1092 {
1093   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
1094   vnet_device_class_t *dev_class = vnet_get_device_class
1095     (vnm, hi->dev_class_index);
1096
1097   if (redistribute)
1098     {
1099       /* $$$$ fixme someday maybe */
1100       ASSERT (vnm->vlib_main->mc_main == 0);
1101     }
1102   if (dev_class->rx_redirect_to_node)
1103     {
1104       dev_class->rx_redirect_to_node (vnm, hw_if_index, node_index);
1105       return 0;
1106     }
1107
1108   return VNET_API_ERROR_UNIMPLEMENTED;
1109 }
1110
1111 int
1112 vnet_hw_interface_rx_redirect_to_node (vnet_main_t * vnm, u32 hw_if_index,
1113                                        u32 node_index)
1114 {
1115   return vnet_hw_interface_rx_redirect_to_node_helper (vnm, hw_if_index,
1116                                                        node_index,
1117                                                        1 /* redistribute */ );
1118 }
1119
1120 word
1121 vnet_sw_interface_compare (vnet_main_t * vnm,
1122                            uword sw_if_index0, uword sw_if_index1)
1123 {
1124   vnet_sw_interface_t *sup0 = vnet_get_sup_sw_interface (vnm, sw_if_index0);
1125   vnet_sw_interface_t *sup1 = vnet_get_sup_sw_interface (vnm, sw_if_index1);
1126   vnet_hw_interface_t *h0 = vnet_get_hw_interface (vnm, sup0->hw_if_index);
1127   vnet_hw_interface_t *h1 = vnet_get_hw_interface (vnm, sup1->hw_if_index);
1128
1129   if (h0 != h1)
1130     return vec_cmp (h0->name, h1->name);
1131   return (word) h0->hw_instance - (word) h1->hw_instance;
1132 }
1133
1134 word
1135 vnet_hw_interface_compare (vnet_main_t * vnm,
1136                            uword hw_if_index0, uword hw_if_index1)
1137 {
1138   vnet_hw_interface_t *h0 = vnet_get_hw_interface (vnm, hw_if_index0);
1139   vnet_hw_interface_t *h1 = vnet_get_hw_interface (vnm, hw_if_index1);
1140
1141   if (h0 != h1)
1142     return vec_cmp (h0->name, h1->name);
1143   return (word) h0->hw_instance - (word) h1->hw_instance;
1144 }
1145
1146 int
1147 vnet_sw_interface_is_p2p (vnet_main_t * vnm, u32 sw_if_index)
1148 {
1149   vnet_hw_interface_t *hw = vnet_get_sup_hw_interface (vnm, sw_if_index);
1150   vnet_hw_interface_class_t *hc =
1151     vnet_get_hw_interface_class (vnm, hw->hw_class_index);
1152
1153   return (hc->flags & VNET_HW_INTERFACE_CLASS_FLAG_P2P);
1154 }
1155
1156 clib_error_t *
1157 vnet_interface_init (vlib_main_t * vm)
1158 {
1159   vnet_main_t *vnm = vnet_get_main ();
1160   vnet_interface_main_t *im = &vnm->interface_main;
1161   vlib_buffer_t *b = 0;
1162   vnet_buffer_opaque_t *o = 0;
1163
1164   /*
1165    * Keep people from shooting themselves in the foot.
1166    */
1167   if (sizeof (b->opaque) != sizeof (vnet_buffer_opaque_t))
1168     {
1169 #define _(a) if (sizeof(o->a) > sizeof (o->unused))                     \
1170       clib_warning                                                      \
1171         ("FATAL: size of opaque union subtype %s is %d (max %d)",       \
1172          #a, sizeof(o->a), sizeof (o->unused));
1173       foreach_buffer_opaque_union_subtype;
1174 #undef _
1175
1176       return clib_error_return
1177         (0, "FATAL: size of vlib buffer opaque %d, size of vnet opaque %d",
1178          sizeof (b->opaque), sizeof (vnet_buffer_opaque_t));
1179     }
1180
1181   im->sw_if_counter_lock = clib_mem_alloc_aligned (CLIB_CACHE_LINE_BYTES,
1182                                                    CLIB_CACHE_LINE_BYTES);
1183   im->sw_if_counter_lock[0] = 1;        /* should be no need */
1184
1185   vec_validate (im->sw_if_counters, VNET_N_SIMPLE_INTERFACE_COUNTER - 1);
1186   im->sw_if_counters[VNET_INTERFACE_COUNTER_DROP].name = "drops";
1187   im->sw_if_counters[VNET_INTERFACE_COUNTER_PUNT].name = "punts";
1188   im->sw_if_counters[VNET_INTERFACE_COUNTER_IP4].name = "ip4";
1189   im->sw_if_counters[VNET_INTERFACE_COUNTER_IP6].name = "ip6";
1190   im->sw_if_counters[VNET_INTERFACE_COUNTER_RX_NO_BUF].name = "rx-no-buf";
1191   im->sw_if_counters[VNET_INTERFACE_COUNTER_RX_MISS].name = "rx-miss";
1192   im->sw_if_counters[VNET_INTERFACE_COUNTER_RX_ERROR].name = "rx-error";
1193   im->sw_if_counters[VNET_INTERFACE_COUNTER_TX_ERROR].name = "tx-error";
1194
1195   vec_validate (im->combined_sw_if_counters,
1196                 VNET_N_COMBINED_INTERFACE_COUNTER - 1);
1197   im->combined_sw_if_counters[VNET_INTERFACE_COUNTER_RX].name = "rx";
1198   im->combined_sw_if_counters[VNET_INTERFACE_COUNTER_TX].name = "tx";
1199
1200   im->sw_if_counter_lock[0] = 0;
1201
1202   im->device_class_by_name = hash_create_string ( /* size */ 0,
1203                                                  sizeof (uword));
1204   {
1205     vnet_device_class_t *c;
1206
1207     c = vnm->device_class_registrations;
1208
1209     while (c)
1210       {
1211         c->index = vec_len (im->device_classes);
1212         hash_set_mem (im->device_class_by_name, c->name, c->index);
1213         vec_add1 (im->device_classes, c[0]);
1214         c = c->next_class_registration;
1215       }
1216   }
1217
1218   im->hw_interface_class_by_name = hash_create_string ( /* size */ 0,
1219                                                        sizeof (uword));
1220
1221   im->sw_if_index_by_sup_and_sub = hash_create_mem (0, sizeof (u64),
1222                                                     sizeof (uword));
1223   {
1224     vnet_hw_interface_class_t *c;
1225
1226     c = vnm->hw_interface_class_registrations;
1227
1228     while (c)
1229       {
1230         c->index = vec_len (im->hw_interface_classes);
1231         hash_set_mem (im->hw_interface_class_by_name, c->name, c->index);
1232
1233         if (NULL == c->build_rewrite)
1234           c->build_rewrite = default_build_rewrite;
1235         if (NULL == c->update_adjacency)
1236           c->update_adjacency = default_update_adjacency;
1237
1238         vec_add1 (im->hw_interface_classes, c[0]);
1239         c = c->next_class_registration;
1240       }
1241   }
1242
1243   {
1244     clib_error_t *error;
1245
1246     if ((error = vlib_call_init_function (vm, vnet_interface_cli_init)))
1247       return error;
1248
1249     return error;
1250   }
1251   vnm->interface_tag_by_sw_if_index = hash_create (0, sizeof (uword));
1252 }
1253
1254 VLIB_INIT_FUNCTION (vnet_interface_init);
1255
1256 /* Kludge to renumber interface names [only!] */
1257 int
1258 vnet_interface_name_renumber (u32 sw_if_index, u32 new_show_dev_instance)
1259 {
1260   int rv;
1261   vnet_main_t *vnm = vnet_get_main ();
1262   vnet_interface_main_t *im = &vnm->interface_main;
1263   vnet_hw_interface_t *hi = vnet_get_sup_hw_interface (vnm, sw_if_index);
1264
1265   vnet_device_class_t *dev_class = vnet_get_device_class
1266     (vnm, hi->dev_class_index);
1267
1268   if (dev_class->name_renumber == 0 || dev_class->format_device_name == 0)
1269     return VNET_API_ERROR_UNIMPLEMENTED;
1270
1271   rv = dev_class->name_renumber (hi, new_show_dev_instance);
1272
1273   if (rv)
1274     return rv;
1275
1276   hash_unset_mem (im->hw_interface_by_name, hi->name);
1277   vec_free (hi->name);
1278   /* Use the mapping we set up to call it Ishmael */
1279   hi->name = format (0, "%U", dev_class->format_device_name,
1280                      hi->dev_instance);
1281
1282   hash_set_mem (im->hw_interface_by_name, hi->name, hi->hw_if_index);
1283   return rv;
1284 }
1285
1286 clib_error_t *
1287 vnet_rename_interface (vnet_main_t * vnm, u32 hw_if_index, char *new_name)
1288 {
1289   vnet_interface_main_t *im = &vnm->interface_main;
1290   vlib_main_t *vm = vnm->vlib_main;
1291   vnet_hw_interface_t *hw;
1292   u8 *old_name;
1293   clib_error_t *error = 0;
1294
1295   hw = vnet_get_hw_interface (vnm, hw_if_index);
1296   if (!hw)
1297     {
1298       return clib_error_return (0,
1299                                 "unable to find hw interface for index %u",
1300                                 hw_if_index);
1301     }
1302
1303   old_name = hw->name;
1304
1305   /* set new hw->name */
1306   hw->name = format (0, "%s", new_name);
1307
1308   /* remove the old name to hw_if_index mapping and install the new one */
1309   hash_unset_mem (im->hw_interface_by_name, old_name);
1310   hash_set_mem (im->hw_interface_by_name, hw->name, hw_if_index);
1311
1312   /* rename tx/output nodes */
1313   vlib_node_rename (vm, hw->tx_node_index, "%v-tx", hw->name);
1314   vlib_node_rename (vm, hw->output_node_index, "%v-output", hw->name);
1315
1316   /* free the old name vector */
1317   vec_free (old_name);
1318
1319   return error;
1320 }
1321
1322 static clib_error_t *
1323 vnet_hw_interface_change_mac_address_helper (vnet_main_t * vnm,
1324                                              u32 hw_if_index, u64 mac_address)
1325 {
1326   clib_error_t *error = 0;
1327   vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
1328
1329   if (hi->hw_address)
1330     {
1331       vnet_device_class_t *dev_class =
1332         vnet_get_device_class (vnm, hi->dev_class_index);
1333       if (dev_class->mac_addr_change_function)
1334         {
1335           error =
1336             dev_class->mac_addr_change_function (hi, (char *) &mac_address);
1337         }
1338       if (!error)
1339         {
1340           vnet_hw_interface_class_t *hw_class;
1341
1342           hw_class = vnet_get_hw_interface_class (vnm, hi->hw_class_index);
1343
1344           if (NULL != hw_class->mac_addr_change_function)
1345             hw_class->mac_addr_change_function (hi, (char *) &mac_address);
1346         }
1347       else
1348         {
1349           error =
1350             clib_error_return (0,
1351                                "MAC Address Change is not supported on this interface");
1352         }
1353     }
1354   else
1355     {
1356       error =
1357         clib_error_return (0,
1358                            "mac address change is not supported for interface index %u",
1359                            hw_if_index);
1360     }
1361   return error;
1362 }
1363
1364 clib_error_t *
1365 vnet_hw_interface_change_mac_address (vnet_main_t * vnm, u32 hw_if_index,
1366                                       u64 mac_address)
1367 {
1368   return vnet_hw_interface_change_mac_address_helper
1369     (vnm, hw_if_index, mac_address);
1370 }
1371
1372 vnet_l3_packet_type_t
1373 vnet_link_to_l3_proto (vnet_link_t link)
1374 {
1375   switch (link)
1376     {
1377     case VNET_LINK_IP4:
1378       return (VNET_L3_PACKET_TYPE_IP4);
1379     case VNET_LINK_IP6:
1380       return (VNET_L3_PACKET_TYPE_IP6);
1381     case VNET_LINK_MPLS:
1382       return (VNET_L3_PACKET_TYPE_MPLS);
1383     case VNET_LINK_ARP:
1384       return (VNET_L3_PACKET_TYPE_ARP);
1385     case VNET_LINK_ETHERNET:
1386     case VNET_LINK_NSH:
1387       ASSERT (0);
1388       break;
1389     }
1390   ASSERT (0);
1391   return (0);
1392 }
1393
1394 u8 *
1395 default_build_rewrite (vnet_main_t * vnm,
1396                        u32 sw_if_index,
1397                        vnet_link_t link_type, const void *dst_address)
1398 {
1399   return (NULL);
1400 }
1401
1402 void
1403 default_update_adjacency (vnet_main_t * vnm, u32 sw_if_index, u32 ai)
1404 {
1405   u8 *rewrite;
1406
1407   rewrite = vnet_build_rewrite_for_sw_interface (vnm, sw_if_index,
1408                                                  adj_get_link_type (ai),
1409                                                  NULL);
1410
1411   adj_nbr_update_rewrite (ai, ADJ_NBR_REWRITE_FLAG_COMPLETE, rewrite);
1412 }
1413
1414
1415 /*
1416  * fd.io coding-style-patch-verification: ON
1417  *
1418  * Local Variables:
1419  * eval: (c-set-style "gnu")
1420  * End:
1421  */