VPP-933 VPP crashes when deleting an ARP entry
[vpp.git] / src / vnet / ethernet / arp.c
1 /*
2  * ethernet/arp.c: IP v4 ARP node
3  *
4  * Copyright (c) 2010 Cisco and/or its affiliates.
5  * Licensed under the Apache License, Version 2.0 (the "License");
6  * you may not use this file except in compliance with the License.
7  * You may obtain a copy of the License at:
8  *
9  *     http://www.apache.org/licenses/LICENSE-2.0
10  *
11  * Unless required by applicable law or agreed to in writing, software
12  * distributed under the License is distributed on an "AS IS" BASIS,
13  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
14  * See the License for the specific language governing permissions and
15  * limitations under the License.
16  */
17
18 #include <vnet/ip/ip.h>
19 #include <vnet/ip/ip6.h>
20 #include <vnet/ethernet/ethernet.h>
21 #include <vnet/ethernet/arp_packet.h>
22 #include <vnet/l2/l2_input.h>
23 #include <vppinfra/mhash.h>
24 #include <vnet/fib/ip4_fib.h>
25 #include <vnet/fib/fib_entry_src.h>
26 #include <vnet/adj/adj_nbr.h>
27 #include <vnet/adj/adj_mcast.h>
28 #include <vnet/mpls/mpls.h>
29
30 /**
31  * @file
32  * @brief IPv4 ARP.
33  *
34  * This file contains code to manage the IPv4 ARP tables (IP Address
35  * to MAC Address lookup).
36  */
37
38
39 void vl_api_rpc_call_main_thread (void *fp, u8 * data, u32 data_length);
40
41 /**
42  * @brief Per-interface ARP configuration and state
43  */
44 typedef struct ethernet_arp_interface_t_
45 {
46   /**
47    * Hash table of ARP entries.
48    * Since this hash table is per-interface, the key is only the IPv4 address.
49    */
50   uword *arp_entries;
51 } ethernet_arp_interface_t;
52
53 typedef struct
54 {
55   u32 lo_addr;
56   u32 hi_addr;
57   u32 fib_index;
58 } ethernet_proxy_arp_t;
59
60 typedef struct
61 {
62   u32 next_index;
63   uword node_index;
64   uword type_opaque;
65   uword data;
66   /* Used for arp event notification only */
67   void *data_callback;
68   u32 pid;
69 } pending_resolution_t;
70
71 typedef struct
72 {
73   /* Hash tables mapping name to opcode. */
74   uword *opcode_by_name;
75
76   /* lite beer "glean" adjacency handling */
77   uword *pending_resolutions_by_address;
78   pending_resolution_t *pending_resolutions;
79
80   /* Mac address change notification */
81   uword *mac_changes_by_address;
82   pending_resolution_t *mac_changes;
83
84   ethernet_arp_ip4_entry_t *ip4_entry_pool;
85
86   /* ARP attack mitigation */
87   u32 arp_delete_rotor;
88   u32 limit_arp_cache_size;
89
90   /** Per interface state */
91   ethernet_arp_interface_t *ethernet_arp_by_sw_if_index;
92
93   /* Proxy arp vector */
94   ethernet_proxy_arp_t *proxy_arps;
95 } ethernet_arp_main_t;
96
97 static ethernet_arp_main_t ethernet_arp_main;
98
99 typedef struct
100 {
101   u32 sw_if_index;
102   ethernet_arp_ip4_over_ethernet_address_t a;
103   int is_static;
104   int is_no_fib_entry;
105   int flags;
106 #define ETHERNET_ARP_ARGS_REMOVE (1<<0)
107 #define ETHERNET_ARP_ARGS_FLUSH  (1<<1)
108 #define ETHERNET_ARP_ARGS_POPULATE  (1<<2)
109 } vnet_arp_set_ip4_over_ethernet_rpc_args_t;
110
111 static const u8 vrrp_prefix[] = { 0x00, 0x00, 0x5E, 0x00, 0x01 };
112
113 /* Node index for send_garp_na_process */
114 u32 send_garp_na_process_node_index;
115
116 static void
117 set_ip4_over_ethernet_rpc_callback (vnet_arp_set_ip4_over_ethernet_rpc_args_t
118                                     * a);
119
120 static u8 *
121 format_ethernet_arp_hardware_type (u8 * s, va_list * va)
122 {
123   ethernet_arp_hardware_type_t h = va_arg (*va, ethernet_arp_hardware_type_t);
124   char *t = 0;
125   switch (h)
126     {
127 #define _(n,f) case n: t = #f; break;
128       foreach_ethernet_arp_hardware_type;
129 #undef _
130
131     default:
132       return format (s, "unknown 0x%x", h);
133     }
134
135   return format (s, "%s", t);
136 }
137
138 static u8 *
139 format_ethernet_arp_opcode (u8 * s, va_list * va)
140 {
141   ethernet_arp_opcode_t o = va_arg (*va, ethernet_arp_opcode_t);
142   char *t = 0;
143   switch (o)
144     {
145 #define _(f) case ETHERNET_ARP_OPCODE_##f: t = #f; break;
146       foreach_ethernet_arp_opcode;
147 #undef _
148
149     default:
150       return format (s, "unknown 0x%x", o);
151     }
152
153   return format (s, "%s", t);
154 }
155
156 static uword
157 unformat_ethernet_arp_opcode_host_byte_order (unformat_input_t * input,
158                                               va_list * args)
159 {
160   int *result = va_arg (*args, int *);
161   ethernet_arp_main_t *am = &ethernet_arp_main;
162   int x, i;
163
164   /* Numeric opcode. */
165   if (unformat (input, "0x%x", &x) || unformat (input, "%d", &x))
166     {
167       if (x >= (1 << 16))
168         return 0;
169       *result = x;
170       return 1;
171     }
172
173   /* Named type. */
174   if (unformat_user (input, unformat_vlib_number_by_name,
175                      am->opcode_by_name, &i))
176     {
177       *result = i;
178       return 1;
179     }
180
181   return 0;
182 }
183
184 static uword
185 unformat_ethernet_arp_opcode_net_byte_order (unformat_input_t * input,
186                                              va_list * args)
187 {
188   int *result = va_arg (*args, int *);
189   if (!unformat_user
190       (input, unformat_ethernet_arp_opcode_host_byte_order, result))
191     return 0;
192
193   *result = clib_host_to_net_u16 ((u16) * result);
194   return 1;
195 }
196
197 static u8 *
198 format_ethernet_arp_header (u8 * s, va_list * va)
199 {
200   ethernet_arp_header_t *a = va_arg (*va, ethernet_arp_header_t *);
201   u32 max_header_bytes = va_arg (*va, u32);
202   uword indent;
203   u16 l2_type, l3_type;
204
205   if (max_header_bytes != 0 && sizeof (a[0]) > max_header_bytes)
206     return format (s, "ARP header truncated");
207
208   l2_type = clib_net_to_host_u16 (a->l2_type);
209   l3_type = clib_net_to_host_u16 (a->l3_type);
210
211   indent = format_get_indent (s);
212
213   s = format (s, "%U, type %U/%U, address size %d/%d",
214               format_ethernet_arp_opcode, clib_net_to_host_u16 (a->opcode),
215               format_ethernet_arp_hardware_type, l2_type,
216               format_ethernet_type, l3_type,
217               a->n_l2_address_bytes, a->n_l3_address_bytes);
218
219   if (l2_type == ETHERNET_ARP_HARDWARE_TYPE_ethernet
220       && l3_type == ETHERNET_TYPE_IP4)
221     {
222       s = format (s, "\n%U%U/%U -> %U/%U",
223                   format_white_space, indent,
224                   format_ethernet_address, a->ip4_over_ethernet[0].ethernet,
225                   format_ip4_address, &a->ip4_over_ethernet[0].ip4,
226                   format_ethernet_address, a->ip4_over_ethernet[1].ethernet,
227                   format_ip4_address, &a->ip4_over_ethernet[1].ip4);
228     }
229   else
230     {
231       uword n2 = a->n_l2_address_bytes;
232       uword n3 = a->n_l3_address_bytes;
233       s = format (s, "\n%U%U/%U -> %U/%U",
234                   format_white_space, indent,
235                   format_hex_bytes, a->data + 0 * n2 + 0 * n3, n2,
236                   format_hex_bytes, a->data + 1 * n2 + 0 * n3, n3,
237                   format_hex_bytes, a->data + 1 * n2 + 1 * n3, n2,
238                   format_hex_bytes, a->data + 2 * n2 + 1 * n3, n3);
239     }
240
241   return s;
242 }
243
244 u8 *
245 format_ethernet_arp_ip4_entry (u8 * s, va_list * va)
246 {
247   vnet_main_t *vnm = va_arg (*va, vnet_main_t *);
248   ethernet_arp_ip4_entry_t *e = va_arg (*va, ethernet_arp_ip4_entry_t *);
249   vnet_sw_interface_t *si;
250   u8 *flags = 0;
251
252   if (!e)
253     return format (s, "%=12s%=16s%=6s%=20s%=24s", "Time", "IP4",
254                    "Flags", "Ethernet", "Interface");
255
256   si = vnet_get_sw_interface (vnm, e->sw_if_index);
257
258   if (e->flags & ETHERNET_ARP_IP4_ENTRY_FLAG_STATIC)
259     flags = format (flags, "S");
260
261   if (e->flags & ETHERNET_ARP_IP4_ENTRY_FLAG_DYNAMIC)
262     flags = format (flags, "D");
263
264   if (e->flags & ETHERNET_ARP_IP4_ENTRY_FLAG_NO_FIB_ENTRY)
265     flags = format (flags, "N");
266
267   s = format (s, "%=12U%=16U%=6s%=20U%U",
268               format_vlib_cpu_time, vnm->vlib_main, e->cpu_time_last_updated,
269               format_ip4_address, &e->ip4_address,
270               flags ? (char *) flags : "",
271               format_ethernet_address, e->ethernet_address,
272               format_vnet_sw_interface_name, vnm, si);
273
274   vec_free (flags);
275   return s;
276 }
277
278 typedef struct
279 {
280   u8 packet_data[64];
281 } ethernet_arp_input_trace_t;
282
283 static u8 *
284 format_ethernet_arp_input_trace (u8 * s, va_list * va)
285 {
286   CLIB_UNUSED (vlib_main_t * vm) = va_arg (*va, vlib_main_t *);
287   CLIB_UNUSED (vlib_node_t * node) = va_arg (*va, vlib_node_t *);
288   ethernet_arp_input_trace_t *t = va_arg (*va, ethernet_arp_input_trace_t *);
289
290   s = format (s, "%U",
291               format_ethernet_arp_header,
292               t->packet_data, sizeof (t->packet_data));
293
294   return s;
295 }
296
297 static u8 *
298 format_arp_term_input_trace (u8 * s, va_list * va)
299 {
300   CLIB_UNUSED (vlib_main_t * vm) = va_arg (*va, vlib_main_t *);
301   CLIB_UNUSED (vlib_node_t * node) = va_arg (*va, vlib_node_t *);
302   ethernet_arp_input_trace_t *t = va_arg (*va, ethernet_arp_input_trace_t *);
303
304   /* arp-term trace data saved is either arp or ip6/icmp6 packet:
305      - for arp, the 1st 16-bit field is hw type of value of 0x0001.
306      - for ip6, the first nibble has value of 6. */
307   s = format (s, "%U", t->packet_data[0] == 0 ?
308               format_ethernet_arp_header : format_ip6_header,
309               t->packet_data, sizeof (t->packet_data));
310
311   return s;
312 }
313
314 static void
315 arp_nbr_probe (ip_adjacency_t * adj)
316 {
317   vnet_main_t *vnm = vnet_get_main ();
318   ip4_main_t *im = &ip4_main;
319   ip_interface_address_t *ia;
320   ethernet_arp_header_t *h;
321   vnet_hw_interface_t *hi;
322   vnet_sw_interface_t *si;
323   ip4_address_t *src;
324   vlib_buffer_t *b;
325   vlib_main_t *vm;
326   u32 bi = 0;
327
328   vm = vlib_get_main ();
329
330   si = vnet_get_sw_interface (vnm, adj->rewrite_header.sw_if_index);
331
332   if (!(si->flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP))
333     {
334       return;
335     }
336
337   src =
338     ip4_interface_address_matching_destination (im,
339                                                 &adj->sub_type.nbr.next_hop.
340                                                 ip4,
341                                                 adj->rewrite_header.
342                                                 sw_if_index, &ia);
343   if (!src)
344     {
345       return;
346     }
347
348   h =
349     vlib_packet_template_get_packet (vm, &im->ip4_arp_request_packet_template,
350                                      &bi);
351
352   hi = vnet_get_sup_hw_interface (vnm, adj->rewrite_header.sw_if_index);
353
354   clib_memcpy (h->ip4_over_ethernet[0].ethernet,
355                hi->hw_address, sizeof (h->ip4_over_ethernet[0].ethernet));
356
357   h->ip4_over_ethernet[0].ip4 = src[0];
358   h->ip4_over_ethernet[1].ip4 = adj->sub_type.nbr.next_hop.ip4;
359
360   b = vlib_get_buffer (vm, bi);
361   vnet_buffer (b)->sw_if_index[VLIB_RX] =
362     vnet_buffer (b)->sw_if_index[VLIB_TX] = adj->rewrite_header.sw_if_index;
363
364   /* Add encapsulation string for software interface (e.g. ethernet header). */
365   vnet_rewrite_one_header (adj[0], h, sizeof (ethernet_header_t));
366   vlib_buffer_advance (b, -adj->rewrite_header.data_bytes);
367
368   {
369     vlib_frame_t *f = vlib_get_frame_to_node (vm, hi->output_node_index);
370     u32 *to_next = vlib_frame_vector_args (f);
371     to_next[0] = bi;
372     f->n_vectors = 1;
373     vlib_put_frame_to_node (vm, hi->output_node_index, f);
374   }
375 }
376
377 static void
378 arp_mk_complete (adj_index_t ai, ethernet_arp_ip4_entry_t * e)
379 {
380   adj_nbr_update_rewrite
381     (ai, ADJ_NBR_REWRITE_FLAG_COMPLETE,
382      ethernet_build_rewrite (vnet_get_main (),
383                              e->sw_if_index,
384                              adj_get_link_type (ai), e->ethernet_address));
385 }
386
387 static void
388 arp_mk_incomplete (adj_index_t ai)
389 {
390   ip_adjacency_t *adj = adj_get (ai);
391
392   adj_nbr_update_rewrite
393     (ai,
394      ADJ_NBR_REWRITE_FLAG_INCOMPLETE,
395      ethernet_build_rewrite (vnet_get_main (),
396                              adj->rewrite_header.sw_if_index,
397                              VNET_LINK_ARP,
398                              VNET_REWRITE_FOR_SW_INTERFACE_ADDRESS_BROADCAST));
399 }
400
401 static ethernet_arp_ip4_entry_t *
402 arp_entry_find (ethernet_arp_interface_t * eai, const ip4_address_t * addr)
403 {
404   ethernet_arp_main_t *am = &ethernet_arp_main;
405   ethernet_arp_ip4_entry_t *e = NULL;
406   uword *p;
407
408   if (NULL != eai->arp_entries)
409     {
410       p = hash_get (eai->arp_entries, addr->as_u32);
411       if (!p)
412         return (NULL);
413
414       e = pool_elt_at_index (am->ip4_entry_pool, p[0]);
415     }
416
417   return (e);
418 }
419
420 static adj_walk_rc_t
421 arp_mk_complete_walk (adj_index_t ai, void *ctx)
422 {
423   ethernet_arp_ip4_entry_t *e = ctx;
424
425   arp_mk_complete (ai, e);
426
427   return (ADJ_WALK_RC_CONTINUE);
428 }
429
430 static adj_walk_rc_t
431 arp_mk_incomplete_walk (adj_index_t ai, void *ctx)
432 {
433   arp_mk_incomplete (ai);
434
435   return (ADJ_WALK_RC_CONTINUE);
436 }
437
438 void
439 arp_update_adjacency (vnet_main_t * vnm, u32 sw_if_index, u32 ai)
440 {
441   ethernet_arp_main_t *am = &ethernet_arp_main;
442   ethernet_arp_interface_t *arp_int;
443   ethernet_arp_ip4_entry_t *e;
444   ip_adjacency_t *adj;
445
446   adj = adj_get (ai);
447
448   vec_validate (am->ethernet_arp_by_sw_if_index, sw_if_index);
449   arp_int = &am->ethernet_arp_by_sw_if_index[sw_if_index];
450   e = arp_entry_find (arp_int, &adj->sub_type.nbr.next_hop.ip4);
451
452   switch (adj->lookup_next_index)
453     {
454     case IP_LOOKUP_NEXT_ARP:
455     case IP_LOOKUP_NEXT_GLEAN:
456       if (NULL != e)
457         {
458           adj_nbr_walk_nh4 (sw_if_index,
459                             &e->ip4_address, arp_mk_complete_walk, e);
460         }
461       else
462         {
463           /*
464            * no matching ARP entry.
465            * construct the rewrite required to for an ARP packet, and stick
466            * that in the adj's pipe to smoke.
467            */
468           adj_nbr_update_rewrite
469             (ai,
470              ADJ_NBR_REWRITE_FLAG_INCOMPLETE,
471              ethernet_build_rewrite
472              (vnm,
473               sw_if_index,
474               VNET_LINK_ARP,
475               VNET_REWRITE_FOR_SW_INTERFACE_ADDRESS_BROADCAST));
476
477           /*
478            * since the FIB has added this adj for a route, it makes sense it
479            * may want to forward traffic sometime soon. Let's send a
480            * speculative ARP. just one. If we were to do periodically that
481            * wouldn't be bad either, but that's more code than i'm prepared to
482            * write at this time for relatively little reward.
483            */
484           arp_nbr_probe (adj);
485         }
486       break;
487     case IP_LOOKUP_NEXT_MCAST:
488       {
489         /*
490          * Construct a partial rewrite from the known ethernet mcast dest MAC
491          */
492         u8 *rewrite;
493         u8 offset;
494
495         rewrite = ethernet_build_rewrite (vnm,
496                                           sw_if_index,
497                                           adj->ia_link,
498                                           ethernet_ip4_mcast_dst_addr ());
499         offset = vec_len (rewrite) - 2;
500
501         /*
502          * Complete the remaining fields of the adj's rewrite to direct the
503          * complete of the rewrite at switch time by copying in the IP
504          * dst address's bytes.
505          * Ofset is 2 bytes into the MAC desintation address. And we copy 23 bits
506          * from the address.
507          */
508         adj_mcast_update_rewrite (ai, rewrite, offset, 0x007fffff);
509
510         break;
511       }
512     case IP_LOOKUP_NEXT_DROP:
513     case IP_LOOKUP_NEXT_PUNT:
514     case IP_LOOKUP_NEXT_LOCAL:
515     case IP_LOOKUP_NEXT_REWRITE:
516     case IP_LOOKUP_NEXT_MCAST_MIDCHAIN:
517     case IP_LOOKUP_NEXT_MIDCHAIN:
518     case IP_LOOKUP_NEXT_ICMP_ERROR:
519     case IP_LOOKUP_N_NEXT:
520       ASSERT (0);
521       break;
522     }
523 }
524
525 int
526 vnet_arp_set_ip4_over_ethernet_internal (vnet_main_t * vnm,
527                                          vnet_arp_set_ip4_over_ethernet_rpc_args_t
528                                          * args)
529 {
530   ethernet_arp_ip4_entry_t *e = 0;
531   ethernet_arp_main_t *am = &ethernet_arp_main;
532   ethernet_arp_ip4_over_ethernet_address_t *a = &args->a;
533   vlib_main_t *vm = vlib_get_main ();
534   int make_new_arp_cache_entry = 1;
535   uword *p;
536   pending_resolution_t *pr, *mc;
537   ethernet_arp_interface_t *arp_int;
538   int is_static = args->is_static;
539   u32 sw_if_index = args->sw_if_index;
540   int is_no_fib_entry = args->is_no_fib_entry;
541
542   vec_validate (am->ethernet_arp_by_sw_if_index, sw_if_index);
543
544   arp_int = &am->ethernet_arp_by_sw_if_index[sw_if_index];
545
546   if (NULL != arp_int->arp_entries)
547     {
548       p = hash_get (arp_int->arp_entries, a->ip4.as_u32);
549       if (p)
550         {
551           e = pool_elt_at_index (am->ip4_entry_pool, p[0]);
552
553           /* Refuse to over-write static arp. */
554           if (!is_static && (e->flags & ETHERNET_ARP_IP4_ENTRY_FLAG_STATIC))
555             return -2;
556           make_new_arp_cache_entry = 0;
557         }
558     }
559
560   if (make_new_arp_cache_entry)
561     {
562       pool_get (am->ip4_entry_pool, e);
563
564       if (NULL == arp_int->arp_entries)
565         {
566           arp_int->arp_entries = hash_create (0, sizeof (u32));
567         }
568
569       hash_set (arp_int->arp_entries, a->ip4.as_u32, e - am->ip4_entry_pool);
570
571       e->sw_if_index = sw_if_index;
572       e->ip4_address = a->ip4;
573       e->fib_entry_index = FIB_NODE_INDEX_INVALID;
574       clib_memcpy (e->ethernet_address,
575                    a->ethernet, sizeof (e->ethernet_address));
576
577       if (!is_no_fib_entry)
578         {
579           fib_prefix_t pfx = {
580             .fp_len = 32,
581             .fp_proto = FIB_PROTOCOL_IP4,
582             .fp_addr.ip4 = a->ip4,
583           };
584           u32 fib_index;
585
586           fib_index =
587             ip4_fib_table_get_index_for_sw_if_index (e->sw_if_index);
588           e->fib_entry_index =
589             fib_table_entry_path_add (fib_index, &pfx, FIB_SOURCE_ADJ,
590                                       FIB_ENTRY_FLAG_ATTACHED,
591                                       DPO_PROTO_IP4, &pfx.fp_addr,
592                                       e->sw_if_index, ~0, 1, NULL,
593                                       FIB_ROUTE_PATH_FLAG_NONE);
594         }
595       else
596         {
597           e->flags |= ETHERNET_ARP_IP4_ENTRY_FLAG_NO_FIB_ENTRY;
598         }
599     }
600   else
601     {
602       /*
603        * prevent a DoS attack from the data-plane that
604        * spams us with no-op updates to the MAC address
605        */
606       if (0 == memcmp (e->ethernet_address,
607                        a->ethernet, sizeof (e->ethernet_address)))
608         return -1;
609
610       /* Update time stamp and ethernet address. */
611       clib_memcpy (e->ethernet_address, a->ethernet,
612                    sizeof (e->ethernet_address));
613     }
614
615   e->cpu_time_last_updated = clib_cpu_time_now ();
616   if (is_static)
617     e->flags |= ETHERNET_ARP_IP4_ENTRY_FLAG_STATIC;
618   else
619     e->flags |= ETHERNET_ARP_IP4_ENTRY_FLAG_DYNAMIC;
620
621   adj_nbr_walk_nh4 (sw_if_index, &e->ip4_address, arp_mk_complete_walk, e);
622
623   /* Customer(s) waiting for this address to be resolved? */
624   p = hash_get (am->pending_resolutions_by_address, a->ip4.as_u32);
625   if (p)
626     {
627       u32 next_index;
628       next_index = p[0];
629
630       while (next_index != (u32) ~ 0)
631         {
632           pr = pool_elt_at_index (am->pending_resolutions, next_index);
633           vlib_process_signal_event (vm, pr->node_index,
634                                      pr->type_opaque, pr->data);
635           next_index = pr->next_index;
636           pool_put (am->pending_resolutions, pr);
637         }
638
639       hash_unset (am->pending_resolutions_by_address, a->ip4.as_u32);
640     }
641
642   /* Customer(s) requesting ARP event for this address? */
643   p = hash_get (am->mac_changes_by_address, a->ip4.as_u32);
644   if (p)
645     {
646       u32 next_index;
647       next_index = p[0];
648
649       while (next_index != (u32) ~ 0)
650         {
651           int (*fp) (u32, u8 *, u32, u32);
652           int rv = 1;
653           mc = pool_elt_at_index (am->mac_changes, next_index);
654           fp = mc->data_callback;
655
656           /* Call the user's data callback, return 1 to suppress dup events */
657           if (fp)
658             rv = (*fp) (mc->data, a->ethernet, sw_if_index, 0);
659
660           /*
661            * Signal the resolver process, as long as the user
662            * says they want to be notified
663            */
664           if (rv == 0)
665             vlib_process_signal_event (vm, mc->node_index,
666                                        mc->type_opaque, mc->data);
667           next_index = mc->next_index;
668         }
669     }
670
671   return 0;
672 }
673
674 void
675 vnet_register_ip4_arp_resolution_event (vnet_main_t * vnm,
676                                         void *address_arg,
677                                         uword node_index,
678                                         uword type_opaque, uword data)
679 {
680   ethernet_arp_main_t *am = &ethernet_arp_main;
681   ip4_address_t *address = address_arg;
682   uword *p;
683   pending_resolution_t *pr;
684
685   pool_get (am->pending_resolutions, pr);
686
687   pr->next_index = ~0;
688   pr->node_index = node_index;
689   pr->type_opaque = type_opaque;
690   pr->data = data;
691   pr->data_callback = 0;
692
693   p = hash_get (am->pending_resolutions_by_address, address->as_u32);
694   if (p)
695     {
696       /* Insert new resolution at the head of the list */
697       pr->next_index = p[0];
698       hash_unset (am->pending_resolutions_by_address, address->as_u32);
699     }
700
701   hash_set (am->pending_resolutions_by_address, address->as_u32,
702             pr - am->pending_resolutions);
703 }
704
705 int
706 vnet_add_del_ip4_arp_change_event (vnet_main_t * vnm,
707                                    void *data_callback,
708                                    u32 pid,
709                                    void *address_arg,
710                                    uword node_index,
711                                    uword type_opaque, uword data, int is_add)
712 {
713   ethernet_arp_main_t *am = &ethernet_arp_main;
714   ip4_address_t *address = address_arg;
715
716   /* Try to find an existing entry */
717   u32 *first = (u32 *) hash_get (am->mac_changes_by_address, address->as_u32);
718   u32 *p = first;
719   pending_resolution_t *mc;
720   while (p && *p != ~0)
721     {
722       mc = pool_elt_at_index (am->mac_changes, *p);
723       if (mc->node_index == node_index && mc->type_opaque == type_opaque
724           && mc->pid == pid)
725         break;
726       p = &mc->next_index;
727     }
728
729   int found = p && *p != ~0;
730   if (is_add)
731     {
732       if (found)
733         return VNET_API_ERROR_ENTRY_ALREADY_EXISTS;
734
735       pool_get (am->mac_changes, mc);
736       *mc = (pending_resolution_t)
737       {
738       .next_index = ~0,.node_index = node_index,.type_opaque =
739           type_opaque,.data = data,.data_callback = data_callback,.pid =
740           pid,};
741
742       /* Insert new resolution at the end of the list */
743       u32 new_idx = mc - am->mac_changes;
744       if (p)
745         p[0] = new_idx;
746       else
747         hash_set (am->mac_changes_by_address, address->as_u32, new_idx);
748     }
749   else
750     {
751       if (!found)
752         return VNET_API_ERROR_NO_SUCH_ENTRY;
753
754       /* Clients may need to clean up pool entries, too */
755       void (*fp) (u32, u8 *) = data_callback;
756       if (fp)
757         (*fp) (mc->data, 0 /* no new mac addrs */ );
758
759       /* Remove the entry from the list and delete the entry */
760       *p = mc->next_index;
761       pool_put (am->mac_changes, mc);
762
763       /* Remove from hash if we deleted the last entry */
764       if (*p == ~0 && p == first)
765         hash_unset (am->mac_changes_by_address, address->as_u32);
766     }
767   return 0;
768 }
769
770 /* Either we drop the packet or we send a reply to the sender. */
771 typedef enum
772 {
773   ARP_INPUT_NEXT_DROP,
774   ARP_INPUT_NEXT_REPLY_TX,
775   ARP_INPUT_N_NEXT,
776 } arp_input_next_t;
777
778 #define foreach_ethernet_arp_error                                      \
779   _ (replies_sent, "ARP replies sent")                                  \
780   _ (l2_type_not_ethernet, "L2 type not ethernet")                      \
781   _ (l3_type_not_ip4, "L3 type not IP4")                                \
782   _ (l3_src_address_not_local, "IP4 source address not local to subnet") \
783   _ (l3_dst_address_not_local, "IP4 destination address not local to subnet") \
784   _ (l3_src_address_is_local, "IP4 source address matches local interface") \
785   _ (l3_src_address_learned, "ARP request IP4 source address learned")  \
786   _ (replies_received, "ARP replies received")                          \
787   _ (opcode_not_request, "ARP opcode not request")                      \
788   _ (proxy_arp_replies_sent, "Proxy ARP replies sent")                  \
789   _ (l2_address_mismatch, "ARP hw addr does not match L2 frame src addr") \
790   _ (gratuitous_arp, "ARP probe or announcement dropped") \
791   _ (interface_no_table, "Interface is not mapped to an IP table") \
792   _ (interface_not_ip_enabled, "Interface is not IP enabled") \
793
794 typedef enum
795 {
796 #define _(sym,string) ETHERNET_ARP_ERROR_##sym,
797   foreach_ethernet_arp_error
798 #undef _
799     ETHERNET_ARP_N_ERROR,
800 } ethernet_arp_input_error_t;
801
802
803 static void
804 unset_random_arp_entry (void)
805 {
806   ethernet_arp_main_t *am = &ethernet_arp_main;
807   ethernet_arp_ip4_entry_t *e;
808   vnet_main_t *vnm = vnet_get_main ();
809   ethernet_arp_ip4_over_ethernet_address_t delme;
810   u32 index;
811
812   index = pool_next_index (am->ip4_entry_pool, am->arp_delete_rotor);
813   am->arp_delete_rotor = index;
814
815   /* Try again from elt 0, could happen if an intfc goes down */
816   if (index == ~0)
817     {
818       index = pool_next_index (am->ip4_entry_pool, am->arp_delete_rotor);
819       am->arp_delete_rotor = index;
820     }
821
822   /* Nothing left in the pool */
823   if (index == ~0)
824     return;
825
826   e = pool_elt_at_index (am->ip4_entry_pool, index);
827
828   clib_memcpy (&delme.ethernet, e->ethernet_address, 6);
829   delme.ip4.as_u32 = e->ip4_address.as_u32;
830
831   vnet_arp_unset_ip4_over_ethernet (vnm, e->sw_if_index, &delme);
832 }
833
834 static int
835 arp_unnumbered (vlib_buffer_t * p0,
836                 u32 input_sw_if_index, u32 conn_sw_if_index)
837 {
838   vnet_main_t *vnm = vnet_get_main ();
839   vnet_interface_main_t *vim = &vnm->interface_main;
840   vnet_sw_interface_t *si;
841
842   /* verify that the input interface is unnumbered to the connected.
843    * the connected interface is the interface on which the subnet is
844    * configured */
845   si = &vim->sw_interfaces[input_sw_if_index];
846
847   if (!(si->flags & VNET_SW_INTERFACE_FLAG_UNNUMBERED &&
848         (si->unnumbered_sw_if_index == conn_sw_if_index)))
849     {
850       /* the input interface is not unnumbered to the interface on which
851        * the sub-net is configured that covers the ARP request.
852        * So this is not the case for unnumbered.. */
853       return 0;
854     }
855
856   return !0;
857 }
858
859 static u32
860 arp_learn (vnet_main_t * vnm,
861            ethernet_arp_main_t * am, u32 sw_if_index, void *addr)
862 {
863   if (am->limit_arp_cache_size &&
864       pool_elts (am->ip4_entry_pool) >= am->limit_arp_cache_size)
865     unset_random_arp_entry ();
866
867   vnet_arp_set_ip4_over_ethernet (vnm, sw_if_index, addr, 0, 0);
868   return (ETHERNET_ARP_ERROR_l3_src_address_learned);
869 }
870
871 static uword
872 arp_input (vlib_main_t * vm, vlib_node_runtime_t * node, vlib_frame_t * frame)
873 {
874   ethernet_arp_main_t *am = &ethernet_arp_main;
875   vnet_main_t *vnm = vnet_get_main ();
876   ip4_main_t *im4 = &ip4_main;
877   u32 n_left_from, next_index, *from, *to_next;
878   u32 n_replies_sent = 0, n_proxy_arp_replies_sent = 0;
879
880   from = vlib_frame_vector_args (frame);
881   n_left_from = frame->n_vectors;
882   next_index = node->cached_next_index;
883
884   if (node->flags & VLIB_NODE_FLAG_TRACE)
885     vlib_trace_frame_buffers_only (vm, node, from, frame->n_vectors,
886                                    /* stride */ 1,
887                                    sizeof (ethernet_arp_input_trace_t));
888
889   while (n_left_from > 0)
890     {
891       u32 n_left_to_next;
892
893       vlib_get_next_frame (vm, node, next_index, to_next, n_left_to_next);
894
895       while (n_left_from > 0 && n_left_to_next > 0)
896         {
897           vlib_buffer_t *p0;
898           vnet_hw_interface_t *hw_if0;
899           ethernet_arp_header_t *arp0;
900           ethernet_header_t *eth_rx, *eth_tx;
901           ip4_address_t *if_addr0, proxy_src;
902           u32 pi0, error0, next0, sw_if_index0, conn_sw_if_index0, fib_index0;
903           u8 is_request0, dst_is_local0, is_unnum0, is_vrrp_reply0;
904           ethernet_proxy_arp_t *pa;
905           fib_node_index_t dst_fei, src_fei;
906           fib_prefix_t pfx0;
907           fib_entry_flag_t src_flags, dst_flags;
908           u8 *rewrite0, rewrite0_len;
909
910           pi0 = from[0];
911           to_next[0] = pi0;
912           from += 1;
913           to_next += 1;
914           n_left_from -= 1;
915           n_left_to_next -= 1;
916           pa = 0;
917
918           p0 = vlib_get_buffer (vm, pi0);
919           arp0 = vlib_buffer_get_current (p0);
920           /* Fill in ethernet header. */
921           eth_rx = ethernet_buffer_get_header (p0);
922
923           is_request0 = arp0->opcode
924             == clib_host_to_net_u16 (ETHERNET_ARP_OPCODE_request);
925
926           error0 = ETHERNET_ARP_ERROR_replies_sent;
927
928           error0 =
929             (arp0->l2_type !=
930              clib_net_to_host_u16 (ETHERNET_ARP_HARDWARE_TYPE_ethernet) ?
931              ETHERNET_ARP_ERROR_l2_type_not_ethernet : error0);
932           error0 =
933             (arp0->l3_type !=
934              clib_net_to_host_u16 (ETHERNET_TYPE_IP4) ?
935              ETHERNET_ARP_ERROR_l3_type_not_ip4 : error0);
936
937           sw_if_index0 = vnet_buffer (p0)->sw_if_index[VLIB_RX];
938
939           /* not playing the ARP game if the interface is not IPv4 enabled */
940           error0 =
941             (im4->ip_enabled_by_sw_if_index[sw_if_index0] == 0 ?
942              ETHERNET_ARP_ERROR_interface_not_ip_enabled : error0);
943
944           if (error0)
945             goto drop2;
946
947           /* Check that IP address is local and matches incoming interface. */
948           fib_index0 = ip4_fib_table_get_index_for_sw_if_index (sw_if_index0);
949           if (~0 == fib_index0)
950             {
951               error0 = ETHERNET_ARP_ERROR_interface_no_table;
952               goto drop2;
953
954             }
955           dst_fei = ip4_fib_table_lookup (ip4_fib_get (fib_index0),
956                                           &arp0->ip4_over_ethernet[1].ip4,
957                                           32);
958           dst_flags = fib_entry_get_flags (dst_fei);
959
960           conn_sw_if_index0 = fib_entry_get_resolving_interface (dst_fei);
961
962           /* Honor unnumbered interface, if any */
963           is_unnum0 = sw_if_index0 != conn_sw_if_index0;
964
965           {
966             /*
967              * we're looking for FIB entries that indicate the source
968              * is attached. There may be more specific non-attached
969              * routes tht match the source, but these do not influence
970              * whether we respond to an ARP request, i.e. they do not
971              * influence whether we are the correct way for the sender
972              * to reach us, they only affect how we reach the sender.
973              */
974             fib_entry_t *src_fib_entry;
975             fib_entry_src_t *src;
976             fib_source_t source;
977             fib_prefix_t pfx;
978             int attached;
979             int mask;
980
981             mask = 32;
982             attached = 0;
983
984             do
985               {
986                 src_fei = ip4_fib_table_lookup (ip4_fib_get (fib_index0),
987                                                 &arp0->
988                                                 ip4_over_ethernet[0].ip4,
989                                                 mask);
990                 src_fib_entry = fib_entry_get (src_fei);
991
992                 /*
993                  * It's possible that the source that provides the
994                  * flags we need, or the flags we must not have,
995                  * is not the best source, so check then all.
996                  */
997                 /* *INDENT-OFF* */
998                 FOR_EACH_SRC_ADDED(src_fib_entry, src, source,
999                 ({
1000                   src_flags = fib_entry_get_flags_for_source (src_fei, source);
1001
1002                   /* Reject requests/replies with our local interface
1003                      address. */
1004                   if (FIB_ENTRY_FLAG_LOCAL & src_flags)
1005                     {
1006                       error0 = ETHERNET_ARP_ERROR_l3_src_address_is_local;
1007                       goto drop2;
1008                     }
1009                   /* A Source must also be local to subnet of matching
1010                    * interface address. */
1011                   if ((FIB_ENTRY_FLAG_ATTACHED & src_flags) ||
1012                       (FIB_ENTRY_FLAG_CONNECTED & src_flags))
1013                     {
1014                       attached = 1;
1015                       break;
1016                     }
1017                   /*
1018                    * else
1019                    *  The packet was sent from an address that is not
1020                    *  connected nor attached i.e. it is not from an
1021                    *  address that is covered by a link's sub-net,
1022                    *  nor is it a already learned host resp.
1023                    */
1024                 }));
1025                 /* *INDENT-ON* */
1026
1027                 /*
1028                  * shorter mask lookup for the next iteration.
1029                  */
1030                 fib_entry_get_prefix (src_fei, &pfx);
1031                 mask = pfx.fp_len - 1;
1032
1033                 /*
1034                  * continue until we hit the default route or we find
1035                  * the attached we are looking for. The most likely
1036                  * outcome is we find the attached with the first source
1037                  * on the first lookup.
1038                  */
1039               }
1040             while (!attached &&
1041                    !fib_entry_is_sourced (src_fei, FIB_SOURCE_DEFAULT_ROUTE));
1042
1043             if (!attached)
1044               {
1045                 /*
1046                  * the matching route is a not attached, i.e. it was
1047                  * added as a result of routing, rather than interface/ARP
1048                  * configuration. If the matching route is not a host route
1049                  * (i.e. a /32)
1050                  */
1051                 error0 = ETHERNET_ARP_ERROR_l3_src_address_not_local;
1052                 goto drop2;
1053               }
1054           }
1055
1056           if (!(FIB_ENTRY_FLAG_CONNECTED & dst_flags))
1057             {
1058               error0 = ETHERNET_ARP_ERROR_l3_dst_address_not_local;
1059               goto drop1;
1060             }
1061
1062           if (sw_if_index0 != fib_entry_get_resolving_interface (src_fei))
1063             {
1064               /*
1065                * The interface the ARP was received on is not the interface
1066                * on which the covering prefix is configured. Maybe this is a
1067                * case for unnumbered.
1068                */
1069               is_unnum0 = 1;
1070             }
1071
1072           dst_is_local0 = (FIB_ENTRY_FLAG_LOCAL & dst_flags);
1073           fib_entry_get_prefix (dst_fei, &pfx0);
1074           if_addr0 = &pfx0.fp_addr.ip4;
1075
1076           is_vrrp_reply0 =
1077             ((arp0->opcode ==
1078               clib_host_to_net_u16 (ETHERNET_ARP_OPCODE_reply))
1079              &&
1080              (!memcmp
1081               (arp0->ip4_over_ethernet[0].ethernet, vrrp_prefix,
1082                sizeof (vrrp_prefix))));
1083
1084           /* Trash ARP packets whose ARP-level source addresses do not
1085              match their L2-frame-level source addresses, unless it's
1086              a reply from a VRRP virtual router */
1087           if (memcmp
1088               (eth_rx->src_address, arp0->ip4_over_ethernet[0].ethernet,
1089                sizeof (eth_rx->src_address)) && !is_vrrp_reply0)
1090             {
1091               error0 = ETHERNET_ARP_ERROR_l2_address_mismatch;
1092               goto drop2;
1093             }
1094
1095           /* Learn or update sender's mapping only for replies to addresses
1096            * that are local to the subnet */
1097           if (arp0->opcode ==
1098               clib_host_to_net_u16 (ETHERNET_ARP_OPCODE_reply) &&
1099               dst_is_local0)
1100             {
1101               error0 = arp_learn (vnm, am, sw_if_index0,
1102                                   &arp0->ip4_over_ethernet[0]);
1103               goto drop1;
1104             }
1105
1106         send_reply:
1107           /* Send a reply.
1108              An adjacency to the sender is not always present,
1109              so we use the interface to build us a rewrite string
1110              which will contain all the necessary tags. */
1111           rewrite0 = ethernet_build_rewrite (vnm, sw_if_index0,
1112                                              VNET_LINK_ARP,
1113                                              eth_rx->src_address);
1114           rewrite0_len = vec_len (rewrite0);
1115
1116           /* Figure out how much to rewind current data from adjacency. */
1117           vlib_buffer_advance (p0, -rewrite0_len);
1118           eth_tx = vlib_buffer_get_current (p0);
1119
1120           vnet_buffer (p0)->sw_if_index[VLIB_TX] = sw_if_index0;
1121           hw_if0 = vnet_get_sup_hw_interface (vnm, sw_if_index0);
1122
1123           /* Send reply back through input interface */
1124           vnet_buffer (p0)->sw_if_index[VLIB_TX] = sw_if_index0;
1125           next0 = ARP_INPUT_NEXT_REPLY_TX;
1126
1127           arp0->opcode = clib_host_to_net_u16 (ETHERNET_ARP_OPCODE_reply);
1128
1129           arp0->ip4_over_ethernet[1] = arp0->ip4_over_ethernet[0];
1130
1131           clib_memcpy (arp0->ip4_over_ethernet[0].ethernet,
1132                        hw_if0->hw_address, 6);
1133           clib_mem_unaligned (&arp0->ip4_over_ethernet[0].ip4.data_u32, u32) =
1134             if_addr0->data_u32;
1135
1136           /* Hardware must be ethernet-like. */
1137           ASSERT (vec_len (hw_if0->hw_address) == 6);
1138
1139           /* the rx nd tx ethernet headers wil overlap in the case
1140            * when we received a tagged VLAN=0 packet, but we are sending
1141            * back untagged */
1142           clib_memcpy (eth_tx, rewrite0, vec_len (rewrite0));
1143           vec_free (rewrite0);
1144
1145           if (NULL == pa)
1146             {
1147               if (is_unnum0)
1148                 {
1149                   if (!arp_unnumbered (p0, sw_if_index0, conn_sw_if_index0))
1150                     goto drop2;
1151                 }
1152             }
1153
1154           /* We are going to reply to this request, so learn the sender */
1155           error0 = arp_learn (vnm, am, sw_if_index0,
1156                               &arp0->ip4_over_ethernet[1]);
1157
1158           vlib_validate_buffer_enqueue_x1 (vm, node, next_index, to_next,
1159                                            n_left_to_next, pi0, next0);
1160
1161           n_replies_sent += 1;
1162           continue;
1163
1164         drop1:
1165           if (0 == arp0->ip4_over_ethernet[0].ip4.as_u32 ||
1166               (arp0->ip4_over_ethernet[0].ip4.as_u32 ==
1167                arp0->ip4_over_ethernet[1].ip4.as_u32))
1168             {
1169               error0 = ETHERNET_ARP_ERROR_gratuitous_arp;
1170               goto drop2;
1171             }
1172           /* See if proxy arp is configured for the address */
1173           if (is_request0)
1174             {
1175               vnet_sw_interface_t *si;
1176               u32 this_addr = clib_net_to_host_u32
1177                 (arp0->ip4_over_ethernet[1].ip4.as_u32);
1178               u32 fib_index0;
1179
1180               si = vnet_get_sw_interface (vnm, sw_if_index0);
1181
1182               if (!(si->flags & VNET_SW_INTERFACE_FLAG_PROXY_ARP))
1183                 goto drop2;
1184
1185               fib_index0 = vec_elt (im4->fib_index_by_sw_if_index,
1186                                     sw_if_index0);
1187
1188               vec_foreach (pa, am->proxy_arps)
1189               {
1190                 u32 lo_addr = clib_net_to_host_u32 (pa->lo_addr);
1191                 u32 hi_addr = clib_net_to_host_u32 (pa->hi_addr);
1192
1193                 /* an ARP request hit in the proxy-arp table? */
1194                 if ((this_addr >= lo_addr && this_addr <= hi_addr) &&
1195                     (fib_index0 == pa->fib_index))
1196                   {
1197                     proxy_src.as_u32 =
1198                       arp0->ip4_over_ethernet[1].ip4.data_u32;
1199
1200                     /*
1201                      * change the interface address to the proxied
1202                      */
1203                     if_addr0 = &proxy_src;
1204                     is_unnum0 = 0;
1205                     n_proxy_arp_replies_sent++;
1206                     goto send_reply;
1207                   }
1208               }
1209             }
1210
1211         drop2:
1212
1213           next0 = ARP_INPUT_NEXT_DROP;
1214           p0->error = node->errors[error0];
1215
1216           vlib_validate_buffer_enqueue_x1 (vm, node, next_index, to_next,
1217                                            n_left_to_next, pi0, next0);
1218         }
1219
1220       vlib_put_next_frame (vm, node, next_index, n_left_to_next);
1221     }
1222
1223   vlib_error_count (vm, node->node_index,
1224                     ETHERNET_ARP_ERROR_replies_sent,
1225                     n_replies_sent - n_proxy_arp_replies_sent);
1226
1227   vlib_error_count (vm, node->node_index,
1228                     ETHERNET_ARP_ERROR_proxy_arp_replies_sent,
1229                     n_proxy_arp_replies_sent);
1230   return frame->n_vectors;
1231 }
1232
1233 static char *ethernet_arp_error_strings[] = {
1234 #define _(sym,string) string,
1235   foreach_ethernet_arp_error
1236 #undef _
1237 };
1238
1239 /* *INDENT-OFF* */
1240 VLIB_REGISTER_NODE (arp_input_node, static) =
1241 {
1242   .function = arp_input,
1243   .name = "arp-input",
1244   .vector_size = sizeof (u32),
1245   .n_errors = ETHERNET_ARP_N_ERROR,
1246   .error_strings = ethernet_arp_error_strings,
1247   .n_next_nodes = ARP_INPUT_N_NEXT,
1248   .next_nodes = {
1249     [ARP_INPUT_NEXT_DROP] = "error-drop",
1250     [ARP_INPUT_NEXT_REPLY_TX] = "interface-output",
1251   },
1252   .format_buffer = format_ethernet_arp_header,
1253   .format_trace = format_ethernet_arp_input_trace,
1254 };
1255 /* *INDENT-ON* */
1256
1257 static int
1258 ip4_arp_entry_sort (void *a1, void *a2)
1259 {
1260   ethernet_arp_ip4_entry_t *e1 = a1;
1261   ethernet_arp_ip4_entry_t *e2 = a2;
1262
1263   int cmp;
1264   vnet_main_t *vnm = vnet_get_main ();
1265
1266   cmp = vnet_sw_interface_compare (vnm, e1->sw_if_index, e2->sw_if_index);
1267   if (!cmp)
1268     cmp = ip4_address_compare (&e1->ip4_address, &e2->ip4_address);
1269   return cmp;
1270 }
1271
1272 ethernet_arp_ip4_entry_t *
1273 ip4_neighbor_entries (u32 sw_if_index)
1274 {
1275   ethernet_arp_main_t *am = &ethernet_arp_main;
1276   ethernet_arp_ip4_entry_t *n, *ns = 0;
1277
1278   /* *INDENT-OFF* */
1279   pool_foreach (n, am->ip4_entry_pool, ({
1280     if (sw_if_index != ~0 && n->sw_if_index != sw_if_index)
1281       continue;
1282     vec_add1 (ns, n[0]);
1283   }));
1284   /* *INDENT-ON* */
1285
1286   if (ns)
1287     vec_sort_with_function (ns, ip4_arp_entry_sort);
1288   return ns;
1289 }
1290
1291 static clib_error_t *
1292 show_ip4_arp (vlib_main_t * vm,
1293               unformat_input_t * input, vlib_cli_command_t * cmd)
1294 {
1295   vnet_main_t *vnm = vnet_get_main ();
1296   ethernet_arp_main_t *am = &ethernet_arp_main;
1297   ethernet_arp_ip4_entry_t *e, *es;
1298   ethernet_proxy_arp_t *pa;
1299   clib_error_t *error = 0;
1300   u32 sw_if_index;
1301
1302   /* Filter entries by interface if given. */
1303   sw_if_index = ~0;
1304   (void) unformat_user (input, unformat_vnet_sw_interface, vnm, &sw_if_index);
1305
1306   es = ip4_neighbor_entries (sw_if_index);
1307   if (es)
1308     {
1309       vlib_cli_output (vm, "%U", format_ethernet_arp_ip4_entry, vnm, 0);
1310       vec_foreach (e, es)
1311       {
1312         vlib_cli_output (vm, "%U", format_ethernet_arp_ip4_entry, vnm, e);
1313       }
1314       vec_free (es);
1315     }
1316
1317   if (vec_len (am->proxy_arps))
1318     {
1319       vlib_cli_output (vm, "Proxy arps enabled for:");
1320       vec_foreach (pa, am->proxy_arps)
1321       {
1322         vlib_cli_output (vm, "Fib_index %d   %U - %U ",
1323                          pa->fib_index,
1324                          format_ip4_address, &pa->lo_addr,
1325                          format_ip4_address, &pa->hi_addr);
1326       }
1327     }
1328
1329   return error;
1330 }
1331
1332 /*?
1333  * Display all the IPv4 ARP entries.
1334  *
1335  * @cliexpar
1336  * Example of how to display the IPv4 ARP table:
1337  * @cliexstart{show ip arp}
1338  *    Time      FIB        IP4       Flags      Ethernet              Interface
1339  *    346.3028   0       6.1.1.3            de:ad:be:ef:ba:be   GigabitEthernet2/0/0
1340  *   3077.4271   0       6.1.1.4       S    de:ad:be:ef:ff:ff   GigabitEthernet2/0/0
1341  *   2998.6409   1       6.2.2.3            de:ad:be:ef:00:01   GigabitEthernet2/0/0
1342  * Proxy arps enabled for:
1343  * Fib_index 0   6.0.0.1 - 6.0.0.11
1344  * @cliexend
1345  ?*/
1346 /* *INDENT-OFF* */
1347 VLIB_CLI_COMMAND (show_ip4_arp_command, static) = {
1348   .path = "show ip arp",
1349   .function = show_ip4_arp,
1350   .short_help = "show ip arp",
1351 };
1352 /* *INDENT-ON* */
1353
1354 typedef struct
1355 {
1356   pg_edit_t l2_type, l3_type;
1357   pg_edit_t n_l2_address_bytes, n_l3_address_bytes;
1358   pg_edit_t opcode;
1359   struct
1360   {
1361     pg_edit_t ethernet;
1362     pg_edit_t ip4;
1363   } ip4_over_ethernet[2];
1364 } pg_ethernet_arp_header_t;
1365
1366 static inline void
1367 pg_ethernet_arp_header_init (pg_ethernet_arp_header_t * p)
1368 {
1369   /* Initialize fields that are not bit fields in the IP header. */
1370 #define _(f) pg_edit_init (&p->f, ethernet_arp_header_t, f);
1371   _(l2_type);
1372   _(l3_type);
1373   _(n_l2_address_bytes);
1374   _(n_l3_address_bytes);
1375   _(opcode);
1376   _(ip4_over_ethernet[0].ethernet);
1377   _(ip4_over_ethernet[0].ip4);
1378   _(ip4_over_ethernet[1].ethernet);
1379   _(ip4_over_ethernet[1].ip4);
1380 #undef _
1381 }
1382
1383 uword
1384 unformat_pg_arp_header (unformat_input_t * input, va_list * args)
1385 {
1386   pg_stream_t *s = va_arg (*args, pg_stream_t *);
1387   pg_ethernet_arp_header_t *p;
1388   u32 group_index;
1389
1390   p = pg_create_edit_group (s, sizeof (p[0]), sizeof (ethernet_arp_header_t),
1391                             &group_index);
1392   pg_ethernet_arp_header_init (p);
1393
1394   /* Defaults. */
1395   pg_edit_set_fixed (&p->l2_type, ETHERNET_ARP_HARDWARE_TYPE_ethernet);
1396   pg_edit_set_fixed (&p->l3_type, ETHERNET_TYPE_IP4);
1397   pg_edit_set_fixed (&p->n_l2_address_bytes, 6);
1398   pg_edit_set_fixed (&p->n_l3_address_bytes, 4);
1399
1400   if (!unformat (input, "%U: %U/%U -> %U/%U",
1401                  unformat_pg_edit,
1402                  unformat_ethernet_arp_opcode_net_byte_order, &p->opcode,
1403                  unformat_pg_edit,
1404                  unformat_ethernet_address, &p->ip4_over_ethernet[0].ethernet,
1405                  unformat_pg_edit,
1406                  unformat_ip4_address, &p->ip4_over_ethernet[0].ip4,
1407                  unformat_pg_edit,
1408                  unformat_ethernet_address, &p->ip4_over_ethernet[1].ethernet,
1409                  unformat_pg_edit,
1410                  unformat_ip4_address, &p->ip4_over_ethernet[1].ip4))
1411     {
1412       /* Free up any edits we may have added. */
1413       pg_free_edit_group (s);
1414       return 0;
1415     }
1416   return 1;
1417 }
1418
1419 clib_error_t *
1420 ip4_set_arp_limit (u32 arp_limit)
1421 {
1422   ethernet_arp_main_t *am = &ethernet_arp_main;
1423
1424   am->limit_arp_cache_size = arp_limit;
1425   return 0;
1426 }
1427
1428 /**
1429  * @brief Control Plane hook to remove an ARP entry
1430  */
1431 int
1432 vnet_arp_unset_ip4_over_ethernet (vnet_main_t * vnm,
1433                                   u32 sw_if_index, void *a_arg)
1434 {
1435   ethernet_arp_ip4_over_ethernet_address_t *a = a_arg;
1436   vnet_arp_set_ip4_over_ethernet_rpc_args_t args;
1437
1438   args.sw_if_index = sw_if_index;
1439   args.flags = ETHERNET_ARP_ARGS_REMOVE;
1440   clib_memcpy (&args.a, a, sizeof (*a));
1441
1442   vl_api_rpc_call_main_thread (set_ip4_over_ethernet_rpc_callback,
1443                                (u8 *) & args, sizeof (args));
1444   return 0;
1445 }
1446
1447 /**
1448  * @brief Internally generated event to flush the ARP cache on an
1449  * interface state change event.
1450  * A flush will remove dynamic ARP entries, and for statics remove the MAC
1451  * address from the corresponding adjacencies.
1452  */
1453 static int
1454 vnet_arp_flush_ip4_over_ethernet (vnet_main_t * vnm,
1455                                   u32 sw_if_index, void *a_arg)
1456 {
1457   ethernet_arp_ip4_over_ethernet_address_t *a = a_arg;
1458   vnet_arp_set_ip4_over_ethernet_rpc_args_t args;
1459
1460   args.sw_if_index = sw_if_index;
1461   args.flags = ETHERNET_ARP_ARGS_FLUSH;
1462   clib_memcpy (&args.a, a, sizeof (*a));
1463
1464   vl_api_rpc_call_main_thread (set_ip4_over_ethernet_rpc_callback,
1465                                (u8 *) & args, sizeof (args));
1466   return 0;
1467 }
1468
1469 /**
1470  * @brief Internally generated event to populate the ARP cache on an
1471  * interface state change event.
1472  * For static entries this will re-source the adjacencies.
1473  *
1474  * @param sw_if_index The interface on which the ARP entires are acted
1475  */
1476 static int
1477 vnet_arp_populate_ip4_over_ethernet (vnet_main_t * vnm,
1478                                      u32 sw_if_index, void *a_arg)
1479 {
1480   ethernet_arp_ip4_over_ethernet_address_t *a = a_arg;
1481   vnet_arp_set_ip4_over_ethernet_rpc_args_t args;
1482
1483   args.sw_if_index = sw_if_index;
1484   args.flags = ETHERNET_ARP_ARGS_POPULATE;
1485   clib_memcpy (&args.a, a, sizeof (*a));
1486
1487   vl_api_rpc_call_main_thread (set_ip4_over_ethernet_rpc_callback,
1488                                (u8 *) & args, sizeof (args));
1489   return 0;
1490 }
1491
1492 /*
1493  * arp_add_del_interface_address
1494  *
1495  * callback when an interface address is added or deleted
1496  */
1497 static void
1498 arp_add_del_interface_address (ip4_main_t * im,
1499                                uword opaque,
1500                                u32 sw_if_index,
1501                                ip4_address_t * address,
1502                                u32 address_length,
1503                                u32 if_address_index, u32 is_del)
1504 {
1505   /*
1506    * Flush the ARP cache of all entries covered by the address
1507    * that is being removed.
1508    */
1509   ethernet_arp_main_t *am = &ethernet_arp_main;
1510   ethernet_arp_ip4_entry_t *e;
1511
1512   if (vec_len (am->ethernet_arp_by_sw_if_index) <= sw_if_index)
1513     return;
1514
1515   if (is_del)
1516     {
1517       ethernet_arp_interface_t *eai;
1518       u32 i, *to_delete = 0;
1519       hash_pair_t *pair;
1520
1521       eai = &am->ethernet_arp_by_sw_if_index[sw_if_index];
1522
1523       /* *INDENT-OFF* */
1524       hash_foreach_pair (pair, eai->arp_entries,
1525       ({
1526         e = pool_elt_at_index(am->ip4_entry_pool,
1527                               pair->value[0]);
1528         if (ip4_destination_matches_route (im, &e->ip4_address,
1529                                            address, address_length))
1530           {
1531             vec_add1 (to_delete, e - am->ip4_entry_pool);
1532           }
1533       }));
1534       /* *INDENT-ON* */
1535
1536       for (i = 0; i < vec_len (to_delete); i++)
1537         {
1538           ethernet_arp_ip4_over_ethernet_address_t delme;
1539           e = pool_elt_at_index (am->ip4_entry_pool, to_delete[i]);
1540
1541           clib_memcpy (&delme.ethernet, e->ethernet_address, 6);
1542           delme.ip4.as_u32 = e->ip4_address.as_u32;
1543
1544           vnet_arp_flush_ip4_over_ethernet (vnet_get_main (),
1545                                             e->sw_if_index, &delme);
1546         }
1547
1548       vec_free (to_delete);
1549     }
1550 }
1551
1552 static clib_error_t *
1553 ethernet_arp_init (vlib_main_t * vm)
1554 {
1555   ethernet_arp_main_t *am = &ethernet_arp_main;
1556   ip4_main_t *im = &ip4_main;
1557   clib_error_t *error;
1558   pg_node_t *pn;
1559
1560   if ((error = vlib_call_init_function (vm, ethernet_init)))
1561     return error;
1562
1563   ethernet_register_input_type (vm, ETHERNET_TYPE_ARP, arp_input_node.index);
1564
1565   pn = pg_get_node (arp_input_node.index);
1566   pn->unformat_edit = unformat_pg_arp_header;
1567
1568   am->opcode_by_name = hash_create_string (0, sizeof (uword));
1569 #define _(o) hash_set_mem (am->opcode_by_name, #o, ETHERNET_ARP_OPCODE_##o);
1570   foreach_ethernet_arp_opcode;
1571 #undef _
1572
1573   /* $$$ configurable */
1574   am->limit_arp_cache_size = 50000;
1575
1576   am->pending_resolutions_by_address = hash_create (0, sizeof (uword));
1577   am->mac_changes_by_address = hash_create (0, sizeof (uword));
1578
1579   /* don't trace ARP error packets */
1580   {
1581     vlib_node_runtime_t *rt =
1582       vlib_node_get_runtime (vm, arp_input_node.index);
1583
1584 #define _(a,b)                                  \
1585     vnet_pcap_drop_trace_filter_add_del         \
1586         (rt->errors[ETHERNET_ARP_ERROR_##a],    \
1587          1 /* is_add */);
1588     foreach_ethernet_arp_error
1589 #undef _
1590   }
1591
1592   ip4_add_del_interface_address_callback_t cb;
1593   cb.function = arp_add_del_interface_address;
1594   cb.function_opaque = 0;
1595   vec_add1 (im->add_del_interface_address_callbacks, cb);
1596
1597   return 0;
1598 }
1599
1600 VLIB_INIT_FUNCTION (ethernet_arp_init);
1601
1602 static void
1603 arp_entry_free (ethernet_arp_interface_t * eai, ethernet_arp_ip4_entry_t * e)
1604 {
1605   ethernet_arp_main_t *am = &ethernet_arp_main;
1606
1607   if (FIB_NODE_INDEX_INVALID != e->fib_entry_index)
1608     {
1609       fib_prefix_t pfx = {
1610         .fp_len = 32,
1611         .fp_proto = FIB_PROTOCOL_IP4,
1612         .fp_addr.ip4 = e->ip4_address,
1613       };
1614       u32 fib_index;
1615
1616       fib_index = ip4_fib_table_get_index_for_sw_if_index (e->sw_if_index);
1617
1618       fib_table_entry_path_remove (fib_index, &pfx,
1619                                    FIB_SOURCE_ADJ,
1620                                    DPO_PROTO_IP4,
1621                                    &pfx.fp_addr,
1622                                    e->sw_if_index, ~0, 1,
1623                                    FIB_ROUTE_PATH_FLAG_NONE);
1624     }
1625   hash_unset (eai->arp_entries, e->ip4_address.as_u32);
1626   pool_put (am->ip4_entry_pool, e);
1627 }
1628
1629 static inline int
1630 vnet_arp_unset_ip4_over_ethernet_internal (vnet_main_t * vnm,
1631                                            vnet_arp_set_ip4_over_ethernet_rpc_args_t
1632                                            * args)
1633 {
1634   ethernet_arp_main_t *am = &ethernet_arp_main;
1635   ethernet_arp_ip4_entry_t *e;
1636   ethernet_arp_interface_t *eai;
1637
1638   if (vec_len (am->ethernet_arp_by_sw_if_index) <= args->sw_if_index)
1639     return 0;
1640
1641   eai = &am->ethernet_arp_by_sw_if_index[args->sw_if_index];
1642
1643   e = arp_entry_find (eai, &args->a.ip4);
1644
1645   if (NULL != e)
1646     {
1647       arp_entry_free (eai, e);
1648
1649       adj_nbr_walk_nh4 (e->sw_if_index,
1650                         &e->ip4_address, arp_mk_incomplete_walk, NULL);
1651     }
1652
1653   return 0;
1654 }
1655
1656 static int
1657 vnet_arp_flush_ip4_over_ethernet_internal (vnet_main_t * vnm,
1658                                            vnet_arp_set_ip4_over_ethernet_rpc_args_t
1659                                            * args)
1660 {
1661   ethernet_arp_main_t *am = &ethernet_arp_main;
1662   ethernet_arp_ip4_entry_t *e;
1663   ethernet_arp_interface_t *eai;
1664
1665   if (vec_len (am->ethernet_arp_by_sw_if_index) <= args->sw_if_index)
1666     return 0;
1667
1668   eai = &am->ethernet_arp_by_sw_if_index[args->sw_if_index];
1669
1670   e = arp_entry_find (eai, &args->a.ip4);
1671
1672   if (NULL != e)
1673     {
1674       adj_nbr_walk_nh4 (e->sw_if_index,
1675                         &e->ip4_address, arp_mk_incomplete_walk, e);
1676
1677       /*
1678        * The difference between flush and unset, is that an unset
1679        * means delete for static and dynamic entries. A flush
1680        * means delete only for dynamic. Flushing is what the DP
1681        * does in response to interface events. unset is only done
1682        * by the control plane.
1683        */
1684       if (e->flags & ETHERNET_ARP_IP4_ENTRY_FLAG_DYNAMIC)
1685         {
1686           arp_entry_free (eai, e);
1687         }
1688     }
1689   return (0);
1690 }
1691
1692 static int
1693 vnet_arp_populate_ip4_over_ethernet_internal (vnet_main_t * vnm,
1694                                               vnet_arp_set_ip4_over_ethernet_rpc_args_t
1695                                               * args)
1696 {
1697   ethernet_arp_main_t *am = &ethernet_arp_main;
1698   ethernet_arp_ip4_entry_t *e;
1699   ethernet_arp_interface_t *eai;
1700
1701   vec_validate (am->ethernet_arp_by_sw_if_index, args->sw_if_index);
1702   eai = &am->ethernet_arp_by_sw_if_index[args->sw_if_index];
1703
1704   e = arp_entry_find (eai, &args->a.ip4);
1705
1706   if (NULL != e)
1707     {
1708       adj_nbr_walk_nh4 (e->sw_if_index,
1709                         &e->ip4_address, arp_mk_complete_walk, e);
1710     }
1711   return (0);
1712 }
1713
1714 static void
1715 set_ip4_over_ethernet_rpc_callback (vnet_arp_set_ip4_over_ethernet_rpc_args_t
1716                                     * a)
1717 {
1718   vnet_main_t *vm = vnet_get_main ();
1719   ASSERT (vlib_get_thread_index () == 0);
1720
1721   if (a->flags & ETHERNET_ARP_ARGS_REMOVE)
1722     vnet_arp_unset_ip4_over_ethernet_internal (vm, a);
1723   else if (a->flags & ETHERNET_ARP_ARGS_FLUSH)
1724     vnet_arp_flush_ip4_over_ethernet_internal (vm, a);
1725   else if (a->flags & ETHERNET_ARP_ARGS_POPULATE)
1726     vnet_arp_populate_ip4_over_ethernet_internal (vm, a);
1727   else
1728     vnet_arp_set_ip4_over_ethernet_internal (vm, a);
1729 }
1730
1731 /**
1732  * @brief Invoked when the interface's admin state changes
1733  */
1734 static clib_error_t *
1735 ethernet_arp_sw_interface_up_down (vnet_main_t * vnm,
1736                                    u32 sw_if_index, u32 flags)
1737 {
1738   ethernet_arp_main_t *am = &ethernet_arp_main;
1739   ethernet_arp_ip4_entry_t *e;
1740   u32 i, *to_delete = 0;
1741
1742   /* *INDENT-OFF* */
1743   pool_foreach (e, am->ip4_entry_pool,
1744   ({
1745     if (e->sw_if_index == sw_if_index)
1746       vec_add1 (to_delete,
1747                 e - am->ip4_entry_pool);
1748   }));
1749   /* *INDENT-ON* */
1750
1751   for (i = 0; i < vec_len (to_delete); i++)
1752     {
1753       ethernet_arp_ip4_over_ethernet_address_t delme;
1754       e = pool_elt_at_index (am->ip4_entry_pool, to_delete[i]);
1755
1756       clib_memcpy (&delme.ethernet, e->ethernet_address, 6);
1757       delme.ip4.as_u32 = e->ip4_address.as_u32;
1758
1759       if (flags & VNET_SW_INTERFACE_FLAG_ADMIN_UP)
1760         {
1761           vnet_arp_populate_ip4_over_ethernet (vnm, e->sw_if_index, &delme);
1762         }
1763       else
1764         {
1765           vnet_arp_flush_ip4_over_ethernet (vnm, e->sw_if_index, &delme);
1766         }
1767
1768     }
1769   vec_free (to_delete);
1770
1771   return 0;
1772 }
1773
1774 VNET_SW_INTERFACE_ADMIN_UP_DOWN_FUNCTION (ethernet_arp_sw_interface_up_down);
1775
1776 static void
1777 increment_ip4_and_mac_address (ethernet_arp_ip4_over_ethernet_address_t * a)
1778 {
1779   u8 old;
1780   int i;
1781
1782   for (i = 3; i >= 0; i--)
1783     {
1784       old = a->ip4.as_u8[i];
1785       a->ip4.as_u8[i] += 1;
1786       if (old < a->ip4.as_u8[i])
1787         break;
1788     }
1789
1790   for (i = 5; i >= 0; i--)
1791     {
1792       old = a->ethernet[i];
1793       a->ethernet[i] += 1;
1794       if (old < a->ethernet[i])
1795         break;
1796     }
1797 }
1798
1799 int
1800 vnet_arp_set_ip4_over_ethernet (vnet_main_t * vnm,
1801                                 u32 sw_if_index, void *a_arg,
1802                                 int is_static, int is_no_fib_entry)
1803 {
1804   ethernet_arp_ip4_over_ethernet_address_t *a = a_arg;
1805   vnet_arp_set_ip4_over_ethernet_rpc_args_t args;
1806
1807   args.sw_if_index = sw_if_index;
1808   args.is_static = is_static;
1809   args.is_no_fib_entry = is_no_fib_entry;
1810   args.flags = 0;
1811   clib_memcpy (&args.a, a, sizeof (*a));
1812
1813   vl_api_rpc_call_main_thread (set_ip4_over_ethernet_rpc_callback,
1814                                (u8 *) & args, sizeof (args));
1815   return 0;
1816 }
1817
1818 int
1819 vnet_proxy_arp_add_del (ip4_address_t * lo_addr,
1820                         ip4_address_t * hi_addr, u32 fib_index, int is_del)
1821 {
1822   ethernet_arp_main_t *am = &ethernet_arp_main;
1823   ethernet_proxy_arp_t *pa;
1824   u32 found_at_index = ~0;
1825
1826   vec_foreach (pa, am->proxy_arps)
1827   {
1828     if (pa->lo_addr == lo_addr->as_u32
1829         && pa->hi_addr == hi_addr->as_u32 && pa->fib_index == fib_index)
1830       {
1831         found_at_index = pa - am->proxy_arps;
1832         break;
1833       }
1834   }
1835
1836   if (found_at_index != ~0)
1837     {
1838       /* Delete, otherwise it's already in the table */
1839       if (is_del)
1840         vec_delete (am->proxy_arps, 1, found_at_index);
1841       return 0;
1842     }
1843   /* delete, no such entry */
1844   if (is_del)
1845     return VNET_API_ERROR_NO_SUCH_ENTRY;
1846
1847   /* add, not in table */
1848   vec_add2 (am->proxy_arps, pa, 1);
1849   pa->lo_addr = lo_addr->as_u32;
1850   pa->hi_addr = hi_addr->as_u32;
1851   pa->fib_index = fib_index;
1852   return 0;
1853 }
1854
1855 /*
1856  * Remove any proxy arp entries asdociated with the
1857  * specificed fib.
1858  */
1859 int
1860 vnet_proxy_arp_fib_reset (u32 fib_id)
1861 {
1862   ethernet_arp_main_t *am = &ethernet_arp_main;
1863   ethernet_proxy_arp_t *pa;
1864   u32 *entries_to_delete = 0;
1865   u32 fib_index;
1866   int i;
1867
1868   fib_index = fib_table_find (FIB_PROTOCOL_IP4, fib_id);
1869   if (~0 == fib_index)
1870     return VNET_API_ERROR_NO_SUCH_ENTRY;
1871
1872   vec_foreach (pa, am->proxy_arps)
1873   {
1874     if (pa->fib_index == fib_index)
1875       {
1876         vec_add1 (entries_to_delete, pa - am->proxy_arps);
1877       }
1878   }
1879
1880   for (i = 0; i < vec_len (entries_to_delete); i++)
1881     {
1882       vec_delete (am->proxy_arps, 1, entries_to_delete[i]);
1883     }
1884
1885   vec_free (entries_to_delete);
1886
1887   return 0;
1888 }
1889
1890 static clib_error_t *
1891 ip_arp_add_del_command_fn (vlib_main_t * vm,
1892                            unformat_input_t * input, vlib_cli_command_t * cmd)
1893 {
1894   vnet_main_t *vnm = vnet_get_main ();
1895   u32 sw_if_index;
1896   ethernet_arp_ip4_over_ethernet_address_t lo_addr, hi_addr, addr;
1897   int addr_valid = 0;
1898   int is_del = 0;
1899   int count = 1;
1900   u32 fib_index = 0;
1901   u32 fib_id;
1902   int is_static = 0;
1903   int is_no_fib_entry = 0;
1904   int is_proxy = 0;
1905
1906   while (unformat_check_input (input) != UNFORMAT_END_OF_INPUT)
1907     {
1908       /* set ip arp TenGigE1/1/0/1 1.2.3.4 aa:bb:... or aabb.ccdd... */
1909       if (unformat (input, "%U %U %U",
1910                     unformat_vnet_sw_interface, vnm, &sw_if_index,
1911                     unformat_ip4_address, &addr.ip4,
1912                     unformat_ethernet_address, &addr.ethernet))
1913         addr_valid = 1;
1914
1915       else if (unformat (input, "delete") || unformat (input, "del"))
1916         is_del = 1;
1917
1918       else if (unformat (input, "static"))
1919         is_static = 1;
1920
1921       else if (unformat (input, "no-fib-entry"))
1922         is_no_fib_entry = 1;
1923
1924       else if (unformat (input, "count %d", &count))
1925         ;
1926
1927       else if (unformat (input, "fib-id %d", &fib_id))
1928         {
1929           fib_index = fib_table_find (FIB_PROTOCOL_IP4, fib_id);
1930
1931           if (~0 == fib_index)
1932             return clib_error_return (0, "fib ID %d doesn't exist\n", fib_id);
1933         }
1934
1935       else if (unformat (input, "proxy %U - %U",
1936                          unformat_ip4_address, &lo_addr.ip4,
1937                          unformat_ip4_address, &hi_addr.ip4))
1938         is_proxy = 1;
1939       else
1940         break;
1941     }
1942
1943   if (is_proxy)
1944     {
1945       (void) vnet_proxy_arp_add_del (&lo_addr.ip4, &hi_addr.ip4,
1946                                      fib_index, is_del);
1947       return 0;
1948     }
1949
1950   if (addr_valid)
1951     {
1952       int i;
1953
1954       for (i = 0; i < count; i++)
1955         {
1956           if (is_del == 0)
1957             {
1958               uword event_type, *event_data = 0;
1959
1960               /* Park the debug CLI until the arp entry is installed */
1961               vnet_register_ip4_arp_resolution_event
1962                 (vnm, &addr.ip4, vlib_current_process (vm),
1963                  1 /* type */ , 0 /* data */ );
1964
1965               vnet_arp_set_ip4_over_ethernet
1966                 (vnm, sw_if_index, &addr, is_static, is_no_fib_entry);
1967
1968               vlib_process_wait_for_event (vm);
1969               event_type = vlib_process_get_events (vm, &event_data);
1970               vec_reset_length (event_data);
1971               if (event_type != 1)
1972                 clib_warning ("event type %d unexpected", event_type);
1973             }
1974           else
1975             vnet_arp_unset_ip4_over_ethernet (vnm, sw_if_index, &addr);
1976
1977           increment_ip4_and_mac_address (&addr);
1978         }
1979     }
1980   else
1981     {
1982       return clib_error_return (0, "unknown input `%U'",
1983                                 format_unformat_error, input);
1984     }
1985
1986   return 0;
1987 }
1988
1989 /* *INDENT-OFF* */
1990 /*?
1991  * Add or delete IPv4 ARP cache entries.
1992  *
1993  * @note 'set ip arp' options (e.g. delete, static, 'fib-id <id>',
1994  * 'count <number>', 'interface ip4_addr mac_addr') can be added in
1995  * any order and combination.
1996  *
1997  * @cliexpar
1998  * @parblock
1999  * Add or delete IPv4 ARP cache entries as follows. MAC Address can be in
2000  * either aa:bb:cc:dd:ee:ff format or aabb.ccdd.eeff format.
2001  * @cliexcmd{set ip arp GigabitEthernet2/0/0 6.0.0.3 dead.beef.babe}
2002  * @cliexcmd{set ip arp delete GigabitEthernet2/0/0 6.0.0.3 de:ad:be:ef:ba:be}
2003  *
2004  * To add or delete an IPv4 ARP cache entry to or from a specific fib
2005  * table:
2006  * @cliexcmd{set ip arp fib-id 1 GigabitEthernet2/0/0 6.0.0.3 dead.beef.babe}
2007  * @cliexcmd{set ip arp fib-id 1 delete GigabitEthernet2/0/0 6.0.0.3 dead.beef.babe}
2008  *
2009  * Add or delete IPv4 static ARP cache entries as follows:
2010  * @cliexcmd{set ip arp static GigabitEthernet2/0/0 6.0.0.3 dead.beef.babe}
2011  * @cliexcmd{set ip arp static delete GigabitEthernet2/0/0 6.0.0.3 dead.beef.babe}
2012  *
2013  * For testing / debugging purposes, the 'set ip arp' command can add or
2014  * delete multiple entries. Supply the 'count N' parameter:
2015  * @cliexcmd{set ip arp count 10 GigabitEthernet2/0/0 6.0.0.3 dead.beef.babe}
2016  * @endparblock
2017  ?*/
2018 VLIB_CLI_COMMAND (ip_arp_add_del_command, static) = {
2019   .path = "set ip arp",
2020   .short_help =
2021   "set ip arp [del] <intfc> <ip-address> <mac-address> [static] [no-fib-entry] [count <count>] [fib-id <fib-id>] [proxy <lo-addr> - <hi-addr>]",
2022   .function = ip_arp_add_del_command_fn,
2023 };
2024 /* *INDENT-ON* */
2025
2026 static clib_error_t *
2027 set_int_proxy_arp_command_fn (vlib_main_t * vm,
2028                               unformat_input_t *
2029                               input, vlib_cli_command_t * cmd)
2030 {
2031   vnet_main_t *vnm = vnet_get_main ();
2032   u32 sw_if_index;
2033   vnet_sw_interface_t *si;
2034   int enable = 0;
2035   int intfc_set = 0;
2036
2037   while (unformat_check_input (input) != UNFORMAT_END_OF_INPUT)
2038     {
2039       if (unformat (input, "%U", unformat_vnet_sw_interface,
2040                     vnm, &sw_if_index))
2041         intfc_set = 1;
2042       else if (unformat (input, "enable") || unformat (input, "on"))
2043         enable = 1;
2044       else if (unformat (input, "disable") || unformat (input, "off"))
2045         enable = 0;
2046       else
2047         break;
2048     }
2049
2050   if (intfc_set == 0)
2051     return clib_error_return (0, "unknown input '%U'",
2052                               format_unformat_error, input);
2053
2054   si = vnet_get_sw_interface (vnm, sw_if_index);
2055   ASSERT (si);
2056   if (enable)
2057     si->flags |= VNET_SW_INTERFACE_FLAG_PROXY_ARP;
2058   else
2059     si->flags &= ~VNET_SW_INTERFACE_FLAG_PROXY_ARP;
2060
2061   return 0;
2062 }
2063
2064 /* *INDENT-OFF* */
2065 /*?
2066  * Enable proxy-arp on an interface. The vpp stack will answer ARP
2067  * requests for the indicated address range. Multiple proxy-arp
2068  * ranges may be provisioned.
2069  *
2070  * @note Proxy ARP as a technology is infamous for blackholing traffic.
2071  * Also, the underlying implementation has not been performance-tuned.
2072  * Avoid creating an unnecessarily large set of ranges.
2073  *
2074  * @cliexpar
2075  * To enable proxy arp on a range of addresses, use:
2076  * @cliexcmd{set ip arp proxy 6.0.0.1 - 6.0.0.11}
2077  * Append 'del' to delete a range of proxy ARP addresses:
2078  * @cliexcmd{set ip arp proxy 6.0.0.1 - 6.0.0.11 del}
2079  * You must then specifically enable proxy arp on individual interfaces:
2080  * @cliexcmd{set interface proxy-arp GigabitEthernet0/8/0 enable}
2081  * To disable proxy arp on an individual interface:
2082  * @cliexcmd{set interface proxy-arp GigabitEthernet0/8/0 disable}
2083  ?*/
2084 VLIB_CLI_COMMAND (set_int_proxy_enable_command, static) = {
2085   .path = "set interface proxy-arp",
2086   .short_help =
2087   "set interface proxy-arp <intfc> [enable|disable]",
2088   .function = set_int_proxy_arp_command_fn,
2089 };
2090 /* *INDENT-ON* */
2091
2092
2093 /*
2094  * ARP/ND Termination in a L2 Bridge Domain based on IP4/IP6 to MAC
2095  * hash tables mac_by_ip4 and mac_by_ip6 for each BD.
2096  */
2097 typedef enum
2098 {
2099   ARP_TERM_NEXT_L2_OUTPUT,
2100   ARP_TERM_NEXT_DROP,
2101   ARP_TERM_N_NEXT,
2102 } arp_term_next_t;
2103
2104 u32 arp_term_next_node_index[32];
2105
2106 static uword
2107 arp_term_l2bd (vlib_main_t * vm,
2108                vlib_node_runtime_t * node, vlib_frame_t * frame)
2109 {
2110   l2input_main_t *l2im = &l2input_main;
2111   u32 n_left_from, next_index, *from, *to_next;
2112   u32 n_replies_sent = 0;
2113   u16 last_bd_index = ~0;
2114   l2_bridge_domain_t *last_bd_config = 0;
2115   l2_input_config_t *cfg0;
2116
2117   from = vlib_frame_vector_args (frame);
2118   n_left_from = frame->n_vectors;
2119   next_index = node->cached_next_index;
2120
2121   while (n_left_from > 0)
2122     {
2123       u32 n_left_to_next;
2124
2125       vlib_get_next_frame (vm, node, next_index, to_next, n_left_to_next);
2126
2127       while (n_left_from > 0 && n_left_to_next > 0)
2128         {
2129           vlib_buffer_t *p0;
2130           ethernet_header_t *eth0;
2131           ethernet_arp_header_t *arp0;
2132           ip6_header_t *iph0;
2133           u8 *l3h0;
2134           u32 pi0, error0, next0, sw_if_index0;
2135           u16 ethertype0;
2136           u16 bd_index0;
2137           u32 ip0;
2138           u8 *macp0;
2139           u8 is_vrrp_reply0;
2140
2141           pi0 = from[0];
2142           to_next[0] = pi0;
2143           from += 1;
2144           to_next += 1;
2145           n_left_from -= 1;
2146           n_left_to_next -= 1;
2147
2148           p0 = vlib_get_buffer (vm, pi0);
2149           // Terminate only local (SHG == 0) ARP
2150           if (vnet_buffer (p0)->l2.shg != 0)
2151             goto next_l2_feature;
2152
2153           eth0 = vlib_buffer_get_current (p0);
2154           l3h0 = (u8 *) eth0 + vnet_buffer (p0)->l2.l2_len;
2155           ethertype0 = clib_net_to_host_u16 (*(u16 *) (l3h0 - 2));
2156           arp0 = (ethernet_arp_header_t *) l3h0;
2157
2158           if (PREDICT_FALSE ((ethertype0 != ETHERNET_TYPE_ARP) ||
2159                              (arp0->opcode !=
2160                               clib_host_to_net_u16
2161                               (ETHERNET_ARP_OPCODE_request))))
2162             goto check_ip6_nd;
2163
2164           /* Must be ARP request packet here */
2165           if (PREDICT_FALSE ((node->flags & VLIB_NODE_FLAG_TRACE) &&
2166                              (p0->flags & VLIB_BUFFER_IS_TRACED)))
2167             {
2168               u8 *t0 = vlib_add_trace (vm, node, p0,
2169                                        sizeof (ethernet_arp_input_trace_t));
2170               clib_memcpy (t0, l3h0, sizeof (ethernet_arp_input_trace_t));
2171             }
2172
2173           error0 = ETHERNET_ARP_ERROR_replies_sent;
2174           error0 =
2175             (arp0->l2_type !=
2176              clib_net_to_host_u16 (ETHERNET_ARP_HARDWARE_TYPE_ethernet)
2177              ? ETHERNET_ARP_ERROR_l2_type_not_ethernet : error0);
2178           error0 =
2179             (arp0->l3_type !=
2180              clib_net_to_host_u16 (ETHERNET_TYPE_IP4) ?
2181              ETHERNET_ARP_ERROR_l3_type_not_ip4 : error0);
2182
2183           sw_if_index0 = vnet_buffer (p0)->sw_if_index[VLIB_RX];
2184
2185           if (error0)
2186             goto drop;
2187
2188           is_vrrp_reply0 =
2189             ((arp0->opcode ==
2190               clib_host_to_net_u16 (ETHERNET_ARP_OPCODE_reply))
2191              &&
2192              (!memcmp
2193               (arp0->ip4_over_ethernet[0].ethernet, vrrp_prefix,
2194                sizeof (vrrp_prefix))));
2195
2196           /* Trash ARP packets whose ARP-level source addresses do not
2197              match their L2-frame-level source addresses, unless it's
2198              a reply from a VRRP virtual router */
2199           if (PREDICT_FALSE
2200               (memcmp (eth0->src_address, arp0->ip4_over_ethernet[0].ethernet,
2201                        sizeof (eth0->src_address)) && !is_vrrp_reply0))
2202             {
2203               error0 = ETHERNET_ARP_ERROR_l2_address_mismatch;
2204               goto drop;
2205             }
2206
2207           /* Check if anyone want ARP request events for L2 BDs */
2208           {
2209             pending_resolution_t *mc;
2210             ethernet_arp_main_t *am = &ethernet_arp_main;
2211             uword *p = hash_get (am->mac_changes_by_address, 0);
2212             if (p)
2213               {
2214                 u32 next_index = p[0];
2215                 while (next_index != (u32) ~ 0)
2216                   {
2217                     int (*fp) (u32, u8 *, u32, u32);
2218                     int rv = 1;
2219                     mc = pool_elt_at_index (am->mac_changes, next_index);
2220                     fp = mc->data_callback;
2221                     /* Call the callback, return 1 to suppress dup events */
2222                     if (fp)
2223                       rv = (*fp) (mc->data,
2224                                   arp0->ip4_over_ethernet[0].ethernet,
2225                                   sw_if_index0,
2226                                   arp0->ip4_over_ethernet[0].ip4.as_u32);
2227                     /* Signal the resolver process */
2228                     if (rv == 0)
2229                       vlib_process_signal_event (vm, mc->node_index,
2230                                                  mc->type_opaque, mc->data);
2231                     next_index = mc->next_index;
2232                   }
2233               }
2234           }
2235
2236           /* lookup BD mac_by_ip4 hash table for MAC entry */
2237           ip0 = arp0->ip4_over_ethernet[1].ip4.as_u32;
2238           bd_index0 = vnet_buffer (p0)->l2.bd_index;
2239           if (PREDICT_FALSE ((bd_index0 != last_bd_index)
2240                              || (last_bd_index == (u16) ~ 0)))
2241             {
2242               last_bd_index = bd_index0;
2243               last_bd_config = vec_elt_at_index (l2im->bd_configs, bd_index0);
2244             }
2245           macp0 = (u8 *) hash_get (last_bd_config->mac_by_ip4, ip0);
2246
2247           if (PREDICT_FALSE (!macp0))
2248             goto next_l2_feature;       /* MAC not found */
2249
2250           /* MAC found, send ARP reply -
2251              Convert ARP request packet to ARP reply */
2252           arp0->opcode = clib_host_to_net_u16 (ETHERNET_ARP_OPCODE_reply);
2253           arp0->ip4_over_ethernet[1] = arp0->ip4_over_ethernet[0];
2254           arp0->ip4_over_ethernet[0].ip4.as_u32 = ip0;
2255           clib_memcpy (arp0->ip4_over_ethernet[0].ethernet, macp0, 6);
2256           clib_memcpy (eth0->dst_address, eth0->src_address, 6);
2257           clib_memcpy (eth0->src_address, macp0, 6);
2258           n_replies_sent += 1;
2259
2260         output_response:
2261           /* For BVI, need to use l2-fwd node to send ARP reply as
2262              l2-output node cannot output packet to BVI properly */
2263           cfg0 = vec_elt_at_index (l2im->configs, sw_if_index0);
2264           if (PREDICT_FALSE (cfg0->bvi))
2265             {
2266               vnet_buffer (p0)->l2.feature_bitmap |= L2INPUT_FEAT_FWD;
2267               vnet_buffer (p0)->sw_if_index[VLIB_RX] = 0;
2268               goto next_l2_feature;
2269             }
2270
2271           /* Send ARP/ND reply back out input interface through l2-output */
2272           vnet_buffer (p0)->sw_if_index[VLIB_TX] = sw_if_index0;
2273           next0 = ARP_TERM_NEXT_L2_OUTPUT;
2274           vlib_validate_buffer_enqueue_x1 (vm, node, next_index,
2275                                            to_next, n_left_to_next, pi0,
2276                                            next0);
2277           continue;
2278
2279         check_ip6_nd:
2280           /* IP6 ND event notification or solicitation handling to generate
2281              local response instead of flooding */
2282           iph0 = (ip6_header_t *) l3h0;
2283           if (PREDICT_FALSE (ethertype0 == ETHERNET_TYPE_IP6 &&
2284                              iph0->protocol == IP_PROTOCOL_ICMP6 &&
2285                              !ip6_address_is_unspecified
2286                              (&iph0->src_address)))
2287             {
2288               sw_if_index0 = vnet_buffer (p0)->sw_if_index[VLIB_RX];
2289               if (vnet_ip6_nd_term
2290                   (vm, node, p0, eth0, iph0, sw_if_index0,
2291                    vnet_buffer (p0)->l2.bd_index))
2292                 goto output_response;
2293             }
2294
2295         next_l2_feature:
2296           {
2297             next0 = vnet_l2_feature_next (p0, arp_term_next_node_index,
2298                                           L2INPUT_FEAT_ARP_TERM);
2299             vlib_validate_buffer_enqueue_x1 (vm, node, next_index,
2300                                              to_next, n_left_to_next,
2301                                              pi0, next0);
2302             continue;
2303           }
2304
2305         drop:
2306           if (0 == arp0->ip4_over_ethernet[0].ip4.as_u32 ||
2307               (arp0->ip4_over_ethernet[0].ip4.as_u32 ==
2308                arp0->ip4_over_ethernet[1].ip4.as_u32))
2309             {
2310               error0 = ETHERNET_ARP_ERROR_gratuitous_arp;
2311             }
2312           next0 = ARP_TERM_NEXT_DROP;
2313           p0->error = node->errors[error0];
2314
2315           vlib_validate_buffer_enqueue_x1 (vm, node, next_index,
2316                                            to_next, n_left_to_next, pi0,
2317                                            next0);
2318         }
2319
2320       vlib_put_next_frame (vm, node, next_index, n_left_to_next);
2321     }
2322
2323   vlib_error_count (vm, node->node_index,
2324                     ETHERNET_ARP_ERROR_replies_sent, n_replies_sent);
2325   return frame->n_vectors;
2326 }
2327
2328 /* *INDENT-OFF* */
2329 VLIB_REGISTER_NODE (arp_term_l2bd_node, static) = {
2330   .function = arp_term_l2bd,
2331   .name = "arp-term-l2bd",
2332   .vector_size = sizeof (u32),
2333   .n_errors = ETHERNET_ARP_N_ERROR,
2334   .error_strings = ethernet_arp_error_strings,
2335   .n_next_nodes = ARP_TERM_N_NEXT,
2336   .next_nodes = {
2337     [ARP_TERM_NEXT_L2_OUTPUT] = "l2-output",
2338     [ARP_TERM_NEXT_DROP] = "error-drop",
2339   },
2340   .format_buffer = format_ethernet_arp_header,
2341   .format_trace = format_arp_term_input_trace,
2342 };
2343 /* *INDENT-ON* */
2344
2345 clib_error_t *
2346 arp_term_init (vlib_main_t * vm)
2347 {
2348   // Initialize the feature next-node indexes
2349   feat_bitmap_init_next_nodes (vm,
2350                                arp_term_l2bd_node.index,
2351                                L2INPUT_N_FEAT,
2352                                l2input_get_feat_names (),
2353                                arp_term_next_node_index);
2354   return 0;
2355 }
2356
2357 VLIB_INIT_FUNCTION (arp_term_init);
2358
2359 void
2360 change_arp_mac (u32 sw_if_index, ethernet_arp_ip4_entry_t * e)
2361 {
2362   if (e->sw_if_index == sw_if_index)
2363     {
2364       adj_nbr_walk_nh4 (e->sw_if_index,
2365                         &e->ip4_address, arp_mk_complete_walk, e);
2366     }
2367 }
2368
2369 void
2370 ethernet_arp_change_mac (u32 sw_if_index)
2371 {
2372   ethernet_arp_main_t *am = &ethernet_arp_main;
2373   ethernet_arp_ip4_entry_t *e;
2374
2375   /* *INDENT-OFF* */
2376   pool_foreach (e, am->ip4_entry_pool,
2377   ({
2378     change_arp_mac (sw_if_index, e);
2379   }));
2380   /* *INDENT-ON* */
2381 }
2382
2383 void static
2384 send_ip4_garp (vlib_main_t * vm, vnet_hw_interface_t * hi)
2385 {
2386   ip4_main_t *i4m = &ip4_main;
2387   u32 sw_if_index = hi->sw_if_index;
2388   ip4_address_t *ip4_addr = ip4_interface_first_address (i4m, sw_if_index, 0);
2389
2390   if (ip4_addr)
2391     {
2392       clib_warning ("Sending GARP for IP4 address %U on sw_if_idex %d",
2393                     format_ip4_address, ip4_addr, sw_if_index);
2394
2395       /* Form GARP packet for output - Gratuitous ARP is an ARP request packet
2396          where the interface IP/MAC pair is used for both source and request
2397          MAC/IP pairs in the request */
2398       u32 bi = 0;
2399       ethernet_arp_header_t *h = vlib_packet_template_get_packet
2400         (vm, &i4m->ip4_arp_request_packet_template, &bi);
2401       clib_memcpy (h->ip4_over_ethernet[0].ethernet, hi->hw_address,
2402                    sizeof (h->ip4_over_ethernet[0].ethernet));
2403       clib_memcpy (h->ip4_over_ethernet[1].ethernet, hi->hw_address,
2404                    sizeof (h->ip4_over_ethernet[1].ethernet));
2405       h->ip4_over_ethernet[0].ip4 = ip4_addr[0];
2406       h->ip4_over_ethernet[1].ip4 = ip4_addr[0];
2407
2408       /* Setup MAC header with ARP Etype and broadcast DMAC */
2409       vlib_buffer_t *b = vlib_get_buffer (vm, bi);
2410       vlib_buffer_advance (b, -sizeof (ethernet_header_t));
2411       ethernet_header_t *e = vlib_buffer_get_current (b);
2412       e->type = clib_host_to_net_u16 (ETHERNET_TYPE_ARP);
2413       clib_memcpy (e->src_address, hi->hw_address, sizeof (e->src_address));
2414       memset (e->dst_address, 0xff, sizeof (e->dst_address));
2415
2416       /* Send GARP packet out the specified interface */
2417       vnet_buffer (b)->sw_if_index[VLIB_RX] =
2418         vnet_buffer (b)->sw_if_index[VLIB_TX] = sw_if_index;
2419       vlib_frame_t *f = vlib_get_frame_to_node (vm, hi->output_node_index);
2420       u32 *to_next = vlib_frame_vector_args (f);
2421       to_next[0] = bi;
2422       f->n_vectors = 1;
2423       vlib_put_frame_to_node (vm, hi->output_node_index, f);
2424     }
2425 }
2426
2427 static vlib_node_registration_t send_garp_na_proc_node;
2428
2429 static uword
2430 send_garp_na_process (vlib_main_t * vm,
2431                       vlib_node_runtime_t * rt, vlib_frame_t * f)
2432 {
2433   vnet_main_t *vnm = vnet_get_main ();
2434   uword event_type, *event_data = 0;
2435
2436   send_garp_na_process_node_index = send_garp_na_proc_node.index;
2437
2438   while (1)
2439     {
2440       vlib_process_wait_for_event (vm);
2441       event_type = vlib_process_get_events (vm, &event_data);
2442       if ((event_type == SEND_GARP_NA) && (vec_len (event_data) >= 1))
2443         {
2444           u32 hw_if_index = event_data[0];
2445           vnet_hw_interface_t *hi = vnet_get_hw_interface (vnm, hw_if_index);
2446           send_ip4_garp (vm, hi);
2447           send_ip6_na (vm, hi);
2448         }
2449       vec_reset_length (event_data);
2450     }
2451   return 0;
2452 }
2453
2454
2455 /* *INDENT-OFF* */
2456 VLIB_REGISTER_NODE (send_garp_na_proc_node, static) = {
2457     .function = send_garp_na_process,
2458     .type = VLIB_NODE_TYPE_PROCESS,
2459     .name = "send-garp-na-process",
2460 };
2461 /* *INDENT-ON* */
2462
2463 /*
2464  * fd.io coding-style-patch-verification: ON
2465  *
2466  * Local Variables:
2467  * eval: (c-set-style "gnu")
2468  * End:
2469  */