src/vnet/adj/adj.c

   1 /*
   2  * Copyright (c) 2016 Cisco and/or its affiliates.
   3  * Licensed under the Apache License, Version 2.0 (the "License");
   4  * you may not use this file except in compliance with the License.
   5  * You may obtain a copy of the License at:
   6  *
   7  *     http://www.apache.org/licenses/LICENSE-2.0
   8  *
   9  * Unless required by applicable law or agreed to in writing, software
  10  * distributed under the License is distributed on an "AS IS" BASIS,
  11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12  * See the License for the specific language governing permissions and
  13  * limitations under the License.
  14  */
  15
  16 #include <vnet/adj/adj.h>
  17 #include <vnet/adj/adj_internal.h>
  18 #include <vnet/adj/adj_glean.h>
  19 #include <vnet/adj/adj_midchain.h>
  20 #include <vnet/adj/adj_mcast.h>
  21 #include <vnet/adj/adj_delegate.h>
  22 #include <vnet/fib/fib_node_list.h>
  23
  24 /* Adjacency packet/byte counters indexed by adjacency index. */
  25 vlib_combined_counter_main_t adjacency_counters = {
  26     .name = "adjacency",
  27     .stat_segment_name = "/net/adjacency",
  28 };
  29
  30 /*
  31  * the single adj pool
  32  */
  33 ip_adjacency_t *adj_pool;
  34
  35 /**
  36  * @brief Global Config for enabling per-adjacency counters.
  37  * By default these are disabled.
  38  */
  39 int adj_per_adj_counters;
  40
  41 const ip46_address_t ADJ_BCAST_ADDR = {
  42     .ip6 = {
  43         .as_u64[0] = 0xffffffffffffffff,
  44         .as_u64[1] = 0xffffffffffffffff,
  45     },
  46 };
  47
  48 /**
  49  * Adj flag names
  50  */
  51 static const char *adj_attr_names[] = ADJ_ATTR_NAMES;
  52
  53 always_inline void
  54 adj_poison (ip_adjacency_t * adj)
  55 {
  56     if (CLIB_DEBUG > 0)
  57     {
  58         clib_memset (adj, 0xfe, sizeof (adj[0]));
  59     }
  60 }
  61
  62 ip_adjacency_t *
  63 adj_alloc (fib_protocol_t proto)
  64 {
  65     ip_adjacency_t *adj;
  66     u8 need_barrier_sync = 0;
  67     vlib_main_t *vm;
  68     vm = vlib_get_main();
  69
  70     ASSERT (vm->thread_index == 0);
  71
  72     pool_get_aligned_will_expand (adj_pool, need_barrier_sync,
  73                                   CLIB_CACHE_LINE_BYTES);
  74     /* If the adj_pool will expand, stop the parade. */
  75     if (need_barrier_sync)
  76         vlib_worker_thread_barrier_sync (vm);
  77
  78     pool_get_aligned(adj_pool, adj, CLIB_CACHE_LINE_BYTES);
  79
  80     adj_poison(adj);
  81
  82     /* Validate adjacency counters. */
  83     if (need_barrier_sync == 0)
  84     {
  85         /* If the adj counter pool will expand, stop the parade */
  86         need_barrier_sync = vlib_validate_combined_counter_will_expand
  87             (&adjacency_counters, adj_get_index (adj));
  88         if (need_barrier_sync)
  89             vlib_worker_thread_barrier_sync (vm);
  90     }
  91     vlib_validate_combined_counter(&adjacency_counters,
  92                                    adj_get_index(adj));
  93
  94     /* Make sure certain fields are always initialized. */
  95     vlib_zero_combined_counter(&adjacency_counters,
  96                                adj_get_index(adj));
  97     fib_node_init(&adj->ia_node,
  98                   FIB_NODE_TYPE_ADJ);
  99
 100     adj->ia_nh_proto = proto;
 101     adj->ia_flags = 0;
 102     adj->ia_cfg_index = 0;
 103     adj->rewrite_header.sw_if_index = ~0;
 104     adj->rewrite_header.flags = 0;
 105     adj->lookup_next_index = 0;
 106     adj->ia_delegates = NULL;
 107
 108     /* lest it become a midchain in the future */
 109     clib_memset(&adj->sub_type.midchain.next_dpo, 0,
 110            sizeof(adj->sub_type.midchain.next_dpo));
 111
 112     if (need_barrier_sync)
 113         vlib_worker_thread_barrier_release (vm);
 114
 115     return (adj);
 116 }
 117
 118 static int
 119 adj_index_is_special (adj_index_t adj_index)
 120 {
 121     if (ADJ_INDEX_INVALID == adj_index)
 122         return (!0);
 123
 124     return (0);
 125 }
 126
 127 u8*
 128 format_adj_flags (u8 * s, va_list * args)
 129 {
 130     adj_flags_t af;
 131     adj_attr_t at;
 132
 133     af = va_arg (*args, int);
 134
 135     if (ADJ_FLAG_NONE == af)
 136     {
 137         return (format(s, "None"));
 138     }
 139     FOR_EACH_ADJ_ATTR(at)
 140     {
 141         if (af & (1 << at))
 142         {
 143             s = format(s, "%s ", adj_attr_names[at]);
 144         }
 145     }
 146     return (s);
 147 }
 148
 149 /**
 150  * @brief Pretty print helper function for formatting specific adjacencies.
 151  * @param s - input string to format
 152  * @param args - other args passed to format function such as:
 153  *                 - vnet_main_t
 154  *                 - ip_lookup_main_t
 155  *                 - adj_index
 156  */
 157 u8 *
 158 format_ip_adjacency (u8 * s, va_list * args)
 159 {
 160     format_ip_adjacency_flags_t fiaf;
 161     ip_adjacency_t * adj;
 162     u32 adj_index;
 163
 164     adj_index = va_arg (*args, u32);
 165     fiaf = va_arg (*args, format_ip_adjacency_flags_t);
 166
 167     if (!adj_is_valid(adj_index))
 168       return format(s, "<invalid adjacency>");
 169
 170     adj = adj_get(adj_index);
 171
 172     switch (adj->lookup_next_index)
 173     {
 174     case IP_LOOKUP_NEXT_REWRITE:
 175     case IP_LOOKUP_NEXT_BCAST:
 176         s = format (s, "%U", format_adj_nbr, adj_index, 0);
 177         break;
 178     case IP_LOOKUP_NEXT_ARP:
 179         s = format (s, "%U", format_adj_nbr_incomplete, adj_index, 0);
 180         break;
 181     case IP_LOOKUP_NEXT_GLEAN:
 182         s = format (s, "%U", format_adj_glean, adj_index, 0);
 183         break;
 184     case IP_LOOKUP_NEXT_MIDCHAIN:
 185         s = format (s, "%U", format_adj_midchain, adj_index, 2);
 186         break;
 187     case IP_LOOKUP_NEXT_MCAST:
 188         s = format (s, "%U", format_adj_mcast, adj_index, 0);
 189         break;
 190     case IP_LOOKUP_NEXT_MCAST_MIDCHAIN:
 191         s = format (s, "%U", format_adj_mcast_midchain, adj_index, 0);
 192         break;
 193     case IP_LOOKUP_NEXT_DROP:
 194     case IP_LOOKUP_NEXT_PUNT:
 195     case IP_LOOKUP_NEXT_LOCAL:
 196     case IP_LOOKUP_NEXT_ICMP_ERROR:
 197     case IP_LOOKUP_N_NEXT:
 198         break;
 199     }
 200
 201     if (fiaf & FORMAT_IP_ADJACENCY_DETAIL)
 202     {
 203         vlib_counter_t counts;
 204
 205         vlib_get_combined_counter(&adjacency_counters, adj_index, &counts);
 206         s = format (s, "\n   flags:%U", format_adj_flags, adj->ia_flags);
 207         s = format (s, "\n   counts:[%Ld:%Ld]", counts.packets, counts.bytes);
 208         s = format (s, "\n   locks:%d", adj->ia_node.fn_locks);
 209         s = format(s, "\n delegates:");
 210         s = adj_delegate_format(s, adj);
 211
 212         s = format(s, "\n children:");
 213         if (fib_node_list_get_size(adj->ia_node.fn_children))
 214         {
 215             s = format(s, "\n  ");
 216             s = fib_node_children_format(adj->ia_node.fn_children, s);
 217         }
 218     }
 219
 220     return s;
 221 }
 222
 223 int
 224 adj_recursive_loop_detect (adj_index_t ai,
 225                            fib_node_index_t **entry_indicies)
 226 {
 227     ip_adjacency_t * adj;
 228
 229     adj = adj_get(ai);
 230
 231     switch (adj->lookup_next_index)
 232     {
 233     case IP_LOOKUP_NEXT_REWRITE:
 234     case IP_LOOKUP_NEXT_ARP:
 235     case IP_LOOKUP_NEXT_GLEAN:
 236     case IP_LOOKUP_NEXT_MCAST:
 237     case IP_LOOKUP_NEXT_BCAST:
 238     case IP_LOOKUP_NEXT_DROP:
 239     case IP_LOOKUP_NEXT_PUNT:
 240     case IP_LOOKUP_NEXT_LOCAL:
 241     case IP_LOOKUP_NEXT_ICMP_ERROR:
 242     case IP_LOOKUP_N_NEXT:
 243         /*
 244          * these adjacency types are terminal graph nodes, so there's no
 245          * possibility of a loop down here.
 246          */
 247         break;
 248     case IP_LOOKUP_NEXT_MIDCHAIN:
 249     case IP_LOOKUP_NEXT_MCAST_MIDCHAIN:
 250         return (adj_ndr_midchain_recursive_loop_detect(ai, entry_indicies));
 251     }
 252
 253     return (0);
 254 }
 255
 256 /*
 257  * adj_last_lock_gone
 258  *
 259  * last lock/reference to the adj has gone, we no longer need it.
 260  */
 261 static void
 262 adj_last_lock_gone (ip_adjacency_t *adj)
 263 {
 264     vlib_main_t * vm = vlib_get_main();
 265
 266     ASSERT(0 == fib_node_list_get_size(adj->ia_node.fn_children));
 267     ADJ_DBG(adj, "last-lock-gone");
 268
 269     adj_delegate_adj_deleted(adj);
 270
 271     vlib_worker_thread_barrier_sync (vm);
 272
 273     switch (adj->lookup_next_index)
 274     {
 275     case IP_LOOKUP_NEXT_MIDCHAIN:
 276         adj_midchain_teardown(adj);
 277         /* FALL THROUGH */
 278     case IP_LOOKUP_NEXT_ARP:
 279     case IP_LOOKUP_NEXT_REWRITE:
 280     case IP_LOOKUP_NEXT_BCAST:
 281         /*
 282          * complete and incomplete nbr adjs
 283          */
 284         adj_nbr_remove(adj_get_index(adj),
 285                        adj->ia_nh_proto,
 286                        adj->ia_link,
 287                        &adj->sub_type.nbr.next_hop,
 288                        adj->rewrite_header.sw_if_index);
 289         break;
 290     case IP_LOOKUP_NEXT_GLEAN:
 291         adj_glean_remove(adj);
 292         break;
 293     case IP_LOOKUP_NEXT_MCAST_MIDCHAIN:
 294         adj_midchain_teardown(adj);
 295         /* FALL THROUGH */
 296     case IP_LOOKUP_NEXT_MCAST:
 297         adj_mcast_remove(adj->ia_nh_proto,
 298                          adj->rewrite_header.sw_if_index);
 299         break;
 300     case IP_LOOKUP_NEXT_DROP:
 301     case IP_LOOKUP_NEXT_PUNT:
 302     case IP_LOOKUP_NEXT_LOCAL:
 303     case IP_LOOKUP_NEXT_ICMP_ERROR:
 304     case IP_LOOKUP_N_NEXT:
 305         /*
 306          * type not stored in any DB from which we need to remove it
 307          */
 308         break;
 309     }
 310
 311     vlib_worker_thread_barrier_release(vm);
 312
 313     fib_node_deinit(&adj->ia_node);
 314     ASSERT(0 == vec_len(adj->ia_delegates));
 315     vec_free(adj->ia_delegates);
 316     pool_put(adj_pool, adj);
 317 }
 318
 319 u32
 320 adj_dpo_get_urpf (const dpo_id_t *dpo)
 321 {
 322     ip_adjacency_t *adj;
 323
 324     adj = adj_get(dpo->dpoi_index);
 325
 326     return (adj->rewrite_header.sw_if_index);
 327 }
 328
 329 void
 330 adj_lock (adj_index_t adj_index)
 331 {
 332     ip_adjacency_t *adj;
 333
 334     if (adj_index_is_special(adj_index))
 335     {
 336         return;
 337     }
 338
 339     adj = adj_get(adj_index);
 340     ASSERT(adj);
 341
 342     ADJ_DBG(adj, "lock");
 343     fib_node_lock(&adj->ia_node);
 344 }
 345
 346 void
 347 adj_unlock (adj_index_t adj_index)
 348 {
 349     ip_adjacency_t *adj;
 350
 351     if (adj_index_is_special(adj_index))
 352     {
 353         return;
 354     }
 355
 356     adj = adj_get(adj_index);
 357     ASSERT(adj);
 358
 359     ADJ_DBG(adj, "unlock");
 360     ASSERT(adj);
 361
 362     fib_node_unlock(&adj->ia_node);
 363 }
 364
 365 u32
 366 adj_child_add (adj_index_t adj_index,
 367                fib_node_type_t child_type,
 368                fib_node_index_t child_index)
 369 {
 370     ASSERT(ADJ_INDEX_INVALID != adj_index);
 371     if (adj_index_is_special(adj_index))
 372     {
 373         return (~0);
 374     }
 375
 376     return (fib_node_child_add(FIB_NODE_TYPE_ADJ,
 377                                adj_index,
 378                                child_type,
 379                                child_index));
 380 }
 381
 382 void
 383 adj_child_remove (adj_index_t adj_index,
 384                   u32 sibling_index)
 385 {
 386     if (adj_index_is_special(adj_index))
 387     {
 388         return;
 389     }
 390
 391     fib_node_child_remove(FIB_NODE_TYPE_ADJ,
 392                           adj_index,
 393                           sibling_index);
 394 }
 395
 396 /*
 397  * Context for the walk to update the cached feature flags.
 398  */
 399 typedef struct adj_feature_update_t_
 400 {
 401     u8 arc;
 402     u8 enable;
 403 } adj_feature_update_ctx_t;
 404
 405 static adj_walk_rc_t
 406 adj_feature_update_walk_cb (adj_index_t ai,
 407                             void *arg)
 408 {
 409     adj_feature_update_ctx_t *ctx = arg;
 410     ip_adjacency_t *adj;
 411
 412     adj = adj_get(ai);
 413
 414     /*
 415      * this ugly mess matches the feature arc that is changing with affected
 416      * adjacencies
 417      */
 418     if (((ctx->arc == ip6_main.lookup_main.output_feature_arc_index) &&
 419          (VNET_LINK_IP6 == adj->ia_link)) ||
 420         ((ctx->arc == ip4_main.lookup_main.output_feature_arc_index) &&
 421          (VNET_LINK_IP4 == adj->ia_link)) ||
 422         ((ctx->arc == mpls_main.output_feature_arc_index) &&
 423          (VNET_LINK_MPLS == adj->ia_link)))
 424     {
 425         vnet_feature_main_t *fm = &feature_main;
 426         vnet_feature_config_main_t *cm;
 427
 428         cm = &fm->feature_config_mains[ctx->arc];
 429
 430         if (ctx->enable)
 431             adj->rewrite_header.flags |= VNET_REWRITE_HAS_FEATURES;
 432         else
 433             adj->rewrite_header.flags &= ~VNET_REWRITE_HAS_FEATURES;
 434
 435         adj->ia_cfg_index = vec_elt (cm->config_index_by_sw_if_index,
 436                                      adj->rewrite_header.sw_if_index);
 437     }
 438     return (ADJ_WALK_RC_CONTINUE);
 439 }
 440
 441 static void
 442 adj_feature_update (u32 sw_if_index,
 443                     u8 arc_index,
 444                     u8 is_enable,
 445                     void *data)
 446 {
 447     /*
 448      * Walk all the adjacencies on the interface to update the cached
 449      * 'has-features' flag
 450      */
 451     adj_feature_update_ctx_t ctx = {
 452         .arc = arc_index,
 453         .enable = is_enable,
 454     };
 455     adj_walk (sw_if_index, adj_feature_update_walk_cb, &ctx);
 456 }
 457
 458 static adj_walk_rc_t
 459 adj_mtu_update_walk_cb (adj_index_t ai,
 460                         void *arg)
 461 {
 462     ip_adjacency_t *adj;
 463
 464     adj = adj_get(ai);
 465
 466     vnet_rewrite_update_mtu (vnet_get_main(), adj->ia_link,
 467                              &adj->rewrite_header);
 468
 469     return (ADJ_WALK_RC_CONTINUE);
 470 }
 471
 472 static clib_error_t *
 473 adj_mtu_update (vnet_main_t * vnm, u32 sw_if_index, u32 flags)
 474 {
 475   adj_walk (sw_if_index, adj_mtu_update_walk_cb, NULL);
 476
 477   return (NULL);
 478 }
 479
 480 VNET_SW_INTERFACE_MTU_CHANGE_FUNCTION(adj_mtu_update);
 481
 482 /**
 483  * @brief Walk the Adjacencies on a given interface
 484  */
 485 void
 486 adj_walk (u32 sw_if_index,
 487           adj_walk_cb_t cb,
 488           void *ctx)
 489 {
 490     /*
 491      * walk all the neighbor adjacencies
 492      */
 493     fib_protocol_t proto;
 494
 495     FOR_EACH_FIB_IP_PROTOCOL(proto)
 496     {
 497         adj_nbr_walk(sw_if_index, proto, cb, ctx);
 498         adj_mcast_walk(sw_if_index, proto, cb, ctx);
 499     }
 500 }
 501
 502 /**
 503  * @brief Return the link type of the adjacency
 504  */
 505 vnet_link_t
 506 adj_get_link_type (adj_index_t ai)
 507 {
 508     const ip_adjacency_t *adj;
 509
 510     adj = adj_get(ai);
 511
 512     return (adj->ia_link);
 513 }
 514
 515 /**
 516  * @brief Return the sw interface index of the adjacency.
 517  */
 518 u32
 519 adj_get_sw_if_index (adj_index_t ai)
 520 {
 521     const ip_adjacency_t *adj;
 522
 523     adj = adj_get(ai);
 524
 525     return (adj->rewrite_header.sw_if_index);
 526 }
 527
 528 /**
 529  * @brief Return true if the adjacency is 'UP', i.e. can be used for forwarding
 530  * 0 is down, !0 is up.
 531  */
 532 int
 533 adj_is_up (adj_index_t ai)
 534 {
 535     return (adj_bfd_is_up(ai));
 536 }
 537
 538 /**
 539  * @brief Return the rewrite string of the adjacency
 540  */
 541 const u8*
 542 adj_get_rewrite (adj_index_t ai)
 543 {
 544     vnet_rewrite_header_t *rw;
 545     ip_adjacency_t *adj;
 546
 547     adj = adj_get(ai);
 548     rw = &adj->rewrite_header;
 549
 550     ASSERT (rw->data_bytes != 0xfefe);
 551
 552     return (rw->data - rw->data_bytes);
 553 }
 554
 555 static fib_node_t *
 556 adj_get_node (fib_node_index_t index)
 557 {
 558     ip_adjacency_t *adj;
 559
 560     adj = adj_get(index);
 561
 562     return (&adj->ia_node);
 563 }
 564
 565 #define ADJ_FROM_NODE(_node)                                            \
 566     ((ip_adjacency_t*)((char*)_node - STRUCT_OFFSET_OF(ip_adjacency_t, ia_node)))
 567
 568 static void
 569 adj_node_last_lock_gone (fib_node_t *node)
 570 {
 571     adj_last_lock_gone(ADJ_FROM_NODE(node));
 572 }
 573
 574 static fib_node_back_walk_rc_t
 575 adj_back_walk_notify (fib_node_t *node,
 576                       fib_node_back_walk_ctx_t *ctx)
 577 {
 578     ip_adjacency_t *adj;
 579
 580     adj = ADJ_FROM_NODE(node);
 581
 582     switch (adj->lookup_next_index)
 583     {
 584     case IP_LOOKUP_NEXT_MIDCHAIN:
 585         adj_midchain_delegate_restack(adj_get_index(adj));
 586         break;
 587     case IP_LOOKUP_NEXT_ARP:
 588     case IP_LOOKUP_NEXT_REWRITE:
 589     case IP_LOOKUP_NEXT_BCAST:
 590     case IP_LOOKUP_NEXT_GLEAN:
 591     case IP_LOOKUP_NEXT_MCAST:
 592     case IP_LOOKUP_NEXT_MCAST_MIDCHAIN:
 593     case IP_LOOKUP_NEXT_DROP:
 594     case IP_LOOKUP_NEXT_PUNT:
 595     case IP_LOOKUP_NEXT_LOCAL:
 596     case IP_LOOKUP_NEXT_ICMP_ERROR:
 597     case IP_LOOKUP_N_NEXT:
 598         /*
 599          * Que pasa. yo soj en el final!
 600          */
 601         ASSERT(0);
 602         break;
 603     }
 604
 605     return (FIB_NODE_BACK_WALK_CONTINUE);
 606 }
 607
 608 /*
 609  * Adjacency's graph node virtual function table
 610  */
 611 static const fib_node_vft_t adj_vft = {
 612     .fnv_get = adj_get_node,
 613     .fnv_last_lock = adj_node_last_lock_gone,
 614     .fnv_back_walk = adj_back_walk_notify,
 615 };
 616
 617 static clib_error_t *
 618 adj_module_init (vlib_main_t * vm)
 619 {
 620     fib_node_register_type(FIB_NODE_TYPE_ADJ, &adj_vft);
 621
 622     adj_nbr_module_init();
 623     adj_glean_module_init();
 624     adj_midchain_module_init();
 625     adj_mcast_module_init();
 626
 627     vnet_feature_register(adj_feature_update, NULL);
 628
 629     return (NULL);
 630 }
 631
 632 VLIB_INIT_FUNCTION (adj_module_init);
 633
 634 static clib_error_t *
 635 adj_show (vlib_main_t * vm,
 636           unformat_input_t * input,
 637           vlib_cli_command_t * cmd)
 638 {
 639     adj_index_t ai = ADJ_INDEX_INVALID;
 640     u32 sw_if_index = ~0;
 641     int summary = 0;
 642
 643     while (unformat_check_input (input) != UNFORMAT_END_OF_INPUT)
 644     {
 645         if (unformat (input, "%d", &ai))
 646             ;
 647         else if (unformat (input, "summary") || unformat (input, "sum"))
 648             summary = 1;
 649         else if (unformat (input, "%U",
 650                            unformat_vnet_sw_interface, vnet_get_main(),
 651                            &sw_if_index))
 652             ;
 653         else
 654             break;
 655     }
 656
 657     if (summary)
 658     {
 659         vlib_cli_output (vm, "Number of adjacencies: %d", pool_elts(adj_pool));
 660         vlib_cli_output (vm, "Per-adjacency counters: %s",
 661                          (adj_are_counters_enabled() ?
 662                           "enabled":
 663                           "disabled"));
 664     }
 665     else
 666     {
 667         if (ADJ_INDEX_INVALID != ai)
 668         {
 669             if (pool_is_free_index(adj_pool, ai))
 670             {
 671                 vlib_cli_output (vm, "adjacency %d invalid", ai);
 672                 return 0;
 673             }
 674
 675             vlib_cli_output (vm, "[@%d] %U",
 676                              ai,
 677                              format_ip_adjacency,  ai,
 678                              FORMAT_IP_ADJACENCY_DETAIL);
 679         }
 680         else
 681         {
 682             /* *INDENT-OFF* */
 683             pool_foreach_index(ai, adj_pool,
 684             ({
 685                 if (~0 != sw_if_index &&
 686                     sw_if_index != adj_get_sw_if_index(ai))
 687                 {
 688                 }
 689                 else
 690                 {
 691                     vlib_cli_output (vm, "[@%d] %U",
 692                                      ai,
 693                                      format_ip_adjacency, ai,
 694                                      FORMAT_IP_ADJACENCY_NONE);
 695                 }
 696             }));
 697             /* *INDENT-ON* */
 698         }
 699     }
 700     return 0;
 701 }
 702
 703 /*?
 704  * Show all adjacencies.
 705  * @cliexpar
 706  * @cliexstart{sh adj}
 707  * [@0]
 708  * [@1]  glean: loop0
 709  * [@2] ipv4 via 1.0.0.2 loop0: IP4: 00:00:22:aa:bb:cc -> 00:00:11:aa:bb:cc
 710  * [@3] mpls via 1.0.0.2 loop0: MPLS: 00:00:22:aa:bb:cc -> 00:00:11:aa:bb:cc
 711  * [@4] ipv4 via 1.0.0.3 loop0: IP4: 00:00:22:aa:bb:cc -> 00:00:11:aa:bb:cc
 712  * [@5] mpls via 1.0.0.3 loop0: MPLS: 00:00:22:aa:bb:cc -> 00:00:11:aa:bb:cc
 713  * @cliexend
 714  ?*/
 715 VLIB_CLI_COMMAND (adj_show_command, static) = {
 716     .path = "show adj",
 717     .short_help = "show adj [<adj_index>] [interface] [summary]",
 718     .function = adj_show,
 719 };
 720
 721 /**
 722  * @brief CLI invoked function to enable/disable per-adj counters
 723  */
 724 static clib_error_t *
 725 adj_cli_counters_set (vlib_main_t * vm,
 726                       unformat_input_t * input,
 727                       vlib_cli_command_t * cmd)
 728 {
 729     clib_error_t *error = NULL;
 730     int enable = ~0;
 731
 732     while (unformat_check_input (input) != UNFORMAT_END_OF_INPUT)
 733     {
 734         if (unformat (input, "enable"))
 735             enable = 1;
 736         else if (unformat (input, "disable"))
 737             enable = 0;
 738         else
 739             break;
 740     }
 741
 742     if (enable != ~0)
 743     {
 744         /* user requested something sensible */
 745         adj_per_adj_counters = enable;
 746     }
 747     else
 748     {
 749         error = clib_error_return (0, "specify 'enable' or 'disable'");
 750     }
 751
 752     return (error);
 753 }
 754
 755 /*?
 756  * Enable/disable per-adjacency counters. This is optional because it comes
 757  * with a non-negligible performance cost.
 758  ?*/
 759 VLIB_CLI_COMMAND (adj_cli_counters_set_command, static) = {
 760     .path = "adjacency counters",
 761     .short_help = "adjacency counters [enable|disable]",
 762     .function = adj_cli_counters_set,
 763 };