12af09fbf553433d3323ead66a482200dd494aac
[vpp.git] / src / vcl / vcl_private.h
1 /*
2  * Copyright (c) 2018-2019 Cisco and/or its affiliates.
3  * Licensed under the Apache License, Version 2.0 (the "License");
4  * you may not use this
5  * You may obtain a copy of the License at:
6  *
7  *     http://www.apache.org/licenses/LICENSE-2.0
8  *
9  * Unless required by applicable law or agreed to in writing, software
10  * distributed under the License is distributed on an "AS IS" BASIS,
11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
12  * See the License for the specific language governing permissions and
13  * limitations under the License.
14  */
15
16 #ifndef SRC_VCL_VCL_PRIVATE_H_
17 #define SRC_VCL_VCL_PRIVATE_H_
18
19 #include <vnet/session/application_interface.h>
20 #include <vcl/vppcom.h>
21 #include <vcl/vcl_debug.h>
22
23 #if (CLIB_DEBUG > 0)
24 /* Set VPPCOM_DEBUG_INIT 2 for connection debug,
25  *                       3 for read/write debug output
26  * or
27  *    export VCL_DEBUG=<#> to set dynamically.
28  */
29 #define VPPCOM_DEBUG_INIT 1
30 #else
31 #define VPPCOM_DEBUG_INIT 0
32 #endif
33
34 #define VPPCOM_DEBUG vcm->debug
35
36 extern __thread uword __vcl_worker_index;
37
38 static inline void
39 vcl_set_worker_index (uword wrk_index)
40 {
41   __vcl_worker_index = wrk_index;
42 }
43
44 static inline uword
45 vcl_get_worker_index (void)
46 {
47   return __vcl_worker_index;
48 }
49
50 /*
51  * VPPCOM Private definitions and functions.
52  */
53 typedef enum
54 {
55   STATE_APP_START,
56   STATE_APP_CONN_VPP,
57   STATE_APP_ENABLED,
58   STATE_APP_ATTACHED,
59   STATE_APP_ADDING_WORKER,
60   STATE_APP_ADDING_TLS_DATA,
61   STATE_APP_FAILED,
62   STATE_APP_READY
63 } app_state_t;
64
65 typedef enum
66 {
67   STATE_CLOSED = 0,
68   STATE_CONNECT = 0x01,
69   STATE_LISTEN = 0x02,
70   STATE_ACCEPT = 0x04,
71   STATE_VPP_CLOSING = 0x08,
72   STATE_DISCONNECT = 0x10,
73   STATE_DETACHED = 0x20,
74   STATE_UPDATED = 0x40,
75   STATE_LISTEN_NO_MQ = 0x80,
76 } vcl_session_state_t;
77
78 #define SERVER_STATE_OPEN  (STATE_ACCEPT|STATE_VPP_CLOSING)
79 #define CLIENT_STATE_OPEN  (STATE_CONNECT|STATE_VPP_CLOSING)
80 #define STATE_OPEN (SERVER_STATE_OPEN | CLIENT_STATE_OPEN)
81
82 typedef struct epoll_event vppcom_epoll_event_t;
83
84 typedef struct
85 {
86   u32 next_sh;
87   u32 prev_sh;
88   u32 vep_sh;
89   vppcom_epoll_event_t ev;
90 #define VEP_DEFAULT_ET_MASK  (EPOLLIN|EPOLLOUT)
91 #define VEP_UNSUPPORTED_EVENTS (EPOLLONESHOT|EPOLLEXCLUSIVE)
92   u32 et_mask;
93 } vppcom_epoll_t;
94
95 /* Select uses the vcl_si_set as if a clib_bitmap. Make sure they are the
96  * same size */
97 STATIC_ASSERT (sizeof (clib_bitmap_t) == sizeof (vcl_si_set),
98                "vppcom bitmap size mismatch");
99
100 typedef struct
101 {
102   u8 is_ip4;
103   ip46_address_t ip46;
104 } vppcom_ip46_t;
105
106 #define VCL_ACCEPTED_F_CLOSED   (1 << 0)
107 #define VCL_ACCEPTED_F_RESET    (1 << 1)
108
109 typedef struct vcl_session_msg
110 {
111   union
112   {
113     session_accepted_msg_t accepted_msg;
114   };
115   u32 flags;
116 } vcl_session_msg_t;
117
118 typedef enum
119 {
120   VCL_SESS_ATTR_SERVER,
121   VCL_SESS_ATTR_CUT_THRU,
122   VCL_SESS_ATTR_VEP,
123   VCL_SESS_ATTR_VEP_SESSION,
124   VCL_SESS_ATTR_LISTEN,         // SOL_SOCKET,SO_ACCEPTCONN
125   VCL_SESS_ATTR_NONBLOCK,       // fcntl,O_NONBLOCK
126   VCL_SESS_ATTR_REUSEADDR,      // SOL_SOCKET,SO_REUSEADDR
127   VCL_SESS_ATTR_REUSEPORT,      // SOL_SOCKET,SO_REUSEPORT
128   VCL_SESS_ATTR_BROADCAST,      // SOL_SOCKET,SO_BROADCAST
129   VCL_SESS_ATTR_V6ONLY,         // SOL_TCP,IPV6_V6ONLY
130   VCL_SESS_ATTR_KEEPALIVE,      // SOL_SOCKET,SO_KEEPALIVE
131   VCL_SESS_ATTR_TCP_NODELAY,    // SOL_TCP,TCP_NODELAY
132   VCL_SESS_ATTR_TCP_KEEPIDLE,   // SOL_TCP,TCP_KEEPIDLE
133   VCL_SESS_ATTR_TCP_KEEPINTVL,  // SOL_TCP,TCP_KEEPINTVL
134   VCL_SESS_ATTR_SHUT_RD,
135   VCL_SESS_ATTR_SHUT_WR,
136   VCL_SESS_ATTR_MAX
137 } vppcom_session_attr_t;
138
139 #define VCL_SESS_ATTR_SET(ATTR, VAL)            \
140 do {                                            \
141   (ATTR) |= 1 << (VAL);                         \
142  } while (0)
143
144 #define VCL_SESS_ATTR_CLR(ATTR, VAL)            \
145 do {                                            \
146   (ATTR) &= ~(1 << (VAL));                      \
147  } while (0)
148
149 #define VCL_SESS_ATTR_TEST(ATTR, VAL)           \
150   ((ATTR) & (1 << (VAL)) ? 1 : 0)
151
152 typedef enum vcl_session_flags_
153 {
154   VCL_SESSION_F_CONNECTED = 1 << 0,
155 } __clib_packed vcl_session_flags_t;
156
157 typedef struct
158 {
159   CLIB_CACHE_LINE_ALIGN_MARK (cacheline0);
160 #define _(type, name) type name;
161   foreach_app_session_field
162 #undef _
163   u32 sndbuf_size;              // VPP-TBD: Hack until support setsockopt(SO_SNDBUF)
164   u32 rcvbuf_size;              // VPP-TBD: Hack until support setsockopt(SO_RCVBUF)
165   u32 user_mss;                 // VPP-TBD: Hack until support setsockopt(TCP_MAXSEG)
166   u64 vpp_handle;
167   u32 vpp_thread_index;
168
169   svm_fifo_t *ct_rx_fifo;
170   svm_fifo_t *ct_tx_fifo;
171
172   /* Socket configuration state */
173   u8 is_vep;
174   u8 is_vep_session;
175   vcl_session_flags_t flags;
176   /* VCL session index of the listening session (if any) */
177   u32 listener_index;
178   /* Accepted sessions on this listener */
179   int n_accepted_sessions;
180   u8 has_rx_evt;
181   u32 attr;
182   u64 parent_handle;
183   vppcom_epoll_t vep;
184   int libc_epfd;
185   svm_msg_q_t *our_evt_q;
186   vcl_session_msg_t *accept_evts_fifo;
187 #if VCL_ELOG
188   elog_track_t elog_track;
189 #endif
190 } vcl_session_t;
191
192 typedef struct vppcom_cfg_t_
193 {
194   uword heapsize;
195   u32 max_workers;
196   u32 vpp_api_q_length;
197   uword segment_baseva;
198   uword segment_size;
199   uword add_segment_size;
200   u32 preallocated_fifo_pairs;
201   u32 rx_fifo_size;
202   u32 tx_fifo_size;
203   u32 event_queue_size;
204   u32 listen_queue_size;
205   u8 app_proxy_transport_tcp;
206   u8 app_proxy_transport_udp;
207   u8 app_scope_local;
208   u8 app_scope_global;
209   u8 *namespace_id;
210   u64 namespace_secret;
211   u8 use_mq_eventfd;
212   f64 app_timeout;
213   f64 session_timeout;
214   f64 accept_timeout;
215   u32 event_ring_size;
216   char *event_log_path;
217   u8 *vpp_api_filename;
218   u8 *vpp_api_socket_name;
219   u8 *vpp_api_chroot;
220   u32 tls_engine;
221 } vppcom_cfg_t;
222
223 void vppcom_cfg (vppcom_cfg_t * vcl_cfg);
224
225 typedef struct vcl_cut_through_registration_
226 {
227   svm_msg_q_t *mq;
228   svm_msg_q_t *peer_mq;
229   u32 sid;
230   u32 epoll_evt_conn_index;     /*< mq evt connection index part of
231                                    the mqs evtfd epoll (if used) */
232 } vcl_cut_through_registration_t;
233
234 typedef struct vcl_mq_evt_conn_
235 {
236   svm_msg_q_t *mq;
237   int mq_fd;
238 } vcl_mq_evt_conn_t;
239
240 typedef struct vcl_worker_
241 {
242   CLIB_CACHE_LINE_ALIGN_MARK (cacheline0);
243
244   /* Session pool */
245   vcl_session_t *sessions;
246
247   /** Worker/thread index in current process */
248   u32 wrk_index;
249
250   /** Worker index in vpp*/
251   u32 vpp_wrk_index;
252
253   /** API client handle */
254   u32 my_client_index;
255
256   /** State of the connection, shared between msg RX thread and main thread */
257   volatile app_state_t wrk_state;
258
259   /** VPP binary api input queue */
260   svm_queue_t *vl_input_queue;
261
262   /** VPP mq to be used for exchanging control messages */
263   svm_msg_q_t *ctrl_mq;
264
265   /** Message queues epoll fd. Initialized only if using mqs with eventfds */
266   int mqs_epfd;
267
268   /** Pool of event message queue event connections */
269   vcl_mq_evt_conn_t *mq_evt_conns;
270
271   /** Per worker buffer for receiving mq epoll events */
272   struct epoll_event *mq_events;
273
274   /** Hash table for disconnect processing */
275   uword *session_index_by_vpp_handles;
276
277   /** Select bitmaps */
278   clib_bitmap_t *rd_bitmap;
279   clib_bitmap_t *wr_bitmap;
280   clib_bitmap_t *ex_bitmap;
281
282   /** Our event message queue */
283   svm_msg_q_t *app_event_queue;
284
285   /** VPP workers event message queues */
286   svm_msg_q_t **vpp_event_queues;
287
288   /** For deadman timers */
289   clib_time_t clib_time;
290
291   /** Vector acting as buffer for mq messages */
292   svm_msg_q_msg_t *mq_msg_vector;
293
294   /** Vector of unhandled events */
295   session_event_t *unhandled_evts_vector;
296
297   u32 *pending_session_wrk_updates;
298
299   /** Used also as a thread stop key buffer */
300   pthread_t thread_id;
301
302   /** Current pid, may be different from main_pid if forked child */
303   pid_t current_pid;
304
305   u32 forked_child;
306
307   socket_client_main_t bapi_sock_ctx;
308   memory_client_main_t bapi_shm_ctx;
309   api_main_t bapi_api_ctx;
310 } vcl_worker_t;
311
312 typedef struct vppcom_main_t_
313 {
314   u8 is_init;
315   u32 debug;
316   pthread_t main_cpu;
317
318   /** Main process pid */
319   pid_t main_pid;
320
321   /** App's index in vpp. It's used by vpp to identify the app */
322   u32 app_index;
323
324   /** State of the connection, shared between msg RX thread and main thread */
325   volatile app_state_t app_state;
326
327   u8 *app_name;
328
329   /** VCL configuration */
330   vppcom_cfg_t cfg;
331
332   volatile u32 forking;
333
334   /** Workers */
335   vcl_worker_t *workers;
336
337   /** Lock to protect worker registrations */
338   clib_spinlock_t workers_lock;
339
340   /** Lock to protect segment hash table */
341   clib_rwlock_t segment_table_lock;
342
343   /** Mapped segments table */
344   uword *segment_table;
345
346   /** Control mq obtained from attach */
347   svm_msg_q_t *ctrl_mq;
348
349   fifo_segment_main_t segment_main;
350
351 #ifdef VCL_ELOG
352   /* VPP Event-logger */
353   elog_main_t elog_main;
354   elog_track_t elog_track;
355 #endif
356
357   /* VNET_API_ERROR_FOO -> "Foo" hash table */
358   uword *error_string_by_error_number;
359
360 } vppcom_main_t;
361
362 extern vppcom_main_t *vcm;
363
364 #define VCL_INVALID_SESSION_INDEX ((u32)~0)
365 #define VCL_INVALID_SESSION_HANDLE ((u64)~0)
366 #define VCL_INVALID_SEGMENT_INDEX ((u32)~0)
367 #define VCL_INVALID_SEGMENT_HANDLE ((u64)~0)
368
369 static inline vcl_session_t *
370 vcl_session_alloc (vcl_worker_t * wrk)
371 {
372   vcl_session_t *s;
373   pool_get (wrk->sessions, s);
374   memset (s, 0, sizeof (*s));
375   s->session_index = s - wrk->sessions;
376   s->listener_index = VCL_INVALID_SESSION_INDEX;
377   return s;
378 }
379
380 static inline void
381 vcl_session_free (vcl_worker_t * wrk, vcl_session_t * s)
382 {
383   /* Debug level set to 1 to avoid debug messages while ldp is cleaning up */
384   VDBG (1, "session %u [0x%llx] removed", s->session_index, s->vpp_handle);
385   pool_put (wrk->sessions, s);
386 }
387
388 static inline vcl_session_t *
389 vcl_session_get (vcl_worker_t * wrk, u32 session_index)
390 {
391   if (pool_is_free_index (wrk->sessions, session_index))
392     return 0;
393   return pool_elt_at_index (wrk->sessions, session_index);
394 }
395
396 static inline vcl_session_handle_t
397 vcl_session_handle_from_index (u32 session_index)
398 {
399   ASSERT (session_index < 2 << 24);
400   return (vcl_get_worker_index () << 24 | session_index);
401 }
402
403 static inline vcl_session_handle_t
404 vcl_session_handle (vcl_session_t * s)
405 {
406   return vcl_session_handle_from_index (s->session_index);
407 }
408
409 static inline void
410 vcl_session_handle_parse (u32 handle, u32 * wrk_index, u32 * session_index)
411 {
412   *wrk_index = handle >> 24;
413   *session_index = handle & 0xFFFFFF;
414 }
415
416 static inline vcl_session_t *
417 vcl_session_get_w_handle (vcl_worker_t * wrk, u32 session_handle)
418 {
419   u32 session_index, wrk_index;
420   vcl_session_handle_parse (session_handle, &wrk_index, &session_index);
421   ASSERT (wrk_index == wrk->wrk_index);
422   return vcl_session_get (wrk, session_index);
423 }
424
425 static inline vcl_session_t *
426 vcl_session_get_w_vpp_handle (vcl_worker_t * wrk, u64 vpp_handle)
427 {
428   uword *p;
429   if ((p = hash_get (wrk->session_index_by_vpp_handles, vpp_handle)))
430     return vcl_session_get (wrk, (u32) p[0]);
431   return 0;
432 }
433
434 static inline u32
435 vcl_session_index_from_vpp_handle (vcl_worker_t * wrk, u64 vpp_handle)
436 {
437   uword *p;
438   if ((p = hash_get (wrk->session_index_by_vpp_handles, vpp_handle)))
439     return p[0];
440   return VCL_INVALID_SESSION_INDEX;
441 }
442
443 static inline void
444 vcl_session_table_add_vpp_handle (vcl_worker_t * wrk, u64 handle, u32 value)
445 {
446   hash_set (wrk->session_index_by_vpp_handles, handle, value);
447 }
448
449 static inline void
450 vcl_session_table_del_vpp_handle (vcl_worker_t * wrk, u64 vpp_handle)
451 {
452   hash_unset (wrk->session_index_by_vpp_handles, vpp_handle);
453 }
454
455 static inline uword *
456 vcl_session_table_lookup_vpp_handle (vcl_worker_t * wrk, u64 handle)
457 {
458   return hash_get (wrk->session_index_by_vpp_handles, handle);
459 }
460
461 static inline void
462 vcl_session_table_add_listener (vcl_worker_t * wrk, u64 listener_handle,
463                                 u32 value)
464 {
465   hash_set (wrk->session_index_by_vpp_handles, listener_handle, value);
466 }
467
468 static inline void
469 vcl_session_table_del_listener (vcl_worker_t * wrk, u64 listener_handle)
470 {
471   hash_unset (wrk->session_index_by_vpp_handles, listener_handle);
472 }
473
474 static inline int
475 vcl_session_is_connectable_listener (vcl_worker_t * wrk,
476                                      vcl_session_t * session)
477 {
478   /* Tell if we session_handle is a QUIC session.
479    * We can be in the following cases :
480    * Listen session <- QUIC session <- Stream session
481    * QUIC session <- Stream session
482    */
483   vcl_session_t *ls;
484   if (session->session_type != VPPCOM_PROTO_QUIC)
485     return 0;
486   if (session->listener_index == VCL_INVALID_SESSION_INDEX)
487     return !(session->session_state & STATE_LISTEN);
488   ls = vcl_session_get_w_handle (wrk, session->listener_index);
489   if (!ls)
490     return VPPCOM_EBADFD;
491   return ls->session_state & STATE_LISTEN;
492 }
493
494 static inline vcl_session_t *
495 vcl_session_table_lookup_listener (vcl_worker_t * wrk, u64 handle)
496 {
497   uword *p;
498   vcl_session_t *session;
499
500   p = hash_get (wrk->session_index_by_vpp_handles, handle);
501   if (!p)
502     {
503       VDBG (0, "could not find listen session: unknown vpp listener handle"
504             " %llx", handle);
505       return 0;
506     }
507   session = vcl_session_get (wrk, p[0]);
508   if (!session)
509     {
510       VDBG (1, "invalid listen session index (%u)", p[0]);
511       return 0;
512     }
513
514   ASSERT ((session->session_state & (STATE_LISTEN | STATE_LISTEN_NO_MQ)) ||
515           vcl_session_is_connectable_listener (wrk, session));
516   return session;
517 }
518
519 const char *vppcom_session_state_str (vcl_session_state_t state);
520
521 static inline u8
522 vcl_session_is_ct (vcl_session_t * s)
523 {
524   return (s->ct_tx_fifo != 0);
525 }
526
527 static inline u8
528 vcl_session_is_cl (vcl_session_t * s)
529 {
530   if (s->session_type == VPPCOM_PROTO_UDP)
531     return 1;
532   return 0;
533 }
534
535 static inline u8
536 vcl_session_is_open (vcl_session_t * s)
537 {
538   return ((s->session_state & STATE_OPEN)
539           || (s->session_state == STATE_LISTEN
540               && s->session_type == VPPCOM_PROTO_UDP));
541 }
542
543 static inline u8
544 vcl_session_is_closing (vcl_session_t * s)
545 {
546   return (s->session_state == STATE_VPP_CLOSING
547           || s->session_state == STATE_DISCONNECT);
548 }
549
550 static inline int
551 vcl_session_closing_error (vcl_session_t * s)
552 {
553   /* Return 0 on closing sockets */
554   return s->session_state == STATE_DISCONNECT ? VPPCOM_ECONNRESET : 0;
555 }
556
557 static inline int
558 vcl_session_closed_error (vcl_session_t * s)
559 {
560   return s->session_state == STATE_DISCONNECT
561     ? VPPCOM_ECONNRESET : VPPCOM_ENOTCONN;
562 }
563
564 static inline void
565 vcl_ip_copy_from_ep (ip46_address_t * ip, vppcom_endpt_t * ep)
566 {
567   if (ep->is_ip4)
568     clib_memcpy_fast (&ip->ip4, ep->ip, sizeof (ip4_address_t));
569   else
570     clib_memcpy_fast (&ip->ip6, ep->ip, sizeof (ip6_address_t));
571 }
572
573 static inline void
574 vcl_ip_copy_to_ep (ip46_address_t * ip, vppcom_endpt_t * ep, u8 is_ip4)
575 {
576   ep->is_ip4 = is_ip4;
577   if (is_ip4)
578     clib_memcpy_fast (ep->ip, &ip->ip4, sizeof (ip4_address_t));
579   else
580     clib_memcpy_fast (ep->ip, &ip->ip6, sizeof (ip6_address_t));
581 }
582
583 /*
584  * Helpers
585  */
586 int vcl_wait_for_app_state_change (app_state_t app_state);
587 vcl_mq_evt_conn_t *vcl_mq_evt_conn_alloc (vcl_worker_t * wrk);
588 u32 vcl_mq_evt_conn_index (vcl_worker_t * wrk, vcl_mq_evt_conn_t * mqc);
589 vcl_mq_evt_conn_t *vcl_mq_evt_conn_get (vcl_worker_t * wrk, u32 mq_conn_idx);
590 int vcl_mq_epoll_add_evfd (vcl_worker_t * wrk, svm_msg_q_t * mq);
591 int vcl_mq_epoll_del_evfd (vcl_worker_t * wrk, u32 mqc_index);
592
593 vcl_worker_t *vcl_worker_alloc_and_init (void);
594 void vcl_worker_cleanup (vcl_worker_t * wrk, u8 notify_vpp);
595 int vcl_worker_register_with_vpp (void);
596 int vcl_worker_set_bapi (void);
597 svm_msg_q_t *vcl_worker_ctrl_mq (vcl_worker_t * wrk);
598
599 void vcl_flush_mq_events (void);
600 void vcl_cleanup_bapi (void);
601 int vcl_session_cleanup (vcl_worker_t * wrk, vcl_session_t * session,
602                          vcl_session_handle_t sh, u8 do_disconnect);
603
604 void vcl_segment_table_add (u64 segment_handle, u32 svm_segment_index);
605 u32 vcl_segment_table_lookup (u64 segment_handle);
606 void vcl_segment_table_del (u64 segment_handle);
607
608 int vcl_session_read_ready (vcl_session_t * session);
609 int vcl_session_write_ready (vcl_session_t * session);
610
611 static inline vcl_worker_t *
612 vcl_worker_get (u32 wrk_index)
613 {
614   return pool_elt_at_index (vcm->workers, wrk_index);
615 }
616
617 static inline vcl_worker_t *
618 vcl_worker_get_if_valid (u32 wrk_index)
619 {
620   if (pool_is_free_index (vcm->workers, wrk_index))
621     return 0;
622   return pool_elt_at_index (vcm->workers, wrk_index);
623 }
624
625 static inline vcl_worker_t *
626 vcl_worker_get_current (void)
627 {
628   return vcl_worker_get (vcl_get_worker_index ());
629 }
630
631 static inline u8
632 vcl_n_workers (void)
633 {
634   return pool_elts (vcm->workers);
635 }
636
637 static inline svm_msg_q_t *
638 vcl_session_vpp_evt_q (vcl_worker_t * wrk, vcl_session_t * s)
639 {
640   return wrk->vpp_event_queues[s->vpp_thread_index];
641 }
642
643 void vcl_send_session_worker_update (vcl_worker_t * wrk, vcl_session_t * s,
644                                      u32 wrk_index);
645 /*
646  * VCL Binary API
647  */
648 int vppcom_connect_to_vpp (char *app_name);
649 void vppcom_disconnect_from_vpp (void);
650 void vppcom_init_error_string_table (void);
651 void vppcom_send_session_enable_disable (u8 is_enable);
652 void vppcom_app_send_attach (void);
653 void vppcom_app_send_detach (void);
654 void vcl_send_session_unlisten (vcl_worker_t * wrk, vcl_session_t * s);
655 void vppcom_send_disconnect_session (u64 vpp_handle);
656 void vppcom_api_hookup (void);
657 void vppcom_send_application_tls_cert_add (vcl_session_t * session,
658                                            char *cert, u32 cert_len);
659 void vppcom_send_application_tls_key_add (vcl_session_t * session, char *key,
660                                           u32 key_len);
661 void vcl_send_app_worker_add_del (u8 is_add);
662 void vcl_send_child_worker_del (vcl_worker_t * wrk);
663
664 int vcl_segment_attach (u64 segment_handle, char *name,
665                         ssvm_segment_type_t type, int fd);
666 void vcl_segment_detach (u64 segment_handle);
667
668 u32 vcl_max_nsid_len (void);
669
670 void vls_init ();
671 #endif /* SRC_VCL_VCL_PRIVATE_H_ */
672
673 /*
674  * fd.io coding-style-patch-verification: ON
675  *
676  * Local Variables:
677  * eval: (c-set-style "gnu")
678  * End:
679  */