src/plugins/hs_apps/sapi/vpp_echo_bapi.c

   1 /*
   2  * Copyright (c) 2019 Cisco and/or its affiliates.
   3  * Licensed under the Apache License, Version 2.0 (the "License");
   4  * you may not use this file except in compliance with the License.
   5  * You may obtain a copy of the License at:
   6  *
   7  *     http://www.apache.org/licenses/LICENSE-2.0
   8  *
   9  * Unless required by applicable law or agreed to in writing, software
  10  * distributed under the License is distributed on an "AS IS" BASIS,
  11  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12  * See the License for the specific language governing permissions and
  13  * limitations under the License.
  14  */
  15
  16 #include <stdio.h>
  17 #include <signal.h>
  18
  19 #include <hs_apps/sapi/vpp_echo_common.h>
  20
  21 /*
  22  *
  23  *  Binary API Messages
  24  *
  25  */
  26
  27 void
  28 echo_send_attach (echo_main_t * em)
  29 {
  30   vl_api_app_attach_t *bmp;
  31   bmp = vl_msg_api_alloc (sizeof (*bmp));
  32   clib_memset (bmp, 0, sizeof (*bmp));
  33
  34   bmp->_vl_msg_id = ntohs (VL_API_APP_ATTACH);
  35   bmp->client_index = em->my_client_index;
  36   bmp->context = ntohl (0xfeedface);
  37   bmp->options[APP_OPTIONS_FLAGS] = APP_OPTIONS_FLAGS_ACCEPT_REDIRECT;
  38   bmp->options[APP_OPTIONS_FLAGS] |= APP_OPTIONS_FLAGS_ADD_SEGMENT;
  39   bmp->options[APP_OPTIONS_PREALLOC_FIFO_PAIRS] = em->prealloc_fifo_pairs;
  40   bmp->options[APP_OPTIONS_RX_FIFO_SIZE] = em->fifo_size;
  41   bmp->options[APP_OPTIONS_TX_FIFO_SIZE] = em->fifo_size;
  42   bmp->options[APP_OPTIONS_ADD_SEGMENT_SIZE] = 128 << 20;
  43   bmp->options[APP_OPTIONS_SEGMENT_SIZE] = 256 << 20;
  44   bmp->options[APP_OPTIONS_EVT_QUEUE_SIZE] = em->evt_q_size;
  45   if (em->appns_id)
  46     {
  47       vl_api_vec_to_api_string (em->appns_id, &bmp->namespace_id);
  48       bmp->options[APP_OPTIONS_FLAGS] |= em->appns_flags;
  49       bmp->options[APP_OPTIONS_NAMESPACE_SECRET] = em->appns_secret;
  50     }
  51   vl_msg_api_send_shmem (em->vl_input_queue, (u8 *) & bmp);
  52 }
  53
  54 void
  55 echo_send_detach (echo_main_t * em)
  56 {
  57   vl_api_application_detach_t *bmp;
  58   bmp = vl_msg_api_alloc (sizeof (*bmp));
  59   clib_memset (bmp, 0, sizeof (*bmp));
  60
  61   bmp->_vl_msg_id = ntohs (VL_API_APPLICATION_DETACH);
  62   bmp->client_index = em->my_client_index;
  63   bmp->context = ntohl (0xfeedface);
  64
  65   vl_msg_api_send_shmem (em->vl_input_queue, (u8 *) & bmp);
  66 }
  67
  68 void
  69 echo_send_add_cert_key (echo_main_t * em)
  70 {
  71   u32 cert_len = test_srv_crt_rsa_len;
  72   u32 key_len = test_srv_key_rsa_len;
  73   vl_api_app_add_cert_key_pair_t *bmp;
  74
  75   bmp = vl_msg_api_alloc (sizeof (*bmp) + cert_len + key_len);
  76   clib_memset (bmp, 0, sizeof (*bmp) + cert_len + key_len);
  77
  78   bmp->_vl_msg_id = ntohs (VL_API_APP_ADD_CERT_KEY_PAIR);
  79   bmp->client_index = em->my_client_index;
  80   bmp->context = ntohl (0xfeedface);
  81   bmp->cert_len = clib_host_to_net_u16 (cert_len);
  82   bmp->certkey_len = clib_host_to_net_u16 (key_len + cert_len);
  83   clib_memcpy_fast (bmp->certkey, test_srv_crt_rsa, cert_len);
  84   clib_memcpy_fast (bmp->certkey + cert_len, test_srv_key_rsa, key_len);
  85
  86   vl_msg_api_send_shmem (em->vl_input_queue, (u8 *) & bmp);
  87 }
  88
  89 void
  90 echo_send_del_cert_key (echo_main_t * em)
  91 {
  92   vl_api_app_del_cert_key_pair_t *bmp;
  93   bmp = vl_msg_api_alloc (sizeof (*bmp));
  94   clib_memset (bmp, 0, sizeof (*bmp));
  95
  96   bmp->_vl_msg_id = ntohs (VL_API_APP_DEL_CERT_KEY_PAIR);
  97   bmp->client_index = em->my_client_index;
  98   bmp->context = ntohl (0xfeedface);
  99   bmp->index = clib_host_to_net_u32 (em->ckpair_index);
 100   vl_msg_api_send_shmem (em->vl_input_queue, (u8 *) & bmp);
 101 }
 102
 103 void
 104 echo_send_listen (echo_main_t * em, ip46_address_t * ip)
 105 {
 106   app_session_evt_t _app_evt, *app_evt = &_app_evt;
 107   session_listen_msg_t *mp;
 108   svm_msg_q_t *mq = em->ctrl_mq;
 109
 110   app_alloc_ctrl_evt_to_vpp (mq, app_evt, SESSION_CTRL_EVT_LISTEN);
 111   mp = (session_listen_msg_t *) app_evt->evt->data;
 112   memset (mp, 0, sizeof (*mp));
 113   mp->client_index = em->my_client_index;
 114   mp->context = ntohl (0xfeedface);
 115   mp->wrk_index = 0;
 116   mp->is_ip4 = em->uri_elts.is_ip4;
 117   clib_memcpy_fast (&mp->ip, ip, sizeof (mp->ip));
 118   mp->port = em->uri_elts.port;
 119   mp->proto = em->uri_elts.transport_proto;
 120   mp->ckpair_index = em->ckpair_index;
 121   mp->crypto_engine = em->crypto_engine;
 122   app_send_ctrl_evt_to_vpp (mq, app_evt);
 123 }
 124
 125 void
 126 echo_send_unbind (echo_main_t * em, echo_session_t * s)
 127 {
 128   app_session_evt_t _app_evt, *app_evt = &_app_evt;
 129   session_unlisten_msg_t *mp;
 130   svm_msg_q_t *mq = em->ctrl_mq;
 131
 132   app_alloc_ctrl_evt_to_vpp (mq, app_evt, SESSION_CTRL_EVT_UNLISTEN);
 133   mp = (session_unlisten_msg_t *) app_evt->evt->data;
 134   memset (mp, 0, sizeof (*mp));
 135   mp->client_index = em->my_client_index;
 136   mp->wrk_index = 0;
 137   mp->handle = s->vpp_session_handle;
 138   mp->context = 0;
 139   app_send_ctrl_evt_to_vpp (mq, app_evt);
 140 }
 141
 142 void
 143 echo_send_connect (echo_main_t * em, void *args)
 144 {
 145   app_session_evt_t _app_evt, *app_evt = &_app_evt;
 146   session_connect_msg_t *mp;
 147   echo_connect_args_t *a = (echo_connect_args_t *) args;
 148   svm_msg_q_t *mq = em->ctrl_mq;
 149
 150   clib_atomic_sub_fetch (&em->max_sim_connects, 1);
 151   while (em->max_sim_connects <= 0)
 152     ;
 153
 154   app_alloc_ctrl_evt_to_vpp (mq, app_evt, SESSION_CTRL_EVT_CONNECT);
 155   mp = (session_connect_msg_t *) app_evt->evt->data;
 156   memset (mp, 0, sizeof (*mp));
 157   mp->client_index = em->my_client_index;
 158   mp->context = ntohl (a->context);
 159   mp->wrk_index = 0;
 160   mp->is_ip4 = em->uri_elts.is_ip4;
 161   clib_memcpy_fast (&mp->ip, &a->ip, sizeof (mp->ip));
 162   clib_memcpy_fast (&mp->lcl_ip, &a->lcl_ip, sizeof (mp->ip));
 163   mp->port = em->uri_elts.port;
 164   mp->proto = em->uri_elts.transport_proto;
 165   mp->parent_handle = a->parent_session_handle;
 166   mp->ckpair_index = em->ckpair_index;
 167   mp->crypto_engine = em->crypto_engine;
 168   mp->flags = em->connect_flag;
 169   app_send_ctrl_evt_to_vpp (mq, app_evt);
 170 }
 171
 172 void
 173 echo_send_disconnect_session (echo_main_t * em, void *args)
 174 {
 175   echo_session_t *s;
 176   app_session_evt_t _app_evt, *app_evt = &_app_evt;
 177   session_disconnect_msg_t *mp;
 178   svm_msg_q_t *mq = em->ctrl_mq;
 179   echo_disconnect_args_t *a = (echo_disconnect_args_t *) args;
 180
 181   app_alloc_ctrl_evt_to_vpp (mq, app_evt, SESSION_CTRL_EVT_DISCONNECT);
 182   mp = (session_disconnect_msg_t *) app_evt->evt->data;
 183   memset (mp, 0, sizeof (*mp));
 184   mp->client_index = em->my_client_index;
 185   mp->handle = a->session_handle;
 186   app_send_ctrl_evt_to_vpp (mq, app_evt);
 187
 188   if (!(s = echo_get_session_from_handle (em, mp->handle)))
 189     return;
 190   em->proto_cb_vft->sent_disconnect_cb (s);
 191 }
 192
 193 /*
 194  *
 195  *  Helpers
 196  *
 197  */
 198
 199 int
 200 echo_segment_attach (u64 segment_handle, char *name, ssvm_segment_type_t type,
 201                      int fd)
 202 {
 203   fifo_segment_create_args_t _a, *a = &_a;
 204   echo_main_t *em = &echo_main;
 205   fifo_segment_main_t *sm;
 206   int rv;
 207
 208   clib_memset (a, 0, sizeof (*a));
 209   a->segment_name = (char *) name;
 210   a->segment_type = type;
 211
 212   if (type == SSVM_SEGMENT_MEMFD)
 213     a->memfd_fd = fd;
 214
 215   sm = &em->segment_main;
 216
 217   if ((rv = fifo_segment_attach (sm, a)))
 218     return rv;
 219
 220   clib_spinlock_lock (&em->segment_handles_lock);
 221   hash_set (em->shared_segment_handles, segment_handle,
 222             a->new_segment_indices[0]);
 223   clib_spinlock_unlock (&em->segment_handles_lock);
 224
 225   vec_free (a->new_segment_indices);
 226   return 0;
 227 }
 228
 229 u32
 230 echo_segment_lookup (u64 segment_handle)
 231 {
 232   echo_main_t *em = &echo_main;
 233   uword *segment_idxp;
 234
 235   ECHO_LOG (3, "Check if segment mapped 0x%lx...", segment_handle);
 236
 237   clib_spinlock_lock (&em->segment_handles_lock);
 238   segment_idxp = hash_get (em->shared_segment_handles, segment_handle);
 239   clib_spinlock_unlock (&em->segment_handles_lock);
 240   if (!segment_idxp)
 241     return ~0;
 242
 243   ECHO_LOG (2, "Segment not mapped (0x%lx)", segment_handle);
 244   return ((u32) *segment_idxp);
 245 }
 246
 247 void
 248 echo_segment_detach (u64 segment_handle)
 249 {
 250   echo_main_t *em = &echo_main;
 251   fifo_segment_main_t *sm;
 252
 253   u32 segment_index = echo_segment_lookup (segment_handle);
 254   if (segment_index == (u32) ~0)
 255     return;
 256
 257   sm = &em->segment_main;
 258
 259   clib_spinlock_lock (&em->segment_handles_lock);
 260   fifo_segment_delete (sm, fifo_segment_get_segment (sm, segment_index));
 261   hash_unset (em->shared_segment_handles, segment_handle);
 262   clib_spinlock_unlock (&em->segment_handles_lock);
 263 }
 264
 265 int
 266 echo_attach_session (uword segment_handle, uword rxf_offset, uword txf_offset,
 267                      uword mq_offset, echo_session_t *s)
 268 {
 269   echo_main_t *em = &echo_main;
 270   u32 fs_index, eqs_index;
 271   fifo_segment_t *fs;
 272
 273   fs_index = echo_segment_lookup (segment_handle);
 274   if (fs_index == (u32) ~0)
 275     {
 276       ECHO_LOG (0, "ERROR: segment for session %u is not mounted!",
 277                 s->session_index);
 278       return -1;
 279     }
 280
 281   if (mq_offset != (uword) ~0)
 282     {
 283       eqs_index = echo_segment_lookup (ECHO_MQ_SEG_HANDLE);
 284       ASSERT (eqs_index != (u32) ~0);
 285     }
 286
 287   clib_spinlock_lock (&em->segment_handles_lock);
 288
 289   fs = fifo_segment_get_segment (&em->segment_main, fs_index);
 290   s->rx_fifo = fifo_segment_alloc_fifo_w_offset (fs, rxf_offset);
 291   s->tx_fifo = fifo_segment_alloc_fifo_w_offset (fs, txf_offset);
 292   s->rx_fifo->shr->client_session_index = s->session_index;
 293   s->tx_fifo->shr->client_session_index = s->session_index;
 294
 295   if (mq_offset != (uword) ~0)
 296     {
 297       fs = fifo_segment_get_segment (&em->segment_main, eqs_index);
 298       s->vpp_evt_q = fifo_segment_msg_q_attach (fs, mq_offset,
 299                                                 s->rx_fifo->shr->slice_index);
 300     }
 301
 302   clib_spinlock_unlock (&em->segment_handles_lock);
 303
 304   return 0;
 305 }
 306
 307 int
 308 echo_segment_attach_mq (uword segment_handle, uword mq_offset, u32 mq_index,
 309                         svm_msg_q_t **mq)
 310 {
 311   echo_main_t *em = &echo_main;
 312   fifo_segment_t *fs;
 313   u32 fs_index;
 314
 315   fs_index = echo_segment_lookup (segment_handle);
 316   if (fs_index == (u32) ~0)
 317     {
 318       ECHO_LOG (0, "ERROR: mq segment %lx for is not attached!",
 319                 segment_handle);
 320       return -1;
 321     }
 322
 323   clib_spinlock_lock (&em->segment_handles_lock);
 324
 325   fs = fifo_segment_get_segment (&em->segment_main, fs_index);
 326   *mq = fifo_segment_msg_q_attach (fs, mq_offset, mq_index);
 327
 328   clib_spinlock_unlock (&em->segment_handles_lock);
 329
 330   return 0;
 331 }
 332
 333 /*
 334  *
 335  *  Binary API callbacks
 336  *
 337  */
 338
 339 static void
 340   vl_api_app_add_cert_key_pair_reply_t_handler
 341   (vl_api_app_add_cert_key_pair_reply_t * mp)
 342 {
 343   echo_main_t *em = &echo_main;
 344   if (mp->retval)
 345     {
 346       ECHO_FAIL (ECHO_FAIL_VL_API_CERT_KEY_ADD_REPLY,
 347                  "Adding cert and key returned %d",
 348                  clib_net_to_host_u32 (mp->retval));
 349       return;
 350     }
 351   /* No concurrency here, only bapi thread writes */
 352   if (em->state != STATE_ATTACHED_NO_CERT)
 353     {
 354       ECHO_FAIL (ECHO_FAIL_VL_API_CERT_KEY_ADD_REPLY, "Wrong state");
 355       return;
 356     }
 357   em->ckpair_index = clib_net_to_host_u32 (mp->index);
 358   em->state = STATE_ATTACHED;
 359 }
 360
 361 static void
 362   vl_api_app_del_cert_key_pair_reply_t_handler
 363   (vl_api_app_del_cert_key_pair_reply_t * mp)
 364 {
 365   echo_main_t *em = &echo_main;
 366   if (mp->retval)
 367     {
 368       ECHO_FAIL (ECHO_FAIL_VL_API_CERT_KEY_DEL_REPLY,
 369                  "Delete cert and key returned %d",
 370                  clib_net_to_host_u32 (mp->retval));
 371       return;
 372     }
 373   em->state = STATE_CLEANED_CERT_KEY;
 374 }
 375
 376 static void
 377 vl_api_app_attach_reply_t_handler (vl_api_app_attach_reply_t * mp)
 378 {
 379   echo_main_t *em = &echo_main;
 380   int *fds = 0, i, rv;
 381   u32 n_fds = 0;
 382   u64 segment_handle;
 383   char *segment_name = 0;
 384
 385   segment_handle = clib_net_to_host_u64 (mp->segment_handle);
 386   ECHO_LOG (2, "Attached returned app %u", htons (mp->app_index));
 387
 388   if (mp->retval)
 389     {
 390       ECHO_FAIL (ECHO_FAIL_VL_API_APP_ATTACH, "attach failed: %U",
 391                  format_api_error, clib_net_to_host_u32 (mp->retval));
 392       return;
 393     }
 394
 395   if (!mp->app_mq)
 396     {
 397       ECHO_FAIL (ECHO_FAIL_VL_API_NULL_APP_MQ, "NULL app_mq");
 398       return;
 399     }
 400
 401   if (mp->n_fds)
 402     {
 403       vec_validate (fds, mp->n_fds);
 404       if (vl_socket_client_recv_fd_msg (fds, mp->n_fds, 5))
 405         {
 406           ECHO_FAIL (ECHO_FAIL_VL_API_RECV_FD_MSG,
 407                      "vl_socket_client_recv_fd_msg failed");
 408           goto failed;
 409         }
 410
 411       if (mp->fd_flags & SESSION_FD_F_VPP_MQ_SEGMENT)
 412         if (echo_segment_attach (ECHO_MQ_SEG_HANDLE, 0, SSVM_SEGMENT_MEMFD,
 413                                  fds[n_fds++]))
 414           {
 415             ECHO_FAIL (ECHO_FAIL_VL_API_SVM_FIFO_SEG_ATTACH,
 416                        "svm_fifo_segment_attach failed on SSVM_SEGMENT_MEMFD");
 417             goto failed;
 418           }
 419       echo_segment_attach_mq (ECHO_MQ_SEG_HANDLE, mp->vpp_ctrl_mq,
 420                               mp->vpp_ctrl_mq_thread, &em->ctrl_mq);
 421
 422       if (mp->fd_flags & SESSION_FD_F_MEMFD_SEGMENT)
 423         {
 424           segment_name = vl_api_from_api_to_new_c_string (&mp->segment_name);
 425           rv = echo_segment_attach (segment_handle, segment_name,
 426                                     SSVM_SEGMENT_MEMFD, fds[n_fds++]);
 427           if (rv != 0)
 428             {
 429               ECHO_FAIL (ECHO_FAIL_VL_API_SVM_FIFO_SEG_ATTACH,
 430                          "svm_fifo_segment_attach ('%s') "
 431                          "failed on SSVM_SEGMENT_MEMFD", segment_name);
 432               vec_free (segment_name);
 433               goto failed;
 434             }
 435           vec_free (segment_name);
 436         }
 437       echo_segment_attach_mq (segment_handle, mp->app_mq, 0, &em->app_mq);
 438
 439       if (mp->fd_flags & SESSION_FD_F_MQ_EVENTFD)
 440         svm_msg_q_set_consumer_eventfd (em->app_mq, fds[n_fds++]);
 441
 442       vec_free (fds);
 443     }
 444   else
 445     {
 446       segment_name = vl_api_from_api_to_new_c_string (&mp->segment_name);
 447       rv = echo_segment_attach (segment_handle, segment_name, SSVM_SEGMENT_SHM,
 448                                 -1);
 449       if (rv != 0)
 450         {
 451           ECHO_FAIL (ECHO_FAIL_VL_API_SVM_FIFO_SEG_ATTACH,
 452                      "svm_fifo_segment_attach ('%s') "
 453                      "failed on SSVM_SEGMENT_SHM", segment_name);
 454           vec_free (segment_name);
 455           goto failed;
 456         }
 457       vec_free (segment_name);
 458     }
 459   ECHO_LOG (2, "Mapped segment 0x%lx", segment_handle);
 460
 461   em->state = STATE_ATTACHED_NO_CERT;
 462   return;
 463 failed:
 464   for (i = clib_max (n_fds - 1, 0); i < vec_len (fds); i++)
 465     close (fds[i]);
 466   vec_free (fds);
 467 }
 468
 469 static void
 470 vl_api_application_detach_reply_t_handler (vl_api_application_detach_reply_t *
 471                                            mp)
 472 {
 473   if (mp->retval)
 474     {
 475       ECHO_FAIL (ECHO_FAIL_VL_API_DETACH_REPLY,
 476                  "app detach returned with err: %d", mp->retval);
 477       return;
 478     }
 479   echo_main.state = STATE_DETACHED;
 480 }
 481
 482 #define foreach_quic_echo_msg                                    \
 483 _(APP_ATTACH_REPLY, app_attach_reply)                            \
 484 _(APPLICATION_DETACH_REPLY, application_detach_reply)            \
 485 _(APP_ADD_CERT_KEY_PAIR_REPLY, app_add_cert_key_pair_reply)      \
 486 _(APP_DEL_CERT_KEY_PAIR_REPLY, app_del_cert_key_pair_reply)
 487
 488 void
 489 echo_api_hookup (echo_main_t * em)
 490 {
 491 #define _(N,n)                                                  \
 492     vl_msg_api_set_handlers(VL_API_##N, #n,                     \
 493                            vl_api_##n##_t_handler,              \
 494                            vl_noop_handler,                     \
 495                            vl_api_##n##_t_endian,               \
 496                            vl_api_##n##_t_print,                \
 497                            sizeof(vl_api_##n##_t), 1);
 498   foreach_quic_echo_msg;
 499 #undef _
 500 }
 501
 502 /*
 503  * fd.io coding-style-patch-verification: ON
 504  *
 505  * Local Variables:
 506  * eval: (c-set-style "gnu")
 507  * End:
 508  */