libmemif: ubuntu 18.04 build fix
[vpp.git] / extras / libmemif / src / main.c
index 49bf50c..cb24083 100644 (file)
 /* private structs and functions */
 #include <memif_private.h>
 
-#define ERRLIST_LEN 36
+#define ERRLIST_LEN 38
 #define MAX_ERRBUF_LEN 256
 
 #if __x86_x64__
 #define MEMIF_MEMORY_BARRIER() __builtin_ia32_sfence ()
 #else
-#define MEMIF_MEORY_BARRIER() __sync_synchronize ()
+#define MEMIF_MEMORY_BARRIER() __sync_synchronize ()
 #endif /* __x86_x64__ */
 
 libmemif_main_t libmemif_main;
 int memif_epfd;
+int poll_cancel_fd = -1;
 
 static char memif_buf[MAX_ERRBUF_LEN];
 
@@ -139,7 +140,11 @@ const char *memif_errlist[ERRLIST_LEN] = { /* MEMIF_ERR_SUCCESS */
   /* MEMIF_ERR_DISCONNECTED */
   "Interface is disconnected.",
   /* MEMIF_ERR_UNKNOWN_MSG */
-  "Unknown message type received on control channel. (internal error)"
+  "Unknown message type received on control channel. (internal error)",
+  /* MEMIF_ERR_POLL_CANCEL */
+  "Memif event polling was canceled.",
+  /* MEMIF_ERR_MAX_RING */
+  "Maximum log2 ring size is 15"
 };
 
 #define MEMIF_ERR_UNDEFINED "undefined error"
@@ -181,7 +186,7 @@ print_bytes (void *data, uint16_t len, uint8_t q)
     }
   printf ("\n\n");
 }
-#endif /* MEMIF_DBG */
+#endif /* MEMIF_DBG_SHM */
 
 int
 memif_syscall_error_handler (int err_code)
@@ -198,7 +203,7 @@ memif_syscall_error_handler (int err_code)
     return MEMIF_ERR_PROC_FILE_LIMIT;
   if (err_code == ENOMEM)
     return MEMIF_ERR_NOMEM;
-/* connection refused if master dows not exist
+/* connection refused if master does not exist
     this error would spam the user until master was created */
   if (err_code == ECONNREFUSED)
     return MEMIF_ERR_SUCCESS;
@@ -401,17 +406,16 @@ memif_init (memif_control_fd_update_t * on_control_fd_update, char *app_name)
 {
   int err = MEMIF_ERR_SUCCESS; /* 0 */
   libmemif_main_t *lm = &libmemif_main;
+  memset (lm, 0, sizeof (libmemif_main_t));
 
   if (app_name)
     {
-      lm->app_name = malloc (strlen (app_name) + sizeof (char));
-      memset (lm->app_name, 0, strlen (app_name) + sizeof (char));
+      uint8_t len = (strlen (app_name) < MEMIF_NAME_LEN)
+       ? MEMIF_NAME_LEN : strlen (app_name);
       strncpy ((char *) lm->app_name, app_name, strlen (app_name));
     }
   else
     {
-      lm->app_name = malloc (strlen (MEMIF_DEFAULT_APP_NAME) + sizeof (char));
-      memset (lm->app_name, 0, strlen (app_name) + sizeof (char));
       strncpy ((char *) lm->app_name, MEMIF_DEFAULT_APP_NAME,
               strlen (MEMIF_DEFAULT_APP_NAME));
     }
@@ -423,11 +427,16 @@ memif_init (memif_control_fd_update_t * on_control_fd_update, char *app_name)
     {
       memif_epfd = epoll_create (1);
       memif_control_fd_update_register (memif_control_fd_update);
+      if ((poll_cancel_fd = eventfd (0, EFD_NONBLOCK)) < 0)
+       {
+         err = errno;
+         DBG ("eventfd: %s", strerror (err));
+         return memif_syscall_error_handler (err);
+       }
+      lm->control_fd_update (poll_cancel_fd, MEMIF_FD_EVENT_READ);
       DBG ("libmemif event polling initialized");
     }
 
-  memset (&lm->ms, 0, sizeof (memif_socket_t));
-
   lm->control_list_len = 2;
   lm->interrupt_list_len = 2;
   lm->listener_list_len = 1;
@@ -478,7 +487,6 @@ memif_init (memif_control_fd_update_t * on_control_fd_update, char *app_name)
   lm->arm.it_value.tv_nsec = 0;
   lm->arm.it_interval.tv_sec = 2;
   lm->arm.it_interval.tv_nsec = 0;
-  memset (&lm->disarm, 0, sizeof (lm->disarm));
 
   if (lm->control_fd_update (lm->timerfd, MEMIF_FD_EVENT_READ) < 0)
     {
@@ -550,6 +558,11 @@ memif_create (memif_conn_handle_t * c, memif_conn_args_t * args,
 
   if (args->log2_ring_size == 0)
     args->log2_ring_size = MEMIF_DEFAULT_LOG2_RING_SIZE;
+  else if (args->log2_ring_size > MEMIF_MAX_LOG2_RING_SIZE)
+    {
+      err = MEMIF_ERR_MAX_RING;
+      goto error;
+    }
   if (args->buffer_size == 0)
     args->buffer_size = MEMIF_DEFAULT_BUFFER_SIZE;
   if (args->num_s2m_rings == 0)
@@ -924,6 +937,8 @@ memif_poll_event (int timeout)
   int en = 0, err = MEMIF_ERR_SUCCESS, i = 0;  /* 0 */
   uint16_t num;
   uint32_t events = 0;
+  uint64_t counter = 0;
+  ssize_t r = 0;
   memset (&evt, 0, sizeof (evt));
   evt.events = EPOLLIN | EPOLLOUT;
   sigset_t sigset;
@@ -931,11 +946,17 @@ memif_poll_event (int timeout)
   en = epoll_pwait (memif_epfd, &evt, 1, timeout, &sigset);
   if (en < 0)
     {
-      DBG ("epoll_pwait: %s", strerror (errno));
-      return -1;
+      err = errno;
+      DBG ("epoll_pwait: %s", strerror (err));
+      return memif_syscall_error_handler (err);
     }
   if (en > 0)
     {
+      if (evt.data.fd == poll_cancel_fd)
+       {
+         r = read (evt.data.fd, &counter, sizeof (counter));
+         return MEMIF_ERR_POLL_CANCEL;
+       }
       if (evt.events & EPOLLIN)
        events |= MEMIF_FD_EVENT_READ;
       if (evt.events & EPOLLOUT)
@@ -948,6 +969,21 @@ memif_poll_event (int timeout)
   return 0;
 }
 
+int
+memif_cancel_poll_event ()
+{
+  uint64_t counter = 1;
+  ssize_t w = 0;
+
+  if (poll_cancel_fd == -1)
+    return 0;
+  w = write (poll_cancel_fd, &counter, sizeof (counter));
+  if (w < sizeof (counter))
+    return MEMIF_ERR_INT_WRITE;
+
+  return 0;
+}
+
 static void
 memif_msg_queue_free (memif_msg_queue_elt_t ** e)
 {
@@ -1354,107 +1390,86 @@ memif_buffer_alloc (memif_conn_handle_t conn, uint16_t qid,
   memif_queue_t *mq = &c->tx_queues[qid];
   memif_ring_t *ring = mq->ring;
   memif_buffer_t *b0, *b1;
-  uint8_t chain_buf0, chain_buf1;
+  uint8_t chain_buf = 1;
   uint16_t mask = (1 << mq->log2_ring_size) - 1;
+  uint16_t head = ring->head;
+  uint16_t tail = ring->tail;
+  uint16_t ring_size;
   uint16_t s0, s1, ns;
   *count_out = 0;
   int i, err = MEMIF_ERR_SUCCESS;      /* 0 */
 
-  if (ring->tail != ring->head)
+  ring_size = (1 << mq->log2_ring_size);
+  ns = ring_size - head + tail;
+
+  /* calculate number of chain buffers */
+  if (size > ring->desc[0].buffer_length)
     {
-      if (ring->head > ring->tail)
-       ns = (1 << mq->log2_ring_size) - ring->head + ring->tail;
-      else
-       ns = ring->tail - ring->head;
+      chain_buf = size / ring->desc[0].buffer_length;
+      if (((size % ring->desc[0].buffer_length) != 0) || (size == 0))
+       chain_buf++;
     }
-  else
-    ns = (1 << mq->log2_ring_size);
-
-  /* (head == tail) ? receive function will asume that no packets are available */
-  ns -= 1;
 
   while (count && ns)
     {
       while ((count > 2) && (ns > 2))
        {
-         s0 = (ring->head + mq->alloc_bufs + *count_out) & mask;
-         chain_buf0 = size / ring->desc[s0].buffer_length;
-         if (((size % ring->desc[s0].buffer_length) != 0) || (size == 0))
-           chain_buf0++;
-
-         if (chain_buf0 > ns)
-           break;
-
-         s1 = (ring->head + mq->alloc_bufs + *count_out + chain_buf0) & mask;
-         chain_buf1 = size / ring->desc[s1].buffer_length;
-         if (((size % ring->desc[s1].buffer_length) != 0) || (size == 0))
-           chain_buf1++;
+         s0 = (ring->head + mq->alloc_bufs) & mask;
+         s1 = (ring->head + mq->alloc_bufs + chain_buf) & mask;
 
-         if ((chain_buf0 + chain_buf1) > ns)
+         if ((2 * chain_buf) > ns)
            break;
 
          b0 = (bufs + *count_out);
          b1 = (bufs + *count_out + 1);
 
-         b0->desc_index = s0;
-         b1->desc_index = s1;
-         b0->buffer_len = ring->desc[s0].buffer_length * chain_buf0;
-         b1->buffer_len = ring->desc[s1].buffer_length * chain_buf1;
+         b0->desc_index = head + mq->alloc_bufs;
+         b1->desc_index = head + mq->alloc_bufs + chain_buf;
+         ring->desc[s0].flags = 0;
+         ring->desc[s1].flags = 0;
+         b0->buffer_len = ring->desc[s0].buffer_length * chain_buf;
+         b1->buffer_len = ring->desc[s1].buffer_length * chain_buf;
          /* TODO: support multiple regions -> ring descriptor contains region index */
          b0->data = c->regions->shm + ring->desc[s0].offset;
          b1->data = c->regions->shm + ring->desc[s1].offset;
 
-         for (i = 0; i < (memif_min (chain_buf0, chain_buf1) - 1); i++)
+         for (i = 0; i < (chain_buf - 1); i++)
            {
              ring->desc[(s0 + i) & mask].flags |= MEMIF_DESC_FLAG_NEXT;
              ring->desc[(s1 + i) & mask].flags |= MEMIF_DESC_FLAG_NEXT;
              DBG ("allocating chained buffers");
            }
 
-         if (chain_buf0 > chain_buf1)
-           {
-             for (; i < (chain_buf0 - 1); i++)
-               ring->desc[(s0 + i) & mask].flags |= MEMIF_DESC_FLAG_NEXT;
-           }
-         else
-           {
-             for (; i < (chain_buf1 - 1); i++)
-               ring->desc[(s1 + i) & mask].flags |= MEMIF_DESC_FLAG_NEXT;
-           }
-
-         mq->alloc_bufs += chain_buf0 + chain_buf1;
+         mq->alloc_bufs += 2 * chain_buf;
 
          DBG ("allocated ring slots %u, %u", s0, s1);
          count -= 2;
-         ns -= chain_buf0 + chain_buf1;
+         ns -= (2 * chain_buf);
          *count_out += 2;
        }
-      s0 = (ring->head + mq->alloc_bufs + *count_out) & mask;
+      s0 = (ring->head + mq->alloc_bufs) & mask;
 
       b0 = (bufs + *count_out);
 
-      chain_buf0 = size / ring->desc[s0].buffer_length;
-      if (((size % ring->desc[s0].buffer_length) != 0) || (size == 0))
-       chain_buf0++;
-
-      if (chain_buf0 > ns)
+      if (chain_buf > ns)
        break;
 
-      b0->desc_index = s0;
-      b0->buffer_len = ring->desc[s0].buffer_length * chain_buf0;
+      b0->desc_index = head + mq->alloc_bufs;
+      ring->desc[s0].flags = 0;
+      b0->buffer_len = ring->desc[s0].buffer_length * chain_buf;
       b0->data = c->regions->shm + ring->desc[s0].offset;
 
-      for (i = 0; i < (chain_buf0 - 1); i++)
+      for (i = 0; i < (chain_buf - 1); i++)
        {
          ring->desc[(s0 + i) & mask].flags |= MEMIF_DESC_FLAG_NEXT;
          DBG ("allocating chained buffers");
        }
 
-      mq->alloc_bufs += chain_buf0;
+      mq->alloc_bufs += chain_buf;
 
       DBG ("allocated ring slot %u", s0);
       count--;
-      ns -= chain_buf0;
+      ns -= chain_buf;
       *count_out += 1;
     }
 
@@ -1504,17 +1519,16 @@ memif_buffer_free (memif_conn_handle_t conn, uint16_t qid,
          b0 = (bufs + *count_out);
          b1 = (bufs + *count_out + 1);
          chain_buf0 =
-           b0->buffer_len / ring->desc[b0->desc_index].buffer_length;
-         if ((b0->buffer_len % ring->desc[b0->desc_index].buffer_length) !=
-             0)
+           b0->buffer_len / ring->desc[b0->desc_index & mask].buffer_length;
+         if ((b0->buffer_len %
+              ring->desc[b0->desc_index & mask].buffer_length) != 0)
            chain_buf0++;
          chain_buf1 =
-           b1->buffer_len / ring->desc[b1->desc_index].buffer_length;
-         if ((b1->buffer_len % ring->desc[b1->desc_index].buffer_length) !=
-             0)
+           b1->buffer_len / ring->desc[b1->desc_index & mask].buffer_length;
+         if ((b1->buffer_len %
+              ring->desc[b1->desc_index & mask].buffer_length) != 0)
            chain_buf1++;
-         tail = (b0->desc_index + chain_buf0) & mask;
-         tail = (b1->desc_index + chain_buf1) & mask;
+         tail = b1->desc_index + chain_buf1;
          b0->data = NULL;
          b1->data = NULL;
 
@@ -1523,18 +1537,21 @@ memif_buffer_free (memif_conn_handle_t conn, uint16_t qid,
          mq->alloc_bufs -= chain_buf0 + chain_buf1;
        }
       b0 = (bufs + *count_out);
-      chain_buf0 = b0->buffer_len / ring->desc[b0->desc_index].buffer_length;
-      if ((b0->buffer_len % ring->desc[b0->desc_index].buffer_length) != 0)
+      chain_buf0 =
+       b0->buffer_len / ring->desc[b0->desc_index & mask].buffer_length;
+      if ((b0->buffer_len %
+          ring->desc[b0->desc_index & mask].buffer_length) != 0)
        chain_buf0++;
-      tail = (b0->desc_index + chain_buf0) & mask;
+      tail = b0->desc_index + chain_buf0;
       b0->data = NULL;
 
       count--;
       *count_out += 1;
       mq->alloc_bufs -= chain_buf0;
     }
-  MEMIF_MEORY_BARRIER ();
+  MEMIF_MEMORY_BARRIER ();
   ring->tail = tail;
+  DBG ("tail: %u", ring->tail);
 
   return MEMIF_ERR_SUCCESS;    /* 0 */
 }
@@ -1570,21 +1587,47 @@ memif_tx_burst (memif_conn_handle_t conn, uint16_t qid,
          b0 = (bufs + curr_buf);
          b1 = (bufs + curr_buf + 1);
          chain_buf0 =
-           b0->buffer_len / ring->desc[b0->desc_index].buffer_length;
-         if ((b0->buffer_len % ring->desc[b0->desc_index].buffer_length) !=
-             0)
+           b0->buffer_len / ring->desc[b0->desc_index & mask].buffer_length;
+         if ((b0->buffer_len %
+              ring->desc[b0->desc_index & mask].buffer_length) != 0)
            chain_buf0++;
 
          chain_buf1 =
-           b1->buffer_len / ring->desc[b1->desc_index].buffer_length;
-         if ((b1->buffer_len % ring->desc[b1->desc_index].buffer_length) !=
-             0)
+           b1->buffer_len / ring->desc[b1->desc_index & mask].buffer_length;
+         if ((b1->buffer_len %
+              ring->desc[b1->desc_index & mask].buffer_length) != 0)
            chain_buf1++;
 
          for (i = 0; i < memif_min (chain_buf0, chain_buf1); i++)
            {
-             ring->desc[(b0->desc_index + i) & mask].length = b0->data_len;
-             ring->desc[(b1->desc_index + i) & mask].length = b1->data_len;
+             /* b0 */
+             if (b0->data_len >
+                 ring->desc[(b0->desc_index + i) & mask].buffer_length)
+               {
+                 b0->data_len -=
+                   ring->desc[(b0->desc_index + i) & mask].length =
+                   ring->desc[(b0->desc_index + i) & mask].buffer_length;
+               }
+             else
+               {
+                 ring->desc[(b0->desc_index + i) & mask].length =
+                   b0->data_len;
+                 b0->data_len = 0;
+               }
+             /* b1 */
+             if (b1->data_len >
+                 ring->desc[(b1->desc_index + i) & mask].buffer_length)
+               {
+                 b1->data_len -=
+                   ring->desc[(b1->desc_index + i) & mask].length =
+                   ring->desc[(b1->desc_index + i) & mask].buffer_length;
+               }
+             else
+               {
+                 ring->desc[(b1->desc_index + i) & mask].length =
+                   b1->data_len;
+                 b1->data_len = 0;
+               }
 #ifdef MEMIF_DBG_SHM
              print_bytes (b0->data +
                           ring->desc[(b0->desc_index +
@@ -1598,15 +1641,26 @@ memif_tx_burst (memif_conn_handle_t conn, uint16_t qid,
                           (chain_buf1 - 1),
                           ring->desc[(b1->desc_index +
                                       i) & mask].buffer_length, DBG_TX_BUF);
-#endif
+#endif /* MEMIF_DBG_SHM */
            }
 
          if (chain_buf0 > chain_buf1)
            {
              for (; i < chain_buf0; i++)
                {
-                 ring->desc[(b0->desc_index + i) & mask].length =
-                   b0->data_len;
+                 if (b0->data_len >
+                     ring->desc[(b0->desc_index + i) & mask].buffer_length)
+                   {
+                     b0->data_len -=
+                       ring->desc[(b0->desc_index + i) & mask].length =
+                       ring->desc[(b0->desc_index + i) & mask].buffer_length;
+                   }
+                 else
+                   {
+                     ring->desc[(b0->desc_index + i) & mask].length =
+                       b0->data_len;
+                     b0->data_len = 0;
+                   }
 #ifdef MEMIF_DBG_SHM
                  print_bytes (b0->data +
                               ring->desc[(b0->desc_index +
@@ -1615,14 +1669,26 @@ memif_tx_burst (memif_conn_handle_t conn, uint16_t qid,
                               ring->desc[(b0->desc_index +
                                           i) & mask].buffer_length,
                               DBG_TX_BUF);
-#endif
+#endif /* MEMIF_DBG_SHM */
                }
            }
          else
            {
              for (; i < chain_buf1; i++)
                {
-                 ring->desc[b1->desc_index + i].length = b1->data_len;
+                 if (b1->data_len >
+                     ring->desc[(b1->desc_index + i) & mask].buffer_length)
+                   {
+                     b1->data_len -=
+                       ring->desc[(b1->desc_index + i) & mask].length =
+                       ring->desc[(b1->desc_index + i) & mask].buffer_length;
+                   }
+                 else
+                   {
+                     ring->desc[(b1->desc_index + i) & mask].length =
+                       b1->data_len;
+                     b1->data_len = 0;
+                   }
 #ifdef MEMIF_DBG_SHM
                  print_bytes (b1->data +
                               ring->desc[(b1->desc_index +
@@ -1631,50 +1697,70 @@ memif_tx_burst (memif_conn_handle_t conn, uint16_t qid,
                               ring->desc[(b1->desc_index +
                                           i) & mask].buffer_length,
                               DBG_TX_BUF);
-#endif
+#endif /* MEMIF_DBG_SHM */
                }
            }
 
-         head = (b0->desc_index + chain_buf0) & mask;
-         head = (b1->desc_index + chain_buf1) & mask;
+         head = b1->desc_index + chain_buf1;
 
          b0->data = NULL;
-         b0->data_len = 0;
+#ifdef MEMIF_DBG
+         if (b0->data_len != 0)
+           DBG ("invalid b0 data length!");
+#endif /* MEMIF_DBG */
          b1->data = NULL;
-         b1->data_len = 0;
+#ifdef MEMIF_DBG
+         if (b1->data_len != 0)
+           DBG ("invalid b1 data length!");
+#endif /* MEMIF_DBG */
 
          count -= 2;
          *tx += chain_buf0 + chain_buf1;
          curr_buf += 2;
        }
 
-      b0 = (bufs + *tx);
-      chain_buf0 = b0->buffer_len / ring->desc[b0->desc_index].buffer_length;
-      if ((b0->buffer_len % ring->desc[b0->desc_index].buffer_length) != 0)
+      b0 = (bufs + curr_buf);
+      chain_buf0 =
+       b0->buffer_len / ring->desc[b0->desc_index & mask].buffer_length;
+      if ((b0->buffer_len %
+          ring->desc[b0->desc_index & mask].buffer_length) != 0)
        chain_buf0++;
 
       for (i = 0; i < chain_buf0; i++)
        {
-         ring->desc[(b0->desc_index + i) & mask].length = b0->data_len;
+         if (b0->data_len >
+             ring->desc[(b0->desc_index + i) & mask].buffer_length)
+           {
+             b0->data_len -= ring->desc[(b0->desc_index + i) & mask].length =
+               ring->desc[(b0->desc_index + i) & mask].buffer_length;
+           }
+         else
+           {
+             ring->desc[(b0->desc_index + i) & mask].length = b0->data_len;
+             b0->data_len = 0;
+           }
 #ifdef MEMIF_DBG_SHM
          print_bytes (b0->data +
                       ring->desc[(b0->desc_index + i) & mask].buffer_length *
                       (chain_buf0 - 1),
                       ring->desc[(b0->desc_index + i) & mask].buffer_length,
                       DBG_TX_BUF);
-#endif
+#endif /* MEMIF_DBG_SHM */
        }
 
-      head = (b0->desc_index + chain_buf0) & mask;
+      head = b0->desc_index + chain_buf0;
 
       b0->data = NULL;
-      b0->data_len = 0;
+#ifdef MEMIF_DBG
+      if (b0->data_len != 0)
+       DBG ("invalid b0 data length!");
+#endif /* MEMIF_DBG */
 
       count--;
       *tx += chain_buf0;
       curr_buf++;
     }
-  MEMIF_MEORY_BARRIER ();
+  MEMIF_MEMORY_BARRIER ();
   ring->head = head;
 
   mq->alloc_bufs -= *tx;
@@ -1715,7 +1801,9 @@ memif_rx_burst (memif_conn_handle_t conn, uint16_t qid,
   memif_buffer_t *b0, *b1;
   uint16_t curr_buf = 0;
   *rx = 0;
+#ifdef MEMIF_DBG_SHM
   int i;
+#endif /* MEMIF_DBG_SHM */
 
   uint64_t b;
   ssize_t r = read (mq->int_fd, &b, sizeof (b));
@@ -1725,10 +1813,7 @@ memif_rx_burst (memif_conn_handle_t conn, uint16_t qid,
   if (head == mq->last_head)
     return 0;
 
-  if (head > mq->last_head)
-    ns = head - mq->last_head;
-  else
-    ns = (1 << mq->log2_ring_size) - mq->last_head + head;
+  ns = head - mq->last_head;
 
   while (ns && count)
     {
@@ -1738,42 +1823,70 @@ memif_rx_burst (memif_conn_handle_t conn, uint16_t qid,
          b1 = (bufs + curr_buf + 1);
 
          b0->desc_index = mq->last_head;
+         b0->data = memif_get_buffer (conn, ring, mq->last_head & mask);
+         b0->data_len = ring->desc[mq->last_head & mask].length;
+         b0->buffer_len = ring->desc[mq->last_head & mask].buffer_length;
+#ifdef MEMIF_DBG_SHM
          i = 0;
-         do
+         print_bytes (b0->data +
+                      ring->desc[b0->desc_index & mask].buffer_length * i++,
+                      ring->desc[b0->desc_index & mask].buffer_length,
+                      DBG_TX_BUF);
+#endif /* MEMIF_DBG_SHM */
+         ns--;
+         *rx += 1;
+         while (ring->desc[mq->last_head & mask].
+                flags & MEMIF_DESC_FLAG_NEXT)
            {
-             b0->data = memif_get_buffer (conn, ring, mq->last_head);
-             b0->data_len = ring->desc[mq->last_head].length;
-             b0->buffer_len = ring->desc[mq->last_head].buffer_length;
+             ring->desc[mq->last_head & mask].flags &= ~MEMIF_DESC_FLAG_NEXT;
+             mq->last_head++;
+             b0->data_len += ring->desc[mq->last_head & mask].length;
+             b0->buffer_len +=
+               ring->desc[mq->last_head & mask].buffer_length;
 #ifdef MEMIF_DBG_SHM
              print_bytes (b0->data +
-                          ring->desc[b0->desc_index].buffer_length * i++,
-                          ring->desc[b0->desc_index].buffer_length,
+                          ring->desc[b0->desc_index & mask].buffer_length *
+                          i++,
+                          ring->desc[b0->desc_index & mask].buffer_length,
                           DBG_TX_BUF);
-#endif
-             mq->last_head = (mq->last_head + 1) & mask;
+#endif /* MEMIF_DBG_SHM */
              ns--;
              *rx += 1;
            }
-         while (ring->desc[mq->last_head].flags & MEMIF_DESC_FLAG_NEXT);
+         mq->last_head++;
 
          b1->desc_index = mq->last_head;
+         b1->data = memif_get_buffer (conn, ring, mq->last_head & mask);
+         b1->data_len = ring->desc[mq->last_head & mask].length;
+         b1->buffer_len = ring->desc[mq->last_head & mask].buffer_length;
+#ifdef MEMIF_DBG_SHM
          i = 0;
-         do
+         print_bytes (b1->data +
+                      ring->desc[b1->desc_index & mask].buffer_length * i++,
+                      ring->desc[b1->desc_index & mask].buffer_length,
+                      DBG_TX_BUF);
+#endif /* MEMIF_DBG_SHM */
+         ns--;
+         *rx += 1;
+         while (ring->desc[mq->last_head & mask].
+                flags & MEMIF_DESC_FLAG_NEXT)
            {
-             b1->data = memif_get_buffer (conn, ring, mq->last_head);
-             b1->data_len = ring->desc[mq->last_head].length;
-             b1->buffer_len = ring->desc[mq->last_head].buffer_length;
+             ring->desc[mq->last_head & mask].flags &= ~MEMIF_DESC_FLAG_NEXT;
+             mq->last_head++;
+             b1->data_len += ring->desc[mq->last_head & mask].length;
+             b1->buffer_len +=
+               ring->desc[mq->last_head & mask].buffer_length;
 #ifdef MEMIF_DBG_SHM
              print_bytes (b1->data +
-                          ring->desc[b1->desc_index].buffer_length * i++,
-                          ring->desc[b1->desc_index].buffer_length,
+                          ring->desc[b1->desc_index & mask].buffer_length *
+                          i++,
+                          ring->desc[b1->desc_index & mask].buffer_length,
                           DBG_TX_BUF);
-#endif
-             mq->last_head = (mq->last_head + 1) & mask;
+#endif /* MEMIF_DBG_SHM */
              ns--;
              *rx += 1;
            }
-         while (ring->desc[mq->last_head].flags & MEMIF_DESC_FLAG_NEXT);
+         mq->last_head++;
 
          count -= 2;
          curr_buf += 2;
@@ -1781,22 +1894,35 @@ memif_rx_burst (memif_conn_handle_t conn, uint16_t qid,
       b0 = (bufs + curr_buf);
 
       b0->desc_index = mq->last_head;
+      b0->data = memif_get_buffer (conn, ring, mq->last_head & mask);
+      b0->data_len = ring->desc[mq->last_head & mask].length;
+      b0->buffer_len = ring->desc[mq->last_head & mask].buffer_length;
+#ifdef MEMIF_DBG_SHM
       i = 0;
-      do
+      print_bytes (b0->data +
+                  ring->desc[b0->desc_index & mask].buffer_length * i++,
+                  ring->desc[b0->desc_index & mask].buffer_length,
+                  DBG_TX_BUF);
+#endif /* MEMIF_DBG_SHM */
+      ns--;
+      *rx += 1;
+
+      while (ring->desc[mq->last_head & mask].flags & MEMIF_DESC_FLAG_NEXT)
        {
-         b0->data = memif_get_buffer (conn, ring, mq->last_head);
-         b0->data_len = ring->desc[mq->last_head].length;
-         b0->buffer_len = ring->desc[mq->last_head].buffer_length;
+         ring->desc[mq->last_head & mask].flags &= ~MEMIF_DESC_FLAG_NEXT;
+         mq->last_head++;
+         b0->data_len += ring->desc[mq->last_head & mask].length;
+         b0->buffer_len += ring->desc[mq->last_head & mask].buffer_length;
 #ifdef MEMIF_DBG_SHM
          print_bytes (b0->data +
-                      ring->desc[b0->desc_index].buffer_length * i++,
-                      ring->desc[b0->desc_index].buffer_length, DBG_TX_BUF);
-#endif
-         mq->last_head = (mq->last_head + 1) & mask;
+                      ring->desc[b0->desc_index & mask].buffer_length * i++,
+                      ring->desc[b0->desc_index & mask].buffer_length,
+                      DBG_TX_BUF);
+#endif /* MEMIF_DBG_SHM */
          ns--;
          *rx += 1;
        }
-      while (ring->desc[mq->last_head].flags & MEMIF_DESC_FLAG_NEXT);
+      mq->last_head++;
 
       count--;
       curr_buf++;
@@ -1829,40 +1955,36 @@ memif_get_details (memif_conn_handle_t conn, memif_details_t * md,
   l0 = 0;
 
   l1 = strlen ((char *) c->args.interface_name);
-  if (l0 + l1 <= buflen)
+  if (l0 + l1 < buflen)
     {
-      md->if_name = strncpy (buf + l0, (char *) c->args.interface_name, l1);
-      md->if_name[l0 + l1] = '\0';
+      md->if_name = strcpy (buf + l0, (char *) c->args.interface_name);
       l0 += l1 + 1;
     }
   else
     err = MEMIF_ERR_NOBUF_DET;
 
   l1 = strlen ((char *) c->args.instance_name);
-  if (l0 + l1 <= buflen)
+  if (l0 + l1 < buflen)
     {
-      md->inst_name = strncpy (buf + l0, (char *) c->args.instance_name, l1);
-      md->inst_name[l0 + l1] = '\0';
+      md->inst_name = strcpy (buf + l0, (char *) c->args.instance_name);
       l0 += l1 + 1;
     }
   else
     err = MEMIF_ERR_NOBUF_DET;
 
   l1 = strlen ((char *) c->remote_if_name);
-  if (l0 + l1 <= buflen)
+  if (l0 + l1 < buflen)
     {
-      md->remote_if_name = strncpy (buf + l0, (char *) c->remote_if_name, l1);
-      md->remote_if_name[l0 + l1] = '\0';
+      md->remote_if_name = strcpy (buf + l0, (char *) c->remote_if_name);
       l0 += l1 + 1;
     }
   else
     err = MEMIF_ERR_NOBUF_DET;
 
   l1 = strlen ((char *) c->remote_name);
-  if (l0 + l1 <= buflen)
+  if (l0 + l1 < buflen)
     {
-      md->remote_inst_name = strncpy (buf + l0, (char *) c->remote_name, l1);
-      md->remote_inst_name[l0 + l1] = '\0';
+      md->remote_inst_name = strcpy (buf + l0, (char *) c->remote_name);
       l0 += l1 + 1;
     }
   else
@@ -1873,22 +1995,23 @@ memif_get_details (memif_conn_handle_t conn, memif_details_t * md,
   if (c->args.secret)
     {
       l1 = strlen ((char *) c->args.secret);
-      md->secret = strncpy (buf + l0, (char *) c->args.secret, l1);
-      md->secret[l0 + l1] = '\0';
-      l0 += l1 + 1;
+      if (l0 + l1 < buflen)
+       {
+         md->secret = strcpy (buf + l0, (char *) c->args.secret);
+         l0 += l1 + 1;
+       }
+      else
+       err = MEMIF_ERR_NOBUF_DET;
     }
-  else
-    err = MEMIF_ERR_NOBUF_DET;
 
   md->role = (c->args.is_master) ? 0 : 1;
   md->mode = c->args.mode;
 
   l1 = strlen ((char *) c->args.socket_filename);
-  if (l0 + l1 <= buflen)
+  if (l0 + l1 < buflen)
     {
       md->socket_filename =
-       strncpy (buf + l0, (char *) c->args.socket_filename, l1);
-      md->socket_filename[l0 + l1] = '\0';
+       strcpy (buf + l0, (char *) c->args.socket_filename);
       l0 += l1 + 1;
     }
   else
@@ -1902,7 +2025,7 @@ memif_get_details (memif_conn_handle_t conn, memif_details_t * md,
   if (l0 + l1 <= buflen)
     {
       md->rx_queues = (memif_queue_details_t *) buf + l0;
-      l0 = l1 + 1;
+      l0 += l1;
     }
   else
     err = MEMIF_ERR_NOBUF_DET;
@@ -1911,6 +2034,9 @@ memif_get_details (memif_conn_handle_t conn, memif_details_t * md,
     {
       md->rx_queues[i].qid = i;
       md->rx_queues[i].ring_size = (1 << c->rx_queues[i].log2_ring_size);
+      md->rx_queues[i].flags = c->rx_queues[i].ring->flags;
+      md->rx_queues[i].head = c->rx_queues[i].ring->head;
+      md->rx_queues[i].tail = c->rx_queues[i].ring->tail;
       md->rx_queues[i].buffer_size = c->run_args.buffer_size;
     }
 
@@ -1922,7 +2048,7 @@ memif_get_details (memif_conn_handle_t conn, memif_details_t * md,
   if (l0 + l1 <= buflen)
     {
       md->tx_queues = (memif_queue_details_t *) buf + l0;
-      l0 = l1 + 1;
+      l0 += l1;
     }
   else
     err = MEMIF_ERR_NOBUF_DET;
@@ -1931,6 +2057,9 @@ memif_get_details (memif_conn_handle_t conn, memif_details_t * md,
     {
       md->tx_queues[i].qid = i;
       md->tx_queues[i].ring_size = (1 << c->tx_queues[i].log2_ring_size);
+      md->tx_queues[i].flags = c->tx_queues[i].ring->flags;
+      md->tx_queues[i].head = c->tx_queues[i].ring->head;
+      md->tx_queues[i].tail = c->tx_queues[i].ring->tail;
       md->tx_queues[i].buffer_size = c->run_args.buffer_size;
     }
 
@@ -1963,9 +2092,6 @@ int
 memif_cleanup ()
 {
   libmemif_main_t *lm = &libmemif_main;
-  if (lm->app_name)
-    free (lm->app_name);
-  lm->app_name = NULL;
   if (lm->control_list)
     free (lm->control_list);
   lm->control_list = NULL;
@@ -1978,6 +2104,8 @@ memif_cleanup ()
   if (lm->pending_list)
     free (lm->pending_list);
   lm->pending_list = NULL;
+  if (poll_cancel_fd != -1)
+    close (poll_cancel_fd);
 
   return MEMIF_ERR_SUCCESS;    /* 0 */
 }