Imported Upstream version 17.05
[deb_dpdk.git] / drivers / net / virtio / virtio_user_ethdev.c
index 013600e..280406c 100644 (file)
 #include <stdint.h>
 #include <sys/types.h>
 #include <unistd.h>
+#include <fcntl.h>
+#include <sys/types.h>
+#include <sys/socket.h>
 
 #include <rte_malloc.h>
 #include <rte_kvargs.h>
+#include <rte_ethdev_vdev.h>
 #include <rte_vdev.h>
+#include <rte_alarm.h>
 
 #include "virtio_ethdev.h"
 #include "virtio_logs.h"
 #define virtio_user_get_dev(hw) \
        ((struct virtio_user_dev *)(hw)->virtio_user_dev)
 
+static void
+virtio_user_delayed_handler(void *param)
+{
+       struct virtio_hw *hw = (struct virtio_hw *)param;
+       struct rte_eth_dev *dev = &rte_eth_devices[hw->port_id];
+
+       rte_intr_callback_unregister(dev->intr_handle,
+                                    virtio_interrupt_handler,
+                                    dev);
+}
+
 static void
 virtio_user_read_dev_config(struct virtio_hw *hw, size_t offset,
                     void *dst, int length)
@@ -63,8 +79,37 @@ virtio_user_read_dev_config(struct virtio_hw *hw, size_t offset,
                return;
        }
 
-       if (offset == offsetof(struct virtio_net_config, status))
+       if (offset == offsetof(struct virtio_net_config, status)) {
+               char buf[128];
+
+               if (dev->vhostfd >= 0) {
+                       int r;
+                       int flags;
+
+                       flags = fcntl(dev->vhostfd, F_GETFL);
+                       fcntl(dev->vhostfd, F_SETFL, flags | O_NONBLOCK);
+                       r = recv(dev->vhostfd, buf, 128, MSG_PEEK);
+                       if (r == 0 || (r < 0 && errno != EAGAIN)) {
+                               dev->status &= (~VIRTIO_NET_S_LINK_UP);
+                               PMD_DRV_LOG(ERR, "virtio-user port %u is down",
+                                           hw->port_id);
+                               /* Only client mode is available now. Once the
+                                * connection is broken, it can never be up
+                                * again. Besides, this function could be called
+                                * in the process of interrupt handling,
+                                * callback cannot be unregistered here, set an
+                                * alarm to do it.
+                                */
+                               rte_eal_alarm_set(1,
+                                                 virtio_user_delayed_handler,
+                                                 (void *)hw);
+                       } else {
+                               dev->status |= VIRTIO_NET_S_LINK_UP;
+                       }
+                       fcntl(dev->vhostfd, F_SETFL, flags & (~O_NONBLOCK));
+               }
                *(uint16_t *)dst = dev->status;
+       }
 
        if (offset == offsetof(struct virtio_net_config, max_virtqueue_pairs))
                *(uint16_t *)dst = dev->max_queue_pairs;
@@ -82,7 +127,7 @@ virtio_user_write_dev_config(struct virtio_hw *hw, size_t offset,
                for (i = 0; i < ETHER_ADDR_LEN; ++i)
                        dev->mac_addr[i] = ((const uint8_t *)src)[i];
        else
-               PMD_DRV_LOG(ERR, "not supported offset=%zu, len=%d\n",
+               PMD_DRV_LOG(ERR, "not supported offset=%zu, len=%d",
                            offset, length);
 }
 
@@ -135,17 +180,26 @@ virtio_user_set_features(struct virtio_hw *hw, uint64_t features)
 static uint8_t
 virtio_user_get_isr(struct virtio_hw *hw __rte_unused)
 {
-       /* When config interrupt happens, driver calls this function to query
-        * what kinds of change happen. Interrupt mode not supported for now.
+       /* rxq interrupts and config interrupt are separated in virtio-user,
+        * here we only report config change.
         */
-       return 0;
+       return VIRTIO_PCI_ISR_CONFIG;
 }
 
 static uint16_t
 virtio_user_set_config_irq(struct virtio_hw *hw __rte_unused,
                    uint16_t vec __rte_unused)
 {
-       return VIRTIO_MSI_NO_VECTOR;
+       return 0;
+}
+
+static uint16_t
+virtio_user_set_queue_irq(struct virtio_hw *hw __rte_unused,
+                         struct virtqueue *vq __rte_unused,
+                         uint16_t vec)
+{
+       /* pretend we have done that */
+       return vec;
 }
 
 /* This function is to get the queue size, aka, number of descs, of a specified
@@ -212,7 +266,7 @@ virtio_user_notify_queue(struct virtio_hw *hw, struct virtqueue *vq)
        }
 
        if (write(dev->kickfds[vq->vq_queue_index], &buf, sizeof(buf)) < 0)
-               PMD_DRV_LOG(ERR, "failed to kick backend: %s\n",
+               PMD_DRV_LOG(ERR, "failed to kick backend: %s",
                            strerror(errno));
 }
 
@@ -226,6 +280,7 @@ const struct virtio_pci_ops virtio_user_ops = {
        .set_features   = virtio_user_set_features,
        .get_isr        = virtio_user_get_isr,
        .set_config_irq = virtio_user_set_config_irq,
+       .set_queue_irq  = virtio_user_set_queue_irq,
        .get_queue_num  = virtio_user_get_queue_num,
        .setup_queue    = virtio_user_setup_queue,
        .del_queue      = virtio_user_del_queue,
@@ -243,6 +298,8 @@ static const char *valid_args[] = {
        VIRTIO_USER_ARG_PATH,
 #define VIRTIO_USER_ARG_QUEUE_SIZE     "queue_size"
        VIRTIO_USER_ARG_QUEUE_SIZE,
+#define VIRTIO_USER_ARG_INTERFACE_NAME "iface"
+       VIRTIO_USER_ARG_INTERFACE_NAME,
        NULL
 };
 
@@ -259,6 +316,9 @@ get_string_arg(const char *key __rte_unused,
 
        *(char **)extra_args = strdup(value);
 
+       if (!*(char **)extra_args)
+               return -ENOMEM;
+
        return 0;
 }
 
@@ -274,28 +334,24 @@ get_integer_arg(const char *key __rte_unused,
        return 0;
 }
 
+static struct rte_vdev_driver virtio_user_driver;
+
 static struct rte_eth_dev *
-virtio_user_eth_dev_alloc(const char *name)
+virtio_user_eth_dev_alloc(struct rte_vdev_device *vdev)
 {
        struct rte_eth_dev *eth_dev;
        struct rte_eth_dev_data *data;
        struct virtio_hw *hw;
        struct virtio_user_dev *dev;
 
-       eth_dev = rte_eth_dev_allocate(name);
+       eth_dev = rte_eth_vdev_allocate(vdev, sizeof(*hw));
        if (!eth_dev) {
                PMD_INIT_LOG(ERR, "cannot alloc rte_eth_dev");
                return NULL;
        }
 
        data = eth_dev->data;
-
-       hw = rte_zmalloc(NULL, sizeof(*hw), 0);
-       if (!hw) {
-               PMD_INIT_LOG(ERR, "malloc virtio_hw failed");
-               rte_eth_dev_release_port(eth_dev);
-               return NULL;
-       }
+       hw = eth_dev->data->dev_private;
 
        dev = rte_zmalloc(NULL, sizeof(*dev), 0);
        if (!dev) {
@@ -306,17 +362,17 @@ virtio_user_eth_dev_alloc(const char *name)
        }
 
        hw->port_id = data->port_id;
+       dev->port_id = data->port_id;
        virtio_hw_internal[hw->port_id].vtpci_ops = &virtio_user_ops;
-       hw->use_msix = 0;
+       /*
+        * MSIX is required to enable LSC (see virtio_init_device).
+        * Here just pretend that we support msix.
+        */
+       hw->use_msix = 1;
        hw->modern   = 0;
        hw->use_simple_rxtx = 0;
        hw->virtio_user_dev = dev;
-       data->dev_private = hw;
-       data->numa_node = SOCKET_ID_ANY;
-       data->kdrv = RTE_KDRV_NONE;
        data->dev_flags = RTE_ETH_DEV_DETACHABLE;
-       eth_dev->pci_dev = NULL;
-       eth_dev->driver = NULL;
        return eth_dev;
 }
 
@@ -336,7 +392,7 @@ virtio_user_eth_dev_free(struct rte_eth_dev *eth_dev)
  * Returns 0 on success.
  */
 static int
-virtio_user_pmd_probe(const char *name, const char *params)
+virtio_user_pmd_probe(struct rte_vdev_device *dev)
 {
        struct rte_kvargs *kvlist = NULL;
        struct rte_eth_dev *eth_dev;
@@ -345,16 +401,11 @@ virtio_user_pmd_probe(const char *name, const char *params)
        uint64_t cq = VIRTIO_USER_DEF_CQ_EN;
        uint64_t queue_size = VIRTIO_USER_DEF_Q_SZ;
        char *path = NULL;
+       char *ifname = NULL;
        char *mac_addr = NULL;
        int ret = -1;
 
-       if (!params || params[0] == '\0') {
-               PMD_INIT_LOG(ERR, "arg %s is mandatory for virtio_user",
-                         VIRTIO_USER_ARG_QUEUE_SIZE);
-               goto end;
-       }
-
-       kvlist = rte_kvargs_parse(params, valid_args);
+       kvlist = rte_kvargs_parse(rte_vdev_device_args(dev), valid_args);
        if (!kvlist) {
                PMD_INIT_LOG(ERR, "error when parsing param");
                goto end;
@@ -368,11 +419,27 @@ virtio_user_pmd_probe(const char *name, const char *params)
                        goto end;
                }
        } else {
-               PMD_INIT_LOG(ERR, "arg %s is mandatory for virtio_user\n",
+               PMD_INIT_LOG(ERR, "arg %s is mandatory for virtio_user",
                          VIRTIO_USER_ARG_QUEUE_SIZE);
                goto end;
        }
 
+       if (rte_kvargs_count(kvlist, VIRTIO_USER_ARG_INTERFACE_NAME) == 1) {
+               if (is_vhost_user_by_type(path)) {
+                       PMD_INIT_LOG(ERR,
+                               "arg %s applies only to vhost-kernel backend",
+                               VIRTIO_USER_ARG_INTERFACE_NAME);
+                       goto end;
+               }
+
+               if (rte_kvargs_process(kvlist, VIRTIO_USER_ARG_INTERFACE_NAME,
+                                      &get_string_arg, &ifname) < 0) {
+                       PMD_INIT_LOG(ERR, "error to parse %s",
+                                    VIRTIO_USER_ARG_INTERFACE_NAME);
+                       goto end;
+               }
+       }
+
        if (rte_kvargs_count(kvlist, VIRTIO_USER_ARG_MAC) == 1) {
                if (rte_kvargs_process(kvlist, VIRTIO_USER_ARG_MAC,
                                       &get_string_arg, &mac_addr) < 0) {
@@ -416,21 +483,34 @@ virtio_user_pmd_probe(const char *name, const char *params)
                goto end;
        }
 
-       eth_dev = virtio_user_eth_dev_alloc(name);
-       if (!eth_dev) {
-               PMD_INIT_LOG(ERR, "virtio_user fails to alloc device");
+       if (queues > VIRTIO_MAX_VIRTQUEUE_PAIRS) {
+               PMD_INIT_LOG(ERR, "arg %s %" PRIu64 " exceeds the limit %u",
+                       VIRTIO_USER_ARG_QUEUES_NUM, queues,
+                       VIRTIO_MAX_VIRTQUEUE_PAIRS);
                goto end;
        }
 
-       hw = eth_dev->data->dev_private;
-       if (virtio_user_dev_init(hw->virtio_user_dev, path, queues, cq,
-                                queue_size, mac_addr) < 0) {
-               PMD_INIT_LOG(ERR, "virtio_user_dev_init fails");
-               virtio_user_eth_dev_free(eth_dev);
-               goto end;
+       if (rte_eal_process_type() == RTE_PROC_PRIMARY) {
+               eth_dev = virtio_user_eth_dev_alloc(dev);
+               if (!eth_dev) {
+                       PMD_INIT_LOG(ERR, "virtio_user fails to alloc device");
+                       goto end;
+               }
+
+               hw = eth_dev->data->dev_private;
+               if (virtio_user_dev_init(hw->virtio_user_dev, path, queues, cq,
+                                queue_size, mac_addr, &ifname) < 0) {
+                       PMD_INIT_LOG(ERR, "virtio_user_dev_init fails");
+                       virtio_user_eth_dev_free(eth_dev);
+                       goto end;
+               }
+       } else {
+               eth_dev = rte_eth_dev_attach_secondary(rte_vdev_device_name(dev));
+               if (!eth_dev)
+                       goto end;
        }
 
-       /* previously called by rte_eal_pci_probe() for physical dev */
+       /* previously called by rte_pci_probe() for physical dev */
        if (eth_virtio_dev_init(eth_dev) < 0) {
                PMD_INIT_LOG(ERR, "eth_virtio_dev_init fails");
                virtio_user_eth_dev_free(eth_dev);
@@ -445,21 +525,25 @@ end:
                free(path);
        if (mac_addr)
                free(mac_addr);
+       if (ifname)
+               free(ifname);
        return ret;
 }
 
 /** Called by rte_eth_dev_detach() */
 static int
-virtio_user_pmd_remove(const char *name)
+virtio_user_pmd_remove(struct rte_vdev_device *vdev)
 {
+       const char *name;
        struct rte_eth_dev *eth_dev;
        struct virtio_hw *hw;
        struct virtio_user_dev *dev;
 
-       if (!name)
+       if (!vdev)
                return -EINVAL;
 
-       PMD_DRV_LOG(INFO, "Un-Initializing %s\n", name);
+       name = rte_vdev_device_name(vdev);
+       PMD_DRV_LOG(INFO, "Un-Initializing %s", name);
        eth_dev = rte_eth_dev_allocated(name);
        if (!eth_dev)
                return -ENODEV;
@@ -490,4 +574,5 @@ RTE_PMD_REGISTER_PARAM_STRING(net_virtio_user,
        "mac=<mac addr> "
        "cq=<int> "
        "queue_size=<int> "
-       "queues=<int>");
+       "queues=<int> "
+       "iface=<string>");