14ccc8d77SZyta Szpak /* SPDX-License-Identifier: BSD-3-Clause 24ccc8d77SZyta Szpak * Copyright(c) 2018 Marvell International Ltd. 34ccc8d77SZyta Szpak * Copyright(c) 2018 Semihalf. 44ccc8d77SZyta Szpak * All rights reserved. 54ccc8d77SZyta Szpak */ 64ccc8d77SZyta Szpak 76723c0fcSBruce Richardson #include <rte_string_fns.h> 84ccc8d77SZyta Szpak #include <rte_ethdev_driver.h> 94ccc8d77SZyta Szpak #include <rte_kvargs.h> 104ccc8d77SZyta Szpak #include <rte_bus_vdev.h> 114ccc8d77SZyta Szpak 124ccc8d77SZyta Szpak #include <stdio.h> 134ccc8d77SZyta Szpak #include <fcntl.h> 144ccc8d77SZyta Szpak #include <linux/ethtool.h> 154ccc8d77SZyta Szpak #include <linux/sockios.h> 164ccc8d77SZyta Szpak #include <net/if.h> 174ccc8d77SZyta Szpak #include <net/if_arp.h> 184ccc8d77SZyta Szpak #include <sys/ioctl.h> 194ccc8d77SZyta Szpak #include <sys/socket.h> 204ccc8d77SZyta Szpak #include <sys/stat.h> 214ccc8d77SZyta Szpak #include <sys/types.h> 224ccc8d77SZyta Szpak 234ccc8d77SZyta Szpak #include <rte_mvep_common.h> 244ccc8d77SZyta Szpak 25ce7ea764SZyta Szpak #include "mvneta_rxtx.h" 264ccc8d77SZyta Szpak 274ccc8d77SZyta Szpak 284ccc8d77SZyta Szpak #define MVNETA_IFACE_NAME_ARG "iface" 294ccc8d77SZyta Szpak 304ccc8d77SZyta Szpak #define MVNETA_PKT_SIZE_MAX (16382 - MV_MH_SIZE) /* 9700B */ 314ccc8d77SZyta Szpak #define MVNETA_DEFAULT_MTU 1500 324ccc8d77SZyta Szpak 334ccc8d77SZyta Szpak #define MVNETA_MAC_ADDRS_MAX 256 /*16 UC, 256 IP, 256 MC/BC */ 344ccc8d77SZyta Szpak /** Maximum length of a match string */ 354ccc8d77SZyta Szpak #define MVNETA_MATCH_LEN 16 364ccc8d77SZyta Szpak 374ccc8d77SZyta Szpak static const char * const valid_args[] = { 384ccc8d77SZyta Szpak MVNETA_IFACE_NAME_ARG, 394ccc8d77SZyta Szpak NULL 404ccc8d77SZyta Szpak }; 414ccc8d77SZyta Szpak 424ccc8d77SZyta Szpak struct mvneta_ifnames { 434ccc8d77SZyta Szpak const char *names[NETA_NUM_ETH_PPIO]; 444ccc8d77SZyta Szpak int idx; 454ccc8d77SZyta Szpak }; 464ccc8d77SZyta Szpak 474ccc8d77SZyta Szpak static int mvneta_dev_num; 484ccc8d77SZyta Szpak 499970a9adSIgor Romanov static int mvneta_stats_reset(struct rte_eth_dev *dev); 504b6d2743SYuri Chipchev static int rte_pmd_mvneta_remove(struct rte_vdev_device *vdev); 514b6d2743SYuri Chipchev 5215ae783aSYuri Chipchev 534ccc8d77SZyta Szpak /** 544ccc8d77SZyta Szpak * Deinitialize packet processor. 554ccc8d77SZyta Szpak */ 564ccc8d77SZyta Szpak static void 574ccc8d77SZyta Szpak mvneta_neta_deinit(void) 584ccc8d77SZyta Szpak { 594ccc8d77SZyta Szpak neta_deinit(); 604ccc8d77SZyta Szpak } 614ccc8d77SZyta Szpak 624ccc8d77SZyta Szpak /** 634ccc8d77SZyta Szpak * Initialize packet processor. 644ccc8d77SZyta Szpak * 654ccc8d77SZyta Szpak * @return 664ccc8d77SZyta Szpak * 0 on success, negative error value otherwise. 674ccc8d77SZyta Szpak */ 684ccc8d77SZyta Szpak static int 694ccc8d77SZyta Szpak mvneta_neta_init(void) 704ccc8d77SZyta Szpak { 714ccc8d77SZyta Szpak return neta_init(); 724ccc8d77SZyta Szpak } 734ccc8d77SZyta Szpak 744ccc8d77SZyta Szpak /** 754ccc8d77SZyta Szpak * Callback used by rte_kvargs_process() during argument parsing. 764ccc8d77SZyta Szpak * 774ccc8d77SZyta Szpak * @param key 784ccc8d77SZyta Szpak * Pointer to the parsed key (unused). 794ccc8d77SZyta Szpak * @param value 804ccc8d77SZyta Szpak * Pointer to the parsed value. 814ccc8d77SZyta Szpak * @param extra_args 824ccc8d77SZyta Szpak * Pointer to the extra arguments which contains address of the 834ccc8d77SZyta Szpak * table of pointers to parsed interface names. 844ccc8d77SZyta Szpak * 854ccc8d77SZyta Szpak * @return 864ccc8d77SZyta Szpak * Always 0. 874ccc8d77SZyta Szpak */ 884ccc8d77SZyta Szpak static int 894ccc8d77SZyta Szpak mvneta_ifnames_get(const char *key __rte_unused, const char *value, 904ccc8d77SZyta Szpak void *extra_args) 914ccc8d77SZyta Szpak { 924ccc8d77SZyta Szpak struct mvneta_ifnames *ifnames = extra_args; 934ccc8d77SZyta Szpak 944ccc8d77SZyta Szpak ifnames->names[ifnames->idx++] = value; 954ccc8d77SZyta Szpak 964ccc8d77SZyta Szpak return 0; 974ccc8d77SZyta Szpak } 984ccc8d77SZyta Szpak 994ccc8d77SZyta Szpak /** 1004ccc8d77SZyta Szpak * Ethernet device configuration. 1014ccc8d77SZyta Szpak * 1024ccc8d77SZyta Szpak * Prepare the driver for a given number of TX and RX queues and 1034ccc8d77SZyta Szpak * configure RSS if supported. 1044ccc8d77SZyta Szpak * 1054ccc8d77SZyta Szpak * @param dev 1064ccc8d77SZyta Szpak * Pointer to Ethernet device structure. 1074ccc8d77SZyta Szpak * 1084ccc8d77SZyta Szpak * @return 1094ccc8d77SZyta Szpak * 0 on success, negative error value otherwise. 1104ccc8d77SZyta Szpak */ 1114ccc8d77SZyta Szpak static int 1124ccc8d77SZyta Szpak mvneta_dev_configure(struct rte_eth_dev *dev) 1134ccc8d77SZyta Szpak { 1144ccc8d77SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 1154ccc8d77SZyta Szpak struct neta_ppio_params *ppio_params; 1164ccc8d77SZyta Szpak 1174ccc8d77SZyta Szpak if (dev->data->dev_conf.rxmode.mq_mode != ETH_MQ_RX_NONE) { 1184ccc8d77SZyta Szpak MVNETA_LOG(INFO, "Unsupported RSS and rx multi queue mode %d", 1194ccc8d77SZyta Szpak dev->data->dev_conf.rxmode.mq_mode); 1204ccc8d77SZyta Szpak if (dev->data->nb_rx_queues > 1) 1214ccc8d77SZyta Szpak return -EINVAL; 1224ccc8d77SZyta Szpak } 1234ccc8d77SZyta Szpak 1244ccc8d77SZyta Szpak if (dev->data->dev_conf.rxmode.split_hdr_size) { 1254ccc8d77SZyta Szpak MVNETA_LOG(INFO, "Split headers not supported"); 1264ccc8d77SZyta Szpak return -EINVAL; 1274ccc8d77SZyta Szpak } 1284ccc8d77SZyta Szpak 1294ccc8d77SZyta Szpak if (dev->data->dev_conf.rxmode.offloads & DEV_RX_OFFLOAD_JUMBO_FRAME) 1304ccc8d77SZyta Szpak dev->data->mtu = dev->data->dev_conf.rxmode.max_rx_pkt_len - 1314ccc8d77SZyta Szpak MRVL_NETA_ETH_HDRS_LEN; 1324ccc8d77SZyta Szpak 1334ccc8d77SZyta Szpak if (dev->data->dev_conf.txmode.offloads & DEV_TX_OFFLOAD_MULTI_SEGS) 1344ccc8d77SZyta Szpak priv->multiseg = 1; 1354ccc8d77SZyta Szpak 1364ccc8d77SZyta Szpak ppio_params = &priv->ppio_params; 1374ccc8d77SZyta Szpak ppio_params->outqs_params.num_outqs = dev->data->nb_tx_queues; 1384ccc8d77SZyta Szpak /* Default: 1 TC, no QoS supported. */ 1394ccc8d77SZyta Szpak ppio_params->inqs_params.num_tcs = 1; 1404ccc8d77SZyta Szpak ppio_params->inqs_params.tcs_params[0].pkt_offset = MRVL_NETA_PKT_OFFS; 1414ccc8d77SZyta Szpak priv->ppio_id = dev->data->port_id; 1424ccc8d77SZyta Szpak 1434ccc8d77SZyta Szpak return 0; 1444ccc8d77SZyta Szpak } 1454ccc8d77SZyta Szpak 1464ccc8d77SZyta Szpak /** 1474ccc8d77SZyta Szpak * DPDK callback to get information about the device. 1484ccc8d77SZyta Szpak * 1494ccc8d77SZyta Szpak * @param dev 1504ccc8d77SZyta Szpak * Pointer to Ethernet device structure (unused). 1514ccc8d77SZyta Szpak * @param info 1524ccc8d77SZyta Szpak * Info structure output buffer. 1534ccc8d77SZyta Szpak */ 154bdad90d1SIvan Ilchenko static int 1554ccc8d77SZyta Szpak mvneta_dev_infos_get(struct rte_eth_dev *dev __rte_unused, 1564ccc8d77SZyta Szpak struct rte_eth_dev_info *info) 1574ccc8d77SZyta Szpak { 1584ccc8d77SZyta Szpak info->speed_capa = ETH_LINK_SPEED_10M | 1594ccc8d77SZyta Szpak ETH_LINK_SPEED_100M | 1604ccc8d77SZyta Szpak ETH_LINK_SPEED_1G | 1614ccc8d77SZyta Szpak ETH_LINK_SPEED_2_5G; 1624ccc8d77SZyta Szpak 1634ccc8d77SZyta Szpak info->max_rx_queues = MRVL_NETA_RXQ_MAX; 1644ccc8d77SZyta Szpak info->max_tx_queues = MRVL_NETA_TXQ_MAX; 1654ccc8d77SZyta Szpak info->max_mac_addrs = MVNETA_MAC_ADDRS_MAX; 1664ccc8d77SZyta Szpak 1674ccc8d77SZyta Szpak info->rx_desc_lim.nb_max = MRVL_NETA_RXD_MAX; 1684ccc8d77SZyta Szpak info->rx_desc_lim.nb_min = MRVL_NETA_RXD_MIN; 1694ccc8d77SZyta Szpak info->rx_desc_lim.nb_align = MRVL_NETA_RXD_ALIGN; 1704ccc8d77SZyta Szpak 1714ccc8d77SZyta Szpak info->tx_desc_lim.nb_max = MRVL_NETA_TXD_MAX; 1724ccc8d77SZyta Szpak info->tx_desc_lim.nb_min = MRVL_NETA_TXD_MIN; 1734ccc8d77SZyta Szpak info->tx_desc_lim.nb_align = MRVL_NETA_TXD_ALIGN; 1744ccc8d77SZyta Szpak 1754ccc8d77SZyta Szpak info->rx_offload_capa = MVNETA_RX_OFFLOADS; 1764ccc8d77SZyta Szpak info->rx_queue_offload_capa = MVNETA_RX_OFFLOADS; 1774ccc8d77SZyta Szpak 1784ccc8d77SZyta Szpak info->tx_offload_capa = MVNETA_TX_OFFLOADS; 1794ccc8d77SZyta Szpak info->tx_queue_offload_capa = MVNETA_TX_OFFLOADS; 1804ccc8d77SZyta Szpak 1814ccc8d77SZyta Szpak /* By default packets are dropped if no descriptors are available */ 1824ccc8d77SZyta Szpak info->default_rxconf.rx_drop_en = 1; 1834ccc8d77SZyta Szpak /* Deferred tx queue start is not supported */ 1844ccc8d77SZyta Szpak info->default_txconf.tx_deferred_start = 0; 1854ccc8d77SZyta Szpak info->default_txconf.offloads = 0; 1864ccc8d77SZyta Szpak 1874ccc8d77SZyta Szpak info->max_rx_pktlen = MVNETA_PKT_SIZE_MAX; 188bdad90d1SIvan Ilchenko 189bdad90d1SIvan Ilchenko return 0; 1904ccc8d77SZyta Szpak } 1914ccc8d77SZyta Szpak 1924ccc8d77SZyta Szpak /** 1934ccc8d77SZyta Szpak * Return supported packet types. 1944ccc8d77SZyta Szpak * 1954ccc8d77SZyta Szpak * @param dev 1964ccc8d77SZyta Szpak * Pointer to Ethernet device structure (unused). 1974ccc8d77SZyta Szpak * 1984ccc8d77SZyta Szpak * @return 1994ccc8d77SZyta Szpak * Const pointer to the table with supported packet types. 2004ccc8d77SZyta Szpak */ 2014ccc8d77SZyta Szpak static const uint32_t * 2024ccc8d77SZyta Szpak mvneta_dev_supported_ptypes_get(struct rte_eth_dev *dev __rte_unused) 2034ccc8d77SZyta Szpak { 2044ccc8d77SZyta Szpak static const uint32_t ptypes[] = { 2054ccc8d77SZyta Szpak RTE_PTYPE_L2_ETHER, 2064ccc8d77SZyta Szpak RTE_PTYPE_L2_ETHER_VLAN, 2074ccc8d77SZyta Szpak RTE_PTYPE_L3_IPV4, 2084ccc8d77SZyta Szpak RTE_PTYPE_L3_IPV6, 2094ccc8d77SZyta Szpak RTE_PTYPE_L4_TCP, 2104ccc8d77SZyta Szpak RTE_PTYPE_L4_UDP 2114ccc8d77SZyta Szpak }; 2124ccc8d77SZyta Szpak 2134ccc8d77SZyta Szpak return ptypes; 2144ccc8d77SZyta Szpak } 2154ccc8d77SZyta Szpak 2164ccc8d77SZyta Szpak /** 217112ef725SZyta Szpak * DPDK callback to change the MTU. 218112ef725SZyta Szpak * 219112ef725SZyta Szpak * Setting the MTU affects hardware MRU (packets larger than the MRU 220112ef725SZyta Szpak * will be dropped). 221112ef725SZyta Szpak * 222112ef725SZyta Szpak * @param dev 223112ef725SZyta Szpak * Pointer to Ethernet device structure. 224112ef725SZyta Szpak * @param mtu 225112ef725SZyta Szpak * New MTU. 226112ef725SZyta Szpak * 227112ef725SZyta Szpak * @return 228112ef725SZyta Szpak * 0 on success, negative error value otherwise. 229112ef725SZyta Szpak */ 230112ef725SZyta Szpak static int 231112ef725SZyta Szpak mvneta_mtu_set(struct rte_eth_dev *dev, uint16_t mtu) 232112ef725SZyta Szpak { 233112ef725SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 234112ef725SZyta Szpak uint16_t mbuf_data_size = 0; /* SW buffer size */ 235112ef725SZyta Szpak uint16_t mru; 236112ef725SZyta Szpak int ret; 237112ef725SZyta Szpak 238112ef725SZyta Szpak mru = MRVL_NETA_MTU_TO_MRU(mtu); 239112ef725SZyta Szpak /* 240112ef725SZyta Szpak * min_rx_buf_size is equal to mbuf data size 241112ef725SZyta Szpak * if pmd didn't set it differently 242112ef725SZyta Szpak */ 243112ef725SZyta Szpak mbuf_data_size = dev->data->min_rx_buf_size - RTE_PKTMBUF_HEADROOM; 244112ef725SZyta Szpak /* Prevent PMD from: 245112ef725SZyta Szpak * - setting mru greater than the mbuf size resulting in 246112ef725SZyta Szpak * hw and sw buffer size mismatch 247112ef725SZyta Szpak * - setting mtu that requires the support of scattered packets 248112ef725SZyta Szpak * when this feature has not been enabled/supported so far. 249112ef725SZyta Szpak */ 250112ef725SZyta Szpak if (!dev->data->scattered_rx && 251112ef725SZyta Szpak (mru + MRVL_NETA_PKT_OFFS > mbuf_data_size)) { 252112ef725SZyta Szpak mru = mbuf_data_size - MRVL_NETA_PKT_OFFS; 253112ef725SZyta Szpak mtu = MRVL_NETA_MRU_TO_MTU(mru); 254112ef725SZyta Szpak MVNETA_LOG(WARNING, "MTU too big, max MTU possible limitted by" 255112ef725SZyta Szpak " current mbuf size: %u. Set MTU to %u, MRU to %u", 256112ef725SZyta Szpak mbuf_data_size, mtu, mru); 257112ef725SZyta Szpak } 258112ef725SZyta Szpak 25935b2d13fSOlivier Matz if (mtu < RTE_ETHER_MIN_MTU || mru > MVNETA_PKT_SIZE_MAX) { 260112ef725SZyta Szpak MVNETA_LOG(ERR, "Invalid MTU [%u] or MRU [%u]", mtu, mru); 261112ef725SZyta Szpak return -EINVAL; 262112ef725SZyta Szpak } 263112ef725SZyta Szpak 264112ef725SZyta Szpak dev->data->mtu = mtu; 265112ef725SZyta Szpak dev->data->dev_conf.rxmode.max_rx_pkt_len = mru - MV_MH_SIZE; 266112ef725SZyta Szpak 267112ef725SZyta Szpak if (!priv->ppio) 268112ef725SZyta Szpak /* It is OK. New MTU will be set later on mvneta_dev_start */ 269112ef725SZyta Szpak return 0; 270112ef725SZyta Szpak 271112ef725SZyta Szpak ret = neta_ppio_set_mru(priv->ppio, mru); 272112ef725SZyta Szpak if (ret) { 273112ef725SZyta Szpak MVNETA_LOG(ERR, "Failed to change MRU"); 274112ef725SZyta Szpak return ret; 275112ef725SZyta Szpak } 276112ef725SZyta Szpak 277112ef725SZyta Szpak ret = neta_ppio_set_mtu(priv->ppio, mtu); 278112ef725SZyta Szpak if (ret) { 279112ef725SZyta Szpak MVNETA_LOG(ERR, "Failed to change MTU"); 280112ef725SZyta Szpak return ret; 281112ef725SZyta Szpak } 282112ef725SZyta Szpak MVNETA_LOG(INFO, "MTU changed to %u, MRU = %u", mtu, mru); 283112ef725SZyta Szpak 284112ef725SZyta Szpak return 0; 285112ef725SZyta Szpak } 286112ef725SZyta Szpak 287112ef725SZyta Szpak /** 2884ccc8d77SZyta Szpak * DPDK callback to bring the link up. 2894ccc8d77SZyta Szpak * 2904ccc8d77SZyta Szpak * @param dev 2914ccc8d77SZyta Szpak * Pointer to Ethernet device structure. 2924ccc8d77SZyta Szpak * 2934ccc8d77SZyta Szpak * @return 2944ccc8d77SZyta Szpak * 0 on success, negative error value otherwise. 2954ccc8d77SZyta Szpak */ 2964ccc8d77SZyta Szpak static int 2974ccc8d77SZyta Szpak mvneta_dev_set_link_up(struct rte_eth_dev *dev) 2984ccc8d77SZyta Szpak { 2994ccc8d77SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 3004ccc8d77SZyta Szpak 3014ccc8d77SZyta Szpak if (!priv->ppio) 3024ccc8d77SZyta Szpak return 0; 3034ccc8d77SZyta Szpak 3044ccc8d77SZyta Szpak return neta_ppio_enable(priv->ppio); 3054ccc8d77SZyta Szpak } 3064ccc8d77SZyta Szpak 3074ccc8d77SZyta Szpak /** 3084ccc8d77SZyta Szpak * DPDK callback to bring the link down. 3094ccc8d77SZyta Szpak * 3104ccc8d77SZyta Szpak * @param dev 3114ccc8d77SZyta Szpak * Pointer to Ethernet device structure. 3124ccc8d77SZyta Szpak * 3134ccc8d77SZyta Szpak * @return 3144ccc8d77SZyta Szpak * 0 on success, negative error value otherwise. 3154ccc8d77SZyta Szpak */ 3164ccc8d77SZyta Szpak static int 3174ccc8d77SZyta Szpak mvneta_dev_set_link_down(struct rte_eth_dev *dev) 3184ccc8d77SZyta Szpak { 3194ccc8d77SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 3204ccc8d77SZyta Szpak 3214ccc8d77SZyta Szpak if (!priv->ppio) 3224ccc8d77SZyta Szpak return 0; 3234ccc8d77SZyta Szpak 3244ccc8d77SZyta Szpak return neta_ppio_disable(priv->ppio); 3254ccc8d77SZyta Szpak } 3264ccc8d77SZyta Szpak 3274ccc8d77SZyta Szpak /** 3284ccc8d77SZyta Szpak * DPDK callback to start the device. 3294ccc8d77SZyta Szpak * 3304ccc8d77SZyta Szpak * @param dev 3314ccc8d77SZyta Szpak * Pointer to Ethernet device structure. 3324ccc8d77SZyta Szpak * 3334ccc8d77SZyta Szpak * @return 3344ccc8d77SZyta Szpak * 0 on success, negative errno value on failure. 3354ccc8d77SZyta Szpak */ 3364ccc8d77SZyta Szpak static int 3374ccc8d77SZyta Szpak mvneta_dev_start(struct rte_eth_dev *dev) 3384ccc8d77SZyta Szpak { 3394ccc8d77SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 3404ccc8d77SZyta Szpak char match[MVNETA_MATCH_LEN]; 3414ccc8d77SZyta Szpak int ret = 0, i; 3424ccc8d77SZyta Szpak 3434ccc8d77SZyta Szpak if (priv->ppio) 3444ccc8d77SZyta Szpak return mvneta_dev_set_link_up(dev); 3454ccc8d77SZyta Szpak 3466723c0fcSBruce Richardson strlcpy(match, dev->data->name, sizeof(match)); 3474ccc8d77SZyta Szpak priv->ppio_params.match = match; 3484ccc8d77SZyta Szpak priv->ppio_params.inqs_params.mtu = dev->data->mtu; 3494ccc8d77SZyta Szpak 3504ccc8d77SZyta Szpak ret = neta_ppio_init(&priv->ppio_params, &priv->ppio); 3514ccc8d77SZyta Szpak if (ret) { 3524ccc8d77SZyta Szpak MVNETA_LOG(ERR, "Failed to init ppio"); 3534ccc8d77SZyta Szpak return ret; 3544ccc8d77SZyta Szpak } 3554ccc8d77SZyta Szpak priv->ppio_id = priv->ppio->port_id; 3564ccc8d77SZyta Szpak 35715ae783aSYuri Chipchev mvneta_stats_reset(dev); 35815ae783aSYuri Chipchev 3594ccc8d77SZyta Szpak /* 3604ccc8d77SZyta Szpak * In case there are some some stale uc/mc mac addresses flush them 3614ccc8d77SZyta Szpak * here. It cannot be done during mvneta_dev_close() as port information 3624ccc8d77SZyta Szpak * is already gone at that point (due to neta_ppio_deinit() in 3634ccc8d77SZyta Szpak * mvneta_dev_stop()). 3644ccc8d77SZyta Szpak */ 3654ccc8d77SZyta Szpak if (!priv->uc_mc_flushed) { 3664ccc8d77SZyta Szpak ret = neta_ppio_flush_mac_addrs(priv->ppio, 0, 1); 3674ccc8d77SZyta Szpak if (ret) { 3684ccc8d77SZyta Szpak MVNETA_LOG(ERR, 3694ccc8d77SZyta Szpak "Failed to flush uc/mc filter list"); 3704ccc8d77SZyta Szpak goto out; 3714ccc8d77SZyta Szpak } 3724ccc8d77SZyta Szpak priv->uc_mc_flushed = 1; 3734ccc8d77SZyta Szpak } 3744ccc8d77SZyta Szpak 375ce7ea764SZyta Szpak ret = mvneta_alloc_rx_bufs(dev); 376ce7ea764SZyta Szpak if (ret) 377ce7ea764SZyta Szpak goto out; 378ce7ea764SZyta Szpak 379112ef725SZyta Szpak ret = mvneta_mtu_set(dev, dev->data->mtu); 380112ef725SZyta Szpak if (ret) { 381112ef725SZyta Szpak MVNETA_LOG(ERR, "Failed to set MTU %d", dev->data->mtu); 382112ef725SZyta Szpak goto out; 383112ef725SZyta Szpak } 384112ef725SZyta Szpak 3854ccc8d77SZyta Szpak ret = mvneta_dev_set_link_up(dev); 3864ccc8d77SZyta Szpak if (ret) { 3874ccc8d77SZyta Szpak MVNETA_LOG(ERR, "Failed to set link up"); 3884ccc8d77SZyta Szpak goto out; 3894ccc8d77SZyta Szpak } 3904ccc8d77SZyta Szpak 3914ccc8d77SZyta Szpak /* start tx queues */ 3924ccc8d77SZyta Szpak for (i = 0; i < dev->data->nb_tx_queues; i++) 3934ccc8d77SZyta Szpak dev->data->tx_queue_state[i] = RTE_ETH_QUEUE_STATE_STARTED; 3944ccc8d77SZyta Szpak 395ce7ea764SZyta Szpak mvneta_set_tx_function(dev); 396ce7ea764SZyta Szpak 3974ccc8d77SZyta Szpak return 0; 3984ccc8d77SZyta Szpak 3994ccc8d77SZyta Szpak out: 4004ccc8d77SZyta Szpak MVNETA_LOG(ERR, "Failed to start device"); 4014ccc8d77SZyta Szpak neta_ppio_deinit(priv->ppio); 4024ccc8d77SZyta Szpak return ret; 4034ccc8d77SZyta Szpak } 4044ccc8d77SZyta Szpak 4054ccc8d77SZyta Szpak /** 4064ccc8d77SZyta Szpak * DPDK callback to stop the device. 4074ccc8d77SZyta Szpak * 4084ccc8d77SZyta Szpak * @param dev 4094ccc8d77SZyta Szpak * Pointer to Ethernet device structure. 4104ccc8d77SZyta Szpak */ 4114ccc8d77SZyta Szpak static void 4124ccc8d77SZyta Szpak mvneta_dev_stop(struct rte_eth_dev *dev) 4134ccc8d77SZyta Szpak { 4144ccc8d77SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 4154ccc8d77SZyta Szpak 416*b8f5d2aeSThomas Monjalon dev->data->dev_started = 0; 417*b8f5d2aeSThomas Monjalon 4184ccc8d77SZyta Szpak if (!priv->ppio) 4194ccc8d77SZyta Szpak return; 4204ccc8d77SZyta Szpak 4214ccc8d77SZyta Szpak mvneta_dev_set_link_down(dev); 422ce7ea764SZyta Szpak mvneta_flush_queues(dev); 4234ccc8d77SZyta Szpak neta_ppio_deinit(priv->ppio); 4244ccc8d77SZyta Szpak 4254ccc8d77SZyta Szpak priv->ppio = NULL; 4264ccc8d77SZyta Szpak } 4274ccc8d77SZyta Szpak 4284ccc8d77SZyta Szpak /** 4294ccc8d77SZyta Szpak * DPDK callback to close the device. 4304ccc8d77SZyta Szpak * 4314ccc8d77SZyta Szpak * @param dev 4324ccc8d77SZyta Szpak * Pointer to Ethernet device structure. 4334ccc8d77SZyta Szpak */ 434b142387bSThomas Monjalon static int 4354ccc8d77SZyta Szpak mvneta_dev_close(struct rte_eth_dev *dev) 4364ccc8d77SZyta Szpak { 4374ccc8d77SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 438ce7ea764SZyta Szpak int i; 4394ccc8d77SZyta Szpak 44030410493SThomas Monjalon if (rte_eal_process_type() != RTE_PROC_PRIMARY) 44130410493SThomas Monjalon return 0; 44230410493SThomas Monjalon 4434ccc8d77SZyta Szpak if (priv->ppio) 4444ccc8d77SZyta Szpak mvneta_dev_stop(dev); 445ce7ea764SZyta Szpak 446ce7ea764SZyta Szpak for (i = 0; i < dev->data->nb_rx_queues; i++) { 447ce7ea764SZyta Szpak mvneta_rx_queue_release(dev->data->rx_queues[i]); 448ce7ea764SZyta Szpak dev->data->rx_queues[i] = NULL; 449ce7ea764SZyta Szpak } 450ce7ea764SZyta Szpak 451ce7ea764SZyta Szpak for (i = 0; i < dev->data->nb_tx_queues; i++) { 452ce7ea764SZyta Szpak mvneta_tx_queue_release(dev->data->tx_queues[i]); 453ce7ea764SZyta Szpak dev->data->tx_queues[i] = NULL; 454ce7ea764SZyta Szpak } 4554b6d2743SYuri Chipchev 4564b6d2743SYuri Chipchev mvneta_dev_num--; 4574b6d2743SYuri Chipchev 4584b6d2743SYuri Chipchev if (mvneta_dev_num == 0) { 4594b6d2743SYuri Chipchev MVNETA_LOG(INFO, "Perform MUSDK deinit"); 4604b6d2743SYuri Chipchev mvneta_neta_deinit(); 4614b6d2743SYuri Chipchev rte_mvep_deinit(MVEP_MOD_T_NETA); 4624b6d2743SYuri Chipchev } 463b142387bSThomas Monjalon 464b142387bSThomas Monjalon return 0; 4654ccc8d77SZyta Szpak } 4664ccc8d77SZyta Szpak 4674ccc8d77SZyta Szpak /** 46888d3cb3cSZyta Szpak * DPDK callback to retrieve physical link information. 46988d3cb3cSZyta Szpak * 47088d3cb3cSZyta Szpak * @param dev 47188d3cb3cSZyta Szpak * Pointer to Ethernet device structure. 47288d3cb3cSZyta Szpak * @param wait_to_complete 47388d3cb3cSZyta Szpak * Wait for request completion (ignored). 47488d3cb3cSZyta Szpak * 47588d3cb3cSZyta Szpak * @return 47688d3cb3cSZyta Szpak * 0 on success, negative error value otherwise. 47788d3cb3cSZyta Szpak */ 47888d3cb3cSZyta Szpak static int 47988d3cb3cSZyta Szpak mvneta_link_update(struct rte_eth_dev *dev, int wait_to_complete __rte_unused) 48088d3cb3cSZyta Szpak { 48188d3cb3cSZyta Szpak /* 48288d3cb3cSZyta Szpak * TODO 48388d3cb3cSZyta Szpak * once MUSDK provides necessary API use it here 48488d3cb3cSZyta Szpak */ 48588d3cb3cSZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 48688d3cb3cSZyta Szpak struct ethtool_cmd edata; 48788d3cb3cSZyta Szpak struct ifreq req; 48888d3cb3cSZyta Szpak int ret, fd, link_up; 48988d3cb3cSZyta Szpak 49088d3cb3cSZyta Szpak if (!priv->ppio) 49188d3cb3cSZyta Szpak return -EPERM; 49288d3cb3cSZyta Szpak 49388d3cb3cSZyta Szpak edata.cmd = ETHTOOL_GSET; 49488d3cb3cSZyta Szpak 49588d3cb3cSZyta Szpak strcpy(req.ifr_name, dev->data->name); 49688d3cb3cSZyta Szpak req.ifr_data = (void *)&edata; 49788d3cb3cSZyta Szpak 49888d3cb3cSZyta Szpak fd = socket(AF_INET, SOCK_DGRAM, 0); 49988d3cb3cSZyta Szpak if (fd == -1) 50088d3cb3cSZyta Szpak return -EFAULT; 50188d3cb3cSZyta Szpak ret = ioctl(fd, SIOCETHTOOL, &req); 50288d3cb3cSZyta Szpak if (ret == -1) { 50388d3cb3cSZyta Szpak close(fd); 50488d3cb3cSZyta Szpak return -EFAULT; 50588d3cb3cSZyta Szpak } 50688d3cb3cSZyta Szpak 50788d3cb3cSZyta Szpak close(fd); 50888d3cb3cSZyta Szpak 50988d3cb3cSZyta Szpak switch (ethtool_cmd_speed(&edata)) { 51088d3cb3cSZyta Szpak case SPEED_10: 51188d3cb3cSZyta Szpak dev->data->dev_link.link_speed = ETH_SPEED_NUM_10M; 51288d3cb3cSZyta Szpak break; 51388d3cb3cSZyta Szpak case SPEED_100: 51488d3cb3cSZyta Szpak dev->data->dev_link.link_speed = ETH_SPEED_NUM_100M; 51588d3cb3cSZyta Szpak break; 51688d3cb3cSZyta Szpak case SPEED_1000: 51788d3cb3cSZyta Szpak dev->data->dev_link.link_speed = ETH_SPEED_NUM_1G; 51888d3cb3cSZyta Szpak break; 51988d3cb3cSZyta Szpak case SPEED_2500: 52088d3cb3cSZyta Szpak dev->data->dev_link.link_speed = ETH_SPEED_NUM_2_5G; 52188d3cb3cSZyta Szpak break; 52288d3cb3cSZyta Szpak default: 52388d3cb3cSZyta Szpak dev->data->dev_link.link_speed = ETH_SPEED_NUM_NONE; 52488d3cb3cSZyta Szpak } 52588d3cb3cSZyta Szpak 52688d3cb3cSZyta Szpak dev->data->dev_link.link_duplex = edata.duplex ? ETH_LINK_FULL_DUPLEX : 52788d3cb3cSZyta Szpak ETH_LINK_HALF_DUPLEX; 52888d3cb3cSZyta Szpak dev->data->dev_link.link_autoneg = edata.autoneg ? ETH_LINK_AUTONEG : 52988d3cb3cSZyta Szpak ETH_LINK_FIXED; 53088d3cb3cSZyta Szpak 53188d3cb3cSZyta Szpak neta_ppio_get_link_state(priv->ppio, &link_up); 53288d3cb3cSZyta Szpak dev->data->dev_link.link_status = link_up ? ETH_LINK_UP : ETH_LINK_DOWN; 53388d3cb3cSZyta Szpak 53488d3cb3cSZyta Szpak return 0; 53588d3cb3cSZyta Szpak } 53688d3cb3cSZyta Szpak 53788d3cb3cSZyta Szpak /** 538cf9ccda9SZyta Szpak * DPDK callback to enable promiscuous mode. 539cf9ccda9SZyta Szpak * 540cf9ccda9SZyta Szpak * @param dev 541cf9ccda9SZyta Szpak * Pointer to Ethernet device structure. 5429039c812SAndrew Rybchenko * 5439039c812SAndrew Rybchenko * @return 5449039c812SAndrew Rybchenko * always 0 545cf9ccda9SZyta Szpak */ 5469039c812SAndrew Rybchenko static int 547cf9ccda9SZyta Szpak mvneta_promiscuous_enable(struct rte_eth_dev *dev) 548cf9ccda9SZyta Szpak { 549cf9ccda9SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 550cf9ccda9SZyta Szpak int ret, en; 551cf9ccda9SZyta Szpak 552cf9ccda9SZyta Szpak if (!priv->ppio) 5539039c812SAndrew Rybchenko return 0; 554cf9ccda9SZyta Szpak 555cf9ccda9SZyta Szpak neta_ppio_get_promisc(priv->ppio, &en); 556cf9ccda9SZyta Szpak if (en) { 557cf9ccda9SZyta Szpak MVNETA_LOG(INFO, "Promiscuous already enabled"); 5589039c812SAndrew Rybchenko return 0; 559cf9ccda9SZyta Szpak } 560cf9ccda9SZyta Szpak 561cf9ccda9SZyta Szpak ret = neta_ppio_set_promisc(priv->ppio, 1); 562cf9ccda9SZyta Szpak if (ret) 563cf9ccda9SZyta Szpak MVNETA_LOG(ERR, "Failed to enable promiscuous mode"); 5649039c812SAndrew Rybchenko 5659039c812SAndrew Rybchenko return 0; 566cf9ccda9SZyta Szpak } 567cf9ccda9SZyta Szpak 568cf9ccda9SZyta Szpak /** 569cf9ccda9SZyta Szpak * DPDK callback to disable allmulticast mode. 570cf9ccda9SZyta Szpak * 571cf9ccda9SZyta Szpak * @param dev 572cf9ccda9SZyta Szpak * Pointer to Ethernet device structure. 5739039c812SAndrew Rybchenko * 5749039c812SAndrew Rybchenko * @return 5759039c812SAndrew Rybchenko * always 0 576cf9ccda9SZyta Szpak */ 5779039c812SAndrew Rybchenko static int 578cf9ccda9SZyta Szpak mvneta_promiscuous_disable(struct rte_eth_dev *dev) 579cf9ccda9SZyta Szpak { 580cf9ccda9SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 581cf9ccda9SZyta Szpak int ret, en; 582cf9ccda9SZyta Szpak 583cf9ccda9SZyta Szpak if (!priv->ppio) 5849039c812SAndrew Rybchenko return 0; 585cf9ccda9SZyta Szpak 586cf9ccda9SZyta Szpak neta_ppio_get_promisc(priv->ppio, &en); 587cf9ccda9SZyta Szpak if (!en) { 588cf9ccda9SZyta Szpak MVNETA_LOG(INFO, "Promiscuous already disabled"); 5899039c812SAndrew Rybchenko return 0; 590cf9ccda9SZyta Szpak } 591cf9ccda9SZyta Szpak 592cf9ccda9SZyta Szpak ret = neta_ppio_set_promisc(priv->ppio, 0); 593cf9ccda9SZyta Szpak if (ret) 594cf9ccda9SZyta Szpak MVNETA_LOG(ERR, "Failed to disable promiscuous mode"); 5959039c812SAndrew Rybchenko 5969039c812SAndrew Rybchenko return 0; 597cf9ccda9SZyta Szpak } 598cf9ccda9SZyta Szpak 599cf9ccda9SZyta Szpak /** 600f3118fb0SZyta Szpak * DPDK callback to remove a MAC address. 601f3118fb0SZyta Szpak * 602f3118fb0SZyta Szpak * @param dev 603f3118fb0SZyta Szpak * Pointer to Ethernet device structure. 604f3118fb0SZyta Szpak * @param index 605f3118fb0SZyta Szpak * MAC address index. 606f3118fb0SZyta Szpak */ 607f3118fb0SZyta Szpak static void 608f3118fb0SZyta Szpak mvneta_mac_addr_remove(struct rte_eth_dev *dev, uint32_t index) 609f3118fb0SZyta Szpak { 610f3118fb0SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 61135b2d13fSOlivier Matz char buf[RTE_ETHER_ADDR_FMT_SIZE]; 612f3118fb0SZyta Szpak int ret; 613f3118fb0SZyta Szpak 614f3118fb0SZyta Szpak if (!priv->ppio) 615f3118fb0SZyta Szpak return; 616f3118fb0SZyta Szpak 617f3118fb0SZyta Szpak ret = neta_ppio_remove_mac_addr(priv->ppio, 618f3118fb0SZyta Szpak dev->data->mac_addrs[index].addr_bytes); 619f3118fb0SZyta Szpak if (ret) { 620538da7a1SOlivier Matz rte_ether_format_addr(buf, sizeof(buf), 621f3118fb0SZyta Szpak &dev->data->mac_addrs[index]); 622f3118fb0SZyta Szpak MVNETA_LOG(ERR, "Failed to remove mac %s", buf); 623f3118fb0SZyta Szpak } 624f3118fb0SZyta Szpak } 625f3118fb0SZyta Szpak 626f3118fb0SZyta Szpak /** 627f3118fb0SZyta Szpak * DPDK callback to add a MAC address. 628f3118fb0SZyta Szpak * 629f3118fb0SZyta Szpak * @param dev 630f3118fb0SZyta Szpak * Pointer to Ethernet device structure. 631f3118fb0SZyta Szpak * @param mac_addr 632f3118fb0SZyta Szpak * MAC address to register. 633f3118fb0SZyta Szpak * @param index 634f3118fb0SZyta Szpak * MAC address index. 635f3118fb0SZyta Szpak * @param vmdq 636f3118fb0SZyta Szpak * VMDq pool index to associate address with (unused). 637f3118fb0SZyta Szpak * 638f3118fb0SZyta Szpak * @return 639f3118fb0SZyta Szpak * 0 on success, negative error value otherwise. 640f3118fb0SZyta Szpak */ 641f3118fb0SZyta Szpak static int 6426d13ea8eSOlivier Matz mvneta_mac_addr_add(struct rte_eth_dev *dev, struct rte_ether_addr *mac_addr, 643f3118fb0SZyta Szpak uint32_t index, uint32_t vmdq __rte_unused) 644f3118fb0SZyta Szpak { 645f3118fb0SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 64635b2d13fSOlivier Matz char buf[RTE_ETHER_ADDR_FMT_SIZE]; 647f3118fb0SZyta Szpak int ret; 648f3118fb0SZyta Szpak 649f3118fb0SZyta Szpak if (index == 0) 650f3118fb0SZyta Szpak /* For setting index 0, mrvl_mac_addr_set() should be used.*/ 651f3118fb0SZyta Szpak return -1; 652f3118fb0SZyta Szpak 653f3118fb0SZyta Szpak if (!priv->ppio) 654f3118fb0SZyta Szpak return 0; 655f3118fb0SZyta Szpak 656f3118fb0SZyta Szpak ret = neta_ppio_add_mac_addr(priv->ppio, mac_addr->addr_bytes); 657f3118fb0SZyta Szpak if (ret) { 658538da7a1SOlivier Matz rte_ether_format_addr(buf, sizeof(buf), mac_addr); 659f3118fb0SZyta Szpak MVNETA_LOG(ERR, "Failed to add mac %s", buf); 660f3118fb0SZyta Szpak return -1; 661f3118fb0SZyta Szpak } 662f3118fb0SZyta Szpak 663f3118fb0SZyta Szpak return 0; 664f3118fb0SZyta Szpak } 665f3118fb0SZyta Szpak 666f3118fb0SZyta Szpak /** 6674ccc8d77SZyta Szpak * DPDK callback to set the primary MAC address. 6684ccc8d77SZyta Szpak * 6694ccc8d77SZyta Szpak * @param dev 6704ccc8d77SZyta Szpak * Pointer to Ethernet device structure. 6714ccc8d77SZyta Szpak * @param mac_addr 6724ccc8d77SZyta Szpak * MAC address to register. 6734ccc8d77SZyta Szpak */ 6744ccc8d77SZyta Szpak static int 6756d13ea8eSOlivier Matz mvneta_mac_addr_set(struct rte_eth_dev *dev, struct rte_ether_addr *mac_addr) 6764ccc8d77SZyta Szpak { 6774ccc8d77SZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 6784ccc8d77SZyta Szpak int ret; 6794ccc8d77SZyta Szpak 6804ccc8d77SZyta Szpak if (!priv->ppio) 6814ccc8d77SZyta Szpak return -EINVAL; 6824ccc8d77SZyta Szpak 6834ccc8d77SZyta Szpak ret = neta_ppio_set_mac_addr(priv->ppio, mac_addr->addr_bytes); 6844ccc8d77SZyta Szpak if (ret) { 68535b2d13fSOlivier Matz char buf[RTE_ETHER_ADDR_FMT_SIZE]; 686538da7a1SOlivier Matz rte_ether_format_addr(buf, sizeof(buf), mac_addr); 6874ccc8d77SZyta Szpak MVNETA_LOG(ERR, "Failed to set mac to %s", buf); 6884ccc8d77SZyta Szpak } 6894ccc8d77SZyta Szpak return 0; 6904ccc8d77SZyta Szpak } 6914ccc8d77SZyta Szpak 692e9d5faffSZyta Szpak /** 693e9d5faffSZyta Szpak * DPDK callback to get device statistics. 694e9d5faffSZyta Szpak * 695e9d5faffSZyta Szpak * @param dev 696e9d5faffSZyta Szpak * Pointer to Ethernet device structure. 697e9d5faffSZyta Szpak * @param stats 698e9d5faffSZyta Szpak * Stats structure output buffer. 699e9d5faffSZyta Szpak * 700e9d5faffSZyta Szpak * @return 701e9d5faffSZyta Szpak * 0 on success, negative error value otherwise. 702e9d5faffSZyta Szpak */ 703e9d5faffSZyta Szpak static int 704e9d5faffSZyta Szpak mvneta_stats_get(struct rte_eth_dev *dev, struct rte_eth_stats *stats) 705e9d5faffSZyta Szpak { 706e9d5faffSZyta Szpak struct mvneta_priv *priv = dev->data->dev_private; 707e9d5faffSZyta Szpak struct neta_ppio_statistics ppio_stats; 708e9d5faffSZyta Szpak unsigned int ret; 709e9d5faffSZyta Szpak 710e9d5faffSZyta Szpak if (!priv->ppio) 711e9d5faffSZyta Szpak return -EPERM; 712e9d5faffSZyta Szpak 713e9d5faffSZyta Szpak ret = neta_ppio_get_statistics(priv->ppio, &ppio_stats); 714e9d5faffSZyta Szpak if (unlikely(ret)) { 715e9d5faffSZyta Szpak MVNETA_LOG(ERR, "Failed to update port statistics"); 716e9d5faffSZyta Szpak return ret; 717e9d5faffSZyta Szpak } 718e9d5faffSZyta Szpak 719e9d5faffSZyta Szpak stats->ipackets += ppio_stats.rx_packets + 720e9d5faffSZyta Szpak ppio_stats.rx_broadcast_packets + 7213378383dSNatalie Samsonov ppio_stats.rx_multicast_packets - 7223378383dSNatalie Samsonov priv->prev_stats.ipackets; 723e9d5faffSZyta Szpak stats->opackets += ppio_stats.tx_packets + 724e9d5faffSZyta Szpak ppio_stats.tx_broadcast_packets + 7253378383dSNatalie Samsonov ppio_stats.tx_multicast_packets - 7263378383dSNatalie Samsonov priv->prev_stats.opackets; 7273378383dSNatalie Samsonov stats->ibytes += ppio_stats.rx_bytes - priv->prev_stats.ibytes; 7283378383dSNatalie Samsonov stats->obytes += ppio_stats.tx_bytes - priv->prev_stats.obytes; 729e9d5faffSZyta Szpak stats->imissed += ppio_stats.rx_discard + 7303378383dSNatalie Samsonov ppio_stats.rx_overrun - 7313378383dSNatalie Samsonov priv->prev_stats.imissed; 73209a6afe7SLiron Himi stats->ierrors = ppio_stats.rx_packets_err - 7333378383dSNatalie Samsonov priv->prev_stats.ierrors; 7343378383dSNatalie Samsonov stats->oerrors = ppio_stats.tx_errors - priv->prev_stats.oerrors; 735e9d5faffSZyta Szpak 736e9d5faffSZyta Szpak return 0; 737e9d5faffSZyta Szpak } 738e9d5faffSZyta Szpak 7393378383dSNatalie Samsonov /** 7403378383dSNatalie Samsonov * DPDK callback to clear device statistics. 7413378383dSNatalie Samsonov * 7423378383dSNatalie Samsonov * @param dev 7433378383dSNatalie Samsonov * Pointer to Ethernet device structure. 7449970a9adSIgor Romanov * 7459970a9adSIgor Romanov * @return 7469970a9adSIgor Romanov * 0 on success, negative error value otherwise. 7473378383dSNatalie Samsonov */ 7489970a9adSIgor Romanov static int 7493378383dSNatalie Samsonov mvneta_stats_reset(struct rte_eth_dev *dev) 7503378383dSNatalie Samsonov { 7513378383dSNatalie Samsonov struct mvneta_priv *priv = dev->data->dev_private; 7523378383dSNatalie Samsonov unsigned int ret; 7533378383dSNatalie Samsonov 7543378383dSNatalie Samsonov if (!priv->ppio) 7559970a9adSIgor Romanov return 0; 7563378383dSNatalie Samsonov 7573378383dSNatalie Samsonov ret = mvneta_stats_get(dev, &priv->prev_stats); 7583378383dSNatalie Samsonov if (unlikely(ret)) 759cb0205ceSStephen Hemminger MVNETA_LOG(ERR, "Failed to reset port statistics"); 7609970a9adSIgor Romanov 7619970a9adSIgor Romanov return ret; 7623378383dSNatalie Samsonov } 7633378383dSNatalie Samsonov 7643378383dSNatalie Samsonov 7654ccc8d77SZyta Szpak static const struct eth_dev_ops mvneta_ops = { 7664ccc8d77SZyta Szpak .dev_configure = mvneta_dev_configure, 7674ccc8d77SZyta Szpak .dev_start = mvneta_dev_start, 7684ccc8d77SZyta Szpak .dev_stop = mvneta_dev_stop, 7694ccc8d77SZyta Szpak .dev_set_link_up = mvneta_dev_set_link_up, 7704ccc8d77SZyta Szpak .dev_set_link_down = mvneta_dev_set_link_down, 7714ccc8d77SZyta Szpak .dev_close = mvneta_dev_close, 77288d3cb3cSZyta Szpak .link_update = mvneta_link_update, 773cf9ccda9SZyta Szpak .promiscuous_enable = mvneta_promiscuous_enable, 774cf9ccda9SZyta Szpak .promiscuous_disable = mvneta_promiscuous_disable, 775f3118fb0SZyta Szpak .mac_addr_remove = mvneta_mac_addr_remove, 776f3118fb0SZyta Szpak .mac_addr_add = mvneta_mac_addr_add, 7774ccc8d77SZyta Szpak .mac_addr_set = mvneta_mac_addr_set, 778112ef725SZyta Szpak .mtu_set = mvneta_mtu_set, 779e9d5faffSZyta Szpak .stats_get = mvneta_stats_get, 7803378383dSNatalie Samsonov .stats_reset = mvneta_stats_reset, 7814ccc8d77SZyta Szpak .dev_infos_get = mvneta_dev_infos_get, 7824ccc8d77SZyta Szpak .dev_supported_ptypes_get = mvneta_dev_supported_ptypes_get, 783ce7ea764SZyta Szpak .rxq_info_get = mvneta_rxq_info_get, 784ce7ea764SZyta Szpak .txq_info_get = mvneta_txq_info_get, 785ce7ea764SZyta Szpak .rx_queue_setup = mvneta_rx_queue_setup, 786ce7ea764SZyta Szpak .rx_queue_release = mvneta_rx_queue_release, 787ce7ea764SZyta Szpak .tx_queue_setup = mvneta_tx_queue_setup, 788ce7ea764SZyta Szpak .tx_queue_release = mvneta_tx_queue_release, 7894ccc8d77SZyta Szpak }; 7904ccc8d77SZyta Szpak 7914ccc8d77SZyta Szpak /** 7924ccc8d77SZyta Szpak * Create device representing Ethernet port. 7934ccc8d77SZyta Szpak * 7944ccc8d77SZyta Szpak * @param name 7954ccc8d77SZyta Szpak * Pointer to the port's name. 7964ccc8d77SZyta Szpak * 7974ccc8d77SZyta Szpak * @return 7984ccc8d77SZyta Szpak * 0 on success, negative error value otherwise. 7994ccc8d77SZyta Szpak */ 8004ccc8d77SZyta Szpak static int 8014ccc8d77SZyta Szpak mvneta_eth_dev_create(struct rte_vdev_device *vdev, const char *name) 8024ccc8d77SZyta Szpak { 8034ccc8d77SZyta Szpak int ret, fd = socket(AF_INET, SOCK_DGRAM, 0); 8044ccc8d77SZyta Szpak struct rte_eth_dev *eth_dev; 8054ccc8d77SZyta Szpak struct mvneta_priv *priv; 8064ccc8d77SZyta Szpak struct ifreq req; 8074ccc8d77SZyta Szpak 8084ccc8d77SZyta Szpak eth_dev = rte_eth_dev_allocate(name); 8094ccc8d77SZyta Szpak if (!eth_dev) 8104ccc8d77SZyta Szpak return -ENOMEM; 8114ccc8d77SZyta Szpak 8124ccc8d77SZyta Szpak priv = rte_zmalloc_socket(name, sizeof(*priv), 0, rte_socket_id()); 8134ccc8d77SZyta Szpak if (!priv) { 8144ccc8d77SZyta Szpak ret = -ENOMEM; 815e16adf08SThomas Monjalon goto out_free; 8164ccc8d77SZyta Szpak } 817e16adf08SThomas Monjalon eth_dev->data->dev_private = priv; 8184ccc8d77SZyta Szpak 8194ccc8d77SZyta Szpak eth_dev->data->mac_addrs = 8204ccc8d77SZyta Szpak rte_zmalloc("mac_addrs", 82135b2d13fSOlivier Matz RTE_ETHER_ADDR_LEN * MVNETA_MAC_ADDRS_MAX, 0); 8224ccc8d77SZyta Szpak if (!eth_dev->data->mac_addrs) { 8234ccc8d77SZyta Szpak MVNETA_LOG(ERR, "Failed to allocate space for eth addrs"); 8244ccc8d77SZyta Szpak ret = -ENOMEM; 825e16adf08SThomas Monjalon goto out_free; 8264ccc8d77SZyta Szpak } 8274ccc8d77SZyta Szpak 8284ccc8d77SZyta Szpak memset(&req, 0, sizeof(req)); 8294ccc8d77SZyta Szpak strcpy(req.ifr_name, name); 8304ccc8d77SZyta Szpak ret = ioctl(fd, SIOCGIFHWADDR, &req); 8314ccc8d77SZyta Szpak if (ret) 832e16adf08SThomas Monjalon goto out_free; 8334ccc8d77SZyta Szpak 8344ccc8d77SZyta Szpak memcpy(eth_dev->data->mac_addrs[0].addr_bytes, 83535b2d13fSOlivier Matz req.ifr_addr.sa_data, RTE_ETHER_ADDR_LEN); 8364ccc8d77SZyta Szpak 8374ccc8d77SZyta Szpak eth_dev->device = &vdev->device; 838ce7ea764SZyta Szpak eth_dev->rx_pkt_burst = mvneta_rx_pkt_burst; 839ce7ea764SZyta Szpak mvneta_set_tx_function(eth_dev); 8404ccc8d77SZyta Szpak eth_dev->dev_ops = &mvneta_ops; 8414ccc8d77SZyta Szpak 8424ccc8d77SZyta Szpak rte_eth_dev_probing_finish(eth_dev); 8434ccc8d77SZyta Szpak return 0; 844e16adf08SThomas Monjalon out_free: 8454ccc8d77SZyta Szpak rte_eth_dev_release_port(eth_dev); 8464ccc8d77SZyta Szpak 8474ccc8d77SZyta Szpak return ret; 8484ccc8d77SZyta Szpak } 8494ccc8d77SZyta Szpak 8504ccc8d77SZyta Szpak /** 8514ccc8d77SZyta Szpak * Cleanup previously created device representing Ethernet port. 8524ccc8d77SZyta Szpak * 8534ccc8d77SZyta Szpak * @param eth_dev 8544ccc8d77SZyta Szpak * Pointer to the corresponding rte_eth_dev structure. 8554ccc8d77SZyta Szpak */ 8564ccc8d77SZyta Szpak static void 8574ccc8d77SZyta Szpak mvneta_eth_dev_destroy(struct rte_eth_dev *eth_dev) 8584ccc8d77SZyta Szpak { 8594ccc8d77SZyta Szpak rte_eth_dev_release_port(eth_dev); 8604ccc8d77SZyta Szpak } 8614ccc8d77SZyta Szpak 8624ccc8d77SZyta Szpak /** 8634ccc8d77SZyta Szpak * Cleanup previously created device representing Ethernet port. 8644ccc8d77SZyta Szpak * 8654ccc8d77SZyta Szpak * @param name 8664ccc8d77SZyta Szpak * Pointer to the port name. 8674ccc8d77SZyta Szpak */ 8684ccc8d77SZyta Szpak static void 8694ccc8d77SZyta Szpak mvneta_eth_dev_destroy_name(const char *name) 8704ccc8d77SZyta Szpak { 8714ccc8d77SZyta Szpak struct rte_eth_dev *eth_dev; 8724ccc8d77SZyta Szpak 8734ccc8d77SZyta Szpak eth_dev = rte_eth_dev_allocated(name); 8744ccc8d77SZyta Szpak if (!eth_dev) 8754ccc8d77SZyta Szpak return; 8764ccc8d77SZyta Szpak 8774ccc8d77SZyta Szpak mvneta_eth_dev_destroy(eth_dev); 8784ccc8d77SZyta Szpak } 8794ccc8d77SZyta Szpak 8804ccc8d77SZyta Szpak /** 8814ccc8d77SZyta Szpak * DPDK callback to register the virtual device. 8824ccc8d77SZyta Szpak * 8834ccc8d77SZyta Szpak * @param vdev 8844ccc8d77SZyta Szpak * Pointer to the virtual device. 8854ccc8d77SZyta Szpak * 8864ccc8d77SZyta Szpak * @return 8874ccc8d77SZyta Szpak * 0 on success, negative error value otherwise. 8884ccc8d77SZyta Szpak */ 8894ccc8d77SZyta Szpak static int 8904ccc8d77SZyta Szpak rte_pmd_mvneta_probe(struct rte_vdev_device *vdev) 8914ccc8d77SZyta Szpak { 8924ccc8d77SZyta Szpak struct rte_kvargs *kvlist; 8934ccc8d77SZyta Szpak struct mvneta_ifnames ifnames; 8944ccc8d77SZyta Szpak int ret = -EINVAL; 8954ccc8d77SZyta Szpak uint32_t i, ifnum; 8964ccc8d77SZyta Szpak const char *params; 8974ccc8d77SZyta Szpak 8984ccc8d77SZyta Szpak params = rte_vdev_device_args(vdev); 8994ccc8d77SZyta Szpak if (!params) 9004ccc8d77SZyta Szpak return -EINVAL; 9014ccc8d77SZyta Szpak 9024ccc8d77SZyta Szpak kvlist = rte_kvargs_parse(params, valid_args); 9034ccc8d77SZyta Szpak if (!kvlist) 9044ccc8d77SZyta Szpak return -EINVAL; 9054ccc8d77SZyta Szpak 9064ccc8d77SZyta Szpak ifnum = rte_kvargs_count(kvlist, MVNETA_IFACE_NAME_ARG); 9074ccc8d77SZyta Szpak if (ifnum > RTE_DIM(ifnames.names)) 9084ccc8d77SZyta Szpak goto out_free_kvlist; 9094ccc8d77SZyta Szpak 9104ccc8d77SZyta Szpak ifnames.idx = 0; 9114ccc8d77SZyta Szpak rte_kvargs_process(kvlist, MVNETA_IFACE_NAME_ARG, 9124ccc8d77SZyta Szpak mvneta_ifnames_get, &ifnames); 9134ccc8d77SZyta Szpak 9144ccc8d77SZyta Szpak /* 9154ccc8d77SZyta Szpak * The below system initialization should be done only once, 9164ccc8d77SZyta Szpak * on the first provided configuration file 9174ccc8d77SZyta Szpak */ 9184ccc8d77SZyta Szpak if (mvneta_dev_num) 9194ccc8d77SZyta Szpak goto init_devices; 9204ccc8d77SZyta Szpak 9214ccc8d77SZyta Szpak MVNETA_LOG(INFO, "Perform MUSDK initializations"); 9224ccc8d77SZyta Szpak 9234ccc8d77SZyta Szpak ret = rte_mvep_init(MVEP_MOD_T_NETA, kvlist); 9244ccc8d77SZyta Szpak if (ret) 9254ccc8d77SZyta Szpak goto out_free_kvlist; 9264ccc8d77SZyta Szpak 9274ccc8d77SZyta Szpak ret = mvneta_neta_init(); 9284ccc8d77SZyta Szpak if (ret) { 9294ccc8d77SZyta Szpak MVNETA_LOG(ERR, "Failed to init NETA!"); 9304ccc8d77SZyta Szpak rte_mvep_deinit(MVEP_MOD_T_NETA); 9314ccc8d77SZyta Szpak goto out_free_kvlist; 9324ccc8d77SZyta Szpak } 9334ccc8d77SZyta Szpak 9344ccc8d77SZyta Szpak init_devices: 9354ccc8d77SZyta Szpak for (i = 0; i < ifnum; i++) { 9364ccc8d77SZyta Szpak MVNETA_LOG(INFO, "Creating %s", ifnames.names[i]); 9374ccc8d77SZyta Szpak ret = mvneta_eth_dev_create(vdev, ifnames.names[i]); 9384ccc8d77SZyta Szpak if (ret) 9394ccc8d77SZyta Szpak goto out_cleanup; 9404b6d2743SYuri Chipchev 9414b6d2743SYuri Chipchev mvneta_dev_num++; 9424ccc8d77SZyta Szpak } 9434ccc8d77SZyta Szpak 9444ccc8d77SZyta Szpak rte_kvargs_free(kvlist); 9454ccc8d77SZyta Szpak 9464ccc8d77SZyta Szpak return 0; 9474ccc8d77SZyta Szpak out_cleanup: 9484b6d2743SYuri Chipchev rte_pmd_mvneta_remove(vdev); 9494ccc8d77SZyta Szpak 9504ccc8d77SZyta Szpak out_free_kvlist: 9514ccc8d77SZyta Szpak rte_kvargs_free(kvlist); 9524ccc8d77SZyta Szpak 9534ccc8d77SZyta Szpak return ret; 9544ccc8d77SZyta Szpak } 9554ccc8d77SZyta Szpak 9564ccc8d77SZyta Szpak /** 9574ccc8d77SZyta Szpak * DPDK callback to remove virtual device. 9584ccc8d77SZyta Szpak * 9594ccc8d77SZyta Szpak * @param vdev 9604ccc8d77SZyta Szpak * Pointer to the removed virtual device. 9614ccc8d77SZyta Szpak * 9624ccc8d77SZyta Szpak * @return 9634ccc8d77SZyta Szpak * 0 on success, negative error value otherwise. 9644ccc8d77SZyta Szpak */ 9654ccc8d77SZyta Szpak static int 9664ccc8d77SZyta Szpak rte_pmd_mvneta_remove(struct rte_vdev_device *vdev) 9674ccc8d77SZyta Szpak { 9684b6d2743SYuri Chipchev uint16_t port_id; 9694ccc8d77SZyta Szpak 9704b6d2743SYuri Chipchev RTE_ETH_FOREACH_DEV(port_id) { 9714b6d2743SYuri Chipchev if (rte_eth_devices[port_id].device != &vdev->device) 9724ccc8d77SZyta Szpak continue; 9734b6d2743SYuri Chipchev rte_eth_dev_close(port_id); 9744ccc8d77SZyta Szpak } 9754ccc8d77SZyta Szpak 9764ccc8d77SZyta Szpak return 0; 9774ccc8d77SZyta Szpak } 9784ccc8d77SZyta Szpak 9794ccc8d77SZyta Szpak static struct rte_vdev_driver pmd_mvneta_drv = { 9804ccc8d77SZyta Szpak .probe = rte_pmd_mvneta_probe, 9814ccc8d77SZyta Szpak .remove = rte_pmd_mvneta_remove, 9824ccc8d77SZyta Szpak }; 9834ccc8d77SZyta Szpak 9844ccc8d77SZyta Szpak RTE_PMD_REGISTER_VDEV(net_mvneta, pmd_mvneta_drv); 9854ccc8d77SZyta Szpak RTE_PMD_REGISTER_PARAM_STRING(net_mvneta, "iface=<ifc>"); 9869c99878aSJerin Jacob RTE_LOG_REGISTER(mvneta_logtype, pmd.net.mvneta, NOTICE); 987