xref: /dpdk/drivers/net/mvneta/mvneta_ethdev.c (revision 295968d1)
14ccc8d77SZyta Szpak /* SPDX-License-Identifier: BSD-3-Clause
24ccc8d77SZyta Szpak  * Copyright(c) 2018 Marvell International Ltd.
34ccc8d77SZyta Szpak  * Copyright(c) 2018 Semihalf.
44ccc8d77SZyta Szpak  * All rights reserved.
54ccc8d77SZyta Szpak  */
64ccc8d77SZyta Szpak 
76723c0fcSBruce Richardson #include <rte_string_fns.h>
8df96fd0dSBruce Richardson #include <ethdev_driver.h>
94ccc8d77SZyta Szpak #include <rte_kvargs.h>
104ccc8d77SZyta Szpak #include <rte_bus_vdev.h>
114ccc8d77SZyta Szpak 
124ccc8d77SZyta Szpak #include <stdio.h>
134ccc8d77SZyta Szpak #include <fcntl.h>
144ccc8d77SZyta Szpak #include <linux/ethtool.h>
154ccc8d77SZyta Szpak #include <linux/sockios.h>
164ccc8d77SZyta Szpak #include <net/if.h>
174ccc8d77SZyta Szpak #include <net/if_arp.h>
184ccc8d77SZyta Szpak #include <sys/ioctl.h>
194ccc8d77SZyta Szpak #include <sys/socket.h>
204ccc8d77SZyta Szpak #include <sys/stat.h>
214ccc8d77SZyta Szpak #include <sys/types.h>
224ccc8d77SZyta Szpak 
234ccc8d77SZyta Szpak #include <rte_mvep_common.h>
244ccc8d77SZyta Szpak 
25ce7ea764SZyta Szpak #include "mvneta_rxtx.h"
264ccc8d77SZyta Szpak 
274ccc8d77SZyta Szpak 
284ccc8d77SZyta Szpak #define MVNETA_IFACE_NAME_ARG "iface"
294ccc8d77SZyta Szpak 
304ccc8d77SZyta Szpak #define MVNETA_PKT_SIZE_MAX (16382 - MV_MH_SIZE) /* 9700B */
314ccc8d77SZyta Szpak #define MVNETA_DEFAULT_MTU 1500
324ccc8d77SZyta Szpak 
334ccc8d77SZyta Szpak #define MVNETA_MAC_ADDRS_MAX 256 /*16 UC, 256 IP, 256 MC/BC */
344ccc8d77SZyta Szpak /** Maximum length of a match string */
354ccc8d77SZyta Szpak #define MVNETA_MATCH_LEN 16
364ccc8d77SZyta Szpak 
374ccc8d77SZyta Szpak static const char * const valid_args[] = {
384ccc8d77SZyta Szpak 	MVNETA_IFACE_NAME_ARG,
394ccc8d77SZyta Szpak 	NULL
404ccc8d77SZyta Szpak };
414ccc8d77SZyta Szpak 
424ccc8d77SZyta Szpak struct mvneta_ifnames {
434ccc8d77SZyta Szpak 	const char *names[NETA_NUM_ETH_PPIO];
444ccc8d77SZyta Szpak 	int idx;
454ccc8d77SZyta Szpak };
464ccc8d77SZyta Szpak 
474ccc8d77SZyta Szpak static int mvneta_dev_num;
484ccc8d77SZyta Szpak 
499970a9adSIgor Romanov static int mvneta_stats_reset(struct rte_eth_dev *dev);
504b6d2743SYuri Chipchev static int rte_pmd_mvneta_remove(struct rte_vdev_device *vdev);
514b6d2743SYuri Chipchev 
5215ae783aSYuri Chipchev 
534ccc8d77SZyta Szpak /**
544ccc8d77SZyta Szpak  * Deinitialize packet processor.
554ccc8d77SZyta Szpak  */
564ccc8d77SZyta Szpak static void
574ccc8d77SZyta Szpak mvneta_neta_deinit(void)
584ccc8d77SZyta Szpak {
594ccc8d77SZyta Szpak 	neta_deinit();
604ccc8d77SZyta Szpak }
614ccc8d77SZyta Szpak 
624ccc8d77SZyta Szpak /**
634ccc8d77SZyta Szpak  * Initialize packet processor.
644ccc8d77SZyta Szpak  *
654ccc8d77SZyta Szpak  * @return
664ccc8d77SZyta Szpak  *   0 on success, negative error value otherwise.
674ccc8d77SZyta Szpak  */
684ccc8d77SZyta Szpak static int
694ccc8d77SZyta Szpak mvneta_neta_init(void)
704ccc8d77SZyta Szpak {
714ccc8d77SZyta Szpak 	return neta_init();
724ccc8d77SZyta Szpak }
734ccc8d77SZyta Szpak 
744ccc8d77SZyta Szpak /**
754ccc8d77SZyta Szpak  * Callback used by rte_kvargs_process() during argument parsing.
764ccc8d77SZyta Szpak  *
774ccc8d77SZyta Szpak  * @param key
784ccc8d77SZyta Szpak  *   Pointer to the parsed key (unused).
794ccc8d77SZyta Szpak  * @param value
804ccc8d77SZyta Szpak  *   Pointer to the parsed value.
814ccc8d77SZyta Szpak  * @param extra_args
824ccc8d77SZyta Szpak  *   Pointer to the extra arguments which contains address of the
834ccc8d77SZyta Szpak  *   table of pointers to parsed interface names.
844ccc8d77SZyta Szpak  *
854ccc8d77SZyta Szpak  * @return
864ccc8d77SZyta Szpak  *   Always 0.
874ccc8d77SZyta Szpak  */
884ccc8d77SZyta Szpak static int
894ccc8d77SZyta Szpak mvneta_ifnames_get(const char *key __rte_unused, const char *value,
904ccc8d77SZyta Szpak 		 void *extra_args)
914ccc8d77SZyta Szpak {
924ccc8d77SZyta Szpak 	struct mvneta_ifnames *ifnames = extra_args;
934ccc8d77SZyta Szpak 
944ccc8d77SZyta Szpak 	ifnames->names[ifnames->idx++] = value;
954ccc8d77SZyta Szpak 
964ccc8d77SZyta Szpak 	return 0;
974ccc8d77SZyta Szpak }
984ccc8d77SZyta Szpak 
994ccc8d77SZyta Szpak /**
1004ccc8d77SZyta Szpak  * Ethernet device configuration.
1014ccc8d77SZyta Szpak  *
1024ccc8d77SZyta Szpak  * Prepare the driver for a given number of TX and RX queues and
1034ccc8d77SZyta Szpak  * configure RSS if supported.
1044ccc8d77SZyta Szpak  *
1054ccc8d77SZyta Szpak  * @param dev
1064ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure.
1074ccc8d77SZyta Szpak  *
1084ccc8d77SZyta Szpak  * @return
1094ccc8d77SZyta Szpak  *   0 on success, negative error value otherwise.
1104ccc8d77SZyta Szpak  */
1114ccc8d77SZyta Szpak static int
1124ccc8d77SZyta Szpak mvneta_dev_configure(struct rte_eth_dev *dev)
1134ccc8d77SZyta Szpak {
1144ccc8d77SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
1154ccc8d77SZyta Szpak 	struct neta_ppio_params *ppio_params;
1164ccc8d77SZyta Szpak 
117*295968d1SFerruh Yigit 	if (dev->data->dev_conf.rxmode.mq_mode != RTE_ETH_MQ_RX_NONE) {
1184ccc8d77SZyta Szpak 		MVNETA_LOG(INFO, "Unsupported RSS and rx multi queue mode %d",
1194ccc8d77SZyta Szpak 			dev->data->dev_conf.rxmode.mq_mode);
1204ccc8d77SZyta Szpak 		if (dev->data->nb_rx_queues > 1)
1214ccc8d77SZyta Szpak 			return -EINVAL;
1224ccc8d77SZyta Szpak 	}
1234ccc8d77SZyta Szpak 
1244ccc8d77SZyta Szpak 	if (dev->data->dev_conf.rxmode.split_hdr_size) {
1254ccc8d77SZyta Szpak 		MVNETA_LOG(INFO, "Split headers not supported");
1264ccc8d77SZyta Szpak 		return -EINVAL;
1274ccc8d77SZyta Szpak 	}
1284ccc8d77SZyta Szpak 
129*295968d1SFerruh Yigit 	if (dev->data->dev_conf.txmode.offloads & RTE_ETH_TX_OFFLOAD_MULTI_SEGS)
1304ccc8d77SZyta Szpak 		priv->multiseg = 1;
1314ccc8d77SZyta Szpak 
1324ccc8d77SZyta Szpak 	ppio_params = &priv->ppio_params;
1334ccc8d77SZyta Szpak 	ppio_params->outqs_params.num_outqs = dev->data->nb_tx_queues;
1344ccc8d77SZyta Szpak 	/* Default: 1 TC, no QoS supported. */
1354ccc8d77SZyta Szpak 	ppio_params->inqs_params.num_tcs = 1;
1364ccc8d77SZyta Szpak 	ppio_params->inqs_params.tcs_params[0].pkt_offset = MRVL_NETA_PKT_OFFS;
1374ccc8d77SZyta Szpak 	priv->ppio_id = dev->data->port_id;
1384ccc8d77SZyta Szpak 
1394ccc8d77SZyta Szpak 	return 0;
1404ccc8d77SZyta Szpak }
1414ccc8d77SZyta Szpak 
1424ccc8d77SZyta Szpak /**
1434ccc8d77SZyta Szpak  * DPDK callback to get information about the device.
1444ccc8d77SZyta Szpak  *
1454ccc8d77SZyta Szpak  * @param dev
1464ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure (unused).
1474ccc8d77SZyta Szpak  * @param info
1484ccc8d77SZyta Szpak  *   Info structure output buffer.
1494ccc8d77SZyta Szpak  */
150bdad90d1SIvan Ilchenko static int
1514ccc8d77SZyta Szpak mvneta_dev_infos_get(struct rte_eth_dev *dev __rte_unused,
1524ccc8d77SZyta Szpak 		   struct rte_eth_dev_info *info)
1534ccc8d77SZyta Szpak {
154*295968d1SFerruh Yigit 	info->speed_capa = RTE_ETH_LINK_SPEED_10M |
155*295968d1SFerruh Yigit 			   RTE_ETH_LINK_SPEED_100M |
156*295968d1SFerruh Yigit 			   RTE_ETH_LINK_SPEED_1G |
157*295968d1SFerruh Yigit 			   RTE_ETH_LINK_SPEED_2_5G;
1584ccc8d77SZyta Szpak 
1594ccc8d77SZyta Szpak 	info->max_rx_queues = MRVL_NETA_RXQ_MAX;
1604ccc8d77SZyta Szpak 	info->max_tx_queues = MRVL_NETA_TXQ_MAX;
1614ccc8d77SZyta Szpak 	info->max_mac_addrs = MVNETA_MAC_ADDRS_MAX;
1624ccc8d77SZyta Szpak 
1634ccc8d77SZyta Szpak 	info->rx_desc_lim.nb_max = MRVL_NETA_RXD_MAX;
1644ccc8d77SZyta Szpak 	info->rx_desc_lim.nb_min = MRVL_NETA_RXD_MIN;
1654ccc8d77SZyta Szpak 	info->rx_desc_lim.nb_align = MRVL_NETA_RXD_ALIGN;
1664ccc8d77SZyta Szpak 
1674ccc8d77SZyta Szpak 	info->tx_desc_lim.nb_max = MRVL_NETA_TXD_MAX;
1684ccc8d77SZyta Szpak 	info->tx_desc_lim.nb_min = MRVL_NETA_TXD_MIN;
1694ccc8d77SZyta Szpak 	info->tx_desc_lim.nb_align = MRVL_NETA_TXD_ALIGN;
1704ccc8d77SZyta Szpak 
1714ccc8d77SZyta Szpak 	info->rx_offload_capa = MVNETA_RX_OFFLOADS;
1724ccc8d77SZyta Szpak 	info->rx_queue_offload_capa = MVNETA_RX_OFFLOADS;
1734ccc8d77SZyta Szpak 
1744ccc8d77SZyta Szpak 	info->tx_offload_capa =  MVNETA_TX_OFFLOADS;
1754ccc8d77SZyta Szpak 	info->tx_queue_offload_capa =  MVNETA_TX_OFFLOADS;
1764ccc8d77SZyta Szpak 
1774ccc8d77SZyta Szpak 	/* By default packets are dropped if no descriptors are available */
1784ccc8d77SZyta Szpak 	info->default_rxconf.rx_drop_en = 1;
1794ccc8d77SZyta Szpak 	/* Deferred tx queue start is not supported */
1804ccc8d77SZyta Szpak 	info->default_txconf.tx_deferred_start = 0;
1814ccc8d77SZyta Szpak 	info->default_txconf.offloads = 0;
1824ccc8d77SZyta Szpak 
1834ccc8d77SZyta Szpak 	info->max_rx_pktlen = MVNETA_PKT_SIZE_MAX;
184bdad90d1SIvan Ilchenko 
185bdad90d1SIvan Ilchenko 	return 0;
1864ccc8d77SZyta Szpak }
1874ccc8d77SZyta Szpak 
1884ccc8d77SZyta Szpak /**
1894ccc8d77SZyta Szpak  * Return supported packet types.
1904ccc8d77SZyta Szpak  *
1914ccc8d77SZyta Szpak  * @param dev
1924ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure (unused).
1934ccc8d77SZyta Szpak  *
1944ccc8d77SZyta Szpak  * @return
1954ccc8d77SZyta Szpak  *   Const pointer to the table with supported packet types.
1964ccc8d77SZyta Szpak  */
1974ccc8d77SZyta Szpak static const uint32_t *
1984ccc8d77SZyta Szpak mvneta_dev_supported_ptypes_get(struct rte_eth_dev *dev __rte_unused)
1994ccc8d77SZyta Szpak {
2004ccc8d77SZyta Szpak 	static const uint32_t ptypes[] = {
2014ccc8d77SZyta Szpak 		RTE_PTYPE_L2_ETHER,
2024ccc8d77SZyta Szpak 		RTE_PTYPE_L2_ETHER_VLAN,
2034ccc8d77SZyta Szpak 		RTE_PTYPE_L3_IPV4,
2044ccc8d77SZyta Szpak 		RTE_PTYPE_L3_IPV6,
2054ccc8d77SZyta Szpak 		RTE_PTYPE_L4_TCP,
2064ccc8d77SZyta Szpak 		RTE_PTYPE_L4_UDP
2074ccc8d77SZyta Szpak 	};
2084ccc8d77SZyta Szpak 
2094ccc8d77SZyta Szpak 	return ptypes;
2104ccc8d77SZyta Szpak }
2114ccc8d77SZyta Szpak 
2124ccc8d77SZyta Szpak /**
213112ef725SZyta Szpak  * DPDK callback to change the MTU.
214112ef725SZyta Szpak  *
215112ef725SZyta Szpak  * Setting the MTU affects hardware MRU (packets larger than the MRU
216112ef725SZyta Szpak  * will be dropped).
217112ef725SZyta Szpak  *
218112ef725SZyta Szpak  * @param dev
219112ef725SZyta Szpak  *   Pointer to Ethernet device structure.
220112ef725SZyta Szpak  * @param mtu
221112ef725SZyta Szpak  *   New MTU.
222112ef725SZyta Szpak  *
223112ef725SZyta Szpak  * @return
224112ef725SZyta Szpak  *   0 on success, negative error value otherwise.
225112ef725SZyta Szpak  */
226112ef725SZyta Szpak static int
227112ef725SZyta Szpak mvneta_mtu_set(struct rte_eth_dev *dev, uint16_t mtu)
228112ef725SZyta Szpak {
229112ef725SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
230112ef725SZyta Szpak 	uint16_t mbuf_data_size = 0; /* SW buffer size */
231112ef725SZyta Szpak 	uint16_t mru;
232112ef725SZyta Szpak 	int ret;
233112ef725SZyta Szpak 
234112ef725SZyta Szpak 	mru = MRVL_NETA_MTU_TO_MRU(mtu);
235112ef725SZyta Szpak 	/*
236112ef725SZyta Szpak 	 * min_rx_buf_size is equal to mbuf data size
237112ef725SZyta Szpak 	 * if pmd didn't set it differently
238112ef725SZyta Szpak 	 */
239112ef725SZyta Szpak 	mbuf_data_size = dev->data->min_rx_buf_size - RTE_PKTMBUF_HEADROOM;
240112ef725SZyta Szpak 	/* Prevent PMD from:
241112ef725SZyta Szpak 	 * - setting mru greater than the mbuf size resulting in
242112ef725SZyta Szpak 	 * hw and sw buffer size mismatch
243112ef725SZyta Szpak 	 * - setting mtu that requires the support of scattered packets
244112ef725SZyta Szpak 	 * when this feature has not been enabled/supported so far.
245112ef725SZyta Szpak 	 */
246112ef725SZyta Szpak 	if (!dev->data->scattered_rx &&
247112ef725SZyta Szpak 	    (mru + MRVL_NETA_PKT_OFFS > mbuf_data_size)) {
248112ef725SZyta Szpak 		mru = mbuf_data_size - MRVL_NETA_PKT_OFFS;
249112ef725SZyta Szpak 		mtu = MRVL_NETA_MRU_TO_MTU(mru);
250112ef725SZyta Szpak 		MVNETA_LOG(WARNING, "MTU too big, max MTU possible limitted by"
251112ef725SZyta Szpak 			" current mbuf size: %u. Set MTU to %u, MRU to %u",
252112ef725SZyta Szpak 			mbuf_data_size, mtu, mru);
253112ef725SZyta Szpak 	}
254112ef725SZyta Szpak 
25535b2d13fSOlivier Matz 	if (mtu < RTE_ETHER_MIN_MTU || mru > MVNETA_PKT_SIZE_MAX) {
256112ef725SZyta Szpak 		MVNETA_LOG(ERR, "Invalid MTU [%u] or MRU [%u]", mtu, mru);
257112ef725SZyta Szpak 		return -EINVAL;
258112ef725SZyta Szpak 	}
259112ef725SZyta Szpak 
260112ef725SZyta Szpak 	if (!priv->ppio)
261112ef725SZyta Szpak 		/* It is OK. New MTU will be set later on mvneta_dev_start */
262112ef725SZyta Szpak 		return 0;
263112ef725SZyta Szpak 
264112ef725SZyta Szpak 	ret = neta_ppio_set_mru(priv->ppio, mru);
265112ef725SZyta Szpak 	if (ret) {
266112ef725SZyta Szpak 		MVNETA_LOG(ERR, "Failed to change MRU");
267112ef725SZyta Szpak 		return ret;
268112ef725SZyta Szpak 	}
269112ef725SZyta Szpak 
270112ef725SZyta Szpak 	ret = neta_ppio_set_mtu(priv->ppio, mtu);
271112ef725SZyta Szpak 	if (ret) {
272112ef725SZyta Szpak 		MVNETA_LOG(ERR, "Failed to change MTU");
273112ef725SZyta Szpak 		return ret;
274112ef725SZyta Szpak 	}
275112ef725SZyta Szpak 	MVNETA_LOG(INFO, "MTU changed to %u, MRU = %u", mtu, mru);
276112ef725SZyta Szpak 
277112ef725SZyta Szpak 	return 0;
278112ef725SZyta Szpak }
279112ef725SZyta Szpak 
280112ef725SZyta Szpak /**
2814ccc8d77SZyta Szpak  * DPDK callback to bring the link up.
2824ccc8d77SZyta Szpak  *
2834ccc8d77SZyta Szpak  * @param dev
2844ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure.
2854ccc8d77SZyta Szpak  *
2864ccc8d77SZyta Szpak  * @return
2874ccc8d77SZyta Szpak  *   0 on success, negative error value otherwise.
2884ccc8d77SZyta Szpak  */
2894ccc8d77SZyta Szpak static int
2904ccc8d77SZyta Szpak mvneta_dev_set_link_up(struct rte_eth_dev *dev)
2914ccc8d77SZyta Szpak {
2924ccc8d77SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
2934ccc8d77SZyta Szpak 
2944ccc8d77SZyta Szpak 	if (!priv->ppio)
2954ccc8d77SZyta Szpak 		return 0;
2964ccc8d77SZyta Szpak 
2974ccc8d77SZyta Szpak 	return neta_ppio_enable(priv->ppio);
2984ccc8d77SZyta Szpak }
2994ccc8d77SZyta Szpak 
3004ccc8d77SZyta Szpak /**
3014ccc8d77SZyta Szpak  * DPDK callback to bring the link down.
3024ccc8d77SZyta Szpak  *
3034ccc8d77SZyta Szpak  * @param dev
3044ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure.
3054ccc8d77SZyta Szpak  *
3064ccc8d77SZyta Szpak  * @return
3074ccc8d77SZyta Szpak  *   0 on success, negative error value otherwise.
3084ccc8d77SZyta Szpak  */
3094ccc8d77SZyta Szpak static int
3104ccc8d77SZyta Szpak mvneta_dev_set_link_down(struct rte_eth_dev *dev)
3114ccc8d77SZyta Szpak {
3124ccc8d77SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
3134ccc8d77SZyta Szpak 
3144ccc8d77SZyta Szpak 	if (!priv->ppio)
3154ccc8d77SZyta Szpak 		return 0;
3164ccc8d77SZyta Szpak 
3174ccc8d77SZyta Szpak 	return neta_ppio_disable(priv->ppio);
3184ccc8d77SZyta Szpak }
3194ccc8d77SZyta Szpak 
3204ccc8d77SZyta Szpak /**
3214ccc8d77SZyta Szpak  * DPDK callback to start the device.
3224ccc8d77SZyta Szpak  *
3234ccc8d77SZyta Szpak  * @param dev
3244ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure.
3254ccc8d77SZyta Szpak  *
3264ccc8d77SZyta Szpak  * @return
3274ccc8d77SZyta Szpak  *   0 on success, negative errno value on failure.
3284ccc8d77SZyta Szpak  */
3294ccc8d77SZyta Szpak static int
3304ccc8d77SZyta Szpak mvneta_dev_start(struct rte_eth_dev *dev)
3314ccc8d77SZyta Szpak {
3324ccc8d77SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
3334ccc8d77SZyta Szpak 	char match[MVNETA_MATCH_LEN];
3344ccc8d77SZyta Szpak 	int ret = 0, i;
3354ccc8d77SZyta Szpak 
3364ccc8d77SZyta Szpak 	if (priv->ppio)
3374ccc8d77SZyta Szpak 		return mvneta_dev_set_link_up(dev);
3384ccc8d77SZyta Szpak 
3396723c0fcSBruce Richardson 	strlcpy(match, dev->data->name, sizeof(match));
3404ccc8d77SZyta Szpak 	priv->ppio_params.match = match;
3414ccc8d77SZyta Szpak 	priv->ppio_params.inqs_params.mtu = dev->data->mtu;
3424ccc8d77SZyta Szpak 
3434ccc8d77SZyta Szpak 	ret = neta_ppio_init(&priv->ppio_params, &priv->ppio);
3444ccc8d77SZyta Szpak 	if (ret) {
3454ccc8d77SZyta Szpak 		MVNETA_LOG(ERR, "Failed to init ppio");
3464ccc8d77SZyta Szpak 		return ret;
3474ccc8d77SZyta Szpak 	}
3484ccc8d77SZyta Szpak 	priv->ppio_id = priv->ppio->port_id;
3494ccc8d77SZyta Szpak 
35015ae783aSYuri Chipchev 	mvneta_stats_reset(dev);
35115ae783aSYuri Chipchev 
3524ccc8d77SZyta Szpak 	/*
3534ccc8d77SZyta Szpak 	 * In case there are some some stale uc/mc mac addresses flush them
3544ccc8d77SZyta Szpak 	 * here. It cannot be done during mvneta_dev_close() as port information
3554ccc8d77SZyta Szpak 	 * is already gone at that point (due to neta_ppio_deinit() in
3564ccc8d77SZyta Szpak 	 * mvneta_dev_stop()).
3574ccc8d77SZyta Szpak 	 */
3584ccc8d77SZyta Szpak 	if (!priv->uc_mc_flushed) {
3594ccc8d77SZyta Szpak 		ret = neta_ppio_flush_mac_addrs(priv->ppio, 0, 1);
3604ccc8d77SZyta Szpak 		if (ret) {
3614ccc8d77SZyta Szpak 			MVNETA_LOG(ERR,
3624ccc8d77SZyta Szpak 				"Failed to flush uc/mc filter list");
3634ccc8d77SZyta Szpak 			goto out;
3644ccc8d77SZyta Szpak 		}
3654ccc8d77SZyta Szpak 		priv->uc_mc_flushed = 1;
3664ccc8d77SZyta Szpak 	}
3674ccc8d77SZyta Szpak 
368ce7ea764SZyta Szpak 	ret = mvneta_alloc_rx_bufs(dev);
369ce7ea764SZyta Szpak 	if (ret)
370ce7ea764SZyta Szpak 		goto out;
371ce7ea764SZyta Szpak 
372112ef725SZyta Szpak 	ret = mvneta_mtu_set(dev, dev->data->mtu);
373112ef725SZyta Szpak 	if (ret) {
374112ef725SZyta Szpak 		MVNETA_LOG(ERR, "Failed to set MTU %d", dev->data->mtu);
375112ef725SZyta Szpak 		goto out;
376112ef725SZyta Szpak 	}
377112ef725SZyta Szpak 
3784ccc8d77SZyta Szpak 	ret = mvneta_dev_set_link_up(dev);
3794ccc8d77SZyta Szpak 	if (ret) {
3804ccc8d77SZyta Szpak 		MVNETA_LOG(ERR, "Failed to set link up");
3814ccc8d77SZyta Szpak 		goto out;
3824ccc8d77SZyta Szpak 	}
3834ccc8d77SZyta Szpak 
3844ccc8d77SZyta Szpak 	/* start tx queues */
3854ccc8d77SZyta Szpak 	for (i = 0; i < dev->data->nb_tx_queues; i++)
3864ccc8d77SZyta Szpak 		dev->data->tx_queue_state[i] = RTE_ETH_QUEUE_STATE_STARTED;
3874ccc8d77SZyta Szpak 
388ce7ea764SZyta Szpak 	mvneta_set_tx_function(dev);
389ce7ea764SZyta Szpak 
3904ccc8d77SZyta Szpak 	return 0;
3914ccc8d77SZyta Szpak 
3924ccc8d77SZyta Szpak out:
3934ccc8d77SZyta Szpak 	MVNETA_LOG(ERR, "Failed to start device");
3944ccc8d77SZyta Szpak 	neta_ppio_deinit(priv->ppio);
3954ccc8d77SZyta Szpak 	return ret;
3964ccc8d77SZyta Szpak }
3974ccc8d77SZyta Szpak 
3984ccc8d77SZyta Szpak /**
3994ccc8d77SZyta Szpak  * DPDK callback to stop the device.
4004ccc8d77SZyta Szpak  *
4014ccc8d77SZyta Szpak  * @param dev
4024ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure.
4034ccc8d77SZyta Szpak  */
40462024eb8SIvan Ilchenko static int
4054ccc8d77SZyta Szpak mvneta_dev_stop(struct rte_eth_dev *dev)
4064ccc8d77SZyta Szpak {
4074ccc8d77SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
4084ccc8d77SZyta Szpak 
409b8f5d2aeSThomas Monjalon 	dev->data->dev_started = 0;
410b8f5d2aeSThomas Monjalon 
4114ccc8d77SZyta Szpak 	if (!priv->ppio)
41262024eb8SIvan Ilchenko 		return 0;
4134ccc8d77SZyta Szpak 
4144ccc8d77SZyta Szpak 	mvneta_dev_set_link_down(dev);
415ce7ea764SZyta Szpak 	mvneta_flush_queues(dev);
4164ccc8d77SZyta Szpak 	neta_ppio_deinit(priv->ppio);
4174ccc8d77SZyta Szpak 
4184ccc8d77SZyta Szpak 	priv->ppio = NULL;
41962024eb8SIvan Ilchenko 
42062024eb8SIvan Ilchenko 	return 0;
4214ccc8d77SZyta Szpak }
4224ccc8d77SZyta Szpak 
4234ccc8d77SZyta Szpak /**
4244ccc8d77SZyta Szpak  * DPDK callback to close the device.
4254ccc8d77SZyta Szpak  *
4264ccc8d77SZyta Szpak  * @param dev
4274ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure.
4284ccc8d77SZyta Szpak  */
429b142387bSThomas Monjalon static int
4304ccc8d77SZyta Szpak mvneta_dev_close(struct rte_eth_dev *dev)
4314ccc8d77SZyta Szpak {
4324ccc8d77SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
43362024eb8SIvan Ilchenko 	int i, ret = 0;
4344ccc8d77SZyta Szpak 
43530410493SThomas Monjalon 	if (rte_eal_process_type() != RTE_PROC_PRIMARY)
43630410493SThomas Monjalon 		return 0;
43730410493SThomas Monjalon 
4384ccc8d77SZyta Szpak 	if (priv->ppio)
43962024eb8SIvan Ilchenko 		ret = mvneta_dev_stop(dev);
440ce7ea764SZyta Szpak 
441ce7ea764SZyta Szpak 	for (i = 0; i < dev->data->nb_rx_queues; i++) {
4427483341aSXueming Li 		mvneta_rx_queue_release(dev, i);
443ce7ea764SZyta Szpak 		dev->data->rx_queues[i] = NULL;
444ce7ea764SZyta Szpak 	}
445ce7ea764SZyta Szpak 
446ce7ea764SZyta Szpak 	for (i = 0; i < dev->data->nb_tx_queues; i++) {
4477483341aSXueming Li 		mvneta_tx_queue_release(dev, i);
448ce7ea764SZyta Szpak 		dev->data->tx_queues[i] = NULL;
449ce7ea764SZyta Szpak 	}
4504b6d2743SYuri Chipchev 
4514b6d2743SYuri Chipchev 	mvneta_dev_num--;
4524b6d2743SYuri Chipchev 
4534b6d2743SYuri Chipchev 	if (mvneta_dev_num == 0) {
4544b6d2743SYuri Chipchev 		MVNETA_LOG(INFO, "Perform MUSDK deinit");
4554b6d2743SYuri Chipchev 		mvneta_neta_deinit();
4564b6d2743SYuri Chipchev 		rte_mvep_deinit(MVEP_MOD_T_NETA);
4574b6d2743SYuri Chipchev 	}
458b142387bSThomas Monjalon 
45962024eb8SIvan Ilchenko 	return ret;
4604ccc8d77SZyta Szpak }
4614ccc8d77SZyta Szpak 
4624ccc8d77SZyta Szpak /**
46388d3cb3cSZyta Szpak  * DPDK callback to retrieve physical link information.
46488d3cb3cSZyta Szpak  *
46588d3cb3cSZyta Szpak  * @param dev
46688d3cb3cSZyta Szpak  *   Pointer to Ethernet device structure.
46788d3cb3cSZyta Szpak  * @param wait_to_complete
46888d3cb3cSZyta Szpak  *   Wait for request completion (ignored).
46988d3cb3cSZyta Szpak  *
47088d3cb3cSZyta Szpak  * @return
47188d3cb3cSZyta Szpak  *   0 on success, negative error value otherwise.
47288d3cb3cSZyta Szpak  */
47388d3cb3cSZyta Szpak static int
47488d3cb3cSZyta Szpak mvneta_link_update(struct rte_eth_dev *dev, int wait_to_complete __rte_unused)
47588d3cb3cSZyta Szpak {
47688d3cb3cSZyta Szpak 	/*
47788d3cb3cSZyta Szpak 	 * TODO
47888d3cb3cSZyta Szpak 	 * once MUSDK provides necessary API use it here
47988d3cb3cSZyta Szpak 	 */
48088d3cb3cSZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
48188d3cb3cSZyta Szpak 	struct ethtool_cmd edata;
48288d3cb3cSZyta Szpak 	struct ifreq req;
48388d3cb3cSZyta Szpak 	int ret, fd, link_up;
48488d3cb3cSZyta Szpak 
48588d3cb3cSZyta Szpak 	if (!priv->ppio)
48688d3cb3cSZyta Szpak 		return -EPERM;
48788d3cb3cSZyta Szpak 
48888d3cb3cSZyta Szpak 	edata.cmd = ETHTOOL_GSET;
48988d3cb3cSZyta Szpak 
49088d3cb3cSZyta Szpak 	strcpy(req.ifr_name, dev->data->name);
49188d3cb3cSZyta Szpak 	req.ifr_data = (void *)&edata;
49288d3cb3cSZyta Szpak 
49388d3cb3cSZyta Szpak 	fd = socket(AF_INET, SOCK_DGRAM, 0);
49488d3cb3cSZyta Szpak 	if (fd == -1)
49588d3cb3cSZyta Szpak 		return -EFAULT;
49688d3cb3cSZyta Szpak 	ret = ioctl(fd, SIOCETHTOOL, &req);
49788d3cb3cSZyta Szpak 	if (ret == -1) {
49888d3cb3cSZyta Szpak 		close(fd);
49988d3cb3cSZyta Szpak 		return -EFAULT;
50088d3cb3cSZyta Szpak 	}
50188d3cb3cSZyta Szpak 
50288d3cb3cSZyta Szpak 	close(fd);
50388d3cb3cSZyta Szpak 
50488d3cb3cSZyta Szpak 	switch (ethtool_cmd_speed(&edata)) {
50588d3cb3cSZyta Szpak 	case SPEED_10:
506*295968d1SFerruh Yigit 		dev->data->dev_link.link_speed = RTE_ETH_SPEED_NUM_10M;
50788d3cb3cSZyta Szpak 		break;
50888d3cb3cSZyta Szpak 	case SPEED_100:
509*295968d1SFerruh Yigit 		dev->data->dev_link.link_speed = RTE_ETH_SPEED_NUM_100M;
51088d3cb3cSZyta Szpak 		break;
51188d3cb3cSZyta Szpak 	case SPEED_1000:
512*295968d1SFerruh Yigit 		dev->data->dev_link.link_speed = RTE_ETH_SPEED_NUM_1G;
51388d3cb3cSZyta Szpak 		break;
51488d3cb3cSZyta Szpak 	case SPEED_2500:
515*295968d1SFerruh Yigit 		dev->data->dev_link.link_speed = RTE_ETH_SPEED_NUM_2_5G;
51688d3cb3cSZyta Szpak 		break;
51788d3cb3cSZyta Szpak 	default:
518*295968d1SFerruh Yigit 		dev->data->dev_link.link_speed = RTE_ETH_SPEED_NUM_NONE;
51988d3cb3cSZyta Szpak 	}
52088d3cb3cSZyta Szpak 
521*295968d1SFerruh Yigit 	dev->data->dev_link.link_duplex = edata.duplex ? RTE_ETH_LINK_FULL_DUPLEX :
522*295968d1SFerruh Yigit 							 RTE_ETH_LINK_HALF_DUPLEX;
523*295968d1SFerruh Yigit 	dev->data->dev_link.link_autoneg = edata.autoneg ? RTE_ETH_LINK_AUTONEG :
524*295968d1SFerruh Yigit 							   RTE_ETH_LINK_FIXED;
52588d3cb3cSZyta Szpak 
52688d3cb3cSZyta Szpak 	neta_ppio_get_link_state(priv->ppio, &link_up);
527*295968d1SFerruh Yigit 	dev->data->dev_link.link_status = link_up ? RTE_ETH_LINK_UP : RTE_ETH_LINK_DOWN;
52888d3cb3cSZyta Szpak 
52988d3cb3cSZyta Szpak 	return 0;
53088d3cb3cSZyta Szpak }
53188d3cb3cSZyta Szpak 
53288d3cb3cSZyta Szpak /**
533cf9ccda9SZyta Szpak  * DPDK callback to enable promiscuous mode.
534cf9ccda9SZyta Szpak  *
535cf9ccda9SZyta Szpak  * @param dev
536cf9ccda9SZyta Szpak  *   Pointer to Ethernet device structure.
5379039c812SAndrew Rybchenko  *
5389039c812SAndrew Rybchenko  * @return
5399039c812SAndrew Rybchenko  *   always 0
540cf9ccda9SZyta Szpak  */
5419039c812SAndrew Rybchenko static int
542cf9ccda9SZyta Szpak mvneta_promiscuous_enable(struct rte_eth_dev *dev)
543cf9ccda9SZyta Szpak {
544cf9ccda9SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
545cf9ccda9SZyta Szpak 	int ret, en;
546cf9ccda9SZyta Szpak 
547cf9ccda9SZyta Szpak 	if (!priv->ppio)
5489039c812SAndrew Rybchenko 		return 0;
549cf9ccda9SZyta Szpak 
550cf9ccda9SZyta Szpak 	neta_ppio_get_promisc(priv->ppio, &en);
551cf9ccda9SZyta Szpak 	if (en) {
552cf9ccda9SZyta Szpak 		MVNETA_LOG(INFO, "Promiscuous already enabled");
5539039c812SAndrew Rybchenko 		return 0;
554cf9ccda9SZyta Szpak 	}
555cf9ccda9SZyta Szpak 
556cf9ccda9SZyta Szpak 	ret = neta_ppio_set_promisc(priv->ppio, 1);
557cf9ccda9SZyta Szpak 	if (ret)
558cf9ccda9SZyta Szpak 		MVNETA_LOG(ERR, "Failed to enable promiscuous mode");
5599039c812SAndrew Rybchenko 
5609039c812SAndrew Rybchenko 	return 0;
561cf9ccda9SZyta Szpak }
562cf9ccda9SZyta Szpak 
563cf9ccda9SZyta Szpak /**
564cf9ccda9SZyta Szpak  * DPDK callback to disable allmulticast mode.
565cf9ccda9SZyta Szpak  *
566cf9ccda9SZyta Szpak  * @param dev
567cf9ccda9SZyta Szpak  *   Pointer to Ethernet device structure.
5689039c812SAndrew Rybchenko  *
5699039c812SAndrew Rybchenko  * @return
5709039c812SAndrew Rybchenko  *   always 0
571cf9ccda9SZyta Szpak  */
5729039c812SAndrew Rybchenko static int
573cf9ccda9SZyta Szpak mvneta_promiscuous_disable(struct rte_eth_dev *dev)
574cf9ccda9SZyta Szpak {
575cf9ccda9SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
576cf9ccda9SZyta Szpak 	int ret, en;
577cf9ccda9SZyta Szpak 
578cf9ccda9SZyta Szpak 	if (!priv->ppio)
5799039c812SAndrew Rybchenko 		return 0;
580cf9ccda9SZyta Szpak 
581cf9ccda9SZyta Szpak 	neta_ppio_get_promisc(priv->ppio, &en);
582cf9ccda9SZyta Szpak 	if (!en) {
583cf9ccda9SZyta Szpak 		MVNETA_LOG(INFO, "Promiscuous already disabled");
5849039c812SAndrew Rybchenko 		return 0;
585cf9ccda9SZyta Szpak 	}
586cf9ccda9SZyta Szpak 
587cf9ccda9SZyta Szpak 	ret = neta_ppio_set_promisc(priv->ppio, 0);
588cf9ccda9SZyta Szpak 	if (ret)
589cf9ccda9SZyta Szpak 		MVNETA_LOG(ERR, "Failed to disable promiscuous mode");
5909039c812SAndrew Rybchenko 
5919039c812SAndrew Rybchenko 	return 0;
592cf9ccda9SZyta Szpak }
593cf9ccda9SZyta Szpak 
594cf9ccda9SZyta Szpak /**
595f3118fb0SZyta Szpak  * DPDK callback to remove a MAC address.
596f3118fb0SZyta Szpak  *
597f3118fb0SZyta Szpak  * @param dev
598f3118fb0SZyta Szpak  *   Pointer to Ethernet device structure.
599f3118fb0SZyta Szpak  * @param index
600f3118fb0SZyta Szpak  *   MAC address index.
601f3118fb0SZyta Szpak  */
602f3118fb0SZyta Szpak static void
603f3118fb0SZyta Szpak mvneta_mac_addr_remove(struct rte_eth_dev *dev, uint32_t index)
604f3118fb0SZyta Szpak {
605f3118fb0SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
60635b2d13fSOlivier Matz 	char buf[RTE_ETHER_ADDR_FMT_SIZE];
607f3118fb0SZyta Szpak 	int ret;
608f3118fb0SZyta Szpak 
609f3118fb0SZyta Szpak 	if (!priv->ppio)
610f3118fb0SZyta Szpak 		return;
611f3118fb0SZyta Szpak 
612f3118fb0SZyta Szpak 	ret = neta_ppio_remove_mac_addr(priv->ppio,
613f3118fb0SZyta Szpak 				       dev->data->mac_addrs[index].addr_bytes);
614f3118fb0SZyta Szpak 	if (ret) {
615538da7a1SOlivier Matz 		rte_ether_format_addr(buf, sizeof(buf),
616f3118fb0SZyta Szpak 				  &dev->data->mac_addrs[index]);
617f3118fb0SZyta Szpak 		MVNETA_LOG(ERR, "Failed to remove mac %s", buf);
618f3118fb0SZyta Szpak 	}
619f3118fb0SZyta Szpak }
620f3118fb0SZyta Szpak 
621f3118fb0SZyta Szpak /**
622f3118fb0SZyta Szpak  * DPDK callback to add a MAC address.
623f3118fb0SZyta Szpak  *
624f3118fb0SZyta Szpak  * @param dev
625f3118fb0SZyta Szpak  *   Pointer to Ethernet device structure.
626f3118fb0SZyta Szpak  * @param mac_addr
627f3118fb0SZyta Szpak  *   MAC address to register.
628f3118fb0SZyta Szpak  * @param index
629f3118fb0SZyta Szpak  *   MAC address index.
630f3118fb0SZyta Szpak  * @param vmdq
631f3118fb0SZyta Szpak  *   VMDq pool index to associate address with (unused).
632f3118fb0SZyta Szpak  *
633f3118fb0SZyta Szpak  * @return
634f3118fb0SZyta Szpak  *   0 on success, negative error value otherwise.
635f3118fb0SZyta Szpak  */
636f3118fb0SZyta Szpak static int
6376d13ea8eSOlivier Matz mvneta_mac_addr_add(struct rte_eth_dev *dev, struct rte_ether_addr *mac_addr,
638f3118fb0SZyta Szpak 		  uint32_t index, uint32_t vmdq __rte_unused)
639f3118fb0SZyta Szpak {
640f3118fb0SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
64135b2d13fSOlivier Matz 	char buf[RTE_ETHER_ADDR_FMT_SIZE];
642f3118fb0SZyta Szpak 	int ret;
643f3118fb0SZyta Szpak 
644f3118fb0SZyta Szpak 	if (index == 0)
645f3118fb0SZyta Szpak 		/* For setting index 0, mrvl_mac_addr_set() should be used.*/
646f3118fb0SZyta Szpak 		return -1;
647f3118fb0SZyta Szpak 
648f3118fb0SZyta Szpak 	if (!priv->ppio)
649f3118fb0SZyta Szpak 		return 0;
650f3118fb0SZyta Szpak 
651f3118fb0SZyta Szpak 	ret = neta_ppio_add_mac_addr(priv->ppio, mac_addr->addr_bytes);
652f3118fb0SZyta Szpak 	if (ret) {
653538da7a1SOlivier Matz 		rte_ether_format_addr(buf, sizeof(buf), mac_addr);
654f3118fb0SZyta Szpak 		MVNETA_LOG(ERR, "Failed to add mac %s", buf);
655f3118fb0SZyta Szpak 		return -1;
656f3118fb0SZyta Szpak 	}
657f3118fb0SZyta Szpak 
658f3118fb0SZyta Szpak 	return 0;
659f3118fb0SZyta Szpak }
660f3118fb0SZyta Szpak 
661f3118fb0SZyta Szpak /**
6624ccc8d77SZyta Szpak  * DPDK callback to set the primary MAC address.
6634ccc8d77SZyta Szpak  *
6644ccc8d77SZyta Szpak  * @param dev
6654ccc8d77SZyta Szpak  *   Pointer to Ethernet device structure.
6664ccc8d77SZyta Szpak  * @param mac_addr
6674ccc8d77SZyta Szpak  *   MAC address to register.
6684ccc8d77SZyta Szpak  */
6694ccc8d77SZyta Szpak static int
6706d13ea8eSOlivier Matz mvneta_mac_addr_set(struct rte_eth_dev *dev, struct rte_ether_addr *mac_addr)
6714ccc8d77SZyta Szpak {
6724ccc8d77SZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
6734ccc8d77SZyta Szpak 	int ret;
6744ccc8d77SZyta Szpak 
6754ccc8d77SZyta Szpak 	if (!priv->ppio)
6764ccc8d77SZyta Szpak 		return -EINVAL;
6774ccc8d77SZyta Szpak 
6784ccc8d77SZyta Szpak 	ret = neta_ppio_set_mac_addr(priv->ppio, mac_addr->addr_bytes);
6794ccc8d77SZyta Szpak 	if (ret) {
68035b2d13fSOlivier Matz 		char buf[RTE_ETHER_ADDR_FMT_SIZE];
681538da7a1SOlivier Matz 		rte_ether_format_addr(buf, sizeof(buf), mac_addr);
6824ccc8d77SZyta Szpak 		MVNETA_LOG(ERR, "Failed to set mac to %s", buf);
6834ccc8d77SZyta Szpak 	}
6844ccc8d77SZyta Szpak 	return 0;
6854ccc8d77SZyta Szpak }
6864ccc8d77SZyta Szpak 
687e9d5faffSZyta Szpak /**
688e9d5faffSZyta Szpak  * DPDK callback to get device statistics.
689e9d5faffSZyta Szpak  *
690e9d5faffSZyta Szpak  * @param dev
691e9d5faffSZyta Szpak  *   Pointer to Ethernet device structure.
692e9d5faffSZyta Szpak  * @param stats
693e9d5faffSZyta Szpak  *   Stats structure output buffer.
694e9d5faffSZyta Szpak  *
695e9d5faffSZyta Szpak  * @return
696e9d5faffSZyta Szpak  *   0 on success, negative error value otherwise.
697e9d5faffSZyta Szpak  */
698e9d5faffSZyta Szpak static int
699e9d5faffSZyta Szpak mvneta_stats_get(struct rte_eth_dev *dev, struct rte_eth_stats *stats)
700e9d5faffSZyta Szpak {
701e9d5faffSZyta Szpak 	struct mvneta_priv *priv = dev->data->dev_private;
702e9d5faffSZyta Szpak 	struct neta_ppio_statistics ppio_stats;
703e9d5faffSZyta Szpak 	unsigned int ret;
704e9d5faffSZyta Szpak 
705e9d5faffSZyta Szpak 	if (!priv->ppio)
706e9d5faffSZyta Szpak 		return -EPERM;
707e9d5faffSZyta Szpak 
708e9d5faffSZyta Szpak 	ret = neta_ppio_get_statistics(priv->ppio, &ppio_stats);
709e9d5faffSZyta Szpak 	if (unlikely(ret)) {
710e9d5faffSZyta Szpak 		MVNETA_LOG(ERR, "Failed to update port statistics");
711e9d5faffSZyta Szpak 		return ret;
712e9d5faffSZyta Szpak 	}
713e9d5faffSZyta Szpak 
714e9d5faffSZyta Szpak 	stats->ipackets += ppio_stats.rx_packets +
715e9d5faffSZyta Szpak 			ppio_stats.rx_broadcast_packets +
7163378383dSNatalie Samsonov 			ppio_stats.rx_multicast_packets -
7173378383dSNatalie Samsonov 			priv->prev_stats.ipackets;
718e9d5faffSZyta Szpak 	stats->opackets += ppio_stats.tx_packets +
719e9d5faffSZyta Szpak 			ppio_stats.tx_broadcast_packets +
7203378383dSNatalie Samsonov 			ppio_stats.tx_multicast_packets -
7213378383dSNatalie Samsonov 			priv->prev_stats.opackets;
7223378383dSNatalie Samsonov 	stats->ibytes += ppio_stats.rx_bytes - priv->prev_stats.ibytes;
7233378383dSNatalie Samsonov 	stats->obytes += ppio_stats.tx_bytes - priv->prev_stats.obytes;
724e9d5faffSZyta Szpak 	stats->imissed += ppio_stats.rx_discard +
7253378383dSNatalie Samsonov 			  ppio_stats.rx_overrun -
7263378383dSNatalie Samsonov 			  priv->prev_stats.imissed;
72709a6afe7SLiron Himi 	stats->ierrors = ppio_stats.rx_packets_err -
7283378383dSNatalie Samsonov 			priv->prev_stats.ierrors;
7293378383dSNatalie Samsonov 	stats->oerrors = ppio_stats.tx_errors - priv->prev_stats.oerrors;
730e9d5faffSZyta Szpak 
731e9d5faffSZyta Szpak 	return 0;
732e9d5faffSZyta Szpak }
733e9d5faffSZyta Szpak 
7343378383dSNatalie Samsonov /**
7353378383dSNatalie Samsonov  * DPDK callback to clear device statistics.
7363378383dSNatalie Samsonov  *
7373378383dSNatalie Samsonov  * @param dev
7383378383dSNatalie Samsonov  *   Pointer to Ethernet device structure.
7399970a9adSIgor Romanov  *
7409970a9adSIgor Romanov  * @return
7419970a9adSIgor Romanov  *   0 on success, negative error value otherwise.
7423378383dSNatalie Samsonov  */
7439970a9adSIgor Romanov static int
7443378383dSNatalie Samsonov mvneta_stats_reset(struct rte_eth_dev *dev)
7453378383dSNatalie Samsonov {
7463378383dSNatalie Samsonov 	struct mvneta_priv *priv = dev->data->dev_private;
7473378383dSNatalie Samsonov 	unsigned int ret;
7483378383dSNatalie Samsonov 
7493378383dSNatalie Samsonov 	if (!priv->ppio)
7509970a9adSIgor Romanov 		return 0;
7513378383dSNatalie Samsonov 
7523378383dSNatalie Samsonov 	ret = mvneta_stats_get(dev, &priv->prev_stats);
7533378383dSNatalie Samsonov 	if (unlikely(ret))
754cb0205ceSStephen Hemminger 		MVNETA_LOG(ERR, "Failed to reset port statistics");
7559970a9adSIgor Romanov 
7569970a9adSIgor Romanov 	return ret;
7573378383dSNatalie Samsonov }
7583378383dSNatalie Samsonov 
7593378383dSNatalie Samsonov 
7604ccc8d77SZyta Szpak static const struct eth_dev_ops mvneta_ops = {
7614ccc8d77SZyta Szpak 	.dev_configure = mvneta_dev_configure,
7624ccc8d77SZyta Szpak 	.dev_start = mvneta_dev_start,
7634ccc8d77SZyta Szpak 	.dev_stop = mvneta_dev_stop,
7644ccc8d77SZyta Szpak 	.dev_set_link_up = mvneta_dev_set_link_up,
7654ccc8d77SZyta Szpak 	.dev_set_link_down = mvneta_dev_set_link_down,
7664ccc8d77SZyta Szpak 	.dev_close = mvneta_dev_close,
76788d3cb3cSZyta Szpak 	.link_update = mvneta_link_update,
768cf9ccda9SZyta Szpak 	.promiscuous_enable = mvneta_promiscuous_enable,
769cf9ccda9SZyta Szpak 	.promiscuous_disable = mvneta_promiscuous_disable,
770f3118fb0SZyta Szpak 	.mac_addr_remove = mvneta_mac_addr_remove,
771f3118fb0SZyta Szpak 	.mac_addr_add = mvneta_mac_addr_add,
7724ccc8d77SZyta Szpak 	.mac_addr_set = mvneta_mac_addr_set,
773112ef725SZyta Szpak 	.mtu_set = mvneta_mtu_set,
774e9d5faffSZyta Szpak 	.stats_get = mvneta_stats_get,
7753378383dSNatalie Samsonov 	.stats_reset = mvneta_stats_reset,
7764ccc8d77SZyta Szpak 	.dev_infos_get = mvneta_dev_infos_get,
7774ccc8d77SZyta Szpak 	.dev_supported_ptypes_get = mvneta_dev_supported_ptypes_get,
778ce7ea764SZyta Szpak 	.rxq_info_get = mvneta_rxq_info_get,
779ce7ea764SZyta Szpak 	.txq_info_get = mvneta_txq_info_get,
780ce7ea764SZyta Szpak 	.rx_queue_setup = mvneta_rx_queue_setup,
781ce7ea764SZyta Szpak 	.rx_queue_release = mvneta_rx_queue_release,
782ce7ea764SZyta Szpak 	.tx_queue_setup = mvneta_tx_queue_setup,
783ce7ea764SZyta Szpak 	.tx_queue_release = mvneta_tx_queue_release,
7844ccc8d77SZyta Szpak };
7854ccc8d77SZyta Szpak 
7864ccc8d77SZyta Szpak /**
7874ccc8d77SZyta Szpak  * Create device representing Ethernet port.
7884ccc8d77SZyta Szpak  *
7894ccc8d77SZyta Szpak  * @param name
7904ccc8d77SZyta Szpak  *   Pointer to the port's name.
7914ccc8d77SZyta Szpak  *
7924ccc8d77SZyta Szpak  * @return
7934ccc8d77SZyta Szpak  *   0 on success, negative error value otherwise.
7944ccc8d77SZyta Szpak  */
7954ccc8d77SZyta Szpak static int
7964ccc8d77SZyta Szpak mvneta_eth_dev_create(struct rte_vdev_device *vdev, const char *name)
7974ccc8d77SZyta Szpak {
7984ccc8d77SZyta Szpak 	int ret, fd = socket(AF_INET, SOCK_DGRAM, 0);
7994ccc8d77SZyta Szpak 	struct rte_eth_dev *eth_dev;
8004ccc8d77SZyta Szpak 	struct mvneta_priv *priv;
8014ccc8d77SZyta Szpak 	struct ifreq req;
8024ccc8d77SZyta Szpak 
8034ccc8d77SZyta Szpak 	eth_dev = rte_eth_dev_allocate(name);
8044ccc8d77SZyta Szpak 	if (!eth_dev)
8054ccc8d77SZyta Szpak 		return -ENOMEM;
8064ccc8d77SZyta Szpak 
8074ccc8d77SZyta Szpak 	priv = rte_zmalloc_socket(name, sizeof(*priv), 0, rte_socket_id());
8084ccc8d77SZyta Szpak 	if (!priv) {
8094ccc8d77SZyta Szpak 		ret = -ENOMEM;
810e16adf08SThomas Monjalon 		goto out_free;
8114ccc8d77SZyta Szpak 	}
812e16adf08SThomas Monjalon 	eth_dev->data->dev_private = priv;
8134ccc8d77SZyta Szpak 
8144ccc8d77SZyta Szpak 	eth_dev->data->mac_addrs =
8154ccc8d77SZyta Szpak 		rte_zmalloc("mac_addrs",
81635b2d13fSOlivier Matz 			    RTE_ETHER_ADDR_LEN * MVNETA_MAC_ADDRS_MAX, 0);
8174ccc8d77SZyta Szpak 	if (!eth_dev->data->mac_addrs) {
8184ccc8d77SZyta Szpak 		MVNETA_LOG(ERR, "Failed to allocate space for eth addrs");
8194ccc8d77SZyta Szpak 		ret = -ENOMEM;
820e16adf08SThomas Monjalon 		goto out_free;
8214ccc8d77SZyta Szpak 	}
8224ccc8d77SZyta Szpak 
8234ccc8d77SZyta Szpak 	memset(&req, 0, sizeof(req));
8244ccc8d77SZyta Szpak 	strcpy(req.ifr_name, name);
8254ccc8d77SZyta Szpak 	ret = ioctl(fd, SIOCGIFHWADDR, &req);
8264ccc8d77SZyta Szpak 	if (ret)
827e16adf08SThomas Monjalon 		goto out_free;
8284ccc8d77SZyta Szpak 
8294ccc8d77SZyta Szpak 	memcpy(eth_dev->data->mac_addrs[0].addr_bytes,
83035b2d13fSOlivier Matz 	       req.ifr_addr.sa_data, RTE_ETHER_ADDR_LEN);
8314ccc8d77SZyta Szpak 
8324ccc8d77SZyta Szpak 	eth_dev->device = &vdev->device;
833ce7ea764SZyta Szpak 	eth_dev->rx_pkt_burst = mvneta_rx_pkt_burst;
834ce7ea764SZyta Szpak 	mvneta_set_tx_function(eth_dev);
8354ccc8d77SZyta Szpak 	eth_dev->dev_ops = &mvneta_ops;
8364ccc8d77SZyta Szpak 
8374ccc8d77SZyta Szpak 	rte_eth_dev_probing_finish(eth_dev);
8384ccc8d77SZyta Szpak 	return 0;
839e16adf08SThomas Monjalon out_free:
8404ccc8d77SZyta Szpak 	rte_eth_dev_release_port(eth_dev);
8414ccc8d77SZyta Szpak 
8424ccc8d77SZyta Szpak 	return ret;
8434ccc8d77SZyta Szpak }
8444ccc8d77SZyta Szpak 
8454ccc8d77SZyta Szpak /**
8464ccc8d77SZyta Szpak  * Cleanup previously created device representing Ethernet port.
8474ccc8d77SZyta Szpak  *
8484ccc8d77SZyta Szpak  * @param eth_dev
8494ccc8d77SZyta Szpak  *   Pointer to the corresponding rte_eth_dev structure.
8504ccc8d77SZyta Szpak  */
8514ccc8d77SZyta Szpak static void
8524ccc8d77SZyta Szpak mvneta_eth_dev_destroy(struct rte_eth_dev *eth_dev)
8534ccc8d77SZyta Szpak {
8544ccc8d77SZyta Szpak 	rte_eth_dev_release_port(eth_dev);
8554ccc8d77SZyta Szpak }
8564ccc8d77SZyta Szpak 
8574ccc8d77SZyta Szpak /**
8584ccc8d77SZyta Szpak  * Cleanup previously created device representing Ethernet port.
8594ccc8d77SZyta Szpak  *
8604ccc8d77SZyta Szpak  * @param name
8614ccc8d77SZyta Szpak  *   Pointer to the port name.
8624ccc8d77SZyta Szpak  */
8634ccc8d77SZyta Szpak static void
8644ccc8d77SZyta Szpak mvneta_eth_dev_destroy_name(const char *name)
8654ccc8d77SZyta Szpak {
8664ccc8d77SZyta Szpak 	struct rte_eth_dev *eth_dev;
8674ccc8d77SZyta Szpak 
8684ccc8d77SZyta Szpak 	eth_dev = rte_eth_dev_allocated(name);
8694ccc8d77SZyta Szpak 	if (!eth_dev)
8704ccc8d77SZyta Szpak 		return;
8714ccc8d77SZyta Szpak 
8724ccc8d77SZyta Szpak 	mvneta_eth_dev_destroy(eth_dev);
8734ccc8d77SZyta Szpak }
8744ccc8d77SZyta Szpak 
8754ccc8d77SZyta Szpak /**
8764ccc8d77SZyta Szpak  * DPDK callback to register the virtual device.
8774ccc8d77SZyta Szpak  *
8784ccc8d77SZyta Szpak  * @param vdev
8794ccc8d77SZyta Szpak  *   Pointer to the virtual device.
8804ccc8d77SZyta Szpak  *
8814ccc8d77SZyta Szpak  * @return
8824ccc8d77SZyta Szpak  *   0 on success, negative error value otherwise.
8834ccc8d77SZyta Szpak  */
8844ccc8d77SZyta Szpak static int
8854ccc8d77SZyta Szpak rte_pmd_mvneta_probe(struct rte_vdev_device *vdev)
8864ccc8d77SZyta Szpak {
8874ccc8d77SZyta Szpak 	struct rte_kvargs *kvlist;
8884ccc8d77SZyta Szpak 	struct mvneta_ifnames ifnames;
8894ccc8d77SZyta Szpak 	int ret = -EINVAL;
8904ccc8d77SZyta Szpak 	uint32_t i, ifnum;
8914ccc8d77SZyta Szpak 	const char *params;
8924ccc8d77SZyta Szpak 
8934ccc8d77SZyta Szpak 	params = rte_vdev_device_args(vdev);
8944ccc8d77SZyta Szpak 	if (!params)
8954ccc8d77SZyta Szpak 		return -EINVAL;
8964ccc8d77SZyta Szpak 
8974ccc8d77SZyta Szpak 	kvlist = rte_kvargs_parse(params, valid_args);
8984ccc8d77SZyta Szpak 	if (!kvlist)
8994ccc8d77SZyta Szpak 		return -EINVAL;
9004ccc8d77SZyta Szpak 
9014ccc8d77SZyta Szpak 	ifnum = rte_kvargs_count(kvlist, MVNETA_IFACE_NAME_ARG);
9024ccc8d77SZyta Szpak 	if (ifnum > RTE_DIM(ifnames.names))
9034ccc8d77SZyta Szpak 		goto out_free_kvlist;
9044ccc8d77SZyta Szpak 
9054ccc8d77SZyta Szpak 	ifnames.idx = 0;
9064ccc8d77SZyta Szpak 	rte_kvargs_process(kvlist, MVNETA_IFACE_NAME_ARG,
9074ccc8d77SZyta Szpak 			   mvneta_ifnames_get, &ifnames);
9084ccc8d77SZyta Szpak 
9094ccc8d77SZyta Szpak 	/*
9104ccc8d77SZyta Szpak 	 * The below system initialization should be done only once,
9114ccc8d77SZyta Szpak 	 * on the first provided configuration file
9124ccc8d77SZyta Szpak 	 */
9134ccc8d77SZyta Szpak 	if (mvneta_dev_num)
9144ccc8d77SZyta Szpak 		goto init_devices;
9154ccc8d77SZyta Szpak 
9164ccc8d77SZyta Szpak 	MVNETA_LOG(INFO, "Perform MUSDK initializations");
9174ccc8d77SZyta Szpak 
9184ccc8d77SZyta Szpak 	ret = rte_mvep_init(MVEP_MOD_T_NETA, kvlist);
9194ccc8d77SZyta Szpak 	if (ret)
9204ccc8d77SZyta Szpak 		goto out_free_kvlist;
9214ccc8d77SZyta Szpak 
9224ccc8d77SZyta Szpak 	ret = mvneta_neta_init();
9234ccc8d77SZyta Szpak 	if (ret) {
9244ccc8d77SZyta Szpak 		MVNETA_LOG(ERR, "Failed to init NETA!");
9254ccc8d77SZyta Szpak 		rte_mvep_deinit(MVEP_MOD_T_NETA);
9264ccc8d77SZyta Szpak 		goto out_free_kvlist;
9274ccc8d77SZyta Szpak 	}
9284ccc8d77SZyta Szpak 
9294ccc8d77SZyta Szpak init_devices:
9304ccc8d77SZyta Szpak 	for (i = 0; i < ifnum; i++) {
9314ccc8d77SZyta Szpak 		MVNETA_LOG(INFO, "Creating %s", ifnames.names[i]);
9324ccc8d77SZyta Szpak 		ret = mvneta_eth_dev_create(vdev, ifnames.names[i]);
9334ccc8d77SZyta Szpak 		if (ret)
9344ccc8d77SZyta Szpak 			goto out_cleanup;
9354b6d2743SYuri Chipchev 
9364b6d2743SYuri Chipchev 		mvneta_dev_num++;
9374ccc8d77SZyta Szpak 	}
9384ccc8d77SZyta Szpak 
9394ccc8d77SZyta Szpak 	rte_kvargs_free(kvlist);
9404ccc8d77SZyta Szpak 
9414ccc8d77SZyta Szpak 	return 0;
9424ccc8d77SZyta Szpak out_cleanup:
9434b6d2743SYuri Chipchev 	rte_pmd_mvneta_remove(vdev);
9444ccc8d77SZyta Szpak 
9454ccc8d77SZyta Szpak out_free_kvlist:
9464ccc8d77SZyta Szpak 	rte_kvargs_free(kvlist);
9474ccc8d77SZyta Szpak 
9484ccc8d77SZyta Szpak 	return ret;
9494ccc8d77SZyta Szpak }
9504ccc8d77SZyta Szpak 
9514ccc8d77SZyta Szpak /**
9524ccc8d77SZyta Szpak  * DPDK callback to remove virtual device.
9534ccc8d77SZyta Szpak  *
9544ccc8d77SZyta Szpak  * @param vdev
9554ccc8d77SZyta Szpak  *   Pointer to the removed virtual device.
9564ccc8d77SZyta Szpak  *
9574ccc8d77SZyta Szpak  * @return
9584ccc8d77SZyta Szpak  *   0 on success, negative error value otherwise.
9594ccc8d77SZyta Szpak  */
9604ccc8d77SZyta Szpak static int
9614ccc8d77SZyta Szpak rte_pmd_mvneta_remove(struct rte_vdev_device *vdev)
9624ccc8d77SZyta Szpak {
9634b6d2743SYuri Chipchev 	uint16_t port_id;
9648a5a0aadSThomas Monjalon 	int ret = 0;
9654ccc8d77SZyta Szpak 
9664b6d2743SYuri Chipchev 	RTE_ETH_FOREACH_DEV(port_id) {
9674b6d2743SYuri Chipchev 		if (rte_eth_devices[port_id].device != &vdev->device)
9684ccc8d77SZyta Szpak 			continue;
9698a5a0aadSThomas Monjalon 		ret |= rte_eth_dev_close(port_id);
9704ccc8d77SZyta Szpak 	}
9714ccc8d77SZyta Szpak 
9728a5a0aadSThomas Monjalon 	return ret == 0 ? 0 : -EIO;
9734ccc8d77SZyta Szpak }
9744ccc8d77SZyta Szpak 
9754ccc8d77SZyta Szpak static struct rte_vdev_driver pmd_mvneta_drv = {
9764ccc8d77SZyta Szpak 	.probe = rte_pmd_mvneta_probe,
9774ccc8d77SZyta Szpak 	.remove = rte_pmd_mvneta_remove,
9784ccc8d77SZyta Szpak };
9794ccc8d77SZyta Szpak 
9804ccc8d77SZyta Szpak RTE_PMD_REGISTER_VDEV(net_mvneta, pmd_mvneta_drv);
9814ccc8d77SZyta Szpak RTE_PMD_REGISTER_PARAM_STRING(net_mvneta, "iface=<ifc>");
982eeded204SDavid Marchand RTE_LOG_REGISTER_DEFAULT(mvneta_logtype, NOTICE);
983