Merge tag 'fuse-fixes-5.6-rc1' of git://git.kernel.org/pub/scm/linux/kernel/git/mszer...
[linux-2.6-microblaze.git] / drivers / net / ethernet / netronome / nfp / nfp_app.c
1 // SPDX-License-Identifier: (GPL-2.0-only OR BSD-2-Clause)
2 /* Copyright (C) 2017-2018 Netronome Systems, Inc. */
3
4 #include <linux/bug.h>
5 #include <linux/lockdep.h>
6 #include <linux/rcupdate.h>
7 #include <linux/skbuff.h>
8 #include <linux/slab.h>
9
10 #include "nfpcore/nfp_cpp.h"
11 #include "nfpcore/nfp_nffw.h"
12 #include "nfp_app.h"
13 #include "nfp_main.h"
14 #include "nfp_net.h"
15 #include "nfp_net_repr.h"
16 #include "nfp_port.h"
17
18 static const struct nfp_app_type *apps[] = {
19         [NFP_APP_CORE_NIC]      = &app_nic,
20 #ifdef CONFIG_BPF_SYSCALL
21         [NFP_APP_BPF_NIC]       = &app_bpf,
22 #else
23         [NFP_APP_BPF_NIC]       = &app_nic,
24 #endif
25 #ifdef CONFIG_NFP_APP_FLOWER
26         [NFP_APP_FLOWER_NIC]    = &app_flower,
27 #endif
28 #ifdef CONFIG_NFP_APP_ABM_NIC
29         [NFP_APP_ACTIVE_BUFFER_MGMT_NIC] = &app_abm,
30 #endif
31 };
32
33 void nfp_check_rhashtable_empty(void *ptr, void *arg)
34 {
35         WARN_ON_ONCE(1);
36 }
37
38 struct nfp_app *nfp_app_from_netdev(struct net_device *netdev)
39 {
40         if (nfp_netdev_is_nfp_net(netdev)) {
41                 struct nfp_net *nn = netdev_priv(netdev);
42
43                 return nn->app;
44         }
45
46         if (nfp_netdev_is_nfp_repr(netdev)) {
47                 struct nfp_repr *repr = netdev_priv(netdev);
48
49                 return repr->app;
50         }
51
52         WARN(1, "Unknown netdev type for nfp_app\n");
53
54         return NULL;
55 }
56
57 const char *nfp_app_mip_name(struct nfp_app *app)
58 {
59         if (!app || !app->pf->mip)
60                 return "";
61         return nfp_mip_name(app->pf->mip);
62 }
63
64 int nfp_app_ndo_init(struct net_device *netdev)
65 {
66         struct nfp_app *app = nfp_app_from_netdev(netdev);
67
68         if (!app || !app->type->ndo_init)
69                 return 0;
70         return app->type->ndo_init(app, netdev);
71 }
72
73 void nfp_app_ndo_uninit(struct net_device *netdev)
74 {
75         struct nfp_app *app = nfp_app_from_netdev(netdev);
76
77         if (app && app->type->ndo_uninit)
78                 app->type->ndo_uninit(app, netdev);
79 }
80
81 u64 *nfp_app_port_get_stats(struct nfp_port *port, u64 *data)
82 {
83         if (!port || !port->app || !port->app->type->port_get_stats)
84                 return data;
85         return port->app->type->port_get_stats(port->app, port, data);
86 }
87
88 int nfp_app_port_get_stats_count(struct nfp_port *port)
89 {
90         if (!port || !port->app || !port->app->type->port_get_stats_count)
91                 return 0;
92         return port->app->type->port_get_stats_count(port->app, port);
93 }
94
95 u8 *nfp_app_port_get_stats_strings(struct nfp_port *port, u8 *data)
96 {
97         if (!port || !port->app || !port->app->type->port_get_stats_strings)
98                 return data;
99         return port->app->type->port_get_stats_strings(port->app, port, data);
100 }
101
102 struct sk_buff *
103 nfp_app_ctrl_msg_alloc(struct nfp_app *app, unsigned int size, gfp_t priority)
104 {
105         struct sk_buff *skb;
106
107         if (nfp_app_ctrl_has_meta(app))
108                 size += 8;
109
110         skb = alloc_skb(size, priority);
111         if (!skb)
112                 return NULL;
113
114         if (nfp_app_ctrl_has_meta(app))
115                 skb_reserve(skb, 8);
116
117         return skb;
118 }
119
120 struct nfp_reprs *
121 nfp_reprs_get_locked(struct nfp_app *app, enum nfp_repr_type type)
122 {
123         return rcu_dereference_protected(app->reprs[type],
124                                          lockdep_is_held(&app->pf->lock));
125 }
126
127 struct nfp_reprs *
128 nfp_app_reprs_set(struct nfp_app *app, enum nfp_repr_type type,
129                   struct nfp_reprs *reprs)
130 {
131         struct nfp_reprs *old;
132
133         old = nfp_reprs_get_locked(app, type);
134         rtnl_lock();
135         rcu_assign_pointer(app->reprs[type], reprs);
136         rtnl_unlock();
137
138         return old;
139 }
140
141 static void
142 nfp_app_netdev_feat_change(struct nfp_app *app, struct net_device *netdev)
143 {
144         struct nfp_net *nn;
145         unsigned int type;
146
147         if (!nfp_netdev_is_nfp_net(netdev))
148                 return;
149         nn = netdev_priv(netdev);
150         if (nn->app != app)
151                 return;
152
153         for (type = 0; type < __NFP_REPR_TYPE_MAX; type++) {
154                 struct nfp_reprs *reprs;
155                 unsigned int i;
156
157                 reprs = rtnl_dereference(app->reprs[type]);
158                 if (!reprs)
159                         continue;
160
161                 for (i = 0; i < reprs->num_reprs; i++) {
162                         struct net_device *repr;
163
164                         repr = rtnl_dereference(reprs->reprs[i]);
165                         if (!repr)
166                                 continue;
167
168                         nfp_repr_transfer_features(repr, netdev);
169                 }
170         }
171 }
172
173 static int
174 nfp_app_netdev_event(struct notifier_block *nb, unsigned long event, void *ptr)
175 {
176         struct net_device *netdev;
177         struct nfp_app *app;
178
179         netdev = netdev_notifier_info_to_dev(ptr);
180         app = container_of(nb, struct nfp_app, netdev_nb);
181
182         /* Handle events common code is interested in */
183         switch (event) {
184         case NETDEV_FEAT_CHANGE:
185                 nfp_app_netdev_feat_change(app, netdev);
186                 break;
187         }
188
189         /* Call offload specific handlers */
190         if (app->type->netdev_event)
191                 return app->type->netdev_event(app, netdev, event, ptr);
192         return NOTIFY_DONE;
193 }
194
195 int nfp_app_start(struct nfp_app *app, struct nfp_net *ctrl)
196 {
197         int err;
198
199         app->ctrl = ctrl;
200
201         if (app->type->start) {
202                 err = app->type->start(app);
203                 if (err)
204                         return err;
205         }
206
207         app->netdev_nb.notifier_call = nfp_app_netdev_event;
208         err = register_netdevice_notifier(&app->netdev_nb);
209         if (err)
210                 goto err_app_stop;
211
212         return 0;
213
214 err_app_stop:
215         if (app->type->stop)
216                 app->type->stop(app);
217         return err;
218 }
219
220 void nfp_app_stop(struct nfp_app *app)
221 {
222         unregister_netdevice_notifier(&app->netdev_nb);
223
224         if (app->type->stop)
225                 app->type->stop(app);
226 }
227
228 struct nfp_app *nfp_app_alloc(struct nfp_pf *pf, enum nfp_app_id id)
229 {
230         struct nfp_app *app;
231
232         if (id >= ARRAY_SIZE(apps) || !apps[id]) {
233                 nfp_err(pf->cpp, "unknown FW app ID 0x%02hhx, driver too old or support for FW not built in\n", id);
234                 return ERR_PTR(-EINVAL);
235         }
236
237         if (WARN_ON(!apps[id]->name || !apps[id]->vnic_alloc))
238                 return ERR_PTR(-EINVAL);
239         if (WARN_ON(!apps[id]->ctrl_msg_rx && apps[id]->ctrl_msg_rx_raw))
240                 return ERR_PTR(-EINVAL);
241
242         app = kzalloc(sizeof(*app), GFP_KERNEL);
243         if (!app)
244                 return ERR_PTR(-ENOMEM);
245
246         app->pf = pf;
247         app->cpp = pf->cpp;
248         app->pdev = pf->pdev;
249         app->type = apps[id];
250
251         return app;
252 }
253
254 void nfp_app_free(struct nfp_app *app)
255 {
256         kfree(app);
257 }