drivers/s390/net/qeth_core.h

   1 /* SPDX-License-Identifier: GPL-2.0 */
   2 /*
   3  *    Copyright IBM Corp. 2007
   4  *    Author(s): Utz Bacher <utz.bacher@de.ibm.com>,
   5  *               Frank Pavlic <fpavlic@de.ibm.com>,
   6  *               Thomas Spatzier <tspat@de.ibm.com>,
   7  *               Frank Blaschka <frank.blaschka@de.ibm.com>
   8  */
   9
  10 #ifndef __QETH_CORE_H__
  11 #define __QETH_CORE_H__
  12
  13 #include <linux/completion.h>
  14 #include <linux/if.h>
  15 #include <linux/if_arp.h>
  16 #include <linux/etherdevice.h>
  17 #include <linux/if_vlan.h>
  18 #include <linux/ctype.h>
  19 #include <linux/in6.h>
  20 #include <linux/bitops.h>
  21 #include <linux/seq_file.h>
  22 #include <linux/hashtable.h>
  23 #include <linux/ip.h>
  24 #include <linux/refcount.h>
  25 #include <linux/timer.h>
  26 #include <linux/wait.h>
  27 #include <linux/workqueue.h>
  28
  29 #include <net/dst.h>
  30 #include <net/ip6_fib.h>
  31 #include <net/ipv6.h>
  32 #include <net/if_inet6.h>
  33 #include <net/addrconf.h>
  34 #include <net/sch_generic.h>
  35 #include <net/tcp.h>
  36
  37 #include <asm/debug.h>
  38 #include <asm/qdio.h>
  39 #include <asm/ccwdev.h>
  40 #include <asm/ccwgroup.h>
  41 #include <asm/sysinfo.h>
  42
  43 #include <uapi/linux/if_link.h>
  44
  45 #include "qeth_core_mpc.h"
  46
  47 /**
  48  * Debug Facility stuff
  49  */
  50 enum qeth_dbf_names {
  51         QETH_DBF_SETUP,
  52         QETH_DBF_MSG,
  53         QETH_DBF_CTRL,
  54         QETH_DBF_INFOS  /* must be last element */
  55 };
  56
  57 struct qeth_dbf_info {
  58         char name[DEBUG_MAX_NAME_LEN];
  59         int pages;
  60         int areas;
  61         int len;
  62         int level;
  63         struct debug_view *view;
  64         debug_info_t *id;
  65 };
  66
  67 #define QETH_DBF_CTRL_LEN 256U
  68
  69 #define QETH_DBF_TEXT(name, level, text) \
  70         debug_text_event(qeth_dbf[QETH_DBF_##name].id, level, text)
  71
  72 #define QETH_DBF_HEX(name, level, addr, len) \
  73         debug_event(qeth_dbf[QETH_DBF_##name].id, level, (void *)(addr), len)
  74
  75 #define QETH_DBF_MESSAGE(level, text...) \
  76         debug_sprintf_event(qeth_dbf[QETH_DBF_MSG].id, level, text)
  77
  78 #define QETH_DBF_TEXT_(name, level, text...) \
  79         qeth_dbf_longtext(qeth_dbf[QETH_DBF_##name].id, level, text)
  80
  81 #define QETH_CARD_TEXT(card, level, text) \
  82         debug_text_event(card->debug, level, text)
  83
  84 #define QETH_CARD_HEX(card, level, addr, len) \
  85         debug_event(card->debug, level, (void *)(addr), len)
  86
  87 #define QETH_CARD_MESSAGE(card, text...) \
  88         debug_sprintf_event(card->debug, level, text)
  89
  90 #define QETH_CARD_TEXT_(card, level, text...) \
  91         qeth_dbf_longtext(card->debug, level, text)
  92
  93 #define SENSE_COMMAND_REJECT_BYTE 0
  94 #define SENSE_COMMAND_REJECT_FLAG 0x80
  95 #define SENSE_RESETTING_EVENT_BYTE 1
  96 #define SENSE_RESETTING_EVENT_FLAG 0x80
  97
  98 static inline u32 qeth_get_device_id(struct ccw_device *cdev)
  99 {
 100         struct ccw_dev_id dev_id;
 101         u32 id;
 102
 103         ccw_device_get_id(cdev, &dev_id);
 104         id = dev_id.devno;
 105         id |= (u32) (dev_id.ssid << 16);
 106
 107         return id;
 108 }
 109
 110 /*
 111  * Common IO related definitions
 112  */
 113 #define CARD_RDEV(card) card->read.ccwdev
 114 #define CARD_WDEV(card) card->write.ccwdev
 115 #define CARD_DDEV(card) card->data.ccwdev
 116 #define CARD_BUS_ID(card) dev_name(&card->gdev->dev)
 117 #define CARD_RDEV_ID(card) dev_name(&card->read.ccwdev->dev)
 118 #define CARD_WDEV_ID(card) dev_name(&card->write.ccwdev->dev)
 119 #define CARD_DDEV_ID(card) dev_name(&card->data.ccwdev->dev)
 120 #define CCW_DEVID(cdev)         (qeth_get_device_id(cdev))
 121 #define CARD_DEVID(card)        (CCW_DEVID(CARD_RDEV(card)))
 122
 123 /* Routing stuff */
 124 struct qeth_routing_info {
 125         enum qeth_routing_types type;
 126 };
 127
 128 /* IPA stuff */
 129 struct qeth_ipa_info {
 130         __u32 supported_funcs;
 131         __u32 enabled_funcs;
 132 };
 133
 134 /* SETBRIDGEPORT stuff */
 135 enum qeth_sbp_roles {
 136         QETH_SBP_ROLE_NONE      = 0,
 137         QETH_SBP_ROLE_PRIMARY   = 1,
 138         QETH_SBP_ROLE_SECONDARY = 2,
 139 };
 140
 141 enum qeth_sbp_states {
 142         QETH_SBP_STATE_INACTIVE = 0,
 143         QETH_SBP_STATE_STANDBY  = 1,
 144         QETH_SBP_STATE_ACTIVE   = 2,
 145 };
 146
 147 #define QETH_SBP_HOST_NOTIFICATION 1
 148
 149 struct qeth_sbp_info {
 150         __u32 supported_funcs;
 151         enum qeth_sbp_roles role;
 152         __u32 hostnotification:1;
 153         __u32 reflect_promisc:1;
 154         __u32 reflect_promisc_primary:1;
 155 };
 156
 157 struct qeth_vnicc_info {
 158         /* supported/currently configured VNICCs; updated in IPA exchanges */
 159         u32 sup_chars;
 160         u32 cur_chars;
 161         /* supported commands: bitmasks which VNICCs support respective cmd */
 162         u32 set_char_sup;
 163         u32 getset_timeout_sup;
 164         /* timeout value for the learning characteristic */
 165         u32 learning_timeout;
 166         /* characteristics wanted/configured by user */
 167         u32 wanted_chars;
 168         /* has user explicitly enabled rx_bcast while online? */
 169         bool rx_bcast_enabled;
 170 };
 171
 172 static inline int qeth_is_adp_supported(struct qeth_ipa_info *ipa,
 173                 enum qeth_ipa_setadp_cmd func)
 174 {
 175         return (ipa->supported_funcs & func);
 176 }
 177
 178 static inline int qeth_is_ipa_supported(struct qeth_ipa_info *ipa,
 179                 enum qeth_ipa_funcs func)
 180 {
 181         return (ipa->supported_funcs & func);
 182 }
 183
 184 static inline int qeth_is_ipa_enabled(struct qeth_ipa_info *ipa,
 185                 enum qeth_ipa_funcs func)
 186 {
 187         return (ipa->supported_funcs & ipa->enabled_funcs & func);
 188 }
 189
 190 #define qeth_adp_supported(c, f) \
 191         qeth_is_adp_supported(&c->options.adp, f)
 192 #define qeth_is_supported(c, f) \
 193         qeth_is_ipa_supported(&c->options.ipa4, f)
 194 #define qeth_is_enabled(c, f) \
 195         qeth_is_ipa_enabled(&c->options.ipa4, f)
 196 #define qeth_is_supported6(c, f) \
 197         qeth_is_ipa_supported(&c->options.ipa6, f)
 198 #define qeth_is_enabled6(c, f) \
 199         qeth_is_ipa_enabled(&c->options.ipa6, f)
 200 #define qeth_is_ipafunc_supported(c, prot, f) \
 201          ((prot == QETH_PROT_IPV6) ? \
 202                 qeth_is_supported6(c, f) : qeth_is_supported(c, f))
 203 #define qeth_is_ipafunc_enabled(c, prot, f) \
 204          ((prot == QETH_PROT_IPV6) ? \
 205                 qeth_is_enabled6(c, f) : qeth_is_enabled(c, f))
 206
 207 #define QETH_IDX_FUNC_LEVEL_OSD          0x0101
 208 #define QETH_IDX_FUNC_LEVEL_IQD          0x4108
 209
 210 #define QETH_BUFSIZE            4096
 211 #define CCW_CMD_WRITE           0x01
 212 #define CCW_CMD_READ            0x02
 213
 214 /**
 215  * some more defs
 216  */
 217 #define QETH_TX_TIMEOUT         100 * HZ
 218 #define QETH_RCD_TIMEOUT        60 * HZ
 219 #define QETH_RECLAIM_WORK_TIME  HZ
 220 #define QETH_MAX_PORTNO         15
 221
 222 /*IPv6 address autoconfiguration stuff*/
 223 #define UNIQUE_ID_IF_CREATE_ADDR_FAILED 0xfffe
 224 #define UNIQUE_ID_NOT_BY_CARD           0x10000
 225
 226 /*****************************************************************************/
 227 /* QDIO queue and buffer handling                                            */
 228 /*****************************************************************************/
 229 #define QETH_MAX_QUEUES 4
 230 #define QETH_IQD_MIN_TXQ        2       /* One for ucast, one for mcast. */
 231 #define QETH_IQD_MCAST_TXQ      0
 232 #define QETH_IQD_MIN_UCAST_TXQ  1
 233 #define QETH_IN_BUF_SIZE_DEFAULT 65536
 234 #define QETH_IN_BUF_COUNT_DEFAULT 64
 235 #define QETH_IN_BUF_COUNT_HSDEFAULT 128
 236 #define QETH_IN_BUF_COUNT_MIN 8
 237 #define QETH_IN_BUF_COUNT_MAX 128
 238 #define QETH_MAX_BUFFER_ELEMENTS(card) ((card)->qdio.in_buf_size >> 12)
 239 #define QETH_IN_BUF_REQUEUE_THRESHOLD(card) \
 240                  ((card)->qdio.in_buf_pool.buf_count / 2)
 241
 242 /* buffers we have to be behind before we get a PCI */
 243 #define QETH_PCI_THRESHOLD_A(card) ((card)->qdio.in_buf_pool.buf_count+1)
 244 /*enqueued free buffers left before we get a PCI*/
 245 #define QETH_PCI_THRESHOLD_B(card) 0
 246 /*not used unless the microcode gets patched*/
 247 #define QETH_PCI_TIMER_VALUE(card) 3
 248
 249 /* priority queing */
 250 #define QETH_PRIOQ_DEFAULT QETH_NO_PRIO_QUEUEING
 251 #define QETH_DEFAULT_QUEUE    2
 252 #define QETH_NO_PRIO_QUEUEING 0
 253 #define QETH_PRIO_Q_ING_PREC  1
 254 #define QETH_PRIO_Q_ING_TOS   2
 255 #define QETH_PRIO_Q_ING_SKB   3
 256 #define QETH_PRIO_Q_ING_VLAN  4
 257
 258 /* Packing */
 259 #define QETH_LOW_WATERMARK_PACK  2
 260 #define QETH_HIGH_WATERMARK_PACK 5
 261 #define QETH_WATERMARK_PACK_FUZZ 1
 262
 263 /* large receive scatter gather copy break */
 264 #define QETH_RX_SG_CB (PAGE_SIZE >> 1)
 265 #define QETH_RX_PULL_LEN 256
 266
 267 struct qeth_hdr_layer3 {
 268         __u8  id;
 269         __u8  flags;
 270         __u16 inbound_checksum; /*TSO:__u16 seqno */
 271         __u32 token;            /*TSO: __u32 reserved */
 272         __u16 length;
 273         __u8  vlan_prio;
 274         __u8  ext_flags;
 275         __u16 vlan_id;
 276         __u16 frame_offset;
 277         union {
 278                 /* TX: */
 279                 struct in6_addr ipv6_addr;
 280                 struct ipv4 {
 281                         u8 res[12];
 282                         u32 addr;
 283                 } ipv4;
 284                 /* RX: */
 285                 struct rx {
 286                         u8 res1[2];
 287                         u8 src_mac[6];
 288                         u8 res2[4];
 289                         u16 vlan_id;
 290                         u8 res3[2];
 291                 } rx;
 292         } next_hop;
 293 };
 294
 295 struct qeth_hdr_layer2 {
 296         __u8 id;
 297         __u8 flags[3];
 298         __u8 port_no;
 299         __u8 hdr_length;
 300         __u16 pkt_length;
 301         __u16 seq_no;
 302         __u16 vlan_id;
 303         __u32 reserved;
 304         __u8 reserved2[16];
 305 } __attribute__ ((packed));
 306
 307 struct qeth_hdr_osn {
 308         __u8 id;
 309         __u8 reserved;
 310         __u16 seq_no;
 311         __u16 reserved2;
 312         __u16 control_flags;
 313         __u16 pdu_length;
 314         __u8 reserved3[18];
 315         __u32 ccid;
 316 } __attribute__ ((packed));
 317
 318 struct qeth_hdr {
 319         union {
 320                 struct qeth_hdr_layer2 l2;
 321                 struct qeth_hdr_layer3 l3;
 322                 struct qeth_hdr_osn    osn;
 323         } hdr;
 324 } __attribute__ ((packed));
 325
 326 /*TCP Segmentation Offload header*/
 327 struct qeth_hdr_ext_tso {
 328         __u16 hdr_tot_len;
 329         __u8  imb_hdr_no;
 330         __u8  reserved;
 331         __u8  hdr_type;
 332         __u8  hdr_version;
 333         __u16 hdr_len;
 334         __u32 payload_len;
 335         __u16 mss;
 336         __u16 dg_hdr_len;
 337         __u8  padding[16];
 338 } __attribute__ ((packed));
 339
 340 struct qeth_hdr_tso {
 341         struct qeth_hdr hdr;    /*hdr->hdr.l3.xxx*/
 342         struct qeth_hdr_ext_tso ext;
 343 } __attribute__ ((packed));
 344
 345
 346 /* flags for qeth_hdr.flags */
 347 #define QETH_HDR_PASSTHRU 0x10
 348 #define QETH_HDR_IPV6     0x80
 349 #define QETH_HDR_CAST_MASK 0x07
 350 enum qeth_cast_flags {
 351         QETH_CAST_UNICAST   = 0x06,
 352         QETH_CAST_MULTICAST = 0x04,
 353         QETH_CAST_BROADCAST = 0x05,
 354         QETH_CAST_ANYCAST   = 0x07,
 355         QETH_CAST_NOCAST    = 0x00,
 356 };
 357
 358 enum qeth_layer2_frame_flags {
 359         QETH_LAYER2_FLAG_MULTICAST = 0x01,
 360         QETH_LAYER2_FLAG_BROADCAST = 0x02,
 361         QETH_LAYER2_FLAG_UNICAST   = 0x04,
 362         QETH_LAYER2_FLAG_VLAN      = 0x10,
 363 };
 364
 365 enum qeth_header_ids {
 366         QETH_HEADER_TYPE_LAYER3 = 0x01,
 367         QETH_HEADER_TYPE_LAYER2 = 0x02,
 368         QETH_HEADER_TYPE_L3_TSO = 0x03,
 369         QETH_HEADER_TYPE_OSN    = 0x04,
 370         QETH_HEADER_TYPE_L2_TSO = 0x06,
 371         QETH_HEADER_MASK_INVAL  = 0x80,
 372 };
 373 /* flags for qeth_hdr.ext_flags */
 374 #define QETH_HDR_EXT_VLAN_FRAME       0x01
 375 #define QETH_HDR_EXT_TOKEN_ID         0x02
 376 #define QETH_HDR_EXT_INCLUDE_VLAN_TAG 0x04
 377 #define QETH_HDR_EXT_SRC_MAC_ADDR     0x08
 378 #define QETH_HDR_EXT_CSUM_HDR_REQ     0x10
 379 #define QETH_HDR_EXT_CSUM_TRANSP_REQ  0x20
 380 #define QETH_HDR_EXT_UDP              0x40 /*bit off for TCP*/
 381
 382 static inline bool qeth_l2_same_vlan(struct qeth_hdr_layer2 *h1,
 383                                      struct qeth_hdr_layer2 *h2)
 384 {
 385         return !((h1->flags[2] ^ h2->flags[2]) & QETH_LAYER2_FLAG_VLAN) &&
 386                h1->vlan_id == h2->vlan_id;
 387 }
 388
 389 static inline bool qeth_l3_iqd_same_vlan(struct qeth_hdr_layer3 *h1,
 390                                          struct qeth_hdr_layer3 *h2)
 391 {
 392         return !((h1->ext_flags ^ h2->ext_flags) & QETH_HDR_EXT_VLAN_FRAME) &&
 393                h1->vlan_id == h2->vlan_id;
 394 }
 395
 396 static inline bool qeth_l3_same_next_hop(struct qeth_hdr_layer3 *h1,
 397                                          struct qeth_hdr_layer3 *h2)
 398 {
 399         return !((h1->flags ^ h2->flags) & QETH_HDR_IPV6) &&
 400                ipv6_addr_equal(&h1->next_hop.ipv6_addr,
 401                                &h2->next_hop.ipv6_addr);
 402 }
 403
 404 enum qeth_qdio_info_states {
 405         QETH_QDIO_UNINITIALIZED,
 406         QETH_QDIO_ALLOCATED,
 407         QETH_QDIO_ESTABLISHED,
 408         QETH_QDIO_CLEANING
 409 };
 410
 411 struct qeth_buffer_pool_entry {
 412         struct list_head list;
 413         struct list_head init_list;
 414         void *elements[QDIO_MAX_ELEMENTS_PER_BUFFER];
 415 };
 416
 417 struct qeth_qdio_buffer_pool {
 418         struct list_head entry_list;
 419         int buf_count;
 420 };
 421
 422 struct qeth_qdio_buffer {
 423         struct qdio_buffer *buffer;
 424         /* the buffer pool entry currently associated to this buffer */
 425         struct qeth_buffer_pool_entry *pool_entry;
 426         struct sk_buff *rx_skb;
 427 };
 428
 429 struct qeth_qdio_q {
 430         struct qdio_buffer *qdio_bufs[QDIO_MAX_BUFFERS_PER_Q];
 431         struct qeth_qdio_buffer bufs[QDIO_MAX_BUFFERS_PER_Q];
 432         int next_buf_to_init;
 433 };
 434
 435 enum qeth_qdio_out_buffer_state {
 436         /* Owned by driver, in order to be filled. */
 437         QETH_QDIO_BUF_EMPTY,
 438         /* Filled by driver; owned by hardware in order to be sent. */
 439         QETH_QDIO_BUF_PRIMED,
 440         /* Identified to be pending in TPQ. */
 441         QETH_QDIO_BUF_PENDING,
 442         /* Found in completion queue. */
 443         QETH_QDIO_BUF_IN_CQ,
 444         /* Handled via transfer pending / completion queue. */
 445         QETH_QDIO_BUF_HANDLED_DELAYED,
 446 };
 447
 448 struct qeth_qdio_out_buffer {
 449         struct qdio_buffer *buffer;
 450         atomic_t state;
 451         int next_element_to_fill;
 452         unsigned int bytes;
 453         struct sk_buff_head skb_list;
 454         int is_header[QDIO_MAX_ELEMENTS_PER_BUFFER];
 455
 456         struct qeth_qdio_out_q *q;
 457         struct qeth_qdio_out_buffer *next_pending;
 458 };
 459
 460 struct qeth_card;
 461
 462 enum qeth_out_q_states {
 463        QETH_OUT_Q_UNLOCKED,
 464        QETH_OUT_Q_LOCKED,
 465        QETH_OUT_Q_LOCKED_FLUSH,
 466 };
 467
 468 #define QETH_CARD_STAT_ADD(_c, _stat, _val)     ((_c)->stats._stat += (_val))
 469 #define QETH_CARD_STAT_INC(_c, _stat)           QETH_CARD_STAT_ADD(_c, _stat, 1)
 470
 471 #define QETH_TXQ_STAT_ADD(_q, _stat, _val)      ((_q)->stats._stat += (_val))
 472 #define QETH_TXQ_STAT_INC(_q, _stat)            QETH_TXQ_STAT_ADD(_q, _stat, 1)
 473
 474 struct qeth_card_stats {
 475         u64 rx_bufs;
 476         u64 rx_skb_csum;
 477         u64 rx_sg_skbs;
 478         u64 rx_sg_frags;
 479         u64 rx_sg_alloc_page;
 480
 481         u64 rx_dropped_nomem;
 482         u64 rx_dropped_notsupp;
 483
 484         /* rtnl_link_stats64 */
 485         u64 rx_packets;
 486         u64 rx_bytes;
 487         u64 rx_multicast;
 488         u64 rx_length_errors;
 489         u64 rx_frame_errors;
 490         u64 rx_fifo_errors;
 491 };
 492
 493 struct qeth_out_q_stats {
 494         u64 bufs;
 495         u64 bufs_pack;
 496         u64 buf_elements;
 497         u64 skbs_pack;
 498         u64 skbs_sg;
 499         u64 skbs_csum;
 500         u64 skbs_tso;
 501         u64 skbs_linearized;
 502         u64 skbs_linearized_fail;
 503         u64 tso_bytes;
 504         u64 packing_mode_switch;
 505         u64 stopped;
 506         u64 completion_yield;
 507         u64 completion_timer;
 508
 509         /* rtnl_link_stats64 */
 510         u64 tx_packets;
 511         u64 tx_bytes;
 512         u64 tx_errors;
 513         u64 tx_dropped;
 514 };
 515
 516 #define QETH_TX_TIMER_USECS             500
 517
 518 struct qeth_qdio_out_q {
 519         struct qdio_buffer *qdio_bufs[QDIO_MAX_BUFFERS_PER_Q];
 520         struct qeth_qdio_out_buffer *bufs[QDIO_MAX_BUFFERS_PER_Q];
 521         struct qdio_outbuf_state *bufstates; /* convenience pointer */
 522         struct qeth_out_q_stats stats;
 523         u8 next_buf_to_fill;
 524         u8 max_elements;
 525         u8 queue_no;
 526         u8 do_pack;
 527         struct qeth_card *card;
 528         atomic_t state;
 529         /*
 530          * number of buffers that are currently filled (PRIMED)
 531          * -> these buffers are hardware-owned
 532          */
 533         atomic_t used_buffers;
 534         /* indicates whether PCI flag must be set (or if one is outstanding) */
 535         atomic_t set_pci_flags_count;
 536         struct napi_struct napi;
 537         struct timer_list timer;
 538         struct qeth_hdr *prev_hdr;
 539         u8 bulk_start;
 540         u8 bulk_count;
 541         u8 bulk_max;
 542 };
 543
 544 #define qeth_for_each_output_queue(card, q, i)          \
 545         for (i = 0; i < card->qdio.no_out_queues &&     \
 546                     (q = card->qdio.out_qs[i]); i++)
 547
 548 #define qeth_napi_to_out_queue(n) container_of(n, struct qeth_qdio_out_q, napi)
 549
 550 static inline void qeth_tx_arm_timer(struct qeth_qdio_out_q *queue)
 551 {
 552         if (timer_pending(&queue->timer))
 553                 return;
 554         mod_timer(&queue->timer, usecs_to_jiffies(QETH_TX_TIMER_USECS) +
 555                                  jiffies);
 556 }
 557
 558 static inline bool qeth_out_queue_is_full(struct qeth_qdio_out_q *queue)
 559 {
 560         return atomic_read(&queue->used_buffers) >= QDIO_MAX_BUFFERS_PER_Q;
 561 }
 562
 563 static inline bool qeth_out_queue_is_empty(struct qeth_qdio_out_q *queue)
 564 {
 565         return atomic_read(&queue->used_buffers) == 0;
 566 }
 567
 568 struct qeth_qdio_info {
 569         atomic_t state;
 570         /* input */
 571         int no_in_queues;
 572         struct qeth_qdio_q *in_q;
 573         struct qeth_qdio_q *c_q;
 574         struct qeth_qdio_buffer_pool in_buf_pool;
 575         struct qeth_qdio_buffer_pool init_pool;
 576         int in_buf_size;
 577
 578         /* output */
 579         int no_out_queues;
 580         struct qeth_qdio_out_q *out_qs[QETH_MAX_QUEUES];
 581         struct qdio_outbuf_state *out_bufstates;
 582
 583         /* priority queueing */
 584         int do_prio_queueing;
 585         int default_out_queue;
 586 };
 587
 588 /**
 589  *  channel state machine
 590  */
 591 enum qeth_channel_states {
 592         CH_STATE_UP,
 593         CH_STATE_DOWN,
 594         CH_STATE_HALTED,
 595         CH_STATE_STOPPED,
 596 };
 597 /**
 598  * card state machine
 599  */
 600 enum qeth_card_states {
 601         CARD_STATE_DOWN,
 602         CARD_STATE_HARDSETUP,
 603         CARD_STATE_SOFTSETUP,
 604 };
 605
 606 /**
 607  * Protocol versions
 608  */
 609 enum qeth_prot_versions {
 610         QETH_PROT_NONE = 0x0000,
 611         QETH_PROT_IPV4 = 0x0004,
 612         QETH_PROT_IPV6 = 0x0006,
 613 };
 614
 615 enum qeth_cq {
 616         QETH_CQ_DISABLED = 0,
 617         QETH_CQ_ENABLED = 1,
 618         QETH_CQ_NOTAVAILABLE = 2,
 619 };
 620
 621 struct qeth_ipato {
 622         bool enabled;
 623         bool invert4;
 624         bool invert6;
 625         struct list_head entries;
 626 };
 627
 628 struct qeth_channel {
 629         struct ccw_device *ccwdev;
 630         enum qeth_channel_states state;
 631         atomic_t irq_pending;
 632 };
 633
 634 struct qeth_reply {
 635         int (*callback)(struct qeth_card *card, struct qeth_reply *reply,
 636                         unsigned long data);
 637         void *param;
 638 };
 639
 640 struct qeth_cmd_buffer {
 641         struct list_head list;
 642         struct completion done;
 643         spinlock_t lock;
 644         unsigned int length;
 645         refcount_t ref_count;
 646         struct qeth_channel *channel;
 647         struct qeth_reply reply;
 648         long timeout;
 649         unsigned char *data;
 650         void (*finalize)(struct qeth_card *card, struct qeth_cmd_buffer *iob);
 651         void (*callback)(struct qeth_card *card, struct qeth_cmd_buffer *iob,
 652                          unsigned int data_length);
 653         int rc;
 654 };
 655
 656 static inline void qeth_get_cmd(struct qeth_cmd_buffer *iob)
 657 {
 658         refcount_inc(&iob->ref_count);
 659 }
 660
 661 static inline struct qeth_ipa_cmd *__ipa_cmd(struct qeth_cmd_buffer *iob)
 662 {
 663         return (struct qeth_ipa_cmd *)(iob->data + IPA_PDU_HEADER_SIZE);
 664 }
 665
 666 static inline struct ccw1 *__ccw_from_cmd(struct qeth_cmd_buffer *iob)
 667 {
 668         return (struct ccw1 *)(iob->data + ALIGN(iob->length, 8));
 669 }
 670
 671 static inline bool qeth_trylock_channel(struct qeth_channel *channel)
 672 {
 673         return atomic_cmpxchg(&channel->irq_pending, 0, 1) == 0;
 674 }
 675
 676 /**
 677  *  OSA card related definitions
 678  */
 679 struct qeth_token {
 680         __u32 issuer_rm_w;
 681         __u32 issuer_rm_r;
 682         __u32 cm_filter_w;
 683         __u32 cm_filter_r;
 684         __u32 cm_connection_w;
 685         __u32 cm_connection_r;
 686         __u32 ulp_filter_w;
 687         __u32 ulp_filter_r;
 688         __u32 ulp_connection_w;
 689         __u32 ulp_connection_r;
 690 };
 691
 692 struct qeth_seqno {
 693         __u32 trans_hdr;
 694         __u32 pdu_hdr;
 695         __u32 pdu_hdr_ack;
 696         __u16 ipa;
 697 };
 698
 699 struct qeth_card_blkt {
 700         int time_total;
 701         int inter_packet;
 702         int inter_packet_jumbo;
 703 };
 704
 705 #define QETH_BROADCAST_WITH_ECHO    0x01
 706 #define QETH_BROADCAST_WITHOUT_ECHO 0x02
 707 #define QETH_LAYER2_MAC_REGISTERED  0x02
 708 struct qeth_card_info {
 709         unsigned short unit_addr2;
 710         unsigned short cula;
 711         u8 chpid;
 712         __u16 func_level;
 713         char mcl_level[QETH_MCL_LENGTH + 1];
 714         u8 open_when_online:1;
 715         u8 promisc_mode:1;
 716         u8 use_v1_blkt:1;
 717         u8 is_vm_nic:1;
 718         int mac_bits;
 719         enum qeth_card_types type;
 720         enum qeth_link_types link_type;
 721         int broadcast_capable;
 722         int unique_id;
 723         bool layer_enforced;
 724         struct qeth_card_blkt blkt;
 725         __u32 diagass_support;
 726         __u32 hwtrap;
 727 };
 728
 729 enum qeth_discipline_id {
 730         QETH_DISCIPLINE_UNDETERMINED = -1,
 731         QETH_DISCIPLINE_LAYER3 = 0,
 732         QETH_DISCIPLINE_LAYER2 = 1,
 733 };
 734
 735 struct qeth_card_options {
 736         struct qeth_routing_info route4;
 737         struct qeth_ipa_info ipa4;
 738         struct qeth_ipa_info adp; /*Adapter parameters*/
 739         struct qeth_routing_info route6;
 740         struct qeth_ipa_info ipa6;
 741         struct qeth_sbp_info sbp; /* SETBRIDGEPORT options */
 742         struct qeth_vnicc_info vnicc; /* VNICC options */
 743         int fake_broadcast;
 744         enum qeth_discipline_id layer;
 745         int rx_sg_cb;
 746         enum qeth_ipa_isolation_modes isolation;
 747         enum qeth_ipa_isolation_modes prev_isolation;
 748         int sniffer;
 749         enum qeth_cq cq;
 750         char hsuid[9];
 751 };
 752
 753 #define IS_LAYER2(card) ((card)->options.layer == QETH_DISCIPLINE_LAYER2)
 754 #define IS_LAYER3(card) ((card)->options.layer == QETH_DISCIPLINE_LAYER3)
 755
 756 /*
 757  * thread bits for qeth_card thread masks
 758  */
 759 enum qeth_threads {
 760         QETH_RECOVER_THREAD = 1,
 761 };
 762
 763 struct qeth_osn_info {
 764         int (*assist_cb)(struct net_device *dev, void *data);
 765         int (*data_cb)(struct sk_buff *skb);
 766 };
 767
 768 struct qeth_discipline {
 769         const struct device_type *devtype;
 770         int (*process_rx_buffer)(struct qeth_card *card, int budget, int *done);
 771         int (*recover)(void *ptr);
 772         int (*setup) (struct ccwgroup_device *);
 773         void (*remove) (struct ccwgroup_device *);
 774         int (*set_online) (struct ccwgroup_device *);
 775         int (*set_offline) (struct ccwgroup_device *);
 776         int (*do_ioctl)(struct net_device *dev, struct ifreq *rq, int cmd);
 777         int (*control_event_handler)(struct qeth_card *card,
 778                                         struct qeth_ipa_cmd *cmd);
 779 };
 780
 781 enum qeth_addr_disposition {
 782         QETH_DISP_ADDR_DELETE = 0,
 783         QETH_DISP_ADDR_DO_NOTHING = 1,
 784         QETH_DISP_ADDR_ADD = 2,
 785 };
 786
 787 struct qeth_rx {
 788         int b_count;
 789         int b_index;
 790         struct qdio_buffer_element *b_element;
 791         int e_offset;
 792         int qdio_err;
 793 };
 794
 795 struct carrier_info {
 796         __u8  card_type;
 797         __u16 port_mode;
 798         __u32 port_speed;
 799 };
 800
 801 struct qeth_switch_info {
 802         __u32 capabilities;
 803         __u32 settings;
 804 };
 805
 806 #define QETH_NAPI_WEIGHT NAPI_POLL_WEIGHT
 807
 808 struct qeth_card {
 809         enum qeth_card_states state;
 810         spinlock_t lock;
 811         struct ccwgroup_device *gdev;
 812         struct qeth_cmd_buffer *read_cmd;
 813         struct qeth_channel read;
 814         struct qeth_channel write;
 815         struct qeth_channel data;
 816
 817         struct net_device *dev;
 818         struct qeth_card_stats stats;
 819         struct qeth_card_info info;
 820         struct qeth_token token;
 821         struct qeth_seqno seqno;
 822         struct qeth_card_options options;
 823
 824         struct workqueue_struct *event_wq;
 825         struct workqueue_struct *cmd_wq;
 826         wait_queue_head_t wait_q;
 827         DECLARE_HASHTABLE(mac_htable, 4);
 828         DECLARE_HASHTABLE(ip_htable, 4);
 829         struct mutex ip_lock;
 830         DECLARE_HASHTABLE(ip_mc_htable, 4);
 831         struct work_struct rx_mode_work;
 832         struct work_struct kernel_thread_starter;
 833         spinlock_t thread_mask_lock;
 834         unsigned long thread_start_mask;
 835         unsigned long thread_allowed_mask;
 836         unsigned long thread_running_mask;
 837         struct qeth_ipato ipato;
 838         struct list_head cmd_waiter_list;
 839         /* QDIO buffer handling */
 840         struct qeth_qdio_info qdio;
 841         int read_or_write_problem;
 842         struct qeth_osn_info osn_info;
 843         struct qeth_discipline *discipline;
 844         atomic_t force_alloc_skb;
 845         struct service_level qeth_service_level;
 846         struct qdio_ssqd_desc ssqd;
 847         debug_info_t *debug;
 848         struct mutex sbp_lock;
 849         struct mutex conf_mutex;
 850         struct mutex discipline_mutex;
 851         struct napi_struct napi;
 852         struct qeth_rx rx;
 853         struct delayed_work buffer_reclaim_work;
 854         int reclaim_index;
 855         struct work_struct close_dev_work;
 856 };
 857
 858 static inline bool qeth_card_hw_is_reachable(struct qeth_card *card)
 859 {
 860         return card->state == CARD_STATE_SOFTSETUP;
 861 }
 862
 863 struct qeth_trap_id {
 864         __u16 lparnr;
 865         char vmname[8];
 866         __u8 chpid;
 867         __u8 ssid;
 868         __u16 devno;
 869 } __packed;
 870
 871 /*some helper functions*/
 872 #define QETH_CARD_IFNAME(card) (((card)->dev)? (card)->dev->name : "")
 873
 874 static inline bool qeth_netdev_is_registered(struct net_device *dev)
 875 {
 876         return dev->netdev_ops != NULL;
 877 }
 878
 879 static inline u16 qeth_iqd_translate_txq(struct net_device *dev, u16 txq)
 880 {
 881         if (txq == QETH_IQD_MCAST_TXQ)
 882                 return dev->num_tx_queues - 1;
 883         if (txq == dev->num_tx_queues - 1)
 884                 return QETH_IQD_MCAST_TXQ;
 885         return txq;
 886 }
 887
 888 static inline bool qeth_iqd_is_mcast_queue(struct qeth_card *card,
 889                                            struct qeth_qdio_out_q *queue)
 890 {
 891         return qeth_iqd_translate_txq(card->dev, queue->queue_no) ==
 892                QETH_IQD_MCAST_TXQ;
 893 }
 894
 895 static inline void qeth_scrub_qdio_buffer(struct qdio_buffer *buf,
 896                                           unsigned int elements)
 897 {
 898         unsigned int i;
 899
 900         for (i = 0; i < elements; i++)
 901                 memset(&buf->element[i], 0, sizeof(struct qdio_buffer_element));
 902         buf->element[14].sflags = 0;
 903         buf->element[15].sflags = 0;
 904 }
 905
 906 /**
 907  * qeth_get_elements_for_range() -      find number of SBALEs to cover range.
 908  * @start:                              Start of the address range.
 909  * @end:                                Address after the end of the range.
 910  *
 911  * Returns the number of pages, and thus QDIO buffer elements, needed to cover
 912  * the specified address range.
 913  */
 914 static inline int qeth_get_elements_for_range(addr_t start, addr_t end)
 915 {
 916         return PFN_UP(end) - PFN_DOWN(start);
 917 }
 918
 919 static inline int qeth_get_ip_version(struct sk_buff *skb)
 920 {
 921         struct vlan_ethhdr *veth = vlan_eth_hdr(skb);
 922         __be16 prot = veth->h_vlan_proto;
 923
 924         if (prot == htons(ETH_P_8021Q))
 925                 prot = veth->h_vlan_encapsulated_proto;
 926
 927         switch (prot) {
 928         case htons(ETH_P_IPV6):
 929                 return 6;
 930         case htons(ETH_P_IP):
 931                 return 4;
 932         default:
 933                 return 0;
 934         }
 935 }
 936
 937 static inline int qeth_get_ether_cast_type(struct sk_buff *skb)
 938 {
 939         u8 *addr = eth_hdr(skb)->h_dest;
 940
 941         if (is_multicast_ether_addr(addr))
 942                 return is_broadcast_ether_addr(addr) ? RTN_BROADCAST :
 943                                                        RTN_MULTICAST;
 944         return RTN_UNICAST;
 945 }
 946
 947 static inline struct dst_entry *qeth_dst_check_rcu(struct sk_buff *skb, int ipv)
 948 {
 949         struct dst_entry *dst = skb_dst(skb);
 950         struct rt6_info *rt;
 951
 952         rt = (struct rt6_info *) dst;
 953         if (dst)
 954                 dst = dst_check(dst, (ipv == 6) ? rt6_get_cookie(rt) : 0);
 955         return dst;
 956 }
 957
 958 static inline void qeth_rx_csum(struct qeth_card *card, struct sk_buff *skb,
 959                                 u8 flags)
 960 {
 961         if ((card->dev->features & NETIF_F_RXCSUM) &&
 962             (flags & QETH_HDR_EXT_CSUM_TRANSP_REQ)) {
 963                 skb->ip_summed = CHECKSUM_UNNECESSARY;
 964                 QETH_CARD_STAT_INC(card, rx_skb_csum);
 965         } else {
 966                 skb->ip_summed = CHECKSUM_NONE;
 967         }
 968 }
 969
 970 static inline void qeth_tx_csum(struct sk_buff *skb, u8 *flags, int ipv)
 971 {
 972         *flags |= QETH_HDR_EXT_CSUM_TRANSP_REQ;
 973         if ((ipv == 4 && ip_hdr(skb)->protocol == IPPROTO_UDP) ||
 974             (ipv == 6 && ipv6_hdr(skb)->nexthdr == IPPROTO_UDP))
 975                 *flags |= QETH_HDR_EXT_UDP;
 976 }
 977
 978 static inline void qeth_put_buffer_pool_entry(struct qeth_card *card,
 979                 struct qeth_buffer_pool_entry *entry)
 980 {
 981         list_add_tail(&entry->list, &card->qdio.in_buf_pool.entry_list);
 982 }
 983
 984 static inline int qeth_is_diagass_supported(struct qeth_card *card,
 985                 enum qeth_diags_cmds cmd)
 986 {
 987         return card->info.diagass_support & (__u32)cmd;
 988 }
 989
 990 int qeth_send_simple_setassparms_prot(struct qeth_card *card,
 991                                       enum qeth_ipa_funcs ipa_func,
 992                                       u16 cmd_code, u32 *data,
 993                                       enum qeth_prot_versions prot);
 994 /* IPv4 variant */
 995 static inline int qeth_send_simple_setassparms(struct qeth_card *card,
 996                                                enum qeth_ipa_funcs ipa_func,
 997                                                u16 cmd_code, u32 *data)
 998 {
 999         return qeth_send_simple_setassparms_prot(card, ipa_func, cmd_code,
1000                                                  data, QETH_PROT_IPV4);
1001 }
1002
1003 static inline int qeth_send_simple_setassparms_v6(struct qeth_card *card,
1004                                                   enum qeth_ipa_funcs ipa_func,
1005                                                   u16 cmd_code, u32 *data)
1006 {
1007         return qeth_send_simple_setassparms_prot(card, ipa_func, cmd_code,
1008                                                  data, QETH_PROT_IPV6);
1009 }
1010
1011 int qeth_get_priority_queue(struct qeth_card *card, struct sk_buff *skb);
1012
1013 extern struct qeth_discipline qeth_l2_discipline;
1014 extern struct qeth_discipline qeth_l3_discipline;
1015 extern const struct ethtool_ops qeth_ethtool_ops;
1016 extern const struct ethtool_ops qeth_osn_ethtool_ops;
1017 extern const struct attribute_group *qeth_generic_attr_groups[];
1018 extern const struct attribute_group *qeth_osn_attr_groups[];
1019 extern const struct attribute_group qeth_device_attr_group;
1020 extern const struct attribute_group qeth_device_blkt_group;
1021 extern const struct device_type qeth_generic_devtype;
1022
1023 const char *qeth_get_cardname_short(struct qeth_card *);
1024 int qeth_realloc_buffer_pool(struct qeth_card *, int);
1025 int qeth_core_load_discipline(struct qeth_card *, enum qeth_discipline_id);
1026 void qeth_core_free_discipline(struct qeth_card *);
1027
1028 /* exports for qeth discipline device drivers */
1029 extern struct kmem_cache *qeth_core_header_cache;
1030 extern struct qeth_dbf_info qeth_dbf[QETH_DBF_INFOS];
1031
1032 struct net_device *qeth_clone_netdev(struct net_device *orig);
1033 struct qeth_card *qeth_get_card_by_busid(char *bus_id);
1034 void qeth_set_allowed_threads(struct qeth_card *, unsigned long , int);
1035 int qeth_threads_running(struct qeth_card *, unsigned long);
1036 int qeth_do_run_thread(struct qeth_card *, unsigned long);
1037 void qeth_clear_thread_start_bit(struct qeth_card *, unsigned long);
1038 void qeth_clear_thread_running_bit(struct qeth_card *, unsigned long);
1039 int qeth_core_hardsetup_card(struct qeth_card *card, bool *carrier_ok);
1040 void qeth_print_status_message(struct qeth_card *);
1041 int qeth_init_qdio_queues(struct qeth_card *);
1042 int qeth_send_ipa_cmd(struct qeth_card *, struct qeth_cmd_buffer *,
1043                   int (*reply_cb)
1044                   (struct qeth_card *, struct qeth_reply *, unsigned long),
1045                   void *);
1046 struct qeth_cmd_buffer *qeth_ipa_alloc_cmd(struct qeth_card *card,
1047                                            enum qeth_ipa_cmds cmd_code,
1048                                            enum qeth_prot_versions prot,
1049                                            unsigned int data_length);
1050 struct qeth_cmd_buffer *qeth_alloc_cmd(struct qeth_channel *channel,
1051                                        unsigned int length, unsigned int ccws,
1052                                        long timeout);
1053 struct qeth_cmd_buffer *qeth_get_setassparms_cmd(struct qeth_card *card,
1054                                                  enum qeth_ipa_funcs ipa_func,
1055                                                  u16 cmd_code,
1056                                                  unsigned int data_length,
1057                                                  enum qeth_prot_versions prot);
1058 struct qeth_cmd_buffer *qeth_get_diag_cmd(struct qeth_card *card,
1059                                           enum qeth_diags_cmds sub_cmd,
1060                                           unsigned int data_length);
1061 void qeth_notify_cmd(struct qeth_cmd_buffer *iob, int reason);
1062 void qeth_put_cmd(struct qeth_cmd_buffer *iob);
1063
1064 struct sk_buff *qeth_core_get_next_skb(struct qeth_card *,
1065                 struct qeth_qdio_buffer *, struct qdio_buffer_element **, int *,
1066                 struct qeth_hdr **);
1067 void qeth_schedule_recovery(struct qeth_card *);
1068 int qeth_poll(struct napi_struct *napi, int budget);
1069 void qeth_clear_ipacmd_list(struct qeth_card *);
1070 int qeth_qdio_clear_card(struct qeth_card *, int);
1071 void qeth_clear_working_pool_list(struct qeth_card *);
1072 void qeth_drain_output_queues(struct qeth_card *card);
1073 void qeth_setadp_promisc_mode(struct qeth_card *card, bool enable);
1074 int qeth_setadpparms_change_macaddr(struct qeth_card *);
1075 void qeth_tx_timeout(struct net_device *);
1076 void qeth_prepare_ipa_cmd(struct qeth_card *card, struct qeth_cmd_buffer *iob,
1077                           u16 cmd_length);
1078 int qeth_query_switch_attributes(struct qeth_card *card,
1079                                   struct qeth_switch_info *sw_info);
1080 int qeth_query_card_info(struct qeth_card *card,
1081                          struct carrier_info *carrier_info);
1082 unsigned int qeth_count_elements(struct sk_buff *skb, unsigned int data_offset);
1083 int qeth_do_send_packet(struct qeth_card *card, struct qeth_qdio_out_q *queue,
1084                         struct sk_buff *skb, struct qeth_hdr *hdr,
1085                         unsigned int offset, unsigned int hd_len,
1086                         int elements_needed);
1087 int qeth_do_ioctl(struct net_device *dev, struct ifreq *rq, int cmd);
1088 void qeth_dbf_longtext(debug_info_t *id, int level, char *text, ...);
1089 int qeth_set_access_ctrl_online(struct qeth_card *card, int fallback);
1090 int qeth_configure_cq(struct qeth_card *, enum qeth_cq);
1091 int qeth_hw_trap(struct qeth_card *, enum qeth_diags_trap_action);
1092 void qeth_trace_features(struct qeth_card *);
1093 int qeth_setassparms_cb(struct qeth_card *, struct qeth_reply *, unsigned long);
1094 int qeth_set_features(struct net_device *, netdev_features_t);
1095 void qeth_enable_hw_features(struct net_device *dev);
1096 netdev_features_t qeth_fix_features(struct net_device *, netdev_features_t);
1097 netdev_features_t qeth_features_check(struct sk_buff *skb,
1098                                       struct net_device *dev,
1099                                       netdev_features_t features);
1100 void qeth_get_stats64(struct net_device *dev, struct rtnl_link_stats64 *stats);
1101 u16 qeth_iqd_select_queue(struct net_device *dev, struct sk_buff *skb,
1102                           u8 cast_type, struct net_device *sb_dev);
1103 int qeth_open(struct net_device *dev);
1104 int qeth_stop(struct net_device *dev);
1105
1106 int qeth_vm_request_mac(struct qeth_card *card);
1107 int qeth_xmit(struct qeth_card *card, struct sk_buff *skb,
1108               struct qeth_qdio_out_q *queue, int ipv,
1109               void (*fill_header)(struct qeth_qdio_out_q *queue,
1110                                   struct qeth_hdr *hdr, struct sk_buff *skb,
1111                                   int ipv, unsigned int data_len));
1112
1113 /* exports for OSN */
1114 int qeth_osn_assist(struct net_device *, void *, int);
1115 int qeth_osn_register(unsigned char *read_dev_no, struct net_device **,
1116                 int (*assist_cb)(struct net_device *, void *),
1117                 int (*data_cb)(struct sk_buff *));
1118 void qeth_osn_deregister(struct net_device *);
1119
1120 #endif /* __QETH_CORE_H__ */