net/mac80211/agg-tx.c

   1 /*
   2  * HT handling
   3  *
   4  * Copyright 2003, Jouni Malinen <jkmaline@cc.hut.fi>
   5  * Copyright 2002-2005, Instant802 Networks, Inc.
   6  * Copyright 2005-2006, Devicescape Software, Inc.
   7  * Copyright 2006-2007  Jiri Benc <jbenc@suse.cz>
   8  * Copyright 2007, Michael Wu <flamingice@sourmilk.net>
   9  * Copyright 2007-2010, Intel Corporation
  10  *
  11  * This program is free software; you can redistribute it and/or modify
  12  * it under the terms of the GNU General Public License version 2 as
  13  * published by the Free Software Foundation.
  14  */
  15
  16 #include <linux/ieee80211.h>
  17 #include <linux/slab.h>
  18 #include <linux/export.h>
  19 #include <net/mac80211.h>
  20 #include "ieee80211_i.h"
  21 #include "driver-ops.h"
  22 #include "wme.h"
  23
  24 /**
  25  * DOC: TX A-MPDU aggregation
  26  *
  27  * Aggregation on the TX side requires setting the hardware flag
  28  * %IEEE80211_HW_AMPDU_AGGREGATION. The driver will then be handed
  29  * packets with a flag indicating A-MPDU aggregation. The driver
  30  * or device is responsible for actually aggregating the frames,
  31  * as well as deciding how many and which to aggregate.
  32  *
  33  * When TX aggregation is started by some subsystem (usually the rate
  34  * control algorithm would be appropriate) by calling the
  35  * ieee80211_start_tx_ba_session() function, the driver will be
  36  * notified via its @ampdu_action function, with the
  37  * %IEEE80211_AMPDU_TX_START action.
  38  *
  39  * In response to that, the driver is later required to call the
  40  * ieee80211_start_tx_ba_cb_irqsafe() function, which will really
  41  * start the aggregation session after the peer has also responded.
  42  * If the peer responds negatively, the session will be stopped
  43  * again right away. Note that it is possible for the aggregation
  44  * session to be stopped before the driver has indicated that it
  45  * is done setting it up, in which case it must not indicate the
  46  * setup completion.
  47  *
  48  * Also note that, since we also need to wait for a response from
  49  * the peer, the driver is notified of the completion of the
  50  * handshake by the %IEEE80211_AMPDU_TX_OPERATIONAL action to the
  51  * @ampdu_action callback.
  52  *
  53  * Similarly, when the aggregation session is stopped by the peer
  54  * or something calling ieee80211_stop_tx_ba_session(), the driver's
  55  * @ampdu_action function will be called with the action
  56  * %IEEE80211_AMPDU_TX_STOP. In this case, the call must not fail,
  57  * and the driver must later call ieee80211_stop_tx_ba_cb_irqsafe().
  58  * Note that the sta can get destroyed before the BA tear down is
  59  * complete.
  60  */
  61
  62 static void ieee80211_send_addba_request(struct ieee80211_sub_if_data *sdata,
  63                                          const u8 *da, u16 tid,
  64                                          u8 dialog_token, u16 start_seq_num,
  65                                          u16 agg_size, u16 timeout)
  66 {
  67         struct ieee80211_local *local = sdata->local;
  68         struct sk_buff *skb;
  69         struct ieee80211_mgmt *mgmt;
  70         u16 capab;
  71
  72         skb = dev_alloc_skb(sizeof(*mgmt) + local->hw.extra_tx_headroom);
  73
  74         if (!skb)
  75                 return;
  76
  77         skb_reserve(skb, local->hw.extra_tx_headroom);
  78         mgmt = (struct ieee80211_mgmt *) skb_put(skb, 24);
  79         memset(mgmt, 0, 24);
  80         memcpy(mgmt->da, da, ETH_ALEN);
  81         memcpy(mgmt->sa, sdata->vif.addr, ETH_ALEN);
  82         if (sdata->vif.type == NL80211_IFTYPE_AP ||
  83             sdata->vif.type == NL80211_IFTYPE_AP_VLAN ||
  84             sdata->vif.type == NL80211_IFTYPE_MESH_POINT)
  85                 memcpy(mgmt->bssid, sdata->vif.addr, ETH_ALEN);
  86         else if (sdata->vif.type == NL80211_IFTYPE_STATION)
  87                 memcpy(mgmt->bssid, sdata->u.mgd.bssid, ETH_ALEN);
  88         else if (sdata->vif.type == NL80211_IFTYPE_ADHOC)
  89                 memcpy(mgmt->bssid, sdata->u.ibss.bssid, ETH_ALEN);
  90
  91         mgmt->frame_control = cpu_to_le16(IEEE80211_FTYPE_MGMT |
  92                                           IEEE80211_STYPE_ACTION);
  93
  94         skb_put(skb, 1 + sizeof(mgmt->u.action.u.addba_req));
  95
  96         mgmt->u.action.category = WLAN_CATEGORY_BACK;
  97         mgmt->u.action.u.addba_req.action_code = WLAN_ACTION_ADDBA_REQ;
  98
  99         mgmt->u.action.u.addba_req.dialog_token = dialog_token;
 100         capab = (u16)(1 << 1);          /* bit 1 aggregation policy */
 101         capab |= (u16)(tid << 2);       /* bit 5:2 TID number */
 102         capab |= (u16)(agg_size << 6);  /* bit 15:6 max size of aggergation */
 103
 104         mgmt->u.action.u.addba_req.capab = cpu_to_le16(capab);
 105
 106         mgmt->u.action.u.addba_req.timeout = cpu_to_le16(timeout);
 107         mgmt->u.action.u.addba_req.start_seq_num =
 108                                         cpu_to_le16(start_seq_num << 4);
 109
 110         ieee80211_tx_skb_tid(sdata, skb, tid);
 111 }
 112
 113 void ieee80211_send_bar(struct ieee80211_vif *vif, u8 *ra, u16 tid, u16 ssn)
 114 {
 115         struct ieee80211_sub_if_data *sdata = vif_to_sdata(vif);
 116         struct ieee80211_local *local = sdata->local;
 117         struct sk_buff *skb;
 118         struct ieee80211_bar *bar;
 119         u16 bar_control = 0;
 120
 121         skb = dev_alloc_skb(sizeof(*bar) + local->hw.extra_tx_headroom);
 122         if (!skb)
 123                 return;
 124
 125         skb_reserve(skb, local->hw.extra_tx_headroom);
 126         bar = (struct ieee80211_bar *)skb_put(skb, sizeof(*bar));
 127         memset(bar, 0, sizeof(*bar));
 128         bar->frame_control = cpu_to_le16(IEEE80211_FTYPE_CTL |
 129                                          IEEE80211_STYPE_BACK_REQ);
 130         memcpy(bar->ra, ra, ETH_ALEN);
 131         memcpy(bar->ta, sdata->vif.addr, ETH_ALEN);
 132         bar_control |= (u16)IEEE80211_BAR_CTRL_ACK_POLICY_NORMAL;
 133         bar_control |= (u16)IEEE80211_BAR_CTRL_CBMTID_COMPRESSED_BA;
 134         bar_control |= (u16)(tid << IEEE80211_BAR_CTRL_TID_INFO_SHIFT);
 135         bar->control = cpu_to_le16(bar_control);
 136         bar->start_seq_num = cpu_to_le16(ssn);
 137
 138         IEEE80211_SKB_CB(skb)->flags |= IEEE80211_TX_INTFL_DONT_ENCRYPT;
 139         ieee80211_tx_skb_tid(sdata, skb, tid);
 140 }
 141 EXPORT_SYMBOL(ieee80211_send_bar);
 142
 143 void ieee80211_assign_tid_tx(struct sta_info *sta, int tid,
 144                              struct tid_ampdu_tx *tid_tx)
 145 {
 146         lockdep_assert_held(&sta->ampdu_mlme.mtx);
 147         lockdep_assert_held(&sta->lock);
 148         rcu_assign_pointer(sta->ampdu_mlme.tid_tx[tid], tid_tx);
 149 }
 150
 151 int ___ieee80211_stop_tx_ba_session(struct sta_info *sta, u16 tid,
 152                                     enum ieee80211_back_parties initiator,
 153                                     bool tx)
 154 {
 155         struct ieee80211_local *local = sta->local;
 156         struct tid_ampdu_tx *tid_tx;
 157         int ret;
 158
 159         lockdep_assert_held(&sta->ampdu_mlme.mtx);
 160
 161         spin_lock_bh(&sta->lock);
 162
 163         tid_tx = rcu_dereference_protected_tid_tx(sta, tid);
 164         if (!tid_tx) {
 165                 spin_unlock_bh(&sta->lock);
 166                 return -ENOENT;
 167         }
 168
 169         /* if we're already stopping ignore any new requests to stop */
 170         if (test_bit(HT_AGG_STATE_STOPPING, &tid_tx->state)) {
 171                 spin_unlock_bh(&sta->lock);
 172                 return -EALREADY;
 173         }
 174
 175         if (test_bit(HT_AGG_STATE_WANT_START, &tid_tx->state)) {
 176                 /* not even started yet! */
 177                 ieee80211_assign_tid_tx(sta, tid, NULL);
 178                 spin_unlock_bh(&sta->lock);
 179                 kfree_rcu(tid_tx, rcu_head);
 180                 return 0;
 181         }
 182
 183         set_bit(HT_AGG_STATE_STOPPING, &tid_tx->state);
 184
 185         spin_unlock_bh(&sta->lock);
 186
 187 #ifdef CONFIG_MAC80211_HT_DEBUG
 188         pr_debug("Tx BA session stop requested for %pM tid %u\n",
 189                  sta->sta.addr, tid);
 190 #endif /* CONFIG_MAC80211_HT_DEBUG */
 191
 192         del_timer_sync(&tid_tx->addba_resp_timer);
 193         del_timer_sync(&tid_tx->session_timer);
 194
 195         /*
 196          * After this packets are no longer handed right through
 197          * to the driver but are put onto tid_tx->pending instead,
 198          * with locking to ensure proper access.
 199          */
 200         clear_bit(HT_AGG_STATE_OPERATIONAL, &tid_tx->state);
 201
 202         /*
 203          * There might be a few packets being processed right now (on
 204          * another CPU) that have already gotten past the aggregation
 205          * check when it was still OPERATIONAL and consequently have
 206          * IEEE80211_TX_CTL_AMPDU set. In that case, this code might
 207          * call into the driver at the same time or even before the
 208          * TX paths calls into it, which could confuse the driver.
 209          *
 210          * Wait for all currently running TX paths to finish before
 211          * telling the driver. New packets will not go through since
 212          * the aggregation session is no longer OPERATIONAL.
 213          */
 214         synchronize_net();
 215
 216         tid_tx->stop_initiator = initiator;
 217         tid_tx->tx_stop = tx;
 218
 219         ret = drv_ampdu_action(local, sta->sdata,
 220                                IEEE80211_AMPDU_TX_STOP,
 221                                &sta->sta, tid, NULL, 0);
 222
 223         /* HW shall not deny going back to legacy */
 224         if (WARN_ON(ret)) {
 225                 /*
 226                  * We may have pending packets get stuck in this case...
 227                  * Not bothering with a workaround for now.
 228                  */
 229         }
 230
 231         return ret;
 232 }
 233
 234 /*
 235  * After sending add Block Ack request we activated a timer until
 236  * add Block Ack response will arrive from the recipient.
 237  * If this timer expires sta_addba_resp_timer_expired will be executed.
 238  */
 239 static void sta_addba_resp_timer_expired(unsigned long data)
 240 {
 241         /* not an elegant detour, but there is no choice as the timer passes
 242          * only one argument, and both sta_info and TID are needed, so init
 243          * flow in sta_info_create gives the TID as data, while the timer_to_id
 244          * array gives the sta through container_of */
 245         u16 tid = *(u8 *)data;
 246         struct sta_info *sta = container_of((void *)data,
 247                 struct sta_info, timer_to_tid[tid]);
 248         struct tid_ampdu_tx *tid_tx;
 249
 250         /* check if the TID waits for addBA response */
 251         rcu_read_lock();
 252         tid_tx = rcu_dereference(sta->ampdu_mlme.tid_tx[tid]);
 253         if (!tid_tx ||
 254             test_bit(HT_AGG_STATE_RESPONSE_RECEIVED, &tid_tx->state)) {
 255                 rcu_read_unlock();
 256 #ifdef CONFIG_MAC80211_HT_DEBUG
 257                 pr_debug("timer expired on tid %d but we are not (or no longer) expecting addBA response there\n",
 258                          tid);
 259 #endif
 260                 return;
 261         }
 262
 263 #ifdef CONFIG_MAC80211_HT_DEBUG
 264         pr_debug("addBA response timer expired on tid %d\n", tid);
 265 #endif
 266
 267         ieee80211_stop_tx_ba_session(&sta->sta, tid);
 268         rcu_read_unlock();
 269 }
 270
 271 static inline int ieee80211_ac_from_tid(int tid)
 272 {
 273         return ieee802_1d_to_ac[tid & 7];
 274 }
 275
 276 /*
 277  * When multiple aggregation sessions on multiple stations
 278  * are being created/destroyed simultaneously, we need to
 279  * refcount the global queue stop caused by that in order
 280  * to not get into a situation where one of the aggregation
 281  * setup or teardown re-enables queues before the other is
 282  * ready to handle that.
 283  *
 284  * These two functions take care of this issue by keeping
 285  * a global "agg_queue_stop" refcount.
 286  */
 287 static void __acquires(agg_queue)
 288 ieee80211_stop_queue_agg(struct ieee80211_sub_if_data *sdata, int tid)
 289 {
 290         int queue = sdata->vif.hw_queue[ieee80211_ac_from_tid(tid)];
 291
 292         if (atomic_inc_return(&sdata->local->agg_queue_stop[queue]) == 1)
 293                 ieee80211_stop_queue_by_reason(
 294                         &sdata->local->hw, queue,
 295                         IEEE80211_QUEUE_STOP_REASON_AGGREGATION);
 296         __acquire(agg_queue);
 297 }
 298
 299 static void __releases(agg_queue)
 300 ieee80211_wake_queue_agg(struct ieee80211_sub_if_data *sdata, int tid)
 301 {
 302         int queue = sdata->vif.hw_queue[ieee80211_ac_from_tid(tid)];
 303
 304         if (atomic_dec_return(&sdata->local->agg_queue_stop[queue]) == 0)
 305                 ieee80211_wake_queue_by_reason(
 306                         &sdata->local->hw, queue,
 307                         IEEE80211_QUEUE_STOP_REASON_AGGREGATION);
 308         __release(agg_queue);
 309 }
 310
 311 /*
 312  * splice packets from the STA's pending to the local pending,
 313  * requires a call to ieee80211_agg_splice_finish later
 314  */
 315 static void __acquires(agg_queue)
 316 ieee80211_agg_splice_packets(struct ieee80211_sub_if_data *sdata,
 317                              struct tid_ampdu_tx *tid_tx, u16 tid)
 318 {
 319         struct ieee80211_local *local = sdata->local;
 320         int queue = sdata->vif.hw_queue[ieee80211_ac_from_tid(tid)];
 321         unsigned long flags;
 322
 323         ieee80211_stop_queue_agg(sdata, tid);
 324
 325         if (WARN(!tid_tx, "TID %d gone but expected when splicing aggregates"
 326                           " from the pending queue\n", tid))
 327                 return;
 328
 329         if (!skb_queue_empty(&tid_tx->pending)) {
 330                 spin_lock_irqsave(&local->queue_stop_reason_lock, flags);
 331                 /* copy over remaining packets */
 332                 skb_queue_splice_tail_init(&tid_tx->pending,
 333                                            &local->pending[queue]);
 334                 spin_unlock_irqrestore(&local->queue_stop_reason_lock, flags);
 335         }
 336 }
 337
 338 static void __releases(agg_queue)
 339 ieee80211_agg_splice_finish(struct ieee80211_sub_if_data *sdata, u16 tid)
 340 {
 341         ieee80211_wake_queue_agg(sdata, tid);
 342 }
 343
 344 void ieee80211_tx_ba_session_handle_start(struct sta_info *sta, int tid)
 345 {
 346         struct tid_ampdu_tx *tid_tx;
 347         struct ieee80211_local *local = sta->local;
 348         struct ieee80211_sub_if_data *sdata = sta->sdata;
 349         u16 start_seq_num;
 350         int ret;
 351
 352         tid_tx = rcu_dereference_protected_tid_tx(sta, tid);
 353
 354         /*
 355          * Start queuing up packets for this aggregation session.
 356          * We're going to release them once the driver is OK with
 357          * that.
 358          */
 359         clear_bit(HT_AGG_STATE_WANT_START, &tid_tx->state);
 360
 361         /*
 362          * Make sure no packets are being processed. This ensures that
 363          * we have a valid starting sequence number and that in-flight
 364          * packets have been flushed out and no packets for this TID
 365          * will go into the driver during the ampdu_action call.
 366          */
 367         synchronize_net();
 368
 369         start_seq_num = sta->tid_seq[tid] >> 4;
 370
 371         ret = drv_ampdu_action(local, sdata, IEEE80211_AMPDU_TX_START,
 372                                &sta->sta, tid, &start_seq_num, 0);
 373         if (ret) {
 374 #ifdef CONFIG_MAC80211_HT_DEBUG
 375                 pr_debug("BA request denied - HW unavailable for tid %d\n",
 376                          tid);
 377 #endif
 378                 spin_lock_bh(&sta->lock);
 379                 ieee80211_agg_splice_packets(sdata, tid_tx, tid);
 380                 ieee80211_assign_tid_tx(sta, tid, NULL);
 381                 ieee80211_agg_splice_finish(sdata, tid);
 382                 spin_unlock_bh(&sta->lock);
 383
 384                 kfree_rcu(tid_tx, rcu_head);
 385                 return;
 386         }
 387
 388         /* activate the timer for the recipient's addBA response */
 389         mod_timer(&tid_tx->addba_resp_timer, jiffies + ADDBA_RESP_INTERVAL);
 390 #ifdef CONFIG_MAC80211_HT_DEBUG
 391         pr_debug("activated addBA response timer on tid %d\n", tid);
 392 #endif
 393
 394         spin_lock_bh(&sta->lock);
 395         sta->ampdu_mlme.last_addba_req_time[tid] = jiffies;
 396         sta->ampdu_mlme.addba_req_num[tid]++;
 397         spin_unlock_bh(&sta->lock);
 398
 399         /* send AddBA request */
 400         ieee80211_send_addba_request(sdata, sta->sta.addr, tid,
 401                                      tid_tx->dialog_token, start_seq_num,
 402                                      local->hw.max_tx_aggregation_subframes,
 403                                      tid_tx->timeout);
 404 }
 405
 406 /*
 407  * After accepting the AddBA Response we activated a timer,
 408  * resetting it after each frame that we send.
 409  */
 410 static void sta_tx_agg_session_timer_expired(unsigned long data)
 411 {
 412         /* not an elegant detour, but there is no choice as the timer passes
 413          * only one argument, and various sta_info are needed here, so init
 414          * flow in sta_info_create gives the TID as data, while the timer_to_id
 415          * array gives the sta through container_of */
 416         u8 *ptid = (u8 *)data;
 417         u8 *timer_to_id = ptid - *ptid;
 418         struct sta_info *sta = container_of(timer_to_id, struct sta_info,
 419                                          timer_to_tid[0]);
 420         struct tid_ampdu_tx *tid_tx;
 421         unsigned long timeout;
 422
 423         rcu_read_lock();
 424         tid_tx = rcu_dereference(sta->ampdu_mlme.tid_tx[*ptid]);
 425         if (!tid_tx || test_bit(HT_AGG_STATE_STOPPING, &tid_tx->state)) {
 426                 rcu_read_unlock();
 427                 return;
 428         }
 429
 430         timeout = tid_tx->last_tx + TU_TO_JIFFIES(tid_tx->timeout);
 431         if (time_is_after_jiffies(timeout)) {
 432                 mod_timer(&tid_tx->session_timer, timeout);
 433                 rcu_read_unlock();
 434                 return;
 435         }
 436
 437         rcu_read_unlock();
 438
 439 #ifdef CONFIG_MAC80211_HT_DEBUG
 440         pr_debug("tx session timer expired on tid %d\n", (u16)*ptid);
 441 #endif
 442
 443         ieee80211_stop_tx_ba_session(&sta->sta, *ptid);
 444 }
 445
 446 int ieee80211_start_tx_ba_session(struct ieee80211_sta *pubsta, u16 tid,
 447                                   u16 timeout)
 448 {
 449         struct sta_info *sta = container_of(pubsta, struct sta_info, sta);
 450         struct ieee80211_sub_if_data *sdata = sta->sdata;
 451         struct ieee80211_local *local = sdata->local;
 452         struct tid_ampdu_tx *tid_tx;
 453         int ret = 0;
 454
 455         trace_api_start_tx_ba_session(pubsta, tid);
 456
 457         if (WARN_ON(!local->ops->ampdu_action))
 458                 return -EINVAL;
 459
 460         if ((tid >= STA_TID_NUM) ||
 461             !(local->hw.flags & IEEE80211_HW_AMPDU_AGGREGATION) ||
 462             (local->hw.flags & IEEE80211_HW_TX_AMPDU_SETUP_IN_HW))
 463                 return -EINVAL;
 464
 465 #ifdef CONFIG_MAC80211_HT_DEBUG
 466         pr_debug("Open BA session requested for %pM tid %u\n",
 467                  pubsta->addr, tid);
 468 #endif /* CONFIG_MAC80211_HT_DEBUG */
 469
 470         if (sdata->vif.type != NL80211_IFTYPE_STATION &&
 471             sdata->vif.type != NL80211_IFTYPE_MESH_POINT &&
 472             sdata->vif.type != NL80211_IFTYPE_AP_VLAN &&
 473             sdata->vif.type != NL80211_IFTYPE_AP &&
 474             sdata->vif.type != NL80211_IFTYPE_ADHOC)
 475                 return -EINVAL;
 476
 477         if (test_sta_flag(sta, WLAN_STA_BLOCK_BA)) {
 478 #ifdef CONFIG_MAC80211_HT_DEBUG
 479                 pr_debug("BA sessions blocked - Denying BA session request\n");
 480 #endif
 481                 return -EINVAL;
 482         }
 483
 484         /*
 485          * 802.11n-2009 11.5.1.1: If the initiating STA is an HT STA, is a
 486          * member of an IBSS, and has no other existing Block Ack agreement
 487          * with the recipient STA, then the initiating STA shall transmit a
 488          * Probe Request frame to the recipient STA and shall not transmit an
 489          * ADDBA Request frame unless it receives a Probe Response frame
 490          * from the recipient within dot11ADDBAFailureTimeout.
 491          *
 492          * The probe request mechanism for ADDBA is currently not implemented,
 493          * but we only build up Block Ack session with HT STAs. This information
 494          * is set when we receive a bss info from a probe response or a beacon.
 495          */
 496         if (sta->sdata->vif.type == NL80211_IFTYPE_ADHOC &&
 497             !sta->sta.ht_cap.ht_supported) {
 498 #ifdef CONFIG_MAC80211_HT_DEBUG
 499                 pr_debug("BA request denied - IBSS STA %pM does not advertise HT support\n",
 500                          pubsta->addr);
 501 #endif /* CONFIG_MAC80211_HT_DEBUG */
 502                 return -EINVAL;
 503         }
 504
 505         spin_lock_bh(&sta->lock);
 506
 507         /* we have tried too many times, receiver does not want A-MPDU */
 508         if (sta->ampdu_mlme.addba_req_num[tid] > HT_AGG_MAX_RETRIES) {
 509                 ret = -EBUSY;
 510                 goto err_unlock_sta;
 511         }
 512
 513         /*
 514          * if we have tried more than HT_AGG_BURST_RETRIES times we
 515          * will spread our requests in time to avoid stalling connection
 516          * for too long
 517          */
 518         if (sta->ampdu_mlme.addba_req_num[tid] > HT_AGG_BURST_RETRIES &&
 519             time_before(jiffies, sta->ampdu_mlme.last_addba_req_time[tid] +
 520                         HT_AGG_RETRIES_PERIOD)) {
 521 #ifdef CONFIG_MAC80211_HT_DEBUG
 522                 pr_debug("BA request denied - waiting a grace period after %d failed requests on tid %u\n",
 523                          sta->ampdu_mlme.addba_req_num[tid], tid);
 524 #endif /* CONFIG_MAC80211_HT_DEBUG */
 525                 ret = -EBUSY;
 526                 goto err_unlock_sta;
 527         }
 528
 529         tid_tx = rcu_dereference_protected_tid_tx(sta, tid);
 530         /* check if the TID is not in aggregation flow already */
 531         if (tid_tx || sta->ampdu_mlme.tid_start_tx[tid]) {
 532 #ifdef CONFIG_MAC80211_HT_DEBUG
 533                 pr_debug("BA request denied - session is not idle on tid %u\n",
 534                          tid);
 535 #endif /* CONFIG_MAC80211_HT_DEBUG */
 536                 ret = -EAGAIN;
 537                 goto err_unlock_sta;
 538         }
 539
 540         /* prepare A-MPDU MLME for Tx aggregation */
 541         tid_tx = kzalloc(sizeof(struct tid_ampdu_tx), GFP_ATOMIC);
 542         if (!tid_tx) {
 543                 ret = -ENOMEM;
 544                 goto err_unlock_sta;
 545         }
 546
 547         skb_queue_head_init(&tid_tx->pending);
 548         __set_bit(HT_AGG_STATE_WANT_START, &tid_tx->state);
 549
 550         tid_tx->timeout = timeout;
 551
 552         /* response timer */
 553         tid_tx->addba_resp_timer.function = sta_addba_resp_timer_expired;
 554         tid_tx->addba_resp_timer.data = (unsigned long)&sta->timer_to_tid[tid];
 555         init_timer(&tid_tx->addba_resp_timer);
 556
 557         /* tx timer */
 558         tid_tx->session_timer.function = sta_tx_agg_session_timer_expired;
 559         tid_tx->session_timer.data = (unsigned long)&sta->timer_to_tid[tid];
 560         init_timer_deferrable(&tid_tx->session_timer);
 561
 562         /* assign a dialog token */
 563         sta->ampdu_mlme.dialog_token_allocator++;
 564         tid_tx->dialog_token = sta->ampdu_mlme.dialog_token_allocator;
 565
 566         /*
 567          * Finally, assign it to the start array; the work item will
 568          * collect it and move it to the normal array.
 569          */
 570         sta->ampdu_mlme.tid_start_tx[tid] = tid_tx;
 571
 572         ieee80211_queue_work(&local->hw, &sta->ampdu_mlme.work);
 573
 574         /* this flow continues off the work */
 575  err_unlock_sta:
 576         spin_unlock_bh(&sta->lock);
 577         return ret;
 578 }
 579 EXPORT_SYMBOL(ieee80211_start_tx_ba_session);
 580
 581 static void ieee80211_agg_tx_operational(struct ieee80211_local *local,
 582                                          struct sta_info *sta, u16 tid)
 583 {
 584         struct tid_ampdu_tx *tid_tx;
 585
 586         lockdep_assert_held(&sta->ampdu_mlme.mtx);
 587
 588         tid_tx = rcu_dereference_protected_tid_tx(sta, tid);
 589
 590 #ifdef CONFIG_MAC80211_HT_DEBUG
 591         pr_debug("Aggregation is on for tid %d\n", tid);
 592 #endif
 593
 594         drv_ampdu_action(local, sta->sdata,
 595                          IEEE80211_AMPDU_TX_OPERATIONAL,
 596                          &sta->sta, tid, NULL, tid_tx->buf_size);
 597
 598         /*
 599          * synchronize with TX path, while splicing the TX path
 600          * should block so it won't put more packets onto pending.
 601          */
 602         spin_lock_bh(&sta->lock);
 603
 604         ieee80211_agg_splice_packets(sta->sdata, tid_tx, tid);
 605         /*
 606          * Now mark as operational. This will be visible
 607          * in the TX path, and lets it go lock-free in
 608          * the common case.
 609          */
 610         set_bit(HT_AGG_STATE_OPERATIONAL, &tid_tx->state);
 611         ieee80211_agg_splice_finish(sta->sdata, tid);
 612
 613         spin_unlock_bh(&sta->lock);
 614 }
 615
 616 void ieee80211_start_tx_ba_cb(struct ieee80211_vif *vif, u8 *ra, u16 tid)
 617 {
 618         struct ieee80211_sub_if_data *sdata = vif_to_sdata(vif);
 619         struct ieee80211_local *local = sdata->local;
 620         struct sta_info *sta;
 621         struct tid_ampdu_tx *tid_tx;
 622
 623         trace_api_start_tx_ba_cb(sdata, ra, tid);
 624
 625         if (tid >= STA_TID_NUM) {
 626 #ifdef CONFIG_MAC80211_HT_DEBUG
 627                 pr_debug("Bad TID value: tid = %d (>= %d)\n", tid, STA_TID_NUM);
 628 #endif
 629                 return;
 630         }
 631
 632         mutex_lock(&local->sta_mtx);
 633         sta = sta_info_get_bss(sdata, ra);
 634         if (!sta) {
 635                 mutex_unlock(&local->sta_mtx);
 636 #ifdef CONFIG_MAC80211_HT_DEBUG
 637                 pr_debug("Could not find station: %pM\n", ra);
 638 #endif
 639                 return;
 640         }
 641
 642         mutex_lock(&sta->ampdu_mlme.mtx);
 643         tid_tx = rcu_dereference_protected_tid_tx(sta, tid);
 644
 645         if (WARN_ON(!tid_tx)) {
 646 #ifdef CONFIG_MAC80211_HT_DEBUG
 647                 pr_debug("addBA was not requested!\n");
 648 #endif
 649                 goto unlock;
 650         }
 651
 652         if (WARN_ON(test_and_set_bit(HT_AGG_STATE_DRV_READY, &tid_tx->state)))
 653                 goto unlock;
 654
 655         if (test_bit(HT_AGG_STATE_RESPONSE_RECEIVED, &tid_tx->state))
 656                 ieee80211_agg_tx_operational(local, sta, tid);
 657
 658  unlock:
 659         mutex_unlock(&sta->ampdu_mlme.mtx);
 660         mutex_unlock(&local->sta_mtx);
 661 }
 662
 663 void ieee80211_start_tx_ba_cb_irqsafe(struct ieee80211_vif *vif,
 664                                       const u8 *ra, u16 tid)
 665 {
 666         struct ieee80211_sub_if_data *sdata = vif_to_sdata(vif);
 667         struct ieee80211_local *local = sdata->local;
 668         struct ieee80211_ra_tid *ra_tid;
 669         struct sk_buff *skb = dev_alloc_skb(0);
 670
 671         if (unlikely(!skb))
 672                 return;
 673
 674         ra_tid = (struct ieee80211_ra_tid *) &skb->cb;
 675         memcpy(&ra_tid->ra, ra, ETH_ALEN);
 676         ra_tid->tid = tid;
 677
 678         skb->pkt_type = IEEE80211_SDATA_QUEUE_AGG_START;
 679         skb_queue_tail(&sdata->skb_queue, skb);
 680         ieee80211_queue_work(&local->hw, &sdata->work);
 681 }
 682 EXPORT_SYMBOL(ieee80211_start_tx_ba_cb_irqsafe);
 683
 684 int __ieee80211_stop_tx_ba_session(struct sta_info *sta, u16 tid,
 685                                    enum ieee80211_back_parties initiator,
 686                                    bool tx)
 687 {
 688         int ret;
 689
 690         mutex_lock(&sta->ampdu_mlme.mtx);
 691
 692         ret = ___ieee80211_stop_tx_ba_session(sta, tid, initiator, tx);
 693
 694         mutex_unlock(&sta->ampdu_mlme.mtx);
 695
 696         return ret;
 697 }
 698
 699 int ieee80211_stop_tx_ba_session(struct ieee80211_sta *pubsta, u16 tid)
 700 {
 701         struct sta_info *sta = container_of(pubsta, struct sta_info, sta);
 702         struct ieee80211_sub_if_data *sdata = sta->sdata;
 703         struct ieee80211_local *local = sdata->local;
 704         struct tid_ampdu_tx *tid_tx;
 705         int ret = 0;
 706
 707         trace_api_stop_tx_ba_session(pubsta, tid);
 708
 709         if (!local->ops->ampdu_action)
 710                 return -EINVAL;
 711
 712         if (tid >= STA_TID_NUM)
 713                 return -EINVAL;
 714
 715         spin_lock_bh(&sta->lock);
 716         tid_tx = rcu_dereference_protected_tid_tx(sta, tid);
 717
 718         if (!tid_tx) {
 719                 ret = -ENOENT;
 720                 goto unlock;
 721         }
 722
 723         if (test_bit(HT_AGG_STATE_STOPPING, &tid_tx->state)) {
 724                 /* already in progress stopping it */
 725                 ret = 0;
 726                 goto unlock;
 727         }
 728
 729         set_bit(HT_AGG_STATE_WANT_STOP, &tid_tx->state);
 730         ieee80211_queue_work(&local->hw, &sta->ampdu_mlme.work);
 731
 732  unlock:
 733         spin_unlock_bh(&sta->lock);
 734         return ret;
 735 }
 736 EXPORT_SYMBOL(ieee80211_stop_tx_ba_session);
 737
 738 void ieee80211_stop_tx_ba_cb(struct ieee80211_vif *vif, u8 *ra, u8 tid)
 739 {
 740         struct ieee80211_sub_if_data *sdata = vif_to_sdata(vif);
 741         struct ieee80211_local *local = sdata->local;
 742         struct sta_info *sta;
 743         struct tid_ampdu_tx *tid_tx;
 744
 745         trace_api_stop_tx_ba_cb(sdata, ra, tid);
 746
 747         if (tid >= STA_TID_NUM) {
 748 #ifdef CONFIG_MAC80211_HT_DEBUG
 749                 pr_debug("Bad TID value: tid = %d (>= %d)\n", tid, STA_TID_NUM);
 750 #endif
 751                 return;
 752         }
 753
 754 #ifdef CONFIG_MAC80211_HT_DEBUG
 755         pr_debug("Stopping Tx BA session for %pM tid %d\n", ra, tid);
 756 #endif /* CONFIG_MAC80211_HT_DEBUG */
 757
 758         mutex_lock(&local->sta_mtx);
 759
 760         sta = sta_info_get_bss(sdata, ra);
 761         if (!sta) {
 762 #ifdef CONFIG_MAC80211_HT_DEBUG
 763                 pr_debug("Could not find station: %pM\n", ra);
 764 #endif
 765                 goto unlock;
 766         }
 767
 768         mutex_lock(&sta->ampdu_mlme.mtx);
 769         spin_lock_bh(&sta->lock);
 770         tid_tx = rcu_dereference_protected_tid_tx(sta, tid);
 771
 772         if (!tid_tx || !test_bit(HT_AGG_STATE_STOPPING, &tid_tx->state)) {
 773 #ifdef CONFIG_MAC80211_HT_DEBUG
 774                 pr_debug("unexpected callback to A-MPDU stop\n");
 775 #endif
 776                 goto unlock_sta;
 777         }
 778
 779         if (tid_tx->stop_initiator == WLAN_BACK_INITIATOR && tid_tx->tx_stop)
 780                 ieee80211_send_delba(sta->sdata, ra, tid,
 781                         WLAN_BACK_INITIATOR, WLAN_REASON_QSTA_NOT_USE);
 782
 783         /*
 784          * When we get here, the TX path will not be lockless any more wrt.
 785          * aggregation, since the OPERATIONAL bit has long been cleared.
 786          * Thus it will block on getting the lock, if it occurs. So if we
 787          * stop the queue now, we will not get any more packets, and any
 788          * that might be being processed will wait for us here, thereby
 789          * guaranteeing that no packets go to the tid_tx pending queue any
 790          * more.
 791          */
 792
 793         ieee80211_agg_splice_packets(sta->sdata, tid_tx, tid);
 794
 795         /* future packets must not find the tid_tx struct any more */
 796         ieee80211_assign_tid_tx(sta, tid, NULL);
 797
 798         ieee80211_agg_splice_finish(sta->sdata, tid);
 799
 800         kfree_rcu(tid_tx, rcu_head);
 801
 802  unlock_sta:
 803         spin_unlock_bh(&sta->lock);
 804         mutex_unlock(&sta->ampdu_mlme.mtx);
 805  unlock:
 806         mutex_unlock(&local->sta_mtx);
 807 }
 808
 809 void ieee80211_stop_tx_ba_cb_irqsafe(struct ieee80211_vif *vif,
 810                                      const u8 *ra, u16 tid)
 811 {
 812         struct ieee80211_sub_if_data *sdata = vif_to_sdata(vif);
 813         struct ieee80211_local *local = sdata->local;
 814         struct ieee80211_ra_tid *ra_tid;
 815         struct sk_buff *skb = dev_alloc_skb(0);
 816
 817         if (unlikely(!skb))
 818                 return;
 819
 820         ra_tid = (struct ieee80211_ra_tid *) &skb->cb;
 821         memcpy(&ra_tid->ra, ra, ETH_ALEN);
 822         ra_tid->tid = tid;
 823
 824         skb->pkt_type = IEEE80211_SDATA_QUEUE_AGG_STOP;
 825         skb_queue_tail(&sdata->skb_queue, skb);
 826         ieee80211_queue_work(&local->hw, &sdata->work);
 827 }
 828 EXPORT_SYMBOL(ieee80211_stop_tx_ba_cb_irqsafe);
 829
 830
 831 void ieee80211_process_addba_resp(struct ieee80211_local *local,
 832                                   struct sta_info *sta,
 833                                   struct ieee80211_mgmt *mgmt,
 834                                   size_t len)
 835 {
 836         struct tid_ampdu_tx *tid_tx;
 837         u16 capab, tid;
 838         u8 buf_size;
 839
 840         capab = le16_to_cpu(mgmt->u.action.u.addba_resp.capab);
 841         tid = (capab & IEEE80211_ADDBA_PARAM_TID_MASK) >> 2;
 842         buf_size = (capab & IEEE80211_ADDBA_PARAM_BUF_SIZE_MASK) >> 6;
 843
 844         mutex_lock(&sta->ampdu_mlme.mtx);
 845
 846         tid_tx = rcu_dereference_protected_tid_tx(sta, tid);
 847         if (!tid_tx)
 848                 goto out;
 849
 850         if (mgmt->u.action.u.addba_resp.dialog_token != tid_tx->dialog_token) {
 851 #ifdef CONFIG_MAC80211_HT_DEBUG
 852                 pr_debug("wrong addBA response token, tid %d\n", tid);
 853 #endif
 854                 goto out;
 855         }
 856
 857         del_timer_sync(&tid_tx->addba_resp_timer);
 858
 859 #ifdef CONFIG_MAC80211_HT_DEBUG
 860         pr_debug("switched off addBA timer for tid %d\n", tid);
 861 #endif
 862
 863         /*
 864          * addba_resp_timer may have fired before we got here, and
 865          * caused WANT_STOP to be set. If the stop then was already
 866          * processed further, STOPPING might be set.
 867          */
 868         if (test_bit(HT_AGG_STATE_WANT_STOP, &tid_tx->state) ||
 869             test_bit(HT_AGG_STATE_STOPPING, &tid_tx->state)) {
 870 #ifdef CONFIG_MAC80211_HT_DEBUG
 871                 pr_debug("got addBA resp for tid %d but we already gave up\n",
 872                          tid);
 873 #endif
 874                 goto out;
 875         }
 876
 877         /*
 878          * IEEE 802.11-2007 7.3.1.14:
 879          * In an ADDBA Response frame, when the Status Code field
 880          * is set to 0, the Buffer Size subfield is set to a value
 881          * of at least 1.
 882          */
 883         if (le16_to_cpu(mgmt->u.action.u.addba_resp.status)
 884                         == WLAN_STATUS_SUCCESS && buf_size) {
 885                 if (test_and_set_bit(HT_AGG_STATE_RESPONSE_RECEIVED,
 886                                      &tid_tx->state)) {
 887                         /* ignore duplicate response */
 888                         goto out;
 889                 }
 890
 891                 tid_tx->buf_size = buf_size;
 892
 893                 if (test_bit(HT_AGG_STATE_DRV_READY, &tid_tx->state))
 894                         ieee80211_agg_tx_operational(local, sta, tid);
 895
 896                 sta->ampdu_mlme.addba_req_num[tid] = 0;
 897
 898                 if (tid_tx->timeout) {
 899                         mod_timer(&tid_tx->session_timer,
 900                                   TU_TO_EXP_TIME(tid_tx->timeout));
 901                         tid_tx->last_tx = jiffies;
 902                 }
 903
 904         } else {
 905                 ___ieee80211_stop_tx_ba_session(sta, tid, WLAN_BACK_INITIATOR,
 906                                                 true);
 907         }
 908
 909  out:
 910         mutex_unlock(&sta->ampdu_mlme.mtx);
 911 }