Merge branch 'nfs-server-stable' of git://linux-nfs.org/~bfields/linux
[linux-2.6] / drivers / usb / core / urb.c
1 #include <linux/module.h>
2 #include <linux/string.h>
3 #include <linux/bitops.h>
4 #include <linux/slab.h>
5 #include <linux/init.h>
6 #include <linux/log2.h>
7 #include <linux/usb.h>
8 #include <linux/wait.h>
9 #include "hcd.h"
10
11 #define to_urb(d) container_of(d, struct urb, kref)
12
13 static void urb_destroy(struct kref *kref)
14 {
15         struct urb *urb = to_urb(kref);
16
17         if (urb->transfer_flags & URB_FREE_BUFFER)
18                 kfree(urb->transfer_buffer);
19
20         kfree(urb);
21 }
22
23 /**
24  * usb_init_urb - initializes a urb so that it can be used by a USB driver
25  * @urb: pointer to the urb to initialize
26  *
27  * Initializes a urb so that the USB subsystem can use it properly.
28  *
29  * If a urb is created with a call to usb_alloc_urb() it is not
30  * necessary to call this function.  Only use this if you allocate the
31  * space for a struct urb on your own.  If you call this function, be
32  * careful when freeing the memory for your urb that it is no longer in
33  * use by the USB core.
34  *
35  * Only use this function if you _really_ understand what you are doing.
36  */
37 void usb_init_urb(struct urb *urb)
38 {
39         if (urb) {
40                 memset(urb, 0, sizeof(*urb));
41                 kref_init(&urb->kref);
42                 INIT_LIST_HEAD(&urb->anchor_list);
43         }
44 }
45
46 /**
47  * usb_alloc_urb - creates a new urb for a USB driver to use
48  * @iso_packets: number of iso packets for this urb
49  * @mem_flags: the type of memory to allocate, see kmalloc() for a list of
50  *      valid options for this.
51  *
52  * Creates an urb for the USB driver to use, initializes a few internal
53  * structures, incrementes the usage counter, and returns a pointer to it.
54  *
55  * If no memory is available, NULL is returned.
56  *
57  * If the driver want to use this urb for interrupt, control, or bulk
58  * endpoints, pass '0' as the number of iso packets.
59  *
60  * The driver must call usb_free_urb() when it is finished with the urb.
61  */
62 struct urb *usb_alloc_urb(int iso_packets, gfp_t mem_flags)
63 {
64         struct urb *urb;
65
66         urb = kmalloc(sizeof(struct urb) +
67                 iso_packets * sizeof(struct usb_iso_packet_descriptor),
68                 mem_flags);
69         if (!urb) {
70                 err("alloc_urb: kmalloc failed");
71                 return NULL;
72         }
73         usb_init_urb(urb);
74         return urb;
75 }
76
77 /**
78  * usb_free_urb - frees the memory used by a urb when all users of it are finished
79  * @urb: pointer to the urb to free, may be NULL
80  *
81  * Must be called when a user of a urb is finished with it.  When the last user
82  * of the urb calls this function, the memory of the urb is freed.
83  *
84  * Note: The transfer buffer associated with the urb is not freed, that must be
85  * done elsewhere.
86  */
87 void usb_free_urb(struct urb *urb)
88 {
89         if (urb)
90                 kref_put(&urb->kref, urb_destroy);
91 }
92
93 /**
94  * usb_get_urb - increments the reference count of the urb
95  * @urb: pointer to the urb to modify, may be NULL
96  *
97  * This must be  called whenever a urb is transferred from a device driver to a
98  * host controller driver.  This allows proper reference counting to happen
99  * for urbs.
100  *
101  * A pointer to the urb with the incremented reference counter is returned.
102  */
103 struct urb * usb_get_urb(struct urb *urb)
104 {
105         if (urb)
106                 kref_get(&urb->kref);
107         return urb;
108 }
109
110 /**
111  * usb_anchor_urb - anchors an URB while it is processed
112  * @urb: pointer to the urb to anchor
113  * @anchor: pointer to the anchor
114  *
115  * This can be called to have access to URBs which are to be executed
116  * without bothering to track them
117  */
118 void usb_anchor_urb(struct urb *urb, struct usb_anchor *anchor)
119 {
120         unsigned long flags;
121
122         spin_lock_irqsave(&anchor->lock, flags);
123         usb_get_urb(urb);
124         list_add_tail(&urb->anchor_list, &anchor->urb_list);
125         urb->anchor = anchor;
126         spin_unlock_irqrestore(&anchor->lock, flags);
127 }
128 EXPORT_SYMBOL_GPL(usb_anchor_urb);
129
130 /**
131  * usb_unanchor_urb - unanchors an URB
132  * @urb: pointer to the urb to anchor
133  *
134  * Call this to stop the system keeping track of this URB
135  */
136 void usb_unanchor_urb(struct urb *urb)
137 {
138         unsigned long flags;
139         struct usb_anchor *anchor;
140
141         if (!urb)
142                 return;
143
144         anchor = urb->anchor;
145         if (!anchor)
146                 return;
147
148         spin_lock_irqsave(&anchor->lock, flags);
149         if (unlikely(anchor != urb->anchor)) {
150                 /* we've lost the race to another thread */
151                 spin_unlock_irqrestore(&anchor->lock, flags);
152                 return;
153         }
154         urb->anchor = NULL;
155         list_del(&urb->anchor_list);
156         spin_unlock_irqrestore(&anchor->lock, flags);
157         usb_put_urb(urb);
158         if (list_empty(&anchor->urb_list))
159                 wake_up(&anchor->wait);
160 }
161 EXPORT_SYMBOL_GPL(usb_unanchor_urb);
162
163 /*-------------------------------------------------------------------*/
164
165 /**
166  * usb_submit_urb - issue an asynchronous transfer request for an endpoint
167  * @urb: pointer to the urb describing the request
168  * @mem_flags: the type of memory to allocate, see kmalloc() for a list
169  *      of valid options for this.
170  *
171  * This submits a transfer request, and transfers control of the URB
172  * describing that request to the USB subsystem.  Request completion will
173  * be indicated later, asynchronously, by calling the completion handler.
174  * The three types of completion are success, error, and unlink
175  * (a software-induced fault, also called "request cancellation").  
176  *
177  * URBs may be submitted in interrupt context.
178  *
179  * The caller must have correctly initialized the URB before submitting
180  * it.  Functions such as usb_fill_bulk_urb() and usb_fill_control_urb() are
181  * available to ensure that most fields are correctly initialized, for
182  * the particular kind of transfer, although they will not initialize
183  * any transfer flags.
184  *
185  * Successful submissions return 0; otherwise this routine returns a
186  * negative error number.  If the submission is successful, the complete()
187  * callback from the URB will be called exactly once, when the USB core and
188  * Host Controller Driver (HCD) are finished with the URB.  When the completion
189  * function is called, control of the URB is returned to the device
190  * driver which issued the request.  The completion handler may then
191  * immediately free or reuse that URB.
192  *
193  * With few exceptions, USB device drivers should never access URB fields
194  * provided by usbcore or the HCD until its complete() is called.
195  * The exceptions relate to periodic transfer scheduling.  For both
196  * interrupt and isochronous urbs, as part of successful URB submission
197  * urb->interval is modified to reflect the actual transfer period used
198  * (normally some power of two units).  And for isochronous urbs,
199  * urb->start_frame is modified to reflect when the URB's transfers were
200  * scheduled to start.  Not all isochronous transfer scheduling policies
201  * will work, but most host controller drivers should easily handle ISO
202  * queues going from now until 10-200 msec into the future.
203  *
204  * For control endpoints, the synchronous usb_control_msg() call is
205  * often used (in non-interrupt context) instead of this call.
206  * That is often used through convenience wrappers, for the requests
207  * that are standardized in the USB 2.0 specification.  For bulk
208  * endpoints, a synchronous usb_bulk_msg() call is available.
209  *
210  * Request Queuing:
211  *
212  * URBs may be submitted to endpoints before previous ones complete, to
213  * minimize the impact of interrupt latencies and system overhead on data
214  * throughput.  With that queuing policy, an endpoint's queue would never
215  * be empty.  This is required for continuous isochronous data streams,
216  * and may also be required for some kinds of interrupt transfers. Such
217  * queuing also maximizes bandwidth utilization by letting USB controllers
218  * start work on later requests before driver software has finished the
219  * completion processing for earlier (successful) requests.
220  *
221  * As of Linux 2.6, all USB endpoint transfer queues support depths greater
222  * than one.  This was previously a HCD-specific behavior, except for ISO
223  * transfers.  Non-isochronous endpoint queues are inactive during cleanup
224  * after faults (transfer errors or cancellation).
225  *
226  * Reserved Bandwidth Transfers:
227  *
228  * Periodic transfers (interrupt or isochronous) are performed repeatedly,
229  * using the interval specified in the urb.  Submitting the first urb to
230  * the endpoint reserves the bandwidth necessary to make those transfers.
231  * If the USB subsystem can't allocate sufficient bandwidth to perform
232  * the periodic request, submitting such a periodic request should fail.
233  *
234  * Device drivers must explicitly request that repetition, by ensuring that
235  * some URB is always on the endpoint's queue (except possibly for short
236  * periods during completion callacks).  When there is no longer an urb
237  * queued, the endpoint's bandwidth reservation is canceled.  This means
238  * drivers can use their completion handlers to ensure they keep bandwidth
239  * they need, by reinitializing and resubmitting the just-completed urb
240  * until the driver longer needs that periodic bandwidth.
241  *
242  * Memory Flags:
243  *
244  * The general rules for how to decide which mem_flags to use
245  * are the same as for kmalloc.  There are four
246  * different possible values; GFP_KERNEL, GFP_NOFS, GFP_NOIO and
247  * GFP_ATOMIC.
248  *
249  * GFP_NOFS is not ever used, as it has not been implemented yet.
250  *
251  * GFP_ATOMIC is used when
252  *   (a) you are inside a completion handler, an interrupt, bottom half,
253  *       tasklet or timer, or
254  *   (b) you are holding a spinlock or rwlock (does not apply to
255  *       semaphores), or
256  *   (c) current->state != TASK_RUNNING, this is the case only after
257  *       you've changed it.
258  * 
259  * GFP_NOIO is used in the block io path and error handling of storage
260  * devices.
261  *
262  * All other situations use GFP_KERNEL.
263  *
264  * Some more specific rules for mem_flags can be inferred, such as
265  *  (1) start_xmit, timeout, and receive methods of network drivers must
266  *      use GFP_ATOMIC (they are called with a spinlock held);
267  *  (2) queuecommand methods of scsi drivers must use GFP_ATOMIC (also
268  *      called with a spinlock held);
269  *  (3) If you use a kernel thread with a network driver you must use
270  *      GFP_NOIO, unless (b) or (c) apply;
271  *  (4) after you have done a down() you can use GFP_KERNEL, unless (b) or (c)
272  *      apply or your are in a storage driver's block io path;
273  *  (5) USB probe and disconnect can use GFP_KERNEL unless (b) or (c) apply; and
274  *  (6) changing firmware on a running storage or net device uses
275  *      GFP_NOIO, unless b) or c) apply
276  *
277  */
278 int usb_submit_urb(struct urb *urb, gfp_t mem_flags)
279 {
280         int                             xfertype, max;
281         struct usb_device               *dev;
282         struct usb_host_endpoint        *ep;
283         int                             is_out;
284
285         if (!urb || urb->hcpriv || !urb->complete)
286                 return -EINVAL;
287         if (!(dev = urb->dev) || dev->state < USB_STATE_DEFAULT)
288                 return -ENODEV;
289
290         /* For now, get the endpoint from the pipe.  Eventually drivers
291          * will be required to set urb->ep directly and we will eliminate
292          * urb->pipe.
293          */
294         ep = (usb_pipein(urb->pipe) ? dev->ep_in : dev->ep_out)
295                         [usb_pipeendpoint(urb->pipe)];
296         if (!ep)
297                 return -ENOENT;
298
299         urb->ep = ep;
300         urb->status = -EINPROGRESS;
301         urb->actual_length = 0;
302
303         /* Lots of sanity checks, so HCDs can rely on clean data
304          * and don't need to duplicate tests
305          */
306         xfertype = usb_endpoint_type(&ep->desc);
307         if (xfertype == USB_ENDPOINT_XFER_CONTROL) {
308                 struct usb_ctrlrequest *setup =
309                                 (struct usb_ctrlrequest *) urb->setup_packet;
310
311                 if (!setup)
312                         return -ENOEXEC;
313                 is_out = !(setup->bRequestType & USB_DIR_IN) ||
314                                 !setup->wLength;
315         } else {
316                 is_out = usb_endpoint_dir_out(&ep->desc);
317         }
318
319         /* Cache the direction for later use */
320         urb->transfer_flags = (urb->transfer_flags & ~URB_DIR_MASK) |
321                         (is_out ? URB_DIR_OUT : URB_DIR_IN);
322
323         if (xfertype != USB_ENDPOINT_XFER_CONTROL &&
324                         dev->state < USB_STATE_CONFIGURED)
325                 return -ENODEV;
326
327         max = le16_to_cpu(ep->desc.wMaxPacketSize);
328         if (max <= 0) {
329                 dev_dbg(&dev->dev,
330                         "bogus endpoint ep%d%s in %s (bad maxpacket %d)\n",
331                         usb_endpoint_num(&ep->desc), is_out ? "out" : "in",
332                         __FUNCTION__, max);
333                 return -EMSGSIZE;
334         }
335
336         /* periodic transfers limit size per frame/uframe,
337          * but drivers only control those sizes for ISO.
338          * while we're checking, initialize return status.
339          */
340         if (xfertype == USB_ENDPOINT_XFER_ISOC) {
341                 int     n, len;
342
343                 /* "high bandwidth" mode, 1-3 packets/uframe? */
344                 if (dev->speed == USB_SPEED_HIGH) {
345                         int     mult = 1 + ((max >> 11) & 0x03);
346                         max &= 0x07ff;
347                         max *= mult;
348                 }
349
350                 if (urb->number_of_packets <= 0)                    
351                         return -EINVAL;
352                 for (n = 0; n < urb->number_of_packets; n++) {
353                         len = urb->iso_frame_desc[n].length;
354                         if (len < 0 || len > max) 
355                                 return -EMSGSIZE;
356                         urb->iso_frame_desc[n].status = -EXDEV;
357                         urb->iso_frame_desc[n].actual_length = 0;
358                 }
359         }
360
361         /* the I/O buffer must be mapped/unmapped, except when length=0 */
362         if (urb->transfer_buffer_length < 0)
363                 return -EMSGSIZE;
364
365 #ifdef DEBUG
366         /* stuff that drivers shouldn't do, but which shouldn't
367          * cause problems in HCDs if they get it wrong.
368          */
369         {
370         unsigned int    orig_flags = urb->transfer_flags;
371         unsigned int    allowed;
372
373         /* enforce simple/standard policy */
374         allowed = (URB_NO_TRANSFER_DMA_MAP | URB_NO_SETUP_DMA_MAP |
375                         URB_NO_INTERRUPT | URB_DIR_MASK);
376         switch (xfertype) {
377         case USB_ENDPOINT_XFER_BULK:
378                 if (is_out)
379                         allowed |= URB_ZERO_PACKET;
380                 /* FALLTHROUGH */
381         case USB_ENDPOINT_XFER_CONTROL:
382                 allowed |= URB_NO_FSBR; /* only affects UHCI */
383                 /* FALLTHROUGH */
384         default:                        /* all non-iso endpoints */
385                 if (!is_out)
386                         allowed |= URB_SHORT_NOT_OK;
387                 break;
388         case USB_ENDPOINT_XFER_ISOC:
389                 allowed |= URB_ISO_ASAP;
390                 break;
391         }
392         urb->transfer_flags &= allowed;
393
394         /* fail if submitter gave bogus flags */
395         if (urb->transfer_flags != orig_flags) {
396                 err("BOGUS urb flags, %x --> %x",
397                         orig_flags, urb->transfer_flags);
398                 return -EINVAL;
399         }
400         }
401 #endif
402         /*
403          * Force periodic transfer intervals to be legal values that are
404          * a power of two (so HCDs don't need to).
405          *
406          * FIXME want bus->{intr,iso}_sched_horizon values here.  Each HC
407          * supports different values... this uses EHCI/UHCI defaults (and
408          * EHCI can use smaller non-default values).
409          */
410         switch (xfertype) {
411         case USB_ENDPOINT_XFER_ISOC:
412         case USB_ENDPOINT_XFER_INT:
413                 /* too small? */
414                 if (urb->interval <= 0)
415                         return -EINVAL;
416                 /* too big? */
417                 switch (dev->speed) {
418                 case USB_SPEED_HIGH:    /* units are microframes */
419                         // NOTE usb handles 2^15
420                         if (urb->interval > (1024 * 8))
421                                 urb->interval = 1024 * 8;
422                         max = 1024 * 8;
423                         break;
424                 case USB_SPEED_FULL:    /* units are frames/msec */
425                 case USB_SPEED_LOW:
426                         if (xfertype == USB_ENDPOINT_XFER_INT) {
427                                 if (urb->interval > 255)
428                                         return -EINVAL;
429                                 // NOTE ohci only handles up to 32
430                                 max = 128;
431                         } else {
432                                 if (urb->interval > 1024)
433                                         urb->interval = 1024;
434                                 // NOTE usb and ohci handle up to 2^15
435                                 max = 1024;
436                         }
437                         break;
438                 default:
439                         return -EINVAL;
440                 }
441                 /* Round down to a power of 2, no more than max */
442                 urb->interval = min(max, 1 << ilog2(urb->interval));
443         }
444
445         return usb_hcd_submit_urb(urb, mem_flags);
446 }
447
448 /*-------------------------------------------------------------------*/
449
450 /**
451  * usb_unlink_urb - abort/cancel a transfer request for an endpoint
452  * @urb: pointer to urb describing a previously submitted request,
453  *      may be NULL
454  *
455  * This routine cancels an in-progress request.  URBs complete only once
456  * per submission, and may be canceled only once per submission.
457  * Successful cancellation means termination of @urb will be expedited
458  * and the completion handler will be called with a status code
459  * indicating that the request has been canceled (rather than any other
460  * code).
461  *
462  * This request is always asynchronous.  Success is indicated by
463  * returning -EINPROGRESS, at which time the URB will probably not yet
464  * have been given back to the device driver.  When it is eventually
465  * called, the completion function will see @urb->status == -ECONNRESET.
466  * Failure is indicated by usb_unlink_urb() returning any other value.
467  * Unlinking will fail when @urb is not currently "linked" (i.e., it was
468  * never submitted, or it was unlinked before, or the hardware is already
469  * finished with it), even if the completion handler has not yet run.
470  *
471  * Unlinking and Endpoint Queues:
472  *
473  * [The behaviors and guarantees described below do not apply to virtual
474  * root hubs but only to endpoint queues for physical USB devices.]
475  *
476  * Host Controller Drivers (HCDs) place all the URBs for a particular
477  * endpoint in a queue.  Normally the queue advances as the controller
478  * hardware processes each request.  But when an URB terminates with an
479  * error its queue generally stops (see below), at least until that URB's
480  * completion routine returns.  It is guaranteed that a stopped queue
481  * will not restart until all its unlinked URBs have been fully retired,
482  * with their completion routines run, even if that's not until some time
483  * after the original completion handler returns.  The same behavior and
484  * guarantee apply when an URB terminates because it was unlinked.
485  *
486  * Bulk and interrupt endpoint queues are guaranteed to stop whenever an
487  * URB terminates with any sort of error, including -ECONNRESET, -ENOENT,
488  * and -EREMOTEIO.  Control endpoint queues behave the same way except
489  * that they are not guaranteed to stop for -EREMOTEIO errors.  Queues
490  * for isochronous endpoints are treated differently, because they must
491  * advance at fixed rates.  Such queues do not stop when an URB
492  * encounters an error or is unlinked.  An unlinked isochronous URB may
493  * leave a gap in the stream of packets; it is undefined whether such
494  * gaps can be filled in.
495  *
496  * Note that early termination of an URB because a short packet was
497  * received will generate a -EREMOTEIO error if and only if the
498  * URB_SHORT_NOT_OK flag is set.  By setting this flag, USB device
499  * drivers can build deep queues for large or complex bulk transfers
500  * and clean them up reliably after any sort of aborted transfer by
501  * unlinking all pending URBs at the first fault.
502  *
503  * When a control URB terminates with an error other than -EREMOTEIO, it
504  * is quite likely that the status stage of the transfer will not take
505  * place.
506  */
507 int usb_unlink_urb(struct urb *urb)
508 {
509         if (!urb)
510                 return -EINVAL;
511         if (!urb->dev)
512                 return -ENODEV;
513         if (!urb->ep)
514                 return -EIDRM;
515         return usb_hcd_unlink_urb(urb, -ECONNRESET);
516 }
517
518 /**
519  * usb_kill_urb - cancel a transfer request and wait for it to finish
520  * @urb: pointer to URB describing a previously submitted request,
521  *      may be NULL
522  *
523  * This routine cancels an in-progress request.  It is guaranteed that
524  * upon return all completion handlers will have finished and the URB
525  * will be totally idle and available for reuse.  These features make
526  * this an ideal way to stop I/O in a disconnect() callback or close()
527  * function.  If the request has not already finished or been unlinked
528  * the completion handler will see urb->status == -ENOENT.
529  *
530  * While the routine is running, attempts to resubmit the URB will fail
531  * with error -EPERM.  Thus even if the URB's completion handler always
532  * tries to resubmit, it will not succeed and the URB will become idle.
533  *
534  * This routine may not be used in an interrupt context (such as a bottom
535  * half or a completion handler), or when holding a spinlock, or in other
536  * situations where the caller can't schedule().
537  */
538 void usb_kill_urb(struct urb *urb)
539 {
540         static DEFINE_MUTEX(reject_mutex);
541
542         might_sleep();
543         if (!(urb && urb->dev && urb->ep))
544                 return;
545         mutex_lock(&reject_mutex);
546         ++urb->reject;
547         mutex_unlock(&reject_mutex);
548
549         usb_hcd_unlink_urb(urb, -ENOENT);
550         wait_event(usb_kill_urb_queue, atomic_read(&urb->use_count) == 0);
551
552         mutex_lock(&reject_mutex);
553         --urb->reject;
554         mutex_unlock(&reject_mutex);
555 }
556
557 /**
558  * usb_kill_anchored_urbs - cancel transfer requests en masse
559  * @anchor: anchor the requests are bound to
560  *
561  * this allows all outstanding URBs to be killed starting
562  * from the back of the queue
563  */
564 void usb_kill_anchored_urbs(struct usb_anchor *anchor)
565 {
566         struct urb *victim;
567
568         spin_lock_irq(&anchor->lock);
569         while (!list_empty(&anchor->urb_list)) {
570                 victim = list_entry(anchor->urb_list.prev, struct urb, anchor_list);
571                 /* we must make sure the URB isn't freed before we kill it*/
572                 usb_get_urb(victim);
573                 spin_unlock_irq(&anchor->lock);
574                 /* this will unanchor the URB */
575                 usb_kill_urb(victim);
576                 usb_put_urb(victim);
577                 spin_lock_irq(&anchor->lock);
578         }
579         spin_unlock_irq(&anchor->lock);
580 }
581 EXPORT_SYMBOL_GPL(usb_kill_anchored_urbs);
582
583 /**
584  * usb_wait_anchor_empty_timeout - wait for an anchor to be unused
585  * @anchor: the anchor you want to become unused
586  * @timeout: how long you are willing to wait in milliseconds
587  *
588  * Call this is you want to be sure all an anchor's
589  * URBs have finished
590  */
591 int usb_wait_anchor_empty_timeout(struct usb_anchor *anchor,
592                                   unsigned int timeout)
593 {
594         return wait_event_timeout(anchor->wait, list_empty(&anchor->urb_list),
595                                   msecs_to_jiffies(timeout));
596 }
597 EXPORT_SYMBOL_GPL(usb_wait_anchor_empty_timeout);
598
599 EXPORT_SYMBOL(usb_init_urb);
600 EXPORT_SYMBOL(usb_alloc_urb);
601 EXPORT_SYMBOL(usb_free_urb);
602 EXPORT_SYMBOL(usb_get_urb);
603 EXPORT_SYMBOL(usb_submit_urb);
604 EXPORT_SYMBOL(usb_unlink_urb);
605 EXPORT_SYMBOL(usb_kill_urb);