Merge branch 'for-linus' of master.kernel.org:/pub/scm/linux/kernel/git/roland/infiniband
[linux-2.6] / drivers / net / bonding / bond_main.c
1 /*
2  * originally based on the dummy device.
3  *
4  * Copyright 1999, Thomas Davis, tadavis@lbl.gov.
5  * Licensed under the GPL. Based on dummy.c, and eql.c devices.
6  *
7  * bonding.c: an Ethernet Bonding driver
8  *
9  * This is useful to talk to a Cisco EtherChannel compatible equipment:
10  *      Cisco 5500
11  *      Sun Trunking (Solaris)
12  *      Alteon AceDirector Trunks
13  *      Linux Bonding
14  *      and probably many L2 switches ...
15  *
16  * How it works:
17  *    ifconfig bond0 ipaddress netmask up
18  *      will setup a network device, with an ip address.  No mac address
19  *      will be assigned at this time.  The hw mac address will come from
20  *      the first slave bonded to the channel.  All slaves will then use
21  *      this hw mac address.
22  *
23  *    ifconfig bond0 down
24  *         will release all slaves, marking them as down.
25  *
26  *    ifenslave bond0 eth0
27  *      will attach eth0 to bond0 as a slave.  eth0 hw mac address will either
28  *      a: be used as initial mac address
29  *      b: if a hw mac address already is there, eth0's hw mac address
30  *         will then be set from bond0.
31  *
32  * v0.1 - first working version.
33  * v0.2 - changed stats to be calculated by summing slaves stats.
34  *
35  * Changes:
36  * Arnaldo Carvalho de Melo <acme@conectiva.com.br>
37  * - fix leaks on failure at bond_init
38  *
39  * 2000/09/30 - Willy Tarreau <willy at meta-x.org>
40  *     - added trivial code to release a slave device.
41  *     - fixed security bug (CAP_NET_ADMIN not checked)
42  *     - implemented MII link monitoring to disable dead links :
43  *       All MII capable slaves are checked every <miimon> milliseconds
44  *       (100 ms seems good). This value can be changed by passing it to
45  *       insmod. A value of zero disables the monitoring (default).
46  *     - fixed an infinite loop in bond_xmit_roundrobin() when there's no
47  *       good slave.
48  *     - made the code hopefully SMP safe
49  *
50  * 2000/10/03 - Willy Tarreau <willy at meta-x.org>
51  *     - optimized slave lists based on relevant suggestions from Thomas Davis
52  *     - implemented active-backup method to obtain HA with two switches:
53  *       stay as long as possible on the same active interface, while we
54  *       also monitor the backup one (MII link status) because we want to know
55  *       if we are able to switch at any time. ( pass "mode=1" to insmod )
56  *     - lots of stress testings because we need it to be more robust than the
57  *       wires ! :->
58  *
59  * 2000/10/09 - Willy Tarreau <willy at meta-x.org>
60  *     - added up and down delays after link state change.
61  *     - optimized the slaves chaining so that when we run forward, we never
62  *       repass through the bond itself, but we can find it by searching
63  *       backwards. Renders the deletion more difficult, but accelerates the
64  *       scan.
65  *     - smarter enslaving and releasing.
66  *     - finer and more robust SMP locking
67  *
68  * 2000/10/17 - Willy Tarreau <willy at meta-x.org>
69  *     - fixed two potential SMP race conditions
70  *
71  * 2000/10/18 - Willy Tarreau <willy at meta-x.org>
72  *     - small fixes to the monitoring FSM in case of zero delays
73  * 2000/11/01 - Willy Tarreau <willy at meta-x.org>
74  *     - fixed first slave not automatically used in trunk mode.
75  * 2000/11/10 : spelling of "EtherChannel" corrected.
76  * 2000/11/13 : fixed a race condition in case of concurrent accesses to ioctl().
77  * 2000/12/16 : fixed improper usage of rtnl_exlock_nowait().
78  *
79  * 2001/1/3 - Chad N. Tindel <ctindel at ieee dot org>
80  *     - The bonding driver now simulates MII status monitoring, just like
81  *       a normal network device.  It will show that the link is down iff
82  *       every slave in the bond shows that their links are down.  If at least
83  *       one slave is up, the bond's MII status will appear as up.
84  *
85  * 2001/2/7 - Chad N. Tindel <ctindel at ieee dot org>
86  *     - Applications can now query the bond from user space to get
87  *       information which may be useful.  They do this by calling
88  *       the BOND_INFO_QUERY ioctl.  Once the app knows how many slaves
89  *       are in the bond, it can call the BOND_SLAVE_INFO_QUERY ioctl to
90  *       get slave specific information (# link failures, etc).  See
91  *       <linux/if_bonding.h> for more details.  The structs of interest
92  *       are ifbond and ifslave.
93  *
94  * 2001/4/5 - Chad N. Tindel <ctindel at ieee dot org>
95  *     - Ported to 2.4 Kernel
96  *
97  * 2001/5/2 - Jeffrey E. Mast <jeff at mastfamily dot com>
98  *     - When a device is detached from a bond, the slave device is no longer
99  *       left thinking that is has a master.
100  *
101  * 2001/5/16 - Jeffrey E. Mast <jeff at mastfamily dot com>
102  *     - memset did not appropriately initialized the bond rw_locks. Used
103  *       rwlock_init to initialize to unlocked state to prevent deadlock when
104  *       first attempting a lock
105  *     - Called SET_MODULE_OWNER for bond device
106  *
107  * 2001/5/17 - Tim Anderson <tsa at mvista.com>
108  *     - 2 paths for releasing for slave release; 1 through ioctl
109  *       and 2) through close. Both paths need to release the same way.
110  *     - the free slave in bond release is changing slave status before
111  *       the free. The netdev_set_master() is intended to change slave state
112  *       so it should not be done as part of the release process.
113  *     - Simple rule for slave state at release: only the active in A/B and
114  *       only one in the trunked case.
115  *
116  * 2001/6/01 - Tim Anderson <tsa at mvista.com>
117  *     - Now call dev_close when releasing a slave so it doesn't screw up
118  *       out routing table.
119  *
120  * 2001/6/01 - Chad N. Tindel <ctindel at ieee dot org>
121  *     - Added /proc support for getting bond and slave information.
122  *       Information is in /proc/net/<bond device>/info.
123  *     - Changed the locking when calling bond_close to prevent deadlock.
124  *
125  * 2001/8/05 - Janice Girouard <girouard at us.ibm.com>
126  *     - correct problem where refcnt of slave is not incremented in bond_ioctl
127  *       so the system hangs when halting.
128  *     - correct locking problem when unable to malloc in bond_enslave.
129  *     - adding bond_xmit_xor logic.
130  *     - adding multiple bond device support.
131  *
132  * 2001/8/13 - Erik Habbinga <erik_habbinga at hp dot com>
133  *     - correct locking problem with rtnl_exlock_nowait
134  *
135  * 2001/8/23 - Janice Girouard <girouard at us.ibm.com>
136  *     - bzero initial dev_bonds, to correct oops
137  *     - convert SIOCDEVPRIVATE to new MII ioctl calls
138  *
139  * 2001/9/13 - Takao Indoh <indou dot takao at jp dot fujitsu dot com>
140  *     - Add the BOND_CHANGE_ACTIVE ioctl implementation
141  *
142  * 2001/9/14 - Mark Huth <mhuth at mvista dot com>
143  *     - Change MII_LINK_READY to not check for end of auto-negotiation,
144  *       but only for an up link.
145  *
146  * 2001/9/20 - Chad N. Tindel <ctindel at ieee dot org>
147  *     - Add the device field to bonding_t.  Previously the net_device
148  *       corresponding to a bond wasn't available from the bonding_t
149  *       structure.
150  *
151  * 2001/9/25 - Janice Girouard <girouard at us.ibm.com>
152  *     - add arp_monitor for active backup mode
153  *
154  * 2001/10/23 - Takao Indoh <indou dot takao at jp dot fujitsu dot com>
155  *     - Various memory leak fixes
156  *
157  * 2001/11/5 - Mark Huth <mark dot huth at mvista dot com>
158  *     - Don't take rtnl lock in bond_mii_monitor as it deadlocks under
159  *       certain hotswap conditions.
160  *       Note:  this same change may be required in bond_arp_monitor ???
161  *     - Remove possibility of calling bond_sethwaddr with NULL slave_dev ptr
162  *     - Handle hot swap ethernet interface deregistration events to remove
163  *       kernel oops following hot swap of enslaved interface
164  *
165  * 2002/1/2 - Chad N. Tindel <ctindel at ieee dot org>
166  *     - Restore original slave flags at release time.
167  *
168  * 2002/02/18 - Erik Habbinga <erik_habbinga at hp dot com>
169  *     - bond_release(): calling kfree on our_slave after call to
170  *       bond_restore_slave_flags, not before
171  *     - bond_enslave(): saving slave flags into original_flags before
172  *       call to netdev_set_master, so the IFF_SLAVE flag doesn't end
173  *       up in original_flags
174  *
175  * 2002/04/05 - Mark Smith <mark.smith at comdev dot cc> and
176  *              Steve Mead <steve.mead at comdev dot cc>
177  *     - Port Gleb Natapov's multicast support patchs from 2.4.12
178  *       to 2.4.18 adding support for multicast.
179  *
180  * 2002/06/10 - Tony Cureington <tony.cureington * hp_com>
181  *     - corrected uninitialized pointer (ifr.ifr_data) in bond_check_dev_link;
182  *       actually changed function to use MIIPHY, then MIIREG, and finally
183  *       ETHTOOL to determine the link status
184  *     - fixed bad ifr_data pointer assignments in bond_ioctl
185  *     - corrected mode 1 being reported as active-backup in bond_get_info;
186  *       also added text to distinguish type of load balancing (rr or xor)
187  *     - change arp_ip_target module param from "1-12s" (array of 12 ptrs)
188  *       to "s" (a single ptr)
189  *
190  * 2002/08/30 - Jay Vosburgh <fubar at us dot ibm dot com>
191  *     - Removed acquisition of xmit_lock in set_multicast_list; caused
192  *       deadlock on SMP (lock is held by caller).
193  *     - Revamped SIOCGMIIPHY, SIOCGMIIREG portion of bond_check_dev_link().
194  *
195  * 2002/09/18 - Jay Vosburgh <fubar at us dot ibm dot com>
196  *     - Fixed up bond_check_dev_link() (and callers): removed some magic
197  *       numbers, banished local MII_ defines, wrapped ioctl calls to
198  *       prevent EFAULT errors
199  *
200  * 2002/9/30 - Jay Vosburgh <fubar at us dot ibm dot com>
201  *     - make sure the ip target matches the arp_target before saving the
202  *       hw address.
203  *
204  * 2002/9/30 - Dan Eisner <eisner at 2robots dot com>
205  *     - make sure my_ip is set before taking down the link, since
206  *       not all switches respond if the source ip is not set.
207  *
208  * 2002/10/8 - Janice Girouard <girouard at us dot ibm dot com>
209  *     - read in the local ip address when enslaving a device
210  *     - add primary support
211  *     - make sure 2*arp_interval has passed when a new device
212  *       is brought on-line before taking it down.
213  *
214  * 2002/09/11 - Philippe De Muyter <phdm at macqel dot be>
215  *     - Added bond_xmit_broadcast logic.
216  *     - Added bond_mode() support function.
217  *
218  * 2002/10/26 - Laurent Deniel <laurent.deniel at free.fr>
219  *     - allow to register multicast addresses only on active slave
220  *       (useful in active-backup mode)
221  *     - add multicast module parameter
222  *     - fix deletion of multicast groups after unloading module
223  *
224  * 2002/11/06 - Kameshwara Rayaprolu <kameshwara.rao * wipro_com>
225  *     - Changes to prevent panic from closing the device twice; if we close
226  *       the device in bond_release, we must set the original_flags to down
227  *       so it won't be closed again by the network layer.
228  *
229  * 2002/11/07 - Tony Cureington <tony.cureington * hp_com>
230  *     - Fix arp_target_hw_addr memory leak
231  *     - Created activebackup_arp_monitor function to handle arp monitoring
232  *       in active backup mode - the bond_arp_monitor had several problems...
233  *       such as allowing slaves to tx arps sequentially without any delay
234  *       for a response
235  *     - Renamed bond_arp_monitor to loadbalance_arp_monitor and re-wrote
236  *       this function to just handle arp monitoring in load-balancing mode;
237  *       it is a lot more compact now
238  *     - Changes to ensure one and only one slave transmits in active-backup
239  *       mode
240  *     - Robustesize parameters; warn users about bad combinations of
241  *       parameters; also if miimon is specified and a network driver does
242  *       not support MII or ETHTOOL, inform the user of this
243  *     - Changes to support link_failure_count when in arp monitoring mode
244  *     - Fix up/down delay reported in /proc
245  *     - Added version; log version; make version available from "modinfo -d"
246  *     - Fixed problem in bond_check_dev_link - if the first IOCTL (SIOCGMIIPH)
247  *       failed, the ETHTOOL ioctl never got a chance
248  *
249  * 2002/11/16 - Laurent Deniel <laurent.deniel at free.fr>
250  *     - fix multicast handling in activebackup_arp_monitor
251  *     - remove one unnecessary and confusing curr_active_slave == slave test
252  *       in activebackup_arp_monitor
253  *
254  *  2002/11/17 - Laurent Deniel <laurent.deniel at free.fr>
255  *     - fix bond_slave_info_query when slave_id = num_slaves
256  *
257  *  2002/11/19 - Janice Girouard <girouard at us dot ibm dot com>
258  *     - correct ifr_data reference.  Update ifr_data reference
259  *       to mii_ioctl_data struct values to avoid confusion.
260  *
261  *  2002/11/22 - Bert Barbe <bert.barbe at oracle dot com>
262  *      - Add support for multiple arp_ip_target
263  *
264  *  2002/12/13 - Jay Vosburgh <fubar at us dot ibm dot com>
265  *      - Changed to allow text strings for mode and multicast, e.g.,
266  *        insmod bonding mode=active-backup.  The numbers still work.
267  *        One change: an invalid choice will cause module load failure,
268  *        rather than the previous behavior of just picking one.
269  *      - Minor cleanups; got rid of dup ctype stuff, atoi function
270  *
271  * 2003/02/07 - Jay Vosburgh <fubar at us dot ibm dot com>
272  *      - Added use_carrier module parameter that causes miimon to
273  *        use netif_carrier_ok() test instead of MII/ETHTOOL ioctls.
274  *      - Minor cleanups; consolidated ioctl calls to one function.
275  *
276  * 2003/02/07 - Tony Cureington <tony.cureington * hp_com>
277  *      - Fix bond_mii_monitor() logic error that could result in
278  *        bonding round-robin mode ignoring links after failover/recovery
279  *
280  * 2003/03/17 - Jay Vosburgh <fubar at us dot ibm dot com>
281  *      - kmalloc fix (GFP_KERNEL to GFP_ATOMIC) reported by
282  *        Shmulik dot Hen at intel.com.
283  *      - Based on discussion on mailing list, changed use of
284  *        update_slave_cnt(), created wrapper functions for adding/removing
285  *        slaves, changed bond_xmit_xor() to check slave_cnt instead of
286  *        checking slave and slave->dev (which only worked by accident).
287  *      - Misc code cleanup: get arp_send() prototype from header file,
288  *        add max_bonds to bonding.txt.
289  *
290  * 2003/03/18 - Tsippy Mendelson <tsippy.mendelson at intel dot com> and
291  *              Shmulik Hen <shmulik.hen at intel dot com>
292  *      - Make sure only bond_attach_slave() and bond_detach_slave() can
293  *        manipulate the slave list, including slave_cnt, even when in
294  *        bond_release_all().
295  *      - Fixed hang in bond_release() with traffic running:
296  *        netdev_set_master() must not be called from within the bond lock.
297  *
298  * 2003/03/18 - Tsippy Mendelson <tsippy.mendelson at intel dot com> and
299  *              Shmulik Hen <shmulik.hen at intel dot com>
300  *      - Fixed hang in bond_enslave() with traffic running:
301  *        netdev_set_master() must not be called from within the bond lock.
302  *
303  * 2003/03/18 - Amir Noam <amir.noam at intel dot com>
304  *      - Added support for getting slave's speed and duplex via ethtool.
305  *        Needed for 802.3ad and other future modes.
306  *
307  * 2003/03/18 - Tsippy Mendelson <tsippy.mendelson at intel dot com> and
308  *              Shmulik Hen <shmulik.hen at intel dot com>
309  *      - Enable support of modes that need to use the unique mac address of
310  *        each slave.
311  *        * bond_enslave(): Moved setting the slave's mac address, and
312  *          openning it, from the application to the driver. This breaks
313  *          backward comaptibility with old versions of ifenslave that open
314  *           the slave before enalsving it !!!.
315  *        * bond_release(): The driver also takes care of closing the slave
316  *          and restoring its original mac address.
317  *      - Removed the code that restores all base driver's flags.
318  *        Flags are automatically restored once all undo stages are done
319  *        properly.
320  *      - Block possibility of enslaving before the master is up. This
321  *        prevents putting the system in an unstable state.
322  *
323  * 2003/03/18 - Amir Noam <amir.noam at intel dot com>,
324  *              Tsippy Mendelson <tsippy.mendelson at intel dot com> and
325  *              Shmulik Hen <shmulik.hen at intel dot com>
326  *      - Added support for IEEE 802.3ad Dynamic link aggregation mode.
327  *
328  * 2003/05/01 - Amir Noam <amir.noam at intel dot com>
329  *      - Added ABI version control to restore compatibility between
330  *        new/old ifenslave and new/old bonding.
331  *
332  * 2003/05/01 - Shmulik Hen <shmulik.hen at intel dot com>
333  *      - Fixed bug in bond_release_all(): save old value of curr_active_slave
334  *        before setting it to NULL.
335  *      - Changed driver versioning scheme to include version number instead
336  *        of release date (that is already in another field). There are 3
337  *        fields X.Y.Z where:
338  *              X - Major version - big behavior changes
339  *              Y - Minor version - addition of features
340  *              Z - Extra version - minor changes and bug fixes
341  *        The current version is 1.0.0 as a base line.
342  *
343  * 2003/05/01 - Tsippy Mendelson <tsippy.mendelson at intel dot com> and
344  *              Amir Noam <amir.noam at intel dot com>
345  *      - Added support for lacp_rate module param.
346  *      - Code beautification and style changes (mainly in comments).
347  *        new version - 1.0.1
348  *
349  * 2003/05/01 - Shmulik Hen <shmulik.hen at intel dot com>
350  *      - Based on discussion on mailing list, changed locking scheme
351  *        to use lock/unlock or lock_bh/unlock_bh appropriately instead
352  *        of lock_irqsave/unlock_irqrestore. The new scheme helps exposing
353  *        hidden bugs and solves system hangs that occurred due to the fact
354  *        that holding lock_irqsave doesn't prevent softirqs from running.
355  *        This also increases total throughput since interrupts are not
356  *        blocked on each transmitted packets or monitor timeout.
357  *        new version - 2.0.0
358  *
359  * 2003/05/01 - Shmulik Hen <shmulik.hen at intel dot com>
360  *      - Added support for Transmit load balancing mode.
361  *      - Concentrate all assignments of curr_active_slave to a single point
362  *        so specific modes can take actions when the primary adapter is
363  *        changed.
364  *      - Take the updelay parameter into consideration during bond_enslave
365  *        since some adapters loose their link during setting the device.
366  *      - Renamed bond_3ad_link_status_changed() to
367  *        bond_3ad_handle_link_change() for compatibility with TLB.
368  *        new version - 2.1.0
369  *
370  * 2003/05/01 - Tsippy Mendelson <tsippy.mendelson at intel dot com>
371  *      - Added support for Adaptive load balancing mode which is
372  *        equivalent to Transmit load balancing + Receive load balancing.
373  *        new version - 2.2.0
374  *
375  * 2003/05/15 - Jay Vosburgh <fubar at us dot ibm dot com>
376  *      - Applied fix to activebackup_arp_monitor posted to bonding-devel
377  *        by Tony Cureington <tony.cureington * hp_com>.  Fixes ARP
378  *        monitor endless failover bug.  Version to 2.2.10
379  *
380  * 2003/05/20 - Amir Noam <amir.noam at intel dot com>
381  *      - Fixed bug in ABI version control - Don't commit to a specific
382  *        ABI version if receiving unsupported ioctl commands.
383  *
384  * 2003/05/22 - Jay Vosburgh <fubar at us dot ibm dot com>
385  *      - Fix ifenslave -c causing bond to loose existing routes;
386  *        added bond_set_mac_address() that doesn't require the
387  *        bond to be down.
388  *      - In conjunction with fix for ifenslave -c, in
389  *        bond_change_active(), changing to the already active slave
390  *        is no longer an error (it successfully does nothing).
391  *
392  * 2003/06/30 - Amir Noam <amir.noam at intel dot com>
393  *      - Fixed bond_change_active() for ALB/TLB modes.
394  *        Version to 2.2.14.
395  *
396  * 2003/07/29 - Amir Noam <amir.noam at intel dot com>
397  *      - Fixed ARP monitoring bug.
398  *        Version to 2.2.15.
399  *
400  * 2003/07/31 - Willy Tarreau <willy at ods dot org>
401  *      - Fixed kernel panic when using ARP monitoring without
402  *        setting bond's IP address.
403  *        Version to 2.2.16.
404  *
405  * 2003/08/06 - Amir Noam <amir.noam at intel dot com>
406  *      - Back port from 2.6: use alloc_netdev(); fix /proc handling;
407  *        made stats a part of bond struct so no need to allocate
408  *        and free it separately; use standard list operations instead
409  *        of pre-allocated array of bonds.
410  *        Version to 2.3.0.
411  *
412  * 2003/08/07 - Jay Vosburgh <fubar at us dot ibm dot com>,
413  *             Amir Noam <amir.noam at intel dot com> and
414  *             Shmulik Hen <shmulik.hen at intel dot com>
415  *      - Propagating master's settings: Distinguish between modes that
416  *        use a primary slave from those that don't, and propagate settings
417  *        accordingly; Consolidate change_active opeartions and add
418  *        reselect_active and find_best opeartions; Decouple promiscuous
419  *        handling from the multicast mode setting; Add support for changing
420  *        HW address and MTU with proper unwind; Consolidate procfs code,
421  *        add CHANGENAME handler; Enhance netdev notification handling.
422  *        Version to 2.4.0.
423  *
424  * 2003/09/15 - Stephen Hemminger <shemminger at osdl dot org>,
425  *             Amir Noam <amir.noam at intel dot com>
426  *      - Convert /proc to seq_file interface.
427  *        Change /proc/net/bondX/info to /proc/net/bonding/bondX.
428  *        Set version to 2.4.1.
429  *
430  * 2003/11/20 - Amir Noam <amir.noam at intel dot com>
431  *      - Fix /proc creation/destruction.
432  *
433  * 2003/12/01 - Shmulik Hen <shmulik.hen at intel dot com>
434  *      - Massive cleanup - Set version to 2.5.0
435  *        Code changes:
436  *        o Consolidate format of prints and debug prints.
437  *        o Remove bonding_t/slave_t typedefs and consolidate all casts.
438  *        o Remove dead code and unnecessary checks.
439  *        o Consolidate starting/stopping timers.
440  *        o Consolidate handling of primary module param throughout the code.
441  *        o Removed multicast module param support - all settings are done
442  *          according to mode.
443  *        o Slave list iteration - bond is no longer part of the list,
444  *          added cyclic list iteration macros.
445  *        o Consolidate error handling in all xmit functions.
446  *        Style changes:
447  *        o Consolidate function naming and declarations.
448  *        o Consolidate function params and local variables names.
449  *        o Consolidate return values.
450  *        o Consolidate curly braces.
451  *        o Consolidate conditionals format.
452  *        o Change struct member names and types.
453  *        o Chomp trailing spaces, remove empty lines, fix indentations.
454  *        o Re-organize code according to context.
455  *
456  * 2003/12/30 - Amir Noam <amir.noam at intel dot com>
457  *      - Fixed: Cannot remove and re-enslave the original active slave.
458  *      - Fixed: Releasing the original active slave causes mac address
459  *               duplication.
460  *      - Add support for slaves that use ethtool_ops.
461  *        Set version to 2.5.3.
462  *
463  * 2004/01/05 - Amir Noam <amir.noam at intel dot com>
464  *      - Save bonding parameters per bond instead of using the global values.
465  *        Set version to 2.5.4.
466  *
467  * 2004/01/14 - Shmulik Hen <shmulik.hen at intel dot com>
468  *      - Enhance VLAN support:
469  *        * Add support for VLAN hardware acceleration capable slaves.
470  *        * Add capability to tag self generated packets in ALB/TLB modes.
471  *        Set version to 2.6.0.
472  * 2004/10/29 - Mitch Williams <mitch.a.williams at intel dot com>
473  *      - Fixed bug when unloading module while using 802.3ad.  If
474  *        spinlock debugging is turned on, this causes a stack dump.
475  *        Solution is to move call to dev_remove_pack outside of the
476  *        spinlock.
477  *        Set version to 2.6.1.
478  * 2005/06/05 - Jay Vosburgh <fubar@us.ibm.com>
479  *      - Support for generating gratuitous ARPs in active-backup mode.
480  *        Includes support for VLAN tagging all bonding-generated ARPs
481  *        as needed.  Set version to 2.6.2.
482  * 2005/06/08 - Jason Gabler <jygabler at lbl dot gov>
483  *      - alternate hashing policy support for mode 2
484  *        * Added kernel parameter "xmit_hash_policy" to allow the selection
485  *          of different hashing policies for mode 2.  The original mode 2
486  *          policy is the default, now found in xmit_hash_policy_layer2().
487  *        * Added xmit_hash_policy_layer34()
488  *      - Modified by Jay Vosburgh <fubar@us.ibm.com> to also support mode 4.
489  *        Set version to 2.6.3.
490  * 2005/09/26 - Jay Vosburgh <fubar@us.ibm.com>
491  *      - Removed backwards compatibility for old ifenslaves.  Version 2.6.4.
492  */
493
494 //#define BONDING_DEBUG 1
495
496 #include <linux/config.h>
497 #include <linux/kernel.h>
498 #include <linux/module.h>
499 #include <linux/sched.h>
500 #include <linux/types.h>
501 #include <linux/fcntl.h>
502 #include <linux/interrupt.h>
503 #include <linux/ptrace.h>
504 #include <linux/ioport.h>
505 #include <linux/in.h>
506 #include <net/ip.h>
507 #include <linux/ip.h>
508 #include <linux/tcp.h>
509 #include <linux/udp.h>
510 #include <linux/slab.h>
511 #include <linux/string.h>
512 #include <linux/init.h>
513 #include <linux/timer.h>
514 #include <linux/socket.h>
515 #include <linux/ctype.h>
516 #include <linux/inet.h>
517 #include <linux/bitops.h>
518 #include <asm/system.h>
519 #include <asm/io.h>
520 #include <asm/dma.h>
521 #include <asm/uaccess.h>
522 #include <linux/errno.h>
523 #include <linux/netdevice.h>
524 #include <linux/inetdevice.h>
525 #include <linux/etherdevice.h>
526 #include <linux/skbuff.h>
527 #include <net/sock.h>
528 #include <linux/rtnetlink.h>
529 #include <linux/proc_fs.h>
530 #include <linux/seq_file.h>
531 #include <linux/smp.h>
532 #include <linux/if_ether.h>
533 #include <net/arp.h>
534 #include <linux/mii.h>
535 #include <linux/ethtool.h>
536 #include <linux/if_vlan.h>
537 #include <linux/if_bonding.h>
538 #include <net/route.h>
539 #include "bonding.h"
540 #include "bond_3ad.h"
541 #include "bond_alb.h"
542
543 /*---------------------------- Module parameters ----------------------------*/
544
545 /* monitor all links that often (in milliseconds). <=0 disables monitoring */
546 #define BOND_LINK_MON_INTERV    0
547 #define BOND_LINK_ARP_INTERV    0
548
549 static int max_bonds    = BOND_DEFAULT_MAX_BONDS;
550 static int miimon       = BOND_LINK_MON_INTERV;
551 static int updelay      = 0;
552 static int downdelay    = 0;
553 static int use_carrier  = 1;
554 static char *mode       = NULL;
555 static char *primary    = NULL;
556 static char *lacp_rate  = NULL;
557 static char *xmit_hash_policy = NULL;
558 static int arp_interval = BOND_LINK_ARP_INTERV;
559 static char *arp_ip_target[BOND_MAX_ARP_TARGETS] = { NULL, };
560
561 module_param(max_bonds, int, 0);
562 MODULE_PARM_DESC(max_bonds, "Max number of bonded devices");
563 module_param(miimon, int, 0);
564 MODULE_PARM_DESC(miimon, "Link check interval in milliseconds");
565 module_param(updelay, int, 0);
566 MODULE_PARM_DESC(updelay, "Delay before considering link up, in milliseconds");
567 module_param(downdelay, int, 0);
568 MODULE_PARM_DESC(downdelay, "Delay before considering link down, in milliseconds");
569 module_param(use_carrier, int, 0);
570 MODULE_PARM_DESC(use_carrier, "Use netif_carrier_ok (vs MII ioctls) in miimon; 0 for off, 1 for on (default)");
571 module_param(mode, charp, 0);
572 MODULE_PARM_DESC(mode, "Mode of operation : 0 for round robin, 1 for active-backup, 2 for xor");
573 module_param(primary, charp, 0);
574 MODULE_PARM_DESC(primary, "Primary network device to use");
575 module_param(lacp_rate, charp, 0);
576 MODULE_PARM_DESC(lacp_rate, "LACPDU tx rate to request from 802.3ad partner (slow/fast)");
577 module_param(xmit_hash_policy, charp, 0);
578 MODULE_PARM_DESC(xmit_hash_policy, "XOR hashing method : 0 for layer 2 (default), 1 for layer 3+4");
579 module_param(arp_interval, int, 0);
580 MODULE_PARM_DESC(arp_interval, "arp interval in milliseconds");
581 module_param_array(arp_ip_target, charp, NULL, 0);
582 MODULE_PARM_DESC(arp_ip_target, "arp targets in n.n.n.n form");
583
584 /*----------------------------- Global variables ----------------------------*/
585
586 static const char *version =
587         DRV_DESCRIPTION ": v" DRV_VERSION " (" DRV_RELDATE ")\n";
588
589 static LIST_HEAD(bond_dev_list);
590
591 #ifdef CONFIG_PROC_FS
592 static struct proc_dir_entry *bond_proc_dir = NULL;
593 #endif
594
595 static u32 arp_target[BOND_MAX_ARP_TARGETS] = { 0, } ;
596 static int arp_ip_count = 0;
597 static int bond_mode    = BOND_MODE_ROUNDROBIN;
598 static int xmit_hashtype= BOND_XMIT_POLICY_LAYER2;
599 static int lacp_fast    = 0;
600
601 struct bond_parm_tbl {
602         char *modename;
603         int mode;
604 };
605
606 static struct bond_parm_tbl bond_lacp_tbl[] = {
607 {       "slow",         AD_LACP_SLOW},
608 {       "fast",         AD_LACP_FAST},
609 {       NULL,           -1},
610 };
611
612 static struct bond_parm_tbl bond_mode_tbl[] = {
613 {       "balance-rr",           BOND_MODE_ROUNDROBIN},
614 {       "active-backup",        BOND_MODE_ACTIVEBACKUP},
615 {       "balance-xor",          BOND_MODE_XOR},
616 {       "broadcast",            BOND_MODE_BROADCAST},
617 {       "802.3ad",              BOND_MODE_8023AD},
618 {       "balance-tlb",          BOND_MODE_TLB},
619 {       "balance-alb",          BOND_MODE_ALB},
620 {       NULL,                   -1},
621 };
622
623 static struct bond_parm_tbl xmit_hashtype_tbl[] = {
624 {       "layer2",               BOND_XMIT_POLICY_LAYER2},
625 {       "layer3+4",             BOND_XMIT_POLICY_LAYER34},
626 {       NULL,                   -1},
627 };
628
629 /*-------------------------- Forward declarations ---------------------------*/
630
631 static inline void bond_set_mode_ops(struct bonding *bond, int mode);
632 static void bond_send_gratuitous_arp(struct bonding *bond);
633
634 /*---------------------------- General routines -----------------------------*/
635
636 static const char *bond_mode_name(int mode)
637 {
638         switch (mode) {
639         case BOND_MODE_ROUNDROBIN :
640                 return "load balancing (round-robin)";
641         case BOND_MODE_ACTIVEBACKUP :
642                 return "fault-tolerance (active-backup)";
643         case BOND_MODE_XOR :
644                 return "load balancing (xor)";
645         case BOND_MODE_BROADCAST :
646                 return "fault-tolerance (broadcast)";
647         case BOND_MODE_8023AD:
648                 return "IEEE 802.3ad Dynamic link aggregation";
649         case BOND_MODE_TLB:
650                 return "transmit load balancing";
651         case BOND_MODE_ALB:
652                 return "adaptive load balancing";
653         default:
654                 return "unknown";
655         }
656 }
657
658 /*---------------------------------- VLAN -----------------------------------*/
659
660 /**
661  * bond_add_vlan - add a new vlan id on bond
662  * @bond: bond that got the notification
663  * @vlan_id: the vlan id to add
664  *
665  * Returns -ENOMEM if allocation failed.
666  */
667 static int bond_add_vlan(struct bonding *bond, unsigned short vlan_id)
668 {
669         struct vlan_entry *vlan;
670
671         dprintk("bond: %s, vlan id %d\n",
672                 (bond ? bond->dev->name: "None"), vlan_id);
673
674         vlan = kmalloc(sizeof(struct vlan_entry), GFP_KERNEL);
675         if (!vlan) {
676                 return -ENOMEM;
677         }
678
679         INIT_LIST_HEAD(&vlan->vlan_list);
680         vlan->vlan_id = vlan_id;
681         vlan->vlan_ip = 0;
682
683         write_lock_bh(&bond->lock);
684
685         list_add_tail(&vlan->vlan_list, &bond->vlan_list);
686
687         write_unlock_bh(&bond->lock);
688
689         dprintk("added VLAN ID %d on bond %s\n", vlan_id, bond->dev->name);
690
691         return 0;
692 }
693
694 /**
695  * bond_del_vlan - delete a vlan id from bond
696  * @bond: bond that got the notification
697  * @vlan_id: the vlan id to delete
698  *
699  * returns -ENODEV if @vlan_id was not found in @bond.
700  */
701 static int bond_del_vlan(struct bonding *bond, unsigned short vlan_id)
702 {
703         struct vlan_entry *vlan, *next;
704         int res = -ENODEV;
705
706         dprintk("bond: %s, vlan id %d\n", bond->dev->name, vlan_id);
707
708         write_lock_bh(&bond->lock);
709
710         list_for_each_entry_safe(vlan, next, &bond->vlan_list, vlan_list) {
711                 if (vlan->vlan_id == vlan_id) {
712                         list_del(&vlan->vlan_list);
713
714                         if ((bond->params.mode == BOND_MODE_TLB) ||
715                             (bond->params.mode == BOND_MODE_ALB)) {
716                                 bond_alb_clear_vlan(bond, vlan_id);
717                         }
718
719                         dprintk("removed VLAN ID %d from bond %s\n", vlan_id,
720                                 bond->dev->name);
721
722                         kfree(vlan);
723
724                         if (list_empty(&bond->vlan_list) &&
725                             (bond->slave_cnt == 0)) {
726                                 /* Last VLAN removed and no slaves, so
727                                  * restore block on adding VLANs. This will
728                                  * be removed once new slaves that are not
729                                  * VLAN challenged will be added.
730                                  */
731                                 bond->dev->features |= NETIF_F_VLAN_CHALLENGED;
732                         }
733
734                         res = 0;
735                         goto out;
736                 }
737         }
738
739         dprintk("couldn't find VLAN ID %d in bond %s\n", vlan_id,
740                 bond->dev->name);
741
742 out:
743         write_unlock_bh(&bond->lock);
744         return res;
745 }
746
747 /**
748  * bond_has_challenged_slaves
749  * @bond: the bond we're working on
750  *
751  * Searches the slave list. Returns 1 if a vlan challenged slave
752  * was found, 0 otherwise.
753  *
754  * Assumes bond->lock is held.
755  */
756 static int bond_has_challenged_slaves(struct bonding *bond)
757 {
758         struct slave *slave;
759         int i;
760
761         bond_for_each_slave(bond, slave, i) {
762                 if (slave->dev->features & NETIF_F_VLAN_CHALLENGED) {
763                         dprintk("found VLAN challenged slave - %s\n",
764                                 slave->dev->name);
765                         return 1;
766                 }
767         }
768
769         dprintk("no VLAN challenged slaves found\n");
770         return 0;
771 }
772
773 /**
774  * bond_next_vlan - safely skip to the next item in the vlans list.
775  * @bond: the bond we're working on
776  * @curr: item we're advancing from
777  *
778  * Returns %NULL if list is empty, bond->next_vlan if @curr is %NULL,
779  * or @curr->next otherwise (even if it is @curr itself again).
780  * 
781  * Caller must hold bond->lock
782  */
783 struct vlan_entry *bond_next_vlan(struct bonding *bond, struct vlan_entry *curr)
784 {
785         struct vlan_entry *next, *last;
786
787         if (list_empty(&bond->vlan_list)) {
788                 return NULL;
789         }
790
791         if (!curr) {
792                 next = list_entry(bond->vlan_list.next,
793                                   struct vlan_entry, vlan_list);
794         } else {
795                 last = list_entry(bond->vlan_list.prev,
796                                   struct vlan_entry, vlan_list);
797                 if (last == curr) {
798                         next = list_entry(bond->vlan_list.next,
799                                           struct vlan_entry, vlan_list);
800                 } else {
801                         next = list_entry(curr->vlan_list.next,
802                                           struct vlan_entry, vlan_list);
803                 }
804         }
805
806         return next;
807 }
808
809 /**
810  * bond_dev_queue_xmit - Prepare skb for xmit.
811  * 
812  * @bond: bond device that got this skb for tx.
813  * @skb: hw accel VLAN tagged skb to transmit
814  * @slave_dev: slave that is supposed to xmit this skbuff
815  * 
816  * When the bond gets an skb to transmit that is
817  * already hardware accelerated VLAN tagged, and it
818  * needs to relay this skb to a slave that is not
819  * hw accel capable, the skb needs to be "unaccelerated",
820  * i.e. strip the hwaccel tag and re-insert it as part
821  * of the payload.
822  */
823 int bond_dev_queue_xmit(struct bonding *bond, struct sk_buff *skb, struct net_device *slave_dev)
824 {
825         unsigned short vlan_id;
826
827         if (!list_empty(&bond->vlan_list) &&
828             !(slave_dev->features & NETIF_F_HW_VLAN_TX) &&
829             vlan_get_tag(skb, &vlan_id) == 0) {
830                 skb->dev = slave_dev;
831                 skb = vlan_put_tag(skb, vlan_id);
832                 if (!skb) {
833                         /* vlan_put_tag() frees the skb in case of error,
834                          * so return success here so the calling functions
835                          * won't attempt to free is again.
836                          */
837                         return 0;
838                 }
839         } else {
840                 skb->dev = slave_dev;
841         }
842
843         skb->priority = 1;
844         dev_queue_xmit(skb);
845
846         return 0;
847 }
848
849 /*
850  * In the following 3 functions, bond_vlan_rx_register(), bond_vlan_rx_add_vid
851  * and bond_vlan_rx_kill_vid, We don't protect the slave list iteration with a
852  * lock because:
853  * a. This operation is performed in IOCTL context,
854  * b. The operation is protected by the RTNL semaphore in the 8021q code,
855  * c. Holding a lock with BH disabled while directly calling a base driver
856  *    entry point is generally a BAD idea.
857  * 
858  * The design of synchronization/protection for this operation in the 8021q
859  * module is good for one or more VLAN devices over a single physical device
860  * and cannot be extended for a teaming solution like bonding, so there is a
861  * potential race condition here where a net device from the vlan group might
862  * be referenced (either by a base driver or the 8021q code) while it is being
863  * removed from the system. However, it turns out we're not making matters
864  * worse, and if it works for regular VLAN usage it will work here too.
865 */
866
867 /**
868  * bond_vlan_rx_register - Propagates registration to slaves
869  * @bond_dev: bonding net device that got called
870  * @grp: vlan group being registered
871  */
872 static void bond_vlan_rx_register(struct net_device *bond_dev, struct vlan_group *grp)
873 {
874         struct bonding *bond = bond_dev->priv;
875         struct slave *slave;
876         int i;
877
878         bond->vlgrp = grp;
879
880         bond_for_each_slave(bond, slave, i) {
881                 struct net_device *slave_dev = slave->dev;
882
883                 if ((slave_dev->features & NETIF_F_HW_VLAN_RX) &&
884                     slave_dev->vlan_rx_register) {
885                         slave_dev->vlan_rx_register(slave_dev, grp);
886                 }
887         }
888 }
889
890 /**
891  * bond_vlan_rx_add_vid - Propagates adding an id to slaves
892  * @bond_dev: bonding net device that got called
893  * @vid: vlan id being added
894  */
895 static void bond_vlan_rx_add_vid(struct net_device *bond_dev, uint16_t vid)
896 {
897         struct bonding *bond = bond_dev->priv;
898         struct slave *slave;
899         int i, res;
900
901         bond_for_each_slave(bond, slave, i) {
902                 struct net_device *slave_dev = slave->dev;
903
904                 if ((slave_dev->features & NETIF_F_HW_VLAN_FILTER) &&
905                     slave_dev->vlan_rx_add_vid) {
906                         slave_dev->vlan_rx_add_vid(slave_dev, vid);
907                 }
908         }
909
910         res = bond_add_vlan(bond, vid);
911         if (res) {
912                 printk(KERN_ERR DRV_NAME
913                        ": %s: Failed to add vlan id %d\n",
914                        bond_dev->name, vid);
915         }
916 }
917
918 /**
919  * bond_vlan_rx_kill_vid - Propagates deleting an id to slaves
920  * @bond_dev: bonding net device that got called
921  * @vid: vlan id being removed
922  */
923 static void bond_vlan_rx_kill_vid(struct net_device *bond_dev, uint16_t vid)
924 {
925         struct bonding *bond = bond_dev->priv;
926         struct slave *slave;
927         struct net_device *vlan_dev;
928         int i, res;
929
930         bond_for_each_slave(bond, slave, i) {
931                 struct net_device *slave_dev = slave->dev;
932
933                 if ((slave_dev->features & NETIF_F_HW_VLAN_FILTER) &&
934                     slave_dev->vlan_rx_kill_vid) {
935                         /* Save and then restore vlan_dev in the grp array,
936                          * since the slave's driver might clear it.
937                          */
938                         vlan_dev = bond->vlgrp->vlan_devices[vid];
939                         slave_dev->vlan_rx_kill_vid(slave_dev, vid);
940                         bond->vlgrp->vlan_devices[vid] = vlan_dev;
941                 }
942         }
943
944         res = bond_del_vlan(bond, vid);
945         if (res) {
946                 printk(KERN_ERR DRV_NAME
947                        ": %s: Failed to remove vlan id %d\n",
948                        bond_dev->name, vid);
949         }
950 }
951
952 static void bond_add_vlans_on_slave(struct bonding *bond, struct net_device *slave_dev)
953 {
954         struct vlan_entry *vlan;
955
956         write_lock_bh(&bond->lock);
957
958         if (list_empty(&bond->vlan_list)) {
959                 goto out;
960         }
961
962         if ((slave_dev->features & NETIF_F_HW_VLAN_RX) &&
963             slave_dev->vlan_rx_register) {
964                 slave_dev->vlan_rx_register(slave_dev, bond->vlgrp);
965         }
966
967         if (!(slave_dev->features & NETIF_F_HW_VLAN_FILTER) ||
968             !(slave_dev->vlan_rx_add_vid)) {
969                 goto out;
970         }
971
972         list_for_each_entry(vlan, &bond->vlan_list, vlan_list) {
973                 slave_dev->vlan_rx_add_vid(slave_dev, vlan->vlan_id);
974         }
975
976 out:
977         write_unlock_bh(&bond->lock);
978 }
979
980 static void bond_del_vlans_from_slave(struct bonding *bond, struct net_device *slave_dev)
981 {
982         struct vlan_entry *vlan;
983         struct net_device *vlan_dev;
984
985         write_lock_bh(&bond->lock);
986
987         if (list_empty(&bond->vlan_list)) {
988                 goto out;
989         }
990
991         if (!(slave_dev->features & NETIF_F_HW_VLAN_FILTER) ||
992             !(slave_dev->vlan_rx_kill_vid)) {
993                 goto unreg;
994         }
995
996         list_for_each_entry(vlan, &bond->vlan_list, vlan_list) {
997                 /* Save and then restore vlan_dev in the grp array,
998                  * since the slave's driver might clear it.
999                  */
1000                 vlan_dev = bond->vlgrp->vlan_devices[vlan->vlan_id];
1001                 slave_dev->vlan_rx_kill_vid(slave_dev, vlan->vlan_id);
1002                 bond->vlgrp->vlan_devices[vlan->vlan_id] = vlan_dev;
1003         }
1004
1005 unreg:
1006         if ((slave_dev->features & NETIF_F_HW_VLAN_RX) &&
1007             slave_dev->vlan_rx_register) {
1008                 slave_dev->vlan_rx_register(slave_dev, NULL);
1009         }
1010
1011 out:
1012         write_unlock_bh(&bond->lock);
1013 }
1014
1015 /*------------------------------- Link status -------------------------------*/
1016
1017 /*
1018  * Get link speed and duplex from the slave's base driver
1019  * using ethtool. If for some reason the call fails or the
1020  * values are invalid, fake speed and duplex to 100/Full
1021  * and return error.
1022  */
1023 static int bond_update_speed_duplex(struct slave *slave)
1024 {
1025         struct net_device *slave_dev = slave->dev;
1026         static int (* ioctl)(struct net_device *, struct ifreq *, int);
1027         struct ifreq ifr;
1028         struct ethtool_cmd etool;
1029
1030         /* Fake speed and duplex */
1031         slave->speed = SPEED_100;
1032         slave->duplex = DUPLEX_FULL;
1033
1034         if (slave_dev->ethtool_ops) {
1035                 u32 res;
1036
1037                 if (!slave_dev->ethtool_ops->get_settings) {
1038                         return -1;
1039                 }
1040
1041                 res = slave_dev->ethtool_ops->get_settings(slave_dev, &etool);
1042                 if (res < 0) {
1043                         return -1;
1044                 }
1045
1046                 goto verify;
1047         }
1048
1049         ioctl = slave_dev->do_ioctl;
1050         strncpy(ifr.ifr_name, slave_dev->name, IFNAMSIZ);
1051         etool.cmd = ETHTOOL_GSET;
1052         ifr.ifr_data = (char*)&etool;
1053         if (!ioctl || (IOCTL(slave_dev, &ifr, SIOCETHTOOL) < 0)) {
1054                 return -1;
1055         }
1056
1057 verify:
1058         switch (etool.speed) {
1059         case SPEED_10:
1060         case SPEED_100:
1061         case SPEED_1000:
1062                 break;
1063         default:
1064                 return -1;
1065         }
1066
1067         switch (etool.duplex) {
1068         case DUPLEX_FULL:
1069         case DUPLEX_HALF:
1070                 break;
1071         default:
1072                 return -1;
1073         }
1074
1075         slave->speed = etool.speed;
1076         slave->duplex = etool.duplex;
1077
1078         return 0;
1079 }
1080
1081 /*
1082  * if <dev> supports MII link status reporting, check its link status.
1083  *
1084  * We either do MII/ETHTOOL ioctls, or check netif_carrier_ok(),
1085  * depening upon the setting of the use_carrier parameter.
1086  *
1087  * Return either BMSR_LSTATUS, meaning that the link is up (or we
1088  * can't tell and just pretend it is), or 0, meaning that the link is
1089  * down.
1090  *
1091  * If reporting is non-zero, instead of faking link up, return -1 if
1092  * both ETHTOOL and MII ioctls fail (meaning the device does not
1093  * support them).  If use_carrier is set, return whatever it says.
1094  * It'd be nice if there was a good way to tell if a driver supports
1095  * netif_carrier, but there really isn't.
1096  */
1097 static int bond_check_dev_link(struct bonding *bond, struct net_device *slave_dev, int reporting)
1098 {
1099         static int (* ioctl)(struct net_device *, struct ifreq *, int);
1100         struct ifreq ifr;
1101         struct mii_ioctl_data *mii;
1102         struct ethtool_value etool;
1103
1104         if (bond->params.use_carrier) {
1105                 return netif_carrier_ok(slave_dev) ? BMSR_LSTATUS : 0;
1106         }
1107
1108         ioctl = slave_dev->do_ioctl;
1109         if (ioctl) {
1110                 /* TODO: set pointer to correct ioctl on a per team member */
1111                 /*       bases to make this more efficient. that is, once  */
1112                 /*       we determine the correct ioctl, we will always    */
1113                 /*       call it and not the others for that team          */
1114                 /*       member.                                           */
1115
1116                 /*
1117                  * We cannot assume that SIOCGMIIPHY will also read a
1118                  * register; not all network drivers (e.g., e100)
1119                  * support that.
1120                  */
1121
1122                 /* Yes, the mii is overlaid on the ifreq.ifr_ifru */
1123                 strncpy(ifr.ifr_name, slave_dev->name, IFNAMSIZ);
1124                 mii = if_mii(&ifr);
1125                 if (IOCTL(slave_dev, &ifr, SIOCGMIIPHY) == 0) {
1126                         mii->reg_num = MII_BMSR;
1127                         if (IOCTL(slave_dev, &ifr, SIOCGMIIREG) == 0) {
1128                                 return (mii->val_out & BMSR_LSTATUS);
1129                         }
1130                 }
1131         }
1132
1133         /* try SIOCETHTOOL ioctl, some drivers cache ETHTOOL_GLINK */
1134         /* for a period of time so we attempt to get link status   */
1135         /* from it last if the above MII ioctls fail...            */
1136         if (slave_dev->ethtool_ops) {
1137                 if (slave_dev->ethtool_ops->get_link) {
1138                         u32 link;
1139
1140                         link = slave_dev->ethtool_ops->get_link(slave_dev);
1141
1142                         return link ? BMSR_LSTATUS : 0;
1143                 }
1144         }
1145
1146         if (ioctl) {
1147                 strncpy(ifr.ifr_name, slave_dev->name, IFNAMSIZ);
1148                 etool.cmd = ETHTOOL_GLINK;
1149                 ifr.ifr_data = (char*)&etool;
1150                 if (IOCTL(slave_dev, &ifr, SIOCETHTOOL) == 0) {
1151                         if (etool.data == 1) {
1152                                 return BMSR_LSTATUS;
1153                         } else {
1154                                 dprintk("SIOCETHTOOL shows link down\n");
1155                                 return 0;
1156                         }
1157                 }
1158         }
1159
1160         /*
1161          * If reporting, report that either there's no dev->do_ioctl,
1162          * or both SIOCGMIIREG and SIOCETHTOOL failed (meaning that we
1163          * cannot report link status).  If not reporting, pretend
1164          * we're ok.
1165          */
1166         return (reporting ? -1 : BMSR_LSTATUS);
1167 }
1168
1169 /*----------------------------- Multicast list ------------------------------*/
1170
1171 /*
1172  * Returns 0 if dmi1 and dmi2 are the same, non-0 otherwise
1173  */
1174 static inline int bond_is_dmi_same(struct dev_mc_list *dmi1, struct dev_mc_list *dmi2)
1175 {
1176         return memcmp(dmi1->dmi_addr, dmi2->dmi_addr, dmi1->dmi_addrlen) == 0 &&
1177                         dmi1->dmi_addrlen == dmi2->dmi_addrlen;
1178 }
1179
1180 /*
1181  * returns dmi entry if found, NULL otherwise
1182  */
1183 static struct dev_mc_list *bond_mc_list_find_dmi(struct dev_mc_list *dmi, struct dev_mc_list *mc_list)
1184 {
1185         struct dev_mc_list *idmi;
1186
1187         for (idmi = mc_list; idmi; idmi = idmi->next) {
1188                 if (bond_is_dmi_same(dmi, idmi)) {
1189                         return idmi;
1190                 }
1191         }
1192
1193         return NULL;
1194 }
1195
1196 /*
1197  * Push the promiscuity flag down to appropriate slaves
1198  */
1199 static void bond_set_promiscuity(struct bonding *bond, int inc)
1200 {
1201         if (USES_PRIMARY(bond->params.mode)) {
1202                 /* write lock already acquired */
1203                 if (bond->curr_active_slave) {
1204                         dev_set_promiscuity(bond->curr_active_slave->dev, inc);
1205                 }
1206         } else {
1207                 struct slave *slave;
1208                 int i;
1209                 bond_for_each_slave(bond, slave, i) {
1210                         dev_set_promiscuity(slave->dev, inc);
1211                 }
1212         }
1213 }
1214
1215 /*
1216  * Push the allmulti flag down to all slaves
1217  */
1218 static void bond_set_allmulti(struct bonding *bond, int inc)
1219 {
1220         if (USES_PRIMARY(bond->params.mode)) {
1221                 /* write lock already acquired */
1222                 if (bond->curr_active_slave) {
1223                         dev_set_allmulti(bond->curr_active_slave->dev, inc);
1224                 }
1225         } else {
1226                 struct slave *slave;
1227                 int i;
1228                 bond_for_each_slave(bond, slave, i) {
1229                         dev_set_allmulti(slave->dev, inc);
1230                 }
1231         }
1232 }
1233
1234 /*
1235  * Add a Multicast address to slaves
1236  * according to mode
1237  */
1238 static void bond_mc_add(struct bonding *bond, void *addr, int alen)
1239 {
1240         if (USES_PRIMARY(bond->params.mode)) {
1241                 /* write lock already acquired */
1242                 if (bond->curr_active_slave) {
1243                         dev_mc_add(bond->curr_active_slave->dev, addr, alen, 0);
1244                 }
1245         } else {
1246                 struct slave *slave;
1247                 int i;
1248                 bond_for_each_slave(bond, slave, i) {
1249                         dev_mc_add(slave->dev, addr, alen, 0);
1250                 }
1251         }
1252 }
1253
1254 /*
1255  * Remove a multicast address from slave
1256  * according to mode
1257  */
1258 static void bond_mc_delete(struct bonding *bond, void *addr, int alen)
1259 {
1260         if (USES_PRIMARY(bond->params.mode)) {
1261                 /* write lock already acquired */
1262                 if (bond->curr_active_slave) {
1263                         dev_mc_delete(bond->curr_active_slave->dev, addr, alen, 0);
1264                 }
1265         } else {
1266                 struct slave *slave;
1267                 int i;
1268                 bond_for_each_slave(bond, slave, i) {
1269                         dev_mc_delete(slave->dev, addr, alen, 0);
1270                 }
1271         }
1272 }
1273
1274 /*
1275  * Totally destroys the mc_list in bond
1276  */
1277 static void bond_mc_list_destroy(struct bonding *bond)
1278 {
1279         struct dev_mc_list *dmi;
1280
1281         dmi = bond->mc_list;
1282         while (dmi) {
1283                 bond->mc_list = dmi->next;
1284                 kfree(dmi);
1285                 dmi = bond->mc_list;
1286         }
1287 }
1288
1289 /*
1290  * Copy all the Multicast addresses from src to the bonding device dst
1291  */
1292 static int bond_mc_list_copy(struct dev_mc_list *mc_list, struct bonding *bond, int gpf_flag)
1293 {
1294         struct dev_mc_list *dmi, *new_dmi;
1295
1296         for (dmi = mc_list; dmi; dmi = dmi->next) {
1297                 new_dmi = kmalloc(sizeof(struct dev_mc_list), gpf_flag);
1298
1299                 if (!new_dmi) {
1300                         /* FIXME: Potential memory leak !!! */
1301                         return -ENOMEM;
1302                 }
1303
1304                 new_dmi->next = bond->mc_list;
1305                 bond->mc_list = new_dmi;
1306                 new_dmi->dmi_addrlen = dmi->dmi_addrlen;
1307                 memcpy(new_dmi->dmi_addr, dmi->dmi_addr, dmi->dmi_addrlen);
1308                 new_dmi->dmi_users = dmi->dmi_users;
1309                 new_dmi->dmi_gusers = dmi->dmi_gusers;
1310         }
1311
1312         return 0;
1313 }
1314
1315 /*
1316  * flush all members of flush->mc_list from device dev->mc_list
1317  */
1318 static void bond_mc_list_flush(struct net_device *bond_dev, struct net_device *slave_dev)
1319 {
1320         struct bonding *bond = bond_dev->priv;
1321         struct dev_mc_list *dmi;
1322
1323         for (dmi = bond_dev->mc_list; dmi; dmi = dmi->next) {
1324                 dev_mc_delete(slave_dev, dmi->dmi_addr, dmi->dmi_addrlen, 0);
1325         }
1326
1327         if (bond->params.mode == BOND_MODE_8023AD) {
1328                 /* del lacpdu mc addr from mc list */
1329                 u8 lacpdu_multicast[ETH_ALEN] = MULTICAST_LACPDU_ADDR;
1330
1331                 dev_mc_delete(slave_dev, lacpdu_multicast, ETH_ALEN, 0);
1332         }
1333 }
1334
1335 /*--------------------------- Active slave change ---------------------------*/
1336
1337 /*
1338  * Update the mc list and multicast-related flags for the new and
1339  * old active slaves (if any) according to the multicast mode, and
1340  * promiscuous flags unconditionally.
1341  */
1342 static void bond_mc_swap(struct bonding *bond, struct slave *new_active, struct slave *old_active)
1343 {
1344         struct dev_mc_list *dmi;
1345
1346         if (!USES_PRIMARY(bond->params.mode)) {
1347                 /* nothing to do -  mc list is already up-to-date on
1348                  * all slaves
1349                  */
1350                 return;
1351         }
1352
1353         if (old_active) {
1354                 if (bond->dev->flags & IFF_PROMISC) {
1355                         dev_set_promiscuity(old_active->dev, -1);
1356                 }
1357
1358                 if (bond->dev->flags & IFF_ALLMULTI) {
1359                         dev_set_allmulti(old_active->dev, -1);
1360                 }
1361
1362                 for (dmi = bond->dev->mc_list; dmi; dmi = dmi->next) {
1363                         dev_mc_delete(old_active->dev, dmi->dmi_addr, dmi->dmi_addrlen, 0);
1364                 }
1365         }
1366
1367         if (new_active) {
1368                 if (bond->dev->flags & IFF_PROMISC) {
1369                         dev_set_promiscuity(new_active->dev, 1);
1370                 }
1371
1372                 if (bond->dev->flags & IFF_ALLMULTI) {
1373                         dev_set_allmulti(new_active->dev, 1);
1374                 }
1375
1376                 for (dmi = bond->dev->mc_list; dmi; dmi = dmi->next) {
1377                         dev_mc_add(new_active->dev, dmi->dmi_addr, dmi->dmi_addrlen, 0);
1378                 }
1379         }
1380 }
1381
1382 /**
1383  * find_best_interface - select the best available slave to be the active one
1384  * @bond: our bonding struct
1385  *
1386  * Warning: Caller must hold curr_slave_lock for writing.
1387  */
1388 static struct slave *bond_find_best_slave(struct bonding *bond)
1389 {
1390         struct slave *new_active, *old_active;
1391         struct slave *bestslave = NULL;
1392         int mintime = bond->params.updelay;
1393         int i;
1394
1395         new_active = old_active = bond->curr_active_slave;
1396
1397         if (!new_active) { /* there were no active slaves left */
1398                 if (bond->slave_cnt > 0) {  /* found one slave */
1399                         new_active = bond->first_slave;
1400                 } else {
1401                         return NULL; /* still no slave, return NULL */
1402                 }
1403         }
1404
1405         /* first try the primary link; if arping, a link must tx/rx traffic
1406          * before it can be considered the curr_active_slave - also, we would skip
1407          * slaves between the curr_active_slave and primary_slave that may be up
1408          * and able to arp
1409          */
1410         if ((bond->primary_slave) &&
1411             (!bond->params.arp_interval) &&
1412             (IS_UP(bond->primary_slave->dev))) {
1413                 new_active = bond->primary_slave;
1414         }
1415
1416         /* remember where to stop iterating over the slaves */
1417         old_active = new_active;
1418
1419         bond_for_each_slave_from(bond, new_active, i, old_active) {
1420                 if (IS_UP(new_active->dev)) {
1421                         if (new_active->link == BOND_LINK_UP) {
1422                                 return new_active;
1423                         } else if (new_active->link == BOND_LINK_BACK) {
1424                                 /* link up, but waiting for stabilization */
1425                                 if (new_active->delay < mintime) {
1426                                         mintime = new_active->delay;
1427                                         bestslave = new_active;
1428                                 }
1429                         }
1430                 }
1431         }
1432
1433         return bestslave;
1434 }
1435
1436 /**
1437  * change_active_interface - change the active slave into the specified one
1438  * @bond: our bonding struct
1439  * @new: the new slave to make the active one
1440  *
1441  * Set the new slave to the bond's settings and unset them on the old
1442  * curr_active_slave.
1443  * Setting include flags, mc-list, promiscuity, allmulti, etc.
1444  *
1445  * If @new's link state is %BOND_LINK_BACK we'll set it to %BOND_LINK_UP,
1446  * because it is apparently the best available slave we have, even though its
1447  * updelay hasn't timed out yet.
1448  *
1449  * Warning: Caller must hold curr_slave_lock for writing.
1450  */
1451 static void bond_change_active_slave(struct bonding *bond, struct slave *new_active)
1452 {
1453         struct slave *old_active = bond->curr_active_slave;
1454
1455         if (old_active == new_active) {
1456                 return;
1457         }
1458
1459         if (new_active) {
1460                 if (new_active->link == BOND_LINK_BACK) {
1461                         if (USES_PRIMARY(bond->params.mode)) {
1462                                 printk(KERN_INFO DRV_NAME
1463                                        ": %s: making interface %s the new "
1464                                        "active one %d ms earlier.\n",
1465                                        bond->dev->name, new_active->dev->name,
1466                                        (bond->params.updelay - new_active->delay) * bond->params.miimon);
1467                         }
1468
1469                         new_active->delay = 0;
1470                         new_active->link = BOND_LINK_UP;
1471                         new_active->jiffies = jiffies;
1472
1473                         if (bond->params.mode == BOND_MODE_8023AD) {
1474                                 bond_3ad_handle_link_change(new_active, BOND_LINK_UP);
1475                         }
1476
1477                         if ((bond->params.mode == BOND_MODE_TLB) ||
1478                             (bond->params.mode == BOND_MODE_ALB)) {
1479                                 bond_alb_handle_link_change(bond, new_active, BOND_LINK_UP);
1480                         }
1481                 } else {
1482                         if (USES_PRIMARY(bond->params.mode)) {
1483                                 printk(KERN_INFO DRV_NAME
1484                                        ": %s: making interface %s the new "
1485                                        "active one.\n",
1486                                        bond->dev->name, new_active->dev->name);
1487                         }
1488                 }
1489         }
1490
1491         if (USES_PRIMARY(bond->params.mode)) {
1492                 bond_mc_swap(bond, new_active, old_active);
1493         }
1494
1495         if ((bond->params.mode == BOND_MODE_TLB) ||
1496             (bond->params.mode == BOND_MODE_ALB)) {
1497                 bond_alb_handle_active_change(bond, new_active);
1498         } else {
1499                 bond->curr_active_slave = new_active;
1500         }
1501
1502         if (bond->params.mode == BOND_MODE_ACTIVEBACKUP) {
1503                 if (old_active) {
1504                         bond_set_slave_inactive_flags(old_active);
1505                 }
1506
1507                 if (new_active) {
1508                         bond_set_slave_active_flags(new_active);
1509                 }
1510                 bond_send_gratuitous_arp(bond);
1511         }
1512 }
1513
1514 /**
1515  * bond_select_active_slave - select a new active slave, if needed
1516  * @bond: our bonding struct
1517  *
1518  * This functions shoud be called when one of the following occurs:
1519  * - The old curr_active_slave has been released or lost its link.
1520  * - The primary_slave has got its link back.
1521  * - A slave has got its link back and there's no old curr_active_slave.
1522  *
1523  * Warning: Caller must hold curr_slave_lock for writing.
1524  */
1525 static void bond_select_active_slave(struct bonding *bond)
1526 {
1527         struct slave *best_slave;
1528
1529         best_slave = bond_find_best_slave(bond);
1530         if (best_slave != bond->curr_active_slave) {
1531                 bond_change_active_slave(bond, best_slave);
1532         }
1533 }
1534
1535 /*--------------------------- slave list handling ---------------------------*/
1536
1537 /*
1538  * This function attaches the slave to the end of list.
1539  *
1540  * bond->lock held for writing by caller.
1541  */
1542 static void bond_attach_slave(struct bonding *bond, struct slave *new_slave)
1543 {
1544         if (bond->first_slave == NULL) { /* attaching the first slave */
1545                 new_slave->next = new_slave;
1546                 new_slave->prev = new_slave;
1547                 bond->first_slave = new_slave;
1548         } else {
1549                 new_slave->next = bond->first_slave;
1550                 new_slave->prev = bond->first_slave->prev;
1551                 new_slave->next->prev = new_slave;
1552                 new_slave->prev->next = new_slave;
1553         }
1554
1555         bond->slave_cnt++;
1556 }
1557
1558 /*
1559  * This function detaches the slave from the list.
1560  * WARNING: no check is made to verify if the slave effectively
1561  * belongs to <bond>.
1562  * Nothing is freed on return, structures are just unchained.
1563  * If any slave pointer in bond was pointing to <slave>,
1564  * it should be changed by the calling function.
1565  *
1566  * bond->lock held for writing by caller.
1567  */
1568 static void bond_detach_slave(struct bonding *bond, struct slave *slave)
1569 {
1570         if (slave->next) {
1571                 slave->next->prev = slave->prev;
1572         }
1573
1574         if (slave->prev) {
1575                 slave->prev->next = slave->next;
1576         }
1577
1578         if (bond->first_slave == slave) { /* slave is the first slave */
1579                 if (bond->slave_cnt > 1) { /* there are more slave */
1580                         bond->first_slave = slave->next;
1581                 } else {
1582                         bond->first_slave = NULL; /* slave was the last one */
1583                 }
1584         }
1585
1586         slave->next = NULL;
1587         slave->prev = NULL;
1588         bond->slave_cnt--;
1589 }
1590
1591 /*---------------------------------- IOCTL ----------------------------------*/
1592
1593 static int bond_sethwaddr(struct net_device *bond_dev, struct net_device *slave_dev)
1594 {
1595         dprintk("bond_dev=%p\n", bond_dev);
1596         dprintk("slave_dev=%p\n", slave_dev);
1597         dprintk("slave_dev->addr_len=%d\n", slave_dev->addr_len);
1598         memcpy(bond_dev->dev_addr, slave_dev->dev_addr, slave_dev->addr_len);
1599         return 0;
1600 }
1601
1602 #define BOND_INTERSECT_FEATURES \
1603         (NETIF_F_SG|NETIF_F_IP_CSUM|NETIF_F_NO_CSUM|NETIF_F_HW_CSUM)
1604
1605 /* 
1606  * Compute the features available to the bonding device by 
1607  * intersection of all of the slave devices' BOND_INTERSECT_FEATURES.
1608  * Call this after attaching or detaching a slave to update the 
1609  * bond's features.
1610  */
1611 static int bond_compute_features(struct bonding *bond)
1612 {
1613         int i;
1614         struct slave *slave;
1615         struct net_device *bond_dev = bond->dev;
1616         int features = bond->bond_features;
1617
1618         bond_for_each_slave(bond, slave, i) {
1619                 struct net_device * slave_dev = slave->dev;
1620                 if (i == 0) {
1621                         features |= BOND_INTERSECT_FEATURES;
1622                 }
1623                 features &=
1624                         ~(~slave_dev->features & BOND_INTERSECT_FEATURES);
1625         }
1626
1627         /* turn off NETIF_F_SG if we need a csum and h/w can't do it */
1628         if ((features & NETIF_F_SG) && 
1629                 !(features & (NETIF_F_IP_CSUM |
1630                               NETIF_F_NO_CSUM |
1631                               NETIF_F_HW_CSUM))) {
1632                 features &= ~NETIF_F_SG;
1633         }
1634
1635         bond_dev->features = features;
1636
1637         return 0;
1638 }
1639
1640 /* enslave device <slave> to bond device <master> */
1641 static int bond_enslave(struct net_device *bond_dev, struct net_device *slave_dev)
1642 {
1643         struct bonding *bond = bond_dev->priv;
1644         struct slave *new_slave = NULL;
1645         struct dev_mc_list *dmi;
1646         struct sockaddr addr;
1647         int link_reporting;
1648         int old_features = bond_dev->features;
1649         int res = 0;
1650
1651         if (!bond->params.use_carrier && slave_dev->ethtool_ops == NULL &&
1652                 slave_dev->do_ioctl == NULL) {
1653                 printk(KERN_WARNING DRV_NAME
1654                        ": Warning : no link monitoring support for %s\n",
1655                        slave_dev->name);
1656         }
1657
1658         /* bond must be initialized by bond_open() before enslaving */
1659         if (!(bond_dev->flags & IFF_UP)) {
1660                 dprintk("Error, master_dev is not up\n");
1661                 return -EPERM;
1662         }
1663
1664         /* already enslaved */
1665         if (slave_dev->flags & IFF_SLAVE) {
1666                 dprintk("Error, Device was already enslaved\n");
1667                 return -EBUSY;
1668         }
1669
1670         /* vlan challenged mutual exclusion */
1671         /* no need to lock since we're protected by rtnl_lock */
1672         if (slave_dev->features & NETIF_F_VLAN_CHALLENGED) {
1673                 dprintk("%s: NETIF_F_VLAN_CHALLENGED\n", slave_dev->name);
1674                 if (!list_empty(&bond->vlan_list)) {
1675                         printk(KERN_ERR DRV_NAME
1676                                ": Error: cannot enslave VLAN "
1677                                "challenged slave %s on VLAN enabled "
1678                                "bond %s\n", slave_dev->name,
1679                                bond_dev->name);
1680                         return -EPERM;
1681                 } else {
1682                         printk(KERN_WARNING DRV_NAME
1683                                ": Warning: enslaved VLAN challenged "
1684                                "slave %s. Adding VLANs will be blocked as "
1685                                "long as %s is part of bond %s\n",
1686                                slave_dev->name, slave_dev->name,
1687                                bond_dev->name);
1688                         bond_dev->features |= NETIF_F_VLAN_CHALLENGED;
1689                 }
1690         } else {
1691                 dprintk("%s: ! NETIF_F_VLAN_CHALLENGED\n", slave_dev->name);
1692                 if (bond->slave_cnt == 0) {
1693                         /* First slave, and it is not VLAN challenged,
1694                          * so remove the block of adding VLANs over the bond.
1695                          */
1696                         bond_dev->features &= ~NETIF_F_VLAN_CHALLENGED;
1697                 }
1698         }
1699
1700         /*
1701          * Old ifenslave binaries are no longer supported.  These can
1702          * be identified with moderate accurary by the state of the slave:
1703          * the current ifenslave will set the interface down prior to
1704          * enslaving it; the old ifenslave will not.
1705          */
1706         if ((slave_dev->flags & IFF_UP)) {
1707                 printk(KERN_ERR DRV_NAME ": %s is up. "
1708                        "This may be due to an out of date ifenslave.\n",
1709                        slave_dev->name);
1710                 res = -EPERM;
1711                 goto err_undo_flags;
1712         }
1713
1714         if (slave_dev->set_mac_address == NULL) {
1715                 printk(KERN_ERR DRV_NAME
1716                        ": Error: The slave device you specified does "
1717                        "not support setting the MAC address.\n");
1718                 printk(KERN_ERR
1719                        "Your kernel likely does not support slave devices.\n");
1720
1721                 res = -EOPNOTSUPP;
1722                 goto err_undo_flags;
1723         }
1724
1725         new_slave = kmalloc(sizeof(struct slave), GFP_KERNEL);
1726         if (!new_slave) {
1727                 res = -ENOMEM;
1728                 goto err_undo_flags;
1729         }
1730
1731         memset(new_slave, 0, sizeof(struct slave));
1732
1733         /* save slave's original flags before calling
1734          * netdev_set_master and dev_open
1735          */
1736         new_slave->original_flags = slave_dev->flags;
1737
1738         /*
1739          * Save slave's original ("permanent") mac address for modes
1740          * that need it, and for restoring it upon release, and then
1741          * set it to the master's address
1742          */
1743         memcpy(new_slave->perm_hwaddr, slave_dev->dev_addr, ETH_ALEN);
1744
1745         /*
1746          * Set slave to master's mac address.  The application already
1747          * set the master's mac address to that of the first slave
1748          */
1749         memcpy(addr.sa_data, bond_dev->dev_addr, bond_dev->addr_len);
1750         addr.sa_family = slave_dev->type;
1751         res = dev_set_mac_address(slave_dev, &addr);
1752         if (res) {
1753                 dprintk("Error %d calling set_mac_address\n", res);
1754                 goto err_free;
1755         }
1756
1757         /* open the slave since the application closed it */
1758         res = dev_open(slave_dev);
1759         if (res) {
1760                 dprintk("Openning slave %s failed\n", slave_dev->name);
1761                 goto err_restore_mac;
1762         }
1763
1764         res = netdev_set_master(slave_dev, bond_dev);
1765         if (res) {
1766                 dprintk("Error %d calling netdev_set_master\n", res);
1767                 goto err_close;
1768         }
1769
1770         new_slave->dev = slave_dev;
1771
1772         if ((bond->params.mode == BOND_MODE_TLB) ||
1773             (bond->params.mode == BOND_MODE_ALB)) {
1774                 /* bond_alb_init_slave() must be called before all other stages since
1775                  * it might fail and we do not want to have to undo everything
1776                  */
1777                 res = bond_alb_init_slave(bond, new_slave);
1778                 if (res) {
1779                         goto err_unset_master;
1780                 }
1781         }
1782
1783         /* If the mode USES_PRIMARY, then the new slave gets the
1784          * master's promisc (and mc) settings only if it becomes the
1785          * curr_active_slave, and that is taken care of later when calling
1786          * bond_change_active()
1787          */
1788         if (!USES_PRIMARY(bond->params.mode)) {
1789                 /* set promiscuity level to new slave */
1790                 if (bond_dev->flags & IFF_PROMISC) {
1791                         dev_set_promiscuity(slave_dev, 1);
1792                 }
1793
1794                 /* set allmulti level to new slave */
1795                 if (bond_dev->flags & IFF_ALLMULTI) {
1796                         dev_set_allmulti(slave_dev, 1);
1797                 }
1798
1799                 /* upload master's mc_list to new slave */
1800                 for (dmi = bond_dev->mc_list; dmi; dmi = dmi->next) {
1801                         dev_mc_add (slave_dev, dmi->dmi_addr, dmi->dmi_addrlen, 0);
1802                 }
1803         }
1804
1805         if (bond->params.mode == BOND_MODE_8023AD) {
1806                 /* add lacpdu mc addr to mc list */
1807                 u8 lacpdu_multicast[ETH_ALEN] = MULTICAST_LACPDU_ADDR;
1808
1809                 dev_mc_add(slave_dev, lacpdu_multicast, ETH_ALEN, 0);
1810         }
1811
1812         bond_add_vlans_on_slave(bond, slave_dev);
1813
1814         write_lock_bh(&bond->lock);
1815
1816         bond_attach_slave(bond, new_slave);
1817
1818         new_slave->delay = 0;
1819         new_slave->link_failure_count = 0;
1820
1821         bond_compute_features(bond);
1822
1823         if (bond->params.miimon && !bond->params.use_carrier) {
1824                 link_reporting = bond_check_dev_link(bond, slave_dev, 1);
1825
1826                 if ((link_reporting == -1) && !bond->params.arp_interval) {
1827                         /*
1828                          * miimon is set but a bonded network driver
1829                          * does not support ETHTOOL/MII and
1830                          * arp_interval is not set.  Note: if
1831                          * use_carrier is enabled, we will never go
1832                          * here (because netif_carrier is always
1833                          * supported); thus, we don't need to change
1834                          * the messages for netif_carrier.
1835                          */
1836                         printk(KERN_WARNING DRV_NAME
1837                                ": Warning: MII and ETHTOOL support not "
1838                                "available for interface %s, and "
1839                                "arp_interval/arp_ip_target module parameters "
1840                                "not specified, thus bonding will not detect "
1841                                "link failures! see bonding.txt for details.\n",
1842                                slave_dev->name);
1843                 } else if (link_reporting == -1) {
1844                         /* unable get link status using mii/ethtool */
1845                         printk(KERN_WARNING DRV_NAME
1846                                ": Warning: can't get link status from "
1847                                "interface %s; the network driver associated "
1848                                "with this interface does not support MII or "
1849                                "ETHTOOL link status reporting, thus miimon "
1850                                "has no effect on this interface.\n",
1851                                slave_dev->name);
1852                 }
1853         }
1854
1855         /* check for initial state */
1856         if (!bond->params.miimon ||
1857             (bond_check_dev_link(bond, slave_dev, 0) == BMSR_LSTATUS)) {
1858                 if (bond->params.updelay) {
1859                         dprintk("Initial state of slave_dev is "
1860                                 "BOND_LINK_BACK\n");
1861                         new_slave->link  = BOND_LINK_BACK;
1862                         new_slave->delay = bond->params.updelay;
1863                 } else {
1864                         dprintk("Initial state of slave_dev is "
1865                                 "BOND_LINK_UP\n");
1866                         new_slave->link  = BOND_LINK_UP;
1867                 }
1868                 new_slave->jiffies = jiffies;
1869         } else {
1870                 dprintk("Initial state of slave_dev is "
1871                         "BOND_LINK_DOWN\n");
1872                 new_slave->link  = BOND_LINK_DOWN;
1873         }
1874
1875         if (bond_update_speed_duplex(new_slave) &&
1876             (new_slave->link != BOND_LINK_DOWN)) {
1877                 printk(KERN_WARNING DRV_NAME
1878                        ": Warning: failed to get speed and duplex from %s, "
1879                        "assumed to be 100Mb/sec and Full.\n",
1880                        new_slave->dev->name);
1881
1882                 if (bond->params.mode == BOND_MODE_8023AD) {
1883                         printk(KERN_WARNING
1884                                "Operation of 802.3ad mode requires ETHTOOL "
1885                                "support in base driver for proper aggregator "
1886                                "selection.\n");
1887                 }
1888         }
1889
1890         if (USES_PRIMARY(bond->params.mode) && bond->params.primary[0]) {
1891                 /* if there is a primary slave, remember it */
1892                 if (strcmp(bond->params.primary, new_slave->dev->name) == 0) {
1893                         bond->primary_slave = new_slave;
1894                 }
1895         }
1896
1897         switch (bond->params.mode) {
1898         case BOND_MODE_ACTIVEBACKUP:
1899                 /* if we're in active-backup mode, we need one and only one active
1900                  * interface. The backup interfaces will have their NOARP flag set
1901                  * because we need them to be completely deaf and not to respond to
1902                  * any ARP request on the network to avoid fooling a switch. Thus,
1903                  * since we guarantee that curr_active_slave always point to the last
1904                  * usable interface, we just have to verify this interface's flag.
1905                  */
1906                 if (((!bond->curr_active_slave) ||
1907                      (bond->curr_active_slave->dev->flags & IFF_NOARP)) &&
1908                     (new_slave->link != BOND_LINK_DOWN)) {
1909                         dprintk("This is the first active slave\n");
1910                         /* first slave or no active slave yet, and this link
1911                            is OK, so make this interface the active one */
1912                         bond_change_active_slave(bond, new_slave);
1913                 } else {
1914                         dprintk("This is just a backup slave\n");
1915                         bond_set_slave_inactive_flags(new_slave);
1916                 }
1917                 break;
1918         case BOND_MODE_8023AD:
1919                 /* in 802.3ad mode, the internal mechanism
1920                  * will activate the slaves in the selected
1921                  * aggregator
1922                  */
1923                 bond_set_slave_inactive_flags(new_slave);
1924                 /* if this is the first slave */
1925                 if (bond->slave_cnt == 1) {
1926                         SLAVE_AD_INFO(new_slave).id = 1;
1927                         /* Initialize AD with the number of times that the AD timer is called in 1 second
1928                          * can be called only after the mac address of the bond is set
1929                          */
1930                         bond_3ad_initialize(bond, 1000/AD_TIMER_INTERVAL,
1931                                             bond->params.lacp_fast);
1932                 } else {
1933                         SLAVE_AD_INFO(new_slave).id =
1934                                 SLAVE_AD_INFO(new_slave->prev).id + 1;
1935                 }
1936
1937                 bond_3ad_bind_slave(new_slave);
1938                 break;
1939         case BOND_MODE_TLB:
1940         case BOND_MODE_ALB:
1941                 new_slave->state = BOND_STATE_ACTIVE;
1942                 if ((!bond->curr_active_slave) &&
1943                     (new_slave->link != BOND_LINK_DOWN)) {
1944                         /* first slave or no active slave yet, and this link
1945                          * is OK, so make this interface the active one
1946                          */
1947                         bond_change_active_slave(bond, new_slave);
1948                 }
1949                 break;
1950         default:
1951                 dprintk("This slave is always active in trunk mode\n");
1952
1953                 /* always active in trunk mode */
1954                 new_slave->state = BOND_STATE_ACTIVE;
1955
1956                 /* In trunking mode there is little meaning to curr_active_slave
1957                  * anyway (it holds no special properties of the bond device),
1958                  * so we can change it without calling change_active_interface()
1959                  */
1960                 if (!bond->curr_active_slave) {
1961                         bond->curr_active_slave = new_slave;
1962                 }
1963                 break;
1964         } /* switch(bond_mode) */
1965
1966         write_unlock_bh(&bond->lock);
1967
1968         printk(KERN_INFO DRV_NAME
1969                ": %s: enslaving %s as a%s interface with a%s link.\n",
1970                bond_dev->name, slave_dev->name,
1971                new_slave->state == BOND_STATE_ACTIVE ? "n active" : " backup",
1972                new_slave->link != BOND_LINK_DOWN ? "n up" : " down");
1973
1974         /* enslave is successful */
1975         return 0;
1976
1977 /* Undo stages on error */
1978 err_unset_master:
1979         netdev_set_master(slave_dev, NULL);
1980
1981 err_close:
1982         dev_close(slave_dev);
1983
1984 err_restore_mac:
1985         memcpy(addr.sa_data, new_slave->perm_hwaddr, ETH_ALEN);
1986         addr.sa_family = slave_dev->type;
1987         dev_set_mac_address(slave_dev, &addr);
1988
1989 err_free:
1990         kfree(new_slave);
1991
1992 err_undo_flags:
1993         bond_dev->features = old_features;
1994  
1995         return res;
1996 }
1997
1998 /*
1999  * Try to release the slave device <slave> from the bond device <master>
2000  * It is legal to access curr_active_slave without a lock because all the function
2001  * is write-locked.
2002  *
2003  * The rules for slave state should be:
2004  *   for Active/Backup:
2005  *     Active stays on all backups go down
2006  *   for Bonded connections:
2007  *     The first up interface should be left on and all others downed.
2008  */
2009 static int bond_release(struct net_device *bond_dev, struct net_device *slave_dev)
2010 {
2011         struct bonding *bond = bond_dev->priv;
2012         struct slave *slave, *oldcurrent;
2013         struct sockaddr addr;
2014         int mac_addr_differ;
2015
2016         /* slave is not a slave or master is not master of this slave */
2017         if (!(slave_dev->flags & IFF_SLAVE) ||
2018             (slave_dev->master != bond_dev)) {
2019                 printk(KERN_ERR DRV_NAME
2020                        ": Error: %s: cannot release %s.\n",
2021                        bond_dev->name, slave_dev->name);
2022                 return -EINVAL;
2023         }
2024
2025         write_lock_bh(&bond->lock);
2026
2027         slave = bond_get_slave_by_dev(bond, slave_dev);
2028         if (!slave) {
2029                 /* not a slave of this bond */
2030                 printk(KERN_INFO DRV_NAME
2031                        ": %s: %s not enslaved\n",
2032                        bond_dev->name, slave_dev->name);
2033                 return -EINVAL;
2034         }
2035
2036         mac_addr_differ = memcmp(bond_dev->dev_addr,
2037                                  slave->perm_hwaddr,
2038                                  ETH_ALEN);
2039         if (!mac_addr_differ && (bond->slave_cnt > 1)) {
2040                 printk(KERN_WARNING DRV_NAME
2041                        ": Warning: the permanent HWaddr of %s "
2042                        "- %02X:%02X:%02X:%02X:%02X:%02X - is "
2043                        "still in use by %s. Set the HWaddr of "
2044                        "%s to a different address to avoid "
2045                        "conflicts.\n",
2046                        slave_dev->name,
2047                        slave->perm_hwaddr[0],
2048                        slave->perm_hwaddr[1],
2049                        slave->perm_hwaddr[2],
2050                        slave->perm_hwaddr[3],
2051                        slave->perm_hwaddr[4],
2052                        slave->perm_hwaddr[5],
2053                        bond_dev->name,
2054                        slave_dev->name);
2055         }
2056
2057         /* Inform AD package of unbinding of slave. */
2058         if (bond->params.mode == BOND_MODE_8023AD) {
2059                 /* must be called before the slave is
2060                  * detached from the list
2061                  */
2062                 bond_3ad_unbind_slave(slave);
2063         }
2064
2065         printk(KERN_INFO DRV_NAME
2066                ": %s: releasing %s interface %s\n",
2067                bond_dev->name,
2068                (slave->state == BOND_STATE_ACTIVE)
2069                ? "active" : "backup",
2070                slave_dev->name);
2071
2072         oldcurrent = bond->curr_active_slave;
2073
2074         bond->current_arp_slave = NULL;
2075
2076         /* release the slave from its bond */
2077         bond_detach_slave(bond, slave);
2078
2079         bond_compute_features(bond);
2080
2081         if (bond->primary_slave == slave) {
2082                 bond->primary_slave = NULL;
2083         }
2084
2085         if (oldcurrent == slave) {
2086                 bond_change_active_slave(bond, NULL);
2087         }
2088
2089         if ((bond->params.mode == BOND_MODE_TLB) ||
2090             (bond->params.mode == BOND_MODE_ALB)) {
2091                 /* Must be called only after the slave has been
2092                  * detached from the list and the curr_active_slave
2093                  * has been cleared (if our_slave == old_current),
2094                  * but before a new active slave is selected.
2095                  */
2096                 bond_alb_deinit_slave(bond, slave);
2097         }
2098
2099         if (oldcurrent == slave) {
2100                 bond_select_active_slave(bond);
2101
2102                 if (!bond->curr_active_slave) {
2103                         printk(KERN_INFO DRV_NAME
2104                                ": %s: now running without any active "
2105                                "interface !\n",
2106                                bond_dev->name);
2107                 }
2108         }
2109
2110         if (bond->slave_cnt == 0) {
2111                 /* if the last slave was removed, zero the mac address
2112                  * of the master so it will be set by the application
2113                  * to the mac address of the first slave
2114                  */
2115                 memset(bond_dev->dev_addr, 0, bond_dev->addr_len);
2116
2117                 if (list_empty(&bond->vlan_list)) {
2118                         bond_dev->features |= NETIF_F_VLAN_CHALLENGED;
2119                 } else {
2120                         printk(KERN_WARNING DRV_NAME
2121                                ": Warning: clearing HW address of %s while it "
2122                                "still has VLANs.\n",
2123                                bond_dev->name);
2124                         printk(KERN_WARNING DRV_NAME
2125                                ": When re-adding slaves, make sure the bond's "
2126                                "HW address matches its VLANs'.\n");
2127                 }
2128         } else if ((bond_dev->features & NETIF_F_VLAN_CHALLENGED) &&
2129                    !bond_has_challenged_slaves(bond)) {
2130                 printk(KERN_INFO DRV_NAME
2131                        ": last VLAN challenged slave %s "
2132                        "left bond %s. VLAN blocking is removed\n",
2133                        slave_dev->name, bond_dev->name);
2134                 bond_dev->features &= ~NETIF_F_VLAN_CHALLENGED;
2135         }
2136
2137         write_unlock_bh(&bond->lock);
2138
2139         bond_del_vlans_from_slave(bond, slave_dev);
2140
2141         /* If the mode USES_PRIMARY, then we should only remove its
2142          * promisc and mc settings if it was the curr_active_slave, but that was
2143          * already taken care of above when we detached the slave
2144          */
2145         if (!USES_PRIMARY(bond->params.mode)) {
2146                 /* unset promiscuity level from slave */
2147                 if (bond_dev->flags & IFF_PROMISC) {
2148                         dev_set_promiscuity(slave_dev, -1);
2149                 }
2150
2151                 /* unset allmulti level from slave */
2152                 if (bond_dev->flags & IFF_ALLMULTI) {
2153                         dev_set_allmulti(slave_dev, -1);
2154                 }
2155
2156                 /* flush master's mc_list from slave */
2157                 bond_mc_list_flush(bond_dev, slave_dev);
2158         }
2159
2160         netdev_set_master(slave_dev, NULL);
2161
2162         /* close slave before restoring its mac address */
2163         dev_close(slave_dev);
2164
2165         /* restore original ("permanent") mac address */
2166         memcpy(addr.sa_data, slave->perm_hwaddr, ETH_ALEN);
2167         addr.sa_family = slave_dev->type;
2168         dev_set_mac_address(slave_dev, &addr);
2169
2170         /* restore the original state of the
2171          * IFF_NOARP flag that might have been
2172          * set by bond_set_slave_inactive_flags()
2173          */
2174         if ((slave->original_flags & IFF_NOARP) == 0) {
2175                 slave_dev->flags &= ~IFF_NOARP;
2176         }
2177
2178         kfree(slave);
2179
2180         return 0;  /* deletion OK */
2181 }
2182
2183 /*
2184  * This function releases all slaves.
2185  */
2186 static int bond_release_all(struct net_device *bond_dev)
2187 {
2188         struct bonding *bond = bond_dev->priv;
2189         struct slave *slave;
2190         struct net_device *slave_dev;
2191         struct sockaddr addr;
2192
2193         write_lock_bh(&bond->lock);
2194
2195         if (bond->slave_cnt == 0) {
2196                 goto out;
2197         }
2198
2199         bond->current_arp_slave = NULL;
2200         bond->primary_slave = NULL;
2201         bond_change_active_slave(bond, NULL);
2202
2203         while ((slave = bond->first_slave) != NULL) {
2204                 /* Inform AD package of unbinding of slave
2205                  * before slave is detached from the list.
2206                  */
2207                 if (bond->params.mode == BOND_MODE_8023AD) {
2208                         bond_3ad_unbind_slave(slave);
2209                 }
2210
2211                 slave_dev = slave->dev;
2212                 bond_detach_slave(bond, slave);
2213
2214                 if ((bond->params.mode == BOND_MODE_TLB) ||
2215                     (bond->params.mode == BOND_MODE_ALB)) {
2216                         /* must be called only after the slave
2217                          * has been detached from the list
2218                          */
2219                         bond_alb_deinit_slave(bond, slave);
2220                 }
2221
2222                 bond_compute_features(bond);
2223
2224                 /* now that the slave is detached, unlock and perform
2225                  * all the undo steps that should not be called from
2226                  * within a lock.
2227                  */
2228                 write_unlock_bh(&bond->lock);
2229
2230                 bond_del_vlans_from_slave(bond, slave_dev);
2231
2232                 /* If the mode USES_PRIMARY, then we should only remove its
2233                  * promisc and mc settings if it was the curr_active_slave, but that was
2234                  * already taken care of above when we detached the slave
2235                  */
2236                 if (!USES_PRIMARY(bond->params.mode)) {
2237                         /* unset promiscuity level from slave */
2238                         if (bond_dev->flags & IFF_PROMISC) {
2239                                 dev_set_promiscuity(slave_dev, -1);
2240                         }
2241
2242                         /* unset allmulti level from slave */
2243                         if (bond_dev->flags & IFF_ALLMULTI) {
2244                                 dev_set_allmulti(slave_dev, -1);
2245                         }
2246
2247                         /* flush master's mc_list from slave */
2248                         bond_mc_list_flush(bond_dev, slave_dev);
2249                 }
2250
2251                 netdev_set_master(slave_dev, NULL);
2252
2253                 /* close slave before restoring its mac address */
2254                 dev_close(slave_dev);
2255
2256                 /* restore original ("permanent") mac address*/
2257                 memcpy(addr.sa_data, slave->perm_hwaddr, ETH_ALEN);
2258                 addr.sa_family = slave_dev->type;
2259                 dev_set_mac_address(slave_dev, &addr);
2260
2261                 /* restore the original state of the IFF_NOARP flag that might have
2262                  * been set by bond_set_slave_inactive_flags()
2263                  */
2264                 if ((slave->original_flags & IFF_NOARP) == 0) {
2265                         slave_dev->flags &= ~IFF_NOARP;
2266                 }
2267
2268                 kfree(slave);
2269
2270                 /* re-acquire the lock before getting the next slave */
2271                 write_lock_bh(&bond->lock);
2272         }
2273
2274         /* zero the mac address of the master so it will be
2275          * set by the application to the mac address of the
2276          * first slave
2277          */
2278         memset(bond_dev->dev_addr, 0, bond_dev->addr_len);
2279
2280         if (list_empty(&bond->vlan_list)) {
2281                 bond_dev->features |= NETIF_F_VLAN_CHALLENGED;
2282         } else {
2283                 printk(KERN_WARNING DRV_NAME
2284                        ": Warning: clearing HW address of %s while it "
2285                        "still has VLANs.\n",
2286                        bond_dev->name);
2287                 printk(KERN_WARNING DRV_NAME
2288                        ": When re-adding slaves, make sure the bond's "
2289                        "HW address matches its VLANs'.\n");
2290         }
2291
2292         printk(KERN_INFO DRV_NAME
2293                ": %s: released all slaves\n",
2294                bond_dev->name);
2295
2296 out:
2297         write_unlock_bh(&bond->lock);
2298
2299         return 0;
2300 }
2301
2302 /*
2303  * This function changes the active slave to slave <slave_dev>.
2304  * It returns -EINVAL in the following cases.
2305  *  - <slave_dev> is not found in the list.
2306  *  - There is not active slave now.
2307  *  - <slave_dev> is already active.
2308  *  - The link state of <slave_dev> is not BOND_LINK_UP.
2309  *  - <slave_dev> is not running.
2310  * In these cases, this fuction does nothing.
2311  * In the other cases, currnt_slave pointer is changed and 0 is returned.
2312  */
2313 static int bond_ioctl_change_active(struct net_device *bond_dev, struct net_device *slave_dev)
2314 {
2315         struct bonding *bond = bond_dev->priv;
2316         struct slave *old_active = NULL;
2317         struct slave *new_active = NULL;
2318         int res = 0;
2319
2320         if (!USES_PRIMARY(bond->params.mode)) {
2321                 return -EINVAL;
2322         }
2323
2324         /* Verify that master_dev is indeed the master of slave_dev */
2325         if (!(slave_dev->flags & IFF_SLAVE) ||
2326             (slave_dev->master != bond_dev)) {
2327                 return -EINVAL;
2328         }
2329
2330         write_lock_bh(&bond->lock);
2331
2332         old_active = bond->curr_active_slave;
2333         new_active = bond_get_slave_by_dev(bond, slave_dev);
2334
2335         /*
2336          * Changing to the current active: do nothing; return success.
2337          */
2338         if (new_active && (new_active == old_active)) {
2339                 write_unlock_bh(&bond->lock);
2340                 return 0;
2341         }
2342
2343         if ((new_active) &&
2344             (old_active) &&
2345             (new_active->link == BOND_LINK_UP) &&
2346             IS_UP(new_active->dev)) {
2347                 bond_change_active_slave(bond, new_active);
2348         } else {
2349                 res = -EINVAL;
2350         }
2351
2352         write_unlock_bh(&bond->lock);
2353
2354         return res;
2355 }
2356
2357 static int bond_info_query(struct net_device *bond_dev, struct ifbond *info)
2358 {
2359         struct bonding *bond = bond_dev->priv;
2360
2361         info->bond_mode = bond->params.mode;
2362         info->miimon = bond->params.miimon;
2363
2364         read_lock_bh(&bond->lock);
2365         info->num_slaves = bond->slave_cnt;
2366         read_unlock_bh(&bond->lock);
2367
2368         return 0;
2369 }
2370
2371 static int bond_slave_info_query(struct net_device *bond_dev, struct ifslave *info)
2372 {
2373         struct bonding *bond = bond_dev->priv;
2374         struct slave *slave;
2375         int i, found = 0;
2376
2377         if (info->slave_id < 0) {
2378                 return -ENODEV;
2379         }
2380
2381         read_lock_bh(&bond->lock);
2382
2383         bond_for_each_slave(bond, slave, i) {
2384                 if (i == (int)info->slave_id) {
2385                         found = 1;
2386                         break;
2387                 }
2388         }
2389
2390         read_unlock_bh(&bond->lock);
2391
2392         if (found) {
2393                 strcpy(info->slave_name, slave->dev->name);
2394                 info->link = slave->link;
2395                 info->state = slave->state;
2396                 info->link_failure_count = slave->link_failure_count;
2397         } else {
2398                 return -ENODEV;
2399         }
2400
2401         return 0;
2402 }
2403
2404 /*-------------------------------- Monitoring -------------------------------*/
2405
2406 /* this function is called regularly to monitor each slave's link. */
2407 static void bond_mii_monitor(struct net_device *bond_dev)
2408 {
2409         struct bonding *bond = bond_dev->priv;
2410         struct slave *slave, *oldcurrent;
2411         int do_failover = 0;
2412         int delta_in_ticks;
2413         int i;
2414
2415         read_lock(&bond->lock);
2416
2417         delta_in_ticks = (bond->params.miimon * HZ) / 1000;
2418
2419         if (bond->kill_timers) {
2420                 goto out;
2421         }
2422
2423         if (bond->slave_cnt == 0) {
2424                 goto re_arm;
2425         }
2426
2427         /* we will try to read the link status of each of our slaves, and
2428          * set their IFF_RUNNING flag appropriately. For each slave not
2429          * supporting MII status, we won't do anything so that a user-space
2430          * program could monitor the link itself if needed.
2431          */
2432
2433         read_lock(&bond->curr_slave_lock);
2434         oldcurrent = bond->curr_active_slave;
2435         read_unlock(&bond->curr_slave_lock);
2436
2437         bond_for_each_slave(bond, slave, i) {
2438                 struct net_device *slave_dev = slave->dev;
2439                 int link_state;
2440                 u16 old_speed = slave->speed;
2441                 u8 old_duplex = slave->duplex;
2442
2443                 link_state = bond_check_dev_link(bond, slave_dev, 0);
2444
2445                 switch (slave->link) {
2446                 case BOND_LINK_UP:      /* the link was up */
2447                         if (link_state == BMSR_LSTATUS) {
2448                                 /* link stays up, nothing more to do */
2449                                 break;
2450                         } else { /* link going down */
2451                                 slave->link  = BOND_LINK_FAIL;
2452                                 slave->delay = bond->params.downdelay;
2453
2454                                 if (slave->link_failure_count < UINT_MAX) {
2455                                         slave->link_failure_count++;
2456                                 }
2457
2458                                 if (bond->params.downdelay) {
2459                                         printk(KERN_INFO DRV_NAME
2460                                                ": %s: link status down for %s "
2461                                                "interface %s, disabling it in "
2462                                                "%d ms.\n",
2463                                                bond_dev->name,
2464                                                IS_UP(slave_dev)
2465                                                ? ((bond->params.mode == BOND_MODE_ACTIVEBACKUP)
2466                                                   ? ((slave == oldcurrent)
2467                                                      ? "active " : "backup ")
2468                                                   : "")
2469                                                : "idle ",
2470                                                slave_dev->name,
2471                                                bond->params.downdelay * bond->params.miimon);
2472                                 }
2473                         }
2474                         /* no break ! fall through the BOND_LINK_FAIL test to
2475                            ensure proper action to be taken
2476                         */
2477                 case BOND_LINK_FAIL:    /* the link has just gone down */
2478                         if (link_state != BMSR_LSTATUS) {
2479                                 /* link stays down */
2480                                 if (slave->delay <= 0) {
2481                                         /* link down for too long time */
2482                                         slave->link = BOND_LINK_DOWN;
2483
2484                                         /* in active/backup mode, we must
2485                                          * completely disable this interface
2486                                          */
2487                                         if ((bond->params.mode == BOND_MODE_ACTIVEBACKUP) ||
2488                                             (bond->params.mode == BOND_MODE_8023AD)) {
2489                                                 bond_set_slave_inactive_flags(slave);
2490                                         }
2491
2492                                         printk(KERN_INFO DRV_NAME
2493                                                ": %s: link status definitely "
2494                                                "down for interface %s, "
2495                                                "disabling it\n",
2496                                                bond_dev->name,
2497                                                slave_dev->name);
2498
2499                                         /* notify ad that the link status has changed */
2500                                         if (bond->params.mode == BOND_MODE_8023AD) {
2501                                                 bond_3ad_handle_link_change(slave, BOND_LINK_DOWN);
2502                                         }
2503
2504                                         if ((bond->params.mode == BOND_MODE_TLB) ||
2505                                             (bond->params.mode == BOND_MODE_ALB)) {
2506                                                 bond_alb_handle_link_change(bond, slave, BOND_LINK_DOWN);
2507                                         }
2508
2509                                         if (slave == oldcurrent) {
2510                                                 do_failover = 1;
2511                                         }
2512                                 } else {
2513                                         slave->delay--;
2514                                 }
2515                         } else {
2516                                 /* link up again */
2517                                 slave->link  = BOND_LINK_UP;
2518                                 slave->jiffies = jiffies;
2519                                 printk(KERN_INFO DRV_NAME
2520                                        ": %s: link status up again after %d "
2521                                        "ms for interface %s.\n",
2522                                        bond_dev->name,
2523                                        (bond->params.downdelay - slave->delay) * bond->params.miimon,
2524                                        slave_dev->name);
2525                         }
2526                         break;
2527                 case BOND_LINK_DOWN:    /* the link was down */
2528                         if (link_state != BMSR_LSTATUS) {
2529                                 /* the link stays down, nothing more to do */
2530                                 break;
2531                         } else {        /* link going up */
2532                                 slave->link  = BOND_LINK_BACK;
2533                                 slave->delay = bond->params.updelay;
2534
2535                                 if (bond->params.updelay) {
2536                                         /* if updelay == 0, no need to
2537                                            advertise about a 0 ms delay */
2538                                         printk(KERN_INFO DRV_NAME
2539                                                ": %s: link status up for "
2540                                                "interface %s, enabling it "
2541                                                "in %d ms.\n",
2542                                                bond_dev->name,
2543                                                slave_dev->name,
2544                                                bond->params.updelay * bond->params.miimon);
2545                                 }
2546                         }
2547                         /* no break ! fall through the BOND_LINK_BACK state in
2548                            case there's something to do.
2549                         */
2550                 case BOND_LINK_BACK:    /* the link has just come back */
2551                         if (link_state != BMSR_LSTATUS) {
2552                                 /* link down again */
2553                                 slave->link  = BOND_LINK_DOWN;
2554
2555                                 printk(KERN_INFO DRV_NAME
2556                                        ": %s: link status down again after %d "
2557                                        "ms for interface %s.\n",
2558                                        bond_dev->name,
2559                                        (bond->params.updelay - slave->delay) * bond->params.miimon,
2560                                        slave_dev->name);
2561                         } else {
2562                                 /* link stays up */
2563                                 if (slave->delay == 0) {
2564                                         /* now the link has been up for long time enough */
2565                                         slave->link = BOND_LINK_UP;
2566                                         slave->jiffies = jiffies;
2567
2568                                         if (bond->params.mode == BOND_MODE_8023AD) {
2569                                                 /* prevent it from being the active one */
2570                                                 slave->state = BOND_STATE_BACKUP;
2571                                         } else if (bond->params.mode != BOND_MODE_ACTIVEBACKUP) {
2572                                                 /* make it immediately active */
2573                                                 slave->state = BOND_STATE_ACTIVE;
2574                                         } else if (slave != bond->primary_slave) {
2575                                                 /* prevent it from being the active one */
2576                                                 slave->state = BOND_STATE_BACKUP;
2577                                         }
2578
2579                                         printk(KERN_INFO DRV_NAME
2580                                                ": %s: link status definitely "
2581                                                "up for interface %s.\n",
2582                                                bond_dev->name,
2583                                                slave_dev->name);
2584
2585                                         /* notify ad that the link status has changed */
2586                                         if (bond->params.mode == BOND_MODE_8023AD) {
2587                                                 bond_3ad_handle_link_change(slave, BOND_LINK_UP);
2588                                         }
2589
2590                                         if ((bond->params.mode == BOND_MODE_TLB) ||
2591                                             (bond->params.mode == BOND_MODE_ALB)) {
2592                                                 bond_alb_handle_link_change(bond, slave, BOND_LINK_UP);
2593                                         }
2594
2595                                         if ((!oldcurrent) ||
2596                                             (slave == bond->primary_slave)) {
2597                                                 do_failover = 1;
2598                                         }
2599                                 } else {
2600                                         slave->delay--;
2601                                 }
2602                         }
2603                         break;
2604                 default:
2605                         /* Should not happen */
2606                         printk(KERN_ERR "bonding: Error: %s  Illegal value (link=%d)\n",
2607                                slave->dev->name, slave->link);
2608                         goto out;
2609                 } /* end of switch (slave->link) */
2610
2611                 bond_update_speed_duplex(slave);
2612
2613                 if (bond->params.mode == BOND_MODE_8023AD) {
2614                         if (old_speed != slave->speed) {
2615                                 bond_3ad_adapter_speed_changed(slave);
2616                         }
2617
2618                         if (old_duplex != slave->duplex) {
2619                                 bond_3ad_adapter_duplex_changed(slave);
2620                         }
2621                 }
2622
2623         } /* end of for */
2624
2625         if (do_failover) {
2626                 write_lock(&bond->curr_slave_lock);
2627
2628                 bond_select_active_slave(bond);
2629
2630                 if (oldcurrent && !bond->curr_active_slave) {
2631                         printk(KERN_INFO DRV_NAME
2632                                ": %s: now running without any active "
2633                                "interface !\n",
2634                                bond_dev->name);
2635                 }
2636
2637                 write_unlock(&bond->curr_slave_lock);
2638         }
2639
2640 re_arm:
2641         if (bond->params.miimon) {
2642                 mod_timer(&bond->mii_timer, jiffies + delta_in_ticks);
2643         }
2644 out:
2645         read_unlock(&bond->lock);
2646 }
2647
2648
2649 static u32 bond_glean_dev_ip(struct net_device *dev)
2650 {
2651         struct in_device *idev;
2652         struct in_ifaddr *ifa;
2653         u32 addr = 0;
2654
2655         if (!dev)
2656                 return 0;
2657
2658         rcu_read_lock();
2659         idev = __in_dev_get_rcu(dev);
2660         if (!idev)
2661                 goto out;
2662
2663         ifa = idev->ifa_list;
2664         if (!ifa)
2665                 goto out;
2666
2667         addr = ifa->ifa_local;
2668 out:
2669         rcu_read_unlock();
2670         return addr;
2671 }
2672
2673 static int bond_has_ip(struct bonding *bond)
2674 {
2675         struct vlan_entry *vlan, *vlan_next;
2676
2677         if (bond->master_ip)
2678                 return 1;
2679
2680         if (list_empty(&bond->vlan_list))
2681                 return 0;
2682
2683         list_for_each_entry_safe(vlan, vlan_next, &bond->vlan_list,
2684                                  vlan_list) {
2685                 if (vlan->vlan_ip)
2686                         return 1;
2687         }
2688
2689         return 0;
2690 }
2691
2692 /*
2693  * We go to the (large) trouble of VLAN tagging ARP frames because
2694  * switches in VLAN mode (especially if ports are configured as
2695  * "native" to a VLAN) might not pass non-tagged frames.
2696  */
2697 static void bond_arp_send(struct net_device *slave_dev, int arp_op, u32 dest_ip, u32 src_ip, unsigned short vlan_id)
2698 {
2699         struct sk_buff *skb;
2700
2701         dprintk("arp %d on slave %s: dst %x src %x vid %d\n", arp_op,
2702                slave_dev->name, dest_ip, src_ip, vlan_id);
2703                
2704         skb = arp_create(arp_op, ETH_P_ARP, dest_ip, slave_dev, src_ip,
2705                          NULL, slave_dev->dev_addr, NULL);
2706
2707         if (!skb) {
2708                 printk(KERN_ERR DRV_NAME ": ARP packet allocation failed\n");
2709                 return;
2710         }
2711         if (vlan_id) {
2712                 skb = vlan_put_tag(skb, vlan_id);
2713                 if (!skb) {
2714                         printk(KERN_ERR DRV_NAME ": failed to insert VLAN tag\n");
2715                         return;
2716                 }
2717         }
2718         arp_xmit(skb);
2719 }
2720
2721
2722 static void bond_arp_send_all(struct bonding *bond, struct slave *slave)
2723 {
2724         int i, vlan_id, rv;
2725         u32 *targets = bond->params.arp_targets;
2726         struct vlan_entry *vlan, *vlan_next;
2727         struct net_device *vlan_dev;
2728         struct flowi fl;
2729         struct rtable *rt;
2730
2731         for (i = 0; (i < BOND_MAX_ARP_TARGETS) && targets[i]; i++) {
2732                 dprintk("basa: target %x\n", targets[i]);
2733                 if (list_empty(&bond->vlan_list)) {
2734                         dprintk("basa: empty vlan: arp_send\n");
2735                         bond_arp_send(slave->dev, ARPOP_REQUEST, targets[i],
2736                                       bond->master_ip, 0);
2737                         continue;
2738                 }
2739
2740                 /*
2741                  * If VLANs are configured, we do a route lookup to
2742                  * determine which VLAN interface would be used, so we
2743                  * can tag the ARP with the proper VLAN tag.
2744                  */
2745                 memset(&fl, 0, sizeof(fl));
2746                 fl.fl4_dst = targets[i];
2747                 fl.fl4_tos = RTO_ONLINK;
2748
2749                 rv = ip_route_output_key(&rt, &fl);
2750                 if (rv) {
2751                         if (net_ratelimit()) {
2752                                 printk(KERN_WARNING DRV_NAME
2753                              ": %s: no route to arp_ip_target %u.%u.%u.%u\n",
2754                                        bond->dev->name, NIPQUAD(fl.fl4_dst));
2755                         }
2756                         continue;
2757                 }
2758
2759                 /*
2760                  * This target is not on a VLAN
2761                  */
2762                 if (rt->u.dst.dev == bond->dev) {
2763                         ip_rt_put(rt);
2764                         dprintk("basa: rtdev == bond->dev: arp_send\n");
2765                         bond_arp_send(slave->dev, ARPOP_REQUEST, targets[i],
2766                                       bond->master_ip, 0);
2767                         continue;
2768                 }
2769
2770                 vlan_id = 0;
2771                 list_for_each_entry_safe(vlan, vlan_next, &bond->vlan_list,
2772                                          vlan_list) {
2773                         vlan_dev = bond->vlgrp->vlan_devices[vlan->vlan_id];
2774                         if (vlan_dev == rt->u.dst.dev) {
2775                                 vlan_id = vlan->vlan_id;
2776                                 dprintk("basa: vlan match on %s %d\n",
2777                                        vlan_dev->name, vlan_id);
2778                                 break;
2779                         }
2780                 }
2781
2782                 if (vlan_id) {
2783                         ip_rt_put(rt);
2784                         bond_arp_send(slave->dev, ARPOP_REQUEST, targets[i],
2785                                       vlan->vlan_ip, vlan_id);
2786                         continue;
2787                 }
2788
2789                 if (net_ratelimit()) {
2790                         printk(KERN_WARNING DRV_NAME
2791                ": %s: no path to arp_ip_target %u.%u.%u.%u via rt.dev %s\n",
2792                                bond->dev->name, NIPQUAD(fl.fl4_dst),
2793                                rt->u.dst.dev ? rt->u.dst.dev->name : "NULL");
2794                 }
2795                 ip_rt_put(rt);
2796         }
2797 }
2798
2799 /*
2800  * Kick out a gratuitous ARP for an IP on the bonding master plus one
2801  * for each VLAN above us.
2802  */
2803 static void bond_send_gratuitous_arp(struct bonding *bond)
2804 {
2805         struct slave *slave = bond->curr_active_slave;
2806         struct vlan_entry *vlan;
2807         struct net_device *vlan_dev;
2808
2809         dprintk("bond_send_grat_arp: bond %s slave %s\n", bond->dev->name,
2810                                 slave ? slave->dev->name : "NULL");
2811         if (!slave)
2812                 return;
2813
2814         if (bond->master_ip) {
2815                 bond_arp_send(slave->dev, ARPOP_REPLY, bond->master_ip,
2816                                   bond->master_ip, 0);
2817         }
2818
2819         list_for_each_entry(vlan, &bond->vlan_list, vlan_list) {
2820                 vlan_dev = bond->vlgrp->vlan_devices[vlan->vlan_id];
2821                 if (vlan->vlan_ip) {
2822                         bond_arp_send(slave->dev, ARPOP_REPLY, vlan->vlan_ip,
2823                                       vlan->vlan_ip, vlan->vlan_id);
2824                 }
2825         }
2826 }
2827
2828 /*
2829  * this function is called regularly to monitor each slave's link
2830  * ensuring that traffic is being sent and received when arp monitoring
2831  * is used in load-balancing mode. if the adapter has been dormant, then an
2832  * arp is transmitted to generate traffic. see activebackup_arp_monitor for
2833  * arp monitoring in active backup mode.
2834  */
2835 static void bond_loadbalance_arp_mon(struct net_device *bond_dev)
2836 {
2837         struct bonding *bond = bond_dev->priv;
2838         struct slave *slave, *oldcurrent;
2839         int do_failover = 0;
2840         int delta_in_ticks;
2841         int i;
2842
2843         read_lock(&bond->lock);
2844
2845         delta_in_ticks = (bond->params.arp_interval * HZ) / 1000;
2846
2847         if (bond->kill_timers) {
2848                 goto out;
2849         }
2850
2851         if (bond->slave_cnt == 0) {
2852                 goto re_arm;
2853         }
2854
2855         read_lock(&bond->curr_slave_lock);
2856         oldcurrent = bond->curr_active_slave;
2857         read_unlock(&bond->curr_slave_lock);
2858
2859         /* see if any of the previous devices are up now (i.e. they have
2860          * xmt and rcv traffic). the curr_active_slave does not come into
2861          * the picture unless it is null. also, slave->jiffies is not needed
2862          * here because we send an arp on each slave and give a slave as
2863          * long as it needs to get the tx/rx within the delta.
2864          * TODO: what about up/down delay in arp mode? it wasn't here before
2865          *       so it can wait
2866          */
2867         bond_for_each_slave(bond, slave, i) {
2868                 if (slave->link != BOND_LINK_UP) {
2869                         if (((jiffies - slave->dev->trans_start) <= delta_in_ticks) &&
2870                             ((jiffies - slave->dev->last_rx) <= delta_in_ticks)) {
2871
2872                                 slave->link  = BOND_LINK_UP;
2873                                 slave->state = BOND_STATE_ACTIVE;
2874
2875                                 /* primary_slave has no meaning in round-robin
2876                                  * mode. the window of a slave being up and
2877                                  * curr_active_slave being null after enslaving
2878                                  * is closed.
2879                                  */
2880                                 if (!oldcurrent) {
2881                                         printk(KERN_INFO DRV_NAME
2882                                                ": %s: link status definitely "
2883                                                "up for interface %s, ",
2884                                                bond_dev->name,
2885                                                slave->dev->name);
2886                                         do_failover = 1;
2887                                 } else {
2888                                         printk(KERN_INFO DRV_NAME
2889                                                ": %s: interface %s is now up\n",
2890                                                bond_dev->name,
2891                                                slave->dev->name);
2892                                 }
2893                         }
2894                 } else {
2895                         /* slave->link == BOND_LINK_UP */
2896
2897                         /* not all switches will respond to an arp request
2898                          * when the source ip is 0, so don't take the link down
2899                          * if we don't know our ip yet
2900                          */
2901                         if (((jiffies - slave->dev->trans_start) >= (2*delta_in_ticks)) ||
2902                             (((jiffies - slave->dev->last_rx) >= (2*delta_in_ticks)) &&
2903                              bond_has_ip(bond))) {
2904
2905                                 slave->link  = BOND_LINK_DOWN;
2906                                 slave->state = BOND_STATE_BACKUP;
2907
2908                                 if (slave->link_failure_count < UINT_MAX) {
2909                                         slave->link_failure_count++;
2910                                 }
2911
2912                                 printk(KERN_INFO DRV_NAME
2913                                        ": %s: interface %s is now down.\n",
2914                                        bond_dev->name,
2915                                        slave->dev->name);
2916
2917                                 if (slave == oldcurrent) {
2918                                         do_failover = 1;
2919                                 }
2920                         }
2921                 }
2922
2923                 /* note: if switch is in round-robin mode, all links
2924                  * must tx arp to ensure all links rx an arp - otherwise
2925                  * links may oscillate or not come up at all; if switch is
2926                  * in something like xor mode, there is nothing we can
2927                  * do - all replies will be rx'ed on same link causing slaves
2928                  * to be unstable during low/no traffic periods
2929                  */
2930                 if (IS_UP(slave->dev)) {
2931                         bond_arp_send_all(bond, slave);
2932                 }
2933         }
2934
2935         if (do_failover) {
2936                 write_lock(&bond->curr_slave_lock);
2937
2938                 bond_select_active_slave(bond);
2939
2940                 if (oldcurrent && !bond->curr_active_slave) {
2941                         printk(KERN_INFO DRV_NAME
2942                                ": %s: now running without any active "
2943                                "interface !\n",
2944                                bond_dev->name);
2945                 }
2946
2947                 write_unlock(&bond->curr_slave_lock);
2948         }
2949
2950 re_arm:
2951         if (bond->params.arp_interval) {
2952                 mod_timer(&bond->arp_timer, jiffies + delta_in_ticks);
2953         }
2954 out:
2955         read_unlock(&bond->lock);
2956 }
2957
2958 /*
2959  * When using arp monitoring in active-backup mode, this function is
2960  * called to determine if any backup slaves have went down or a new
2961  * current slave needs to be found.
2962  * The backup slaves never generate traffic, they are considered up by merely
2963  * receiving traffic. If the current slave goes down, each backup slave will
2964  * be given the opportunity to tx/rx an arp before being taken down - this
2965  * prevents all slaves from being taken down due to the current slave not
2966  * sending any traffic for the backups to receive. The arps are not necessarily
2967  * necessary, any tx and rx traffic will keep the current slave up. While any
2968  * rx traffic will keep the backup slaves up, the current slave is responsible
2969  * for generating traffic to keep them up regardless of any other traffic they
2970  * may have received.
2971  * see loadbalance_arp_monitor for arp monitoring in load balancing mode
2972  */
2973 static void bond_activebackup_arp_mon(struct net_device *bond_dev)
2974 {
2975         struct bonding *bond = bond_dev->priv;
2976         struct slave *slave;
2977         int delta_in_ticks;
2978         int i;
2979
2980         read_lock(&bond->lock);
2981
2982         delta_in_ticks = (bond->params.arp_interval * HZ) / 1000;
2983
2984         if (bond->kill_timers) {
2985                 goto out;
2986         }
2987
2988         if (bond->slave_cnt == 0) {
2989                 goto re_arm;
2990         }
2991
2992         /* determine if any slave has come up or any backup slave has
2993          * gone down
2994          * TODO: what about up/down delay in arp mode? it wasn't here before
2995          *       so it can wait
2996          */
2997         bond_for_each_slave(bond, slave, i) {
2998                 if (slave->link != BOND_LINK_UP) {
2999                         if ((jiffies - slave->dev->last_rx) <= delta_in_ticks) {
3000
3001                                 slave->link = BOND_LINK_UP;
3002
3003                                 write_lock(&bond->curr_slave_lock);
3004
3005                                 if ((!bond->curr_active_slave) &&
3006                                     ((jiffies - slave->dev->trans_start) <= delta_in_ticks)) {
3007                                         bond_change_active_slave(bond, slave);
3008                                         bond->current_arp_slave = NULL;
3009                                 } else if (bond->curr_active_slave != slave) {
3010                                         /* this slave has just come up but we
3011                                          * already have a current slave; this
3012                                          * can also happen if bond_enslave adds
3013                                          * a new slave that is up while we are
3014                                          * searching for a new slave
3015                                          */
3016                                         bond_set_slave_inactive_flags(slave);
3017                                         bond->current_arp_slave = NULL;
3018                                 }
3019
3020                                 if (slave == bond->curr_active_slave) {
3021                                         printk(KERN_INFO DRV_NAME
3022                                                ": %s: %s is up and now the "
3023                                                "active interface\n",
3024                                                bond_dev->name,
3025                                                slave->dev->name);
3026                                 } else {
3027                                         printk(KERN_INFO DRV_NAME
3028                                                ": %s: backup interface %s is "
3029                                                "now up\n",
3030                                                bond_dev->name,
3031                                                slave->dev->name);
3032                                 }
3033
3034                                 write_unlock(&bond->curr_slave_lock);
3035                         }
3036                 } else {
3037                         read_lock(&bond->curr_slave_lock);
3038
3039                         if ((slave != bond->curr_active_slave) &&
3040                             (!bond->current_arp_slave) &&
3041                             (((jiffies - slave->dev->last_rx) >= 3*delta_in_ticks) &&
3042                              bond_has_ip(bond))) {
3043                                 /* a backup slave has gone down; three times
3044                                  * the delta allows the current slave to be
3045                                  * taken out before the backup slave.
3046                                  * note: a non-null current_arp_slave indicates
3047                                  * the curr_active_slave went down and we are
3048                                  * searching for a new one; under this
3049                                  * condition we only take the curr_active_slave
3050                                  * down - this gives each slave a chance to
3051                                  * tx/rx traffic before being taken out
3052                                  */
3053
3054                                 read_unlock(&bond->curr_slave_lock);
3055
3056                                 slave->link  = BOND_LINK_DOWN;
3057
3058                                 if (slave->link_failure_count < UINT_MAX) {
3059                                         slave->link_failure_count++;
3060                                 }
3061
3062                                 bond_set_slave_inactive_flags(slave);
3063
3064                                 printk(KERN_INFO DRV_NAME
3065                                        ": %s: backup interface %s is now down\n",
3066                                        bond_dev->name,
3067                                        slave->dev->name);
3068                         } else {
3069                                 read_unlock(&bond->curr_slave_lock);
3070                         }
3071                 }
3072         }
3073
3074         read_lock(&bond->curr_slave_lock);
3075         slave = bond->curr_active_slave;
3076         read_unlock(&bond->curr_slave_lock);
3077
3078         if (slave) {
3079                 /* if we have sent traffic in the past 2*arp_intervals but
3080                  * haven't xmit and rx traffic in that time interval, select
3081                  * a different slave. slave->jiffies is only updated when
3082                  * a slave first becomes the curr_active_slave - not necessarily
3083                  * after every arp; this ensures the slave has a full 2*delta
3084                  * before being taken out. if a primary is being used, check
3085                  * if it is up and needs to take over as the curr_active_slave
3086                  */
3087                 if ((((jiffies - slave->dev->trans_start) >= (2*delta_in_ticks)) ||
3088             (((jiffies - slave->dev->last_rx) >= (2*delta_in_ticks)) &&
3089              bond_has_ip(bond))) &&
3090                     ((jiffies - slave->jiffies) >= 2*delta_in_ticks)) {
3091
3092                         slave->link  = BOND_LINK_DOWN;
3093
3094                         if (slave->link_failure_count < UINT_MAX) {
3095                                 slave->link_failure_count++;
3096                         }
3097
3098                         printk(KERN_INFO DRV_NAME
3099                                ": %s: link status down for active interface "
3100                                "%s, disabling it\n",
3101                                bond_dev->name,
3102                                slave->dev->name);
3103
3104                         write_lock(&bond->curr_slave_lock);
3105
3106                         bond_select_active_slave(bond);
3107                         slave = bond->curr_active_slave;
3108
3109                         write_unlock(&bond->curr_slave_lock);
3110
3111                         bond->current_arp_slave = slave;
3112
3113                         if (slave) {
3114                                 slave->jiffies = jiffies;
3115                         }
3116                 } else if ((bond->primary_slave) &&
3117                            (bond->primary_slave != slave) &&
3118                            (bond->primary_slave->link == BOND_LINK_UP)) {
3119                         /* at this point, slave is the curr_active_slave */
3120                         printk(KERN_INFO DRV_NAME
3121                                ": %s: changing from interface %s to primary "
3122                                "interface %s\n",
3123                                bond_dev->name,
3124                                slave->dev->name,
3125                                bond->primary_slave->dev->name);
3126
3127                         /* primary is up so switch to it */
3128                         write_lock(&bond->curr_slave_lock);
3129                         bond_change_active_slave(bond, bond->primary_slave);
3130                         write_unlock(&bond->curr_slave_lock);
3131
3132                         slave = bond->primary_slave;
3133                         slave->jiffies = jiffies;
3134                 } else {
3135                         bond->current_arp_slave = NULL;
3136                 }
3137
3138                 /* the current slave must tx an arp to ensure backup slaves
3139                  * rx traffic
3140                  */
3141                 if (slave && bond_has_ip(bond)) {
3142                         bond_arp_send_all(bond, slave);
3143                 }
3144         }
3145
3146         /* if we don't have a curr_active_slave, search for the next available
3147          * backup slave from the current_arp_slave and make it the candidate
3148          * for becoming the curr_active_slave
3149          */
3150         if (!slave) {
3151                 if (!bond->current_arp_slave) {
3152                         bond->current_arp_slave = bond->first_slave;
3153                 }
3154
3155                 if (bond->current_arp_slave) {
3156                         bond_set_slave_inactive_flags(bond->current_arp_slave);
3157
3158                         /* search for next candidate */
3159                         bond_for_each_slave_from(bond, slave, i, bond->current_arp_slave->next) {
3160                                 if (IS_UP(slave->dev)) {
3161                                         slave->link = BOND_LINK_BACK;
3162                                         bond_set_slave_active_flags(slave);
3163                                         bond_arp_send_all(bond, slave);
3164                                         slave->jiffies = jiffies;
3165                                         bond->current_arp_slave = slave;
3166                                         break;
3167                                 }
3168
3169                                 /* if the link state is up at this point, we
3170                                  * mark it down - this can happen if we have
3171                                  * simultaneous link failures and
3172                                  * reselect_active_interface doesn't make this
3173                                  * one the current slave so it is still marked
3174                                  * up when it is actually down
3175                                  */
3176                                 if (slave->link == BOND_LINK_UP) {
3177                                         slave->link  = BOND_LINK_DOWN;
3178                                         if (slave->link_failure_count < UINT_MAX) {
3179                                                 slave->link_failure_count++;
3180                                         }
3181
3182                                         bond_set_slave_inactive_flags(slave);
3183
3184                                         printk(KERN_INFO DRV_NAME
3185                                                ": %s: backup interface %s is "
3186                                                "now down.\n",
3187                                                bond_dev->name,
3188                                                slave->dev->name);
3189                                 }
3190                         }
3191                 }
3192         }
3193
3194 re_arm:
3195         if (bond->params.arp_interval) {
3196                 mod_timer(&bond->arp_timer, jiffies + delta_in_ticks);
3197         }
3198 out:
3199         read_unlock(&bond->lock);
3200 }
3201
3202 /*------------------------------ proc/seq_file-------------------------------*/
3203
3204 #ifdef CONFIG_PROC_FS
3205
3206 #define SEQ_START_TOKEN ((void *)1)
3207
3208 static void *bond_info_seq_start(struct seq_file *seq, loff_t *pos)
3209 {
3210         struct bonding *bond = seq->private;
3211         loff_t off = 0;
3212         struct slave *slave;
3213         int i;
3214
3215         /* make sure the bond won't be taken away */
3216         read_lock(&dev_base_lock);
3217         read_lock_bh(&bond->lock);
3218
3219         if (*pos == 0) {
3220                 return SEQ_START_TOKEN;
3221         }
3222
3223         bond_for_each_slave(bond, slave, i) {
3224                 if (++off == *pos) {
3225                         return slave;
3226                 }
3227         }
3228
3229         return NULL;
3230 }
3231
3232 static void *bond_info_seq_next(struct seq_file *seq, void *v, loff_t *pos)
3233 {
3234         struct bonding *bond = seq->private;
3235         struct slave *slave = v;
3236
3237         ++*pos;
3238         if (v == SEQ_START_TOKEN) {
3239                 return bond->first_slave;
3240         }
3241
3242         slave = slave->next;
3243
3244         return (slave == bond->first_slave) ? NULL : slave;
3245 }
3246
3247 static void bond_info_seq_stop(struct seq_file *seq, void *v)
3248 {
3249         struct bonding *bond = seq->private;
3250
3251         read_unlock_bh(&bond->lock);
3252         read_unlock(&dev_base_lock);
3253 }
3254
3255 static void bond_info_show_master(struct seq_file *seq)
3256 {
3257         struct bonding *bond = seq->private;
3258         struct slave *curr;
3259
3260         read_lock(&bond->curr_slave_lock);
3261         curr = bond->curr_active_slave;
3262         read_unlock(&bond->curr_slave_lock);
3263
3264         seq_printf(seq, "Bonding Mode: %s\n",
3265                    bond_mode_name(bond->params.mode));
3266
3267         if (USES_PRIMARY(bond->params.mode)) {
3268                 seq_printf(seq, "Primary Slave: %s\n",
3269                            (bond->params.primary[0]) ?
3270                                 bond->params.primary : "None");
3271
3272                 seq_printf(seq, "Currently Active Slave: %s\n",
3273                            (curr) ? curr->dev->name : "None");
3274         }
3275
3276         seq_printf(seq, "MII Status: %s\n", (curr) ? "up" : "down");
3277         seq_printf(seq, "MII Polling Interval (ms): %d\n", bond->params.miimon);
3278         seq_printf(seq, "Up Delay (ms): %d\n",
3279                    bond->params.updelay * bond->params.miimon);
3280         seq_printf(seq, "Down Delay (ms): %d\n",
3281                    bond->params.downdelay * bond->params.miimon);
3282
3283         if (bond->params.mode == BOND_MODE_8023AD) {
3284                 struct ad_info ad_info;
3285
3286                 seq_puts(seq, "\n802.3ad info\n");
3287                 seq_printf(seq, "LACP rate: %s\n",
3288                            (bond->params.lacp_fast) ? "fast" : "slow");
3289
3290                 if (bond_3ad_get_active_agg_info(bond, &ad_info)) {
3291                         seq_printf(seq, "bond %s has no active aggregator\n",
3292                                    bond->dev->name);
3293                 } else {
3294                         seq_printf(seq, "Active Aggregator Info:\n");
3295
3296                         seq_printf(seq, "\tAggregator ID: %d\n",
3297                                    ad_info.aggregator_id);
3298                         seq_printf(seq, "\tNumber of ports: %d\n",
3299                                    ad_info.ports);
3300                         seq_printf(seq, "\tActor Key: %d\n",
3301                                    ad_info.actor_key);
3302                         seq_printf(seq, "\tPartner Key: %d\n",
3303                                    ad_info.partner_key);
3304                         seq_printf(seq, "\tPartner Mac Address: %02x:%02x:%02x:%02x:%02x:%02x\n",
3305                                    ad_info.partner_system[0],
3306                                    ad_info.partner_system[1],
3307                                    ad_info.partner_system[2],
3308                                    ad_info.partner_system[3],
3309                                    ad_info.partner_system[4],
3310                                    ad_info.partner_system[5]);
3311                 }
3312         }
3313 }
3314
3315 static void bond_info_show_slave(struct seq_file *seq, const struct slave *slave)
3316 {
3317         struct bonding *bond = seq->private;
3318
3319         seq_printf(seq, "\nSlave Interface: %s\n", slave->dev->name);
3320         seq_printf(seq, "MII Status: %s\n",
3321                    (slave->link == BOND_LINK_UP) ?  "up" : "down");
3322         seq_printf(seq, "Link Failure Count: %d\n",
3323                    slave->link_failure_count);
3324
3325         seq_printf(seq,
3326                    "Permanent HW addr: %02x:%02x:%02x:%02x:%02x:%02x\n",
3327                    slave->perm_hwaddr[0], slave->perm_hwaddr[1],
3328                    slave->perm_hwaddr[2], slave->perm_hwaddr[3],
3329                    slave->perm_hwaddr[4], slave->perm_hwaddr[5]);
3330
3331         if (bond->params.mode == BOND_MODE_8023AD) {
3332                 const struct aggregator *agg
3333                         = SLAVE_AD_INFO(slave).port.aggregator;
3334
3335                 if (agg) {
3336                         seq_printf(seq, "Aggregator ID: %d\n",
3337                                    agg->aggregator_identifier);
3338                 } else {
3339                         seq_puts(seq, "Aggregator ID: N/A\n");
3340                 }
3341         }
3342 }
3343
3344 static int bond_info_seq_show(struct seq_file *seq, void *v)
3345 {
3346         if (v == SEQ_START_TOKEN) {
3347                 seq_printf(seq, "%s\n", version);
3348                 bond_info_show_master(seq);
3349         } else {
3350                 bond_info_show_slave(seq, v);
3351         }
3352
3353         return 0;
3354 }
3355
3356 static struct seq_operations bond_info_seq_ops = {
3357         .start = bond_info_seq_start,
3358         .next  = bond_info_seq_next,
3359         .stop  = bond_info_seq_stop,
3360         .show  = bond_info_seq_show,
3361 };
3362
3363 static int bond_info_open(struct inode *inode, struct file *file)
3364 {
3365         struct seq_file *seq;
3366         struct proc_dir_entry *proc;
3367         int res;
3368
3369         res = seq_open(file, &bond_info_seq_ops);
3370         if (!res) {
3371                 /* recover the pointer buried in proc_dir_entry data */
3372                 seq = file->private_data;
3373                 proc = PDE(inode);
3374                 seq->private = proc->data;
3375         }
3376
3377         return res;
3378 }
3379
3380 static struct file_operations bond_info_fops = {
3381         .owner   = THIS_MODULE,
3382         .open    = bond_info_open,
3383         .read    = seq_read,
3384         .llseek  = seq_lseek,
3385         .release = seq_release,
3386 };
3387
3388 static int bond_create_proc_entry(struct bonding *bond)
3389 {
3390         struct net_device *bond_dev = bond->dev;
3391
3392         if (bond_proc_dir) {
3393                 bond->proc_entry = create_proc_entry(bond_dev->name,
3394                                                      S_IRUGO,
3395                                                      bond_proc_dir);
3396                 if (bond->proc_entry == NULL) {
3397                         printk(KERN_WARNING DRV_NAME
3398                                ": Warning: Cannot create /proc/net/%s/%s\n",
3399                                DRV_NAME, bond_dev->name);
3400                 } else {
3401                         bond->proc_entry->data = bond;
3402                         bond->proc_entry->proc_fops = &bond_info_fops;
3403                         bond->proc_entry->owner = THIS_MODULE;
3404                         memcpy(bond->proc_file_name, bond_dev->name, IFNAMSIZ);
3405                 }
3406         }
3407
3408         return 0;
3409 }
3410
3411 static void bond_remove_proc_entry(struct bonding *bond)
3412 {
3413         if (bond_proc_dir && bond->proc_entry) {
3414                 remove_proc_entry(bond->proc_file_name, bond_proc_dir);
3415                 memset(bond->proc_file_name, 0, IFNAMSIZ);
3416                 bond->proc_entry = NULL;
3417         }
3418 }
3419
3420 /* Create the bonding directory under /proc/net, if doesn't exist yet.
3421  * Caller must hold rtnl_lock.
3422  */
3423 static void bond_create_proc_dir(void)
3424 {
3425         int len = strlen(DRV_NAME);
3426
3427         for (bond_proc_dir = proc_net->subdir; bond_proc_dir;
3428              bond_proc_dir = bond_proc_dir->next) {
3429                 if ((bond_proc_dir->namelen == len) &&
3430                     !memcmp(bond_proc_dir->name, DRV_NAME, len)) {
3431                         break;
3432                 }
3433         }
3434
3435         if (!bond_proc_dir) {
3436                 bond_proc_dir = proc_mkdir(DRV_NAME, proc_net);
3437                 if (bond_proc_dir) {
3438                         bond_proc_dir->owner = THIS_MODULE;
3439                 } else {
3440                         printk(KERN_WARNING DRV_NAME
3441                                 ": Warning: cannot create /proc/net/%s\n",
3442                                 DRV_NAME);
3443                 }
3444         }
3445 }
3446
3447 /* Destroy the bonding directory under /proc/net, if empty.
3448  * Caller must hold rtnl_lock.
3449  */
3450 static void bond_destroy_proc_dir(void)
3451 {
3452         struct proc_dir_entry *de;
3453
3454         if (!bond_proc_dir) {
3455                 return;
3456         }
3457
3458         /* verify that the /proc dir is empty */
3459         for (de = bond_proc_dir->subdir; de; de = de->next) {
3460                 /* ignore . and .. */
3461                 if (*(de->name) != '.') {
3462                         break;
3463                 }
3464         }
3465
3466         if (de) {
3467                 if (bond_proc_dir->owner == THIS_MODULE) {
3468                         bond_proc_dir->owner = NULL;
3469                 }
3470         } else {
3471                 remove_proc_entry(DRV_NAME, proc_net);
3472                 bond_proc_dir = NULL;
3473         }
3474 }
3475 #endif /* CONFIG_PROC_FS */
3476
3477 /*-------------------------- netdev event handling --------------------------*/
3478
3479 /*
3480  * Change device name
3481  */
3482 static int bond_event_changename(struct bonding *bond)
3483 {
3484 #ifdef CONFIG_PROC_FS
3485         bond_remove_proc_entry(bond);
3486         bond_create_proc_entry(bond);
3487 #endif
3488
3489         return NOTIFY_DONE;
3490 }
3491
3492 static int bond_master_netdev_event(unsigned long event, struct net_device *bond_dev)
3493 {
3494         struct bonding *event_bond = bond_dev->priv;
3495
3496         switch (event) {
3497         case NETDEV_CHANGENAME:
3498                 return bond_event_changename(event_bond);
3499         case NETDEV_UNREGISTER:
3500                 /*
3501                  * TODO: remove a bond from the list?
3502                  */
3503                 break;
3504         default:
3505                 break;
3506         }
3507
3508         return NOTIFY_DONE;
3509 }
3510
3511 static int bond_slave_netdev_event(unsigned long event, struct net_device *slave_dev)
3512 {
3513         struct net_device *bond_dev = slave_dev->master;
3514         struct bonding *bond = bond_dev->priv;
3515
3516         switch (event) {
3517         case NETDEV_UNREGISTER:
3518                 if (bond_dev) {
3519                         bond_release(bond_dev, slave_dev);
3520                 }
3521                 break;
3522         case NETDEV_CHANGE:
3523                 /*
3524                  * TODO: is this what we get if somebody
3525                  * sets up a hierarchical bond, then rmmod's
3526                  * one of the slave bonding devices?
3527                  */
3528                 break;
3529         case NETDEV_DOWN:
3530                 /*
3531                  * ... Or is it this?
3532                  */
3533                 break;
3534         case NETDEV_CHANGEMTU:
3535                 /*
3536                  * TODO: Should slaves be allowed to
3537                  * independently alter their MTU?  For
3538                  * an active-backup bond, slaves need
3539                  * not be the same type of device, so
3540                  * MTUs may vary.  For other modes,
3541                  * slaves arguably should have the
3542                  * same MTUs. To do this, we'd need to
3543                  * take over the slave's change_mtu
3544                  * function for the duration of their
3545                  * servitude.
3546                  */
3547                 break;
3548         case NETDEV_CHANGENAME:
3549                 /*
3550                  * TODO: handle changing the primary's name
3551                  */
3552                 break;
3553         case NETDEV_FEAT_CHANGE:
3554                 bond_compute_features(bond);
3555                 break;
3556         default:
3557                 break;
3558         }
3559
3560         return NOTIFY_DONE;
3561 }
3562
3563 /*
3564  * bond_netdev_event: handle netdev notifier chain events.
3565  *
3566  * This function receives events for the netdev chain.  The caller (an
3567  * ioctl handler calling notifier_call_chain) holds the necessary
3568  * locks for us to safely manipulate the slave devices (RTNL lock,
3569  * dev_probe_lock).
3570  */
3571 static int bond_netdev_event(struct notifier_block *this, unsigned long event, void *ptr)
3572 {
3573         struct net_device *event_dev = (struct net_device *)ptr;
3574
3575         dprintk("event_dev: %s, event: %lx\n",
3576                 (event_dev ? event_dev->name : "None"),
3577                 event);
3578
3579         if (event_dev->flags & IFF_MASTER) {
3580                 dprintk("IFF_MASTER\n");
3581                 return bond_master_netdev_event(event, event_dev);
3582         }
3583
3584         if (event_dev->flags & IFF_SLAVE) {
3585                 dprintk("IFF_SLAVE\n");
3586                 return bond_slave_netdev_event(event, event_dev);
3587         }
3588
3589         return NOTIFY_DONE;
3590 }
3591
3592 /*
3593  * bond_inetaddr_event: handle inetaddr notifier chain events.
3594  *
3595  * We keep track of device IPs primarily to use as source addresses in
3596  * ARP monitor probes (rather than spewing out broadcasts all the time).
3597  *
3598  * We track one IP for the main device (if it has one), plus one per VLAN.
3599  */
3600 static int bond_inetaddr_event(struct notifier_block *this, unsigned long event, void *ptr)
3601 {
3602         struct in_ifaddr *ifa = ptr;
3603         struct net_device *vlan_dev, *event_dev = ifa->ifa_dev->dev;
3604         struct bonding *bond, *bond_next;
3605         struct vlan_entry *vlan, *vlan_next;
3606
3607         list_for_each_entry_safe(bond, bond_next, &bond_dev_list, bond_list) {
3608                 if (bond->dev == event_dev) {
3609                         switch (event) {
3610                         case NETDEV_UP:
3611                                 bond->master_ip = ifa->ifa_local;
3612                                 return NOTIFY_OK;
3613                         case NETDEV_DOWN:
3614                                 bond->master_ip = bond_glean_dev_ip(bond->dev);
3615                                 return NOTIFY_OK;
3616                         default:
3617                                 return NOTIFY_DONE;
3618                         }
3619                 }
3620
3621                 if (list_empty(&bond->vlan_list))
3622                         continue;
3623
3624                 list_for_each_entry_safe(vlan, vlan_next, &bond->vlan_list,
3625                                          vlan_list) {
3626                         vlan_dev = bond->vlgrp->vlan_devices[vlan->vlan_id];
3627                         if (vlan_dev == event_dev) {
3628                                 switch (event) {
3629                                 case NETDEV_UP:
3630                                         vlan->vlan_ip = ifa->ifa_local;
3631                                         return NOTIFY_OK;
3632                                 case NETDEV_DOWN:
3633                                         vlan->vlan_ip =
3634                                                 bond_glean_dev_ip(vlan_dev);
3635                                         return NOTIFY_OK;
3636                                 default:
3637                                         return NOTIFY_DONE;
3638                                 }
3639                         }
3640                 }
3641         }
3642         return NOTIFY_DONE;
3643 }
3644
3645 static struct notifier_block bond_netdev_notifier = {
3646         .notifier_call = bond_netdev_event,
3647 };
3648
3649 static struct notifier_block bond_inetaddr_notifier = {
3650         .notifier_call = bond_inetaddr_event,
3651 };
3652
3653 /*-------------------------- Packet type handling ---------------------------*/
3654
3655 /* register to receive lacpdus on a bond */
3656 static void bond_register_lacpdu(struct bonding *bond)
3657 {
3658         struct packet_type *pk_type = &(BOND_AD_INFO(bond).ad_pkt_type);
3659
3660         /* initialize packet type */
3661         pk_type->type = PKT_TYPE_LACPDU;
3662         pk_type->dev = bond->dev;
3663         pk_type->func = bond_3ad_lacpdu_recv;
3664
3665         dev_add_pack(pk_type);
3666 }
3667
3668 /* unregister to receive lacpdus on a bond */
3669 static void bond_unregister_lacpdu(struct bonding *bond)
3670 {
3671         dev_remove_pack(&(BOND_AD_INFO(bond).ad_pkt_type));
3672 }
3673
3674 /*---------------------------- Hashing Policies -----------------------------*/
3675
3676 /*
3677  * Hash for the the output device based upon layer 3 and layer 4 data. If
3678  * the packet is a frag or not TCP or UDP, just use layer 3 data.  If it is
3679  * altogether not IP, mimic bond_xmit_hash_policy_l2()
3680  */
3681 static int bond_xmit_hash_policy_l34(struct sk_buff *skb,
3682                                     struct net_device *bond_dev, int count)
3683 {
3684         struct ethhdr *data = (struct ethhdr *)skb->data;
3685         struct iphdr *iph = skb->nh.iph;
3686         u16 *layer4hdr = (u16 *)((u32 *)iph + iph->ihl);
3687         int layer4_xor = 0;
3688
3689         if (skb->protocol == __constant_htons(ETH_P_IP)) {
3690                 if (!(iph->frag_off & __constant_htons(IP_MF|IP_OFFSET)) &&
3691                     (iph->protocol == IPPROTO_TCP ||
3692                      iph->protocol == IPPROTO_UDP)) {
3693                         layer4_xor = htons((*layer4hdr ^ *(layer4hdr + 1)));
3694                 }
3695                 return (layer4_xor ^
3696                         ((ntohl(iph->saddr ^ iph->daddr)) & 0xffff)) % count;
3697
3698         }
3699
3700         return (data->h_dest[5] ^ bond_dev->dev_addr[5]) % count;
3701 }
3702
3703 /*
3704  * Hash for the output device based upon layer 2 data
3705  */
3706 static int bond_xmit_hash_policy_l2(struct sk_buff *skb,
3707                                    struct net_device *bond_dev, int count)
3708 {
3709         struct ethhdr *data = (struct ethhdr *)skb->data;
3710
3711         return (data->h_dest[5] ^ bond_dev->dev_addr[5]) % count;
3712 }
3713
3714 /*-------------------------- Device entry points ----------------------------*/
3715
3716 static int bond_open(struct net_device *bond_dev)
3717 {
3718         struct bonding *bond = bond_dev->priv;
3719         struct timer_list *mii_timer = &bond->mii_timer;
3720         struct timer_list *arp_timer = &bond->arp_timer;
3721
3722         bond->kill_timers = 0;
3723
3724         if ((bond->params.mode == BOND_MODE_TLB) ||
3725             (bond->params.mode == BOND_MODE_ALB)) {
3726                 struct timer_list *alb_timer = &(BOND_ALB_INFO(bond).alb_timer);
3727
3728                 /* bond_alb_initialize must be called before the timer
3729                  * is started.
3730                  */
3731                 if (bond_alb_initialize(bond, (bond->params.mode == BOND_MODE_ALB))) {
3732                         /* something went wrong - fail the open operation */
3733                         return -1;
3734                 }
3735
3736                 init_timer(alb_timer);
3737                 alb_timer->expires  = jiffies + 1;
3738                 alb_timer->data     = (unsigned long)bond;
3739                 alb_timer->function = (void *)&bond_alb_monitor;
3740                 add_timer(alb_timer);
3741         }
3742
3743         if (bond->params.miimon) {  /* link check interval, in milliseconds. */
3744                 init_timer(mii_timer);
3745                 mii_timer->expires  = jiffies + 1;
3746                 mii_timer->data     = (unsigned long)bond_dev;
3747                 mii_timer->function = (void *)&bond_mii_monitor;
3748                 add_timer(mii_timer);
3749         }
3750
3751         if (bond->params.arp_interval) {  /* arp interval, in milliseconds. */
3752                 init_timer(arp_timer);
3753                 arp_timer->expires  = jiffies + 1;
3754                 arp_timer->data     = (unsigned long)bond_dev;
3755                 if (bond->params.mode == BOND_MODE_ACTIVEBACKUP) {
3756                         arp_timer->function = (void *)&bond_activebackup_arp_mon;
3757                 } else {
3758                         arp_timer->function = (void *)&bond_loadbalance_arp_mon;
3759                 }
3760                 add_timer(arp_timer);
3761         }
3762
3763         if (bond->params.mode == BOND_MODE_8023AD) {
3764                 struct timer_list *ad_timer = &(BOND_AD_INFO(bond).ad_timer);
3765                 init_timer(ad_timer);
3766                 ad_timer->expires  = jiffies + 1;
3767                 ad_timer->data     = (unsigned long)bond;
3768                 ad_timer->function = (void *)&bond_3ad_state_machine_handler;
3769                 add_timer(ad_timer);
3770
3771                 /* register to receive LACPDUs */
3772                 bond_register_lacpdu(bond);
3773         }
3774
3775         return 0;
3776 }
3777
3778 static int bond_close(struct net_device *bond_dev)
3779 {
3780         struct bonding *bond = bond_dev->priv;
3781
3782         if (bond->params.mode == BOND_MODE_8023AD) {
3783                 /* Unregister the receive of LACPDUs */
3784                 bond_unregister_lacpdu(bond);
3785         }
3786
3787         write_lock_bh(&bond->lock);
3788
3789         bond_mc_list_destroy(bond);
3790
3791         /* signal timers not to re-arm */
3792         bond->kill_timers = 1;
3793
3794         write_unlock_bh(&bond->lock);
3795
3796         /* del_timer_sync must run without holding the bond->lock
3797          * because a running timer might be trying to hold it too
3798          */
3799
3800         if (bond->params.miimon) {  /* link check interval, in milliseconds. */
3801                 del_timer_sync(&bond->mii_timer);
3802         }
3803
3804         if (bond->params.arp_interval) {  /* arp interval, in milliseconds. */
3805                 del_timer_sync(&bond->arp_timer);
3806         }
3807
3808         switch (bond->params.mode) {
3809         case BOND_MODE_8023AD:
3810                 del_timer_sync(&(BOND_AD_INFO(bond).ad_timer));
3811                 break;
3812         case BOND_MODE_TLB:
3813         case BOND_MODE_ALB:
3814                 del_timer_sync(&(BOND_ALB_INFO(bond).alb_timer));
3815                 break;
3816         default:
3817                 break;
3818         }
3819
3820         /* Release the bonded slaves */
3821         bond_release_all(bond_dev);
3822
3823         if ((bond->params.mode == BOND_MODE_TLB) ||
3824             (bond->params.mode == BOND_MODE_ALB)) {
3825                 /* Must be called only after all
3826                  * slaves have been released
3827                  */
3828                 bond_alb_deinitialize(bond);
3829         }
3830
3831         return 0;
3832 }
3833
3834 static struct net_device_stats *bond_get_stats(struct net_device *bond_dev)
3835 {
3836         struct bonding *bond = bond_dev->priv;
3837         struct net_device_stats *stats = &(bond->stats), *sstats;
3838         struct slave *slave;
3839         int i;
3840
3841         memset(stats, 0, sizeof(struct net_device_stats));
3842
3843         read_lock_bh(&bond->lock);
3844
3845         bond_for_each_slave(bond, slave, i) {
3846                 sstats = slave->dev->get_stats(slave->dev);
3847
3848                 stats->rx_packets += sstats->rx_packets;
3849                 stats->rx_bytes += sstats->rx_bytes;
3850                 stats->rx_errors += sstats->rx_errors;
3851                 stats->rx_dropped += sstats->rx_dropped;
3852
3853                 stats->tx_packets += sstats->tx_packets;
3854                 stats->tx_bytes += sstats->tx_bytes;
3855                 stats->tx_errors += sstats->tx_errors;
3856                 stats->tx_dropped += sstats->tx_dropped;
3857
3858                 stats->multicast += sstats->multicast;
3859                 stats->collisions += sstats->collisions;
3860
3861                 stats->rx_length_errors += sstats->rx_length_errors;
3862                 stats->rx_over_errors += sstats->rx_over_errors;
3863                 stats->rx_crc_errors += sstats->rx_crc_errors;
3864                 stats->rx_frame_errors += sstats->rx_frame_errors;
3865                 stats->rx_fifo_errors += sstats->rx_fifo_errors;
3866                 stats->rx_missed_errors += sstats->rx_missed_errors;
3867
3868                 stats->tx_aborted_errors += sstats->tx_aborted_errors;
3869                 stats->tx_carrier_errors += sstats->tx_carrier_errors;
3870                 stats->tx_fifo_errors += sstats->tx_fifo_errors;
3871                 stats->tx_heartbeat_errors += sstats->tx_heartbeat_errors;
3872                 stats->tx_window_errors += sstats->tx_window_errors;
3873         }
3874
3875         read_unlock_bh(&bond->lock);
3876
3877         return stats;
3878 }
3879
3880 static int bond_do_ioctl(struct net_device *bond_dev, struct ifreq *ifr, int cmd)
3881 {
3882         struct net_device *slave_dev = NULL;
3883         struct ifbond k_binfo;
3884         struct ifbond __user *u_binfo = NULL;
3885         struct ifslave k_sinfo;
3886         struct ifslave __user *u_sinfo = NULL;
3887         struct mii_ioctl_data *mii = NULL;
3888         int res = 0;
3889
3890         dprintk("bond_ioctl: master=%s, cmd=%d\n",
3891                 bond_dev->name, cmd);
3892
3893         switch (cmd) {
3894         case SIOCGMIIPHY:
3895                 mii = if_mii(ifr);
3896                 if (!mii) {
3897                         return -EINVAL;
3898                 }
3899                 mii->phy_id = 0;
3900                 /* Fall Through */
3901         case SIOCGMIIREG:
3902                 /*
3903                  * We do this again just in case we were called by SIOCGMIIREG
3904                  * instead of SIOCGMIIPHY.
3905                  */
3906                 mii = if_mii(ifr);
3907                 if (!mii) {
3908                         return -EINVAL;
3909                 }
3910
3911                 if (mii->reg_num == 1) {
3912                         struct bonding *bond = bond_dev->priv;
3913                         mii->val_out = 0;
3914                         read_lock_bh(&bond->lock);
3915                         read_lock(&bond->curr_slave_lock);
3916                         if (bond->curr_active_slave) {
3917                                 mii->val_out = BMSR_LSTATUS;
3918                         }
3919                         read_unlock(&bond->curr_slave_lock);
3920                         read_unlock_bh(&bond->lock);
3921                 }
3922
3923                 return 0;
3924         case BOND_INFO_QUERY_OLD:
3925         case SIOCBONDINFOQUERY:
3926                 u_binfo = (struct ifbond __user *)ifr->ifr_data;
3927
3928                 if (copy_from_user(&k_binfo, u_binfo, sizeof(ifbond))) {
3929                         return -EFAULT;
3930                 }
3931
3932                 res = bond_info_query(bond_dev, &k_binfo);
3933                 if (res == 0) {
3934                         if (copy_to_user(u_binfo, &k_binfo, sizeof(ifbond))) {
3935                                 return -EFAULT;
3936                         }
3937                 }
3938
3939                 return res;
3940         case BOND_SLAVE_INFO_QUERY_OLD:
3941         case SIOCBONDSLAVEINFOQUERY:
3942                 u_sinfo = (struct ifslave __user *)ifr->ifr_data;
3943
3944                 if (copy_from_user(&k_sinfo, u_sinfo, sizeof(ifslave))) {
3945                         return -EFAULT;
3946                 }
3947
3948                 res = bond_slave_info_query(bond_dev, &k_sinfo);
3949                 if (res == 0) {
3950                         if (copy_to_user(u_sinfo, &k_sinfo, sizeof(ifslave))) {
3951                                 return -EFAULT;
3952                         }
3953                 }
3954
3955                 return res;
3956         default:
3957                 /* Go on */
3958                 break;
3959         }
3960
3961         if (!capable(CAP_NET_ADMIN)) {
3962                 return -EPERM;
3963         }
3964
3965         slave_dev = dev_get_by_name(ifr->ifr_slave);
3966
3967         dprintk("slave_dev=%p: \n", slave_dev);
3968
3969         if (!slave_dev) {
3970                 res = -ENODEV;
3971         } else {
3972                 dprintk("slave_dev->name=%s: \n", slave_dev->name);
3973                 switch (cmd) {
3974                 case BOND_ENSLAVE_OLD:
3975                 case SIOCBONDENSLAVE:
3976                         res = bond_enslave(bond_dev, slave_dev);
3977                         break;
3978                 case BOND_RELEASE_OLD:
3979                 case SIOCBONDRELEASE:
3980                         res = bond_release(bond_dev, slave_dev);
3981                         break;
3982                 case BOND_SETHWADDR_OLD:
3983                 case SIOCBONDSETHWADDR:
3984                         res = bond_sethwaddr(bond_dev, slave_dev);
3985                         break;
3986                 case BOND_CHANGE_ACTIVE_OLD:
3987                 case SIOCBONDCHANGEACTIVE:
3988                         res = bond_ioctl_change_active(bond_dev, slave_dev);
3989                         break;
3990                 default:
3991                         res = -EOPNOTSUPP;
3992                 }
3993
3994                 dev_put(slave_dev);
3995         }
3996
3997         return res;
3998 }
3999
4000 static void bond_set_multicast_list(struct net_device *bond_dev)
4001 {
4002         struct bonding *bond = bond_dev->priv;
4003         struct dev_mc_list *dmi;
4004
4005         write_lock_bh(&bond->lock);
4006
4007         /*
4008          * Do promisc before checking multicast_mode
4009          */
4010         if ((bond_dev->flags & IFF_PROMISC) && !(bond->flags & IFF_PROMISC)) {
4011                 bond_set_promiscuity(bond, 1);
4012         }
4013
4014         if (!(bond_dev->flags & IFF_PROMISC) && (bond->flags & IFF_PROMISC)) {
4015                 bond_set_promiscuity(bond, -1);
4016         }
4017
4018         /* set allmulti flag to slaves */
4019         if ((bond_dev->flags & IFF_ALLMULTI) && !(bond->flags & IFF_ALLMULTI)) {
4020                 bond_set_allmulti(bond, 1);
4021         }
4022
4023         if (!(bond_dev->flags & IFF_ALLMULTI) && (bond->flags & IFF_ALLMULTI)) {
4024                 bond_set_allmulti(bond, -1);
4025         }
4026
4027         bond->flags = bond_dev->flags;
4028
4029         /* looking for addresses to add to slaves' mc list */
4030         for (dmi = bond_dev->mc_list; dmi; dmi = dmi->next) {
4031                 if (!bond_mc_list_find_dmi(dmi, bond->mc_list)) {
4032                         bond_mc_add(bond, dmi->dmi_addr, dmi->dmi_addrlen);
4033                 }
4034         }
4035
4036         /* looking for addresses to delete from slaves' list */
4037         for (dmi = bond->mc_list; dmi; dmi = dmi->next) {
4038                 if (!bond_mc_list_find_dmi(dmi, bond_dev->mc_list)) {
4039                         bond_mc_delete(bond, dmi->dmi_addr, dmi->dmi_addrlen);
4040                 }
4041         }
4042
4043         /* save master's multicast list */
4044         bond_mc_list_destroy(bond);
4045         bond_mc_list_copy(bond_dev->mc_list, bond, GFP_ATOMIC);
4046
4047         write_unlock_bh(&bond->lock);
4048 }
4049
4050 /*
4051  * Change the MTU of all of a master's slaves to match the master
4052  */
4053 static int bond_change_mtu(struct net_device *bond_dev, int new_mtu)
4054 {
4055         struct bonding *bond = bond_dev->priv;
4056         struct slave *slave, *stop_at;
4057         int res = 0;
4058         int i;
4059
4060         dprintk("bond=%p, name=%s, new_mtu=%d\n", bond,
4061                 (bond_dev ? bond_dev->name : "None"), new_mtu);
4062
4063         /* Can't hold bond->lock with bh disabled here since
4064          * some base drivers panic. On the other hand we can't
4065          * hold bond->lock without bh disabled because we'll
4066          * deadlock. The only solution is to rely on the fact
4067          * that we're under rtnl_lock here, and the slaves
4068          * list won't change. This doesn't solve the problem
4069          * of setting the slave's MTU while it is
4070          * transmitting, but the assumption is that the base
4071          * driver can handle that.
4072          *
4073          * TODO: figure out a way to safely iterate the slaves
4074          * list, but without holding a lock around the actual
4075          * call to the base driver.
4076          */
4077
4078         bond_for_each_slave(bond, slave, i) {
4079                 dprintk("s %p s->p %p c_m %p\n", slave,
4080                         slave->prev, slave->dev->change_mtu);
4081                 res = dev_set_mtu(slave->dev, new_mtu);
4082
4083                 if (res) {
4084                         /* If we failed to set the slave's mtu to the new value
4085                          * we must abort the operation even in ACTIVE_BACKUP
4086                          * mode, because if we allow the backup slaves to have
4087                          * different mtu values than the active slave we'll
4088                          * need to change their mtu when doing a failover. That
4089                          * means changing their mtu from timer context, which
4090                          * is probably not a good idea.
4091                          */
4092                         dprintk("err %d %s\n", res, slave->dev->name);
4093                         goto unwind;
4094                 }
4095         }
4096
4097         bond_dev->mtu = new_mtu;
4098
4099         return 0;
4100
4101 unwind:
4102         /* unwind from head to the slave that failed */
4103         stop_at = slave;
4104         bond_for_each_slave_from_to(bond, slave, i, bond->first_slave, stop_at) {
4105                 int tmp_res;
4106
4107                 tmp_res = dev_set_mtu(slave->dev, bond_dev->mtu);
4108                 if (tmp_res) {
4109                         dprintk("unwind err %d dev %s\n", tmp_res,
4110                                 slave->dev->name);
4111                 }
4112         }
4113
4114         return res;
4115 }
4116
4117 /*
4118  * Change HW address
4119  *
4120  * Note that many devices must be down to change the HW address, and
4121  * downing the master releases all slaves.  We can make bonds full of
4122  * bonding devices to test this, however.
4123  */
4124 static int bond_set_mac_address(struct net_device *bond_dev, void *addr)
4125 {
4126         struct bonding *bond = bond_dev->priv;
4127         struct sockaddr *sa = addr, tmp_sa;
4128         struct slave *slave, *stop_at;
4129         int res = 0;
4130         int i;
4131
4132         dprintk("bond=%p, name=%s\n", bond, (bond_dev ? bond_dev->name : "None"));
4133
4134         if (!is_valid_ether_addr(sa->sa_data)) {
4135                 return -EADDRNOTAVAIL;
4136         }
4137
4138         /* Can't hold bond->lock with bh disabled here since
4139          * some base drivers panic. On the other hand we can't
4140          * hold bond->lock without bh disabled because we'll
4141          * deadlock. The only solution is to rely on the fact
4142          * that we're under rtnl_lock here, and the slaves
4143          * list won't change. This doesn't solve the problem
4144          * of setting the slave's hw address while it is
4145          * transmitting, but the assumption is that the base
4146          * driver can handle that.
4147          *
4148          * TODO: figure out a way to safely iterate the slaves
4149          * list, but without holding a lock around the actual
4150          * call to the base driver.
4151          */
4152
4153         bond_for_each_slave(bond, slave, i) {
4154                 dprintk("slave %p %s\n", slave, slave->dev->name);
4155
4156                 if (slave->dev->set_mac_address == NULL) {
4157                         res = -EOPNOTSUPP;
4158                         dprintk("EOPNOTSUPP %s\n", slave->dev->name);
4159                         goto unwind;
4160                 }
4161
4162                 res = dev_set_mac_address(slave->dev, addr);
4163                 if (res) {
4164                         /* TODO: consider downing the slave
4165                          * and retry ?
4166                          * User should expect communications
4167                          * breakage anyway until ARP finish
4168                          * updating, so...
4169                          */
4170                         dprintk("err %d %s\n", res, slave->dev->name);
4171                         goto unwind;
4172                 }
4173         }
4174
4175         /* success */
4176         memcpy(bond_dev->dev_addr, sa->sa_data, bond_dev->addr_len);
4177         return 0;
4178
4179 unwind:
4180         memcpy(tmp_sa.sa_data, bond_dev->dev_addr, bond_dev->addr_len);
4181         tmp_sa.sa_family = bond_dev->type;
4182
4183         /* unwind from head to the slave that failed */
4184         stop_at = slave;
4185         bond_for_each_slave_from_to(bond, slave, i, bond->first_slave, stop_at) {
4186                 int tmp_res;
4187
4188                 tmp_res = dev_set_mac_address(slave->dev, &tmp_sa);
4189                 if (tmp_res) {
4190                         dprintk("unwind err %d dev %s\n", tmp_res,
4191                                 slave->dev->name);
4192                 }
4193         }
4194
4195         return res;
4196 }
4197
4198 static int bond_xmit_roundrobin(struct sk_buff *skb, struct net_device *bond_dev)
4199 {
4200         struct bonding *bond = bond_dev->priv;
4201         struct slave *slave, *start_at;
4202         int i;
4203         int res = 1;
4204
4205         read_lock(&bond->lock);
4206
4207         if (!BOND_IS_OK(bond)) {
4208                 goto out;
4209         }
4210
4211         read_lock(&bond->curr_slave_lock);
4212         slave = start_at = bond->curr_active_slave;
4213         read_unlock(&bond->curr_slave_lock);
4214
4215         if (!slave) {
4216                 goto out;
4217         }
4218
4219         bond_for_each_slave_from(bond, slave, i, start_at) {
4220                 if (IS_UP(slave->dev) &&
4221                     (slave->link == BOND_LINK_UP) &&
4222                     (slave->state == BOND_STATE_ACTIVE)) {
4223                         res = bond_dev_queue_xmit(bond, skb, slave->dev);
4224
4225                         write_lock(&bond->curr_slave_lock);
4226                         bond->curr_active_slave = slave->next;
4227                         write_unlock(&bond->curr_slave_lock);
4228
4229                         break;
4230                 }
4231         }
4232
4233
4234 out:
4235         if (res) {
4236                 /* no suitable interface, frame not sent */
4237                 dev_kfree_skb(skb);
4238         }
4239         read_unlock(&bond->lock);
4240         return 0;
4241 }
4242
4243 /*
4244  * in active-backup mode, we know that bond->curr_active_slave is always valid if
4245  * the bond has a usable interface.
4246  */
4247 static int bond_xmit_activebackup(struct sk_buff *skb, struct net_device *bond_dev)
4248 {
4249         struct bonding *bond = bond_dev->priv;
4250         int res = 1;
4251
4252         read_lock(&bond->lock);
4253         read_lock(&bond->curr_slave_lock);
4254
4255         if (!BOND_IS_OK(bond)) {
4256                 goto out;
4257         }
4258
4259         if (bond->curr_active_slave) { /* one usable interface */
4260                 res = bond_dev_queue_xmit(bond, skb, bond->curr_active_slave->dev);
4261         }
4262
4263 out:
4264         if (res) {
4265                 /* no suitable interface, frame not sent */
4266                 dev_kfree_skb(skb);
4267         }
4268         read_unlock(&bond->curr_slave_lock);
4269         read_unlock(&bond->lock);
4270         return 0;
4271 }
4272
4273 /*
4274  * In bond_xmit_xor() , we determine the output device by using a pre-
4275  * determined xmit_hash_policy(), If the selected device is not enabled,
4276  * find the next active slave.
4277  */
4278 static int bond_xmit_xor(struct sk_buff *skb, struct net_device *bond_dev)
4279 {
4280         struct bonding *bond = bond_dev->priv;
4281         struct slave *slave, *start_at;
4282         int slave_no;
4283         int i;
4284         int res = 1;
4285
4286         read_lock(&bond->lock);
4287
4288         if (!BOND_IS_OK(bond)) {
4289                 goto out;
4290         }
4291
4292         slave_no = bond->xmit_hash_policy(skb, bond_dev, bond->slave_cnt);
4293
4294         bond_for_each_slave(bond, slave, i) {
4295                 slave_no--;
4296                 if (slave_no < 0) {
4297                         break;
4298                 }
4299         }
4300
4301         start_at = slave;
4302
4303         bond_for_each_slave_from(bond, slave, i, start_at) {
4304                 if (IS_UP(slave->dev) &&
4305                     (slave->link == BOND_LINK_UP) &&
4306                     (slave->state == BOND_STATE_ACTIVE)) {
4307                         res = bond_dev_queue_xmit(bond, skb, slave->dev);
4308                         break;
4309                 }
4310         }
4311
4312 out:
4313         if (res) {
4314                 /* no suitable interface, frame not sent */
4315                 dev_kfree_skb(skb);
4316         }
4317         read_unlock(&bond->lock);
4318         return 0;
4319 }
4320
4321 /*
4322  * in broadcast mode, we send everything to all usable interfaces.
4323  */
4324 static int bond_xmit_broadcast(struct sk_buff *skb, struct net_device *bond_dev)
4325 {
4326         struct bonding *bond = bond_dev->priv;
4327         struct slave *slave, *start_at;
4328         struct net_device *tx_dev = NULL;
4329         int i;
4330         int res = 1;
4331
4332         read_lock(&bond->lock);
4333
4334         if (!BOND_IS_OK(bond)) {
4335                 goto out;
4336         }
4337
4338         read_lock(&bond->curr_slave_lock);
4339         start_at = bond->curr_active_slave;
4340         read_unlock(&bond->curr_slave_lock);
4341
4342         if (!start_at) {
4343                 goto out;
4344         }
4345
4346         bond_for_each_slave_from(bond, slave, i, start_at) {
4347                 if (IS_UP(slave->dev) &&
4348                     (slave->link == BOND_LINK_UP) &&
4349                     (slave->state == BOND_STATE_ACTIVE)) {
4350                         if (tx_dev) {
4351                                 struct sk_buff *skb2 = skb_clone(skb, GFP_ATOMIC);
4352                                 if (!skb2) {
4353                                         printk(KERN_ERR DRV_NAME
4354                                                ": Error: bond_xmit_broadcast(): "
4355                                                "skb_clone() failed\n");
4356                                         continue;
4357                                 }
4358
4359                                 res = bond_dev_queue_xmit(bond, skb2, tx_dev);
4360                                 if (res) {
4361                                         dev_kfree_skb(skb2);
4362                                         continue;
4363                                 }
4364                         }
4365                         tx_dev = slave->dev;
4366                 }
4367         }
4368
4369         if (tx_dev) {
4370                 res = bond_dev_queue_xmit(bond, skb, tx_dev);
4371         }
4372
4373 out:
4374         if (res) {
4375                 /* no suitable interface, frame not sent */
4376                 dev_kfree_skb(skb);
4377         }
4378         /* frame sent to all suitable interfaces */
4379         read_unlock(&bond->lock);
4380         return 0;
4381 }
4382
4383 /*------------------------- Device initialization ---------------------------*/
4384
4385 /*
4386  * set bond mode specific net device operations
4387  */
4388 static inline void bond_set_mode_ops(struct bonding *bond, int mode)
4389 {
4390         struct net_device *bond_dev = bond->dev;
4391
4392         switch (mode) {
4393         case BOND_MODE_ROUNDROBIN:
4394                 bond_dev->hard_start_xmit = bond_xmit_roundrobin;
4395                 break;
4396         case BOND_MODE_ACTIVEBACKUP:
4397                 bond_dev->hard_start_xmit = bond_xmit_activebackup;
4398                 break;
4399         case BOND_MODE_XOR:
4400                 bond_dev->hard_start_xmit = bond_xmit_xor;
4401                 if (bond->params.xmit_policy == BOND_XMIT_POLICY_LAYER34)
4402                         bond->xmit_hash_policy = bond_xmit_hash_policy_l34;
4403                 else
4404                         bond->xmit_hash_policy = bond_xmit_hash_policy_l2;
4405                 break;
4406         case BOND_MODE_BROADCAST:
4407                 bond_dev->hard_start_xmit = bond_xmit_broadcast;
4408                 break;
4409         case BOND_MODE_8023AD:
4410                 bond_dev->hard_start_xmit = bond_3ad_xmit_xor;
4411                 if (bond->params.xmit_policy == BOND_XMIT_POLICY_LAYER34)
4412                         bond->xmit_hash_policy = bond_xmit_hash_policy_l34;
4413                 else
4414                         bond->xmit_hash_policy = bond_xmit_hash_policy_l2;
4415                 break;
4416         case BOND_MODE_TLB:
4417         case BOND_MODE_ALB:
4418                 bond_dev->hard_start_xmit = bond_alb_xmit;
4419                 bond_dev->set_mac_address = bond_alb_set_mac_address;
4420                 break;
4421         default:
4422                 /* Should never happen, mode already checked */
4423                 printk(KERN_ERR DRV_NAME
4424                        ": Error: Unknown bonding mode %d\n",
4425                        mode);
4426                 break;
4427         }
4428 }
4429
4430 static void bond_ethtool_get_drvinfo(struct net_device *bond_dev,
4431                                     struct ethtool_drvinfo *drvinfo)
4432 {
4433         strncpy(drvinfo->driver, DRV_NAME, 32);
4434         strncpy(drvinfo->version, DRV_VERSION, 32);
4435         snprintf(drvinfo->fw_version, 32, "%d", BOND_ABI_VERSION);
4436 }
4437
4438 static struct ethtool_ops bond_ethtool_ops = {
4439         .get_tx_csum            = ethtool_op_get_tx_csum,
4440         .get_sg                 = ethtool_op_get_sg,
4441         .get_drvinfo            = bond_ethtool_get_drvinfo,
4442 };
4443
4444 /*
4445  * Does not allocate but creates a /proc entry.
4446  * Allowed to fail.
4447  */
4448 static int __init bond_init(struct net_device *bond_dev, struct bond_params *params)
4449 {
4450         struct bonding *bond = bond_dev->priv;
4451
4452         dprintk("Begin bond_init for %s\n", bond_dev->name);
4453
4454         /* initialize rwlocks */
4455         rwlock_init(&bond->lock);
4456         rwlock_init(&bond->curr_slave_lock);
4457
4458         bond->params = *params; /* copy params struct */
4459
4460         /* Initialize pointers */
4461         bond->first_slave = NULL;
4462         bond->curr_active_slave = NULL;
4463         bond->current_arp_slave = NULL;
4464         bond->primary_slave = NULL;
4465         bond->dev = bond_dev;
4466         INIT_LIST_HEAD(&bond->vlan_list);
4467
4468         /* Initialize the device entry points */
4469         bond_dev->open = bond_open;
4470         bond_dev->stop = bond_close;
4471         bond_dev->get_stats = bond_get_stats;
4472         bond_dev->do_ioctl = bond_do_ioctl;
4473         bond_dev->ethtool_ops = &bond_ethtool_ops;
4474         bond_dev->set_multicast_list = bond_set_multicast_list;
4475         bond_dev->change_mtu = bond_change_mtu;
4476         bond_dev->set_mac_address = bond_set_mac_address;
4477
4478         bond_set_mode_ops(bond, bond->params.mode);
4479
4480         bond_dev->destructor = free_netdev;
4481
4482         /* Initialize the device options */
4483         bond_dev->tx_queue_len = 0;
4484         bond_dev->flags |= IFF_MASTER|IFF_MULTICAST;
4485
4486         /* At first, we block adding VLANs. That's the only way to
4487          * prevent problems that occur when adding VLANs over an
4488          * empty bond. The block will be removed once non-challenged
4489          * slaves are enslaved.
4490          */
4491         bond_dev->features |= NETIF_F_VLAN_CHALLENGED;
4492
4493         /* don't acquire bond device's xmit_lock when 
4494          * transmitting */
4495         bond_dev->features |= NETIF_F_LLTX;
4496
4497         /* By default, we declare the bond to be fully
4498          * VLAN hardware accelerated capable. Special
4499          * care is taken in the various xmit functions
4500          * when there are slaves that are not hw accel
4501          * capable
4502          */
4503         bond_dev->vlan_rx_register = bond_vlan_rx_register;
4504         bond_dev->vlan_rx_add_vid  = bond_vlan_rx_add_vid;
4505         bond_dev->vlan_rx_kill_vid = bond_vlan_rx_kill_vid;
4506         bond_dev->features |= (NETIF_F_HW_VLAN_TX |
4507                                NETIF_F_HW_VLAN_RX |
4508                                NETIF_F_HW_VLAN_FILTER);
4509
4510         bond->bond_features = bond_dev->features;
4511
4512 #ifdef CONFIG_PROC_FS
4513         bond_create_proc_entry(bond);
4514 #endif
4515
4516         list_add_tail(&bond->bond_list, &bond_dev_list);
4517
4518         return 0;
4519 }
4520
4521 /* De-initialize device specific data.
4522  * Caller must hold rtnl_lock.
4523  */
4524 static inline void bond_deinit(struct net_device *bond_dev)
4525 {
4526         struct bonding *bond = bond_dev->priv;
4527
4528         list_del(&bond->bond_list);
4529
4530 #ifdef CONFIG_PROC_FS
4531         bond_remove_proc_entry(bond);
4532 #endif
4533 }
4534
4535 /* Unregister and free all bond devices.
4536  * Caller must hold rtnl_lock.
4537  */
4538 static void bond_free_all(void)
4539 {
4540         struct bonding *bond, *nxt;
4541
4542         list_for_each_entry_safe(bond, nxt, &bond_dev_list, bond_list) {
4543                 struct net_device *bond_dev = bond->dev;
4544
4545                 unregister_netdevice(bond_dev);
4546                 bond_deinit(bond_dev);
4547         }
4548
4549 #ifdef CONFIG_PROC_FS
4550         bond_destroy_proc_dir();
4551 #endif
4552 }
4553
4554 /*------------------------- Module initialization ---------------------------*/
4555
4556 /*
4557  * Convert string input module parms.  Accept either the
4558  * number of the mode or its string name.
4559  */
4560 static inline int bond_parse_parm(char *mode_arg, struct bond_parm_tbl *tbl)
4561 {
4562         int i;
4563
4564         for (i = 0; tbl[i].modename; i++) {
4565                 if ((isdigit(*mode_arg) &&
4566                      tbl[i].mode == simple_strtol(mode_arg, NULL, 0)) ||
4567                     (strncmp(mode_arg, tbl[i].modename,
4568                              strlen(tbl[i].modename)) == 0)) {
4569                         return tbl[i].mode;
4570                 }
4571         }
4572
4573         return -1;
4574 }
4575
4576 static int bond_check_params(struct bond_params *params)
4577 {
4578         /*
4579          * Convert string parameters.
4580          */
4581         if (mode) {
4582                 bond_mode = bond_parse_parm(mode, bond_mode_tbl);
4583                 if (bond_mode == -1) {
4584                         printk(KERN_ERR DRV_NAME
4585                                ": Error: Invalid bonding mode \"%s\"\n",
4586                                mode == NULL ? "NULL" : mode);
4587                         return -EINVAL;
4588                 }
4589         }
4590
4591         if (xmit_hash_policy) {
4592                 if ((bond_mode != BOND_MODE_XOR) &&
4593                     (bond_mode != BOND_MODE_8023AD)) {
4594                         printk(KERN_INFO DRV_NAME
4595                                ": xor_mode param is irrelevant in mode %s\n",
4596                                bond_mode_name(bond_mode));
4597                 } else {
4598                         xmit_hashtype = bond_parse_parm(xmit_hash_policy,
4599                                                         xmit_hashtype_tbl);
4600                         if (xmit_hashtype == -1) {
4601                                 printk(KERN_ERR DRV_NAME
4602                                 ": Error: Invalid xmit_hash_policy \"%s\"\n",
4603                                 xmit_hash_policy == NULL ? "NULL" :
4604                                        xmit_hash_policy);
4605                                 return -EINVAL;
4606                         }
4607                 }
4608         }
4609
4610         if (lacp_rate) {
4611                 if (bond_mode != BOND_MODE_8023AD) {
4612                         printk(KERN_INFO DRV_NAME
4613                                ": lacp_rate param is irrelevant in mode %s\n",
4614                                bond_mode_name(bond_mode));
4615                 } else {
4616                         lacp_fast = bond_parse_parm(lacp_rate, bond_lacp_tbl);
4617                         if (lacp_fast == -1) {
4618                                 printk(KERN_ERR DRV_NAME
4619                                        ": Error: Invalid lacp rate \"%s\"\n",
4620                                        lacp_rate == NULL ? "NULL" : lacp_rate);
4621                                 return -EINVAL;
4622                         }
4623                 }
4624         }
4625
4626         if (max_bonds < 1 || max_bonds > INT_MAX) {
4627                 printk(KERN_WARNING DRV_NAME
4628                        ": Warning: max_bonds (%d) not in range %d-%d, so it "
4629                        "was reset to BOND_DEFAULT_MAX_BONDS (%d)",
4630                        max_bonds, 1, INT_MAX, BOND_DEFAULT_MAX_BONDS);
4631                 max_bonds = BOND_DEFAULT_MAX_BONDS;
4632         }
4633
4634         if (miimon < 0) {
4635                 printk(KERN_WARNING DRV_NAME
4636                        ": Warning: miimon module parameter (%d), "
4637                        "not in range 0-%d, so it was reset to %d\n",
4638                        miimon, INT_MAX, BOND_LINK_MON_INTERV);
4639                 miimon = BOND_LINK_MON_INTERV;
4640         }
4641
4642         if (updelay < 0) {
4643                 printk(KERN_WARNING DRV_NAME
4644                        ": Warning: updelay module parameter (%d), "
4645                        "not in range 0-%d, so it was reset to 0\n",
4646                        updelay, INT_MAX);
4647                 updelay = 0;
4648         }
4649
4650         if (downdelay < 0) {
4651                 printk(KERN_WARNING DRV_NAME
4652                        ": Warning: downdelay module parameter (%d), "
4653                        "not in range 0-%d, so it was reset to 0\n",
4654                        downdelay, INT_MAX);
4655                 downdelay = 0;
4656         }
4657
4658         if ((use_carrier != 0) && (use_carrier != 1)) {
4659                 printk(KERN_WARNING DRV_NAME
4660                        ": Warning: use_carrier module parameter (%d), "
4661                        "not of valid value (0/1), so it was set to 1\n",
4662                        use_carrier);
4663                 use_carrier = 1;
4664         }
4665
4666         /* reset values for 802.3ad */
4667         if (bond_mode == BOND_MODE_8023AD) {
4668                 if (!miimon) {
4669                         printk(KERN_WARNING DRV_NAME
4670                                ": Warning: miimon must be specified, "
4671                                "otherwise bonding will not detect link "
4672                                "failure, speed and duplex which are "
4673                                "essential for 802.3ad operation\n");
4674                         printk(KERN_WARNING "Forcing miimon to 100msec\n");
4675                         miimon = 100;
4676                 }
4677         }
4678
4679         /* reset values for TLB/ALB */
4680         if ((bond_mode == BOND_MODE_TLB) ||
4681             (bond_mode == BOND_MODE_ALB)) {
4682                 if (!miimon) {
4683                         printk(KERN_WARNING DRV_NAME
4684                                ": Warning: miimon must be specified, "
4685                                "otherwise bonding will not detect link "
4686                                "failure and link speed which are essential "
4687                                "for TLB/ALB load balancing\n");
4688                         printk(KERN_WARNING "Forcing miimon to 100msec\n");
4689                         miimon = 100;
4690                 }
4691         }
4692
4693         if (bond_mode == BOND_MODE_ALB) {
4694                 printk(KERN_NOTICE DRV_NAME
4695                        ": In ALB mode you might experience client "
4696                        "disconnections upon reconnection of a link if the "
4697                        "bonding module updelay parameter (%d msec) is "
4698                        "incompatible with the forwarding delay time of the "
4699                        "switch\n",
4700                        updelay);
4701         }
4702
4703         if (!miimon) {
4704                 if (updelay || downdelay) {
4705                         /* just warn the user the up/down delay will have
4706                          * no effect since miimon is zero...
4707                          */
4708                         printk(KERN_WARNING DRV_NAME
4709                                ": Warning: miimon module parameter not set "
4710                                "and updelay (%d) or downdelay (%d) module "
4711                                "parameter is set; updelay and downdelay have "
4712                                "no effect unless miimon is set\n",
4713                                updelay, downdelay);
4714                 }
4715         } else {
4716                 /* don't allow arp monitoring */
4717                 if (arp_interval) {
4718                         printk(KERN_WARNING DRV_NAME
4719                                ": Warning: miimon (%d) and arp_interval (%d) "
4720                                "can't be used simultaneously, disabling ARP "
4721                                "monitoring\n",
4722                                miimon, arp_interval);
4723                         arp_interval = 0;
4724                 }
4725
4726                 if ((updelay % miimon) != 0) {
4727                         printk(KERN_WARNING DRV_NAME
4728                                ": Warning: updelay (%d) is not a multiple "
4729                                "of miimon (%d), updelay rounded to %d ms\n",
4730                                updelay, miimon, (updelay / miimon) * miimon);
4731                 }
4732
4733                 updelay /= miimon;
4734
4735                 if ((downdelay % miimon) != 0) {
4736                         printk(KERN_WARNING DRV_NAME
4737                                ": Warning: downdelay (%d) is not a multiple "
4738                                "of miimon (%d), downdelay rounded to %d ms\n",
4739                                downdelay, miimon,
4740                                (downdelay / miimon) * miimon);
4741                 }
4742
4743                 downdelay /= miimon;
4744         }
4745
4746         if (arp_interval < 0) {
4747                 printk(KERN_WARNING DRV_NAME
4748                        ": Warning: arp_interval module parameter (%d) "
4749                        ", not in range 0-%d, so it was reset to %d\n",
4750                        arp_interval, INT_MAX, BOND_LINK_ARP_INTERV);
4751                 arp_interval = BOND_LINK_ARP_INTERV;
4752         }
4753
4754         for (arp_ip_count = 0;
4755              (arp_ip_count < BOND_MAX_ARP_TARGETS) && arp_ip_target[arp_ip_count];
4756              arp_ip_count++) {
4757                 /* not complete check, but should be good enough to
4758                    catch mistakes */
4759                 if (!isdigit(arp_ip_target[arp_ip_count][0])) {
4760                         printk(KERN_WARNING DRV_NAME
4761                                ": Warning: bad arp_ip_target module parameter "
4762                                "(%s), ARP monitoring will not be performed\n",
4763                                arp_ip_target[arp_ip_count]);
4764                         arp_interval = 0;
4765                 } else {
4766                         u32 ip = in_aton(arp_ip_target[arp_ip_count]);
4767                         arp_target[arp_ip_count] = ip;
4768                 }
4769         }
4770
4771         if (arp_interval && !arp_ip_count) {
4772                 /* don't allow arping if no arp_ip_target given... */
4773                 printk(KERN_WARNING DRV_NAME
4774                        ": Warning: arp_interval module parameter (%d) "
4775                        "specified without providing an arp_ip_target "
4776                        "parameter, arp_interval was reset to 0\n",
4777                        arp_interval);
4778                 arp_interval = 0;
4779         }
4780
4781         if (miimon) {
4782                 printk(KERN_INFO DRV_NAME
4783                        ": MII link monitoring set to %d ms\n",
4784                        miimon);
4785         } else if (arp_interval) {
4786                 int i;
4787
4788                 printk(KERN_INFO DRV_NAME
4789                        ": ARP monitoring set to %d ms with %d target(s):",
4790                        arp_interval, arp_ip_count);
4791
4792                 for (i = 0; i < arp_ip_count; i++)
4793                         printk (" %s", arp_ip_target[i]);
4794
4795                 printk("\n");
4796
4797         } else {
4798                 /* miimon and arp_interval not set, we need one so things
4799                  * work as expected, see bonding.txt for details
4800                  */
4801                 printk(KERN_WARNING DRV_NAME
4802                        ": Warning: either miimon or arp_interval and "
4803                        "arp_ip_target module parameters must be specified, "
4804                        "otherwise bonding will not detect link failures! see "
4805                        "bonding.txt for details.\n");
4806         }
4807
4808         if (primary && !USES_PRIMARY(bond_mode)) {
4809                 /* currently, using a primary only makes sense
4810                  * in active backup, TLB or ALB modes
4811                  */
4812                 printk(KERN_WARNING DRV_NAME
4813                        ": Warning: %s primary device specified but has no "
4814                        "effect in %s mode\n",
4815                        primary, bond_mode_name(bond_mode));
4816                 primary = NULL;
4817         }
4818
4819         /* fill params struct with the proper values */
4820         params->mode = bond_mode;
4821         params->xmit_policy = xmit_hashtype;
4822         params->miimon = miimon;
4823         params->arp_interval = arp_interval;
4824         params->updelay = updelay;
4825         params->downdelay = downdelay;
4826         params->use_carrier = use_carrier;
4827         params->lacp_fast = lacp_fast;
4828         params->primary[0] = 0;
4829
4830         if (primary) {
4831                 strncpy(params->primary, primary, IFNAMSIZ);
4832                 params->primary[IFNAMSIZ - 1] = 0;
4833         }
4834
4835         memcpy(params->arp_targets, arp_target, sizeof(arp_target));
4836
4837         return 0;
4838 }
4839
4840 static int __init bonding_init(void)
4841 {
4842         struct bond_params params;
4843         int i;
4844         int res;
4845
4846         printk(KERN_INFO "%s", version);
4847
4848         res = bond_check_params(&params);
4849         if (res) {
4850                 return res;
4851         }
4852
4853         rtnl_lock();
4854
4855 #ifdef CONFIG_PROC_FS
4856         bond_create_proc_dir();
4857 #endif
4858
4859         for (i = 0; i < max_bonds; i++) {
4860                 struct net_device *bond_dev;
4861
4862                 bond_dev = alloc_netdev(sizeof(struct bonding), "", ether_setup);
4863                 if (!bond_dev) {
4864                         res = -ENOMEM;
4865                         goto out_err;
4866                 }
4867
4868                 res = dev_alloc_name(bond_dev, "bond%d");
4869                 if (res < 0) {
4870                         free_netdev(bond_dev);
4871                         goto out_err;
4872                 }
4873
4874                 /* bond_init() must be called after dev_alloc_name() (for the
4875                  * /proc files), but before register_netdevice(), because we
4876                  * need to set function pointers.
4877                  */
4878                 res = bond_init(bond_dev, &params);
4879                 if (res < 0) {
4880                         free_netdev(bond_dev);
4881                         goto out_err;
4882                 }
4883
4884                 SET_MODULE_OWNER(bond_dev);
4885
4886                 res = register_netdevice(bond_dev);
4887                 if (res < 0) {
4888                         bond_deinit(bond_dev);
4889                         free_netdev(bond_dev);
4890                         goto out_err;
4891                 }
4892         }
4893
4894         rtnl_unlock();
4895         register_netdevice_notifier(&bond_netdev_notifier);
4896         register_inetaddr_notifier(&bond_inetaddr_notifier);
4897
4898         return 0;
4899
4900 out_err:
4901         /*
4902          * rtnl_unlock() will run netdev_run_todo(), putting the
4903          * thus-far-registered bonding devices into a state which
4904          * unregigister_netdevice() will accept
4905          */
4906         rtnl_unlock();
4907         rtnl_lock();
4908
4909         /* free and unregister all bonds that were successfully added */
4910         bond_free_all();
4911
4912         rtnl_unlock();
4913
4914         return res;
4915 }
4916
4917 static void __exit bonding_exit(void)
4918 {
4919         unregister_netdevice_notifier(&bond_netdev_notifier);
4920         unregister_inetaddr_notifier(&bond_inetaddr_notifier);
4921
4922         rtnl_lock();
4923         bond_free_all();
4924         rtnl_unlock();
4925 }
4926
4927 module_init(bonding_init);
4928 module_exit(bonding_exit);
4929 MODULE_LICENSE("GPL");
4930 MODULE_VERSION(DRV_VERSION);
4931 MODULE_DESCRIPTION(DRV_DESCRIPTION ", v" DRV_VERSION);
4932 MODULE_AUTHOR("Thomas Davis, tadavis@lbl.gov and many others");
4933 MODULE_SUPPORTED_DEVICE("most ethernet devices");
4934
4935 /*
4936  * Local variables:
4937  *  c-indent-level: 8
4938  *  c-basic-offset: 8
4939  *  tab-width: 8
4940  * End:
4941  */
4942