Merge branch 'for-linus' of git://git.infradead.org/ubi-2.6
[linux-2.6] / drivers / net / netxen / netxen_nic_init.c
1 /*
2  * Copyright (C) 2003 - 2006 NetXen, Inc.
3  * All rights reserved.
4  *
5  * This program is free software; you can redistribute it and/or
6  * modify it under the terms of the GNU General Public License
7  * as published by the Free Software Foundation; either version 2
8  * of the License, or (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful, but
11  * WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 59 Temple Place - Suite 330, Boston,
18  * MA  02111-1307, USA.
19  *
20  * The full GNU General Public License is included in this distribution
21  * in the file called LICENSE.
22  *
23  * Contact Information:
24  *    info@netxen.com
25  * NetXen,
26  * 3965 Freedom Circle, Fourth floor,
27  * Santa Clara, CA 95054
28  *
29  *
30  * Source file for NIC routines to initialize the Phantom Hardware
31  *
32  */
33
34 #include <linux/netdevice.h>
35 #include <linux/delay.h>
36 #include "netxen_nic.h"
37 #include "netxen_nic_hw.h"
38 #include "netxen_nic_phan_reg.h"
39
40 struct crb_addr_pair {
41         u32 addr;
42         u32 data;
43 };
44
45 unsigned long last_schedule_time;
46
47 #define NETXEN_MAX_CRB_XFORM 60
48 static unsigned int crb_addr_xform[NETXEN_MAX_CRB_XFORM];
49 #define NETXEN_ADDR_ERROR (0xffffffff)
50
51 #define crb_addr_transform(name) \
52         crb_addr_xform[NETXEN_HW_PX_MAP_CRB_##name] = \
53         NETXEN_HW_CRB_HUB_AGT_ADR_##name << 20
54
55 #define NETXEN_NIC_XDMA_RESET 0x8000ff
56
57 static inline void
58 netxen_nic_locked_write_reg(struct netxen_adapter *adapter,
59                             unsigned long off, int *data)
60 {
61         void __iomem *addr = pci_base_offset(adapter, off);
62         writel(*data, addr);
63 }
64
65 static void crb_addr_transform_setup(void)
66 {
67         crb_addr_transform(XDMA);
68         crb_addr_transform(TIMR);
69         crb_addr_transform(SRE);
70         crb_addr_transform(SQN3);
71         crb_addr_transform(SQN2);
72         crb_addr_transform(SQN1);
73         crb_addr_transform(SQN0);
74         crb_addr_transform(SQS3);
75         crb_addr_transform(SQS2);
76         crb_addr_transform(SQS1);
77         crb_addr_transform(SQS0);
78         crb_addr_transform(RPMX7);
79         crb_addr_transform(RPMX6);
80         crb_addr_transform(RPMX5);
81         crb_addr_transform(RPMX4);
82         crb_addr_transform(RPMX3);
83         crb_addr_transform(RPMX2);
84         crb_addr_transform(RPMX1);
85         crb_addr_transform(RPMX0);
86         crb_addr_transform(ROMUSB);
87         crb_addr_transform(SN);
88         crb_addr_transform(QMN);
89         crb_addr_transform(QMS);
90         crb_addr_transform(PGNI);
91         crb_addr_transform(PGND);
92         crb_addr_transform(PGN3);
93         crb_addr_transform(PGN2);
94         crb_addr_transform(PGN1);
95         crb_addr_transform(PGN0);
96         crb_addr_transform(PGSI);
97         crb_addr_transform(PGSD);
98         crb_addr_transform(PGS3);
99         crb_addr_transform(PGS2);
100         crb_addr_transform(PGS1);
101         crb_addr_transform(PGS0);
102         crb_addr_transform(PS);
103         crb_addr_transform(PH);
104         crb_addr_transform(NIU);
105         crb_addr_transform(I2Q);
106         crb_addr_transform(EG);
107         crb_addr_transform(MN);
108         crb_addr_transform(MS);
109         crb_addr_transform(CAS2);
110         crb_addr_transform(CAS1);
111         crb_addr_transform(CAS0);
112         crb_addr_transform(CAM);
113         crb_addr_transform(C2C1);
114         crb_addr_transform(C2C0);
115         crb_addr_transform(SMB);
116 }
117
118 int netxen_init_firmware(struct netxen_adapter *adapter)
119 {
120         u32 state = 0, loops = 0, err = 0;
121
122         /* Window 1 call */
123         state = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
124
125         if (state == PHAN_INITIALIZE_ACK)
126                 return 0;
127
128         while (state != PHAN_INITIALIZE_COMPLETE && loops < 2000) {
129                 udelay(100);
130                 /* Window 1 call */
131                 state = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
132
133                 loops++;
134         }
135         if (loops >= 2000) {
136                 printk(KERN_ERR "Cmd Peg initialization not complete:%x.\n",
137                        state);
138                 err = -EIO;
139                 return err;
140         }
141         /* Window 1 call */
142         writel(MPORT_SINGLE_FUNCTION_MODE,
143                NETXEN_CRB_NORMALIZE(adapter, CRB_MPORT_MODE));
144         writel(PHAN_INITIALIZE_ACK,
145                NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
146
147         return err;
148 }
149
150 #define NETXEN_ADDR_LIMIT 0xffffffffULL
151
152 void *netxen_alloc(struct pci_dev *pdev, size_t sz, dma_addr_t * ptr,
153                    struct pci_dev **used_dev)
154 {
155         void *addr;
156
157         addr = pci_alloc_consistent(pdev, sz, ptr);
158         if ((unsigned long long)(*ptr) < NETXEN_ADDR_LIMIT) {
159                 *used_dev = pdev;
160                 return addr;
161         }
162         pci_free_consistent(pdev, sz, addr, *ptr);
163         addr = pci_alloc_consistent(NULL, sz, ptr);
164         *used_dev = NULL;
165         return addr;
166 }
167
168 void netxen_initialize_adapter_sw(struct netxen_adapter *adapter)
169 {
170         int ctxid, ring;
171         u32 i;
172         u32 num_rx_bufs = 0;
173         struct netxen_rcv_desc_ctx *rcv_desc;
174
175         DPRINTK(INFO, "initializing some queues: %p\n", adapter);
176         for (ctxid = 0; ctxid < MAX_RCV_CTX; ++ctxid) {
177                 for (ring = 0; ring < NUM_RCV_DESC_RINGS; ring++) {
178                         struct netxen_rx_buffer *rx_buf;
179                         rcv_desc = &adapter->recv_ctx[ctxid].rcv_desc[ring];
180                         rcv_desc->rcv_free = rcv_desc->max_rx_desc_count;
181                         rcv_desc->begin_alloc = 0;
182                         rx_buf = rcv_desc->rx_buf_arr;
183                         num_rx_bufs = rcv_desc->max_rx_desc_count;
184                         /*
185                          * Now go through all of them, set reference handles
186                          * and put them in the queues.
187                          */
188                         for (i = 0; i < num_rx_bufs; i++) {
189                                 rx_buf->ref_handle = i;
190                                 rx_buf->state = NETXEN_BUFFER_FREE;
191                                 DPRINTK(INFO, "Rx buf:ctx%d i(%d) rx_buf:"
192                                         "%p\n", ctxid, i, rx_buf);
193                                 rx_buf++;
194                         }
195                 }
196         }
197 }
198
199 void netxen_initialize_adapter_hw(struct netxen_adapter *adapter)
200 {
201         int ports = 0;
202         struct netxen_board_info *board_info = &(adapter->ahw.boardcfg);
203
204         if (netxen_nic_get_board_info(adapter) != 0)
205                 printk("%s: Error getting board config info.\n",
206                        netxen_nic_driver_name);
207         get_brd_port_by_type(board_info->board_type, &ports);
208         if (ports == 0)
209                 printk(KERN_ERR "%s: Unknown board type\n",
210                        netxen_nic_driver_name);
211         adapter->ahw.max_ports = ports;
212 }
213
214 void netxen_initialize_adapter_ops(struct netxen_adapter *adapter)
215 {
216         switch (adapter->ahw.board_type) {
217         case NETXEN_NIC_GBE:
218                 adapter->enable_phy_interrupts =
219                     netxen_niu_gbe_enable_phy_interrupts;
220                 adapter->disable_phy_interrupts =
221                     netxen_niu_gbe_disable_phy_interrupts;
222                 adapter->handle_phy_intr = netxen_nic_gbe_handle_phy_intr;
223                 adapter->macaddr_set = netxen_niu_macaddr_set;
224                 adapter->set_mtu = netxen_nic_set_mtu_gb;
225                 adapter->set_promisc = netxen_niu_set_promiscuous_mode;
226                 adapter->unset_promisc = netxen_niu_set_promiscuous_mode;
227                 adapter->phy_read = netxen_niu_gbe_phy_read;
228                 adapter->phy_write = netxen_niu_gbe_phy_write;
229                 adapter->init_port = netxen_niu_gbe_init_port;
230                 adapter->init_niu = netxen_nic_init_niu_gb;
231                 adapter->stop_port = netxen_niu_disable_gbe_port;
232                 break;
233
234         case NETXEN_NIC_XGBE:
235                 adapter->enable_phy_interrupts =
236                     netxen_niu_xgbe_enable_phy_interrupts;
237                 adapter->disable_phy_interrupts =
238                     netxen_niu_xgbe_disable_phy_interrupts;
239                 adapter->handle_phy_intr = netxen_nic_xgbe_handle_phy_intr;
240                 adapter->macaddr_set = netxen_niu_xg_macaddr_set;
241                 adapter->set_mtu = netxen_nic_set_mtu_xgb;
242                 adapter->init_port = netxen_niu_xg_init_port;
243                 adapter->set_promisc = netxen_niu_xg_set_promiscuous_mode;
244                 adapter->unset_promisc = netxen_niu_xg_set_promiscuous_mode;
245                 adapter->stop_port = netxen_niu_disable_xg_port;
246                 break;
247
248         default:
249                 break;
250         }
251 }
252
253 /*
254  * netxen_decode_crb_addr(0 - utility to translate from internal Phantom CRB
255  * address to external PCI CRB address.
256  */
257 u32 netxen_decode_crb_addr(u32 addr)
258 {
259         int i;
260         u32 base_addr, offset, pci_base;
261
262         crb_addr_transform_setup();
263
264         pci_base = NETXEN_ADDR_ERROR;
265         base_addr = addr & 0xfff00000;
266         offset = addr & 0x000fffff;
267
268         for (i = 0; i < NETXEN_MAX_CRB_XFORM; i++) {
269                 if (crb_addr_xform[i] == base_addr) {
270                         pci_base = i << 20;
271                         break;
272                 }
273         }
274         if (pci_base == NETXEN_ADDR_ERROR)
275                 return pci_base;
276         else
277                 return (pci_base + offset);
278 }
279
280 static long rom_max_timeout = 10000;
281 static long rom_lock_timeout = 1000000;
282 static long rom_write_timeout = 700;
283
284 static inline int rom_lock(struct netxen_adapter *adapter)
285 {
286         int iter;
287         u32 done = 0;
288         int timeout = 0;
289
290         while (!done) {
291                 /* acquire semaphore2 from PCI HW block */
292                 netxen_nic_read_w0(adapter, NETXEN_PCIE_REG(PCIE_SEM2_LOCK),
293                                    &done);
294                 if (done == 1)
295                         break;
296                 if (timeout >= rom_lock_timeout)
297                         return -EIO;
298
299                 timeout++;
300                 /*
301                  * Yield CPU
302                  */
303                 if (!in_atomic())
304                         schedule();
305                 else {
306                         for (iter = 0; iter < 20; iter++)
307                                 cpu_relax();    /*This a nop instr on i386 */
308                 }
309         }
310         netxen_nic_reg_write(adapter, NETXEN_ROM_LOCK_ID, ROM_LOCK_DRIVER);
311         return 0;
312 }
313
314 int netxen_wait_rom_done(struct netxen_adapter *adapter)
315 {
316         long timeout = 0;
317         long done = 0;
318
319         while (done == 0) {
320                 done = netxen_nic_reg_read(adapter, NETXEN_ROMUSB_GLB_STATUS);
321                 done &= 2;
322                 timeout++;
323                 if (timeout >= rom_max_timeout) {
324                         printk("Timeout reached  waiting for rom done");
325                         return -EIO;
326                 }
327         }
328         return 0;
329 }
330
331 static inline int netxen_rom_wren(struct netxen_adapter *adapter)
332 {
333         /* Set write enable latch in ROM status register */
334         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
335         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
336                              M25P_INSTR_WREN);
337         if (netxen_wait_rom_done(adapter)) {
338                 return -1;
339         }
340         return 0;
341 }
342
343 static inline unsigned int netxen_rdcrbreg(struct netxen_adapter *adapter,
344                                            unsigned int addr)
345 {
346         unsigned int data = 0xdeaddead;
347         data = netxen_nic_reg_read(adapter, addr);
348         return data;
349 }
350
351 static inline int netxen_do_rom_rdsr(struct netxen_adapter *adapter)
352 {
353         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
354                              M25P_INSTR_RDSR);
355         if (netxen_wait_rom_done(adapter)) {
356                 return -1;
357         }
358         return netxen_rdcrbreg(adapter, NETXEN_ROMUSB_ROM_RDATA);
359 }
360
361 static inline void netxen_rom_unlock(struct netxen_adapter *adapter)
362 {
363         u32 val;
364
365         /* release semaphore2 */
366         netxen_nic_read_w0(adapter, NETXEN_PCIE_REG(PCIE_SEM2_UNLOCK), &val);
367
368 }
369
370 int netxen_rom_wip_poll(struct netxen_adapter *adapter)
371 {
372         long timeout = 0;
373         long wip = 1;
374         int val;
375         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
376         while (wip != 0) {
377                 val = netxen_do_rom_rdsr(adapter);
378                 wip = val & 1;
379                 timeout++;
380                 if (timeout > rom_max_timeout) {
381                         return -1;
382                 }
383         }
384         return 0;
385 }
386
387 static inline int do_rom_fast_write(struct netxen_adapter *adapter, int addr,
388                                     int data)
389 {
390         if (netxen_rom_wren(adapter)) {
391                 return -1;
392         }
393         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_WDATA, data);
394         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
395         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
396         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
397                              M25P_INSTR_PP);
398         if (netxen_wait_rom_done(adapter)) {
399                 netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
400                 return -1;
401         }
402
403         return netxen_rom_wip_poll(adapter);
404 }
405
406 static inline int
407 do_rom_fast_read(struct netxen_adapter *adapter, int addr, int *valp)
408 {
409         if (jiffies > (last_schedule_time + (8 * HZ))) {
410                 last_schedule_time = jiffies;
411                 schedule();
412         }
413
414         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
415         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
416         udelay(100);            /* prevent bursting on CRB */
417         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_DUMMY_BYTE_CNT, 0);
418         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE, 0xb);
419         if (netxen_wait_rom_done(adapter)) {
420                 printk("Error waiting for rom done\n");
421                 return -EIO;
422         }
423         /* reset abyte_cnt and dummy_byte_cnt */
424         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
425         udelay(100);            /* prevent bursting on CRB */
426         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_DUMMY_BYTE_CNT, 0);
427
428         *valp = netxen_nic_reg_read(adapter, NETXEN_ROMUSB_ROM_RDATA);
429         return 0;
430 }
431
432 static inline int 
433 do_rom_fast_read_words(struct netxen_adapter *adapter, int addr,
434                         u8 *bytes, size_t size)
435 {
436         int addridx;
437         int ret = 0;
438
439         for (addridx = addr; addridx < (addr + size); addridx += 4) {
440                 ret = do_rom_fast_read(adapter, addridx, (int *)bytes);
441                 *(int *)bytes = cpu_to_le32(*(int *)bytes);
442                 if (ret != 0)
443                         break;
444                 bytes += 4;
445         }
446
447         return ret;
448 }
449
450 int
451 netxen_rom_fast_read_words(struct netxen_adapter *adapter, int addr, 
452                                 u8 *bytes, size_t size)
453 {
454         int ret;
455
456         ret = rom_lock(adapter);
457         if (ret < 0)
458                 return ret;
459
460         ret = do_rom_fast_read_words(adapter, addr, bytes, size);
461
462         netxen_rom_unlock(adapter);
463         return ret;
464 }
465
466 int netxen_rom_fast_read(struct netxen_adapter *adapter, int addr, int *valp)
467 {
468         int ret;
469
470         if (rom_lock(adapter) != 0)
471                 return -EIO;
472
473         ret = do_rom_fast_read(adapter, addr, valp);
474         netxen_rom_unlock(adapter);
475         return ret;
476 }
477
478 int netxen_rom_fast_write(struct netxen_adapter *adapter, int addr, int data)
479 {
480         int ret = 0;
481
482         if (rom_lock(adapter) != 0) {
483                 return -1;
484         }
485         ret = do_rom_fast_write(adapter, addr, data);
486         netxen_rom_unlock(adapter);
487         return ret;
488 }
489
490 static inline int do_rom_fast_write_words(struct netxen_adapter *adapter, 
491                                                 int addr, u8 *bytes, size_t size)
492 {
493         int addridx = addr;
494         int ret = 0;
495
496         while (addridx < (addr + size)) {
497                 int last_attempt = 0;
498                 int timeout = 0;
499                 int data;
500
501                 data = le32_to_cpu((*(u32*)bytes));
502
503                 ret = do_rom_fast_write(adapter, addridx, data);
504                 if (ret < 0)
505                         return ret;
506                         
507                 while(1) {
508                         int data1;
509
510                         ret = do_rom_fast_read(adapter, addridx, &data1);
511                         if (ret < 0)
512                                 return ret;
513
514                         if (data1 == data)
515                                 break;
516
517                         if (timeout++ >= rom_write_timeout) {
518                                 if (last_attempt++ < 4) {
519                                         ret = do_rom_fast_write(adapter, 
520                                                                 addridx, data);
521                                         if (ret < 0)
522                                                 return ret;
523                                 }
524                                 else {
525                                         printk(KERN_INFO "Data write did not "
526                                            "succeed at address 0x%x\n", addridx);
527                                         break;
528                                 }
529                         }
530                 }
531
532                 bytes += 4;
533                 addridx += 4;
534         }
535
536         return ret;
537 }
538
539 int netxen_rom_fast_write_words(struct netxen_adapter *adapter, int addr, 
540                                         u8 *bytes, size_t size)
541 {
542         int ret = 0;
543
544         ret = rom_lock(adapter);
545         if (ret < 0)
546                 return ret;
547
548         ret = do_rom_fast_write_words(adapter, addr, bytes, size);
549         netxen_rom_unlock(adapter);
550
551         return ret;
552 }
553
554 int netxen_rom_wrsr(struct netxen_adapter *adapter, int data)
555 {
556         int ret;
557
558         ret = netxen_rom_wren(adapter);
559         if (ret < 0)
560                 return ret;
561
562         netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_ROM_WDATA, data);
563         netxen_crb_writelit_adapter(adapter, 
564                                         NETXEN_ROMUSB_ROM_INSTR_OPCODE, 0x1);
565
566         ret = netxen_wait_rom_done(adapter);
567         if (ret < 0)
568                 return ret;
569
570         return netxen_rom_wip_poll(adapter);
571 }
572
573 int netxen_rom_rdsr(struct netxen_adapter *adapter)
574 {
575         int ret;
576
577         ret = rom_lock(adapter);
578         if (ret < 0)
579                 return ret;
580
581         ret = netxen_do_rom_rdsr(adapter);
582         netxen_rom_unlock(adapter);
583         return ret;
584 }
585
586 int netxen_backup_crbinit(struct netxen_adapter *adapter)
587 {
588         int ret = FLASH_SUCCESS;
589         int val;
590         char *buffer = kmalloc(FLASH_SECTOR_SIZE, GFP_KERNEL);
591
592         if (!buffer)
593                 return -ENOMEM; 
594         /* unlock sector 63 */
595         val = netxen_rom_rdsr(adapter);
596         val = val & 0xe3;
597         ret = netxen_rom_wrsr(adapter, val);
598         if (ret != FLASH_SUCCESS)
599                 goto out_kfree;
600
601         ret = netxen_rom_wip_poll(adapter);
602         if (ret != FLASH_SUCCESS)
603                 goto out_kfree;
604
605         /* copy  sector 0 to sector 63 */
606         ret = netxen_rom_fast_read_words(adapter, CRBINIT_START, 
607                                                 buffer, FLASH_SECTOR_SIZE);
608         if (ret != FLASH_SUCCESS)
609                 goto out_kfree;
610
611         ret = netxen_rom_fast_write_words(adapter, FIXED_START, 
612                                                 buffer, FLASH_SECTOR_SIZE);
613         if (ret != FLASH_SUCCESS)
614                 goto out_kfree;
615
616         /* lock sector 63 */
617         val = netxen_rom_rdsr(adapter);
618         if (!(val & 0x8)) {
619                 val |= (0x1 << 2);
620                 /* lock sector 63 */
621                 if (netxen_rom_wrsr(adapter, val) == 0) {
622                         ret = netxen_rom_wip_poll(adapter);
623                         if (ret != FLASH_SUCCESS)
624                                 goto out_kfree;
625
626                         /* lock SR writes */
627                         ret = netxen_rom_wip_poll(adapter);
628                         if (ret != FLASH_SUCCESS)
629                                 goto out_kfree;
630                 }
631         }
632
633 out_kfree:
634         kfree(buffer);
635         return ret;
636 }
637
638 int netxen_do_rom_se(struct netxen_adapter *adapter, int addr)
639 {
640         netxen_rom_wren(adapter);
641         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
642         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
643         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
644                              M25P_INSTR_SE);
645         if (netxen_wait_rom_done(adapter)) {
646                 netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
647                 return -1;
648         }
649         return netxen_rom_wip_poll(adapter);
650 }
651
652 void check_erased_flash(struct netxen_adapter *adapter, int addr)
653 {
654         int i;
655         int val;
656         int count = 0, erased_errors = 0;
657         int range;
658
659         range = (addr == USER_START) ? FIXED_START : addr + FLASH_SECTOR_SIZE;
660         
661         for (i = addr; i < range; i += 4) {
662                 netxen_rom_fast_read(adapter, i, &val);
663                 if (val != 0xffffffff)
664                         erased_errors++;
665                 count++;
666         }
667
668         if (erased_errors)
669                 printk(KERN_INFO "0x%x out of 0x%x words fail to be erased "
670                         "for sector address: %x\n", erased_errors, count, addr);
671 }
672
673 int netxen_rom_se(struct netxen_adapter *adapter, int addr)
674 {
675         int ret = 0;
676         if (rom_lock(adapter) != 0) {
677                 return -1;
678         }
679         ret = netxen_do_rom_se(adapter, addr);
680         netxen_rom_unlock(adapter);
681         msleep(30);
682         check_erased_flash(adapter, addr);
683
684         return ret;
685 }
686
687 int
688 netxen_flash_erase_sections(struct netxen_adapter *adapter, int start, int end)
689 {
690         int ret = FLASH_SUCCESS;
691         int i;
692
693         for (i = start; i < end; i++) {
694                 ret = netxen_rom_se(adapter, i * FLASH_SECTOR_SIZE);
695                 if (ret)
696                         break;
697                 ret = netxen_rom_wip_poll(adapter);
698                 if (ret < 0)
699                         return ret;
700         }
701
702         return ret;
703 }
704
705 int
706 netxen_flash_erase_secondary(struct netxen_adapter *adapter)
707 {
708         int ret = FLASH_SUCCESS;
709         int start, end;
710
711         start = SECONDARY_START / FLASH_SECTOR_SIZE;
712         end   = USER_START / FLASH_SECTOR_SIZE;
713         ret = netxen_flash_erase_sections(adapter, start, end);
714
715         return ret;
716 }
717
718 int
719 netxen_flash_erase_primary(struct netxen_adapter *adapter)
720 {
721         int ret = FLASH_SUCCESS;
722         int start, end;
723
724         start = PRIMARY_START / FLASH_SECTOR_SIZE;
725         end   = SECONDARY_START / FLASH_SECTOR_SIZE;
726         ret = netxen_flash_erase_sections(adapter, start, end);
727
728         return ret;
729 }
730
731 void netxen_halt_pegs(struct netxen_adapter *adapter)
732 {
733          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0x3c, 1);
734          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0x3c, 1);
735          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0x3c, 1);
736          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0x3c, 1);
737 }
738
739 int netxen_flash_unlock(struct netxen_adapter *adapter)
740 {
741         int ret = 0;
742
743         ret = netxen_rom_wrsr(adapter, 0);
744         if (ret < 0)
745                 return ret;
746
747         ret = netxen_rom_wren(adapter);
748         if (ret < 0)
749                 return ret;
750
751         return ret;
752 }
753
754 #define NETXEN_BOARDTYPE                0x4008
755 #define NETXEN_BOARDNUM                 0x400c
756 #define NETXEN_CHIPNUM                  0x4010
757 #define NETXEN_ROMBUS_RESET             0xFFFFFFFF
758 #define NETXEN_ROM_FIRST_BARRIER        0x800000000ULL
759 #define NETXEN_ROM_FOUND_INIT           0x400
760
761 int netxen_pinit_from_rom(struct netxen_adapter *adapter, int verbose)
762 {
763         int addr, val, status;
764         int n, i;
765         int init_delay = 0;
766         struct crb_addr_pair *buf;
767         u32 off;
768
769         /* resetall */
770         status = netxen_nic_get_board_info(adapter);
771         if (status)
772                 printk("%s: netxen_pinit_from_rom: Error getting board info\n",
773                        netxen_nic_driver_name);
774
775         netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_GLB_SW_RESET,
776                                     NETXEN_ROMBUS_RESET);
777
778         if (verbose) {
779                 int val;
780                 if (netxen_rom_fast_read(adapter, NETXEN_BOARDTYPE, &val) == 0)
781                         printk("P2 ROM board type: 0x%08x\n", val);
782                 else
783                         printk("Could not read board type\n");
784                 if (netxen_rom_fast_read(adapter, NETXEN_BOARDNUM, &val) == 0)
785                         printk("P2 ROM board  num: 0x%08x\n", val);
786                 else
787                         printk("Could not read board number\n");
788                 if (netxen_rom_fast_read(adapter, NETXEN_CHIPNUM, &val) == 0)
789                         printk("P2 ROM chip   num: 0x%08x\n", val);
790                 else
791                         printk("Could not read chip number\n");
792         }
793
794         if (netxen_rom_fast_read(adapter, 0, &n) == 0
795             && (n & NETXEN_ROM_FIRST_BARRIER)) {
796                 n &= ~NETXEN_ROM_ROUNDUP;
797                 if (n < NETXEN_ROM_FOUND_INIT) {
798                         if (verbose)
799                                 printk("%s: %d CRB init values found"
800                                        " in ROM.\n", netxen_nic_driver_name, n);
801                 } else {
802                         printk("%s:n=0x%x Error! NetXen card flash not"
803                                " initialized.\n", __FUNCTION__, n);
804                         return -EIO;
805                 }
806                 buf = kcalloc(n, sizeof(struct crb_addr_pair), GFP_KERNEL);
807                 if (buf == NULL) {
808                         printk("%s: netxen_pinit_from_rom: Unable to calloc "
809                                "memory.\n", netxen_nic_driver_name);
810                         return -ENOMEM;
811                 }
812                 for (i = 0; i < n; i++) {
813                         if (netxen_rom_fast_read(adapter, 8 * i + 4, &val) != 0
814                             || netxen_rom_fast_read(adapter, 8 * i + 8,
815                                                     &addr) != 0)
816                                 return -EIO;
817
818                         buf[i].addr = addr;
819                         buf[i].data = val;
820
821                         if (verbose)
822                                 printk("%s: PCI:     0x%08x == 0x%08x\n",
823                                        netxen_nic_driver_name, (unsigned int)
824                                        netxen_decode_crb_addr(addr), val);
825                 }
826                 for (i = 0; i < n; i++) {
827
828                         off = netxen_decode_crb_addr(buf[i].addr);
829                         if (off == NETXEN_ADDR_ERROR) {
830                                 printk(KERN_ERR"CRB init value out of range %x\n",
831                                         buf[i].addr);
832                                 continue;
833                         }
834                         off += NETXEN_PCI_CRBSPACE;
835                         /* skipping cold reboot MAGIC */
836                         if (off == NETXEN_CAM_RAM(0x1fc))
837                                 continue;
838
839                         /* After writing this register, HW needs time for CRB */
840                         /* to quiet down (else crb_window returns 0xffffffff) */
841                         if (off == NETXEN_ROMUSB_GLB_SW_RESET) {
842                                 init_delay = 1;
843                                 /* hold xdma in reset also */
844                                 buf[i].data = NETXEN_NIC_XDMA_RESET;
845                         }
846
847                         if (ADDR_IN_WINDOW1(off)) {
848                                 writel(buf[i].data,
849                                        NETXEN_CRB_NORMALIZE(adapter, off));
850                         } else {
851                                 netxen_nic_pci_change_crbwindow(adapter, 0);
852                                 writel(buf[i].data,
853                                        pci_base_offset(adapter, off));
854
855                                 netxen_nic_pci_change_crbwindow(adapter, 1);
856                         }
857                         if (init_delay == 1) {
858                                 ssleep(1);
859                                 init_delay = 0;
860                         }
861                         msleep(1);
862                 }
863                 kfree(buf);
864
865                 /* disable_peg_cache_all */
866
867                 /* unreset_net_cache */
868                 netxen_nic_hw_read_wx(adapter, NETXEN_ROMUSB_GLB_SW_RESET, &val,
869                                       4);
870                 netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_GLB_SW_RESET,
871                                             (val & 0xffffff0f));
872                 /* p2dn replyCount */
873                 netxen_crb_writelit_adapter(adapter,
874                                             NETXEN_CRB_PEG_NET_D + 0xec, 0x1e);
875                 /* disable_peg_cache 0 */
876                 netxen_crb_writelit_adapter(adapter,
877                                             NETXEN_CRB_PEG_NET_D + 0x4c, 8);
878                 /* disable_peg_cache 1 */
879                 netxen_crb_writelit_adapter(adapter,
880                                             NETXEN_CRB_PEG_NET_I + 0x4c, 8);
881
882                 /* peg_clr_all */
883
884                 /* peg_clr 0 */
885                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0x8,
886                                             0);
887                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0xc,
888                                             0);
889                 /* peg_clr 1 */
890                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0x8,
891                                             0);
892                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0xc,
893                                             0);
894                 /* peg_clr 2 */
895                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0x8,
896                                             0);
897                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0xc,
898                                             0);
899                 /* peg_clr 3 */
900                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0x8,
901                                             0);
902                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0xc,
903                                             0);
904         }
905         return 0;
906 }
907
908 int netxen_initialize_adapter_offload(struct netxen_adapter *adapter)
909 {
910         uint64_t addr;
911         uint32_t hi;
912         uint32_t lo;
913
914         adapter->dummy_dma.addr =
915             pci_alloc_consistent(adapter->ahw.pdev,
916                                  NETXEN_HOST_DUMMY_DMA_SIZE,
917                                  &adapter->dummy_dma.phys_addr);
918         if (adapter->dummy_dma.addr == NULL) {
919                 printk("%s: ERROR: Could not allocate dummy DMA memory\n",
920                        __FUNCTION__);
921                 return -ENOMEM;
922         }
923
924         addr = (uint64_t) adapter->dummy_dma.phys_addr;
925         hi = (addr >> 32) & 0xffffffff;
926         lo = addr & 0xffffffff;
927
928         writel(hi, NETXEN_CRB_NORMALIZE(adapter, CRB_HOST_DUMMY_BUF_ADDR_HI));
929         writel(lo, NETXEN_CRB_NORMALIZE(adapter, CRB_HOST_DUMMY_BUF_ADDR_LO));
930
931         return 0;
932 }
933
934 void netxen_free_adapter_offload(struct netxen_adapter *adapter)
935 {
936         if (adapter->dummy_dma.addr) {
937                 writel(0, NETXEN_CRB_NORMALIZE(adapter,
938                         CRB_HOST_DUMMY_BUF_ADDR_HI));
939                 writel(0, NETXEN_CRB_NORMALIZE(adapter,
940                         CRB_HOST_DUMMY_BUF_ADDR_LO));
941                 pci_free_consistent(adapter->ahw.pdev,
942                                     NETXEN_HOST_DUMMY_DMA_SIZE,
943                                     adapter->dummy_dma.addr,
944                                     adapter->dummy_dma.phys_addr);
945                 adapter->dummy_dma.addr = NULL;
946         }
947 }
948
949 void netxen_phantom_init(struct netxen_adapter *adapter, int pegtune_val)
950 {
951         u32 val = 0;
952         int loops = 0;
953
954         if (!pegtune_val) {
955                 val = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
956                 while (val != PHAN_INITIALIZE_COMPLETE && loops < 200000) {
957                         udelay(100);
958                         schedule();
959                         val =
960                             readl(NETXEN_CRB_NORMALIZE
961                                   (adapter, CRB_CMDPEG_STATE));
962                         loops++;
963                 }
964                 if (val != PHAN_INITIALIZE_COMPLETE)
965                         printk("WARNING: Initial boot wait loop failed...\n");
966         }
967 }
968
969 int netxen_nic_rx_has_work(struct netxen_adapter *adapter)
970 {
971         int ctx;
972
973         for (ctx = 0; ctx < MAX_RCV_CTX; ++ctx) {
974                 struct netxen_recv_context *recv_ctx =
975                     &(adapter->recv_ctx[ctx]);
976                 u32 consumer;
977                 struct status_desc *desc_head;
978                 struct status_desc *desc;
979
980                 consumer = recv_ctx->status_rx_consumer;
981                 desc_head = recv_ctx->rcv_status_desc_head;
982                 desc = &desc_head[consumer];
983
984                 if (netxen_get_sts_owner(desc) & STATUS_OWNER_HOST)
985                         return 1;
986         }
987
988         return 0;
989 }
990
991 static inline int netxen_nic_check_temp(struct netxen_adapter *adapter)
992 {
993         int port_num;
994         struct netxen_port *port;
995         struct net_device *netdev;
996         uint32_t temp, temp_state, temp_val;
997         int rv = 0;
998
999         temp = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_TEMP_STATE));
1000
1001         temp_state = nx_get_temp_state(temp);
1002         temp_val = nx_get_temp_val(temp);
1003
1004         if (temp_state == NX_TEMP_PANIC) {
1005                 printk(KERN_ALERT
1006                        "%s: Device temperature %d degrees C exceeds"
1007                        " maximum allowed. Hardware has been shut down.\n",
1008                        netxen_nic_driver_name, temp_val);
1009                 for (port_num = 0; port_num < adapter->ahw.max_ports;
1010                      port_num++) {
1011                         port = adapter->port[port_num];
1012                         netdev = port->netdev;
1013
1014                         netif_carrier_off(netdev);
1015                         netif_stop_queue(netdev);
1016                 }
1017                 rv = 1;
1018         } else if (temp_state == NX_TEMP_WARN) {
1019                 if (adapter->temp == NX_TEMP_NORMAL) {
1020                         printk(KERN_ALERT
1021                                "%s: Device temperature %d degrees C "
1022                                "exceeds operating range."
1023                                " Immediate action needed.\n",
1024                                netxen_nic_driver_name, temp_val);
1025                 }
1026         } else {
1027                 if (adapter->temp == NX_TEMP_WARN) {
1028                         printk(KERN_INFO
1029                                "%s: Device temperature is now %d degrees C"
1030                                " in normal range.\n", netxen_nic_driver_name,
1031                                temp_val);
1032                 }
1033         }
1034         adapter->temp = temp_state;
1035         return rv;
1036 }
1037
1038 void netxen_watchdog_task(struct work_struct *work)
1039 {
1040         int port_num;
1041         struct netxen_port *port;
1042         struct net_device *netdev;
1043         struct netxen_adapter *adapter =
1044                 container_of(work, struct netxen_adapter, watchdog_task);
1045
1046         if (netxen_nic_check_temp(adapter))
1047                 return;
1048
1049         for (port_num = 0; port_num < adapter->ahw.max_ports; port_num++) {
1050                 port = adapter->port[port_num];
1051                 netdev = port->netdev;
1052
1053                 if ((netif_running(netdev)) && !netif_carrier_ok(netdev)) {
1054                         printk(KERN_INFO "%s port %d, %s carrier is now ok\n",
1055                                netxen_nic_driver_name, port_num, netdev->name);
1056                         netif_carrier_on(netdev);
1057                 }
1058
1059                 if (netif_queue_stopped(netdev))
1060                         netif_wake_queue(netdev);
1061         }
1062
1063         if (adapter->handle_phy_intr)
1064                 adapter->handle_phy_intr(adapter);
1065         mod_timer(&adapter->watchdog_timer, jiffies + 2 * HZ);
1066 }
1067
1068 /*
1069  * netxen_process_rcv() send the received packet to the protocol stack.
1070  * and if the number of receives exceeds RX_BUFFERS_REFILL, then we
1071  * invoke the routine to send more rx buffers to the Phantom...
1072  */
1073 void
1074 netxen_process_rcv(struct netxen_adapter *adapter, int ctxid,
1075                    struct status_desc *desc)
1076 {
1077         struct netxen_port *port = adapter->port[netxen_get_sts_port(desc)];
1078         struct pci_dev *pdev = port->pdev;
1079         struct net_device *netdev = port->netdev;
1080         int index = netxen_get_sts_refhandle(desc);
1081         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctxid]);
1082         struct netxen_rx_buffer *buffer;
1083         struct sk_buff *skb;
1084         u32 length = netxen_get_sts_totallength(desc);
1085         u32 desc_ctx;
1086         struct netxen_rcv_desc_ctx *rcv_desc;
1087         int ret;
1088
1089         desc_ctx = netxen_get_sts_type(desc);
1090         if (unlikely(desc_ctx >= NUM_RCV_DESC_RINGS)) {
1091                 printk("%s: %s Bad Rcv descriptor ring\n",
1092                        netxen_nic_driver_name, netdev->name);
1093                 return;
1094         }
1095
1096         rcv_desc = &recv_ctx->rcv_desc[desc_ctx];
1097         if (unlikely(index > rcv_desc->max_rx_desc_count)) {
1098                 DPRINTK(ERR, "Got a buffer index:%x Max is %x\n",
1099                         index, rcv_desc->max_rx_desc_count);
1100                 return;
1101         }
1102         buffer = &rcv_desc->rx_buf_arr[index];
1103         if (desc_ctx == RCV_DESC_LRO_CTXID) {
1104                 buffer->lro_current_frags++;
1105                 if (netxen_get_sts_desc_lro_last_frag(desc)) {
1106                         buffer->lro_expected_frags =
1107                             netxen_get_sts_desc_lro_cnt(desc);
1108                         buffer->lro_length = length;
1109                 }
1110                 if (buffer->lro_current_frags != buffer->lro_expected_frags) {
1111                         if (buffer->lro_expected_frags != 0) {
1112                                 printk("LRO: (refhandle:%x) recv frag."
1113                                        "wait for last. flags: %x expected:%d"
1114                                        "have:%d\n", index,
1115                                        netxen_get_sts_desc_lro_last_frag(desc),
1116                                        buffer->lro_expected_frags,
1117                                        buffer->lro_current_frags);
1118                         }
1119                         return;
1120                 }
1121         }
1122
1123         pci_unmap_single(pdev, buffer->dma, rcv_desc->dma_size,
1124                          PCI_DMA_FROMDEVICE);
1125
1126         skb = (struct sk_buff *)buffer->skb;
1127
1128         if (likely(netxen_get_sts_status(desc) == STATUS_CKSUM_OK)) {
1129                 port->stats.csummed++;
1130                 skb->ip_summed = CHECKSUM_UNNECESSARY;
1131         }
1132         if (desc_ctx == RCV_DESC_LRO_CTXID) {
1133                 /* True length was only available on the last pkt */
1134                 skb_put(skb, buffer->lro_length);
1135         } else {
1136                 skb_put(skb, length);
1137         }
1138
1139         skb->protocol = eth_type_trans(skb, netdev);
1140
1141         ret = netif_receive_skb(skb);
1142
1143         /*
1144          * RH: Do we need these stats on a regular basis. Can we get it from
1145          * Linux stats.
1146          */
1147         switch (ret) {
1148         case NET_RX_SUCCESS:
1149                 port->stats.uphappy++;
1150                 break;
1151
1152         case NET_RX_CN_LOW:
1153                 port->stats.uplcong++;
1154                 break;
1155
1156         case NET_RX_CN_MOD:
1157                 port->stats.upmcong++;
1158                 break;
1159
1160         case NET_RX_CN_HIGH:
1161                 port->stats.uphcong++;
1162                 break;
1163
1164         case NET_RX_DROP:
1165                 port->stats.updropped++;
1166                 break;
1167
1168         default:
1169                 port->stats.updunno++;
1170                 break;
1171         }
1172
1173         netdev->last_rx = jiffies;
1174
1175         rcv_desc->rcv_free++;
1176         rcv_desc->rcv_pending--;
1177
1178         /*
1179          * We just consumed one buffer so post a buffer.
1180          */
1181         adapter->stats.post_called++;
1182         buffer->skb = NULL;
1183         buffer->state = NETXEN_BUFFER_FREE;
1184         buffer->lro_current_frags = 0;
1185         buffer->lro_expected_frags = 0;
1186
1187         port->stats.no_rcv++;
1188         port->stats.rxbytes += length;
1189 }
1190
1191 /* Process Receive status ring */
1192 u32 netxen_process_rcv_ring(struct netxen_adapter *adapter, int ctxid, int max)
1193 {
1194         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctxid]);
1195         struct status_desc *desc_head = recv_ctx->rcv_status_desc_head;
1196         struct status_desc *desc;       /* used to read status desc here */
1197         u32 consumer = recv_ctx->status_rx_consumer;
1198         u32 producer = 0;
1199         int count = 0, ring;
1200
1201         DPRINTK(INFO, "procesing receive\n");
1202         /*
1203          * we assume in this case that there is only one port and that is
1204          * port #1...changes need to be done in firmware to indicate port
1205          * number as part of the descriptor. This way we will be able to get
1206          * the netdev which is associated with that device.
1207          */
1208         while (count < max) {
1209                 desc = &desc_head[consumer];
1210                 if (!(netxen_get_sts_owner(desc) & STATUS_OWNER_HOST)) {
1211                         DPRINTK(ERR, "desc %p ownedby %x\n", desc,
1212                                 netxen_get_sts_owner(desc));
1213                         break;
1214                 }
1215                 netxen_process_rcv(adapter, ctxid, desc);
1216                 netxen_clear_sts_owner(desc);
1217                 netxen_set_sts_owner(desc, STATUS_OWNER_PHANTOM);
1218                 consumer = (consumer + 1) & (adapter->max_rx_desc_count - 1);
1219                 count++;
1220         }
1221         if (count) {
1222                 for (ring = 0; ring < NUM_RCV_DESC_RINGS; ring++) {
1223                         netxen_post_rx_buffers_nodb(adapter, ctxid, ring);
1224                 }
1225         }
1226
1227         /* update the consumer index in phantom */
1228         if (count) {
1229                 adapter->stats.process_rcv++;
1230                 recv_ctx->status_rx_consumer = consumer;
1231                 recv_ctx->status_rx_producer = producer;
1232
1233                 /* Window = 1 */
1234                 writel(consumer,
1235                        NETXEN_CRB_NORMALIZE(adapter,
1236                                             recv_crb_registers[ctxid].
1237                                             crb_rcv_status_consumer));
1238         }
1239
1240         return count;
1241 }
1242
1243 /* Process Command status ring */
1244 int netxen_process_cmd_ring(unsigned long data)
1245 {
1246         u32 last_consumer;
1247         u32 consumer;
1248         struct netxen_adapter *adapter = (struct netxen_adapter *)data;
1249         int count1 = 0;
1250         int count2 = 0;
1251         struct netxen_cmd_buffer *buffer;
1252         struct netxen_port *port;       /* port #1 */
1253         struct netxen_port *nport;
1254         struct pci_dev *pdev;
1255         struct netxen_skb_frag *frag;
1256         u32 i;
1257         struct sk_buff *skb = NULL;
1258         int p;
1259         int done;
1260
1261         spin_lock(&adapter->tx_lock);
1262         last_consumer = adapter->last_cmd_consumer;
1263         DPRINTK(INFO, "procesing xmit complete\n");
1264         /* we assume in this case that there is only one port and that is
1265          * port #1...changes need to be done in firmware to indicate port
1266          * number as part of the descriptor. This way we will be able to get
1267          * the netdev which is associated with that device.
1268          */
1269
1270         consumer = le32_to_cpu(*(adapter->cmd_consumer));
1271         if (last_consumer == consumer) {        /* Ring is empty    */
1272                 DPRINTK(INFO, "last_consumer %d == consumer %d\n",
1273                         last_consumer, consumer);
1274                 spin_unlock(&adapter->tx_lock);
1275                 return 1;
1276         }
1277
1278         adapter->proc_cmd_buf_counter++;
1279         adapter->stats.process_xmit++;
1280         /*
1281          * Not needed - does not seem to be used anywhere.
1282          * adapter->cmd_consumer = consumer;
1283          */
1284         spin_unlock(&adapter->tx_lock);
1285
1286         while ((last_consumer != consumer) && (count1 < MAX_STATUS_HANDLE)) {
1287                 buffer = &adapter->cmd_buf_arr[last_consumer];
1288                 port = adapter->port[buffer->port];
1289                 pdev = port->pdev;
1290                 frag = &buffer->frag_array[0];
1291                 skb = buffer->skb;
1292                 if (skb && (cmpxchg(&buffer->skb, skb, 0) == skb)) {
1293                         pci_unmap_single(pdev, frag->dma, frag->length,
1294                                          PCI_DMA_TODEVICE);
1295                         for (i = 1; i < buffer->frag_count; i++) {
1296                                 DPRINTK(INFO, "getting fragment no %d\n", i);
1297                                 frag++; /* Get the next frag */
1298                                 pci_unmap_page(pdev, frag->dma, frag->length,
1299                                                PCI_DMA_TODEVICE);
1300                         }
1301
1302                         port->stats.skbfreed++;
1303                         dev_kfree_skb_any(skb);
1304                         skb = NULL;
1305                 } else if (adapter->proc_cmd_buf_counter == 1) {
1306                         port->stats.txnullskb++;
1307                 }
1308                 if (unlikely(netif_queue_stopped(port->netdev)
1309                              && netif_carrier_ok(port->netdev))
1310                     && ((jiffies - port->netdev->trans_start) >
1311                         port->netdev->watchdog_timeo)) {
1312                         SCHEDULE_WORK(&port->tx_timeout_task);
1313                 }
1314
1315                 last_consumer = get_next_index(last_consumer,
1316                                                adapter->max_tx_desc_count);
1317                 count1++;
1318         }
1319         adapter->stats.noxmitdone += count1;
1320
1321         count2 = 0;
1322         spin_lock(&adapter->tx_lock);
1323         if ((--adapter->proc_cmd_buf_counter) == 0) {
1324                 adapter->last_cmd_consumer = last_consumer;
1325                 while ((adapter->last_cmd_consumer != consumer)
1326                        && (count2 < MAX_STATUS_HANDLE)) {
1327                         buffer =
1328                             &adapter->cmd_buf_arr[adapter->last_cmd_consumer];
1329                         count2++;
1330                         if (buffer->skb)
1331                                 break;
1332                         else
1333                                 adapter->last_cmd_consumer =
1334                                     get_next_index(adapter->last_cmd_consumer,
1335                                                    adapter->max_tx_desc_count);
1336                 }
1337         }
1338         if (count1 || count2) {
1339                 for (p = 0; p < adapter->ahw.max_ports; p++) {
1340                         nport = adapter->port[p];
1341                         if (netif_queue_stopped(nport->netdev)
1342                             && (nport->flags & NETXEN_NETDEV_STATUS)) {
1343                                 netif_wake_queue(nport->netdev);
1344                                 nport->flags &= ~NETXEN_NETDEV_STATUS;
1345                         }
1346                 }
1347         }
1348         /*
1349          * If everything is freed up to consumer then check if the ring is full
1350          * If the ring is full then check if more needs to be freed and
1351          * schedule the call back again.
1352          *
1353          * This happens when there are 2 CPUs. One could be freeing and the
1354          * other filling it. If the ring is full when we get out of here and
1355          * the card has already interrupted the host then the host can miss the
1356          * interrupt.
1357          *
1358          * There is still a possible race condition and the host could miss an
1359          * interrupt. The card has to take care of this.
1360          */
1361         if (adapter->last_cmd_consumer == consumer &&
1362             (((adapter->cmd_producer + 1) %
1363               adapter->max_tx_desc_count) == adapter->last_cmd_consumer)) {
1364                 consumer = le32_to_cpu(*(adapter->cmd_consumer));
1365         }
1366         done = (adapter->last_cmd_consumer == consumer);
1367
1368         spin_unlock(&adapter->tx_lock);
1369         DPRINTK(INFO, "last consumer is %d in %s\n", last_consumer,
1370                 __FUNCTION__);
1371         return (done);
1372 }
1373
1374 /*
1375  * netxen_post_rx_buffers puts buffer in the Phantom memory
1376  */
1377 void netxen_post_rx_buffers(struct netxen_adapter *adapter, u32 ctx, u32 ringid)
1378 {
1379         struct pci_dev *pdev = adapter->ahw.pdev;
1380         struct sk_buff *skb;
1381         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctx]);
1382         struct netxen_rcv_desc_ctx *rcv_desc = NULL;
1383         uint producer;
1384         struct rcv_desc *pdesc;
1385         struct netxen_rx_buffer *buffer;
1386         int count = 0;
1387         int index = 0;
1388         netxen_ctx_msg msg = 0;
1389         dma_addr_t dma;
1390
1391         adapter->stats.post_called++;
1392         rcv_desc = &recv_ctx->rcv_desc[ringid];
1393
1394         producer = rcv_desc->producer;
1395         index = rcv_desc->begin_alloc;
1396         buffer = &rcv_desc->rx_buf_arr[index];
1397         /* We can start writing rx descriptors into the phantom memory. */
1398         while (buffer->state == NETXEN_BUFFER_FREE) {
1399                 skb = dev_alloc_skb(rcv_desc->skb_size);
1400                 if (unlikely(!skb)) {
1401                         /*
1402                          * TODO
1403                          * We need to schedule the posting of buffers to the pegs.
1404                          */
1405                         rcv_desc->begin_alloc = index;
1406                         DPRINTK(ERR, "netxen_post_rx_buffers: "
1407                                 " allocated only %d buffers\n", count);
1408                         break;
1409                 }
1410
1411                 count++;        /* now there should be no failure */
1412                 pdesc = &rcv_desc->desc_head[producer];
1413
1414 #if defined(XGB_DEBUG)
1415                 *(unsigned long *)(skb->head) = 0xc0debabe;
1416                 if (skb_is_nonlinear(skb)) {
1417                         printk("Allocated SKB @%p is nonlinear\n");
1418                 }
1419 #endif
1420                 skb_reserve(skb, 2);
1421                 /* This will be setup when we receive the
1422                  * buffer after it has been filled  FSL  TBD TBD
1423                  * skb->dev = netdev;
1424                  */
1425                 dma = pci_map_single(pdev, skb->data, rcv_desc->dma_size,
1426                                      PCI_DMA_FROMDEVICE);
1427                 pdesc->addr_buffer = cpu_to_le64(dma);
1428                 buffer->skb = skb;
1429                 buffer->state = NETXEN_BUFFER_BUSY;
1430                 buffer->dma = dma;
1431                 /* make a rcv descriptor  */
1432                 pdesc->reference_handle = cpu_to_le16(buffer->ref_handle);
1433                 pdesc->buffer_length = cpu_to_le32(rcv_desc->dma_size);
1434                 DPRINTK(INFO, "done writing descripter\n");
1435                 producer =
1436                     get_next_index(producer, rcv_desc->max_rx_desc_count);
1437                 index = get_next_index(index, rcv_desc->max_rx_desc_count);
1438                 buffer = &rcv_desc->rx_buf_arr[index];
1439         }
1440         /* if we did allocate buffers, then write the count to Phantom */
1441         if (count) {
1442                 rcv_desc->begin_alloc = index;
1443                 rcv_desc->rcv_pending += count;
1444                 adapter->stats.lastposted = count;
1445                 adapter->stats.posted += count;
1446                 rcv_desc->producer = producer;
1447                 if (rcv_desc->rcv_free >= 32) {
1448                         rcv_desc->rcv_free = 0;
1449                         /* Window = 1 */
1450                         writel((producer - 1) &
1451                                (rcv_desc->max_rx_desc_count - 1),
1452                                NETXEN_CRB_NORMALIZE(adapter,
1453                                                     recv_crb_registers[0].
1454                                                     rcv_desc_crb[ringid].
1455                                                     crb_rcv_producer_offset));
1456                         /*
1457                          * Write a doorbell msg to tell phanmon of change in
1458                          * receive ring producer
1459                          */
1460                         netxen_set_msg_peg_id(msg, NETXEN_RCV_PEG_DB_ID);
1461                         netxen_set_msg_privid(msg);
1462                         netxen_set_msg_count(msg,
1463                                              ((producer -
1464                                                1) & (rcv_desc->
1465                                                      max_rx_desc_count - 1)));
1466                         netxen_set_msg_ctxid(msg, 0);
1467                         netxen_set_msg_opcode(msg, NETXEN_RCV_PRODUCER(ringid));
1468                         writel(msg,
1469                                DB_NORMALIZE(adapter,
1470                                             NETXEN_RCV_PRODUCER_OFFSET));
1471                 }
1472         }
1473 }
1474
1475 void netxen_post_rx_buffers_nodb(struct netxen_adapter *adapter, uint32_t ctx,
1476                                  uint32_t ringid)
1477 {
1478         struct pci_dev *pdev = adapter->ahw.pdev;
1479         struct sk_buff *skb;
1480         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctx]);
1481         struct netxen_rcv_desc_ctx *rcv_desc = NULL;
1482         u32 producer;
1483         struct rcv_desc *pdesc;
1484         struct netxen_rx_buffer *buffer;
1485         int count = 0;
1486         int index = 0;
1487
1488         adapter->stats.post_called++;
1489         rcv_desc = &recv_ctx->rcv_desc[ringid];
1490
1491         producer = rcv_desc->producer;
1492         index = rcv_desc->begin_alloc;
1493         buffer = &rcv_desc->rx_buf_arr[index];
1494         /* We can start writing rx descriptors into the phantom memory. */
1495         while (buffer->state == NETXEN_BUFFER_FREE) {
1496                 skb = dev_alloc_skb(rcv_desc->skb_size);
1497                 if (unlikely(!skb)) {
1498                         /*
1499                          * We need to schedule the posting of buffers to the pegs.
1500                          */
1501                         rcv_desc->begin_alloc = index;
1502                         DPRINTK(ERR, "netxen_post_rx_buffers_nodb: "
1503                                 " allocated only %d buffers\n", count);
1504                         break;
1505                 }
1506                 count++;        /* now there should be no failure */
1507                 pdesc = &rcv_desc->desc_head[producer];
1508                 skb_reserve(skb, 2);
1509                 /* 
1510                  * This will be setup when we receive the
1511                  * buffer after it has been filled
1512                  * skb->dev = netdev;
1513                  */
1514                 buffer->skb = skb;
1515                 buffer->state = NETXEN_BUFFER_BUSY;
1516                 buffer->dma = pci_map_single(pdev, skb->data,
1517                                              rcv_desc->dma_size,
1518                                              PCI_DMA_FROMDEVICE);
1519
1520                 /* make a rcv descriptor  */
1521                 pdesc->reference_handle = cpu_to_le16(buffer->ref_handle);
1522                 pdesc->buffer_length = cpu_to_le32(rcv_desc->dma_size);
1523                 pdesc->addr_buffer = cpu_to_le64(buffer->dma);
1524                 DPRINTK(INFO, "done writing descripter\n");
1525                 producer =
1526                     get_next_index(producer, rcv_desc->max_rx_desc_count);
1527                 index = get_next_index(index, rcv_desc->max_rx_desc_count);
1528                 buffer = &rcv_desc->rx_buf_arr[index];
1529         }
1530
1531         /* if we did allocate buffers, then write the count to Phantom */
1532         if (count) {
1533                 rcv_desc->begin_alloc = index;
1534                 rcv_desc->rcv_pending += count;
1535                 adapter->stats.lastposted = count;
1536                 adapter->stats.posted += count;
1537                 rcv_desc->producer = producer;
1538                 if (rcv_desc->rcv_free >= 32) {
1539                         rcv_desc->rcv_free = 0;
1540                         /* Window = 1 */
1541                         writel((producer - 1) &
1542                                (rcv_desc->max_rx_desc_count - 1),
1543                                NETXEN_CRB_NORMALIZE(adapter,
1544                                                     recv_crb_registers[0].
1545                                                     rcv_desc_crb[ringid].
1546                                                     crb_rcv_producer_offset));
1547                         wmb();
1548                 }
1549         }
1550 }
1551
1552 int netxen_nic_tx_has_work(struct netxen_adapter *adapter)
1553 {
1554         if (find_diff_among(adapter->last_cmd_consumer,
1555                             adapter->cmd_producer,
1556                             adapter->max_tx_desc_count) > 0)
1557                 return 1;
1558
1559         return 0;
1560 }
1561
1562
1563 void netxen_nic_clear_stats(struct netxen_adapter *adapter)
1564 {
1565         struct netxen_port *port;
1566         int port_num;
1567
1568         memset(&adapter->stats, 0, sizeof(adapter->stats));
1569         for (port_num = 0; port_num < adapter->ahw.max_ports; port_num++) {
1570                 port = adapter->port[port_num];
1571                 memset(&port->stats, 0, sizeof(port->stats));
1572         }
1573 }
1574