Merge branch 'upstream-linus' of master.kernel.org:/pub/scm/linux/kernel/git/jgarzik...
[linux-2.6] / drivers / net / netxen / netxen_nic_init.c
1 /*
2  * Copyright (C) 2003 - 2006 NetXen, Inc.
3  * All rights reserved.
4  *
5  * This program is free software; you can redistribute it and/or
6  * modify it under the terms of the GNU General Public License
7  * as published by the Free Software Foundation; either version 2
8  * of the License, or (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful, but
11  * WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 59 Temple Place - Suite 330, Boston,
18  * MA  02111-1307, USA.
19  *
20  * The full GNU General Public License is included in this distribution
21  * in the file called LICENSE.
22  *
23  * Contact Information:
24  *    info@netxen.com
25  * NetXen,
26  * 3965 Freedom Circle, Fourth floor,
27  * Santa Clara, CA 95054
28  *
29  *
30  * Source file for NIC routines to initialize the Phantom Hardware
31  *
32  */
33
34 #include <linux/netdevice.h>
35 #include <linux/delay.h>
36 #include "netxen_nic.h"
37 #include "netxen_nic_hw.h"
38 #include "netxen_nic_phan_reg.h"
39
40 struct crb_addr_pair {
41         u32 addr;
42         u32 data;
43 };
44
45 unsigned long last_schedule_time;
46
47 #define NETXEN_MAX_CRB_XFORM 60
48 static unsigned int crb_addr_xform[NETXEN_MAX_CRB_XFORM];
49 #define NETXEN_ADDR_ERROR (0xffffffff)
50
51 #define crb_addr_transform(name) \
52         crb_addr_xform[NETXEN_HW_PX_MAP_CRB_##name] = \
53         NETXEN_HW_CRB_HUB_AGT_ADR_##name << 20
54
55 #define NETXEN_NIC_XDMA_RESET 0x8000ff
56
57 static inline void
58 netxen_nic_locked_write_reg(struct netxen_adapter *adapter,
59                             unsigned long off, int *data)
60 {
61         void __iomem *addr = pci_base_offset(adapter, off);
62         writel(*data, addr);
63 }
64
65 static void crb_addr_transform_setup(void)
66 {
67         crb_addr_transform(XDMA);
68         crb_addr_transform(TIMR);
69         crb_addr_transform(SRE);
70         crb_addr_transform(SQN3);
71         crb_addr_transform(SQN2);
72         crb_addr_transform(SQN1);
73         crb_addr_transform(SQN0);
74         crb_addr_transform(SQS3);
75         crb_addr_transform(SQS2);
76         crb_addr_transform(SQS1);
77         crb_addr_transform(SQS0);
78         crb_addr_transform(RPMX7);
79         crb_addr_transform(RPMX6);
80         crb_addr_transform(RPMX5);
81         crb_addr_transform(RPMX4);
82         crb_addr_transform(RPMX3);
83         crb_addr_transform(RPMX2);
84         crb_addr_transform(RPMX1);
85         crb_addr_transform(RPMX0);
86         crb_addr_transform(ROMUSB);
87         crb_addr_transform(SN);
88         crb_addr_transform(QMN);
89         crb_addr_transform(QMS);
90         crb_addr_transform(PGNI);
91         crb_addr_transform(PGND);
92         crb_addr_transform(PGN3);
93         crb_addr_transform(PGN2);
94         crb_addr_transform(PGN1);
95         crb_addr_transform(PGN0);
96         crb_addr_transform(PGSI);
97         crb_addr_transform(PGSD);
98         crb_addr_transform(PGS3);
99         crb_addr_transform(PGS2);
100         crb_addr_transform(PGS1);
101         crb_addr_transform(PGS0);
102         crb_addr_transform(PS);
103         crb_addr_transform(PH);
104         crb_addr_transform(NIU);
105         crb_addr_transform(I2Q);
106         crb_addr_transform(EG);
107         crb_addr_transform(MN);
108         crb_addr_transform(MS);
109         crb_addr_transform(CAS2);
110         crb_addr_transform(CAS1);
111         crb_addr_transform(CAS0);
112         crb_addr_transform(CAM);
113         crb_addr_transform(C2C1);
114         crb_addr_transform(C2C0);
115         crb_addr_transform(SMB);
116 }
117
118 int netxen_init_firmware(struct netxen_adapter *adapter)
119 {
120         u32 state = 0, loops = 0, err = 0;
121
122         /* Window 1 call */
123         state = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
124
125         if (state == PHAN_INITIALIZE_ACK)
126                 return 0;
127
128         while (state != PHAN_INITIALIZE_COMPLETE && loops < 2000) {
129                 udelay(100);
130                 /* Window 1 call */
131                 state = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
132
133                 loops++;
134         }
135         if (loops >= 2000) {
136                 printk(KERN_ERR "Cmd Peg initialization not complete:%x.\n",
137                        state);
138                 err = -EIO;
139                 return err;
140         }
141         /* Window 1 call */
142         writel(MPORT_MULTI_FUNCTION_MODE,
143                NETXEN_CRB_NORMALIZE(adapter, CRB_MPORT_MODE));
144         writel(PHAN_INITIALIZE_ACK,
145                NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
146
147         return err;
148 }
149
150 #define NETXEN_ADDR_LIMIT 0xffffffffULL
151
152 void *netxen_alloc(struct pci_dev *pdev, size_t sz, dma_addr_t * ptr,
153                    struct pci_dev **used_dev)
154 {
155         void *addr;
156
157         addr = pci_alloc_consistent(pdev, sz, ptr);
158         if ((unsigned long long)(*ptr) < NETXEN_ADDR_LIMIT) {
159                 *used_dev = pdev;
160                 return addr;
161         }
162         pci_free_consistent(pdev, sz, addr, *ptr);
163         addr = pci_alloc_consistent(NULL, sz, ptr);
164         *used_dev = NULL;
165         return addr;
166 }
167
168 void netxen_initialize_adapter_sw(struct netxen_adapter *adapter)
169 {
170         int ctxid, ring;
171         u32 i;
172         u32 num_rx_bufs = 0;
173         struct netxen_rcv_desc_ctx *rcv_desc;
174
175         DPRINTK(INFO, "initializing some queues: %p\n", adapter);
176         for (ctxid = 0; ctxid < MAX_RCV_CTX; ++ctxid) {
177                 for (ring = 0; ring < NUM_RCV_DESC_RINGS; ring++) {
178                         struct netxen_rx_buffer *rx_buf;
179                         rcv_desc = &adapter->recv_ctx[ctxid].rcv_desc[ring];
180                         rcv_desc->rcv_free = rcv_desc->max_rx_desc_count;
181                         rcv_desc->begin_alloc = 0;
182                         rx_buf = rcv_desc->rx_buf_arr;
183                         num_rx_bufs = rcv_desc->max_rx_desc_count;
184                         /*
185                          * Now go through all of them, set reference handles
186                          * and put them in the queues.
187                          */
188                         for (i = 0; i < num_rx_bufs; i++) {
189                                 rx_buf->ref_handle = i;
190                                 rx_buf->state = NETXEN_BUFFER_FREE;
191                                 DPRINTK(INFO, "Rx buf:ctx%d i(%d) rx_buf:"
192                                         "%p\n", ctxid, i, rx_buf);
193                                 rx_buf++;
194                         }
195                 }
196         }
197 }
198
199 void netxen_initialize_adapter_hw(struct netxen_adapter *adapter)
200 {
201         int ports = 0;
202         struct netxen_board_info *board_info = &(adapter->ahw.boardcfg);
203
204         if (netxen_nic_get_board_info(adapter) != 0)
205                 printk("%s: Error getting board config info.\n",
206                        netxen_nic_driver_name);
207         get_brd_port_by_type(board_info->board_type, &ports);
208         if (ports == 0)
209                 printk(KERN_ERR "%s: Unknown board type\n",
210                        netxen_nic_driver_name);
211         adapter->ahw.max_ports = ports;
212 }
213
214 void netxen_initialize_adapter_ops(struct netxen_adapter *adapter)
215 {
216         switch (adapter->ahw.board_type) {
217         case NETXEN_NIC_GBE:
218                 adapter->enable_phy_interrupts =
219                     netxen_niu_gbe_enable_phy_interrupts;
220                 adapter->disable_phy_interrupts =
221                     netxen_niu_gbe_disable_phy_interrupts;
222                 adapter->handle_phy_intr = netxen_nic_gbe_handle_phy_intr;
223                 adapter->macaddr_set = netxen_niu_macaddr_set;
224                 adapter->set_mtu = netxen_nic_set_mtu_gb;
225                 adapter->set_promisc = netxen_niu_set_promiscuous_mode;
226                 adapter->unset_promisc = netxen_niu_set_promiscuous_mode;
227                 adapter->phy_read = netxen_niu_gbe_phy_read;
228                 adapter->phy_write = netxen_niu_gbe_phy_write;
229                 adapter->init_niu = netxen_nic_init_niu_gb;
230                 adapter->stop_port = netxen_niu_disable_gbe_port;
231                 break;
232
233         case NETXEN_NIC_XGBE:
234                 adapter->enable_phy_interrupts =
235                     netxen_niu_xgbe_enable_phy_interrupts;
236                 adapter->disable_phy_interrupts =
237                     netxen_niu_xgbe_disable_phy_interrupts;
238                 adapter->handle_phy_intr = netxen_nic_xgbe_handle_phy_intr;
239                 adapter->macaddr_set = netxen_niu_xg_macaddr_set;
240                 adapter->set_mtu = netxen_nic_set_mtu_xgb;
241                 adapter->init_port = netxen_niu_xg_init_port;
242                 adapter->set_promisc = netxen_niu_xg_set_promiscuous_mode;
243                 adapter->unset_promisc = netxen_niu_xg_set_promiscuous_mode;
244                 adapter->stop_port = netxen_niu_disable_xg_port;
245                 break;
246
247         default:
248                 break;
249         }
250 }
251
252 /*
253  * netxen_decode_crb_addr(0 - utility to translate from internal Phantom CRB
254  * address to external PCI CRB address.
255  */
256 u32 netxen_decode_crb_addr(u32 addr)
257 {
258         int i;
259         u32 base_addr, offset, pci_base;
260
261         crb_addr_transform_setup();
262
263         pci_base = NETXEN_ADDR_ERROR;
264         base_addr = addr & 0xfff00000;
265         offset = addr & 0x000fffff;
266
267         for (i = 0; i < NETXEN_MAX_CRB_XFORM; i++) {
268                 if (crb_addr_xform[i] == base_addr) {
269                         pci_base = i << 20;
270                         break;
271                 }
272         }
273         if (pci_base == NETXEN_ADDR_ERROR)
274                 return pci_base;
275         else
276                 return (pci_base + offset);
277 }
278
279 static long rom_max_timeout = 100;
280 static long rom_lock_timeout = 10000;
281 static long rom_write_timeout = 700;
282
283 static inline int rom_lock(struct netxen_adapter *adapter)
284 {
285         int iter;
286         u32 done = 0;
287         int timeout = 0;
288
289         while (!done) {
290                 /* acquire semaphore2 from PCI HW block */
291                 netxen_nic_read_w0(adapter, NETXEN_PCIE_REG(PCIE_SEM2_LOCK),
292                                    &done);
293                 if (done == 1)
294                         break;
295                 if (timeout >= rom_lock_timeout)
296                         return -EIO;
297
298                 timeout++;
299                 /*
300                  * Yield CPU
301                  */
302                 if (!in_atomic())
303                         schedule();
304                 else {
305                         for (iter = 0; iter < 20; iter++)
306                                 cpu_relax();    /*This a nop instr on i386 */
307                 }
308         }
309         netxen_nic_reg_write(adapter, NETXEN_ROM_LOCK_ID, ROM_LOCK_DRIVER);
310         return 0;
311 }
312
313 int netxen_wait_rom_done(struct netxen_adapter *adapter)
314 {
315         long timeout = 0;
316         long done = 0;
317
318         while (done == 0) {
319                 done = netxen_nic_reg_read(adapter, NETXEN_ROMUSB_GLB_STATUS);
320                 done &= 2;
321                 timeout++;
322                 if (timeout >= rom_max_timeout) {
323                         printk("Timeout reached  waiting for rom done");
324                         return -EIO;
325                 }
326         }
327         return 0;
328 }
329
330 static inline int netxen_rom_wren(struct netxen_adapter *adapter)
331 {
332         /* Set write enable latch in ROM status register */
333         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
334         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
335                              M25P_INSTR_WREN);
336         if (netxen_wait_rom_done(adapter)) {
337                 return -1;
338         }
339         return 0;
340 }
341
342 static inline unsigned int netxen_rdcrbreg(struct netxen_adapter *adapter,
343                                            unsigned int addr)
344 {
345         unsigned int data = 0xdeaddead;
346         data = netxen_nic_reg_read(adapter, addr);
347         return data;
348 }
349
350 static inline int netxen_do_rom_rdsr(struct netxen_adapter *adapter)
351 {
352         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
353                              M25P_INSTR_RDSR);
354         if (netxen_wait_rom_done(adapter)) {
355                 return -1;
356         }
357         return netxen_rdcrbreg(adapter, NETXEN_ROMUSB_ROM_RDATA);
358 }
359
360 static inline void netxen_rom_unlock(struct netxen_adapter *adapter)
361 {
362         u32 val;
363
364         /* release semaphore2 */
365         netxen_nic_read_w0(adapter, NETXEN_PCIE_REG(PCIE_SEM2_UNLOCK), &val);
366
367 }
368
369 int netxen_rom_wip_poll(struct netxen_adapter *adapter)
370 {
371         long timeout = 0;
372         long wip = 1;
373         int val;
374         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
375         while (wip != 0) {
376                 val = netxen_do_rom_rdsr(adapter);
377                 wip = val & 1;
378                 timeout++;
379                 if (timeout > rom_max_timeout) {
380                         return -1;
381                 }
382         }
383         return 0;
384 }
385
386 static inline int do_rom_fast_write(struct netxen_adapter *adapter, int addr,
387                                     int data)
388 {
389         if (netxen_rom_wren(adapter)) {
390                 return -1;
391         }
392         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_WDATA, data);
393         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
394         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
395         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
396                              M25P_INSTR_PP);
397         if (netxen_wait_rom_done(adapter)) {
398                 netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
399                 return -1;
400         }
401
402         return netxen_rom_wip_poll(adapter);
403 }
404
405 static inline int
406 do_rom_fast_read(struct netxen_adapter *adapter, int addr, int *valp)
407 {
408         if (jiffies > (last_schedule_time + (8 * HZ))) {
409                 last_schedule_time = jiffies;
410                 schedule();
411         }
412
413         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
414         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
415         udelay(100);            /* prevent bursting on CRB */
416         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_DUMMY_BYTE_CNT, 0);
417         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE, 0xb);
418         if (netxen_wait_rom_done(adapter)) {
419                 printk("Error waiting for rom done\n");
420                 return -EIO;
421         }
422         /* reset abyte_cnt and dummy_byte_cnt */
423         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
424         udelay(100);            /* prevent bursting on CRB */
425         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_DUMMY_BYTE_CNT, 0);
426
427         *valp = netxen_nic_reg_read(adapter, NETXEN_ROMUSB_ROM_RDATA);
428         return 0;
429 }
430
431 static inline int 
432 do_rom_fast_read_words(struct netxen_adapter *adapter, int addr,
433                         u8 *bytes, size_t size)
434 {
435         int addridx;
436         int ret = 0;
437
438         for (addridx = addr; addridx < (addr + size); addridx += 4) {
439                 ret = do_rom_fast_read(adapter, addridx, (int *)bytes);
440                 if (ret != 0)
441                         break;
442                 *(int *)bytes = cpu_to_le32(*(int *)bytes);
443                 bytes += 4;
444         }
445
446         return ret;
447 }
448
449 int
450 netxen_rom_fast_read_words(struct netxen_adapter *adapter, int addr, 
451                                 u8 *bytes, size_t size)
452 {
453         int ret;
454
455         ret = rom_lock(adapter);
456         if (ret < 0)
457                 return ret;
458
459         ret = do_rom_fast_read_words(adapter, addr, bytes, size);
460
461         netxen_rom_unlock(adapter);
462         return ret;
463 }
464
465 int netxen_rom_fast_read(struct netxen_adapter *adapter, int addr, int *valp)
466 {
467         int ret;
468
469         if (rom_lock(adapter) != 0)
470                 return -EIO;
471
472         ret = do_rom_fast_read(adapter, addr, valp);
473         netxen_rom_unlock(adapter);
474         return ret;
475 }
476
477 int netxen_rom_fast_write(struct netxen_adapter *adapter, int addr, int data)
478 {
479         int ret = 0;
480
481         if (rom_lock(adapter) != 0) {
482                 return -1;
483         }
484         ret = do_rom_fast_write(adapter, addr, data);
485         netxen_rom_unlock(adapter);
486         return ret;
487 }
488
489 static inline int do_rom_fast_write_words(struct netxen_adapter *adapter, 
490                                                 int addr, u8 *bytes, size_t size)
491 {
492         int addridx = addr;
493         int ret = 0;
494
495         while (addridx < (addr + size)) {
496                 int last_attempt = 0;
497                 int timeout = 0;
498                 int data;
499
500                 data = le32_to_cpu((*(u32*)bytes));
501                 ret = do_rom_fast_write(adapter, addridx, data);
502                 if (ret < 0)
503                         return ret;
504                         
505                 while(1) {
506                         int data1;
507
508                         ret = do_rom_fast_read(adapter, addridx, &data1);
509                         if (ret < 0)
510                                 return ret;
511
512                         if (data1 == data)
513                                 break;
514
515                         if (timeout++ >= rom_write_timeout) {
516                                 if (last_attempt++ < 4) {
517                                         ret = do_rom_fast_write(adapter, 
518                                                                 addridx, data);
519                                         if (ret < 0)
520                                                 return ret;
521                                 }
522                                 else {
523                                         printk(KERN_INFO "Data write did not "
524                                            "succeed at address 0x%x\n", addridx);
525                                         break;
526                                 }
527                         }
528                 }
529
530                 bytes += 4;
531                 addridx += 4;
532         }
533
534         return ret;
535 }
536
537 int netxen_rom_fast_write_words(struct netxen_adapter *adapter, int addr, 
538                                         u8 *bytes, size_t size)
539 {
540         int ret = 0;
541
542         ret = rom_lock(adapter);
543         if (ret < 0)
544                 return ret;
545
546         ret = do_rom_fast_write_words(adapter, addr, bytes, size);
547         netxen_rom_unlock(adapter);
548
549         return ret;
550 }
551
552 int netxen_rom_wrsr(struct netxen_adapter *adapter, int data)
553 {
554         int ret;
555
556         ret = netxen_rom_wren(adapter);
557         if (ret < 0)
558                 return ret;
559
560         netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_ROM_WDATA, data);
561         netxen_crb_writelit_adapter(adapter, 
562                                         NETXEN_ROMUSB_ROM_INSTR_OPCODE, 0x1);
563
564         ret = netxen_wait_rom_done(adapter);
565         if (ret < 0)
566                 return ret;
567
568         return netxen_rom_wip_poll(adapter);
569 }
570
571 int netxen_rom_rdsr(struct netxen_adapter *adapter)
572 {
573         int ret;
574
575         ret = rom_lock(adapter);
576         if (ret < 0)
577                 return ret;
578
579         ret = netxen_do_rom_rdsr(adapter);
580         netxen_rom_unlock(adapter);
581         return ret;
582 }
583
584 int netxen_backup_crbinit(struct netxen_adapter *adapter)
585 {
586         int ret = FLASH_SUCCESS;
587         int val;
588         char *buffer = kmalloc(FLASH_SECTOR_SIZE, GFP_KERNEL);
589
590         if (!buffer)
591                 return -ENOMEM; 
592         /* unlock sector 63 */
593         val = netxen_rom_rdsr(adapter);
594         val = val & 0xe3;
595         ret = netxen_rom_wrsr(adapter, val);
596         if (ret != FLASH_SUCCESS)
597                 goto out_kfree;
598
599         ret = netxen_rom_wip_poll(adapter);
600         if (ret != FLASH_SUCCESS)
601                 goto out_kfree;
602
603         /* copy  sector 0 to sector 63 */
604         ret = netxen_rom_fast_read_words(adapter, CRBINIT_START, 
605                                                 buffer, FLASH_SECTOR_SIZE);
606         if (ret != FLASH_SUCCESS)
607                 goto out_kfree;
608
609         ret = netxen_rom_fast_write_words(adapter, FIXED_START, 
610                                                 buffer, FLASH_SECTOR_SIZE);
611         if (ret != FLASH_SUCCESS)
612                 goto out_kfree;
613
614         /* lock sector 63 */
615         val = netxen_rom_rdsr(adapter);
616         if (!(val & 0x8)) {
617                 val |= (0x1 << 2);
618                 /* lock sector 63 */
619                 if (netxen_rom_wrsr(adapter, val) == 0) {
620                         ret = netxen_rom_wip_poll(adapter);
621                         if (ret != FLASH_SUCCESS)
622                                 goto out_kfree;
623
624                         /* lock SR writes */
625                         ret = netxen_rom_wip_poll(adapter);
626                         if (ret != FLASH_SUCCESS)
627                                 goto out_kfree;
628                 }
629         }
630
631 out_kfree:
632         kfree(buffer);
633         return ret;
634 }
635
636 int netxen_do_rom_se(struct netxen_adapter *adapter, int addr)
637 {
638         netxen_rom_wren(adapter);
639         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ADDRESS, addr);
640         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 3);
641         netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_INSTR_OPCODE,
642                              M25P_INSTR_SE);
643         if (netxen_wait_rom_done(adapter)) {
644                 netxen_nic_reg_write(adapter, NETXEN_ROMUSB_ROM_ABYTE_CNT, 0);
645                 return -1;
646         }
647         return netxen_rom_wip_poll(adapter);
648 }
649
650 void check_erased_flash(struct netxen_adapter *adapter, int addr)
651 {
652         int i;
653         int val;
654         int count = 0, erased_errors = 0;
655         int range;
656
657         range = (addr == USER_START) ? FIXED_START : addr + FLASH_SECTOR_SIZE;
658         
659         for (i = addr; i < range; i += 4) {
660                 netxen_rom_fast_read(adapter, i, &val);
661                 if (val != 0xffffffff)
662                         erased_errors++;
663                 count++;
664         }
665
666         if (erased_errors)
667                 printk(KERN_INFO "0x%x out of 0x%x words fail to be erased "
668                         "for sector address: %x\n", erased_errors, count, addr);
669 }
670
671 int netxen_rom_se(struct netxen_adapter *adapter, int addr)
672 {
673         int ret = 0;
674         if (rom_lock(adapter) != 0) {
675                 return -1;
676         }
677         ret = netxen_do_rom_se(adapter, addr);
678         netxen_rom_unlock(adapter);
679         msleep(30);
680         check_erased_flash(adapter, addr);
681
682         return ret;
683 }
684
685 int
686 netxen_flash_erase_sections(struct netxen_adapter *adapter, int start, int end)
687 {
688         int ret = FLASH_SUCCESS;
689         int i;
690
691         for (i = start; i < end; i++) {
692                 ret = netxen_rom_se(adapter, i * FLASH_SECTOR_SIZE);
693                 if (ret)
694                         break;
695                 ret = netxen_rom_wip_poll(adapter);
696                 if (ret < 0)
697                         return ret;
698         }
699
700         return ret;
701 }
702
703 int
704 netxen_flash_erase_secondary(struct netxen_adapter *adapter)
705 {
706         int ret = FLASH_SUCCESS;
707         int start, end;
708
709         start = SECONDARY_START / FLASH_SECTOR_SIZE;
710         end   = USER_START / FLASH_SECTOR_SIZE;
711         ret = netxen_flash_erase_sections(adapter, start, end);
712
713         return ret;
714 }
715
716 int
717 netxen_flash_erase_primary(struct netxen_adapter *adapter)
718 {
719         int ret = FLASH_SUCCESS;
720         int start, end;
721
722         start = PRIMARY_START / FLASH_SECTOR_SIZE;
723         end   = SECONDARY_START / FLASH_SECTOR_SIZE;
724         ret = netxen_flash_erase_sections(adapter, start, end);
725
726         return ret;
727 }
728
729 void netxen_halt_pegs(struct netxen_adapter *adapter)
730 {
731          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0x3c, 1);
732          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0x3c, 1);
733          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0x3c, 1);
734          netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0x3c, 1);
735 }
736
737 int netxen_flash_unlock(struct netxen_adapter *adapter)
738 {
739         int ret = 0;
740
741         ret = netxen_rom_wrsr(adapter, 0);
742         if (ret < 0)
743                 return ret;
744
745         ret = netxen_rom_wren(adapter);
746         if (ret < 0)
747                 return ret;
748
749         return ret;
750 }
751
752 #define NETXEN_BOARDTYPE                0x4008
753 #define NETXEN_BOARDNUM                 0x400c
754 #define NETXEN_CHIPNUM                  0x4010
755 #define NETXEN_ROMBUS_RESET             0xFFFFFFFF
756 #define NETXEN_ROM_FIRST_BARRIER        0x800000000ULL
757 #define NETXEN_ROM_FOUND_INIT           0x400
758
759 int netxen_pinit_from_rom(struct netxen_adapter *adapter, int verbose)
760 {
761         int addr, val, status;
762         int n, i;
763         int init_delay = 0;
764         struct crb_addr_pair *buf;
765         u32 off;
766
767         /* resetall */
768         status = netxen_nic_get_board_info(adapter);
769         if (status)
770                 printk("%s: netxen_pinit_from_rom: Error getting board info\n",
771                        netxen_nic_driver_name);
772
773         netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_GLB_SW_RESET,
774                                     NETXEN_ROMBUS_RESET);
775
776         if (verbose) {
777                 int val;
778                 if (netxen_rom_fast_read(adapter, NETXEN_BOARDTYPE, &val) == 0)
779                         printk("P2 ROM board type: 0x%08x\n", val);
780                 else
781                         printk("Could not read board type\n");
782                 if (netxen_rom_fast_read(adapter, NETXEN_BOARDNUM, &val) == 0)
783                         printk("P2 ROM board  num: 0x%08x\n", val);
784                 else
785                         printk("Could not read board number\n");
786                 if (netxen_rom_fast_read(adapter, NETXEN_CHIPNUM, &val) == 0)
787                         printk("P2 ROM chip   num: 0x%08x\n", val);
788                 else
789                         printk("Could not read chip number\n");
790         }
791
792         if (netxen_rom_fast_read(adapter, 0, &n) == 0
793             && (n & NETXEN_ROM_FIRST_BARRIER)) {
794                 n &= ~NETXEN_ROM_ROUNDUP;
795                 if (n < NETXEN_ROM_FOUND_INIT) {
796                         if (verbose)
797                                 printk("%s: %d CRB init values found"
798                                        " in ROM.\n", netxen_nic_driver_name, n);
799                 } else {
800                         printk("%s:n=0x%x Error! NetXen card flash not"
801                                " initialized.\n", __FUNCTION__, n);
802                         return -EIO;
803                 }
804                 buf = kcalloc(n, sizeof(struct crb_addr_pair), GFP_KERNEL);
805                 if (buf == NULL) {
806                         printk("%s: netxen_pinit_from_rom: Unable to calloc "
807                                "memory.\n", netxen_nic_driver_name);
808                         return -ENOMEM;
809                 }
810                 for (i = 0; i < n; i++) {
811                         if (netxen_rom_fast_read(adapter, 8 * i + 4, &val) != 0
812                             || netxen_rom_fast_read(adapter, 8 * i + 8,
813                                                     &addr) != 0)
814                                 return -EIO;
815
816                         buf[i].addr = addr;
817                         buf[i].data = val;
818
819                         if (verbose)
820                                 printk("%s: PCI:     0x%08x == 0x%08x\n",
821                                        netxen_nic_driver_name, (unsigned int)
822                                        netxen_decode_crb_addr(addr), val);
823                 }
824                 for (i = 0; i < n; i++) {
825
826                         off = netxen_decode_crb_addr(buf[i].addr);
827                         if (off == NETXEN_ADDR_ERROR) {
828                                 printk(KERN_ERR"CRB init value out of range %x\n",
829                                         buf[i].addr);
830                                 continue;
831                         }
832                         off += NETXEN_PCI_CRBSPACE;
833                         /* skipping cold reboot MAGIC */
834                         if (off == NETXEN_CAM_RAM(0x1fc))
835                                 continue;
836
837                         /* After writing this register, HW needs time for CRB */
838                         /* to quiet down (else crb_window returns 0xffffffff) */
839                         if (off == NETXEN_ROMUSB_GLB_SW_RESET) {
840                                 init_delay = 1;
841                                 /* hold xdma in reset also */
842                                 buf[i].data = NETXEN_NIC_XDMA_RESET;
843                         }
844
845                         if (ADDR_IN_WINDOW1(off)) {
846                                 writel(buf[i].data,
847                                        NETXEN_CRB_NORMALIZE(adapter, off));
848                         } else {
849                                 netxen_nic_pci_change_crbwindow(adapter, 0);
850                                 writel(buf[i].data,
851                                        pci_base_offset(adapter, off));
852
853                                 netxen_nic_pci_change_crbwindow(adapter, 1);
854                         }
855                         if (init_delay == 1) {
856                                 ssleep(1);
857                                 init_delay = 0;
858                         }
859                         msleep(1);
860                 }
861                 kfree(buf);
862
863                 /* disable_peg_cache_all */
864
865                 /* unreset_net_cache */
866                 netxen_nic_hw_read_wx(adapter, NETXEN_ROMUSB_GLB_SW_RESET, &val,
867                                       4);
868                 netxen_crb_writelit_adapter(adapter, NETXEN_ROMUSB_GLB_SW_RESET,
869                                             (val & 0xffffff0f));
870                 /* p2dn replyCount */
871                 netxen_crb_writelit_adapter(adapter,
872                                             NETXEN_CRB_PEG_NET_D + 0xec, 0x1e);
873                 /* disable_peg_cache 0 */
874                 netxen_crb_writelit_adapter(adapter,
875                                             NETXEN_CRB_PEG_NET_D + 0x4c, 8);
876                 /* disable_peg_cache 1 */
877                 netxen_crb_writelit_adapter(adapter,
878                                             NETXEN_CRB_PEG_NET_I + 0x4c, 8);
879
880                 /* peg_clr_all */
881
882                 /* peg_clr 0 */
883                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0x8,
884                                             0);
885                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_0 + 0xc,
886                                             0);
887                 /* peg_clr 1 */
888                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0x8,
889                                             0);
890                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_1 + 0xc,
891                                             0);
892                 /* peg_clr 2 */
893                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0x8,
894                                             0);
895                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_2 + 0xc,
896                                             0);
897                 /* peg_clr 3 */
898                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0x8,
899                                             0);
900                 netxen_crb_writelit_adapter(adapter, NETXEN_CRB_PEG_NET_3 + 0xc,
901                                             0);
902         }
903         return 0;
904 }
905
906 int netxen_initialize_adapter_offload(struct netxen_adapter *adapter)
907 {
908         uint64_t addr;
909         uint32_t hi;
910         uint32_t lo;
911
912         adapter->dummy_dma.addr =
913             pci_alloc_consistent(adapter->ahw.pdev,
914                                  NETXEN_HOST_DUMMY_DMA_SIZE,
915                                  &adapter->dummy_dma.phys_addr);
916         if (adapter->dummy_dma.addr == NULL) {
917                 printk("%s: ERROR: Could not allocate dummy DMA memory\n",
918                        __FUNCTION__);
919                 return -ENOMEM;
920         }
921
922         addr = (uint64_t) adapter->dummy_dma.phys_addr;
923         hi = (addr >> 32) & 0xffffffff;
924         lo = addr & 0xffffffff;
925
926         writel(hi, NETXEN_CRB_NORMALIZE(adapter, CRB_HOST_DUMMY_BUF_ADDR_HI));
927         writel(lo, NETXEN_CRB_NORMALIZE(adapter, CRB_HOST_DUMMY_BUF_ADDR_LO));
928
929         return 0;
930 }
931
932 void netxen_free_adapter_offload(struct netxen_adapter *adapter)
933 {
934         if (adapter->dummy_dma.addr) {
935                 writel(0, NETXEN_CRB_NORMALIZE(adapter,
936                         CRB_HOST_DUMMY_BUF_ADDR_HI));
937                 writel(0, NETXEN_CRB_NORMALIZE(adapter,
938                         CRB_HOST_DUMMY_BUF_ADDR_LO));
939                 pci_free_consistent(adapter->ahw.pdev,
940                                     NETXEN_HOST_DUMMY_DMA_SIZE,
941                                     adapter->dummy_dma.addr,
942                                     adapter->dummy_dma.phys_addr);
943                 adapter->dummy_dma.addr = NULL;
944         }
945 }
946
947 void netxen_phantom_init(struct netxen_adapter *adapter, int pegtune_val)
948 {
949         u32 val = 0;
950         int loops = 0;
951
952         if (!pegtune_val) {
953                 val = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_CMDPEG_STATE));
954                 while (val != PHAN_INITIALIZE_COMPLETE && 
955                         val != PHAN_INITIALIZE_ACK && loops < 200000) {
956                         udelay(100);
957                         schedule();
958                         val =
959                             readl(NETXEN_CRB_NORMALIZE
960                                   (adapter, CRB_CMDPEG_STATE));
961                         loops++;
962                 }
963                 if (val != PHAN_INITIALIZE_COMPLETE)
964                         printk("WARNING: Initial boot wait loop failed...\n");
965         }
966 }
967
968 int netxen_nic_rx_has_work(struct netxen_adapter *adapter)
969 {
970         int ctx;
971
972         for (ctx = 0; ctx < MAX_RCV_CTX; ++ctx) {
973                 struct netxen_recv_context *recv_ctx =
974                     &(adapter->recv_ctx[ctx]);
975                 u32 consumer;
976                 struct status_desc *desc_head;
977                 struct status_desc *desc;
978
979                 consumer = recv_ctx->status_rx_consumer;
980                 desc_head = recv_ctx->rcv_status_desc_head;
981                 desc = &desc_head[consumer];
982
983                 if (netxen_get_sts_owner(desc) & STATUS_OWNER_HOST)
984                         return 1;
985         }
986
987         return 0;
988 }
989
990 static inline int netxen_nic_check_temp(struct netxen_adapter *adapter)
991 {
992         struct net_device *netdev = adapter->netdev;
993         uint32_t temp, temp_state, temp_val;
994         int rv = 0;
995
996         temp = readl(NETXEN_CRB_NORMALIZE(adapter, CRB_TEMP_STATE));
997
998         temp_state = nx_get_temp_state(temp);
999         temp_val = nx_get_temp_val(temp);
1000
1001         if (temp_state == NX_TEMP_PANIC) {
1002                 printk(KERN_ALERT
1003                        "%s: Device temperature %d degrees C exceeds"
1004                        " maximum allowed. Hardware has been shut down.\n",
1005                        netxen_nic_driver_name, temp_val);
1006
1007                 netif_carrier_off(netdev);
1008                 netif_stop_queue(netdev);
1009                 rv = 1;
1010         } else if (temp_state == NX_TEMP_WARN) {
1011                 if (adapter->temp == NX_TEMP_NORMAL) {
1012                         printk(KERN_ALERT
1013                                "%s: Device temperature %d degrees C "
1014                                "exceeds operating range."
1015                                " Immediate action needed.\n",
1016                                netxen_nic_driver_name, temp_val);
1017                 }
1018         } else {
1019                 if (adapter->temp == NX_TEMP_WARN) {
1020                         printk(KERN_INFO
1021                                "%s: Device temperature is now %d degrees C"
1022                                " in normal range.\n", netxen_nic_driver_name,
1023                                temp_val);
1024                 }
1025         }
1026         adapter->temp = temp_state;
1027         return rv;
1028 }
1029
1030 void netxen_watchdog_task(struct work_struct *work)
1031 {
1032         struct net_device *netdev;
1033         struct netxen_adapter *adapter =
1034                 container_of(work, struct netxen_adapter, watchdog_task);
1035
1036         if ((adapter->portnum  == 0) && netxen_nic_check_temp(adapter))
1037                 return;
1038
1039         netdev = adapter->netdev;
1040         if ((netif_running(netdev)) && !netif_carrier_ok(netdev)) {
1041                 printk(KERN_INFO "%s port %d, %s carrier is now ok\n",
1042                        netxen_nic_driver_name, adapter->portnum, netdev->name);
1043                 netif_carrier_on(netdev);
1044         }
1045
1046         if (netif_queue_stopped(netdev))
1047                 netif_wake_queue(netdev);
1048
1049         if (adapter->handle_phy_intr)
1050                 adapter->handle_phy_intr(adapter);
1051         mod_timer(&adapter->watchdog_timer, jiffies + 2 * HZ);
1052 }
1053
1054 /*
1055  * netxen_process_rcv() send the received packet to the protocol stack.
1056  * and if the number of receives exceeds RX_BUFFERS_REFILL, then we
1057  * invoke the routine to send more rx buffers to the Phantom...
1058  */
1059 void
1060 netxen_process_rcv(struct netxen_adapter *adapter, int ctxid,
1061                    struct status_desc *desc)
1062 {
1063         struct pci_dev *pdev = adapter->pdev;
1064         struct net_device *netdev = adapter->netdev;
1065         int index = netxen_get_sts_refhandle(desc);
1066         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctxid]);
1067         struct netxen_rx_buffer *buffer;
1068         struct sk_buff *skb;
1069         u32 length = netxen_get_sts_totallength(desc);
1070         u32 desc_ctx;
1071         struct netxen_rcv_desc_ctx *rcv_desc;
1072         int ret;
1073
1074         desc_ctx = netxen_get_sts_type(desc);
1075         if (unlikely(desc_ctx >= NUM_RCV_DESC_RINGS)) {
1076                 printk("%s: %s Bad Rcv descriptor ring\n",
1077                        netxen_nic_driver_name, netdev->name);
1078                 return;
1079         }
1080
1081         rcv_desc = &recv_ctx->rcv_desc[desc_ctx];
1082         if (unlikely(index > rcv_desc->max_rx_desc_count)) {
1083                 DPRINTK(ERR, "Got a buffer index:%x Max is %x\n",
1084                         index, rcv_desc->max_rx_desc_count);
1085                 return;
1086         }
1087         buffer = &rcv_desc->rx_buf_arr[index];
1088         if (desc_ctx == RCV_DESC_LRO_CTXID) {
1089                 buffer->lro_current_frags++;
1090                 if (netxen_get_sts_desc_lro_last_frag(desc)) {
1091                         buffer->lro_expected_frags =
1092                             netxen_get_sts_desc_lro_cnt(desc);
1093                         buffer->lro_length = length;
1094                 }
1095                 if (buffer->lro_current_frags != buffer->lro_expected_frags) {
1096                         if (buffer->lro_expected_frags != 0) {
1097                                 printk("LRO: (refhandle:%x) recv frag."
1098                                        "wait for last. flags: %x expected:%d"
1099                                        "have:%d\n", index,
1100                                        netxen_get_sts_desc_lro_last_frag(desc),
1101                                        buffer->lro_expected_frags,
1102                                        buffer->lro_current_frags);
1103                         }
1104                         return;
1105                 }
1106         }
1107
1108         pci_unmap_single(pdev, buffer->dma, rcv_desc->dma_size,
1109                          PCI_DMA_FROMDEVICE);
1110
1111         skb = (struct sk_buff *)buffer->skb;
1112
1113         if (likely(netxen_get_sts_status(desc) == STATUS_CKSUM_OK)) {
1114                 adapter->stats.csummed++;
1115                 skb->ip_summed = CHECKSUM_UNNECESSARY;
1116         }
1117         if (desc_ctx == RCV_DESC_LRO_CTXID) {
1118                 /* True length was only available on the last pkt */
1119                 skb_put(skb, buffer->lro_length);
1120         } else {
1121                 skb_put(skb, length);
1122         }
1123
1124         skb->protocol = eth_type_trans(skb, netdev);
1125
1126         ret = netif_receive_skb(skb);
1127
1128         /*
1129          * RH: Do we need these stats on a regular basis. Can we get it from
1130          * Linux stats.
1131          */
1132         switch (ret) {
1133         case NET_RX_SUCCESS:
1134                 adapter->stats.uphappy++;
1135                 break;
1136
1137         case NET_RX_CN_LOW:
1138                 adapter->stats.uplcong++;
1139                 break;
1140
1141         case NET_RX_CN_MOD:
1142                 adapter->stats.upmcong++;
1143                 break;
1144
1145         case NET_RX_CN_HIGH:
1146                 adapter->stats.uphcong++;
1147                 break;
1148
1149         case NET_RX_DROP:
1150                 adapter->stats.updropped++;
1151                 break;
1152
1153         default:
1154                 adapter->stats.updunno++;
1155                 break;
1156         }
1157
1158         netdev->last_rx = jiffies;
1159
1160         rcv_desc->rcv_free++;
1161         rcv_desc->rcv_pending--;
1162
1163         /*
1164          * We just consumed one buffer so post a buffer.
1165          */
1166         buffer->skb = NULL;
1167         buffer->state = NETXEN_BUFFER_FREE;
1168         buffer->lro_current_frags = 0;
1169         buffer->lro_expected_frags = 0;
1170
1171         adapter->stats.no_rcv++;
1172         adapter->stats.rxbytes += length;
1173 }
1174
1175 /* Process Receive status ring */
1176 u32 netxen_process_rcv_ring(struct netxen_adapter *adapter, int ctxid, int max)
1177 {
1178         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctxid]);
1179         struct status_desc *desc_head = recv_ctx->rcv_status_desc_head;
1180         struct status_desc *desc;       /* used to read status desc here */
1181         u32 consumer = recv_ctx->status_rx_consumer;
1182         u32 producer = 0;
1183         int count = 0, ring;
1184
1185         DPRINTK(INFO, "procesing receive\n");
1186         /*
1187          * we assume in this case that there is only one port and that is
1188          * port #1...changes need to be done in firmware to indicate port
1189          * number as part of the descriptor. This way we will be able to get
1190          * the netdev which is associated with that device.
1191          */
1192         while (count < max) {
1193                 desc = &desc_head[consumer];
1194                 if (!(netxen_get_sts_owner(desc) & STATUS_OWNER_HOST)) {
1195                         DPRINTK(ERR, "desc %p ownedby %x\n", desc,
1196                                 netxen_get_sts_owner(desc));
1197                         break;
1198                 }
1199                 netxen_process_rcv(adapter, ctxid, desc);
1200                 netxen_clear_sts_owner(desc);
1201                 netxen_set_sts_owner(desc, STATUS_OWNER_PHANTOM);
1202                 consumer = (consumer + 1) & (adapter->max_rx_desc_count - 1);
1203                 count++;
1204         }
1205         if (count) {
1206                 for (ring = 0; ring < NUM_RCV_DESC_RINGS; ring++) {
1207                         netxen_post_rx_buffers_nodb(adapter, ctxid, ring);
1208                 }
1209         }
1210
1211         /* update the consumer index in phantom */
1212         if (count) {
1213                 recv_ctx->status_rx_consumer = consumer;
1214                 recv_ctx->status_rx_producer = producer;
1215
1216                 /* Window = 1 */
1217                 writel(consumer,
1218                        NETXEN_CRB_NORMALIZE(adapter,
1219                                             recv_crb_registers[adapter->portnum].
1220                                             crb_rcv_status_consumer));
1221         }
1222
1223         return count;
1224 }
1225
1226 /* Process Command status ring */
1227 int netxen_process_cmd_ring(unsigned long data)
1228 {
1229         u32 last_consumer;
1230         u32 consumer;
1231         struct netxen_adapter *adapter = (struct netxen_adapter *)data;
1232         int count1 = 0;
1233         int count2 = 0;
1234         struct netxen_cmd_buffer *buffer;
1235         struct pci_dev *pdev;
1236         struct netxen_skb_frag *frag;
1237         u32 i;
1238         struct sk_buff *skb = NULL;
1239         int done;
1240
1241         spin_lock(&adapter->tx_lock);
1242         last_consumer = adapter->last_cmd_consumer;
1243         DPRINTK(INFO, "procesing xmit complete\n");
1244         /* we assume in this case that there is only one port and that is
1245          * port #1...changes need to be done in firmware to indicate port
1246          * number as part of the descriptor. This way we will be able to get
1247          * the netdev which is associated with that device.
1248          */
1249
1250         consumer = le32_to_cpu(*(adapter->cmd_consumer));
1251         if (last_consumer == consumer) {        /* Ring is empty    */
1252                 DPRINTK(INFO, "last_consumer %d == consumer %d\n",
1253                         last_consumer, consumer);
1254                 spin_unlock(&adapter->tx_lock);
1255                 return 1;
1256         }
1257
1258         adapter->proc_cmd_buf_counter++;
1259         /*
1260          * Not needed - does not seem to be used anywhere.
1261          * adapter->cmd_consumer = consumer;
1262          */
1263         spin_unlock(&adapter->tx_lock);
1264
1265         while ((last_consumer != consumer) && (count1 < MAX_STATUS_HANDLE)) {
1266                 buffer = &adapter->cmd_buf_arr[last_consumer];
1267                 pdev = adapter->pdev;
1268                 frag = &buffer->frag_array[0];
1269                 skb = buffer->skb;
1270                 if (skb && (cmpxchg(&buffer->skb, skb, 0) == skb)) {
1271                         pci_unmap_single(pdev, frag->dma, frag->length,
1272                                          PCI_DMA_TODEVICE);
1273                         for (i = 1; i < buffer->frag_count; i++) {
1274                                 DPRINTK(INFO, "getting fragment no %d\n", i);
1275                                 frag++; /* Get the next frag */
1276                                 pci_unmap_page(pdev, frag->dma, frag->length,
1277                                                PCI_DMA_TODEVICE);
1278                         }
1279
1280                         adapter->stats.skbfreed++;
1281                         dev_kfree_skb_any(skb);
1282                         skb = NULL;
1283                 } else if (adapter->proc_cmd_buf_counter == 1) {
1284                         adapter->stats.txnullskb++;
1285                 }
1286                 if (unlikely(netif_queue_stopped(adapter->netdev)
1287                              && netif_carrier_ok(adapter->netdev))
1288                     && ((jiffies - adapter->netdev->trans_start) >
1289                         adapter->netdev->watchdog_timeo)) {
1290                         SCHEDULE_WORK(&adapter->tx_timeout_task);
1291                 }
1292
1293                 last_consumer = get_next_index(last_consumer,
1294                                                adapter->max_tx_desc_count);
1295                 count1++;
1296         }
1297
1298         count2 = 0;
1299         spin_lock(&adapter->tx_lock);
1300         if ((--adapter->proc_cmd_buf_counter) == 0) {
1301                 adapter->last_cmd_consumer = last_consumer;
1302                 while ((adapter->last_cmd_consumer != consumer)
1303                        && (count2 < MAX_STATUS_HANDLE)) {
1304                         buffer =
1305                             &adapter->cmd_buf_arr[adapter->last_cmd_consumer];
1306                         count2++;
1307                         if (buffer->skb)
1308                                 break;
1309                         else
1310                                 adapter->last_cmd_consumer =
1311                                     get_next_index(adapter->last_cmd_consumer,
1312                                                    adapter->max_tx_desc_count);
1313                 }
1314         }
1315         if (count1 || count2) {
1316                 if (netif_queue_stopped(adapter->netdev)
1317                     && (adapter->flags & NETXEN_NETDEV_STATUS)) {
1318                         netif_wake_queue(adapter->netdev);
1319                         adapter->flags &= ~NETXEN_NETDEV_STATUS;
1320                 }
1321         }
1322         /*
1323          * If everything is freed up to consumer then check if the ring is full
1324          * If the ring is full then check if more needs to be freed and
1325          * schedule the call back again.
1326          *
1327          * This happens when there are 2 CPUs. One could be freeing and the
1328          * other filling it. If the ring is full when we get out of here and
1329          * the card has already interrupted the host then the host can miss the
1330          * interrupt.
1331          *
1332          * There is still a possible race condition and the host could miss an
1333          * interrupt. The card has to take care of this.
1334          */
1335         if (adapter->last_cmd_consumer == consumer &&
1336             (((adapter->cmd_producer + 1) %
1337               adapter->max_tx_desc_count) == adapter->last_cmd_consumer)) {
1338                 consumer = le32_to_cpu(*(adapter->cmd_consumer));
1339         }
1340         done = (adapter->last_cmd_consumer == consumer);
1341
1342         spin_unlock(&adapter->tx_lock);
1343         DPRINTK(INFO, "last consumer is %d in %s\n", last_consumer,
1344                 __FUNCTION__);
1345         return (done);
1346 }
1347
1348 /*
1349  * netxen_post_rx_buffers puts buffer in the Phantom memory
1350  */
1351 void netxen_post_rx_buffers(struct netxen_adapter *adapter, u32 ctx, u32 ringid)
1352 {
1353         struct pci_dev *pdev = adapter->ahw.pdev;
1354         struct sk_buff *skb;
1355         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctx]);
1356         struct netxen_rcv_desc_ctx *rcv_desc = NULL;
1357         uint producer;
1358         struct rcv_desc *pdesc;
1359         struct netxen_rx_buffer *buffer;
1360         int count = 0;
1361         int index = 0;
1362         netxen_ctx_msg msg = 0;
1363         dma_addr_t dma;
1364
1365         rcv_desc = &recv_ctx->rcv_desc[ringid];
1366
1367         producer = rcv_desc->producer;
1368         index = rcv_desc->begin_alloc;
1369         buffer = &rcv_desc->rx_buf_arr[index];
1370         /* We can start writing rx descriptors into the phantom memory. */
1371         while (buffer->state == NETXEN_BUFFER_FREE) {
1372                 skb = dev_alloc_skb(rcv_desc->skb_size);
1373                 if (unlikely(!skb)) {
1374                         /*
1375                          * TODO
1376                          * We need to schedule the posting of buffers to the pegs.
1377                          */
1378                         rcv_desc->begin_alloc = index;
1379                         DPRINTK(ERR, "netxen_post_rx_buffers: "
1380                                 " allocated only %d buffers\n", count);
1381                         break;
1382                 }
1383
1384                 count++;        /* now there should be no failure */
1385                 pdesc = &rcv_desc->desc_head[producer];
1386
1387 #if defined(XGB_DEBUG)
1388                 *(unsigned long *)(skb->head) = 0xc0debabe;
1389                 if (skb_is_nonlinear(skb)) {
1390                         printk("Allocated SKB @%p is nonlinear\n");
1391                 }
1392 #endif
1393                 skb_reserve(skb, 2);
1394                 /* This will be setup when we receive the
1395                  * buffer after it has been filled  FSL  TBD TBD
1396                  * skb->dev = netdev;
1397                  */
1398                 dma = pci_map_single(pdev, skb->data, rcv_desc->dma_size,
1399                                      PCI_DMA_FROMDEVICE);
1400                 pdesc->addr_buffer = cpu_to_le64(dma);
1401                 buffer->skb = skb;
1402                 buffer->state = NETXEN_BUFFER_BUSY;
1403                 buffer->dma = dma;
1404                 /* make a rcv descriptor  */
1405                 pdesc->reference_handle = cpu_to_le16(buffer->ref_handle);
1406                 pdesc->buffer_length = cpu_to_le32(rcv_desc->dma_size);
1407                 DPRINTK(INFO, "done writing descripter\n");
1408                 producer =
1409                     get_next_index(producer, rcv_desc->max_rx_desc_count);
1410                 index = get_next_index(index, rcv_desc->max_rx_desc_count);
1411                 buffer = &rcv_desc->rx_buf_arr[index];
1412         }
1413         /* if we did allocate buffers, then write the count to Phantom */
1414         if (count) {
1415                 rcv_desc->begin_alloc = index;
1416                 rcv_desc->rcv_pending += count;
1417                 rcv_desc->producer = producer;
1418                 if (rcv_desc->rcv_free >= 32) {
1419                         rcv_desc->rcv_free = 0;
1420                         /* Window = 1 */
1421                         writel((producer - 1) &
1422                                (rcv_desc->max_rx_desc_count - 1),
1423                                NETXEN_CRB_NORMALIZE(adapter,
1424                                                     recv_crb_registers[
1425                                                     adapter->portnum].
1426                                                     rcv_desc_crb[ringid].
1427                                                     crb_rcv_producer_offset));
1428                         /*
1429                          * Write a doorbell msg to tell phanmon of change in
1430                          * receive ring producer
1431                          */
1432                         netxen_set_msg_peg_id(msg, NETXEN_RCV_PEG_DB_ID);
1433                         netxen_set_msg_privid(msg);
1434                         netxen_set_msg_count(msg,
1435                                              ((producer -
1436                                                1) & (rcv_desc->
1437                                                      max_rx_desc_count - 1)));
1438                         netxen_set_msg_ctxid(msg, adapter->portnum);
1439                         netxen_set_msg_opcode(msg, NETXEN_RCV_PRODUCER(ringid));
1440                         writel(msg,
1441                                DB_NORMALIZE(adapter,
1442                                             NETXEN_RCV_PRODUCER_OFFSET));
1443                 }
1444         }
1445 }
1446
1447 void netxen_post_rx_buffers_nodb(struct netxen_adapter *adapter, uint32_t ctx,
1448                                  uint32_t ringid)
1449 {
1450         struct pci_dev *pdev = adapter->ahw.pdev;
1451         struct sk_buff *skb;
1452         struct netxen_recv_context *recv_ctx = &(adapter->recv_ctx[ctx]);
1453         struct netxen_rcv_desc_ctx *rcv_desc = NULL;
1454         u32 producer;
1455         struct rcv_desc *pdesc;
1456         struct netxen_rx_buffer *buffer;
1457         int count = 0;
1458         int index = 0;
1459
1460         rcv_desc = &recv_ctx->rcv_desc[ringid];
1461
1462         producer = rcv_desc->producer;
1463         index = rcv_desc->begin_alloc;
1464         buffer = &rcv_desc->rx_buf_arr[index];
1465         /* We can start writing rx descriptors into the phantom memory. */
1466         while (buffer->state == NETXEN_BUFFER_FREE) {
1467                 skb = dev_alloc_skb(rcv_desc->skb_size);
1468                 if (unlikely(!skb)) {
1469                         /*
1470                          * We need to schedule the posting of buffers to the pegs.
1471                          */
1472                         rcv_desc->begin_alloc = index;
1473                         DPRINTK(ERR, "netxen_post_rx_buffers_nodb: "
1474                                 " allocated only %d buffers\n", count);
1475                         break;
1476                 }
1477                 count++;        /* now there should be no failure */
1478                 pdesc = &rcv_desc->desc_head[producer];
1479                 skb_reserve(skb, 2);
1480                 /* 
1481                  * This will be setup when we receive the
1482                  * buffer after it has been filled
1483                  * skb->dev = netdev;
1484                  */
1485                 buffer->skb = skb;
1486                 buffer->state = NETXEN_BUFFER_BUSY;
1487                 buffer->dma = pci_map_single(pdev, skb->data,
1488                                              rcv_desc->dma_size,
1489                                              PCI_DMA_FROMDEVICE);
1490
1491                 /* make a rcv descriptor  */
1492                 pdesc->reference_handle = cpu_to_le16(buffer->ref_handle);
1493                 pdesc->buffer_length = cpu_to_le32(rcv_desc->dma_size);
1494                 pdesc->addr_buffer = cpu_to_le64(buffer->dma);
1495                 DPRINTK(INFO, "done writing descripter\n");
1496                 producer =
1497                     get_next_index(producer, rcv_desc->max_rx_desc_count);
1498                 index = get_next_index(index, rcv_desc->max_rx_desc_count);
1499                 buffer = &rcv_desc->rx_buf_arr[index];
1500         }
1501
1502         /* if we did allocate buffers, then write the count to Phantom */
1503         if (count) {
1504                 rcv_desc->begin_alloc = index;
1505                 rcv_desc->rcv_pending += count;
1506                 rcv_desc->producer = producer;
1507                 if (rcv_desc->rcv_free >= 32) {
1508                         rcv_desc->rcv_free = 0;
1509                         /* Window = 1 */
1510                         writel((producer - 1) &
1511                                (rcv_desc->max_rx_desc_count - 1),
1512                                NETXEN_CRB_NORMALIZE(adapter,
1513                                                     recv_crb_registers[
1514                                                     adapter->portnum].
1515                                                     rcv_desc_crb[ringid].
1516                                                     crb_rcv_producer_offset));
1517                         wmb();
1518                 }
1519         }
1520 }
1521
1522 int netxen_nic_tx_has_work(struct netxen_adapter *adapter)
1523 {
1524         if (find_diff_among(adapter->last_cmd_consumer,
1525                             adapter->cmd_producer,
1526                             adapter->max_tx_desc_count) > 0)
1527                 return 1;
1528
1529         return 0;
1530 }
1531
1532
1533 void netxen_nic_clear_stats(struct netxen_adapter *adapter)
1534 {
1535         memset(&adapter->stats, 0, sizeof(adapter->stats));
1536         return;
1537 }
1538