Merge branch 'linus' into x86/mm
[linux-2.6] / drivers / parisc / lba_pci.c
1 /*
2 **
3 **  PCI Lower Bus Adapter (LBA) manager
4 **
5 **      (c) Copyright 1999,2000 Grant Grundler
6 **      (c) Copyright 1999,2000 Hewlett-Packard Company
7 **
8 **      This program is free software; you can redistribute it and/or modify
9 **      it under the terms of the GNU General Public License as published by
10 **      the Free Software Foundation; either version 2 of the License, or
11 **      (at your option) any later version.
12 **
13 **
14 ** This module primarily provides access to PCI bus (config/IOport
15 ** spaces) on platforms with an SBA/LBA chipset. A/B/C/J/L/N-class
16 ** with 4 digit model numbers - eg C3000 (and A400...sigh).
17 **
18 ** LBA driver isn't as simple as the Dino driver because:
19 **   (a) this chip has substantial bug fixes between revisions
20 **       (Only one Dino bug has a software workaround :^(  )
21 **   (b) has more options which we don't (yet) support (DMA hints, OLARD)
22 **   (c) IRQ support lives in the I/O SAPIC driver (not with PCI driver)
23 **   (d) play nicely with both PAT and "Legacy" PA-RISC firmware (PDC).
24 **       (dino only deals with "Legacy" PDC)
25 **
26 ** LBA driver passes the I/O SAPIC HPA to the I/O SAPIC driver.
27 ** (I/O SAPIC is integratd in the LBA chip).
28 **
29 ** FIXME: Add support to SBA and LBA drivers for DMA hint sets
30 ** FIXME: Add support for PCI card hot-plug (OLARD).
31 */
32
33 #include <linux/delay.h>
34 #include <linux/types.h>
35 #include <linux/kernel.h>
36 #include <linux/spinlock.h>
37 #include <linux/init.h>         /* for __init and __devinit */
38 #include <linux/pci.h>
39 #include <linux/ioport.h>
40 #include <linux/slab.h>
41
42 #include <asm/byteorder.h>
43 #include <asm/pdc.h>
44 #include <asm/pdcpat.h>
45 #include <asm/page.h>
46 #include <asm/system.h>
47
48 #include <asm/ropes.h>
49 #include <asm/hardware.h>       /* for register_parisc_driver() stuff */
50 #include <asm/parisc-device.h>
51 #include <asm/io.h>             /* read/write stuff */
52
53 #undef DEBUG_LBA        /* general stuff */
54 #undef DEBUG_LBA_PORT   /* debug I/O Port access */
55 #undef DEBUG_LBA_CFG    /* debug Config Space Access (ie PCI Bus walk) */
56 #undef DEBUG_LBA_PAT    /* debug PCI Resource Mgt code - PDC PAT only */
57
58 #undef FBB_SUPPORT      /* Fast Back-Back xfers - NOT READY YET */
59
60
61 #ifdef DEBUG_LBA
62 #define DBG(x...)       printk(x)
63 #else
64 #define DBG(x...)
65 #endif
66
67 #ifdef DEBUG_LBA_PORT
68 #define DBG_PORT(x...)  printk(x)
69 #else
70 #define DBG_PORT(x...)
71 #endif
72
73 #ifdef DEBUG_LBA_CFG
74 #define DBG_CFG(x...)   printk(x)
75 #else
76 #define DBG_CFG(x...)
77 #endif
78
79 #ifdef DEBUG_LBA_PAT
80 #define DBG_PAT(x...)   printk(x)
81 #else
82 #define DBG_PAT(x...)
83 #endif
84
85
86 /*
87 ** Config accessor functions only pass in the 8-bit bus number and not
88 ** the 8-bit "PCI Segment" number. Each LBA will be assigned a PCI bus
89 ** number based on what firmware wrote into the scratch register.
90 **
91 ** The "secondary" bus number is set to this before calling
92 ** pci_register_ops(). If any PPB's are present, the scan will
93 ** discover them and update the "secondary" and "subordinate"
94 ** fields in the pci_bus structure.
95 **
96 ** Changes in the configuration *may* result in a different
97 ** bus number for each LBA depending on what firmware does.
98 */
99
100 #define MODULE_NAME "LBA"
101
102 /* non-postable I/O port space, densely packed */
103 #define LBA_PORT_BASE   (PCI_F_EXTEND | 0xfee00000UL)
104 static void __iomem *astro_iop_base __read_mostly;
105
106 static u32 lba_t32;
107
108 /* lba flags */
109 #define LBA_FLAG_SKIP_PROBE     0x10
110
111 #define LBA_SKIP_PROBE(d) ((d)->flags & LBA_FLAG_SKIP_PROBE)
112
113
114 /* Looks nice and keeps the compiler happy */
115 #define LBA_DEV(d) ((struct lba_device *) (d))
116
117
118 /*
119 ** Only allow 8 subsidiary busses per LBA
120 ** Problem is the PCI bus numbering is globally shared.
121 */
122 #define LBA_MAX_NUM_BUSES 8
123
124 /************************************
125  * LBA register read and write support
126  *
127  * BE WARNED: register writes are posted.
128  *  (ie follow writes which must reach HW with a read)
129  */
130 #define READ_U8(addr)  __raw_readb(addr)
131 #define READ_U16(addr) __raw_readw(addr)
132 #define READ_U32(addr) __raw_readl(addr)
133 #define WRITE_U8(value, addr)  __raw_writeb(value, addr)
134 #define WRITE_U16(value, addr) __raw_writew(value, addr)
135 #define WRITE_U32(value, addr) __raw_writel(value, addr)
136
137 #define READ_REG8(addr)  readb(addr)
138 #define READ_REG16(addr) readw(addr)
139 #define READ_REG32(addr) readl(addr)
140 #define READ_REG64(addr) readq(addr)
141 #define WRITE_REG8(value, addr)  writeb(value, addr)
142 #define WRITE_REG16(value, addr) writew(value, addr)
143 #define WRITE_REG32(value, addr) writel(value, addr)
144
145
146 #define LBA_CFG_TOK(bus,dfn) ((u32) ((bus)<<16 | (dfn)<<8))
147 #define LBA_CFG_BUS(tok)  ((u8) ((tok)>>16))
148 #define LBA_CFG_DEV(tok)  ((u8) ((tok)>>11) & 0x1f)
149 #define LBA_CFG_FUNC(tok) ((u8) ((tok)>>8 ) & 0x7)
150
151
152 /*
153 ** Extract LBA (Rope) number from HPA
154 ** REVISIT: 16 ropes for Stretch/Ike?
155 */
156 #define ROPES_PER_IOC   8
157 #define LBA_NUM(x)    ((((unsigned long) x) >> 13) & (ROPES_PER_IOC-1))
158
159
160 static void
161 lba_dump_res(struct resource *r, int d)
162 {
163         int i;
164
165         if (NULL == r)
166                 return;
167
168         printk(KERN_DEBUG "(%p)", r->parent);
169         for (i = d; i ; --i) printk(" ");
170         printk(KERN_DEBUG "%p [%lx,%lx]/%lx\n", r,
171                 (long)r->start, (long)r->end, r->flags);
172         lba_dump_res(r->child, d+2);
173         lba_dump_res(r->sibling, d);
174 }
175
176
177 /*
178 ** LBA rev 2.0, 2.1, 2.2, and 3.0 bus walks require a complex
179 ** workaround for cfg cycles:
180 **      -- preserve  LBA state
181 **      -- prevent any DMA from occurring
182 **      -- turn on smart mode
183 **      -- probe with config writes before doing config reads
184 **      -- check ERROR_STATUS
185 **      -- clear ERROR_STATUS
186 **      -- restore LBA state
187 **
188 ** The workaround is only used for device discovery.
189 */
190
191 static int lba_device_present(u8 bus, u8 dfn, struct lba_device *d)
192 {
193         u8 first_bus = d->hba.hba_bus->secondary;
194         u8 last_sub_bus = d->hba.hba_bus->subordinate;
195
196         if ((bus < first_bus) ||
197             (bus > last_sub_bus) ||
198             ((bus - first_bus) >= LBA_MAX_NUM_BUSES)) {
199                 return 0;
200         }
201
202         return 1;
203 }
204
205
206
207 #define LBA_CFG_SETUP(d, tok) {                         \
208     /* Save contents of error config register.  */                      \
209     error_config = READ_REG32(d->hba.base_addr + LBA_ERROR_CONFIG);             \
210 \
211     /* Save contents of status control register.  */                    \
212     status_control = READ_REG32(d->hba.base_addr + LBA_STAT_CTL);               \
213 \
214     /* For LBA rev 2.0, 2.1, 2.2, and 3.0, we must disable DMA          \
215     ** arbitration for full bus walks.                                  \
216     */                                                                  \
217         /* Save contents of arb mask register. */                       \
218         arb_mask = READ_REG32(d->hba.base_addr + LBA_ARB_MASK);         \
219 \
220         /*                                                              \
221          * Turn off all device arbitration bits (i.e. everything        \
222          * except arbitration enable bit).                              \
223          */                                                             \
224         WRITE_REG32(0x1, d->hba.base_addr + LBA_ARB_MASK);              \
225 \
226     /*                                                                  \
227      * Set the smart mode bit so that master aborts don't cause         \
228      * LBA to go into PCI fatal mode (required).                        \
229      */                                                                 \
230     WRITE_REG32(error_config | LBA_SMART_MODE, d->hba.base_addr + LBA_ERROR_CONFIG);    \
231 }
232
233
234 #define LBA_CFG_PROBE(d, tok) {                         \
235     /*                                                                  \
236      * Setup Vendor ID write and read back the address register         \
237      * to make sure that LBA is the bus master.                         \
238      */                                                                 \
239     WRITE_REG32(tok | PCI_VENDOR_ID, (d)->hba.base_addr + LBA_PCI_CFG_ADDR);\
240     /*                                                                  \
241      * Read address register to ensure that LBA is the bus master,      \
242      * which implies that DMA traffic has stopped when DMA arb is off.  \
243      */                                                                 \
244     lba_t32 = READ_REG32((d)->hba.base_addr + LBA_PCI_CFG_ADDR);        \
245     /*                                                                  \
246      * Generate a cfg write cycle (will have no affect on               \
247      * Vendor ID register since read-only).                             \
248      */                                                                 \
249     WRITE_REG32(~0, (d)->hba.base_addr + LBA_PCI_CFG_DATA);             \
250     /*                                                                  \
251      * Make sure write has completed before proceeding further,         \
252      * i.e. before setting clear enable.                                \
253      */                                                                 \
254     lba_t32 = READ_REG32((d)->hba.base_addr + LBA_PCI_CFG_ADDR);        \
255 }
256
257
258 /*
259  * HPREVISIT:
260  *   -- Can't tell if config cycle got the error.
261  *
262  *              OV bit is broken until rev 4.0, so can't use OV bit and
263  *              LBA_ERROR_LOG_ADDR to tell if error belongs to config cycle.
264  *
265  *              As of rev 4.0, no longer need the error check.
266  *
267  *   -- Even if we could tell, we still want to return -1
268  *      for **ANY** error (not just master abort).
269  *
270  *   -- Only clear non-fatal errors (we don't want to bring
271  *      LBA out of pci-fatal mode).
272  *
273  *              Actually, there is still a race in which
274  *              we could be clearing a fatal error.  We will
275  *              live with this during our initial bus walk
276  *              until rev 4.0 (no driver activity during
277  *              initial bus walk).  The initial bus walk
278  *              has race conditions concerning the use of
279  *              smart mode as well.
280  */
281
282 #define LBA_MASTER_ABORT_ERROR 0xc
283 #define LBA_FATAL_ERROR 0x10
284
285 #define LBA_CFG_MASTER_ABORT_CHECK(d, base, tok, error) {               \
286     u32 error_status = 0;                                               \
287     /*                                                                  \
288      * Set clear enable (CE) bit. Unset by HW when new                  \
289      * errors are logged -- LBA HW ERS section 14.3.3).         \
290      */                                                                 \
291     WRITE_REG32(status_control | CLEAR_ERRLOG_ENABLE, base + LBA_STAT_CTL); \
292     error_status = READ_REG32(base + LBA_ERROR_STATUS);         \
293     if ((error_status & 0x1f) != 0) {                                   \
294         /*                                                              \
295          * Fail the config read request.                                \
296          */                                                             \
297         error = 1;                                                      \
298         if ((error_status & LBA_FATAL_ERROR) == 0) {                    \
299             /*                                                          \
300              * Clear error status (if fatal bit not set) by setting     \
301              * clear error log bit (CL).                                \
302              */                                                         \
303             WRITE_REG32(status_control | CLEAR_ERRLOG, base + LBA_STAT_CTL); \
304         }                                                               \
305     }                                                                   \
306 }
307
308 #define LBA_CFG_TR4_ADDR_SETUP(d, addr)                                 \
309         WRITE_REG32(((addr) & ~3), (d)->hba.base_addr + LBA_PCI_CFG_ADDR);
310
311 #define LBA_CFG_ADDR_SETUP(d, addr) {                                   \
312     WRITE_REG32(((addr) & ~3), (d)->hba.base_addr + LBA_PCI_CFG_ADDR);  \
313     /*                                                                  \
314      * Read address register to ensure that LBA is the bus master,      \
315      * which implies that DMA traffic has stopped when DMA arb is off.  \
316      */                                                                 \
317     lba_t32 = READ_REG32((d)->hba.base_addr + LBA_PCI_CFG_ADDR);        \
318 }
319
320
321 #define LBA_CFG_RESTORE(d, base) {                                      \
322     /*                                                                  \
323      * Restore status control register (turn off clear enable).         \
324      */                                                                 \
325     WRITE_REG32(status_control, base + LBA_STAT_CTL);                   \
326     /*                                                                  \
327      * Restore error config register (turn off smart mode).             \
328      */                                                                 \
329     WRITE_REG32(error_config, base + LBA_ERROR_CONFIG);                 \
330         /*                                                              \
331          * Restore arb mask register (reenables DMA arbitration).       \
332          */                                                             \
333         WRITE_REG32(arb_mask, base + LBA_ARB_MASK);                     \
334 }
335
336
337
338 static unsigned int
339 lba_rd_cfg(struct lba_device *d, u32 tok, u8 reg, u32 size)
340 {
341         u32 data = ~0U;
342         int error = 0;
343         u32 arb_mask = 0;       /* used by LBA_CFG_SETUP/RESTORE */
344         u32 error_config = 0;   /* used by LBA_CFG_SETUP/RESTORE */
345         u32 status_control = 0; /* used by LBA_CFG_SETUP/RESTORE */
346
347         LBA_CFG_SETUP(d, tok);
348         LBA_CFG_PROBE(d, tok);
349         LBA_CFG_MASTER_ABORT_CHECK(d, d->hba.base_addr, tok, error);
350         if (!error) {
351                 void __iomem *data_reg = d->hba.base_addr + LBA_PCI_CFG_DATA;
352
353                 LBA_CFG_ADDR_SETUP(d, tok | reg);
354                 switch (size) {
355                 case 1: data = (u32) READ_REG8(data_reg + (reg & 3)); break;
356                 case 2: data = (u32) READ_REG16(data_reg+ (reg & 2)); break;
357                 case 4: data = READ_REG32(data_reg); break;
358                 }
359         }
360         LBA_CFG_RESTORE(d, d->hba.base_addr);
361         return(data);
362 }
363
364
365 static int elroy_cfg_read(struct pci_bus *bus, unsigned int devfn, int pos, int size, u32 *data)
366 {
367         struct lba_device *d = LBA_DEV(parisc_walk_tree(bus->bridge));
368         u32 local_bus = (bus->parent == NULL) ? 0 : bus->secondary;
369         u32 tok = LBA_CFG_TOK(local_bus, devfn);
370         void __iomem *data_reg = d->hba.base_addr + LBA_PCI_CFG_DATA;
371
372         if ((pos > 255) || (devfn > 255))
373                 return -EINVAL;
374
375 /* FIXME: B2K/C3600 workaround is always use old method... */
376         /* if (!LBA_SKIP_PROBE(d)) */ {
377                 /* original - Generate config cycle on broken elroy
378                   with risk we will miss PCI bus errors. */
379                 *data = lba_rd_cfg(d, tok, pos, size);
380                 DBG_CFG("%s(%x+%2x) -> 0x%x (a)\n", __func__, tok, pos, *data);
381                 return 0;
382         }
383
384         if (LBA_SKIP_PROBE(d) && !lba_device_present(bus->secondary, devfn, d)) {
385                 DBG_CFG("%s(%x+%2x) -> -1 (b)\n", __func__, tok, pos);
386                 /* either don't want to look or know device isn't present. */
387                 *data = ~0U;
388                 return(0);
389         }
390
391         /* Basic Algorithm
392         ** Should only get here on fully working LBA rev.
393         ** This is how simple the code should have been.
394         */
395         LBA_CFG_ADDR_SETUP(d, tok | pos);
396         switch(size) {
397         case 1: *data = READ_REG8 (data_reg + (pos & 3)); break;
398         case 2: *data = READ_REG16(data_reg + (pos & 2)); break;
399         case 4: *data = READ_REG32(data_reg); break;
400         }
401         DBG_CFG("%s(%x+%2x) -> 0x%x (c)\n", __func__, tok, pos, *data);
402         return 0;
403 }
404
405
406 static void
407 lba_wr_cfg(struct lba_device *d, u32 tok, u8 reg, u32 data, u32 size)
408 {
409         int error = 0;
410         u32 arb_mask = 0;
411         u32 error_config = 0;
412         u32 status_control = 0;
413         void __iomem *data_reg = d->hba.base_addr + LBA_PCI_CFG_DATA;
414
415         LBA_CFG_SETUP(d, tok);
416         LBA_CFG_ADDR_SETUP(d, tok | reg);
417         switch (size) {
418         case 1: WRITE_REG8 (data, data_reg + (reg & 3)); break;
419         case 2: WRITE_REG16(data, data_reg + (reg & 2)); break;
420         case 4: WRITE_REG32(data, data_reg);             break;
421         }
422         LBA_CFG_MASTER_ABORT_CHECK(d, d->hba.base_addr, tok, error);
423         LBA_CFG_RESTORE(d, d->hba.base_addr);
424 }
425
426
427 /*
428  * LBA 4.0 config write code implements non-postable semantics
429  * by doing a read of CONFIG ADDR after the write.
430  */
431
432 static int elroy_cfg_write(struct pci_bus *bus, unsigned int devfn, int pos, int size, u32 data)
433 {
434         struct lba_device *d = LBA_DEV(parisc_walk_tree(bus->bridge));
435         u32 local_bus = (bus->parent == NULL) ? 0 : bus->secondary;
436         u32 tok = LBA_CFG_TOK(local_bus,devfn);
437
438         if ((pos > 255) || (devfn > 255))
439                 return -EINVAL;
440
441         if (!LBA_SKIP_PROBE(d)) {
442                 /* Original Workaround */
443                 lba_wr_cfg(d, tok, pos, (u32) data, size);
444                 DBG_CFG("%s(%x+%2x) = 0x%x (a)\n", __func__, tok, pos,data);
445                 return 0;
446         }
447
448         if (LBA_SKIP_PROBE(d) && (!lba_device_present(bus->secondary, devfn, d))) {
449                 DBG_CFG("%s(%x+%2x) = 0x%x (b)\n", __func__, tok, pos,data);
450                 return 1; /* New Workaround */
451         }
452
453         DBG_CFG("%s(%x+%2x) = 0x%x (c)\n", __func__, tok, pos, data);
454
455         /* Basic Algorithm */
456         LBA_CFG_ADDR_SETUP(d, tok | pos);
457         switch(size) {
458         case 1: WRITE_REG8 (data, d->hba.base_addr + LBA_PCI_CFG_DATA + (pos & 3));
459                    break;
460         case 2: WRITE_REG16(data, d->hba.base_addr + LBA_PCI_CFG_DATA + (pos & 2));
461                    break;
462         case 4: WRITE_REG32(data, d->hba.base_addr + LBA_PCI_CFG_DATA);
463                    break;
464         }
465         /* flush posted write */
466         lba_t32 = READ_REG32(d->hba.base_addr + LBA_PCI_CFG_ADDR);
467         return 0;
468 }
469
470
471 static struct pci_ops elroy_cfg_ops = {
472         .read =         elroy_cfg_read,
473         .write =        elroy_cfg_write,
474 };
475
476 /*
477  * The mercury_cfg_ops are slightly misnamed; they're also used for Elroy
478  * TR4.0 as no additional bugs were found in this areea between Elroy and
479  * Mercury
480  */
481
482 static int mercury_cfg_read(struct pci_bus *bus, unsigned int devfn, int pos, int size, u32 *data)
483 {
484         struct lba_device *d = LBA_DEV(parisc_walk_tree(bus->bridge));
485         u32 local_bus = (bus->parent == NULL) ? 0 : bus->secondary;
486         u32 tok = LBA_CFG_TOK(local_bus, devfn);
487         void __iomem *data_reg = d->hba.base_addr + LBA_PCI_CFG_DATA;
488
489         if ((pos > 255) || (devfn > 255))
490                 return -EINVAL;
491
492         LBA_CFG_TR4_ADDR_SETUP(d, tok | pos);
493         switch(size) {
494         case 1:
495                 *data = READ_REG8(data_reg + (pos & 3));
496                 break;
497         case 2:
498                 *data = READ_REG16(data_reg + (pos & 2));
499                 break;
500         case 4:
501                 *data = READ_REG32(data_reg);             break;
502                 break;
503         }
504
505         DBG_CFG("mercury_cfg_read(%x+%2x) -> 0x%x\n", tok, pos, *data);
506         return 0;
507 }
508
509 /*
510  * LBA 4.0 config write code implements non-postable semantics
511  * by doing a read of CONFIG ADDR after the write.
512  */
513
514 static int mercury_cfg_write(struct pci_bus *bus, unsigned int devfn, int pos, int size, u32 data)
515 {
516         struct lba_device *d = LBA_DEV(parisc_walk_tree(bus->bridge));
517         void __iomem *data_reg = d->hba.base_addr + LBA_PCI_CFG_DATA;
518         u32 local_bus = (bus->parent == NULL) ? 0 : bus->secondary;
519         u32 tok = LBA_CFG_TOK(local_bus,devfn);
520
521         if ((pos > 255) || (devfn > 255))
522                 return -EINVAL;
523
524         DBG_CFG("%s(%x+%2x) <- 0x%x (c)\n", __func__, tok, pos, data);
525
526         LBA_CFG_TR4_ADDR_SETUP(d, tok | pos);
527         switch(size) {
528         case 1:
529                 WRITE_REG8 (data, data_reg + (pos & 3));
530                 break;
531         case 2:
532                 WRITE_REG16(data, data_reg + (pos & 2));
533                 break;
534         case 4:
535                 WRITE_REG32(data, data_reg);
536                 break;
537         }
538
539         /* flush posted write */
540         lba_t32 = READ_U32(d->hba.base_addr + LBA_PCI_CFG_ADDR);
541         return 0;
542 }
543
544 static struct pci_ops mercury_cfg_ops = {
545         .read =         mercury_cfg_read,
546         .write =        mercury_cfg_write,
547 };
548
549
550 static void
551 lba_bios_init(void)
552 {
553         DBG(MODULE_NAME ": lba_bios_init\n");
554 }
555
556
557 #ifdef CONFIG_64BIT
558
559 /*
560  * truncate_pat_collision:  Deal with overlaps or outright collisions
561  *                      between PAT PDC reported ranges.
562  *
563  *   Broken PA8800 firmware will report lmmio range that
564  *   overlaps with CPU HPA. Just truncate the lmmio range.
565  *
566  *   BEWARE: conflicts with this lmmio range may be an
567  *   elmmio range which is pointing down another rope.
568  *
569  *  FIXME: only deals with one collision per range...theoretically we
570  *  could have several. Supporting more than one collision will get messy.
571  */
572 static unsigned long
573 truncate_pat_collision(struct resource *root, struct resource *new)
574 {
575         unsigned long start = new->start;
576         unsigned long end = new->end;
577         struct resource *tmp = root->child;
578
579         if (end <= start || start < root->start || !tmp)
580                 return 0;
581
582         /* find first overlap */
583         while (tmp && tmp->end < start)
584                 tmp = tmp->sibling;
585
586         /* no entries overlap */
587         if (!tmp)  return 0;
588
589         /* found one that starts behind the new one
590         ** Don't need to do anything.
591         */
592         if (tmp->start >= end) return 0;
593
594         if (tmp->start <= start) {
595                 /* "front" of new one overlaps */
596                 new->start = tmp->end + 1;
597
598                 if (tmp->end >= end) {
599                         /* AACCKK! totally overlaps! drop this range. */
600                         return 1;
601                 }
602         } 
603
604         if (tmp->end < end ) {
605                 /* "end" of new one overlaps */
606                 new->end = tmp->start - 1;
607         }
608
609         printk(KERN_WARNING "LBA: Truncating lmmio_space [%lx/%lx] "
610                                         "to [%lx,%lx]\n",
611                         start, end,
612                         (long)new->start, (long)new->end );
613
614         return 0;       /* truncation successful */
615 }
616
617 #else
618 #define truncate_pat_collision(r,n)  (0)
619 #endif
620
621 /*
622 ** The algorithm is generic code.
623 ** But it needs to access local data structures to get the IRQ base.
624 ** Could make this a "pci_fixup_irq(bus, region)" but not sure
625 ** it's worth it.
626 **
627 ** Called by do_pci_scan_bus() immediately after each PCI bus is walked.
628 ** Resources aren't allocated until recursive buswalk below HBA is completed.
629 */
630 static void
631 lba_fixup_bus(struct pci_bus *bus)
632 {
633         struct list_head *ln;
634 #ifdef FBB_SUPPORT
635         u16 status;
636 #endif
637         struct lba_device *ldev = LBA_DEV(parisc_walk_tree(bus->bridge));
638         int lba_portbase = HBA_PORT_BASE(ldev->hba.hba_num);
639
640         DBG("lba_fixup_bus(0x%p) bus %d platform_data 0x%p\n",
641                 bus, bus->secondary, bus->bridge->platform_data);
642
643         /*
644         ** Properly Setup MMIO resources for this bus.
645         ** pci_alloc_primary_bus() mangles this.
646         */
647         if (bus->self) {
648                 int i;
649                 /* PCI-PCI Bridge */
650                 pci_read_bridge_bases(bus);
651                 for (i = PCI_BRIDGE_RESOURCES; i < PCI_NUM_RESOURCES; i++) {
652                         pci_claim_resource(bus->self, i);
653                 }
654         } else {
655                 /* Host-PCI Bridge */
656                 int err, i;
657
658                 DBG("lba_fixup_bus() %s [%lx/%lx]/%lx\n",
659                         ldev->hba.io_space.name,
660                         ldev->hba.io_space.start, ldev->hba.io_space.end,
661                         ldev->hba.io_space.flags);
662                 DBG("lba_fixup_bus() %s [%lx/%lx]/%lx\n",
663                         ldev->hba.lmmio_space.name,
664                         ldev->hba.lmmio_space.start, ldev->hba.lmmio_space.end,
665                         ldev->hba.lmmio_space.flags);
666
667                 err = request_resource(&ioport_resource, &(ldev->hba.io_space));
668                 if (err < 0) {
669                         lba_dump_res(&ioport_resource, 2);
670                         BUG();
671                 }
672                 /* advertize Host bridge resources to PCI bus */
673                 bus->resource[0] = &(ldev->hba.io_space);
674                 i = 1;
675
676                 if (ldev->hba.elmmio_space.start) {
677                         err = request_resource(&iomem_resource,
678                                         &(ldev->hba.elmmio_space));
679                         if (err < 0) {
680
681                                 printk("FAILED: lba_fixup_bus() request for "
682                                                 "elmmio_space [%lx/%lx]\n",
683                                                 (long)ldev->hba.elmmio_space.start,
684                                                 (long)ldev->hba.elmmio_space.end);
685
686                                 /* lba_dump_res(&iomem_resource, 2); */
687                                 /* BUG(); */
688                         } else
689                                 bus->resource[i++] = &(ldev->hba.elmmio_space);
690                 }
691
692
693                 /*   Overlaps with elmmio can (and should) fail here.
694                  *   We will prune (or ignore) the distributed range.
695                  *
696                  *   FIXME: SBA code should register all elmmio ranges first.
697                  *      that would take care of elmmio ranges routed
698                  *      to a different rope (already discovered) from
699                  *      getting registered *after* LBA code has already
700                  *      registered it's distributed lmmio range.
701                  */
702                 if (truncate_pat_collision(&iomem_resource,
703                                         &(ldev->hba.lmmio_space))) {
704
705                         printk(KERN_WARNING "LBA: lmmio_space [%lx/%lx] duplicate!\n",
706                                         (long)ldev->hba.lmmio_space.start,
707                                         (long)ldev->hba.lmmio_space.end);
708                 } else {
709                         err = request_resource(&iomem_resource, &(ldev->hba.lmmio_space));
710                         if (err < 0) {
711                                 printk(KERN_ERR "FAILED: lba_fixup_bus() request for "
712                                         "lmmio_space [%lx/%lx]\n",
713                                         (long)ldev->hba.lmmio_space.start,
714                                         (long)ldev->hba.lmmio_space.end);
715                         } else
716                                 bus->resource[i++] = &(ldev->hba.lmmio_space);
717                 }
718
719 #ifdef CONFIG_64BIT
720                 /* GMMIO is  distributed range. Every LBA/Rope gets part it. */
721                 if (ldev->hba.gmmio_space.flags) {
722                         err = request_resource(&iomem_resource, &(ldev->hba.gmmio_space));
723                         if (err < 0) {
724                                 printk("FAILED: lba_fixup_bus() request for "
725                                         "gmmio_space [%lx/%lx]\n",
726                                         (long)ldev->hba.gmmio_space.start,
727                                         (long)ldev->hba.gmmio_space.end);
728                                 lba_dump_res(&iomem_resource, 2);
729                                 BUG();
730                         }
731                         bus->resource[i++] = &(ldev->hba.gmmio_space);
732                 }
733 #endif
734
735         }
736
737         list_for_each(ln, &bus->devices) {
738                 int i;
739                 struct pci_dev *dev = pci_dev_b(ln);
740
741                 DBG("lba_fixup_bus() %s\n", pci_name(dev));
742
743                 /* Virtualize Device/Bridge Resources. */
744                 for (i = 0; i < PCI_BRIDGE_RESOURCES; i++) {
745                         struct resource *res = &dev->resource[i];
746
747                         /* If resource not allocated - skip it */
748                         if (!res->start)
749                                 continue;
750
751                         if (res->flags & IORESOURCE_IO) {
752                                 DBG("lba_fixup_bus() I/O Ports [%lx/%lx] -> ",
753                                         res->start, res->end);
754                                 res->start |= lba_portbase;
755                                 res->end   |= lba_portbase;
756                                 DBG("[%lx/%lx]\n", res->start, res->end);
757                         } else if (res->flags & IORESOURCE_MEM) {
758                                 /*
759                                 ** Convert PCI (IO_VIEW) addresses to
760                                 ** processor (PA_VIEW) addresses
761                                  */
762                                 DBG("lba_fixup_bus() MMIO [%lx/%lx] -> ",
763                                         res->start, res->end);
764                                 res->start = PCI_HOST_ADDR(HBA_DATA(ldev), res->start);
765                                 res->end   = PCI_HOST_ADDR(HBA_DATA(ldev), res->end);
766                                 DBG("[%lx/%lx]\n", res->start, res->end);
767                         } else {
768                                 DBG("lba_fixup_bus() WTF? 0x%lx [%lx/%lx] XXX",
769                                         res->flags, res->start, res->end);
770                         }
771
772                         /*
773                         ** FIXME: this will result in whinging for devices
774                         ** that share expansion ROMs (think quad tulip), but
775                         ** isn't harmful.
776                         */
777                         pci_claim_resource(dev, i);
778                 }
779
780 #ifdef FBB_SUPPORT
781                 /*
782                 ** If one device does not support FBB transfers,
783                 ** No one on the bus can be allowed to use them.
784                 */
785                 (void) pci_read_config_word(dev, PCI_STATUS, &status);
786                 bus->bridge_ctl &= ~(status & PCI_STATUS_FAST_BACK);
787 #endif
788
789                 /*
790                 ** P2PB's have no IRQs. ignore them.
791                 */
792                 if ((dev->class >> 8) == PCI_CLASS_BRIDGE_PCI)
793                         continue;
794
795                 /* Adjust INTERRUPT_LINE for this dev */
796                 iosapic_fixup_irq(ldev->iosapic_obj, dev);
797         }
798
799 #ifdef FBB_SUPPORT
800 /* FIXME/REVISIT - finish figuring out to set FBB on both
801 ** pci_setup_bridge() clobbers PCI_BRIDGE_CONTROL.
802 ** Can't fixup here anyway....garr...
803 */
804         if (fbb_enable) {
805                 if (bus->self) {
806                         u8 control;
807                         /* enable on PPB */
808                         (void) pci_read_config_byte(bus->self, PCI_BRIDGE_CONTROL, &control);
809                         (void) pci_write_config_byte(bus->self, PCI_BRIDGE_CONTROL, control | PCI_STATUS_FAST_BACK);
810
811                 } else {
812                         /* enable on LBA */
813                 }
814                 fbb_enable = PCI_COMMAND_FAST_BACK;
815         }
816
817         /* Lastly enable FBB/PERR/SERR on all devices too */
818         list_for_each(ln, &bus->devices) {
819                 (void) pci_read_config_word(dev, PCI_COMMAND, &status);
820                 status |= PCI_COMMAND_PARITY | PCI_COMMAND_SERR | fbb_enable;
821                 (void) pci_write_config_word(dev, PCI_COMMAND, status);
822         }
823 #endif
824 }
825
826
827 static struct pci_bios_ops lba_bios_ops = {
828         .init =         lba_bios_init,
829         .fixup_bus =    lba_fixup_bus,
830 };
831
832
833
834
835 /*******************************************************
836 **
837 ** LBA Sprockets "I/O Port" Space Accessor Functions
838 **
839 ** This set of accessor functions is intended for use with
840 ** "legacy firmware" (ie Sprockets on Allegro/Forte boxes).
841 **
842 ** Many PCI devices don't require use of I/O port space (eg Tulip,
843 ** NCR720) since they export the same registers to both MMIO and
844 ** I/O port space. In general I/O port space is slower than
845 ** MMIO since drivers are designed so PIO writes can be posted.
846 **
847 ********************************************************/
848
849 #define LBA_PORT_IN(size, mask) \
850 static u##size lba_astro_in##size (struct pci_hba_data *d, u16 addr) \
851 { \
852         u##size t; \
853         t = READ_REG##size(astro_iop_base + addr); \
854         DBG_PORT(" 0x%x\n", t); \
855         return (t); \
856 }
857
858 LBA_PORT_IN( 8, 3)
859 LBA_PORT_IN(16, 2)
860 LBA_PORT_IN(32, 0)
861
862
863
864 /*
865 ** BUG X4107:  Ordering broken - DMA RD return can bypass PIO WR
866 **
867 ** Fixed in Elroy 2.2. The READ_U32(..., LBA_FUNC_ID) below is
868 ** guarantee non-postable completion semantics - not avoid X4107.
869 ** The READ_U32 only guarantees the write data gets to elroy but
870 ** out to the PCI bus. We can't read stuff from I/O port space
871 ** since we don't know what has side-effects. Attempting to read
872 ** from configuration space would be suicidal given the number of
873 ** bugs in that elroy functionality.
874 **
875 **      Description:
876 **          DMA read results can improperly pass PIO writes (X4107).  The
877 **          result of this bug is that if a processor modifies a location in
878 **          memory after having issued PIO writes, the PIO writes are not
879 **          guaranteed to be completed before a PCI device is allowed to see
880 **          the modified data in a DMA read.
881 **
882 **          Note that IKE bug X3719 in TR1 IKEs will result in the same
883 **          symptom.
884 **
885 **      Workaround:
886 **          The workaround for this bug is to always follow a PIO write with
887 **          a PIO read to the same bus before starting DMA on that PCI bus.
888 **
889 */
890 #define LBA_PORT_OUT(size, mask) \
891 static void lba_astro_out##size (struct pci_hba_data *d, u16 addr, u##size val) \
892 { \
893         DBG_PORT("%s(0x%p, 0x%x, 0x%x)\n", __func__, d, addr, val); \
894         WRITE_REG##size(val, astro_iop_base + addr); \
895         if (LBA_DEV(d)->hw_rev < 3) \
896                 lba_t32 = READ_U32(d->base_addr + LBA_FUNC_ID); \
897 }
898
899 LBA_PORT_OUT( 8, 3)
900 LBA_PORT_OUT(16, 2)
901 LBA_PORT_OUT(32, 0)
902
903
904 static struct pci_port_ops lba_astro_port_ops = {
905         .inb =  lba_astro_in8,
906         .inw =  lba_astro_in16,
907         .inl =  lba_astro_in32,
908         .outb = lba_astro_out8,
909         .outw = lba_astro_out16,
910         .outl = lba_astro_out32
911 };
912
913
914 #ifdef CONFIG_64BIT
915 #define PIOP_TO_GMMIO(lba, addr) \
916         ((lba)->iop_base + (((addr)&0xFFFC)<<10) + ((addr)&3))
917
918 /*******************************************************
919 **
920 ** LBA PAT "I/O Port" Space Accessor Functions
921 **
922 ** This set of accessor functions is intended for use with
923 ** "PAT PDC" firmware (ie Prelude/Rhapsody/Piranha boxes).
924 **
925 ** This uses the PIOP space located in the first 64MB of GMMIO.
926 ** Each rope gets a full 64*KB* (ie 4 bytes per page) this way.
927 ** bits 1:0 stay the same.  bits 15:2 become 25:12.
928 ** Then add the base and we can generate an I/O Port cycle.
929 ********************************************************/
930 #undef LBA_PORT_IN
931 #define LBA_PORT_IN(size, mask) \
932 static u##size lba_pat_in##size (struct pci_hba_data *l, u16 addr) \
933 { \
934         u##size t; \
935         DBG_PORT("%s(0x%p, 0x%x) ->", __func__, l, addr); \
936         t = READ_REG##size(PIOP_TO_GMMIO(LBA_DEV(l), addr)); \
937         DBG_PORT(" 0x%x\n", t); \
938         return (t); \
939 }
940
941 LBA_PORT_IN( 8, 3)
942 LBA_PORT_IN(16, 2)
943 LBA_PORT_IN(32, 0)
944
945
946 #undef LBA_PORT_OUT
947 #define LBA_PORT_OUT(size, mask) \
948 static void lba_pat_out##size (struct pci_hba_data *l, u16 addr, u##size val) \
949 { \
950         void __iomem *where = PIOP_TO_GMMIO(LBA_DEV(l), addr); \
951         DBG_PORT("%s(0x%p, 0x%x, 0x%x)\n", __func__, l, addr, val); \
952         WRITE_REG##size(val, where); \
953         /* flush the I/O down to the elroy at least */ \
954         lba_t32 = READ_U32(l->base_addr + LBA_FUNC_ID); \
955 }
956
957 LBA_PORT_OUT( 8, 3)
958 LBA_PORT_OUT(16, 2)
959 LBA_PORT_OUT(32, 0)
960
961
962 static struct pci_port_ops lba_pat_port_ops = {
963         .inb =  lba_pat_in8,
964         .inw =  lba_pat_in16,
965         .inl =  lba_pat_in32,
966         .outb = lba_pat_out8,
967         .outw = lba_pat_out16,
968         .outl = lba_pat_out32
969 };
970
971
972
973 /*
974 ** make range information from PDC available to PCI subsystem.
975 ** We make the PDC call here in order to get the PCI bus range
976 ** numbers. The rest will get forwarded in pcibios_fixup_bus().
977 ** We don't have a struct pci_bus assigned to us yet.
978 */
979 static void
980 lba_pat_resources(struct parisc_device *pa_dev, struct lba_device *lba_dev)
981 {
982         unsigned long bytecnt;
983         pdc_pat_cell_mod_maddr_block_t pa_pdc_cell;     /* PA_VIEW */
984         pdc_pat_cell_mod_maddr_block_t io_pdc_cell;     /* IO_VIEW */
985         long io_count;
986         long status;    /* PDC return status */
987         long pa_count;
988         int i;
989
990         /* return cell module (IO view) */
991         status = pdc_pat_cell_module(&bytecnt, pa_dev->pcell_loc, pa_dev->mod_index,
992                                 PA_VIEW, & pa_pdc_cell);
993         pa_count = pa_pdc_cell.mod[1];
994
995         status |= pdc_pat_cell_module(&bytecnt, pa_dev->pcell_loc, pa_dev->mod_index,
996                                 IO_VIEW, &io_pdc_cell);
997         io_count = io_pdc_cell.mod[1];
998
999         /* We've already done this once for device discovery...*/
1000         if (status != PDC_OK) {
1001                 panic("pdc_pat_cell_module() call failed for LBA!\n");
1002         }
1003
1004         if (PAT_GET_ENTITY(pa_pdc_cell.mod_info) != PAT_ENTITY_LBA) {
1005                 panic("pdc_pat_cell_module() entity returned != PAT_ENTITY_LBA!\n");
1006         }
1007
1008         /*
1009         ** Inspect the resources PAT tells us about
1010         */
1011         for (i = 0; i < pa_count; i++) {
1012                 struct {
1013                         unsigned long type;
1014                         unsigned long start;
1015                         unsigned long end;      /* aka finish */
1016                 } *p, *io;
1017                 struct resource *r;
1018
1019                 p = (void *) &(pa_pdc_cell.mod[2+i*3]);
1020                 io = (void *) &(io_pdc_cell.mod[2+i*3]);
1021
1022                 /* Convert the PAT range data to PCI "struct resource" */
1023                 switch(p->type & 0xff) {
1024                 case PAT_PBNUM:
1025                         lba_dev->hba.bus_num.start = p->start;
1026                         lba_dev->hba.bus_num.end   = p->end;
1027                         break;
1028
1029                 case PAT_LMMIO:
1030                         /* used to fix up pre-initialized MEM BARs */
1031                         if (!lba_dev->hba.lmmio_space.start) {
1032                                 sprintf(lba_dev->hba.lmmio_name,
1033                                                 "PCI%02x LMMIO",
1034                                                 (int)lba_dev->hba.bus_num.start);
1035                                 lba_dev->hba.lmmio_space_offset = p->start -
1036                                         io->start;
1037                                 r = &lba_dev->hba.lmmio_space;
1038                                 r->name = lba_dev->hba.lmmio_name;
1039                         } else if (!lba_dev->hba.elmmio_space.start) {
1040                                 sprintf(lba_dev->hba.elmmio_name,
1041                                                 "PCI%02x ELMMIO",
1042                                                 (int)lba_dev->hba.bus_num.start);
1043                                 r = &lba_dev->hba.elmmio_space;
1044                                 r->name = lba_dev->hba.elmmio_name;
1045                         } else {
1046                                 printk(KERN_WARNING MODULE_NAME
1047                                         " only supports 2 LMMIO resources!\n");
1048                                 break;
1049                         }
1050
1051                         r->start  = p->start;
1052                         r->end    = p->end;
1053                         r->flags  = IORESOURCE_MEM;
1054                         r->parent = r->sibling = r->child = NULL;
1055                         break;
1056
1057                 case PAT_GMMIO:
1058                         /* MMIO space > 4GB phys addr; for 64-bit BAR */
1059                         sprintf(lba_dev->hba.gmmio_name, "PCI%02x GMMIO",
1060                                         (int)lba_dev->hba.bus_num.start);
1061                         r = &lba_dev->hba.gmmio_space;
1062                         r->name  = lba_dev->hba.gmmio_name;
1063                         r->start  = p->start;
1064                         r->end    = p->end;
1065                         r->flags  = IORESOURCE_MEM;
1066                         r->parent = r->sibling = r->child = NULL;
1067                         break;
1068
1069                 case PAT_NPIOP:
1070                         printk(KERN_WARNING MODULE_NAME
1071                                 " range[%d] : ignoring NPIOP (0x%lx)\n",
1072                                 i, p->start);
1073                         break;
1074
1075                 case PAT_PIOP:
1076                         /*
1077                         ** Postable I/O port space is per PCI host adapter.
1078                         ** base of 64MB PIOP region
1079                         */
1080                         lba_dev->iop_base = ioremap_nocache(p->start, 64 * 1024 * 1024);
1081
1082                         sprintf(lba_dev->hba.io_name, "PCI%02x Ports",
1083                                         (int)lba_dev->hba.bus_num.start);
1084                         r = &lba_dev->hba.io_space;
1085                         r->name  = lba_dev->hba.io_name;
1086                         r->start  = HBA_PORT_BASE(lba_dev->hba.hba_num);
1087                         r->end    = r->start + HBA_PORT_SPACE_SIZE - 1;
1088                         r->flags  = IORESOURCE_IO;
1089                         r->parent = r->sibling = r->child = NULL;
1090                         break;
1091
1092                 default:
1093                         printk(KERN_WARNING MODULE_NAME
1094                                 " range[%d] : unknown pat range type (0x%lx)\n",
1095                                 i, p->type & 0xff);
1096                         break;
1097                 }
1098         }
1099 }
1100 #else
1101 /* keep compiler from complaining about missing declarations */
1102 #define lba_pat_port_ops lba_astro_port_ops
1103 #define lba_pat_resources(pa_dev, lba_dev)
1104 #endif  /* CONFIG_64BIT */
1105
1106
1107 extern void sba_distributed_lmmio(struct parisc_device *, struct resource *);
1108 extern void sba_directed_lmmio(struct parisc_device *, struct resource *);
1109
1110
1111 static void
1112 lba_legacy_resources(struct parisc_device *pa_dev, struct lba_device *lba_dev)
1113 {
1114         struct resource *r;
1115         int lba_num;
1116
1117         lba_dev->hba.lmmio_space_offset = PCI_F_EXTEND;
1118
1119         /*
1120         ** With "legacy" firmware, the lowest byte of FW_SCRATCH
1121         ** represents bus->secondary and the second byte represents
1122         ** bus->subsidiary (i.e. highest PPB programmed by firmware).
1123         ** PCI bus walk *should* end up with the same result.
1124         ** FIXME: But we don't have sanity checks in PCI or LBA.
1125         */
1126         lba_num = READ_REG32(lba_dev->hba.base_addr + LBA_FW_SCRATCH);
1127         r = &(lba_dev->hba.bus_num);
1128         r->name = "LBA PCI Busses";
1129         r->start = lba_num & 0xff;
1130         r->end = (lba_num>>8) & 0xff;
1131
1132         /* Set up local PCI Bus resources - we don't need them for
1133         ** Legacy boxes but it's nice to see in /proc/iomem.
1134         */
1135         r = &(lba_dev->hba.lmmio_space);
1136         sprintf(lba_dev->hba.lmmio_name, "PCI%02x LMMIO",
1137                                         (int)lba_dev->hba.bus_num.start);
1138         r->name  = lba_dev->hba.lmmio_name;
1139
1140 #if 1
1141         /* We want the CPU -> IO routing of addresses.
1142          * The SBA BASE/MASK registers control CPU -> IO routing.
1143          * Ask SBA what is routed to this rope/LBA.
1144          */
1145         sba_distributed_lmmio(pa_dev, r);
1146 #else
1147         /*
1148          * The LBA BASE/MASK registers control IO -> System routing.
1149          *
1150          * The following code works but doesn't get us what we want.
1151          * Well, only because firmware (v5.0) on C3000 doesn't program
1152          * the LBA BASE/MASE registers to be the exact inverse of 
1153          * the corresponding SBA registers. Other Astro/Pluto
1154          * based platform firmware may do it right.
1155          *
1156          * Should someone want to mess with MSI, they may need to
1157          * reprogram LBA BASE/MASK registers. Thus preserve the code
1158          * below until MSI is known to work on C3000/A500/N4000/RP3440.
1159          *
1160          * Using the code below, /proc/iomem shows:
1161          * ...
1162          * f0000000-f0ffffff : PCI00 LMMIO
1163          *   f05d0000-f05d0000 : lcd_data
1164          *   f05d0008-f05d0008 : lcd_cmd
1165          * f1000000-f1ffffff : PCI01 LMMIO
1166          * f4000000-f4ffffff : PCI02 LMMIO
1167          *   f4000000-f4001fff : sym53c8xx
1168          *   f4002000-f4003fff : sym53c8xx
1169          *   f4004000-f40043ff : sym53c8xx
1170          *   f4005000-f40053ff : sym53c8xx
1171          *   f4007000-f4007fff : ohci_hcd
1172          *   f4008000-f40083ff : tulip
1173          * f6000000-f6ffffff : PCI03 LMMIO
1174          * f8000000-fbffffff : PCI00 ELMMIO
1175          *   fa100000-fa4fffff : stifb mmio
1176          *   fb000000-fb1fffff : stifb fb
1177          *
1178          * But everything listed under PCI02 actually lives under PCI00.
1179          * This is clearly wrong.
1180          *
1181          * Asking SBA how things are routed tells the correct story:
1182          * LMMIO_BASE/MASK/ROUTE f4000001 fc000000 00000000
1183          * DIR0_BASE/MASK/ROUTE fa000001 fe000000 00000006
1184          * DIR1_BASE/MASK/ROUTE f9000001 ff000000 00000004
1185          * DIR2_BASE/MASK/ROUTE f0000000 fc000000 00000000
1186          * DIR3_BASE/MASK/ROUTE f0000000 fc000000 00000000
1187          *
1188          * Which looks like this in /proc/iomem:
1189          * f4000000-f47fffff : PCI00 LMMIO
1190          *   f4000000-f4001fff : sym53c8xx
1191          *   ...[deteled core devices - same as above]...
1192          *   f4008000-f40083ff : tulip
1193          * f4800000-f4ffffff : PCI01 LMMIO
1194          * f6000000-f67fffff : PCI02 LMMIO
1195          * f7000000-f77fffff : PCI03 LMMIO
1196          * f9000000-f9ffffff : PCI02 ELMMIO
1197          * fa000000-fbffffff : PCI03 ELMMIO
1198          *   fa100000-fa4fffff : stifb mmio
1199          *   fb000000-fb1fffff : stifb fb
1200          *
1201          * ie all Built-in core are under now correctly under PCI00.
1202          * The "PCI02 ELMMIO" directed range is for:
1203          *  +-[02]---03.0  3Dfx Interactive, Inc. Voodoo 2
1204          *
1205          * All is well now.
1206          */
1207         r->start = READ_REG32(lba_dev->hba.base_addr + LBA_LMMIO_BASE);
1208         if (r->start & 1) {
1209                 unsigned long rsize;
1210
1211                 r->flags = IORESOURCE_MEM;
1212                 /* mmio_mask also clears Enable bit */
1213                 r->start &= mmio_mask;
1214                 r->start = PCI_HOST_ADDR(HBA_DATA(lba_dev), r->start);
1215                 rsize = ~ READ_REG32(lba_dev->hba.base_addr + LBA_LMMIO_MASK);
1216
1217                 /*
1218                 ** Each rope only gets part of the distributed range.
1219                 ** Adjust "window" for this rope.
1220                 */
1221                 rsize /= ROPES_PER_IOC;
1222                 r->start += (rsize + 1) * LBA_NUM(pa_dev->hpa.start);
1223                 r->end = r->start + rsize;
1224         } else {
1225                 r->end = r->start = 0;  /* Not enabled. */
1226         }
1227 #endif
1228
1229         /*
1230         ** "Directed" ranges are used when the "distributed range" isn't
1231         ** sufficient for all devices below a given LBA.  Typically devices
1232         ** like graphics cards or X25 may need a directed range when the
1233         ** bus has multiple slots (ie multiple devices) or the device
1234         ** needs more than the typical 4 or 8MB a distributed range offers.
1235         **
1236         ** The main reason for ignoring it now frigging complications.
1237         ** Directed ranges may overlap (and have precedence) over
1238         ** distributed ranges. Or a distributed range assigned to a unused
1239         ** rope may be used by a directed range on a different rope.
1240         ** Support for graphics devices may require fixing this
1241         ** since they may be assigned a directed range which overlaps
1242         ** an existing (but unused portion of) distributed range.
1243         */
1244         r = &(lba_dev->hba.elmmio_space);
1245         sprintf(lba_dev->hba.elmmio_name, "PCI%02x ELMMIO",
1246                                         (int)lba_dev->hba.bus_num.start);
1247         r->name  = lba_dev->hba.elmmio_name;
1248
1249 #if 1
1250         /* See comment which precedes call to sba_directed_lmmio() */
1251         sba_directed_lmmio(pa_dev, r);
1252 #else
1253         r->start = READ_REG32(lba_dev->hba.base_addr + LBA_ELMMIO_BASE);
1254
1255         if (r->start & 1) {
1256                 unsigned long rsize;
1257                 r->flags = IORESOURCE_MEM;
1258                 /* mmio_mask also clears Enable bit */
1259                 r->start &= mmio_mask;
1260                 r->start = PCI_HOST_ADDR(HBA_DATA(lba_dev), r->start);
1261                 rsize = READ_REG32(lba_dev->hba.base_addr + LBA_ELMMIO_MASK);
1262                 r->end = r->start + ~rsize;
1263         }
1264 #endif
1265
1266         r = &(lba_dev->hba.io_space);
1267         sprintf(lba_dev->hba.io_name, "PCI%02x Ports",
1268                                         (int)lba_dev->hba.bus_num.start);
1269         r->name  = lba_dev->hba.io_name;
1270         r->flags = IORESOURCE_IO;
1271         r->start = READ_REG32(lba_dev->hba.base_addr + LBA_IOS_BASE) & ~1L;
1272         r->end   = r->start + (READ_REG32(lba_dev->hba.base_addr + LBA_IOS_MASK) ^ (HBA_PORT_SPACE_SIZE - 1));
1273
1274         /* Virtualize the I/O Port space ranges */
1275         lba_num = HBA_PORT_BASE(lba_dev->hba.hba_num);
1276         r->start |= lba_num;
1277         r->end   |= lba_num;
1278 }
1279
1280
1281 /**************************************************************************
1282 **
1283 **   LBA initialization code (HW and SW)
1284 **
1285 **   o identify LBA chip itself
1286 **   o initialize LBA chip modes (HardFail)
1287 **   o FIXME: initialize DMA hints for reasonable defaults
1288 **   o enable configuration functions
1289 **   o call pci_register_ops() to discover devs (fixup/fixup_bus get invoked)
1290 **
1291 **************************************************************************/
1292
1293 static int __init
1294 lba_hw_init(struct lba_device *d)
1295 {
1296         u32 stat;
1297         u32 bus_reset;  /* PDC_PAT_BUG */
1298
1299 #if 0
1300         printk(KERN_DEBUG "LBA %lx  STAT_CTL %Lx  ERROR_CFG %Lx  STATUS %Lx DMA_CTL %Lx\n",
1301                 d->hba.base_addr,
1302                 READ_REG64(d->hba.base_addr + LBA_STAT_CTL),
1303                 READ_REG64(d->hba.base_addr + LBA_ERROR_CONFIG),
1304                 READ_REG64(d->hba.base_addr + LBA_ERROR_STATUS),
1305                 READ_REG64(d->hba.base_addr + LBA_DMA_CTL) );
1306         printk(KERN_DEBUG "     ARB mask %Lx  pri %Lx  mode %Lx  mtlt %Lx\n",
1307                 READ_REG64(d->hba.base_addr + LBA_ARB_MASK),
1308                 READ_REG64(d->hba.base_addr + LBA_ARB_PRI),
1309                 READ_REG64(d->hba.base_addr + LBA_ARB_MODE),
1310                 READ_REG64(d->hba.base_addr + LBA_ARB_MTLT) );
1311         printk(KERN_DEBUG "     HINT cfg 0x%Lx\n",
1312                 READ_REG64(d->hba.base_addr + LBA_HINT_CFG));
1313         printk(KERN_DEBUG "     HINT reg ");
1314         { int i;
1315         for (i=LBA_HINT_BASE; i< (14*8 + LBA_HINT_BASE); i+=8)
1316                 printk(" %Lx", READ_REG64(d->hba.base_addr + i));
1317         }
1318         printk("\n");
1319 #endif  /* DEBUG_LBA_PAT */
1320
1321 #ifdef CONFIG_64BIT
1322 /*
1323  * FIXME add support for PDC_PAT_IO "Get slot status" - OLAR support
1324  * Only N-Class and up can really make use of Get slot status.
1325  * maybe L-class too but I've never played with it there.
1326  */
1327 #endif
1328
1329         /* PDC_PAT_BUG: exhibited in rev 40.48  on L2000 */
1330         bus_reset = READ_REG32(d->hba.base_addr + LBA_STAT_CTL + 4) & 1;
1331         if (bus_reset) {
1332                 printk(KERN_DEBUG "NOTICE: PCI bus reset still asserted! (clearing)\n");
1333         }
1334
1335         stat = READ_REG32(d->hba.base_addr + LBA_ERROR_CONFIG);
1336         if (stat & LBA_SMART_MODE) {
1337                 printk(KERN_DEBUG "NOTICE: LBA in SMART mode! (cleared)\n");
1338                 stat &= ~LBA_SMART_MODE;
1339                 WRITE_REG32(stat, d->hba.base_addr + LBA_ERROR_CONFIG);
1340         }
1341
1342         /* Set HF mode as the default (vs. -1 mode). */
1343         stat = READ_REG32(d->hba.base_addr + LBA_STAT_CTL);
1344         WRITE_REG32(stat | HF_ENABLE, d->hba.base_addr + LBA_STAT_CTL);
1345
1346         /*
1347         ** Writing a zero to STAT_CTL.rf (bit 0) will clear reset signal
1348         ** if it's not already set. If we just cleared the PCI Bus Reset
1349         ** signal, wait a bit for the PCI devices to recover and setup.
1350         */
1351         if (bus_reset)
1352                 mdelay(pci_post_reset_delay);
1353
1354         if (0 == READ_REG32(d->hba.base_addr + LBA_ARB_MASK)) {
1355                 /*
1356                 ** PDC_PAT_BUG: PDC rev 40.48 on L2000.
1357                 ** B2000/C3600/J6000 also have this problem?
1358                 ** 
1359                 ** Elroys with hot pluggable slots don't get configured
1360                 ** correctly if the slot is empty.  ARB_MASK is set to 0
1361                 ** and we can't master transactions on the bus if it's
1362                 ** not at least one. 0x3 enables elroy and first slot.
1363                 */
1364                 printk(KERN_DEBUG "NOTICE: Enabling PCI Arbitration\n");
1365                 WRITE_REG32(0x3, d->hba.base_addr + LBA_ARB_MASK);
1366         }
1367
1368         /*
1369         ** FIXME: Hint registers are programmed with default hint
1370         ** values by firmware. Hints should be sane even if we
1371         ** can't reprogram them the way drivers want.
1372         */
1373         return 0;
1374 }
1375
1376 /*
1377  * Unfortunately, when firmware numbers busses, it doesn't take into account
1378  * Cardbus bridges.  So we have to renumber the busses to suit ourselves.
1379  * Elroy/Mercury don't actually know what bus number they're attached to;
1380  * we use bus 0 to indicate the directly attached bus and any other bus
1381  * number will be taken care of by the PCI-PCI bridge.
1382  */
1383 static unsigned int lba_next_bus = 0;
1384
1385 /*
1386  * Determine if lba should claim this chip (return 0) or not (return 1).
1387  * If so, initialize the chip and tell other partners in crime they
1388  * have work to do.
1389  */
1390 static int __init
1391 lba_driver_probe(struct parisc_device *dev)
1392 {
1393         struct lba_device *lba_dev;
1394         struct pci_bus *lba_bus;
1395         struct pci_ops *cfg_ops;
1396         u32 func_class;
1397         void *tmp_obj;
1398         char *version;
1399         void __iomem *addr = ioremap_nocache(dev->hpa.start, 4096);
1400
1401         /* Read HW Rev First */
1402         func_class = READ_REG32(addr + LBA_FCLASS);
1403
1404         if (IS_ELROY(dev)) {    
1405                 func_class &= 0xf;
1406                 switch (func_class) {
1407                 case 0: version = "TR1.0"; break;
1408                 case 1: version = "TR2.0"; break;
1409                 case 2: version = "TR2.1"; break;
1410                 case 3: version = "TR2.2"; break;
1411                 case 4: version = "TR3.0"; break;
1412                 case 5: version = "TR4.0"; break;
1413                 default: version = "TR4+";
1414                 }
1415
1416                 printk(KERN_INFO "Elroy version %s (0x%x) found at 0x%lx\n",
1417                        version, func_class & 0xf, (long)dev->hpa.start);
1418
1419                 if (func_class < 2) {
1420                         printk(KERN_WARNING "Can't support LBA older than "
1421                                 "TR2.1 - continuing under adversity.\n");
1422                 }
1423
1424 #if 0
1425 /* Elroy TR4.0 should work with simple algorithm.
1426    But it doesn't.  Still missing something. *sigh*
1427 */
1428                 if (func_class > 4) {
1429                         cfg_ops = &mercury_cfg_ops;
1430                 } else
1431 #endif
1432                 {
1433                         cfg_ops = &elroy_cfg_ops;
1434                 }
1435
1436         } else if (IS_MERCURY(dev) || IS_QUICKSILVER(dev)) {
1437                 int major, minor;
1438
1439                 func_class &= 0xff;
1440                 major = func_class >> 4, minor = func_class & 0xf;
1441
1442                 /* We could use one printk for both Elroy and Mercury,
1443                  * but for the mask for func_class.
1444                  */ 
1445                 printk(KERN_INFO "%s version TR%d.%d (0x%x) found at 0x%lx\n",
1446                        IS_MERCURY(dev) ? "Mercury" : "Quicksilver", major,
1447                        minor, func_class, (long)dev->hpa.start);
1448
1449                 cfg_ops = &mercury_cfg_ops;
1450         } else {
1451                 printk(KERN_ERR "Unknown LBA found at 0x%lx\n",
1452                         (long)dev->hpa.start);
1453                 return -ENODEV;
1454         }
1455
1456         /* Tell I/O SAPIC driver we have a IRQ handler/region. */
1457         tmp_obj = iosapic_register(dev->hpa.start + LBA_IOSAPIC_BASE);
1458
1459         /* NOTE: PCI devices (e.g. 103c:1005 graphics card) which don't
1460         **      have an IRT entry will get NULL back from iosapic code.
1461         */
1462         
1463         lba_dev = kzalloc(sizeof(struct lba_device), GFP_KERNEL);
1464         if (!lba_dev) {
1465                 printk(KERN_ERR "lba_init_chip - couldn't alloc lba_device\n");
1466                 return(1);
1467         }
1468
1469
1470         /* ---------- First : initialize data we already have --------- */
1471
1472         lba_dev->hw_rev = func_class;
1473         lba_dev->hba.base_addr = addr;
1474         lba_dev->hba.dev = dev;
1475         lba_dev->iosapic_obj = tmp_obj;  /* save interrupt handle */
1476         lba_dev->hba.iommu = sba_get_iommu(dev);  /* get iommu data */
1477         parisc_set_drvdata(dev, lba_dev);
1478
1479         /* ------------ Second : initialize common stuff ---------- */
1480         pci_bios = &lba_bios_ops;
1481         pcibios_register_hba(HBA_DATA(lba_dev));
1482         spin_lock_init(&lba_dev->lba_lock);
1483
1484         if (lba_hw_init(lba_dev))
1485                 return(1);
1486
1487         /* ---------- Third : setup I/O Port and MMIO resources  --------- */
1488
1489         if (is_pdc_pat()) {
1490                 /* PDC PAT firmware uses PIOP region of GMMIO space. */
1491                 pci_port = &lba_pat_port_ops;
1492                 /* Go ask PDC PAT what resources this LBA has */
1493                 lba_pat_resources(dev, lba_dev);
1494         } else {
1495                 if (!astro_iop_base) {
1496                         /* Sprockets PDC uses NPIOP region */
1497                         astro_iop_base = ioremap_nocache(LBA_PORT_BASE, 64 * 1024);
1498                         pci_port = &lba_astro_port_ops;
1499                 }
1500
1501                 /* Poke the chip a bit for /proc output */
1502                 lba_legacy_resources(dev, lba_dev);
1503         }
1504
1505         if (lba_dev->hba.bus_num.start < lba_next_bus)
1506                 lba_dev->hba.bus_num.start = lba_next_bus;
1507
1508         dev->dev.platform_data = lba_dev;
1509         lba_bus = lba_dev->hba.hba_bus =
1510                 pci_scan_bus_parented(&dev->dev, lba_dev->hba.bus_num.start,
1511                                 cfg_ops, NULL);
1512         if (lba_bus) {
1513                 lba_next_bus = lba_bus->subordinate + 1;
1514                 pci_bus_add_devices(lba_bus);
1515         }
1516
1517         /* This is in lieu of calling pci_assign_unassigned_resources() */
1518         if (is_pdc_pat()) {
1519                 /* assign resources to un-initialized devices */
1520
1521                 DBG_PAT("LBA pci_bus_size_bridges()\n");
1522                 pci_bus_size_bridges(lba_bus);
1523
1524                 DBG_PAT("LBA pci_bus_assign_resources()\n");
1525                 pci_bus_assign_resources(lba_bus);
1526
1527 #ifdef DEBUG_LBA_PAT
1528                 DBG_PAT("\nLBA PIOP resource tree\n");
1529                 lba_dump_res(&lba_dev->hba.io_space, 2);
1530                 DBG_PAT("\nLBA LMMIO resource tree\n");
1531                 lba_dump_res(&lba_dev->hba.lmmio_space, 2);
1532 #endif
1533         }
1534         pci_enable_bridges(lba_bus);
1535
1536
1537         /*
1538         ** Once PCI register ops has walked the bus, access to config
1539         ** space is restricted. Avoids master aborts on config cycles.
1540         ** Early LBA revs go fatal on *any* master abort.
1541         */
1542         if (cfg_ops == &elroy_cfg_ops) {
1543                 lba_dev->flags |= LBA_FLAG_SKIP_PROBE;
1544         }
1545
1546         /* Whew! Finally done! Tell services we got this one covered. */
1547         return 0;
1548 }
1549
1550 static struct parisc_device_id lba_tbl[] = {
1551         { HPHW_BRIDGE, HVERSION_REV_ANY_ID, ELROY_HVERS, 0xa },
1552         { HPHW_BRIDGE, HVERSION_REV_ANY_ID, MERCURY_HVERS, 0xa },
1553         { HPHW_BRIDGE, HVERSION_REV_ANY_ID, QUICKSILVER_HVERS, 0xa },
1554         { 0, }
1555 };
1556
1557 static struct parisc_driver lba_driver = {
1558         .name =         MODULE_NAME,
1559         .id_table =     lba_tbl,
1560         .probe =        lba_driver_probe,
1561 };
1562
1563 /*
1564 ** One time initialization to let the world know the LBA was found.
1565 ** Must be called exactly once before pci_init().
1566 */
1567 void __init lba_init(void)
1568 {
1569         register_parisc_driver(&lba_driver);
1570 }
1571
1572 /*
1573 ** Initialize the IBASE/IMASK registers for LBA (Elroy).
1574 ** Only called from sba_iommu.c in order to route ranges (MMIO vs DMA).
1575 ** sba_iommu is responsible for locking (none needed at init time).
1576 */
1577 void lba_set_iregs(struct parisc_device *lba, u32 ibase, u32 imask)
1578 {
1579         void __iomem * base_addr = ioremap_nocache(lba->hpa.start, 4096);
1580
1581         imask <<= 2;    /* adjust for hints - 2 more bits */
1582
1583         /* Make sure we aren't trying to set bits that aren't writeable. */
1584         WARN_ON((ibase & 0x001fffff) != 0);
1585         WARN_ON((imask & 0x001fffff) != 0);
1586         
1587         DBG("%s() ibase 0x%x imask 0x%x\n", __func__, ibase, imask);
1588         WRITE_REG32( imask, base_addr + LBA_IMASK);
1589         WRITE_REG32( ibase, base_addr + LBA_IBASE);
1590         iounmap(base_addr);
1591 }
1592