git.oblomov.eu Git - linux-2.6/blob - arch/ppc64/kernel/misc.S

   1 /*
   2  *  arch/ppc/kernel/misc.S
   3  *
   4  *
   5  *
   6  * This file contains miscellaneous low-level functions.
   7  *    Copyright (C) 1995-1996 Gary Thomas (gdt@linuxppc.org)
   8  *
   9  * Largely rewritten by Cort Dougan (cort@cs.nmt.edu)
  10  * and Paul Mackerras.
  11  * Adapted for iSeries by Mike Corrigan (mikejc@us.ibm.com)
  12  * PPC64 updates by Dave Engebretsen (engebret@us.ibm.com)
  13  *
  14  * This program is free software; you can redistribute it and/or
  15  * modify it under the terms of the GNU General Public License
  16  * as published by the Free Software Foundation; either version
  17  * 2 of the License, or (at your option) any later version.
  18  *
  19  */
  20
  21 #include <linux/config.h>
  22 #include <linux/sys.h>
  23 #include <asm/unistd.h>
  24 #include <asm/errno.h>
  25 #include <asm/processor.h>
  26 #include <asm/page.h>
  27 #include <asm/cache.h>
  28 #include <asm/ppc_asm.h>
  29 #include <asm/offsets.h>
  30 #include <asm/cputable.h>
  31
  32         .text
  33
  34 /*
  35  * Returns (address we were linked at) - (address we are running at)
  36  * for use before the text and data are mapped to KERNELBASE.
  37  */
  38
  39 _GLOBAL(reloc_offset)
  40         mflr    r0
  41         bl      1f
  42 1:      mflr    r3
  43         LOADADDR(r4,1b)
  44         sub     r3,r4,r3
  45         mtlr    r0
  46         blr
  47
  48 _GLOBAL(get_msr)
  49         mfmsr   r3
  50         blr
  51
  52 _GLOBAL(get_dar)
  53         mfdar   r3
  54         blr
  55
  56 _GLOBAL(get_srr0)
  57         mfsrr0  r3
  58         blr
  59
  60 _GLOBAL(get_srr1)
  61         mfsrr1  r3
  62         blr
  63
  64 _GLOBAL(get_sp)
  65         mr      r3,r1
  66         blr
  67
  68 #ifdef CONFIG_PPC_ISERIES
  69 /* unsigned long local_save_flags(void) */
  70 _GLOBAL(local_get_flags)
  71         lbz     r3,PACAPROCENABLED(r13)
  72         blr
  73
  74 /* unsigned long local_irq_disable(void) */
  75 _GLOBAL(local_irq_disable)
  76         lbz     r3,PACAPROCENABLED(r13)
  77         li      r4,0
  78         stb     r4,PACAPROCENABLED(r13)
  79         blr                     /* Done */
  80
  81 /* void local_irq_restore(unsigned long flags) */
  82 _GLOBAL(local_irq_restore)
  83         lbz     r5,PACAPROCENABLED(r13)
  84          /* Check if things are setup the way we want _already_. */
  85         cmpw    0,r3,r5
  86         beqlr
  87         /* are we enabling interrupts? */
  88         cmpdi   0,r3,0
  89         stb     r3,PACAPROCENABLED(r13)
  90         beqlr
  91         /* Check pending interrupts */
  92         /*   A decrementer, IPI or PMC interrupt may have occurred
  93          *   while we were in the hypervisor (which enables) */
  94         ld      r4,PACALPPACA+LPPACAANYINT(r13)
  95         cmpdi   r4,0
  96         beqlr
  97
  98         /*
  99          * Handle pending interrupts in interrupt context
 100          */
 101         li      r0,0x5555
 102         sc
 103         blr
 104 #endif /* CONFIG_PPC_ISERIES */
 105
 106 #ifdef CONFIG_IRQSTACKS
 107 _GLOBAL(call_do_softirq)
 108         mflr    r0
 109         std     r0,16(r1)
 110         stdu    r1,THREAD_SIZE-112(r3)
 111         mr      r1,r3
 112         bl      .__do_softirq
 113         ld      r1,0(r1)
 114         ld      r0,16(r1)
 115         mtlr    r0
 116         blr
 117
 118 _GLOBAL(call_handle_IRQ_event)
 119         mflr    r0
 120         std     r0,16(r1)
 121         stdu    r1,THREAD_SIZE-112(r6)
 122         mr      r1,r6
 123         bl      .handle_IRQ_event
 124         ld      r1,0(r1)
 125         ld      r0,16(r1)
 126         mtlr    r0
 127         blr
 128 #endif /* CONFIG_IRQSTACKS */
 129
 130         /*
 131  * To be called by C code which needs to do some operations with MMU
 132  * disabled. Note that interrupts have to be disabled by the caller
 133  * prior to calling us. The code called _MUST_ be in the RMO of course
 134  * and part of the linear mapping as we don't attempt to translate the
 135  * stack pointer at all. The function is called with the stack switched
 136  * to this CPU emergency stack
 137  *
 138  * prototype is void *call_with_mmu_off(void *func, void *data);
 139  *
 140  * the called function is expected to be of the form
 141  *
 142  * void *called(void *data);
 143  */
 144 _GLOBAL(call_with_mmu_off)
 145         mflr    r0                      /* get link, save it on stackframe */
 146         std     r0,16(r1)
 147         mr      r1,r5                   /* save old stack ptr */
 148         ld      r1,PACAEMERGSP(r13)     /* get emerg. stack */
 149         subi    r1,r1,STACK_FRAME_OVERHEAD
 150         std     r0,16(r1)               /* save link on emerg. stack */
 151         std     r5,0(r1)                /* save old stack ptr in backchain */
 152         ld      r3,0(r3)                /* get to real function ptr (assume same TOC) */
 153         bl      2f                      /* we need LR to return, continue at label 2 */
 154
 155         ld      r0,16(r1)               /* we return here from the call, get LR and */
 156         ld      r1,0(r1)                /* .. old stack ptr */
 157         mtspr   SPRN_SRR0,r0            /* and get back to virtual mode with these */
 158         mfmsr   r4
 159         ori     r4,r4,MSR_IR|MSR_DR
 160         mtspr   SPRN_SRR1,r4
 161         rfid
 162
 163 2:      mtspr   SPRN_SRR0,r3            /* coming from above, enter real mode */
 164         mr      r3,r4                   /* get parameter */
 165         mfmsr   r0
 166         ori     r0,r0,MSR_IR|MSR_DR
 167         xori    r0,r0,MSR_IR|MSR_DR
 168         mtspr   SPRN_SRR1,r0
 169         rfid
 170
 171
 172         .section        ".toc","aw"
 173 PPC64_CACHES:
 174         .tc             ppc64_caches[TC],ppc64_caches
 175         .section        ".text"
 176
 177 /*
 178  * Write any modified data cache blocks out to memory
 179  * and invalidate the corresponding instruction cache blocks.
 180  *
 181  * flush_icache_range(unsigned long start, unsigned long stop)
 182  *
 183  *   flush all bytes from start through stop-1 inclusive
 184  */
 185
 186 _GLOBAL(__flush_icache_range)
 187
 188 /*
 189  * Flush the data cache to memory
 190  *
 191  * Different systems have different cache line sizes
 192  * and in some cases i-cache and d-cache line sizes differ from
 193  * each other.
 194  */
 195         ld      r10,PPC64_CACHES@toc(r2)
 196         lwz     r7,DCACHEL1LINESIZE(r10)/* Get cache line size */
 197         addi    r5,r7,-1
 198         andc    r6,r3,r5                /* round low to line bdy */
 199         subf    r8,r6,r4                /* compute length */
 200         add     r8,r8,r5                /* ensure we get enough */
 201         lwz     r9,DCACHEL1LOGLINESIZE(r10)     /* Get log-2 of cache line size */
 202         srw.    r8,r8,r9                /* compute line count */
 203         beqlr                           /* nothing to do? */
 204         mtctr   r8
 205 1:      dcbst   0,r6
 206         add     r6,r6,r7
 207         bdnz    1b
 208         sync
 209
 210 /* Now invalidate the instruction cache */
 211
 212         lwz     r7,ICACHEL1LINESIZE(r10)        /* Get Icache line size */
 213         addi    r5,r7,-1
 214         andc    r6,r3,r5                /* round low to line bdy */
 215         subf    r8,r6,r4                /* compute length */
 216         add     r8,r8,r5
 217         lwz     r9,ICACHEL1LOGLINESIZE(r10)     /* Get log-2 of Icache line size */
 218         srw.    r8,r8,r9                /* compute line count */
 219         beqlr                           /* nothing to do? */
 220         mtctr   r8
 221 2:      icbi    0,r6
 222         add     r6,r6,r7
 223         bdnz    2b
 224         isync
 225         blr
 226
 227 /*
 228  * Like above, but only do the D-cache.
 229  *
 230  * flush_dcache_range(unsigned long start, unsigned long stop)
 231  *
 232  *    flush all bytes from start to stop-1 inclusive
 233  */
 234 _GLOBAL(flush_dcache_range)
 235
 236 /*
 237  * Flush the data cache to memory
 238  *
 239  * Different systems have different cache line sizes
 240  */
 241         ld      r10,PPC64_CACHES@toc(r2)
 242         lwz     r7,DCACHEL1LINESIZE(r10)        /* Get dcache line size */
 243         addi    r5,r7,-1
 244         andc    r6,r3,r5                /* round low to line bdy */
 245         subf    r8,r6,r4                /* compute length */
 246         add     r8,r8,r5                /* ensure we get enough */
 247         lwz     r9,DCACHEL1LOGLINESIZE(r10)     /* Get log-2 of dcache line size */
 248         srw.    r8,r8,r9                /* compute line count */
 249         beqlr                           /* nothing to do? */
 250         mtctr   r8
 251 0:      dcbst   0,r6
 252         add     r6,r6,r7
 253         bdnz    0b
 254         sync
 255         blr
 256
 257 /*
 258  * Like above, but works on non-mapped physical addresses.
 259  * Use only for non-LPAR setups ! It also assumes real mode
 260  * is cacheable. Used for flushing out the DART before using
 261  * it as uncacheable memory
 262  *
 263  * flush_dcache_phys_range(unsigned long start, unsigned long stop)
 264  *
 265  *    flush all bytes from start to stop-1 inclusive
 266  */
 267 _GLOBAL(flush_dcache_phys_range)
 268         ld      r10,PPC64_CACHES@toc(r2)
 269         lwz     r7,DCACHEL1LINESIZE(r10)        /* Get dcache line size */
 270         addi    r5,r7,-1
 271         andc    r6,r3,r5                /* round low to line bdy */
 272         subf    r8,r6,r4                /* compute length */
 273         add     r8,r8,r5                /* ensure we get enough */
 274         lwz     r9,DCACHEL1LOGLINESIZE(r10)     /* Get log-2 of dcache line size */
 275         srw.    r8,r8,r9                /* compute line count */
 276         beqlr                           /* nothing to do? */
 277         mfmsr   r5                      /* Disable MMU Data Relocation */
 278         ori     r0,r5,MSR_DR
 279         xori    r0,r0,MSR_DR
 280         sync
 281         mtmsr   r0
 282         sync
 283         isync
 284         mtctr   r8
 285 0:      dcbst   0,r6
 286         add     r6,r6,r7
 287         bdnz    0b
 288         sync
 289         isync
 290         mtmsr   r5                      /* Re-enable MMU Data Relocation */
 291         sync
 292         isync
 293         blr
 294
 295 _GLOBAL(flush_inval_dcache_range)
 296         ld      r10,PPC64_CACHES@toc(r2)
 297         lwz     r7,DCACHEL1LINESIZE(r10)        /* Get dcache line size */
 298         addi    r5,r7,-1
 299         andc    r6,r3,r5                /* round low to line bdy */
 300         subf    r8,r6,r4                /* compute length */
 301         add     r8,r8,r5                /* ensure we get enough */
 302         lwz     r9,DCACHEL1LOGLINESIZE(r10)/* Get log-2 of dcache line size */
 303         srw.    r8,r8,r9                /* compute line count */
 304         beqlr                           /* nothing to do? */
 305         sync
 306         isync
 307         mtctr   r8
 308 0:      dcbf    0,r6
 309         add     r6,r6,r7
 310         bdnz    0b
 311         sync
 312         isync
 313         blr
 314
 315
 316 /*
 317  * Flush a particular page from the data cache to RAM.
 318  * Note: this is necessary because the instruction cache does *not*
 319  * snoop from the data cache.
 320  *
 321  *      void __flush_dcache_icache(void *page)
 322  */
 323 _GLOBAL(__flush_dcache_icache)
 324 /*
 325  * Flush the data cache to memory
 326  *
 327  * Different systems have different cache line sizes
 328  */
 329
 330 /* Flush the dcache */
 331         ld      r7,PPC64_CACHES@toc(r2)
 332         clrrdi  r3,r3,12                    /* Page align */
 333         lwz     r4,DCACHEL1LINESPERPAGE(r7)     /* Get # dcache lines per page */
 334         lwz     r5,DCACHEL1LINESIZE(r7)         /* Get dcache line size */
 335         mr      r6,r3
 336         mtctr   r4
 337 0:      dcbst   0,r6
 338         add     r6,r6,r5
 339         bdnz    0b
 340         sync
 341
 342 /* Now invalidate the icache */
 343
 344         lwz     r4,ICACHEL1LINESPERPAGE(r7)     /* Get # icache lines per page */
 345         lwz     r5,ICACHEL1LINESIZE(r7)         /* Get icache line size */
 346         mtctr   r4
 347 1:      icbi    0,r3
 348         add     r3,r3,r5
 349         bdnz    1b
 350         isync
 351         blr
 352
 353 /*
 354  * I/O string operations
 355  *
 356  * insb(port, buf, len)
 357  * outsb(port, buf, len)
 358  * insw(port, buf, len)
 359  * outsw(port, buf, len)
 360  * insl(port, buf, len)
 361  * outsl(port, buf, len)
 362  * insw_ns(port, buf, len)
 363  * outsw_ns(port, buf, len)
 364  * insl_ns(port, buf, len)
 365  * outsl_ns(port, buf, len)
 366  *
 367  * The *_ns versions don't do byte-swapping.
 368  */
 369 _GLOBAL(_insb)
 370         cmpwi   0,r5,0
 371         mtctr   r5
 372         subi    r4,r4,1
 373         blelr-
 374 00:     lbz     r5,0(r3)
 375         eieio
 376         stbu    r5,1(r4)
 377         bdnz    00b
 378         twi     0,r5,0
 379         isync
 380         blr
 381
 382 _GLOBAL(_outsb)
 383         cmpwi   0,r5,0
 384         mtctr   r5
 385         subi    r4,r4,1
 386         blelr-
 387 00:     lbzu    r5,1(r4)
 388         stb     r5,0(r3)
 389         bdnz    00b
 390         sync
 391         blr
 392
 393 _GLOBAL(_insw)
 394         cmpwi   0,r5,0
 395         mtctr   r5
 396         subi    r4,r4,2
 397         blelr-
 398 00:     lhbrx   r5,0,r3
 399         eieio
 400         sthu    r5,2(r4)
 401         bdnz    00b
 402         twi     0,r5,0
 403         isync
 404         blr
 405
 406 _GLOBAL(_outsw)
 407         cmpwi   0,r5,0
 408         mtctr   r5
 409         subi    r4,r4,2
 410         blelr-
 411 00:     lhzu    r5,2(r4)
 412         sthbrx  r5,0,r3
 413         bdnz    00b
 414         sync
 415         blr
 416
 417 _GLOBAL(_insl)
 418         cmpwi   0,r5,0
 419         mtctr   r5
 420         subi    r4,r4,4
 421         blelr-
 422 00:     lwbrx   r5,0,r3
 423         eieio
 424         stwu    r5,4(r4)
 425         bdnz    00b
 426         twi     0,r5,0
 427         isync
 428         blr
 429
 430 _GLOBAL(_outsl)
 431         cmpwi   0,r5,0
 432         mtctr   r5
 433         subi    r4,r4,4
 434         blelr-
 435 00:     lwzu    r5,4(r4)
 436         stwbrx  r5,0,r3
 437         bdnz    00b
 438         sync
 439         blr
 440
 441 /* _GLOBAL(ide_insw) now in drivers/ide/ide-iops.c */
 442 _GLOBAL(_insw_ns)
 443         cmpwi   0,r5,0
 444         mtctr   r5
 445         subi    r4,r4,2
 446         blelr-
 447 00:     lhz     r5,0(r3)
 448         eieio
 449         sthu    r5,2(r4)
 450         bdnz    00b
 451         twi     0,r5,0
 452         isync
 453         blr
 454
 455 /* _GLOBAL(ide_outsw) now in drivers/ide/ide-iops.c */
 456 _GLOBAL(_outsw_ns)
 457         cmpwi   0,r5,0
 458         mtctr   r5
 459         subi    r4,r4,2
 460         blelr-
 461 00:     lhzu    r5,2(r4)
 462         sth     r5,0(r3)
 463         bdnz    00b
 464         sync
 465         blr
 466
 467 _GLOBAL(_insl_ns)
 468         cmpwi   0,r5,0
 469         mtctr   r5
 470         subi    r4,r4,4
 471         blelr-
 472 00:     lwz     r5,0(r3)
 473         eieio
 474         stwu    r5,4(r4)
 475         bdnz    00b
 476         twi     0,r5,0
 477         isync
 478         blr
 479
 480 _GLOBAL(_outsl_ns)
 481         cmpwi   0,r5,0
 482         mtctr   r5
 483         subi    r4,r4,4
 484         blelr-
 485 00:     lwzu    r5,4(r4)
 486         stw     r5,0(r3)
 487         bdnz    00b
 488         sync
 489         blr
 490
 491
 492 _GLOBAL(cvt_fd)
 493         lfd     0,0(r5)         /* load up fpscr value */
 494         mtfsf   0xff,0
 495         lfs     0,0(r3)
 496         stfd    0,0(r4)
 497         mffs    0               /* save new fpscr value */
 498         stfd    0,0(r5)
 499         blr
 500
 501 _GLOBAL(cvt_df)
 502         lfd     0,0(r5)         /* load up fpscr value */
 503         mtfsf   0xff,0
 504         lfd     0,0(r3)
 505         stfs    0,0(r4)
 506         mffs    0               /* save new fpscr value */
 507         stfd    0,0(r5)
 508         blr
 509
 510 /*
 511  * identify_cpu and calls setup_cpu
 512  * In:  r3 = base of the cpu_specs array
 513  *      r4 = address of cur_cpu_spec
 514  *      r5 = relocation offset
 515  */
 516 _GLOBAL(identify_cpu)
 517         mfpvr   r7
 518 1:
 519         lwz     r8,CPU_SPEC_PVR_MASK(r3)
 520         and     r8,r8,r7
 521         lwz     r9,CPU_SPEC_PVR_VALUE(r3)
 522         cmplw   0,r9,r8
 523         beq     1f
 524         addi    r3,r3,CPU_SPEC_ENTRY_SIZE
 525         b       1b
 526 1:
 527         add     r0,r3,r5
 528         std     r0,0(r4)
 529         ld      r4,CPU_SPEC_SETUP(r3)
 530         sub     r4,r4,r5
 531         ld      r4,0(r4)
 532         sub     r4,r4,r5
 533         mtctr   r4
 534         /* Calling convention for cpu setup is r3=offset, r4=cur_cpu_spec */
 535         mr      r4,r3
 536         mr      r3,r5
 537         bctr
 538
 539 /*
 540  * do_cpu_ftr_fixups - goes through the list of CPU feature fixups
 541  * and writes nop's over sections of code that don't apply for this cpu.
 542  * r3 = data offset (not changed)
 543  */
 544 _GLOBAL(do_cpu_ftr_fixups)
 545         /* Get CPU 0 features */
 546         LOADADDR(r6,cur_cpu_spec)
 547         sub     r6,r6,r3
 548         ld      r4,0(r6)
 549         sub     r4,r4,r3
 550         ld      r4,CPU_SPEC_FEATURES(r4)
 551         /* Get the fixup table */
 552         LOADADDR(r6,__start___ftr_fixup)
 553         sub     r6,r6,r3
 554         LOADADDR(r7,__stop___ftr_fixup)
 555         sub     r7,r7,r3
 556         /* Do the fixup */
 557 1:      cmpld   r6,r7
 558         bgelr
 559         addi    r6,r6,32
 560         ld      r8,-32(r6)      /* mask */
 561         and     r8,r8,r4
 562         ld      r9,-24(r6)      /* value */
 563         cmpld   r8,r9
 564         beq     1b
 565         ld      r8,-16(r6)      /* section begin */
 566         ld      r9,-8(r6)       /* section end */
 567         subf.   r9,r8,r9
 568         beq     1b
 569         /* write nops over the section of code */
 570         /* todo: if large section, add a branch at the start of it */
 571         srwi    r9,r9,2
 572         mtctr   r9
 573         sub     r8,r8,r3
 574         lis     r0,0x60000000@h /* nop */
 575 3:      stw     r0,0(r8)
 576         andi.   r10,r4,CPU_FTR_SPLIT_ID_CACHE@l
 577         beq     2f
 578         dcbst   0,r8            /* suboptimal, but simpler */
 579         sync
 580         icbi    0,r8
 581 2:      addi    r8,r8,4
 582         bdnz    3b
 583         sync                    /* additional sync needed on g4 */
 584         isync
 585         b       1b
 586
 587 #if defined(CONFIG_PPC_PMAC) || defined(CONFIG_PPC_MAPLE)
 588 /*
 589  * Do an IO access in real mode
 590  */
 591 _GLOBAL(real_readb)
 592         mfmsr   r7
 593         ori     r0,r7,MSR_DR
 594         xori    r0,r0,MSR_DR
 595         sync
 596         mtmsrd  r0
 597         sync
 598         isync
 599         mfspr   r6,SPRN_HID4
 600         rldicl  r5,r6,32,0
 601         ori     r5,r5,0x100
 602         rldicl  r5,r5,32,0
 603         sync
 604         mtspr   SPRN_HID4,r5
 605         isync
 606         slbia
 607         isync
 608         lbz     r3,0(r3)
 609         sync
 610         mtspr   SPRN_HID4,r6
 611         isync
 612         slbia
 613         isync
 614         mtmsrd  r7
 615         sync
 616         isync
 617         blr
 618
 619         /*
 620  * Do an IO access in real mode
 621  */
 622 _GLOBAL(real_writeb)
 623         mfmsr   r7
 624         ori     r0,r7,MSR_DR
 625         xori    r0,r0,MSR_DR
 626         sync
 627         mtmsrd  r0
 628         sync
 629         isync
 630         mfspr   r6,SPRN_HID4
 631         rldicl  r5,r6,32,0
 632         ori     r5,r5,0x100
 633         rldicl  r5,r5,32,0
 634         sync
 635         mtspr   SPRN_HID4,r5
 636         isync
 637         slbia
 638         isync
 639         stb     r3,0(r4)
 640         sync
 641         mtspr   SPRN_HID4,r6
 642         isync
 643         slbia
 644         isync
 645         mtmsrd  r7
 646         sync
 647         isync
 648         blr
 649 #endif /* defined(CONFIG_PPC_PMAC) || defined(CONFIG_PPC_MAPLE) */
 650
 651 /*
 652  * Create a kernel thread
 653  *   kernel_thread(fn, arg, flags)
 654  */
 655 _GLOBAL(kernel_thread)
 656         std     r29,-24(r1)
 657         std     r30,-16(r1)
 658         stdu    r1,-STACK_FRAME_OVERHEAD(r1)
 659         mr      r29,r3
 660         mr      r30,r4
 661         ori     r3,r5,CLONE_VM  /* flags */
 662         oris    r3,r3,(CLONE_UNTRACED>>16)
 663         li      r4,0            /* new sp (unused) */
 664         li      r0,__NR_clone
 665         sc
 666         cmpdi   0,r3,0          /* parent or child? */
 667         bne     1f              /* return if parent */
 668         li      r0,0
 669         stdu    r0,-STACK_FRAME_OVERHEAD(r1)
 670         ld      r2,8(r29)
 671         ld      r29,0(r29)
 672         mtlr    r29              /* fn addr in lr */
 673         mr      r3,r30          /* load arg and call fn */
 674         blrl
 675         li      r0,__NR_exit    /* exit after child exits */
 676         li      r3,0
 677         sc
 678 1:      addi    r1,r1,STACK_FRAME_OVERHEAD
 679         ld      r29,-24(r1)
 680         ld      r30,-16(r1)
 681         blr
 682
 683 /* kexec_wait(phys_cpu)
 684  *
 685  * wait for the flag to change, indicating this kernel is going away but
 686  * the slave code for the next one is at addresses 0 to 100.
 687  *
 688  * This is used by all slaves.
 689  *
 690  * Physical (hardware) cpu id should be in r3.
 691  */
 692 _GLOBAL(kexec_wait)
 693         bl      1f
 694 1:      mflr    r5
 695         addi    r5,r5,kexec_flag-1b
 696
 697 99:     HMT_LOW
 698 #ifdef CONFIG_KEXEC             /* use no memory without kexec */
 699         lwz     r4,0(r5)
 700         cmpwi   0,r4,0
 701         bnea    0x60
 702 #endif
 703         b       99b
 704
 705 /* this can be in text because we won't change it until we are
 706  * running in real anyways
 707  */
 708 kexec_flag:
 709         .long   0
 710
 711
 712 #ifdef CONFIG_KEXEC
 713
 714 /* kexec_smp_wait(void)
 715  *
 716  * call with interrupts off
 717  * note: this is a terminal routine, it does not save lr
 718  *
 719  * get phys id from paca
 720  * set paca id to -1 to say we got here
 721  * switch to real mode
 722  * join other cpus in kexec_wait(phys_id)
 723  */
 724 _GLOBAL(kexec_smp_wait)
 725         lhz     r3,PACAHWCPUID(r13)
 726         li      r4,-1
 727         sth     r4,PACAHWCPUID(r13)     /* let others know we left */
 728         bl      real_mode
 729         b       .kexec_wait
 730
 731 /*
 732  * switch to real mode (turn mmu off)
 733  * we use the early kernel trick that the hardware ignores bits
 734  * 0 and 1 (big endian) of the effective address in real mode
 735  *
 736  * don't overwrite r3 here, it is live for kexec_wait above.
 737  */
 738 real_mode:      /* assume normal blr return */
 739 1:      li      r9,MSR_RI
 740         li      r10,MSR_DR|MSR_IR
 741         mflr    r11             /* return address to SRR0 */
 742         mfmsr   r12
 743         andc    r9,r12,r9
 744         andc    r10,r12,r10
 745
 746         mtmsrd  r9,1
 747         mtspr   SPRN_SRR1,r10
 748         mtspr   SPRN_SRR0,r11
 749         rfid
 750
 751
 752 /*
 753  * kexec_sequence(newstack, start, image, control, clear_all())
 754  *
 755  * does the grungy work with stack switching and real mode switches
 756  * also does simple calls to other code
 757  */
 758
 759 _GLOBAL(kexec_sequence)
 760         mflr    r0
 761         std     r0,16(r1)
 762
 763         /* switch stacks to newstack -- &kexec_stack.stack */
 764         stdu    r1,THREAD_SIZE-112(r3)
 765         mr      r1,r3
 766
 767         li      r0,0
 768         std     r0,16(r1)
 769
 770         /* save regs for local vars on new stack.
 771          * yes, we won't go back, but ...
 772          */
 773         std     r31,-8(r1)
 774         std     r30,-16(r1)
 775         std     r29,-24(r1)
 776         std     r28,-32(r1)
 777         std     r27,-40(r1)
 778         std     r26,-48(r1)
 779         std     r25,-56(r1)
 780
 781         stdu    r1,-112-64(r1)
 782
 783         /* save args into preserved regs */
 784         mr      r31,r3                  /* newstack (both) */
 785         mr      r30,r4                  /* start (real) */
 786         mr      r29,r5                  /* image (virt) */
 787         mr      r28,r6                  /* control, unused */
 788         mr      r27,r7                  /* clear_all() fn desc */
 789         mr      r26,r8                  /* spare */
 790         lhz     r25,PACAHWCPUID(r13)    /* get our phys cpu from paca */
 791
 792         /* disable interrupts, we are overwriting kernel data next */
 793         mfmsr   r3
 794         rlwinm  r3,r3,0,17,15
 795         mtmsrd  r3,1
 796
 797         /* copy dest pages, flush whole dest image */
 798         mr      r3,r29
 799         bl      .kexec_copy_flush       /* (image) */
 800
 801         /* turn off mmu */
 802         bl      real_mode
 803
 804         /* clear out hardware hash page table and tlb */
 805         ld      r5,0(r27)               /* deref function descriptor */
 806         mtctr   r5
 807         bctrl                           /* ppc_md.hash_clear_all(void); */
 808
 809 /*
 810  *   kexec image calling is:
 811  *      the first 0x100 bytes of the entry point are copied to 0
 812  *
 813  *      all slaves branch to slave = 0x60 (absolute)
 814  *              slave(phys_cpu_id);
 815  *
 816  *      master goes to start = entry point
 817  *              start(phys_cpu_id, start, 0);
 818  *
 819  *
 820  *   a wrapper is needed to call existing kernels, here is an approximate
 821  *   description of one method:
 822  *
 823  * v2: (2.6.10)
 824  *   start will be near the boot_block (maybe 0x100 bytes before it?)
 825  *   it will have a 0x60, which will b to boot_block, where it will wait
 826  *   and 0 will store phys into struct boot-block and load r3 from there,
 827  *   copy kernel 0-0x100 and tell slaves to back down to 0x60 again
 828  *
 829  * v1: (2.6.9)
 830  *    boot block will have all cpus scanning device tree to see if they
 831  *    are the boot cpu ?????
 832  *    other device tree differences (prop sizes, va vs pa, etc)...
 833  */
 834
 835         /* copy  0x100 bytes starting at start to 0 */
 836         li      r3,0
 837         mr      r4,r30
 838         li      r5,0x100
 839         li      r6,0
 840         bl      .copy_and_flush /* (dest, src, copy limit, start offset) */
 841 1:      /* assume normal blr return */
 842
 843         /* release other cpus to the new kernel secondary start at 0x60 */
 844         mflr    r5
 845         li      r6,1
 846         stw     r6,kexec_flag-1b(5)
 847         mr      r3,r25  # my phys cpu
 848         mr      r4,r30  # start, aka phys mem offset
 849         mtlr    4
 850         li      r5,0
 851         blr     /* image->start(physid, image->start, 0); */
 852 #endif /* CONFIG_KEXEC */
 853
 854 /* Why isn't this a) automatic, b) written in 'C'? */
 855         .balign 8
 856 _GLOBAL(sys_call_table32)
 857         .llong .sys_restart_syscall     /* 0 */
 858         .llong .sys_exit
 859         .llong .ppc_fork
 860         .llong .sys_read
 861         .llong .sys_write
 862         .llong .sys32_open              /* 5 */
 863         .llong .sys_close
 864         .llong .sys32_waitpid
 865         .llong .sys32_creat
 866         .llong .sys_link
 867         .llong .sys_unlink              /* 10 */
 868         .llong .sys32_execve
 869         .llong .sys_chdir
 870         .llong .compat_sys_time
 871         .llong .sys_mknod
 872         .llong .sys_chmod               /* 15 */
 873         .llong .sys_lchown
 874         .llong .sys_ni_syscall          /* old break syscall */
 875         .llong .sys_ni_syscall          /* old stat syscall */
 876         .llong .ppc32_lseek
 877         .llong .sys_getpid              /* 20 */
 878         .llong .compat_sys_mount
 879         .llong .sys_oldumount
 880         .llong .sys_setuid
 881         .llong .sys_getuid
 882         .llong .compat_sys_stime        /* 25 */
 883         .llong .sys32_ptrace
 884         .llong .sys_alarm
 885         .llong .sys_ni_syscall          /* old fstat syscall */
 886         .llong .sys32_pause
 887         .llong .compat_sys_utime                /* 30 */
 888         .llong .sys_ni_syscall          /* old stty syscall */
 889         .llong .sys_ni_syscall          /* old gtty syscall */
 890         .llong .sys32_access
 891         .llong .sys32_nice
 892         .llong .sys_ni_syscall          /* 35 - old ftime syscall */
 893         .llong .sys_sync
 894         .llong .sys32_kill
 895         .llong .sys_rename
 896         .llong .sys32_mkdir
 897         .llong .sys_rmdir               /* 40 */
 898         .llong .sys_dup
 899         .llong .sys_pipe
 900         .llong .compat_sys_times
 901         .llong .sys_ni_syscall          /* old prof syscall */
 902         .llong .sys_brk                 /* 45 */
 903         .llong .sys_setgid
 904         .llong .sys_getgid
 905         .llong .sys_signal
 906         .llong .sys_geteuid
 907         .llong .sys_getegid             /* 50 */
 908         .llong .sys_acct
 909         .llong .sys_umount
 910         .llong .sys_ni_syscall          /* old lock syscall */
 911         .llong .compat_sys_ioctl
 912         .llong .compat_sys_fcntl                /* 55 */
 913         .llong .sys_ni_syscall          /* old mpx syscall */
 914         .llong .sys32_setpgid
 915         .llong .sys_ni_syscall          /* old ulimit syscall */
 916         .llong .sys32_olduname
 917         .llong .sys32_umask             /* 60 */
 918         .llong .sys_chroot
 919         .llong .sys_ustat
 920         .llong .sys_dup2
 921         .llong .sys_getppid
 922         .llong .sys_getpgrp             /* 65 */
 923         .llong .sys_setsid
 924         .llong .sys32_sigaction
 925         .llong .sys_sgetmask
 926         .llong .sys32_ssetmask
 927         .llong .sys_setreuid            /* 70 */
 928         .llong .sys_setregid
 929         .llong .ppc32_sigsuspend
 930         .llong .compat_sys_sigpending
 931         .llong .sys32_sethostname
 932         .llong .compat_sys_setrlimit            /* 75 */
 933         .llong .compat_sys_old_getrlimit
 934         .llong .compat_sys_getrusage
 935         .llong .sys32_gettimeofday
 936         .llong .sys32_settimeofday
 937         .llong .sys32_getgroups         /* 80 */
 938         .llong .sys32_setgroups
 939         .llong .sys_ni_syscall          /* old select syscall */
 940         .llong .sys_symlink
 941         .llong .sys_ni_syscall          /* old lstat syscall */
 942         .llong .sys32_readlink          /* 85 */
 943         .llong .sys_uselib
 944         .llong .sys_swapon
 945         .llong .sys_reboot
 946         .llong .old32_readdir
 947         .llong .sys_mmap                /* 90 */
 948         .llong .sys_munmap
 949         .llong .sys_truncate
 950         .llong .sys_ftruncate
 951         .llong .sys_fchmod
 952         .llong .sys_fchown              /* 95 */
 953         .llong .sys32_getpriority
 954         .llong .sys32_setpriority
 955         .llong .sys_ni_syscall          /* old profil syscall */
 956         .llong .compat_sys_statfs
 957         .llong .compat_sys_fstatfs              /* 100 */
 958         .llong .sys_ni_syscall          /* old ioperm syscall */
 959         .llong .compat_sys_socketcall
 960         .llong .sys32_syslog
 961         .llong .compat_sys_setitimer
 962         .llong .compat_sys_getitimer            /* 105 */
 963         .llong .compat_sys_newstat
 964         .llong .compat_sys_newlstat
 965         .llong .compat_sys_newfstat
 966         .llong .sys32_uname
 967         .llong .sys_ni_syscall          /* 110 old iopl syscall */
 968         .llong .sys_vhangup
 969         .llong .sys_ni_syscall          /* old idle syscall */
 970         .llong .sys_ni_syscall          /* old vm86 syscall */
 971         .llong .compat_sys_wait4
 972         .llong .sys_swapoff             /* 115 */
 973         .llong .sys32_sysinfo
 974         .llong .sys32_ipc
 975         .llong .sys_fsync
 976         .llong .ppc32_sigreturn
 977         .llong .ppc_clone               /* 120 */
 978         .llong .sys32_setdomainname
 979         .llong .ppc64_newuname
 980         .llong .sys_ni_syscall          /* old modify_ldt syscall */
 981         .llong .sys32_adjtimex
 982         .llong .sys_mprotect            /* 125 */
 983         .llong .compat_sys_sigprocmask
 984         .llong .sys_ni_syscall          /* old create_module syscall */
 985         .llong .sys_init_module
 986         .llong .sys_delete_module
 987         .llong .sys_ni_syscall          /* 130 old get_kernel_syms syscall */
 988         .llong .sys_quotactl
 989         .llong .sys32_getpgid
 990         .llong .sys_fchdir
 991         .llong .sys_bdflush
 992         .llong .sys32_sysfs             /* 135 */
 993         .llong .ppc64_personality
 994         .llong .sys_ni_syscall          /* for afs_syscall */
 995         .llong .sys_setfsuid
 996         .llong .sys_setfsgid
 997         .llong .sys_llseek              /* 140 */
 998         .llong .sys32_getdents
 999         .llong .ppc32_select
1000         .llong .sys_flock
1001         .llong .sys_msync
1002         .llong .compat_sys_readv        /* 145 */
1003         .llong .compat_sys_writev
1004         .llong .sys32_getsid
1005         .llong .sys_fdatasync
1006         .llong .sys32_sysctl
1007         .llong .sys_mlock               /* 150 */
1008         .llong .sys_munlock
1009         .llong .sys_mlockall
1010         .llong .sys_munlockall
1011         .llong .sys32_sched_setparam
1012         .llong .sys32_sched_getparam    /* 155 */
1013         .llong .sys32_sched_setscheduler
1014         .llong .sys32_sched_getscheduler
1015         .llong .sys_sched_yield
1016         .llong .sys32_sched_get_priority_max
1017         .llong .sys32_sched_get_priority_min  /* 160 */
1018         .llong .sys32_sched_rr_get_interval
1019         .llong .compat_sys_nanosleep
1020         .llong .sys_mremap
1021         .llong .sys_setresuid
1022         .llong .sys_getresuid           /* 165 */
1023         .llong .sys_ni_syscall          /* old query_module syscall */
1024         .llong .sys_poll
1025         .llong .compat_sys_nfsservctl
1026         .llong .sys_setresgid
1027         .llong .sys_getresgid           /* 170 */
1028         .llong .sys32_prctl
1029         .llong .ppc32_rt_sigreturn
1030         .llong .sys32_rt_sigaction
1031         .llong .sys32_rt_sigprocmask
1032         .llong .sys32_rt_sigpending     /* 175 */
1033         .llong .compat_sys_rt_sigtimedwait
1034         .llong .sys32_rt_sigqueueinfo
1035         .llong .ppc32_rt_sigsuspend
1036         .llong .sys32_pread64
1037         .llong .sys32_pwrite64          /* 180 */
1038         .llong .sys_chown
1039         .llong .sys_getcwd
1040         .llong .sys_capget
1041         .llong .sys_capset
1042         .llong .sys32_sigaltstack       /* 185 */
1043         .llong .sys32_sendfile
1044         .llong .sys_ni_syscall          /* reserved for streams1 */
1045         .llong .sys_ni_syscall          /* reserved for streams2 */
1046         .llong .ppc_vfork
1047         .llong .compat_sys_getrlimit            /* 190 */
1048         .llong .sys32_readahead
1049         .llong .sys32_mmap2
1050         .llong .sys32_truncate64
1051         .llong .sys32_ftruncate64
1052         .llong .sys_stat64              /* 195 */
1053         .llong .sys_lstat64
1054         .llong .sys_fstat64
1055         .llong .sys32_pciconfig_read
1056         .llong .sys32_pciconfig_write
1057         .llong .sys32_pciconfig_iobase  /* 200 - pciconfig_iobase */
1058         .llong .sys_ni_syscall          /* reserved for MacOnLinux */
1059         .llong .sys_getdents64
1060         .llong .sys_pivot_root
1061         .llong .compat_sys_fcntl64
1062         .llong .sys_madvise             /* 205 */
1063         .llong .sys_mincore
1064         .llong .sys_gettid
1065         .llong .sys_tkill
1066         .llong .sys_setxattr
1067         .llong .sys_lsetxattr           /* 210 */
1068         .llong .sys_fsetxattr
1069         .llong .sys_getxattr
1070         .llong .sys_lgetxattr
1071         .llong .sys_fgetxattr
1072         .llong .sys_listxattr           /* 215 */
1073         .llong .sys_llistxattr
1074         .llong .sys_flistxattr
1075         .llong .sys_removexattr
1076         .llong .sys_lremovexattr
1077         .llong .sys_fremovexattr        /* 220 */
1078         .llong .compat_sys_futex
1079         .llong .compat_sys_sched_setaffinity
1080         .llong .compat_sys_sched_getaffinity
1081         .llong .sys_ni_syscall
1082         .llong .sys_ni_syscall          /* 225 - reserved for tux */
1083         .llong .sys32_sendfile64
1084         .llong .compat_sys_io_setup
1085         .llong .sys_io_destroy
1086         .llong .compat_sys_io_getevents
1087         .llong .compat_sys_io_submit
1088         .llong .sys_io_cancel
1089         .llong .sys_set_tid_address
1090         .llong .ppc32_fadvise64
1091         .llong .sys_exit_group
1092         .llong .ppc32_lookup_dcookie    /* 235 */
1093         .llong .sys_epoll_create
1094         .llong .sys_epoll_ctl
1095         .llong .sys_epoll_wait
1096         .llong .sys_remap_file_pages
1097         .llong .ppc32_timer_create      /* 240 */
1098         .llong .compat_sys_timer_settime
1099         .llong .compat_sys_timer_gettime
1100         .llong .sys_timer_getoverrun
1101         .llong .sys_timer_delete
1102         .llong .compat_sys_clock_settime        /* 245 */
1103         .llong .compat_sys_clock_gettime
1104         .llong .compat_sys_clock_getres
1105         .llong .compat_sys_clock_nanosleep
1106         .llong .ppc32_swapcontext
1107         .llong .sys32_tgkill            /* 250 */
1108         .llong .sys32_utimes
1109         .llong .compat_sys_statfs64
1110         .llong .compat_sys_fstatfs64
1111         .llong .ppc32_fadvise64_64      /* 32bit only fadvise64_64 */
1112         .llong .ppc_rtas                /* 255 */
1113         .llong .sys_ni_syscall          /* 256 reserved for sys_debug_setcontext */
1114         .llong .sys_ni_syscall          /* 257 reserved for vserver */
1115         .llong .sys_ni_syscall          /* 258 reserved for new sys_remap_file_pages */
1116         .llong .compat_sys_mbind
1117         .llong .compat_sys_get_mempolicy        /* 260 */
1118         .llong .compat_sys_set_mempolicy
1119         .llong .compat_sys_mq_open
1120         .llong .sys_mq_unlink
1121         .llong .compat_sys_mq_timedsend
1122         .llong .compat_sys_mq_timedreceive /* 265 */
1123         .llong .compat_sys_mq_notify
1124         .llong .compat_sys_mq_getsetattr
1125         .llong .compat_sys_kexec_load
1126         .llong .sys32_add_key
1127         .llong .sys32_request_key       /* 270 */
1128         .llong .compat_sys_keyctl
1129         .llong .compat_sys_waitid
1130         .llong .sys32_ioprio_set
1131         .llong .sys32_ioprio_get
1132         .llong .sys_inotify_init        /* 275 */
1133         .llong .sys_inotify_add_watch
1134         .llong .sys_inotify_rm_watch
1135
1136         .balign 8
1137 _GLOBAL(sys_call_table)
1138         .llong .sys_restart_syscall     /* 0 */
1139         .llong .sys_exit
1140         .llong .ppc_fork
1141         .llong .sys_read
1142         .llong .sys_write
1143         .llong .sys_open                /* 5 */
1144         .llong .sys_close
1145         .llong .sys_waitpid
1146         .llong .sys_creat
1147         .llong .sys_link
1148         .llong .sys_unlink              /* 10 */
1149         .llong .sys_execve
1150         .llong .sys_chdir
1151         .llong .sys64_time
1152         .llong .sys_mknod
1153         .llong .sys_chmod               /* 15 */
1154         .llong .sys_lchown
1155         .llong .sys_ni_syscall          /* old break syscall */
1156         .llong .sys_ni_syscall          /* old stat syscall */
1157         .llong .sys_lseek
1158         .llong .sys_getpid              /* 20 */
1159         .llong .sys_mount
1160         .llong .sys_ni_syscall          /* old umount syscall */
1161         .llong .sys_setuid
1162         .llong .sys_getuid
1163         .llong .sys_stime               /* 25 */
1164         .llong .sys_ptrace
1165         .llong .sys_alarm
1166         .llong .sys_ni_syscall          /* old fstat syscall */
1167         .llong .sys_pause
1168         .llong .sys_utime               /* 30 */
1169         .llong .sys_ni_syscall          /* old stty syscall */
1170         .llong .sys_ni_syscall          /* old gtty syscall */
1171         .llong .sys_access
1172         .llong .sys_nice
1173         .llong .sys_ni_syscall          /* 35 - old ftime syscall */
1174         .llong .sys_sync
1175         .llong .sys_kill
1176         .llong .sys_rename
1177         .llong .sys_mkdir
1178         .llong .sys_rmdir               /* 40 */
1179         .llong .sys_dup
1180         .llong .sys_pipe
1181         .llong .sys_times
1182         .llong .sys_ni_syscall          /* old prof syscall */
1183         .llong .sys_brk                 /* 45 */
1184         .llong .sys_setgid
1185         .llong .sys_getgid
1186         .llong .sys_signal
1187         .llong .sys_geteuid
1188         .llong .sys_getegid             /* 50 */
1189         .llong .sys_acct
1190         .llong .sys_umount
1191         .llong .sys_ni_syscall          /* old lock syscall */
1192         .llong .sys_ioctl
1193         .llong .sys_fcntl               /* 55 */
1194         .llong .sys_ni_syscall          /* old mpx syscall */
1195         .llong .sys_setpgid
1196         .llong .sys_ni_syscall          /* old ulimit syscall */
1197         .llong .sys_ni_syscall          /* old uname syscall */
1198         .llong .sys_umask               /* 60 */
1199         .llong .sys_chroot
1200         .llong .sys_ustat
1201         .llong .sys_dup2
1202         .llong .sys_getppid
1203         .llong .sys_getpgrp             /* 65 */
1204         .llong .sys_setsid
1205         .llong .sys_ni_syscall
1206         .llong .sys_sgetmask
1207         .llong .sys_ssetmask
1208         .llong .sys_setreuid            /* 70 */
1209         .llong .sys_setregid
1210         .llong .sys_ni_syscall
1211         .llong .sys_ni_syscall
1212         .llong .sys_sethostname
1213         .llong .sys_setrlimit           /* 75 */
1214         .llong .sys_ni_syscall          /* old getrlimit syscall */
1215         .llong .sys_getrusage
1216         .llong .sys_gettimeofday
1217         .llong .sys_settimeofday
1218         .llong .sys_getgroups           /* 80 */
1219         .llong .sys_setgroups
1220         .llong .sys_ni_syscall          /* old select syscall */
1221         .llong .sys_symlink
1222         .llong .sys_ni_syscall          /* old lstat syscall */
1223         .llong .sys_readlink            /* 85 */
1224         .llong .sys_uselib
1225         .llong .sys_swapon
1226         .llong .sys_reboot
1227         .llong .sys_ni_syscall          /* old readdir syscall */
1228         .llong .sys_mmap                /* 90 */
1229         .llong .sys_munmap
1230         .llong .sys_truncate
1231         .llong .sys_ftruncate
1232         .llong .sys_fchmod
1233         .llong .sys_fchown              /* 95 */
1234         .llong .sys_getpriority
1235         .llong .sys_setpriority
1236         .llong .sys_ni_syscall          /* old profil syscall holder */
1237         .llong .sys_statfs
1238         .llong .sys_fstatfs             /* 100 */
1239         .llong .sys_ni_syscall          /* old ioperm syscall */
1240         .llong .sys_socketcall
1241         .llong .sys_syslog
1242         .llong .sys_setitimer
1243         .llong .sys_getitimer           /* 105 */
1244         .llong .sys_newstat
1245         .llong .sys_newlstat
1246         .llong .sys_newfstat
1247         .llong .sys_ni_syscall          /* old uname syscall */
1248         .llong .sys_ni_syscall          /* 110 old iopl syscall */
1249         .llong .sys_vhangup
1250         .llong .sys_ni_syscall          /* old idle syscall */
1251         .llong .sys_ni_syscall          /* old vm86 syscall */
1252         .llong .sys_wait4
1253         .llong .sys_swapoff             /* 115 */
1254         .llong .sys_sysinfo
1255         .llong .sys_ipc
1256         .llong .sys_fsync
1257         .llong .sys_ni_syscall
1258         .llong .ppc_clone               /* 120 */
1259         .llong .sys_setdomainname
1260         .llong .ppc64_newuname
1261         .llong .sys_ni_syscall          /* old modify_ldt syscall */
1262         .llong .sys_adjtimex
1263         .llong .sys_mprotect            /* 125 */
1264         .llong .sys_ni_syscall
1265         .llong .sys_ni_syscall          /* old create_module syscall */
1266         .llong .sys_init_module
1267         .llong .sys_delete_module
1268         .llong .sys_ni_syscall          /* 130 old get_kernel_syms syscall */
1269         .llong .sys_quotactl
1270         .llong .sys_getpgid
1271         .llong .sys_fchdir
1272         .llong .sys_bdflush
1273         .llong .sys_sysfs               /* 135 */
1274         .llong .ppc64_personality
1275         .llong .sys_ni_syscall          /* for afs_syscall */
1276         .llong .sys_setfsuid
1277         .llong .sys_setfsgid
1278         .llong .sys_llseek              /* 140 */
1279         .llong .sys_getdents
1280         .llong .sys_select
1281         .llong .sys_flock
1282         .llong .sys_msync
1283         .llong .sys_readv               /* 145 */
1284         .llong .sys_writev
1285         .llong .sys_getsid
1286         .llong .sys_fdatasync
1287         .llong .sys_sysctl
1288         .llong .sys_mlock               /* 150 */
1289         .llong .sys_munlock
1290         .llong .sys_mlockall
1291         .llong .sys_munlockall
1292         .llong .sys_sched_setparam
1293         .llong .sys_sched_getparam      /* 155 */
1294         .llong .sys_sched_setscheduler
1295         .llong .sys_sched_getscheduler
1296         .llong .sys_sched_yield
1297         .llong .sys_sched_get_priority_max
1298         .llong .sys_sched_get_priority_min  /* 160 */
1299         .llong .sys_sched_rr_get_interval
1300         .llong .sys_nanosleep
1301         .llong .sys_mremap
1302         .llong .sys_setresuid
1303         .llong .sys_getresuid           /* 165 */
1304         .llong .sys_ni_syscall          /* old query_module syscall */
1305         .llong .sys_poll
1306         .llong .sys_nfsservctl
1307         .llong .sys_setresgid
1308         .llong .sys_getresgid           /* 170 */
1309         .llong .sys_prctl
1310         .llong .ppc64_rt_sigreturn
1311         .llong .sys_rt_sigaction
1312         .llong .sys_rt_sigprocmask
1313         .llong .sys_rt_sigpending       /* 175 */
1314         .llong .sys_rt_sigtimedwait
1315         .llong .sys_rt_sigqueueinfo
1316         .llong .ppc64_rt_sigsuspend
1317         .llong .sys_pread64
1318         .llong .sys_pwrite64            /* 180 */
1319         .llong .sys_chown
1320         .llong .sys_getcwd
1321         .llong .sys_capget
1322         .llong .sys_capset
1323         .llong .sys_sigaltstack         /* 185 */
1324         .llong .sys_sendfile64
1325         .llong .sys_ni_syscall          /* reserved for streams1 */
1326         .llong .sys_ni_syscall          /* reserved for streams2 */
1327         .llong .ppc_vfork
1328         .llong .sys_getrlimit           /* 190 */
1329         .llong .sys_readahead
1330         .llong .sys_ni_syscall          /* 32bit only mmap2 */
1331         .llong .sys_ni_syscall          /* 32bit only truncate64 */
1332         .llong .sys_ni_syscall          /* 32bit only ftruncate64 */
1333         .llong .sys_ni_syscall          /* 195 - 32bit only stat64 */
1334         .llong .sys_ni_syscall          /* 32bit only lstat64 */
1335         .llong .sys_ni_syscall          /* 32bit only fstat64 */
1336         .llong .sys_ni_syscall          /* 32bit only pciconfig_read */
1337         .llong .sys_ni_syscall          /* 32bit only pciconfig_write */
1338         .llong .sys_ni_syscall          /* 32bit only pciconfig_iobase */
1339         .llong .sys_ni_syscall          /* reserved for MacOnLinux */
1340         .llong .sys_getdents64
1341         .llong .sys_pivot_root
1342         .llong .sys_ni_syscall          /* 32bit only fcntl64 */
1343         .llong .sys_madvise             /* 205 */
1344         .llong .sys_mincore
1345         .llong .sys_gettid
1346         .llong .sys_tkill
1347         .llong .sys_setxattr
1348         .llong .sys_lsetxattr           /* 210 */
1349         .llong .sys_fsetxattr
1350         .llong .sys_getxattr
1351         .llong .sys_lgetxattr
1352         .llong .sys_fgetxattr
1353         .llong .sys_listxattr           /* 215 */
1354         .llong .sys_llistxattr
1355         .llong .sys_flistxattr
1356         .llong .sys_removexattr
1357         .llong .sys_lremovexattr
1358         .llong .sys_fremovexattr        /* 220 */
1359         .llong .sys_futex
1360         .llong .sys_sched_setaffinity
1361         .llong .sys_sched_getaffinity
1362         .llong .sys_ni_syscall
1363         .llong .sys_ni_syscall          /* 225 - reserved for tux */
1364         .llong .sys_ni_syscall          /* 32bit only sendfile64 */
1365         .llong .sys_io_setup
1366         .llong .sys_io_destroy
1367         .llong .sys_io_getevents
1368         .llong .sys_io_submit           /* 230 */
1369         .llong .sys_io_cancel
1370         .llong .sys_set_tid_address
1371         .llong .sys_fadvise64
1372         .llong .sys_exit_group
1373         .llong .sys_lookup_dcookie      /* 235 */
1374         .llong .sys_epoll_create
1375         .llong .sys_epoll_ctl
1376         .llong .sys_epoll_wait
1377         .llong .sys_remap_file_pages
1378         .llong .sys_timer_create        /* 240 */
1379         .llong .sys_timer_settime
1380         .llong .sys_timer_gettime
1381         .llong .sys_timer_getoverrun
1382         .llong .sys_timer_delete
1383         .llong .sys_clock_settime       /* 245 */
1384         .llong .sys_clock_gettime
1385         .llong .sys_clock_getres
1386         .llong .sys_clock_nanosleep
1387         .llong .ppc64_swapcontext
1388         .llong .sys_tgkill              /* 250 */
1389         .llong .sys_utimes
1390         .llong .sys_statfs64
1391         .llong .sys_fstatfs64
1392         .llong .sys_ni_syscall          /* 32bit only fadvise64_64 */
1393         .llong .ppc_rtas                /* 255 */
1394         .llong .sys_ni_syscall          /* 256 reserved for sys_debug_setcontext */
1395         .llong .sys_ni_syscall          /* 257 reserved for vserver */
1396         .llong .sys_ni_syscall          /* 258 reserved for new sys_remap_file_pages */
1397         .llong .sys_mbind
1398         .llong .sys_get_mempolicy       /* 260 */
1399         .llong .sys_set_mempolicy
1400         .llong .sys_mq_open
1401         .llong .sys_mq_unlink
1402         .llong .sys_mq_timedsend
1403         .llong .sys_mq_timedreceive     /* 265 */
1404         .llong .sys_mq_notify
1405         .llong .sys_mq_getsetattr
1406         .llong .sys_kexec_load
1407         .llong .sys_add_key
1408         .llong .sys_request_key         /* 270 */
1409         .llong .sys_keyctl
1410         .llong .sys_waitid
1411         .llong .sys_ioprio_set
1412         .llong .sys_ioprio_get
1413         .llong .sys_inotify_init        /* 275 */
1414         .llong .sys_inotify_add_watch
1415         .llong .sys_inotify_rm_watch