kernel/linux/arch/mips/kernel/scall64-64.S

   1 /*
   2  * This file is subject to the terms and conditions of the GNU General Public
   3  * License.  See the file "COPYING" in the main directory of this archive
   4  * for more details.
   5  *
   6  * Copyright (C) 1995, 96, 97, 98, 99, 2000, 01, 02 by Ralf Baechle
   7  * Copyright (C) 1999, 2000 Silicon Graphics, Inc.
   8  * Copyright (C) 2001 MIPS Technologies, Inc.
   9  */
  10 #include <linux/config.h>
  11 #include <linux/errno.h>
  12 #include <asm/asm.h>
  13 #include <asm/asmmacro.h>
  14 #include <asm/mipsregs.h>
  15 #include <asm/regdef.h>
  16 #include <asm/stackframe.h>
  17 #include <asm/offset.h>
  18 #include <asm/sysmips.h>
  19 #include <asm/thread_info.h>
  20 #include <asm/unistd.h>
  21 #include <asm/war.h>
  22
  23 #ifndef CONFIG_BINFMT_ELF32
  24 /* Neither O32 nor N32, so define handle_sys here */
  25 #define handle_sys64 handle_sys
  26 #endif
  27
  28         .align  5
  29 NESTED(handle_sys64, PT_SIZE, sp)
  30 #if !defined(CONFIG_MIPS32_O32) && !defined(CONFIG_MIPS32_N32)
  31         /*
  32          * When 32-bit compatibility is configured scall_o32.S
  33          * already did this.
  34          */
  35         .set    noat
  36         SAVE_SOME
  37         STI
  38         .set    at
  39 #endif
  40
  41 FEXPORT(__handle_sys64)
  42         subu    t0, v0, __NR_64_Linux   # check syscall number
  43         sltiu   t0, t0, __NR_64_Linux_syscalls + 1
  44 #if !defined(CONFIG_MIPS32_O32) && !defined(CONFIG_MIPS32_N32)
  45         ld      t1, PT_EPC(sp)          # skip syscall on return
  46         daddiu  t1, 4                   # skip to next instruction
  47         sd      t1, PT_EPC(sp)
  48 #endif
  49         beqz    t0, illegal_syscall
  50
  51         dsll    t0, v0, 3               # offset into table
  52         ld      t2, (sys_call_table - (__NR_64_Linux * 8))(t0)
  53                                         # syscall routine
  54
  55         sd      a3, PT_R26(sp)          # save a3 for syscall restarting
  56
  57         LONG_L  t0, TI_FLAGS($28)
  58         bltz    t0, syscall_trace_entry # syscall tracing enabled?
  59
  60         jalr    t2                      # Do The Real Thing (TM)
  61
  62         li      t0, -EMAXERRNO - 1      # error?
  63         sltu    t0, t0, v0
  64         sd      t0, PT_R7(sp)           # set error flag
  65         beqz    t0, 1f
  66
  67         negu    v0                      # error
  68         sd      v0, PT_R0(sp)           # set flag for syscall
  69                                         # restarting
  70 1:      sd      v0, PT_R2(sp)           # result
  71
  72 syscall_exit:
  73         local_irq_disable               # make sure need_resched and
  74                                         # signals dont change between
  75                                         # sampling and return
  76         LONG_L  a2, TI_FLAGS($28)       # current->work
  77         li      t0, _TIF_ALLWORK_MASK
  78         and     t0, a2, t0
  79         bnez    t0, n64_syscall_exit_work
  80
  81         j       restore_partial
  82
  83 n64_syscall_exit_work:
  84         j       syscall_exit_work_partial
  85
  86 /* ------------------------------------------------------------------------ */
  87
  88 syscall_trace_entry:
  89         SAVE_STATIC
  90         sd      t2,PT_R1(sp)
  91         move    a0, sp
  92         li      a1, 0
  93         jal     do_syscall_trace
  94         ld      t2,PT_R1(sp)
  95
  96         ld      a0, PT_R4(sp)           # Restore argument registers
  97         ld      a1, PT_R5(sp)
  98         ld      a2, PT_R6(sp)
  99         ld      a3, PT_R7(sp)
 100         jalr    t2
 101
 102         li      t0, -EMAXERRNO - 1      # error?
 103         sltu    t0, t0, v0
 104         sd      t0, PT_R7(sp)           # set error flag
 105         beqz    t0, 1f
 106
 107         negu    v0                      # error
 108         sd      v0, PT_R0(sp)           # set flag for syscall restarting
 109 1:      sd      v0, PT_R2(sp)           # result
 110
 111         j       syscall_exit
 112
 113 illegal_syscall:
 114         /* This also isn't a 64-bit syscall, throw an error.  */
 115         li      v0, ENOSYS                      # error
 116         sd      v0, PT_R2(sp)
 117         li      t0, 1                           # set error flag
 118         sd      t0, PT_R7(sp)
 119         j       syscall_exit
 120         END(handle_sys64)
 121
 122         LEAF(mips_atomic_set)
 123         andi    v0, a1, 3                       # must be word aligned
 124         bnez    v0, bad_alignment
 125
 126         LONG_L  v1, TI_ADDR_LIMIT($28)          # in legal address range?
 127         LONG_ADDIU      a0, a1, 4
 128         or      a0, a0, a1
 129         and     a0, a0, v1
 130         bltz    a0, bad_address
 131
 132 #ifdef CONFIG_CPU_HAS_LLSC
 133         /* Ok, this is the ll/sc case.  World is sane :-)  */
 134 1:      ll      v0, (a1)
 135         move    a0, a2
 136 2:      sc      a0, (a1)
 137 #if R10000_LLSC_WAR
 138         beqzl   a0, 1b
 139 #else
 140         beqz    a0, 1b
 141 #endif
 142
 143         .section __ex_table,"a"
 144         PTR     1b, bad_stack
 145         PTR     2b, bad_stack
 146         .previous
 147 #else
 148         sw      a1, 16(sp)
 149         sw      a2, 20(sp)
 150
 151         move    a0, sp
 152         move    a2, a1
 153         li      a1, 1
 154         jal     do_page_fault
 155
 156         lw      a1, 16(sp)
 157         lw      a2, 20(sp)
 158
 159         /*
 160          * At this point the page should be readable and writable unless
 161          * there was no more memory available.
 162          */
 163 1:      lw      v0, (a1)
 164 2:      sw      a2, (a1)
 165
 166         .section __ex_table,"a"
 167         PTR     1b, no_mem
 168         PTR     2b, no_mem
 169         .previous
 170 #endif
 171
 172         sd      zero, PT_R7(sp)         # success
 173         sd      v0, PT_R2(sp)           # result
 174
 175         /* Success, so skip usual error handling garbage.  */
 176         LONG_L  a2, TI_FLAGS($28)       # syscall tracing enabled?
 177         li      t0, _TIF_SYSCALL_TRACE | _TIF_SYSCALL_AUDIT
 178         and     t0, a2, t0
 179         bnez    t0, 1f
 180
 181         b       syscall_exit
 182
 183 1:      SAVE_STATIC
 184         move    a0, sp
 185         li      a1, 1
 186         jal     do_syscall_trace
 187         j       syscall_exit
 188
 189 no_mem: li      v0, -ENOMEM
 190         jr      ra
 191
 192 bad_address:
 193         li      v0, -EFAULT
 194         jr      ra
 195
 196 bad_alignment:
 197         li      v0, -EINVAL
 198         jr      ra
 199         END(mips_atomic_set)
 200
 201         LEAF(sys_sysmips)
 202         beq     a0, MIPS_ATOMIC_SET, mips_atomic_set
 203         j       _sys_sysmips
 204         END(sys_sysmips)
 205
 206         LEAF(sys_syscall)                       /* Quick'n'dirty ... */
 207         move    v0, a0
 208         move    a0, a1
 209         move    a1, a2
 210         move    a2, a3
 211         move    a3, a4
 212         move    a4, a5
 213         move    a5, a6
 214         j       __handle_sys64
 215         END(sys_syscall)
 216
 217         .align  3
 218 sys_call_table:
 219         PTR     sys_read                        /* 5000 */
 220         PTR     sys_write
 221         PTR     sys_open
 222         PTR     sys_close
 223         PTR     sys_newstat
 224         PTR     sys_newfstat                    /* 5005 */
 225         PTR     sys_newlstat
 226         PTR     sys_poll
 227         PTR     sys_lseek
 228         PTR     old_mmap
 229         PTR     sys_mprotect                    /* 5010 */
 230         PTR     sys_munmap
 231         PTR     sys_brk
 232         PTR     sys_rt_sigaction
 233         PTR     sys_rt_sigprocmask
 234         PTR     sys_ioctl                       /* 5015 */
 235         PTR     sys_pread64
 236         PTR     sys_pwrite64
 237         PTR     sys_readv
 238         PTR     sys_writev
 239         PTR     sys_access                      /* 5020 */
 240         PTR     sys_pipe
 241         PTR     sys_select
 242         PTR     sys_sched_yield
 243         PTR     sys_mremap
 244         PTR     sys_msync                       /* 5025 */
 245         PTR     sys_mincore
 246         PTR     sys_madvise
 247         PTR     sys_shmget
 248         PTR     sys_shmat
 249         PTR     sys_shmctl                      /* 5030 */
 250         PTR     sys_dup
 251         PTR     sys_dup2
 252         PTR     sys_pause
 253         PTR     sys_nanosleep
 254         PTR     sys_getitimer                   /* 5035 */
 255         PTR     sys_setitimer
 256         PTR     sys_alarm
 257         PTR     sys_getpid
 258         PTR     sys_sendfile64
 259         PTR     sys_socket                      /* 5040 */
 260         PTR     sys_connect
 261         PTR     sys_accept
 262         PTR     sys_sendto
 263         PTR     sys_recvfrom
 264         PTR     sys_sendmsg                     /* 5045 */
 265         PTR     sys_recvmsg
 266         PTR     sys_shutdown
 267         PTR     sys_bind
 268         PTR     sys_listen
 269         PTR     sys_getsockname                 /* 5050 */
 270         PTR     sys_getpeername
 271         PTR     sys_socketpair
 272         PTR     sys_setsockopt
 273         PTR     sys_getsockopt
 274         PTR     sys_clone                       /* 5055 */
 275         PTR     sys_fork
 276         PTR     sys_execve
 277         PTR     sys_exit
 278         PTR     sys_wait4
 279         PTR     sys_kill                        /* 5060 */
 280         PTR     sys_newuname
 281         PTR     sys_semget
 282         PTR     sys_semop
 283         PTR     sys_semctl
 284         PTR     sys_shmdt                       /* 5065 */
 285         PTR     sys_msgget
 286         PTR     sys_msgsnd
 287         PTR     sys_msgrcv
 288         PTR     sys_msgctl
 289         PTR     sys_fcntl                       /* 5070 */
 290         PTR     sys_flock
 291         PTR     sys_fsync
 292         PTR     sys_fdatasync
 293         PTR     sys_truncate
 294         PTR     sys_ftruncate                   /* 5075 */
 295         PTR     sys_getdents
 296         PTR     sys_getcwd
 297         PTR     sys_chdir
 298         PTR     sys_fchdir
 299         PTR     sys_rename                      /* 5080 */
 300         PTR     sys_mkdir
 301         PTR     sys_rmdir
 302         PTR     sys_creat
 303         PTR     sys_link
 304         PTR     sys_unlink                      /* 5085 */
 305         PTR     sys_symlink
 306         PTR     sys_readlink
 307         PTR     sys_chmod
 308         PTR     sys_fchmod
 309         PTR     sys_chown                       /* 5090 */
 310         PTR     sys_fchown
 311         PTR     sys_lchown
 312         PTR     sys_umask
 313         PTR     sys_gettimeofday
 314         PTR     sys_getrlimit                   /* 5095 */
 315         PTR     sys_getrusage
 316         PTR     sys_sysinfo
 317         PTR     sys_times
 318         PTR     sys_ptrace
 319         PTR     sys_getuid                      /* 5100 */
 320         PTR     sys_syslog
 321         PTR     sys_getgid
 322         PTR     sys_setuid
 323         PTR     sys_setgid
 324         PTR     sys_geteuid                     /* 5105 */
 325         PTR     sys_getegid
 326         PTR     sys_setpgid
 327         PTR     sys_getppid
 328         PTR     sys_getpgrp
 329         PTR     sys_setsid                      /* 5110 */
 330         PTR     sys_setreuid
 331         PTR     sys_setregid
 332         PTR     sys_getgroups
 333         PTR     sys_setgroups
 334         PTR     sys_setresuid                   /* 5115 */
 335         PTR     sys_getresuid
 336         PTR     sys_setresgid
 337         PTR     sys_getresgid
 338         PTR     sys_getpgid
 339         PTR     sys_setfsuid                    /* 5120 */
 340         PTR     sys_setfsgid
 341         PTR     sys_getsid
 342         PTR     sys_capget
 343         PTR     sys_capset
 344         PTR     sys_rt_sigpending               /* 5125 */
 345         PTR     sys_rt_sigtimedwait
 346         PTR     sys_rt_sigqueueinfo
 347         PTR     sys_rt_sigsuspend
 348         PTR     sys_sigaltstack
 349         PTR     sys_utime                       /* 5130 */
 350         PTR     sys_mknod
 351         PTR     sys_personality
 352         PTR     sys_ustat
 353         PTR     sys_statfs
 354         PTR     sys_fstatfs                     /* 5135 */
 355         PTR     sys_sysfs
 356         PTR     sys_getpriority
 357         PTR     sys_setpriority
 358         PTR     sys_sched_setparam
 359         PTR     sys_sched_getparam              /* 5140 */
 360         PTR     sys_sched_setscheduler
 361         PTR     sys_sched_getscheduler
 362         PTR     sys_sched_get_priority_max
 363         PTR     sys_sched_get_priority_min
 364         PTR     sys_sched_rr_get_interval       /* 5145 */
 365         PTR     sys_mlock
 366         PTR     sys_munlock
 367         PTR     sys_mlockall
 368         PTR     sys_munlockall
 369         PTR     sys_vhangup                     /* 5150 */
 370         PTR     sys_pivot_root
 371         PTR     sys_sysctl
 372         PTR     sys_prctl
 373         PTR     sys_adjtimex
 374         PTR     sys_setrlimit                   /* 5155 */
 375         PTR     sys_chroot
 376         PTR     sys_sync
 377         PTR     sys_acct
 378         PTR     sys_settimeofday
 379         PTR     sys_mount                       /* 5160 */
 380         PTR     sys_umount
 381         PTR     sys_swapon
 382         PTR     sys_swapoff
 383         PTR     sys_reboot
 384         PTR     sys_sethostname                 /* 5165 */
 385         PTR     sys_setdomainname
 386         PTR     sys_ni_syscall                  /* was create_module */
 387         PTR     sys_init_module
 388         PTR     sys_delete_module
 389         PTR     sys_ni_syscall                  /* 5170, was get_kernel_syms */
 390         PTR     sys_ni_syscall                  /* was query_module */
 391         PTR     sys_quotactl
 392         PTR     sys_nfsservctl
 393         PTR     sys_ni_syscall                  /* res. for getpmsg */
 394         PTR     sys_ni_syscall                  /* 5175  for putpmsg */
 395         PTR     sys_ni_syscall                  /* res. for afs_syscall */
 396         PTR     sys_ni_syscall                  /* res. for security */
 397         PTR     sys_gettid
 398         PTR     sys_readahead
 399         PTR     sys_setxattr                    /* 5180 */
 400         PTR     sys_lsetxattr
 401         PTR     sys_fsetxattr
 402         PTR     sys_getxattr
 403         PTR     sys_lgetxattr
 404         PTR     sys_fgetxattr                   /* 5185 */
 405         PTR     sys_listxattr
 406         PTR     sys_llistxattr
 407         PTR     sys_flistxattr
 408         PTR     sys_removexattr
 409         PTR     sys_lremovexattr                /* 5190 */
 410         PTR     sys_fremovexattr
 411         PTR     sys_tkill
 412         PTR     sys_ni_syscall
 413         PTR     sys_futex
 414         PTR     sys_sched_setaffinity           /* 5195 */
 415         PTR     sys_sched_getaffinity
 416         PTR     sys_cacheflush
 417         PTR     sys_cachectl
 418         PTR     sys_sysmips
 419         PTR     sys_io_setup                    /* 5200 */
 420         PTR     sys_io_destroy
 421         PTR     sys_io_getevents
 422         PTR     sys_io_submit
 423         PTR     sys_io_cancel
 424         PTR     sys_exit_group                  /* 5205 */
 425         PTR     sys_lookup_dcookie
 426         PTR     sys_epoll_create
 427         PTR     sys_epoll_ctl
 428         PTR     sys_epoll_wait
 429         PTR     sys_remap_file_pages            /* 5210 */
 430         PTR     sys_rt_sigreturn
 431         PTR     sys_set_tid_address
 432         PTR     sys_restart_syscall
 433         PTR     sys_semtimedop
 434         PTR     sys_fadvise64_64                /* 5215 */
 435         PTR     sys_timer_create
 436         PTR     sys_timer_settime
 437         PTR     sys_timer_gettime
 438         PTR     sys_timer_getoverrun
 439         PTR     sys_timer_delete                /* 5220 */
 440         PTR     sys_clock_settime
 441         PTR     sys_clock_gettime
 442         PTR     sys_clock_getres
 443         PTR     sys_clock_nanosleep
 444         PTR     sys_tgkill                      /* 5225 */
 445         PTR     sys_utimes
 446         PTR     sys_ni_syscall                  /* sys_mbind */
 447         PTR     sys_ni_syscall                  /* sys_get_mempolicy */
 448         PTR     sys_ni_syscall                  /* sys_set_mempolicy */
 449         PTR     sys_mq_open                     /* 5230 */
 450         PTR     sys_mq_unlink
 451         PTR     sys_mq_timedsend
 452         PTR     sys_mq_timedreceive
 453         PTR     sys_mq_notify
 454         PTR     sys_mq_getsetattr               /* 5235 */
 455         PTR     sys_ni_syscall                  /* sys_vserver */