[PATCH] knfsd: make nfsd readahead params cache SMP-friendly
[safe/jmp/linux-2.6] / fs / nfsd / vfs.c
1 #define MSNFS   /* HACK HACK */
2 /*
3  * linux/fs/nfsd/vfs.c
4  *
5  * File operations used by nfsd. Some of these have been ripped from
6  * other parts of the kernel because they weren't exported, others
7  * are partial duplicates with added or changed functionality.
8  *
9  * Note that several functions dget() the dentry upon which they want
10  * to act, most notably those that create directory entries. Response
11  * dentry's are dput()'d if necessary in the release callback.
12  * So if you notice code paths that apparently fail to dput() the
13  * dentry, don't worry--they have been taken care of.
14  *
15  * Copyright (C) 1995-1999 Olaf Kirch <okir@monad.swb.de>
16  * Zerocpy NFS support (C) 2002 Hirokazu Takahashi <taka@valinux.co.jp>
17  */
18
19 #include <linux/string.h>
20 #include <linux/time.h>
21 #include <linux/errno.h>
22 #include <linux/fs.h>
23 #include <linux/file.h>
24 #include <linux/mount.h>
25 #include <linux/major.h>
26 #include <linux/ext2_fs.h>
27 #include <linux/proc_fs.h>
28 #include <linux/stat.h>
29 #include <linux/fcntl.h>
30 #include <linux/net.h>
31 #include <linux/unistd.h>
32 #include <linux/slab.h>
33 #include <linux/pagemap.h>
34 #include <linux/in.h>
35 #include <linux/module.h>
36 #include <linux/namei.h>
37 #include <linux/vfs.h>
38 #include <linux/delay.h>
39 #include <linux/sunrpc/svc.h>
40 #include <linux/nfsd/nfsd.h>
41 #ifdef CONFIG_NFSD_V3
42 #include <linux/nfs3.h>
43 #include <linux/nfsd/xdr3.h>
44 #endif /* CONFIG_NFSD_V3 */
45 #include <linux/nfsd/nfsfh.h>
46 #include <linux/quotaops.h>
47 #include <linux/fsnotify.h>
48 #include <linux/posix_acl.h>
49 #include <linux/posix_acl_xattr.h>
50 #include <linux/xattr.h>
51 #ifdef CONFIG_NFSD_V4
52 #include <linux/nfs4.h>
53 #include <linux/nfs4_acl.h>
54 #include <linux/nfsd_idmap.h>
55 #include <linux/security.h>
56 #endif /* CONFIG_NFSD_V4 */
57 #include <linux/jhash.h>
58
59 #include <asm/uaccess.h>
60
61 #define NFSDDBG_FACILITY                NFSDDBG_FILEOP
62 #define NFSD_PARANOIA
63
64
65 /* We must ignore files (but only files) which might have mandatory
66  * locks on them because there is no way to know if the accesser has
67  * the lock.
68  */
69 #define IS_ISMNDLK(i)   (S_ISREG((i)->i_mode) && MANDATORY_LOCK(i))
70
71 /*
72  * This is a cache of readahead params that help us choose the proper
73  * readahead strategy. Initially, we set all readahead parameters to 0
74  * and let the VFS handle things.
75  * If you increase the number of cached files very much, you'll need to
76  * add a hash table here.
77  */
78 struct raparms {
79         struct raparms          *p_next;
80         unsigned int            p_count;
81         ino_t                   p_ino;
82         dev_t                   p_dev;
83         int                     p_set;
84         struct file_ra_state    p_ra;
85         unsigned int            p_hindex;
86 };
87
88 struct raparm_hbucket {
89         struct raparms          *pb_head;
90         spinlock_t              pb_lock;
91 } ____cacheline_aligned_in_smp;
92
93 static struct raparms *         raparml;
94 #define RAPARM_HASH_BITS        4
95 #define RAPARM_HASH_SIZE        (1<<RAPARM_HASH_BITS)
96 #define RAPARM_HASH_MASK        (RAPARM_HASH_SIZE-1)
97 static struct raparm_hbucket    raparm_hash[RAPARM_HASH_SIZE];
98
99 /* 
100  * Called from nfsd_lookup and encode_dirent. Check if we have crossed 
101  * a mount point.
102  * Returns -EAGAIN leaving *dpp and *expp unchanged, 
103  *  or nfs_ok having possibly changed *dpp and *expp
104  */
105 int
106 nfsd_cross_mnt(struct svc_rqst *rqstp, struct dentry **dpp, 
107                         struct svc_export **expp)
108 {
109         struct svc_export *exp = *expp, *exp2 = NULL;
110         struct dentry *dentry = *dpp;
111         struct vfsmount *mnt = mntget(exp->ex_mnt);
112         struct dentry *mounts = dget(dentry);
113         int err = nfs_ok;
114
115         while (follow_down(&mnt,&mounts)&&d_mountpoint(mounts));
116
117         exp2 = exp_get_by_name(exp->ex_client, mnt, mounts, &rqstp->rq_chandle);
118         if (IS_ERR(exp2)) {
119                 err = PTR_ERR(exp2);
120                 dput(mounts);
121                 mntput(mnt);
122                 goto out;
123         }
124         if (exp2 && ((exp->ex_flags & NFSEXP_CROSSMOUNT) || EX_NOHIDE(exp2))) {
125                 /* successfully crossed mount point */
126                 exp_put(exp);
127                 *expp = exp2;
128                 dput(dentry);
129                 *dpp = mounts;
130         } else {
131                 if (exp2) exp_put(exp2);
132                 dput(mounts);
133         }
134         mntput(mnt);
135 out:
136         return err;
137 }
138
139 /*
140  * Look up one component of a pathname.
141  * N.B. After this call _both_ fhp and resfh need an fh_put
142  *
143  * If the lookup would cross a mountpoint, and the mounted filesystem
144  * is exported to the client with NFSEXP_NOHIDE, then the lookup is
145  * accepted as it stands and the mounted directory is
146  * returned. Otherwise the covered directory is returned.
147  * NOTE: this mountpoint crossing is not supported properly by all
148  *   clients and is explicitly disallowed for NFSv3
149  *      NeilBrown <neilb@cse.unsw.edu.au>
150  */
151 int
152 nfsd_lookup(struct svc_rqst *rqstp, struct svc_fh *fhp, const char *name,
153                                         int len, struct svc_fh *resfh)
154 {
155         struct svc_export       *exp;
156         struct dentry           *dparent;
157         struct dentry           *dentry;
158         int                     err;
159
160         dprintk("nfsd: nfsd_lookup(fh %s, %.*s)\n", SVCFH_fmt(fhp), len,name);
161
162         /* Obtain dentry and export. */
163         err = fh_verify(rqstp, fhp, S_IFDIR, MAY_EXEC);
164         if (err)
165                 return err;
166
167         dparent = fhp->fh_dentry;
168         exp  = fhp->fh_export;
169         exp_get(exp);
170
171         err = nfserr_acces;
172
173         /* Lookup the name, but don't follow links */
174         if (isdotent(name, len)) {
175                 if (len==1)
176                         dentry = dget(dparent);
177                 else if (dparent != exp->ex_dentry) {
178                         dentry = dget_parent(dparent);
179                 } else  if (!EX_NOHIDE(exp))
180                         dentry = dget(dparent); /* .. == . just like at / */
181                 else {
182                         /* checking mountpoint crossing is very different when stepping up */
183                         struct svc_export *exp2 = NULL;
184                         struct dentry *dp;
185                         struct vfsmount *mnt = mntget(exp->ex_mnt);
186                         dentry = dget(dparent);
187                         while(dentry == mnt->mnt_root && follow_up(&mnt, &dentry))
188                                 ;
189                         dp = dget_parent(dentry);
190                         dput(dentry);
191                         dentry = dp;
192
193                         exp2 = exp_parent(exp->ex_client, mnt, dentry,
194                                           &rqstp->rq_chandle);
195                         if (IS_ERR(exp2)) {
196                                 err = PTR_ERR(exp2);
197                                 dput(dentry);
198                                 mntput(mnt);
199                                 goto out_nfserr;
200                         }
201                         if (!exp2) {
202                                 dput(dentry);
203                                 dentry = dget(dparent);
204                         } else {
205                                 exp_put(exp);
206                                 exp = exp2;
207                         }
208                         mntput(mnt);
209                 }
210         } else {
211                 fh_lock(fhp);
212                 dentry = lookup_one_len(name, dparent, len);
213                 err = PTR_ERR(dentry);
214                 if (IS_ERR(dentry))
215                         goto out_nfserr;
216                 /*
217                  * check if we have crossed a mount point ...
218                  */
219                 if (d_mountpoint(dentry)) {
220                         if ((err = nfsd_cross_mnt(rqstp, &dentry, &exp))) {
221                                 dput(dentry);
222                                 goto out_nfserr;
223                         }
224                 }
225         }
226         /*
227          * Note: we compose the file handle now, but as the
228          * dentry may be negative, it may need to be updated.
229          */
230         err = fh_compose(resfh, exp, dentry, fhp);
231         if (!err && !dentry->d_inode)
232                 err = nfserr_noent;
233         dput(dentry);
234 out:
235         exp_put(exp);
236         return err;
237
238 out_nfserr:
239         err = nfserrno(err);
240         goto out;
241 }
242
243 /*
244  * Set various file attributes.
245  * N.B. After this call fhp needs an fh_put
246  */
247 int
248 nfsd_setattr(struct svc_rqst *rqstp, struct svc_fh *fhp, struct iattr *iap,
249              int check_guard, time_t guardtime)
250 {
251         struct dentry   *dentry;
252         struct inode    *inode;
253         int             accmode = MAY_SATTR;
254         int             ftype = 0;
255         int             imode;
256         int             err;
257         int             size_change = 0;
258
259         if (iap->ia_valid & (ATTR_ATIME | ATTR_MTIME | ATTR_SIZE))
260                 accmode |= MAY_WRITE|MAY_OWNER_OVERRIDE;
261         if (iap->ia_valid & ATTR_SIZE)
262                 ftype = S_IFREG;
263
264         /* Get inode */
265         err = fh_verify(rqstp, fhp, ftype, accmode);
266         if (err)
267                 goto out;
268
269         dentry = fhp->fh_dentry;
270         inode = dentry->d_inode;
271
272         /* Ignore any mode updates on symlinks */
273         if (S_ISLNK(inode->i_mode))
274                 iap->ia_valid &= ~ATTR_MODE;
275
276         if (!iap->ia_valid)
277                 goto out;
278
279         /* NFSv2 does not differentiate between "set-[ac]time-to-now"
280          * which only requires access, and "set-[ac]time-to-X" which
281          * requires ownership.
282          * So if it looks like it might be "set both to the same time which
283          * is close to now", and if inode_change_ok fails, then we
284          * convert to "set to now" instead of "set to explicit time"
285          *
286          * We only call inode_change_ok as the last test as technically
287          * it is not an interface that we should be using.  It is only
288          * valid if the filesystem does not define it's own i_op->setattr.
289          */
290 #define BOTH_TIME_SET (ATTR_ATIME_SET | ATTR_MTIME_SET)
291 #define MAX_TOUCH_TIME_ERROR (30*60)
292         if ((iap->ia_valid & BOTH_TIME_SET) == BOTH_TIME_SET
293             && iap->ia_mtime.tv_sec == iap->ia_atime.tv_sec
294             ) {
295             /* Looks probable.  Now just make sure time is in the right ballpark.
296              * Solaris, at least, doesn't seem to care what the time request is.
297              * We require it be within 30 minutes of now.
298              */
299             time_t delta = iap->ia_atime.tv_sec - get_seconds();
300             if (delta<0) delta = -delta;
301             if (delta < MAX_TOUCH_TIME_ERROR &&
302                 inode_change_ok(inode, iap) != 0) {
303                 /* turn off ATTR_[AM]TIME_SET but leave ATTR_[AM]TIME
304                  * this will cause notify_change to set these times to "now"
305                  */
306                 iap->ia_valid &= ~BOTH_TIME_SET;
307             }
308         }
309             
310         /* The size case is special. It changes the file as well as the attributes.  */
311         if (iap->ia_valid & ATTR_SIZE) {
312                 if (iap->ia_size < inode->i_size) {
313                         err = nfsd_permission(fhp->fh_export, dentry, MAY_TRUNC|MAY_OWNER_OVERRIDE);
314                         if (err)
315                                 goto out;
316                 }
317
318                 /*
319                  * If we are changing the size of the file, then
320                  * we need to break all leases.
321                  */
322                 err = break_lease(inode, FMODE_WRITE | O_NONBLOCK);
323                 if (err == -EWOULDBLOCK)
324                         err = -ETIMEDOUT;
325                 if (err) /* ENOMEM or EWOULDBLOCK */
326                         goto out_nfserr;
327
328                 err = get_write_access(inode);
329                 if (err)
330                         goto out_nfserr;
331
332                 size_change = 1;
333                 err = locks_verify_truncate(inode, NULL, iap->ia_size);
334                 if (err) {
335                         put_write_access(inode);
336                         goto out_nfserr;
337                 }
338                 DQUOT_INIT(inode);
339         }
340
341         imode = inode->i_mode;
342         if (iap->ia_valid & ATTR_MODE) {
343                 iap->ia_mode &= S_IALLUGO;
344                 imode = iap->ia_mode |= (imode & ~S_IALLUGO);
345         }
346
347         /* Revoke setuid/setgid bit on chown/chgrp */
348         if ((iap->ia_valid & ATTR_UID) && iap->ia_uid != inode->i_uid)
349                 iap->ia_valid |= ATTR_KILL_SUID;
350         if ((iap->ia_valid & ATTR_GID) && iap->ia_gid != inode->i_gid)
351                 iap->ia_valid |= ATTR_KILL_SGID;
352
353         /* Change the attributes. */
354
355         iap->ia_valid |= ATTR_CTIME;
356
357         err = nfserr_notsync;
358         if (!check_guard || guardtime == inode->i_ctime.tv_sec) {
359                 fh_lock(fhp);
360                 err = notify_change(dentry, iap);
361                 err = nfserrno(err);
362                 fh_unlock(fhp);
363         }
364         if (size_change)
365                 put_write_access(inode);
366         if (!err)
367                 if (EX_ISSYNC(fhp->fh_export))
368                         write_inode_now(inode, 1);
369 out:
370         return err;
371
372 out_nfserr:
373         err = nfserrno(err);
374         goto out;
375 }
376
377 #if defined(CONFIG_NFSD_V2_ACL) || \
378     defined(CONFIG_NFSD_V3_ACL) || \
379     defined(CONFIG_NFSD_V4)
380 static ssize_t nfsd_getxattr(struct dentry *dentry, char *key, void **buf)
381 {
382         ssize_t buflen;
383
384         buflen = vfs_getxattr(dentry, key, NULL, 0);
385         if (buflen <= 0)
386                 return buflen;
387
388         *buf = kmalloc(buflen, GFP_KERNEL);
389         if (!*buf)
390                 return -ENOMEM;
391
392         return vfs_getxattr(dentry, key, *buf, buflen);
393 }
394 #endif
395
396 #if defined(CONFIG_NFSD_V4)
397 static int
398 set_nfsv4_acl_one(struct dentry *dentry, struct posix_acl *pacl, char *key)
399 {
400         int len;
401         size_t buflen;
402         char *buf = NULL;
403         int error = 0;
404
405         buflen = posix_acl_xattr_size(pacl->a_count);
406         buf = kmalloc(buflen, GFP_KERNEL);
407         error = -ENOMEM;
408         if (buf == NULL)
409                 goto out;
410
411         len = posix_acl_to_xattr(pacl, buf, buflen);
412         if (len < 0) {
413                 error = len;
414                 goto out;
415         }
416
417         error = vfs_setxattr(dentry, key, buf, len, 0);
418 out:
419         kfree(buf);
420         return error;
421 }
422
423 int
424 nfsd4_set_nfs4_acl(struct svc_rqst *rqstp, struct svc_fh *fhp,
425     struct nfs4_acl *acl)
426 {
427         int error;
428         struct dentry *dentry;
429         struct inode *inode;
430         struct posix_acl *pacl = NULL, *dpacl = NULL;
431         unsigned int flags = 0;
432
433         /* Get inode */
434         error = fh_verify(rqstp, fhp, 0 /* S_IFREG */, MAY_SATTR);
435         if (error)
436                 goto out;
437
438         dentry = fhp->fh_dentry;
439         inode = dentry->d_inode;
440         if (S_ISDIR(inode->i_mode))
441                 flags = NFS4_ACL_DIR;
442
443         error = nfs4_acl_nfsv4_to_posix(acl, &pacl, &dpacl, flags);
444         if (error == -EINVAL) {
445                 error = nfserr_attrnotsupp;
446                 goto out;
447         } else if (error < 0)
448                 goto out_nfserr;
449
450         if (pacl) {
451                 error = set_nfsv4_acl_one(dentry, pacl, POSIX_ACL_XATTR_ACCESS);
452                 if (error < 0)
453                         goto out_nfserr;
454         }
455
456         if (dpacl) {
457                 error = set_nfsv4_acl_one(dentry, dpacl, POSIX_ACL_XATTR_DEFAULT);
458                 if (error < 0)
459                         goto out_nfserr;
460         }
461
462         error = nfs_ok;
463
464 out:
465         posix_acl_release(pacl);
466         posix_acl_release(dpacl);
467         return (error);
468 out_nfserr:
469         error = nfserrno(error);
470         goto out;
471 }
472
473 static struct posix_acl *
474 _get_posix_acl(struct dentry *dentry, char *key)
475 {
476         void *buf = NULL;
477         struct posix_acl *pacl = NULL;
478         int buflen;
479
480         buflen = nfsd_getxattr(dentry, key, &buf);
481         if (!buflen)
482                 buflen = -ENODATA;
483         if (buflen <= 0)
484                 return ERR_PTR(buflen);
485
486         pacl = posix_acl_from_xattr(buf, buflen);
487         kfree(buf);
488         return pacl;
489 }
490
491 int
492 nfsd4_get_nfs4_acl(struct svc_rqst *rqstp, struct dentry *dentry, struct nfs4_acl **acl)
493 {
494         struct inode *inode = dentry->d_inode;
495         int error = 0;
496         struct posix_acl *pacl = NULL, *dpacl = NULL;
497         unsigned int flags = 0;
498
499         pacl = _get_posix_acl(dentry, POSIX_ACL_XATTR_ACCESS);
500         if (IS_ERR(pacl) && PTR_ERR(pacl) == -ENODATA)
501                 pacl = posix_acl_from_mode(inode->i_mode, GFP_KERNEL);
502         if (IS_ERR(pacl)) {
503                 error = PTR_ERR(pacl);
504                 pacl = NULL;
505                 goto out;
506         }
507
508         if (S_ISDIR(inode->i_mode)) {
509                 dpacl = _get_posix_acl(dentry, POSIX_ACL_XATTR_DEFAULT);
510                 if (IS_ERR(dpacl) && PTR_ERR(dpacl) == -ENODATA)
511                         dpacl = NULL;
512                 else if (IS_ERR(dpacl)) {
513                         error = PTR_ERR(dpacl);
514                         dpacl = NULL;
515                         goto out;
516                 }
517                 flags = NFS4_ACL_DIR;
518         }
519
520         *acl = nfs4_acl_posix_to_nfsv4(pacl, dpacl, flags);
521         if (IS_ERR(*acl)) {
522                 error = PTR_ERR(*acl);
523                 *acl = NULL;
524         }
525  out:
526         posix_acl_release(pacl);
527         posix_acl_release(dpacl);
528         return error;
529 }
530
531 #endif /* defined(CONFIG_NFS_V4) */
532
533 #ifdef CONFIG_NFSD_V3
534 /*
535  * Check server access rights to a file system object
536  */
537 struct accessmap {
538         u32             access;
539         int             how;
540 };
541 static struct accessmap nfs3_regaccess[] = {
542     {   NFS3_ACCESS_READ,       MAY_READ                        },
543     {   NFS3_ACCESS_EXECUTE,    MAY_EXEC                        },
544     {   NFS3_ACCESS_MODIFY,     MAY_WRITE|MAY_TRUNC             },
545     {   NFS3_ACCESS_EXTEND,     MAY_WRITE                       },
546
547     {   0,                      0                               }
548 };
549
550 static struct accessmap nfs3_diraccess[] = {
551     {   NFS3_ACCESS_READ,       MAY_READ                        },
552     {   NFS3_ACCESS_LOOKUP,     MAY_EXEC                        },
553     {   NFS3_ACCESS_MODIFY,     MAY_EXEC|MAY_WRITE|MAY_TRUNC    },
554     {   NFS3_ACCESS_EXTEND,     MAY_EXEC|MAY_WRITE              },
555     {   NFS3_ACCESS_DELETE,     MAY_REMOVE                      },
556
557     {   0,                      0                               }
558 };
559
560 static struct accessmap nfs3_anyaccess[] = {
561         /* Some clients - Solaris 2.6 at least, make an access call
562          * to the server to check for access for things like /dev/null
563          * (which really, the server doesn't care about).  So
564          * We provide simple access checking for them, looking
565          * mainly at mode bits, and we make sure to ignore read-only
566          * filesystem checks
567          */
568     {   NFS3_ACCESS_READ,       MAY_READ                        },
569     {   NFS3_ACCESS_EXECUTE,    MAY_EXEC                        },
570     {   NFS3_ACCESS_MODIFY,     MAY_WRITE|MAY_LOCAL_ACCESS      },
571     {   NFS3_ACCESS_EXTEND,     MAY_WRITE|MAY_LOCAL_ACCESS      },
572
573     {   0,                      0                               }
574 };
575
576 int
577 nfsd_access(struct svc_rqst *rqstp, struct svc_fh *fhp, u32 *access, u32 *supported)
578 {
579         struct accessmap        *map;
580         struct svc_export       *export;
581         struct dentry           *dentry;
582         u32                     query, result = 0, sresult = 0;
583         unsigned int            error;
584
585         error = fh_verify(rqstp, fhp, 0, MAY_NOP);
586         if (error)
587                 goto out;
588
589         export = fhp->fh_export;
590         dentry = fhp->fh_dentry;
591
592         if (S_ISREG(dentry->d_inode->i_mode))
593                 map = nfs3_regaccess;
594         else if (S_ISDIR(dentry->d_inode->i_mode))
595                 map = nfs3_diraccess;
596         else
597                 map = nfs3_anyaccess;
598
599
600         query = *access;
601         for  (; map->access; map++) {
602                 if (map->access & query) {
603                         unsigned int err2;
604
605                         sresult |= map->access;
606
607                         err2 = nfsd_permission(export, dentry, map->how);
608                         switch (err2) {
609                         case nfs_ok:
610                                 result |= map->access;
611                                 break;
612                                 
613                         /* the following error codes just mean the access was not allowed,
614                          * rather than an error occurred */
615                         case nfserr_rofs:
616                         case nfserr_acces:
617                         case nfserr_perm:
618                                 /* simply don't "or" in the access bit. */
619                                 break;
620                         default:
621                                 error = err2;
622                                 goto out;
623                         }
624                 }
625         }
626         *access = result;
627         if (supported)
628                 *supported = sresult;
629
630  out:
631         return error;
632 }
633 #endif /* CONFIG_NFSD_V3 */
634
635
636
637 /*
638  * Open an existing file or directory.
639  * The access argument indicates the type of open (read/write/lock)
640  * N.B. After this call fhp needs an fh_put
641  */
642 int
643 nfsd_open(struct svc_rqst *rqstp, struct svc_fh *fhp, int type,
644                         int access, struct file **filp)
645 {
646         struct dentry   *dentry;
647         struct inode    *inode;
648         int             flags = O_RDONLY|O_LARGEFILE, err;
649
650         /*
651          * If we get here, then the client has already done an "open",
652          * and (hopefully) checked permission - so allow OWNER_OVERRIDE
653          * in case a chmod has now revoked permission.
654          */
655         err = fh_verify(rqstp, fhp, type, access | MAY_OWNER_OVERRIDE);
656         if (err)
657                 goto out;
658
659         dentry = fhp->fh_dentry;
660         inode = dentry->d_inode;
661
662         /* Disallow write access to files with the append-only bit set
663          * or any access when mandatory locking enabled
664          */
665         err = nfserr_perm;
666         if (IS_APPEND(inode) && (access & MAY_WRITE))
667                 goto out;
668         if (IS_ISMNDLK(inode))
669                 goto out;
670
671         if (!inode->i_fop)
672                 goto out;
673
674         /*
675          * Check to see if there are any leases on this file.
676          * This may block while leases are broken.
677          */
678         err = break_lease(inode, O_NONBLOCK | ((access & MAY_WRITE) ? FMODE_WRITE : 0));
679         if (err == -EWOULDBLOCK)
680                 err = -ETIMEDOUT;
681         if (err) /* NOMEM or WOULDBLOCK */
682                 goto out_nfserr;
683
684         if (access & MAY_WRITE) {
685                 if (access & MAY_READ)
686                         flags = O_RDWR|O_LARGEFILE;
687                 else
688                         flags = O_WRONLY|O_LARGEFILE;
689
690                 DQUOT_INIT(inode);
691         }
692         *filp = dentry_open(dget(dentry), mntget(fhp->fh_export->ex_mnt), flags);
693         if (IS_ERR(*filp))
694                 err = PTR_ERR(*filp);
695 out_nfserr:
696         if (err)
697                 err = nfserrno(err);
698 out:
699         return err;
700 }
701
702 /*
703  * Close a file.
704  */
705 void
706 nfsd_close(struct file *filp)
707 {
708         fput(filp);
709 }
710
711 /*
712  * Sync a file
713  * As this calls fsync (not fdatasync) there is no need for a write_inode
714  * after it.
715  */
716 static inline int nfsd_dosync(struct file *filp, struct dentry *dp,
717                               const struct file_operations *fop)
718 {
719         struct inode *inode = dp->d_inode;
720         int (*fsync) (struct file *, struct dentry *, int);
721         int err;
722
723         err = filemap_fdatawrite(inode->i_mapping);
724         if (err == 0 && fop && (fsync = fop->fsync))
725                 err = fsync(filp, dp, 0);
726         if (err == 0)
727                 err = filemap_fdatawait(inode->i_mapping);
728
729         return err;
730 }
731         
732
733 static int
734 nfsd_sync(struct file *filp)
735 {
736         int err;
737         struct inode *inode = filp->f_dentry->d_inode;
738         dprintk("nfsd: sync file %s\n", filp->f_dentry->d_name.name);
739         mutex_lock(&inode->i_mutex);
740         err=nfsd_dosync(filp, filp->f_dentry, filp->f_op);
741         mutex_unlock(&inode->i_mutex);
742
743         return err;
744 }
745
746 int
747 nfsd_sync_dir(struct dentry *dp)
748 {
749         return nfsd_dosync(NULL, dp, dp->d_inode->i_fop);
750 }
751
752 /*
753  * Obtain the readahead parameters for the file
754  * specified by (dev, ino).
755  */
756
757 static inline struct raparms *
758 nfsd_get_raparms(dev_t dev, ino_t ino)
759 {
760         struct raparms  *ra, **rap, **frap = NULL;
761         int depth = 0;
762         unsigned int hash;
763         struct raparm_hbucket *rab;
764
765         hash = jhash_2words(dev, ino, 0xfeedbeef) & RAPARM_HASH_MASK;
766         rab = &raparm_hash[hash];
767
768         spin_lock(&rab->pb_lock);
769         for (rap = &rab->pb_head; (ra = *rap); rap = &ra->p_next) {
770                 if (ra->p_ino == ino && ra->p_dev == dev)
771                         goto found;
772                 depth++;
773                 if (ra->p_count == 0)
774                         frap = rap;
775         }
776         depth = nfsdstats.ra_size*11/10;
777         if (!frap) {    
778                 spin_unlock(&rab->pb_lock);
779                 return NULL;
780         }
781         rap = frap;
782         ra = *frap;
783         ra->p_dev = dev;
784         ra->p_ino = ino;
785         ra->p_set = 0;
786         ra->p_hindex = hash;
787 found:
788         if (rap != &rab->pb_head) {
789                 *rap = ra->p_next;
790                 ra->p_next   = rab->pb_head;
791                 rab->pb_head = ra;
792         }
793         ra->p_count++;
794         nfsdstats.ra_depth[depth*10/nfsdstats.ra_size]++;
795         spin_unlock(&rab->pb_lock);
796         return ra;
797 }
798
799 /*
800  * Grab and keep cached pages assosiated with a file in the svc_rqst
801  * so that they can be passed to the netowork sendmsg/sendpage routines
802  * directrly. They will be released after the sending has completed.
803  */
804 static int
805 nfsd_read_actor(read_descriptor_t *desc, struct page *page, unsigned long offset , unsigned long size)
806 {
807         unsigned long count = desc->count;
808         struct svc_rqst *rqstp = desc->arg.data;
809         struct page **pp = rqstp->rq_respages + rqstp->rq_resused;
810
811         if (size > count)
812                 size = count;
813
814         if (rqstp->rq_res.page_len == 0) {
815                 get_page(page);
816                 put_page(*pp);
817                 *pp = page;
818                 rqstp->rq_resused++;
819                 rqstp->rq_res.page_base = offset;
820                 rqstp->rq_res.page_len = size;
821         } else if (page != pp[-1]) {
822                 get_page(page);
823                 put_page(*pp);
824                 *pp = page;
825                 rqstp->rq_resused++;
826                 rqstp->rq_res.page_len += size;
827         } else
828                 rqstp->rq_res.page_len += size;
829
830         desc->count = count - size;
831         desc->written += size;
832         return size;
833 }
834
835 static int
836 nfsd_vfs_read(struct svc_rqst *rqstp, struct svc_fh *fhp, struct file *file,
837               loff_t offset, struct kvec *vec, int vlen, unsigned long *count)
838 {
839         struct inode *inode;
840         struct raparms  *ra;
841         mm_segment_t    oldfs;
842         int             err;
843
844         err = nfserr_perm;
845         inode = file->f_dentry->d_inode;
846 #ifdef MSNFS
847         if ((fhp->fh_export->ex_flags & NFSEXP_MSNFS) &&
848                 (!lock_may_read(inode, offset, *count)))
849                 goto out;
850 #endif
851
852         /* Get readahead parameters */
853         ra = nfsd_get_raparms(inode->i_sb->s_dev, inode->i_ino);
854
855         if (ra && ra->p_set)
856                 file->f_ra = ra->p_ra;
857
858         if (file->f_op->sendfile && rqstp->rq_sendfile_ok) {
859                 rqstp->rq_resused = 1;
860                 err = file->f_op->sendfile(file, &offset, *count,
861                                                  nfsd_read_actor, rqstp);
862         } else {
863                 oldfs = get_fs();
864                 set_fs(KERNEL_DS);
865                 err = vfs_readv(file, (struct iovec __user *)vec, vlen, &offset);
866                 set_fs(oldfs);
867         }
868
869         /* Write back readahead params */
870         if (ra) {
871                 struct raparm_hbucket *rab = &raparm_hash[ra->p_hindex];
872                 spin_lock(&rab->pb_lock);
873                 ra->p_ra = file->f_ra;
874                 ra->p_set = 1;
875                 ra->p_count--;
876                 spin_unlock(&rab->pb_lock);
877         }
878
879         if (err >= 0) {
880                 nfsdstats.io_read += err;
881                 *count = err;
882                 err = 0;
883                 fsnotify_access(file->f_dentry);
884         } else 
885                 err = nfserrno(err);
886 out:
887         return err;
888 }
889
890 static void kill_suid(struct dentry *dentry)
891 {
892         struct iattr    ia;
893         ia.ia_valid = ATTR_KILL_SUID | ATTR_KILL_SGID;
894
895         mutex_lock(&dentry->d_inode->i_mutex);
896         notify_change(dentry, &ia);
897         mutex_unlock(&dentry->d_inode->i_mutex);
898 }
899
900 static int
901 nfsd_vfs_write(struct svc_rqst *rqstp, struct svc_fh *fhp, struct file *file,
902                                 loff_t offset, struct kvec *vec, int vlen,
903                                 unsigned long cnt, int *stablep)
904 {
905         struct svc_export       *exp;
906         struct dentry           *dentry;
907         struct inode            *inode;
908         mm_segment_t            oldfs;
909         int                     err = 0;
910         int                     stable = *stablep;
911
912 #ifdef MSNFS
913         err = nfserr_perm;
914
915         if ((fhp->fh_export->ex_flags & NFSEXP_MSNFS) &&
916                 (!lock_may_write(file->f_dentry->d_inode, offset, cnt)))
917                 goto out;
918 #endif
919
920         dentry = file->f_dentry;
921         inode = dentry->d_inode;
922         exp   = fhp->fh_export;
923
924         /*
925          * Request sync writes if
926          *  -   the sync export option has been set, or
927          *  -   the client requested O_SYNC behavior (NFSv3 feature).
928          *  -   The file system doesn't support fsync().
929          * When gathered writes have been configured for this volume,
930          * flushing the data to disk is handled separately below.
931          */
932
933         if (file->f_op->fsync == 0) {/* COMMIT3 cannot work */
934                stable = 2;
935                *stablep = 2; /* FILE_SYNC */
936         }
937
938         if (!EX_ISSYNC(exp))
939                 stable = 0;
940         if (stable && !EX_WGATHER(exp))
941                 file->f_flags |= O_SYNC;
942
943         /* Write the data. */
944         oldfs = get_fs(); set_fs(KERNEL_DS);
945         err = vfs_writev(file, (struct iovec __user *)vec, vlen, &offset);
946         set_fs(oldfs);
947         if (err >= 0) {
948                 nfsdstats.io_write += cnt;
949                 fsnotify_modify(file->f_dentry);
950         }
951
952         /* clear setuid/setgid flag after write */
953         if (err >= 0 && (inode->i_mode & (S_ISUID | S_ISGID)))
954                 kill_suid(dentry);
955
956         if (err >= 0 && stable) {
957                 static ino_t    last_ino;
958                 static dev_t    last_dev;
959
960                 /*
961                  * Gathered writes: If another process is currently
962                  * writing to the file, there's a high chance
963                  * this is another nfsd (triggered by a bulk write
964                  * from a client's biod). Rather than syncing the
965                  * file with each write request, we sleep for 10 msec.
966                  *
967                  * I don't know if this roughly approximates
968                  * C. Juszak's idea of gathered writes, but it's a
969                  * nice and simple solution (IMHO), and it seems to
970                  * work:-)
971                  */
972                 if (EX_WGATHER(exp)) {
973                         if (atomic_read(&inode->i_writecount) > 1
974                             || (last_ino == inode->i_ino && last_dev == inode->i_sb->s_dev)) {
975                                 dprintk("nfsd: write defer %d\n", current->pid);
976                                 msleep(10);
977                                 dprintk("nfsd: write resume %d\n", current->pid);
978                         }
979
980                         if (inode->i_state & I_DIRTY) {
981                                 dprintk("nfsd: write sync %d\n", current->pid);
982                                 err=nfsd_sync(file);
983                         }
984 #if 0
985                         wake_up(&inode->i_wait);
986 #endif
987                 }
988                 last_ino = inode->i_ino;
989                 last_dev = inode->i_sb->s_dev;
990         }
991
992         dprintk("nfsd: write complete err=%d\n", err);
993         if (err >= 0)
994                 err = 0;
995         else 
996                 err = nfserrno(err);
997 out:
998         return err;
999 }
1000
1001 /*
1002  * Read data from a file. count must contain the requested read count
1003  * on entry. On return, *count contains the number of bytes actually read.
1004  * N.B. After this call fhp needs an fh_put
1005  */
1006 int
1007 nfsd_read(struct svc_rqst *rqstp, struct svc_fh *fhp, struct file *file,
1008                 loff_t offset, struct kvec *vec, int vlen,
1009                 unsigned long *count)
1010 {
1011         int             err;
1012
1013         if (file) {
1014                 err = nfsd_permission(fhp->fh_export, fhp->fh_dentry,
1015                                 MAY_READ|MAY_OWNER_OVERRIDE);
1016                 if (err)
1017                         goto out;
1018                 err = nfsd_vfs_read(rqstp, fhp, file, offset, vec, vlen, count);
1019         } else {
1020                 err = nfsd_open(rqstp, fhp, S_IFREG, MAY_READ, &file);
1021                 if (err)
1022                         goto out;
1023                 err = nfsd_vfs_read(rqstp, fhp, file, offset, vec, vlen, count);
1024                 nfsd_close(file);
1025         }
1026 out:
1027         return err;
1028 }
1029
1030 /*
1031  * Write data to a file.
1032  * The stable flag requests synchronous writes.
1033  * N.B. After this call fhp needs an fh_put
1034  */
1035 int
1036 nfsd_write(struct svc_rqst *rqstp, struct svc_fh *fhp, struct file *file,
1037                 loff_t offset, struct kvec *vec, int vlen, unsigned long cnt,
1038                 int *stablep)
1039 {
1040         int                     err = 0;
1041
1042         if (file) {
1043                 err = nfsd_permission(fhp->fh_export, fhp->fh_dentry,
1044                                 MAY_WRITE|MAY_OWNER_OVERRIDE);
1045                 if (err)
1046                         goto out;
1047                 err = nfsd_vfs_write(rqstp, fhp, file, offset, vec, vlen, cnt,
1048                                 stablep);
1049         } else {
1050                 err = nfsd_open(rqstp, fhp, S_IFREG, MAY_WRITE, &file);
1051                 if (err)
1052                         goto out;
1053
1054                 if (cnt)
1055                         err = nfsd_vfs_write(rqstp, fhp, file, offset, vec, vlen,
1056                                              cnt, stablep);
1057                 nfsd_close(file);
1058         }
1059 out:
1060         return err;
1061 }
1062
1063 #ifdef CONFIG_NFSD_V3
1064 /*
1065  * Commit all pending writes to stable storage.
1066  * Strictly speaking, we could sync just the indicated file region here,
1067  * but there's currently no way we can ask the VFS to do so.
1068  *
1069  * Unfortunately we cannot lock the file to make sure we return full WCC
1070  * data to the client, as locking happens lower down in the filesystem.
1071  */
1072 int
1073 nfsd_commit(struct svc_rqst *rqstp, struct svc_fh *fhp,
1074                loff_t offset, unsigned long count)
1075 {
1076         struct file     *file;
1077         int             err;
1078
1079         if ((u64)count > ~(u64)offset)
1080                 return nfserr_inval;
1081
1082         if ((err = nfsd_open(rqstp, fhp, S_IFREG, MAY_WRITE, &file)) != 0)
1083                 return err;
1084         if (EX_ISSYNC(fhp->fh_export)) {
1085                 if (file->f_op && file->f_op->fsync) {
1086                         err = nfserrno(nfsd_sync(file));
1087                 } else {
1088                         err = nfserr_notsupp;
1089                 }
1090         }
1091
1092         nfsd_close(file);
1093         return err;
1094 }
1095 #endif /* CONFIG_NFSD_V3 */
1096
1097 /*
1098  * Create a file (regular, directory, device, fifo); UNIX sockets 
1099  * not yet implemented.
1100  * If the response fh has been verified, the parent directory should
1101  * already be locked. Note that the parent directory is left locked.
1102  *
1103  * N.B. Every call to nfsd_create needs an fh_put for _both_ fhp and resfhp
1104  */
1105 int
1106 nfsd_create(struct svc_rqst *rqstp, struct svc_fh *fhp,
1107                 char *fname, int flen, struct iattr *iap,
1108                 int type, dev_t rdev, struct svc_fh *resfhp)
1109 {
1110         struct dentry   *dentry, *dchild = NULL;
1111         struct inode    *dirp;
1112         int             err;
1113
1114         err = nfserr_perm;
1115         if (!flen)
1116                 goto out;
1117         err = nfserr_exist;
1118         if (isdotent(fname, flen))
1119                 goto out;
1120
1121         err = fh_verify(rqstp, fhp, S_IFDIR, MAY_CREATE);
1122         if (err)
1123                 goto out;
1124
1125         dentry = fhp->fh_dentry;
1126         dirp = dentry->d_inode;
1127
1128         err = nfserr_notdir;
1129         if(!dirp->i_op || !dirp->i_op->lookup)
1130                 goto out;
1131         /*
1132          * Check whether the response file handle has been verified yet.
1133          * If it has, the parent directory should already be locked.
1134          */
1135         if (!resfhp->fh_dentry) {
1136                 /* called from nfsd_proc_mkdir, or possibly nfsd3_proc_create */
1137                 fh_lock_nested(fhp, I_MUTEX_PARENT);
1138                 dchild = lookup_one_len(fname, dentry, flen);
1139                 err = PTR_ERR(dchild);
1140                 if (IS_ERR(dchild))
1141                         goto out_nfserr;
1142                 err = fh_compose(resfhp, fhp->fh_export, dchild, fhp);
1143                 if (err)
1144                         goto out;
1145         } else {
1146                 /* called from nfsd_proc_create */
1147                 dchild = dget(resfhp->fh_dentry);
1148                 if (!fhp->fh_locked) {
1149                         /* not actually possible */
1150                         printk(KERN_ERR
1151                                 "nfsd_create: parent %s/%s not locked!\n",
1152                                 dentry->d_parent->d_name.name,
1153                                 dentry->d_name.name);
1154                         err = nfserr_io;
1155                         goto out;
1156                 }
1157         }
1158         /*
1159          * Make sure the child dentry is still negative ...
1160          */
1161         err = nfserr_exist;
1162         if (dchild->d_inode) {
1163                 dprintk("nfsd_create: dentry %s/%s not negative!\n",
1164                         dentry->d_name.name, dchild->d_name.name);
1165                 goto out; 
1166         }
1167
1168         if (!(iap->ia_valid & ATTR_MODE))
1169                 iap->ia_mode = 0;
1170         iap->ia_mode = (iap->ia_mode & S_IALLUGO) | type;
1171
1172         /*
1173          * Get the dir op function pointer.
1174          */
1175         err = nfserr_perm;
1176         switch (type) {
1177         case S_IFREG:
1178                 err = vfs_create(dirp, dchild, iap->ia_mode, NULL);
1179                 break;
1180         case S_IFDIR:
1181                 err = vfs_mkdir(dirp, dchild, iap->ia_mode);
1182                 break;
1183         case S_IFCHR:
1184         case S_IFBLK:
1185         case S_IFIFO:
1186         case S_IFSOCK:
1187                 err = vfs_mknod(dirp, dchild, iap->ia_mode, rdev);
1188                 break;
1189         default:
1190                 printk("nfsd: bad file type %o in nfsd_create\n", type);
1191                 err = -EINVAL;
1192         }
1193         if (err < 0)
1194                 goto out_nfserr;
1195
1196         if (EX_ISSYNC(fhp->fh_export)) {
1197                 err = nfserrno(nfsd_sync_dir(dentry));
1198                 write_inode_now(dchild->d_inode, 1);
1199         }
1200
1201
1202         /* Set file attributes. Mode has already been set and
1203          * setting uid/gid works only for root. Irix appears to
1204          * send along the gid when it tries to implement setgid
1205          * directories via NFS.
1206          */
1207         if ((iap->ia_valid &= ~(ATTR_UID|ATTR_GID|ATTR_MODE)) != 0) {
1208                 int err2 = nfsd_setattr(rqstp, resfhp, iap, 0, (time_t)0);
1209                 if (err2)
1210                         err = err2;
1211         }
1212         /*
1213          * Update the file handle to get the new inode info.
1214          */
1215         if (!err)
1216                 err = fh_update(resfhp);
1217 out:
1218         if (dchild && !IS_ERR(dchild))
1219                 dput(dchild);
1220         return err;
1221
1222 out_nfserr:
1223         err = nfserrno(err);
1224         goto out;
1225 }
1226
1227 #ifdef CONFIG_NFSD_V3
1228 /*
1229  * NFSv3 version of nfsd_create
1230  */
1231 int
1232 nfsd_create_v3(struct svc_rqst *rqstp, struct svc_fh *fhp,
1233                 char *fname, int flen, struct iattr *iap,
1234                 struct svc_fh *resfhp, int createmode, u32 *verifier,
1235                 int *truncp)
1236 {
1237         struct dentry   *dentry, *dchild = NULL;
1238         struct inode    *dirp;
1239         int             err;
1240         __u32           v_mtime=0, v_atime=0;
1241         int             v_mode=0;
1242
1243         err = nfserr_perm;
1244         if (!flen)
1245                 goto out;
1246         err = nfserr_exist;
1247         if (isdotent(fname, flen))
1248                 goto out;
1249         if (!(iap->ia_valid & ATTR_MODE))
1250                 iap->ia_mode = 0;
1251         err = fh_verify(rqstp, fhp, S_IFDIR, MAY_CREATE);
1252         if (err)
1253                 goto out;
1254
1255         dentry = fhp->fh_dentry;
1256         dirp = dentry->d_inode;
1257
1258         /* Get all the sanity checks out of the way before
1259          * we lock the parent. */
1260         err = nfserr_notdir;
1261         if(!dirp->i_op || !dirp->i_op->lookup)
1262                 goto out;
1263         fh_lock_nested(fhp, I_MUTEX_PARENT);
1264
1265         /*
1266          * Compose the response file handle.
1267          */
1268         dchild = lookup_one_len(fname, dentry, flen);
1269         err = PTR_ERR(dchild);
1270         if (IS_ERR(dchild))
1271                 goto out_nfserr;
1272
1273         err = fh_compose(resfhp, fhp->fh_export, dchild, fhp);
1274         if (err)
1275                 goto out;
1276
1277         if (createmode == NFS3_CREATE_EXCLUSIVE) {
1278                 /* while the verifier would fit in mtime+atime,
1279                  * solaris7 gets confused (bugid 4218508) if these have
1280                  * the high bit set, so we use the mode as well
1281                  */
1282                 v_mtime = verifier[0]&0x7fffffff;
1283                 v_atime = verifier[1]&0x7fffffff;
1284                 v_mode  = S_IFREG
1285                         | ((verifier[0]&0x80000000) >> (32-7)) /* u+x */
1286                         | ((verifier[1]&0x80000000) >> (32-9)) /* u+r */
1287                         ;
1288         }
1289         
1290         if (dchild->d_inode) {
1291                 err = 0;
1292
1293                 switch (createmode) {
1294                 case NFS3_CREATE_UNCHECKED:
1295                         if (! S_ISREG(dchild->d_inode->i_mode))
1296                                 err = nfserr_exist;
1297                         else if (truncp) {
1298                                 /* in nfsv4, we need to treat this case a little
1299                                  * differently.  we don't want to truncate the
1300                                  * file now; this would be wrong if the OPEN
1301                                  * fails for some other reason.  furthermore,
1302                                  * if the size is nonzero, we should ignore it
1303                                  * according to spec!
1304                                  */
1305                                 *truncp = (iap->ia_valid & ATTR_SIZE) && !iap->ia_size;
1306                         }
1307                         else {
1308                                 iap->ia_valid &= ATTR_SIZE;
1309                                 goto set_attr;
1310                         }
1311                         break;
1312                 case NFS3_CREATE_EXCLUSIVE:
1313                         if (   dchild->d_inode->i_mtime.tv_sec == v_mtime
1314                             && dchild->d_inode->i_atime.tv_sec == v_atime
1315                             && dchild->d_inode->i_mode  == v_mode
1316                             && dchild->d_inode->i_size  == 0 )
1317                                 break;
1318                          /* fallthru */
1319                 case NFS3_CREATE_GUARDED:
1320                         err = nfserr_exist;
1321                 }
1322                 goto out;
1323         }
1324
1325         err = vfs_create(dirp, dchild, iap->ia_mode, NULL);
1326         if (err < 0)
1327                 goto out_nfserr;
1328
1329         if (EX_ISSYNC(fhp->fh_export)) {
1330                 err = nfserrno(nfsd_sync_dir(dentry));
1331                 /* setattr will sync the child (or not) */
1332         }
1333
1334         if (createmode == NFS3_CREATE_EXCLUSIVE) {
1335                 /* Cram the verifier into atime/mtime/mode */
1336                 iap->ia_valid = ATTR_MTIME|ATTR_ATIME
1337                         | ATTR_MTIME_SET|ATTR_ATIME_SET
1338                         | ATTR_MODE;
1339                 /* XXX someone who knows this better please fix it for nsec */ 
1340                 iap->ia_mtime.tv_sec = v_mtime;
1341                 iap->ia_atime.tv_sec = v_atime;
1342                 iap->ia_mtime.tv_nsec = 0;
1343                 iap->ia_atime.tv_nsec = 0;
1344                 iap->ia_mode  = v_mode;
1345         }
1346
1347         /* Set file attributes.
1348          * Mode has already been set but we might need to reset it
1349          * for CREATE_EXCLUSIVE
1350          * Irix appears to send along the gid when it tries to
1351          * implement setgid directories via NFS. Clear out all that cruft.
1352          */
1353  set_attr:
1354         if ((iap->ia_valid &= ~(ATTR_UID|ATTR_GID)) != 0) {
1355                 int err2 = nfsd_setattr(rqstp, resfhp, iap, 0, (time_t)0);
1356                 if (err2)
1357                         err = err2;
1358         }
1359
1360         /*
1361          * Update the filehandle to get the new inode info.
1362          */
1363         if (!err)
1364                 err = fh_update(resfhp);
1365
1366  out:
1367         fh_unlock(fhp);
1368         if (dchild && !IS_ERR(dchild))
1369                 dput(dchild);
1370         return err;
1371  
1372  out_nfserr:
1373         err = nfserrno(err);
1374         goto out;
1375 }
1376 #endif /* CONFIG_NFSD_V3 */
1377
1378 /*
1379  * Read a symlink. On entry, *lenp must contain the maximum path length that
1380  * fits into the buffer. On return, it contains the true length.
1381  * N.B. After this call fhp needs an fh_put
1382  */
1383 int
1384 nfsd_readlink(struct svc_rqst *rqstp, struct svc_fh *fhp, char *buf, int *lenp)
1385 {
1386         struct dentry   *dentry;
1387         struct inode    *inode;
1388         mm_segment_t    oldfs;
1389         int             err;
1390
1391         err = fh_verify(rqstp, fhp, S_IFLNK, MAY_NOP);
1392         if (err)
1393                 goto out;
1394
1395         dentry = fhp->fh_dentry;
1396         inode = dentry->d_inode;
1397
1398         err = nfserr_inval;
1399         if (!inode->i_op || !inode->i_op->readlink)
1400                 goto out;
1401
1402         touch_atime(fhp->fh_export->ex_mnt, dentry);
1403         /* N.B. Why does this call need a get_fs()??
1404          * Remove the set_fs and watch the fireworks:-) --okir
1405          */
1406
1407         oldfs = get_fs(); set_fs(KERNEL_DS);
1408         err = inode->i_op->readlink(dentry, buf, *lenp);
1409         set_fs(oldfs);
1410
1411         if (err < 0)
1412                 goto out_nfserr;
1413         *lenp = err;
1414         err = 0;
1415 out:
1416         return err;
1417
1418 out_nfserr:
1419         err = nfserrno(err);
1420         goto out;
1421 }
1422
1423 /*
1424  * Create a symlink and look up its inode
1425  * N.B. After this call _both_ fhp and resfhp need an fh_put
1426  */
1427 int
1428 nfsd_symlink(struct svc_rqst *rqstp, struct svc_fh *fhp,
1429                                 char *fname, int flen,
1430                                 char *path,  int plen,
1431                                 struct svc_fh *resfhp,
1432                                 struct iattr *iap)
1433 {
1434         struct dentry   *dentry, *dnew;
1435         int             err, cerr;
1436         umode_t         mode;
1437
1438         err = nfserr_noent;
1439         if (!flen || !plen)
1440                 goto out;
1441         err = nfserr_exist;
1442         if (isdotent(fname, flen))
1443                 goto out;
1444
1445         err = fh_verify(rqstp, fhp, S_IFDIR, MAY_CREATE);
1446         if (err)
1447                 goto out;
1448         fh_lock(fhp);
1449         dentry = fhp->fh_dentry;
1450         dnew = lookup_one_len(fname, dentry, flen);
1451         err = PTR_ERR(dnew);
1452         if (IS_ERR(dnew))
1453                 goto out_nfserr;
1454
1455         mode = S_IALLUGO;
1456         /* Only the MODE ATTRibute is even vaguely meaningful */
1457         if (iap && (iap->ia_valid & ATTR_MODE))
1458                 mode = iap->ia_mode & S_IALLUGO;
1459
1460         if (unlikely(path[plen] != 0)) {
1461                 char *path_alloced = kmalloc(plen+1, GFP_KERNEL);
1462                 if (path_alloced == NULL)
1463                         err = -ENOMEM;
1464                 else {
1465                         strncpy(path_alloced, path, plen);
1466                         path_alloced[plen] = 0;
1467                         err = vfs_symlink(dentry->d_inode, dnew, path_alloced, mode);
1468                         kfree(path_alloced);
1469                 }
1470         } else
1471                 err = vfs_symlink(dentry->d_inode, dnew, path, mode);
1472
1473         if (!err)
1474                 if (EX_ISSYNC(fhp->fh_export))
1475                         err = nfsd_sync_dir(dentry);
1476         if (err)
1477                 err = nfserrno(err);
1478         fh_unlock(fhp);
1479
1480         cerr = fh_compose(resfhp, fhp->fh_export, dnew, fhp);
1481         dput(dnew);
1482         if (err==0) err = cerr;
1483 out:
1484         return err;
1485
1486 out_nfserr:
1487         err = nfserrno(err);
1488         goto out;
1489 }
1490
1491 /*
1492  * Create a hardlink
1493  * N.B. After this call _both_ ffhp and tfhp need an fh_put
1494  */
1495 int
1496 nfsd_link(struct svc_rqst *rqstp, struct svc_fh *ffhp,
1497                                 char *name, int len, struct svc_fh *tfhp)
1498 {
1499         struct dentry   *ddir, *dnew, *dold;
1500         struct inode    *dirp, *dest;
1501         int             err;
1502
1503         err = fh_verify(rqstp, ffhp, S_IFDIR, MAY_CREATE);
1504         if (err)
1505                 goto out;
1506         err = fh_verify(rqstp, tfhp, -S_IFDIR, MAY_NOP);
1507         if (err)
1508                 goto out;
1509
1510         err = nfserr_perm;
1511         if (!len)
1512                 goto out;
1513         err = nfserr_exist;
1514         if (isdotent(name, len))
1515                 goto out;
1516
1517         fh_lock_nested(ffhp, I_MUTEX_PARENT);
1518         ddir = ffhp->fh_dentry;
1519         dirp = ddir->d_inode;
1520
1521         dnew = lookup_one_len(name, ddir, len);
1522         err = PTR_ERR(dnew);
1523         if (IS_ERR(dnew))
1524                 goto out_nfserr;
1525
1526         dold = tfhp->fh_dentry;
1527         dest = dold->d_inode;
1528
1529         err = vfs_link(dold, dirp, dnew);
1530         if (!err) {
1531                 if (EX_ISSYNC(ffhp->fh_export)) {
1532                         err = nfserrno(nfsd_sync_dir(ddir));
1533                         write_inode_now(dest, 1);
1534                 }
1535         } else {
1536                 if (err == -EXDEV && rqstp->rq_vers == 2)
1537                         err = nfserr_acces;
1538                 else
1539                         err = nfserrno(err);
1540         }
1541
1542         dput(dnew);
1543 out_unlock:
1544         fh_unlock(ffhp);
1545 out:
1546         return err;
1547
1548 out_nfserr:
1549         err = nfserrno(err);
1550         goto out_unlock;
1551 }
1552
1553 /*
1554  * Rename a file
1555  * N.B. After this call _both_ ffhp and tfhp need an fh_put
1556  */
1557 int
1558 nfsd_rename(struct svc_rqst *rqstp, struct svc_fh *ffhp, char *fname, int flen,
1559                             struct svc_fh *tfhp, char *tname, int tlen)
1560 {
1561         struct dentry   *fdentry, *tdentry, *odentry, *ndentry, *trap;
1562         struct inode    *fdir, *tdir;
1563         int             err;
1564
1565         err = fh_verify(rqstp, ffhp, S_IFDIR, MAY_REMOVE);
1566         if (err)
1567                 goto out;
1568         err = fh_verify(rqstp, tfhp, S_IFDIR, MAY_CREATE);
1569         if (err)
1570                 goto out;
1571
1572         fdentry = ffhp->fh_dentry;
1573         fdir = fdentry->d_inode;
1574
1575         tdentry = tfhp->fh_dentry;
1576         tdir = tdentry->d_inode;
1577
1578         err = (rqstp->rq_vers == 2) ? nfserr_acces : nfserr_xdev;
1579         if (ffhp->fh_export != tfhp->fh_export)
1580                 goto out;
1581
1582         err = nfserr_perm;
1583         if (!flen || isdotent(fname, flen) || !tlen || isdotent(tname, tlen))
1584                 goto out;
1585
1586         /* cannot use fh_lock as we need deadlock protective ordering
1587          * so do it by hand */
1588         trap = lock_rename(tdentry, fdentry);
1589         ffhp->fh_locked = tfhp->fh_locked = 1;
1590         fill_pre_wcc(ffhp);
1591         fill_pre_wcc(tfhp);
1592
1593         odentry = lookup_one_len(fname, fdentry, flen);
1594         err = PTR_ERR(odentry);
1595         if (IS_ERR(odentry))
1596                 goto out_nfserr;
1597
1598         err = -ENOENT;
1599         if (!odentry->d_inode)
1600                 goto out_dput_old;
1601         err = -EINVAL;
1602         if (odentry == trap)
1603                 goto out_dput_old;
1604
1605         ndentry = lookup_one_len(tname, tdentry, tlen);
1606         err = PTR_ERR(ndentry);
1607         if (IS_ERR(ndentry))
1608                 goto out_dput_old;
1609         err = -ENOTEMPTY;
1610         if (ndentry == trap)
1611                 goto out_dput_new;
1612
1613 #ifdef MSNFS
1614         if ((ffhp->fh_export->ex_flags & NFSEXP_MSNFS) &&
1615                 ((atomic_read(&odentry->d_count) > 1)
1616                  || (atomic_read(&ndentry->d_count) > 1))) {
1617                         err = -EPERM;
1618         } else
1619 #endif
1620         err = vfs_rename(fdir, odentry, tdir, ndentry);
1621         if (!err && EX_ISSYNC(tfhp->fh_export)) {
1622                 err = nfsd_sync_dir(tdentry);
1623                 if (!err)
1624                         err = nfsd_sync_dir(fdentry);
1625         }
1626
1627  out_dput_new:
1628         dput(ndentry);
1629  out_dput_old:
1630         dput(odentry);
1631  out_nfserr:
1632         if (err)
1633                 err = nfserrno(err);
1634
1635         /* we cannot reply on fh_unlock on the two filehandles,
1636          * as that would do the wrong thing if the two directories
1637          * were the same, so again we do it by hand
1638          */
1639         fill_post_wcc(ffhp);
1640         fill_post_wcc(tfhp);
1641         unlock_rename(tdentry, fdentry);
1642         ffhp->fh_locked = tfhp->fh_locked = 0;
1643
1644 out:
1645         return err;
1646 }
1647
1648 /*
1649  * Unlink a file or directory
1650  * N.B. After this call fhp needs an fh_put
1651  */
1652 int
1653 nfsd_unlink(struct svc_rqst *rqstp, struct svc_fh *fhp, int type,
1654                                 char *fname, int flen)
1655 {
1656         struct dentry   *dentry, *rdentry;
1657         struct inode    *dirp;
1658         int             err;
1659
1660         err = nfserr_acces;
1661         if (!flen || isdotent(fname, flen))
1662                 goto out;
1663         err = fh_verify(rqstp, fhp, S_IFDIR, MAY_REMOVE);
1664         if (err)
1665                 goto out;
1666
1667         fh_lock_nested(fhp, I_MUTEX_PARENT);
1668         dentry = fhp->fh_dentry;
1669         dirp = dentry->d_inode;
1670
1671         rdentry = lookup_one_len(fname, dentry, flen);
1672         err = PTR_ERR(rdentry);
1673         if (IS_ERR(rdentry))
1674                 goto out_nfserr;
1675
1676         if (!rdentry->d_inode) {
1677                 dput(rdentry);
1678                 err = nfserr_noent;
1679                 goto out;
1680         }
1681
1682         if (!type)
1683                 type = rdentry->d_inode->i_mode & S_IFMT;
1684
1685         if (type != S_IFDIR) { /* It's UNLINK */
1686 #ifdef MSNFS
1687                 if ((fhp->fh_export->ex_flags & NFSEXP_MSNFS) &&
1688                         (atomic_read(&rdentry->d_count) > 1)) {
1689                         err = -EPERM;
1690                 } else
1691 #endif
1692                 err = vfs_unlink(dirp, rdentry);
1693         } else { /* It's RMDIR */
1694                 err = vfs_rmdir(dirp, rdentry);
1695         }
1696
1697         dput(rdentry);
1698
1699         if (err == 0 &&
1700             EX_ISSYNC(fhp->fh_export))
1701                         err = nfsd_sync_dir(dentry);
1702
1703 out_nfserr:
1704         err = nfserrno(err);
1705 out:
1706         return err;
1707 }
1708
1709 /*
1710  * Read entries from a directory.
1711  * The  NFSv3/4 verifier we ignore for now.
1712  */
1713 int
1714 nfsd_readdir(struct svc_rqst *rqstp, struct svc_fh *fhp, loff_t *offsetp, 
1715              struct readdir_cd *cdp, encode_dent_fn func)
1716 {
1717         int             err;
1718         struct file     *file;
1719         loff_t          offset = *offsetp;
1720
1721         err = nfsd_open(rqstp, fhp, S_IFDIR, MAY_READ, &file);
1722         if (err)
1723                 goto out;
1724
1725         offset = vfs_llseek(file, offset, 0);
1726         if (offset < 0) {
1727                 err = nfserrno((int)offset);
1728                 goto out_close;
1729         }
1730
1731         /*
1732          * Read the directory entries. This silly loop is necessary because
1733          * readdir() is not guaranteed to fill up the entire buffer, but
1734          * may choose to do less.
1735          */
1736
1737         do {
1738                 cdp->err = nfserr_eof; /* will be cleared on successful read */
1739                 err = vfs_readdir(file, (filldir_t) func, cdp);
1740         } while (err >=0 && cdp->err == nfs_ok);
1741         if (err)
1742                 err = nfserrno(err);
1743         else
1744                 err = cdp->err;
1745         *offsetp = vfs_llseek(file, 0, 1);
1746
1747         if (err == nfserr_eof || err == nfserr_toosmall)
1748                 err = nfs_ok; /* can still be found in ->err */
1749 out_close:
1750         nfsd_close(file);
1751 out:
1752         return err;
1753 }
1754
1755 /*
1756  * Get file system stats
1757  * N.B. After this call fhp needs an fh_put
1758  */
1759 int
1760 nfsd_statfs(struct svc_rqst *rqstp, struct svc_fh *fhp, struct kstatfs *stat)
1761 {
1762         int err = fh_verify(rqstp, fhp, 0, MAY_NOP);
1763         if (!err && vfs_statfs(fhp->fh_dentry,stat))
1764                 err = nfserr_io;
1765         return err;
1766 }
1767
1768 /*
1769  * Check for a user's access permissions to this inode.
1770  */
1771 int
1772 nfsd_permission(struct svc_export *exp, struct dentry *dentry, int acc)
1773 {
1774         struct inode    *inode = dentry->d_inode;
1775         int             err;
1776
1777         if (acc == MAY_NOP)
1778                 return 0;
1779 #if 0
1780         dprintk("nfsd: permission 0x%x%s%s%s%s%s%s%s mode 0%o%s%s%s\n",
1781                 acc,
1782                 (acc & MAY_READ)?       " read"  : "",
1783                 (acc & MAY_WRITE)?      " write" : "",
1784                 (acc & MAY_EXEC)?       " exec"  : "",
1785                 (acc & MAY_SATTR)?      " sattr" : "",
1786                 (acc & MAY_TRUNC)?      " trunc" : "",
1787                 (acc & MAY_LOCK)?       " lock"  : "",
1788                 (acc & MAY_OWNER_OVERRIDE)? " owneroverride" : "",
1789                 inode->i_mode,
1790                 IS_IMMUTABLE(inode)?    " immut" : "",
1791                 IS_APPEND(inode)?       " append" : "",
1792                 IS_RDONLY(inode)?       " ro" : "");
1793         dprintk("      owner %d/%d user %d/%d\n",
1794                 inode->i_uid, inode->i_gid, current->fsuid, current->fsgid);
1795 #endif
1796
1797         /* Normally we reject any write/sattr etc access on a read-only file
1798          * system.  But if it is IRIX doing check on write-access for a 
1799          * device special file, we ignore rofs.
1800          */
1801         if (!(acc & MAY_LOCAL_ACCESS))
1802                 if (acc & (MAY_WRITE | MAY_SATTR | MAY_TRUNC)) {
1803                         if (EX_RDONLY(exp) || IS_RDONLY(inode))
1804                                 return nfserr_rofs;
1805                         if (/* (acc & MAY_WRITE) && */ IS_IMMUTABLE(inode))
1806                                 return nfserr_perm;
1807                 }
1808         if ((acc & MAY_TRUNC) && IS_APPEND(inode))
1809                 return nfserr_perm;
1810
1811         if (acc & MAY_LOCK) {
1812                 /* If we cannot rely on authentication in NLM requests,
1813                  * just allow locks, otherwise require read permission, or
1814                  * ownership
1815                  */
1816                 if (exp->ex_flags & NFSEXP_NOAUTHNLM)
1817                         return 0;
1818                 else
1819                         acc = MAY_READ | MAY_OWNER_OVERRIDE;
1820         }
1821         /*
1822          * The file owner always gets access permission for accesses that
1823          * would normally be checked at open time. This is to make
1824          * file access work even when the client has done a fchmod(fd, 0).
1825          *
1826          * However, `cp foo bar' should fail nevertheless when bar is
1827          * readonly. A sensible way to do this might be to reject all
1828          * attempts to truncate a read-only file, because a creat() call
1829          * always implies file truncation.
1830          * ... but this isn't really fair.  A process may reasonably call
1831          * ftruncate on an open file descriptor on a file with perm 000.
1832          * We must trust the client to do permission checking - using "ACCESS"
1833          * with NFSv3.
1834          */
1835         if ((acc & MAY_OWNER_OVERRIDE) &&
1836             inode->i_uid == current->fsuid)
1837                 return 0;
1838
1839         err = permission(inode, acc & (MAY_READ|MAY_WRITE|MAY_EXEC), NULL);
1840
1841         /* Allow read access to binaries even when mode 111 */
1842         if (err == -EACCES && S_ISREG(inode->i_mode) &&
1843             acc == (MAY_READ | MAY_OWNER_OVERRIDE))
1844                 err = permission(inode, MAY_EXEC, NULL);
1845
1846         return err? nfserrno(err) : 0;
1847 }
1848
1849 void
1850 nfsd_racache_shutdown(void)
1851 {
1852         if (!raparml)
1853                 return;
1854         dprintk("nfsd: freeing readahead buffers.\n");
1855         kfree(raparml);
1856         raparml = NULL;
1857 }
1858 /*
1859  * Initialize readahead param cache
1860  */
1861 int
1862 nfsd_racache_init(int cache_size)
1863 {
1864         int     i;
1865         int     j = 0;
1866         int     nperbucket;
1867
1868
1869         if (raparml)
1870                 return 0;
1871         if (cache_size < 2*RAPARM_HASH_SIZE)
1872                 cache_size = 2*RAPARM_HASH_SIZE;
1873         raparml = kmalloc(sizeof(struct raparms) * cache_size, GFP_KERNEL);
1874
1875         if (raparml != NULL) {
1876                 dprintk("nfsd: allocating %d readahead buffers.\n",
1877                         cache_size);
1878                 for (i = 0 ; i < RAPARM_HASH_SIZE ; i++) {
1879                         raparm_hash[i].pb_head = NULL;
1880                         spin_lock_init(&raparm_hash[i].pb_lock);
1881                 }
1882                 nperbucket = cache_size >> RAPARM_HASH_BITS;
1883                 memset(raparml, 0, sizeof(struct raparms) * cache_size);
1884                 for (i = 0; i < cache_size - 1; i++) {
1885                         if (i % nperbucket == 0)
1886                                 raparm_hash[j++].pb_head = raparml + i;
1887                         if (i % nperbucket < nperbucket-1)
1888                                 raparml[i].p_next = raparml + i + 1;
1889                 }
1890         } else {
1891                 printk(KERN_WARNING
1892                        "nfsd: Could not allocate memory read-ahead cache.\n");
1893                 return -ENOMEM;
1894         }
1895         nfsdstats.ra_size = cache_size;
1896         return 0;
1897 }
1898
1899 #if defined(CONFIG_NFSD_V2_ACL) || defined(CONFIG_NFSD_V3_ACL)
1900 struct posix_acl *
1901 nfsd_get_posix_acl(struct svc_fh *fhp, int type)
1902 {
1903         struct inode *inode = fhp->fh_dentry->d_inode;
1904         char *name;
1905         void *value = NULL;
1906         ssize_t size;
1907         struct posix_acl *acl;
1908
1909         if (!IS_POSIXACL(inode))
1910                 return ERR_PTR(-EOPNOTSUPP);
1911
1912         switch (type) {
1913         case ACL_TYPE_ACCESS:
1914                 name = POSIX_ACL_XATTR_ACCESS;
1915                 break;
1916         case ACL_TYPE_DEFAULT:
1917                 name = POSIX_ACL_XATTR_DEFAULT;
1918                 break;
1919         default:
1920                 return ERR_PTR(-EOPNOTSUPP);
1921         }
1922
1923         size = nfsd_getxattr(fhp->fh_dentry, name, &value);
1924         if (size < 0)
1925                 return ERR_PTR(size);
1926
1927         acl = posix_acl_from_xattr(value, size);
1928         kfree(value);
1929         return acl;
1930 }
1931
1932 int
1933 nfsd_set_posix_acl(struct svc_fh *fhp, int type, struct posix_acl *acl)
1934 {
1935         struct inode *inode = fhp->fh_dentry->d_inode;
1936         char *name;
1937         void *value = NULL;
1938         size_t size;
1939         int error;
1940
1941         if (!IS_POSIXACL(inode) || !inode->i_op ||
1942             !inode->i_op->setxattr || !inode->i_op->removexattr)
1943                 return -EOPNOTSUPP;
1944         switch(type) {
1945                 case ACL_TYPE_ACCESS:
1946                         name = POSIX_ACL_XATTR_ACCESS;
1947                         break;
1948                 case ACL_TYPE_DEFAULT:
1949                         name = POSIX_ACL_XATTR_DEFAULT;
1950                         break;
1951                 default:
1952                         return -EOPNOTSUPP;
1953         }
1954
1955         if (acl && acl->a_count) {
1956                 size = posix_acl_xattr_size(acl->a_count);
1957                 value = kmalloc(size, GFP_KERNEL);
1958                 if (!value)
1959                         return -ENOMEM;
1960                 error = posix_acl_to_xattr(acl, value, size);
1961                 if (error < 0)
1962                         goto getout;
1963                 size = error;
1964         } else
1965                 size = 0;
1966
1967         if (size)
1968                 error = vfs_setxattr(fhp->fh_dentry, name, value, size, 0);
1969         else {
1970                 if (!S_ISDIR(inode->i_mode) && type == ACL_TYPE_DEFAULT)
1971                         error = 0;
1972                 else {
1973                         error = vfs_removexattr(fhp->fh_dentry, name);
1974                         if (error == -ENODATA)
1975                                 error = 0;
1976                 }
1977         }
1978
1979 getout:
1980         kfree(value);
1981         return error;
1982 }
1983 #endif  /* defined(CONFIG_NFSD_V2_ACL) || defined(CONFIG_NFSD_V3_ACL) */