[PATCH] knfsd: use svc_set_num_threads to manage threads in knfsd
[safe/jmp/linux-2.6] / fs / nfsd / nfssvc.c
1 /*
2  * linux/fs/nfsd/nfssvc.c
3  *
4  * Central processing for nfsd.
5  *
6  * Authors:     Olaf Kirch (okir@monad.swb.de)
7  *
8  * Copyright (C) 1995, 1996, 1997 Olaf Kirch <okir@monad.swb.de>
9  */
10
11 #include <linux/module.h>
12
13 #include <linux/time.h>
14 #include <linux/errno.h>
15 #include <linux/nfs.h>
16 #include <linux/in.h>
17 #include <linux/uio.h>
18 #include <linux/unistd.h>
19 #include <linux/slab.h>
20 #include <linux/smp.h>
21 #include <linux/smp_lock.h>
22 #include <linux/fs_struct.h>
23
24 #include <linux/sunrpc/types.h>
25 #include <linux/sunrpc/stats.h>
26 #include <linux/sunrpc/svc.h>
27 #include <linux/sunrpc/svcsock.h>
28 #include <linux/sunrpc/cache.h>
29 #include <linux/nfsd/nfsd.h>
30 #include <linux/nfsd/stats.h>
31 #include <linux/nfsd/cache.h>
32 #include <linux/nfsd/syscall.h>
33 #include <linux/lockd/bind.h>
34 #include <linux/nfsacl.h>
35
36 #define NFSDDBG_FACILITY        NFSDDBG_SVC
37
38 /* these signals will be delivered to an nfsd thread 
39  * when handling a request
40  */
41 #define ALLOWED_SIGS    (sigmask(SIGKILL))
42 /* these signals will be delivered to an nfsd thread
43  * when not handling a request. i.e. when waiting
44  */
45 #define SHUTDOWN_SIGS   (sigmask(SIGKILL) | sigmask(SIGHUP) | sigmask(SIGINT) | sigmask(SIGQUIT))
46 /* if the last thread dies with SIGHUP, then the exports table is
47  * left unchanged ( like 2.4-{0-9} ).  Any other signal will clear
48  * the exports table (like 2.2).
49  */
50 #define SIG_NOCLEAN     SIGHUP
51
52 extern struct svc_program       nfsd_program;
53 static void                     nfsd(struct svc_rqst *rqstp);
54 struct timeval                  nfssvc_boot;
55        struct svc_serv          *nfsd_serv;
56 static atomic_t                 nfsd_busy;
57 static unsigned long            nfsd_last_call;
58 static DEFINE_SPINLOCK(nfsd_call_lock);
59
60 #if defined(CONFIG_NFSD_V2_ACL) || defined(CONFIG_NFSD_V3_ACL)
61 static struct svc_stat  nfsd_acl_svcstats;
62 static struct svc_version *     nfsd_acl_version[] = {
63         [2] = &nfsd_acl_version2,
64         [3] = &nfsd_acl_version3,
65 };
66
67 #define NFSD_ACL_MINVERS            2
68 #define NFSD_ACL_NRVERS         ARRAY_SIZE(nfsd_acl_version)
69 static struct svc_version *nfsd_acl_versions[NFSD_ACL_NRVERS];
70
71 static struct svc_program       nfsd_acl_program = {
72         .pg_prog                = NFS_ACL_PROGRAM,
73         .pg_nvers               = NFSD_ACL_NRVERS,
74         .pg_vers                = nfsd_acl_versions,
75         .pg_name                = "nfsd",
76         .pg_class               = "nfsd",
77         .pg_stats               = &nfsd_acl_svcstats,
78         .pg_authenticate        = &svc_set_client,
79 };
80
81 static struct svc_stat  nfsd_acl_svcstats = {
82         .program        = &nfsd_acl_program,
83 };
84 #endif /* defined(CONFIG_NFSD_V2_ACL) || defined(CONFIG_NFSD_V3_ACL) */
85
86 static struct svc_version *     nfsd_version[] = {
87         [2] = &nfsd_version2,
88 #if defined(CONFIG_NFSD_V3)
89         [3] = &nfsd_version3,
90 #endif
91 #if defined(CONFIG_NFSD_V4)
92         [4] = &nfsd_version4,
93 #endif
94 };
95
96 #define NFSD_MINVERS            2
97 #define NFSD_NRVERS             ARRAY_SIZE(nfsd_version)
98 static struct svc_version *nfsd_versions[NFSD_NRVERS];
99
100 struct svc_program              nfsd_program = {
101 #if defined(CONFIG_NFSD_V2_ACL) || defined(CONFIG_NFSD_V3_ACL)
102         .pg_next                = &nfsd_acl_program,
103 #endif
104         .pg_prog                = NFS_PROGRAM,          /* program number */
105         .pg_nvers               = NFSD_NRVERS,          /* nr of entries in nfsd_version */
106         .pg_vers                = nfsd_versions,        /* version table */
107         .pg_name                = "nfsd",               /* program name */
108         .pg_class               = "nfsd",               /* authentication class */
109         .pg_stats               = &nfsd_svcstats,       /* version table */
110         .pg_authenticate        = &svc_set_client,      /* export authentication */
111
112 };
113
114 int nfsd_vers(int vers, enum vers_op change)
115 {
116         if (vers < NFSD_MINVERS || vers >= NFSD_NRVERS)
117                 return -1;
118         switch(change) {
119         case NFSD_SET:
120                 nfsd_versions[vers] = nfsd_version[vers];
121                 break;
122 #if defined(CONFIG_NFSD_V2_ACL) || defined(CONFIG_NFSD_V3_ACL)
123                 if (vers < NFSD_ACL_NRVERS)
124                         nfsd_acl_version[vers] = nfsd_acl_version[vers];
125 #endif
126         case NFSD_CLEAR:
127                 nfsd_versions[vers] = NULL;
128 #if defined(CONFIG_NFSD_V2_ACL) || defined(CONFIG_NFSD_V3_ACL)
129                 if (vers < NFSD_ACL_NRVERS)
130                         nfsd_acl_version[vers] = NULL;
131 #endif
132                 break;
133         case NFSD_TEST:
134                 return nfsd_versions[vers] != NULL;
135         case NFSD_AVAIL:
136                 return nfsd_version[vers] != NULL;
137         }
138         return 0;
139 }
140 /*
141  * Maximum number of nfsd processes
142  */
143 #define NFSD_MAXSERVS           8192
144
145 int nfsd_nrthreads(void)
146 {
147         if (nfsd_serv == NULL)
148                 return 0;
149         else
150                 return nfsd_serv->sv_nrthreads;
151 }
152
153 static int killsig;     /* signal that was used to kill last nfsd */
154 static void nfsd_last_thread(struct svc_serv *serv)
155 {
156         /* When last nfsd thread exits we need to do some clean-up */
157         struct svc_sock *svsk;
158         list_for_each_entry(svsk, &serv->sv_permsocks, sk_list)
159                 lockd_down();
160         nfsd_serv = NULL;
161         nfsd_racache_shutdown();
162         nfs4_state_shutdown();
163
164         printk(KERN_WARNING "nfsd: last server has exited\n");
165         if (killsig != SIG_NOCLEAN) {
166                 printk(KERN_WARNING "nfsd: unexporting all filesystems\n");
167                 nfsd_export_flush();
168         }
169 }
170
171 void nfsd_reset_versions(void)
172 {
173         int found_one = 0;
174         int i;
175
176         for (i = NFSD_MINVERS; i < NFSD_NRVERS; i++) {
177                 if (nfsd_program.pg_vers[i])
178                         found_one = 1;
179         }
180
181         if (!found_one) {
182                 for (i = NFSD_MINVERS; i < NFSD_NRVERS; i++)
183                         nfsd_program.pg_vers[i] = nfsd_version[i];
184 #if defined(CONFIG_NFSD_V2_ACL) || defined(CONFIG_NFSD_V3_ACL)
185                 for (i = NFSD_ACL_MINVERS; i < NFSD_ACL_NRVERS; i++)
186                         nfsd_acl_program.pg_vers[i] =
187                                 nfsd_acl_version[i];
188 #endif
189         }
190 }
191
192 int nfsd_create_serv(void)
193 {
194         int err = 0;
195         lock_kernel();
196         if (nfsd_serv) {
197                 svc_get(nfsd_serv);
198                 unlock_kernel();
199                 return 0;
200         }
201
202         atomic_set(&nfsd_busy, 0);
203         nfsd_serv = svc_create_pooled(&nfsd_program, NFSD_BUFSIZE,
204                                       nfsd_last_thread,
205                                       nfsd, SIG_NOCLEAN, THIS_MODULE);
206         if (nfsd_serv == NULL)
207                 err = -ENOMEM;
208         unlock_kernel();
209         do_gettimeofday(&nfssvc_boot);          /* record boot time */
210         return err;
211 }
212
213 static int nfsd_init_socks(int port)
214 {
215         int error;
216         if (!list_empty(&nfsd_serv->sv_permsocks))
217                 return 0;
218
219         error = lockd_up(IPPROTO_UDP);
220         if (error >= 0) {
221                 error = svc_makesock(nfsd_serv, IPPROTO_UDP, port);
222                 if (error < 0)
223                         lockd_down();
224         }
225         if (error < 0)
226                 return error;
227
228 #ifdef CONFIG_NFSD_TCP
229         error = lockd_up(IPPROTO_TCP);
230         if (error >= 0) {
231                 error = svc_makesock(nfsd_serv, IPPROTO_TCP, port);
232                 if (error < 0)
233                         lockd_down();
234         }
235         if (error < 0)
236                 return error;
237 #endif
238         return 0;
239 }
240
241 int
242 nfsd_svc(unsigned short port, int nrservs)
243 {
244         int     error;
245         
246         lock_kernel();
247         dprintk("nfsd: creating service\n");
248         error = -EINVAL;
249         if (nrservs <= 0)
250                 nrservs = 0;
251         if (nrservs > NFSD_MAXSERVS)
252                 nrservs = NFSD_MAXSERVS;
253         
254         /* Readahead param cache - will no-op if it already exists */
255         error = nfsd_racache_init(2*nrservs);
256         if (error<0)
257                 goto out;
258         error = nfs4_state_start();
259         if (error<0)
260                 goto out;
261
262         nfsd_reset_versions();
263
264         error = nfsd_create_serv();
265
266         if (error)
267                 goto out;
268         error = nfsd_init_socks(port);
269         if (error)
270                 goto failure;
271
272         error = svc_set_num_threads(nfsd_serv, NULL, nrservs);
273  failure:
274         svc_destroy(nfsd_serv);         /* Release server */
275  out:
276         unlock_kernel();
277         return error;
278 }
279
280 static inline void
281 update_thread_usage(int busy_threads)
282 {
283         unsigned long prev_call;
284         unsigned long diff;
285         int decile;
286
287         spin_lock(&nfsd_call_lock);
288         prev_call = nfsd_last_call;
289         nfsd_last_call = jiffies;
290         decile = busy_threads*10/nfsdstats.th_cnt;
291         if (decile>0 && decile <= 10) {
292                 diff = nfsd_last_call - prev_call;
293                 if ( (nfsdstats.th_usage[decile-1] += diff) >= NFSD_USAGE_WRAP)
294                         nfsdstats.th_usage[decile-1] -= NFSD_USAGE_WRAP;
295                 if (decile == 10)
296                         nfsdstats.th_fullcnt++;
297         }
298         spin_unlock(&nfsd_call_lock);
299 }
300
301 /*
302  * This is the NFS server kernel thread
303  */
304 static void
305 nfsd(struct svc_rqst *rqstp)
306 {
307         struct fs_struct *fsp;
308         int             err;
309         sigset_t shutdown_mask, allowed_mask;
310
311         /* Lock module and set up kernel thread */
312         lock_kernel();
313         daemonize("nfsd");
314
315         /* After daemonize() this kernel thread shares current->fs
316          * with the init process. We need to create files with a
317          * umask of 0 instead of init's umask. */
318         fsp = copy_fs_struct(current->fs);
319         if (!fsp) {
320                 printk("Unable to start nfsd thread: out of memory\n");
321                 goto out;
322         }
323         exit_fs(current);
324         current->fs = fsp;
325         current->fs->umask = 0;
326
327         siginitsetinv(&shutdown_mask, SHUTDOWN_SIGS);
328         siginitsetinv(&allowed_mask, ALLOWED_SIGS);
329
330         nfsdstats.th_cnt++;
331
332         rqstp->rq_task = current;
333
334         unlock_kernel();
335
336         /*
337          * We want less throttling in balance_dirty_pages() so that nfs to
338          * localhost doesn't cause nfsd to lock up due to all the client's
339          * dirty pages.
340          */
341         current->flags |= PF_LESS_THROTTLE;
342
343         /*
344          * The main request loop
345          */
346         for (;;) {
347                 /* Block all but the shutdown signals */
348                 sigprocmask(SIG_SETMASK, &shutdown_mask, NULL);
349
350                 /*
351                  * Find a socket with data available and call its
352                  * recvfrom routine.
353                  */
354                 while ((err = svc_recv(rqstp, 60*60*HZ)) == -EAGAIN)
355                         ;
356                 if (err < 0)
357                         break;
358                 update_thread_usage(atomic_read(&nfsd_busy));
359                 atomic_inc(&nfsd_busy);
360
361                 /* Lock the export hash tables for reading. */
362                 exp_readlock();
363
364                 /* Process request with signals blocked.  */
365                 sigprocmask(SIG_SETMASK, &allowed_mask, NULL);
366
367                 svc_process(rqstp);
368
369                 /* Unlock export hash tables */
370                 exp_readunlock();
371                 update_thread_usage(atomic_read(&nfsd_busy));
372                 atomic_dec(&nfsd_busy);
373         }
374
375         if (err != -EINTR) {
376                 printk(KERN_WARNING "nfsd: terminating on error %d\n", -err);
377         } else {
378                 unsigned int    signo;
379
380                 for (signo = 1; signo <= _NSIG; signo++)
381                         if (sigismember(&current->pending.signal, signo) &&
382                             !sigismember(&current->blocked, signo))
383                                 break;
384                 killsig = signo;
385         }
386         /* Clear signals before calling svc_exit_thread() */
387         flush_signals(current);
388
389         lock_kernel();
390
391         nfsdstats.th_cnt --;
392
393 out:
394         /* Release the thread */
395         svc_exit_thread(rqstp);
396
397         /* Release module */
398         unlock_kernel();
399         module_put_and_exit(0);
400 }
401
402 int
403 nfsd_dispatch(struct svc_rqst *rqstp, u32 *statp)
404 {
405         struct svc_procedure    *proc;
406         kxdrproc_t              xdr;
407         u32                     nfserr;
408         u32                     *nfserrp;
409
410         dprintk("nfsd_dispatch: vers %d proc %d\n",
411                                 rqstp->rq_vers, rqstp->rq_proc);
412         proc = rqstp->rq_procinfo;
413
414         /* Check whether we have this call in the cache. */
415         switch (nfsd_cache_lookup(rqstp, proc->pc_cachetype)) {
416         case RC_INTR:
417         case RC_DROPIT:
418                 return 0;
419         case RC_REPLY:
420                 return 1;
421         case RC_DOIT:;
422                 /* do it */
423         }
424
425         /* Decode arguments */
426         xdr = proc->pc_decode;
427         if (xdr && !xdr(rqstp, (u32*)rqstp->rq_arg.head[0].iov_base,
428                         rqstp->rq_argp)) {
429                 dprintk("nfsd: failed to decode arguments!\n");
430                 nfsd_cache_update(rqstp, RC_NOCACHE, NULL);
431                 *statp = rpc_garbage_args;
432                 return 1;
433         }
434
435         /* need to grab the location to store the status, as
436          * nfsv4 does some encoding while processing 
437          */
438         nfserrp = rqstp->rq_res.head[0].iov_base
439                 + rqstp->rq_res.head[0].iov_len;
440         rqstp->rq_res.head[0].iov_len += sizeof(u32);
441
442         /* Now call the procedure handler, and encode NFS status. */
443         nfserr = proc->pc_func(rqstp, rqstp->rq_argp, rqstp->rq_resp);
444         if (nfserr == nfserr_jukebox && rqstp->rq_vers == 2)
445                 nfserr = nfserr_dropit;
446         if (nfserr == nfserr_dropit) {
447                 dprintk("nfsd: Dropping request due to malloc failure!\n");
448                 nfsd_cache_update(rqstp, RC_NOCACHE, NULL);
449                 return 0;
450         }
451
452         if (rqstp->rq_proc != 0)
453                 *nfserrp++ = nfserr;
454
455         /* Encode result.
456          * For NFSv2, additional info is never returned in case of an error.
457          */
458         if (!(nfserr && rqstp->rq_vers == 2)) {
459                 xdr = proc->pc_encode;
460                 if (xdr && !xdr(rqstp, nfserrp,
461                                 rqstp->rq_resp)) {
462                         /* Failed to encode result. Release cache entry */
463                         dprintk("nfsd: failed to encode result!\n");
464                         nfsd_cache_update(rqstp, RC_NOCACHE, NULL);
465                         *statp = rpc_system_err;
466                         return 1;
467                 }
468         }
469
470         /* Store reply in cache. */
471         nfsd_cache_update(rqstp, proc->pc_cachetype, statp + 1);
472         return 1;
473 }