33f8b56a454d998c0aba77708e1b4cab5f0db17e
[openafs.git] / src / volser / volmain.c
1 /*
2  * Copyright 2000, International Business Machines Corporation and others.
3  * All Rights Reserved.
4  *
5  * This software has been released under the terms of the IBM Public
6  * License.  For details, see the LICENSE file in the top-level source
7  * directory or online at http://www.openafs.org/dl/license10.html
8  */
9
10 #include <afsconfig.h>
11 #include <afs/param.h>
12
13 #include <roken.h>
14 #include <afs/opr.h>
15 #ifdef AFS_PTHREAD_ENV
16 # include <opr/lock.h>
17 # include <opr/softsig.h>
18 # include <afs/procmgmt_softsig.h> /* must come after softsig */
19 #endif
20
21 #ifdef AFS_NT40_ENV
22 #include <windows.h>
23 #include <WINNT/afsevent.h>
24 #endif
25
26 #include <rx/rx_queue.h>
27 #include <afs/afsint.h>
28 #include <afs/prs_fs.h>
29 #include <afs/nfs.h>
30 #include <lwp.h>
31 #include <lock.h>
32 #include <afs/afssyscalls.h>
33 #include <afs/ihandle.h>
34 #ifdef AFS_NT40_ENV
35 #include <afs/ntops.h>
36 #endif
37 #include <afs/vnode.h>
38 #include <afs/volume.h>
39 #include <afs/partition.h>
40 #include <rx/rx.h>
41 #include <rx/rxstat.h>
42 #include <rx/rx_globals.h>
43 #include <afs/auth.h>
44 #include <afs/cellconfig.h>
45 #include <afs/keys.h>
46 #include <afs/dir.h>
47 #include <ubik.h>
48 #include <afs/audit.h>
49 #include <afs/afsutil.h>
50 #include <afs/cmd.h>
51 #include <lwp.h>
52
53 #include "volser.h"
54 #include "volint.h"
55 #include "volser_internal.h"
56
57 #define VolserVersion "2.0"
58 #define N_SECURITY_OBJECTS 3
59
60 extern struct Lock localLock;
61 char *GlobalNameHack = NULL;
62 int hackIsIn = 0;
63 afs_int32 GlobalVolCloneId, GlobalVolParentId;
64 int GlobalVolType;
65 int VolumeChanged;              /* XXXX */
66 static char busyFlags[MAXHELPERS];
67 struct volser_trans *QI_GlobalWriteTrans = 0;
68 struct afsconf_dir *tdir;
69 static afs_int32 runningCalls = 0;
70 int DoLogging = 0;
71 int debuglevel = 0;
72 #define MAXLWP 128
73 int lwps = 9;
74 int udpBufSize = 0;             /* UDP buffer size for receive */
75 int restrictedQueryLevel = RESTRICTED_QUERY_ANYUSER;
76
77 int rxBind = 0;
78 int rxkadDisableDotCheck = 0;
79 int DoPreserveVolumeStats = 0;
80 int rxJumbograms = 0;   /* default is to not send and receive jumbograms. */
81 int rxMaxMTU = -1;
82 char *auditFileName = NULL;
83 char *logFile = NULL;
84 char *configDir = NULL;
85
86 #define ADDRSPERSITE 16         /* Same global is in rx/rx_user.c */
87 afs_uint32 SHostAddrs[ADDRSPERSITE];
88
89 #define VS_EXIT(code)  {                                          \
90                           osi_audit(VS_ExitEvent, code, AUD_END); \
91                           exit(code);                             \
92                        }
93
94 static void
95 MyBeforeProc(struct rx_call *acall)
96 {
97     VTRANS_LOCK;
98     runningCalls++;
99     VTRANS_UNLOCK;
100     return;
101 }
102
103 static void
104 MyAfterProc(struct rx_call *acall, afs_int32 code)
105 {
106     VTRANS_LOCK;
107     runningCalls--;
108     VTRANS_UNLOCK;
109     return;
110 }
111
112 /* Called every GCWAKEUP seconds to try to unlock all our partitions,
113  * if we're idle and there are no active transactions
114  */
115 static void
116 TryUnlock(void)
117 {
118     /* if there are no running calls, and there are no active transactions, then
119      * it should be safe to release any partition locks we've accumulated */
120     VTRANS_LOCK;
121     if (runningCalls == 0 && TransList() == (struct volser_trans *)0) {
122         VTRANS_UNLOCK;
123         VPFullUnlock();         /* in volprocs.c */
124     } else
125         VTRANS_UNLOCK;
126 }
127
128 /* background daemon for timing out transactions */
129 static void*
130 BKGLoop(void *unused)
131 {
132     struct timeval tv;
133     int loop = 0;
134
135     afs_pthread_setname_self("vol bkg");
136     while (1) {
137         tv.tv_sec = GCWAKEUP;
138         tv.tv_usec = 0;
139 #ifdef AFS_PTHREAD_ENV
140 #ifdef AFS_NT40_ENV
141         Sleep(GCWAKEUP * 1000);
142 #else
143         select(0, 0, 0, 0, &tv);
144 #endif
145 #else
146         (void)IOMGR_Select(0, 0, 0, 0, &tv);
147 #endif
148         GCTrans();
149         TryUnlock();
150         loop++;
151         if (loop == 10) {       /* reopen log every 5 minutes */
152             loop = 0;
153             ReOpenLog();
154         }
155     }
156
157     return NULL;
158 }
159
160 #ifdef AFS_NT40_ENV
161 /* no volser_syscall */
162 #elif defined(AFS_SUN511_ENV)
163 int
164 volser_syscall(afs_uint32 a3, afs_uint32 a4, void *a5)
165 {
166     int err, code;
167     code = ioctl_sun_afs_syscall(28 /* AFSCALL_CALL */, a3, a4, a5, 0, 0, 0,
168                                  &err);
169     if (code) {
170         err = code;
171     }
172     return err;
173 }
174 #else
175 int
176 volser_syscall(afs_uint32 a3, afs_uint32 a4, void *a5)
177 {
178     afs_uint32 rcode;
179 #ifndef AFS_LINUX20_ENV
180     void (*old) (int);
181
182     old = signal(SIGSYS, SIG_IGN);
183 #endif
184     rcode =
185         syscall(AFS_SYSCALL /* AFS_SYSCALL */ , 28 /* AFSCALL_CALL */ , a3,
186                 a4, a5);
187 #ifndef AFS_LINUX20_ENV
188     signal(SIGSYS, old);
189 #endif
190
191     return rcode;
192 }
193 #endif
194
195
196 /* check whether caller is authorized to manage RX statistics */
197 int
198 vol_rxstat_userok(struct rx_call *call)
199 {
200     return afsconf_SuperUser(tdir, call, NULL);
201 }
202
203 /**
204  * Return true if this name is a member of the local realm.
205  */
206 static int
207 vol_IsLocalRealmMatch(void *rock, char *name, char *inst, char *cell)
208 {
209     struct afsconf_dir *dir = (struct afsconf_dir *)rock;
210     afs_int32 islocal = 0;      /* default to no */
211     int code;
212
213     code = afsconf_IsLocalRealmMatch(dir, &islocal, name, inst, cell);
214     if (code) {
215         ViceLog(0,
216                 ("Failed local realm check; code=%d, name=%s, inst=%s, cell=%s\n",
217                  code, name, inst, cell));
218     }
219     return islocal;
220 }
221
222 enum optionsList {
223     OPT_log,
224     OPT_rxbind,
225     OPT_dotted,
226     OPT_debug,
227     OPT_threads,
228     OPT_auditlog,
229     OPT_audit_interface,
230     OPT_nojumbo,
231     OPT_jumbo,
232     OPT_rxmaxmtu,
233     OPT_sleep,
234     OPT_udpsize,
235     OPT_peer,
236     OPT_process,
237     OPT_preserve_vol_stats,
238     OPT_sync,
239     OPT_syslog,
240     OPT_logfile,
241     OPT_config,
242     OPT_restricted_query
243 };
244
245 static int
246 ParseArgs(int argc, char **argv) {
247     int code;
248     int optval;
249     char *optstring = NULL;
250     struct cmd_syndesc *opts;
251     char *sleepSpec = NULL;
252     char *sync_behavior = NULL;
253     char *restricted_query_parameter = NULL;
254
255     opts = cmd_CreateSyntax(NULL, NULL, NULL, 0, NULL);
256     cmd_AddParmAtOffset(opts, OPT_log, "-log", CMD_FLAG, CMD_OPTIONAL,
257            "log vos users");
258     cmd_AddParmAtOffset(opts, OPT_rxbind, "-rxbind", CMD_FLAG, CMD_OPTIONAL,
259            "bind only to the primary interface");
260     cmd_AddParmAtOffset(opts, OPT_dotted, "-allow-dotted-principals", CMD_FLAG, CMD_OPTIONAL,
261            "permit Kerberos 5 principals with dots");
262     cmd_AddParmAtOffset(opts, OPT_debug, "-d", CMD_SINGLE, CMD_OPTIONAL,
263            "debug level");
264     cmd_AddParmAtOffset(opts, OPT_threads, "-p", CMD_SINGLE, CMD_OPTIONAL,
265            "number of threads");
266     cmd_AddParmAtOffset(opts, OPT_auditlog, "-auditlog", CMD_SINGLE,
267            CMD_OPTIONAL, "location of audit log");
268     cmd_AddParmAtOffset(opts, OPT_audit_interface, "-audit-interface",
269            CMD_SINGLE, CMD_OPTIONAL, "interface to use for audit logging");
270     cmd_AddParmAtOffset(opts, OPT_nojumbo, "-nojumbo", CMD_FLAG, CMD_OPTIONAL,
271             "disable jumbograms");
272     cmd_AddParmAtOffset(opts, OPT_jumbo, "-jumbo", CMD_FLAG, CMD_OPTIONAL,
273             "enable jumbograms");
274     cmd_AddParmAtOffset(opts, OPT_rxmaxmtu, "-rxmaxmtu", CMD_SINGLE,
275             CMD_OPTIONAL, "maximum MTU for RX");
276     cmd_AddParmAtOffset(opts, OPT_udpsize, "-udpsize", CMD_SINGLE,
277             CMD_OPTIONAL, "size of socket buffer in bytes");
278     cmd_AddParmAtOffset(opts, OPT_sleep, "-sleep", CMD_SINGLE,
279             CMD_OPTIONAL, "make background daemon sleep (LWP only)");
280     cmd_AddParmAtOffset(opts, OPT_peer, "-enable_peer_stats", CMD_FLAG,
281             CMD_OPTIONAL, "enable RX transport statistics");
282     cmd_AddParmAtOffset(opts, OPT_process, "-enable_process_stats", CMD_FLAG,
283             CMD_OPTIONAL, "enable RX RPC statistics");
284     cmd_AddParmAtOffset(opts, OPT_preserve_vol_stats, "-preserve-vol-stats", CMD_FLAG,
285             CMD_OPTIONAL, "preserve volume statistics");
286 #if !defined(AFS_NT40_ENV)
287     cmd_AddParmAtOffset(opts, OPT_syslog, "-syslog", CMD_SINGLE_OR_FLAG,
288             CMD_OPTIONAL, "log to syslog");
289 #endif
290     cmd_AddParmAtOffset(opts, OPT_sync, "-sync",
291             CMD_SINGLE, CMD_OPTIONAL, "always | onclose | never");
292     cmd_AddParmAtOffset(opts, OPT_logfile, "-logfile", CMD_SINGLE,
293            CMD_OPTIONAL, "location of log file");
294     cmd_AddParmAtOffset(opts, OPT_config, "-config", CMD_SINGLE,
295            CMD_OPTIONAL, "configuration location");
296     cmd_AddParmAtOffset(opts, OPT_restricted_query, "-restricted_query",
297             CMD_SINGLE, CMD_OPTIONAL, "anyuser | admin");
298
299     code = cmd_Parse(argc, argv, &opts);
300     if (code == CMD_HELP) {
301         exit(0);
302     }
303     if (code)
304         return 1;
305
306     cmd_OptionAsFlag(opts, OPT_log, &DoLogging);
307     cmd_OptionAsFlag(opts, OPT_rxbind, &rxBind);
308     cmd_OptionAsFlag(opts, OPT_dotted, &rxkadDisableDotCheck);
309     cmd_OptionAsFlag(opts, OPT_preserve_vol_stats, &DoPreserveVolumeStats);
310     cmd_OptionAsInt(opts, OPT_debug, &LogLevel);
311     if (cmd_OptionPresent(opts, OPT_peer))
312         rx_enablePeerRPCStats();
313     if (cmd_OptionPresent(opts, OPT_process))
314         rx_enableProcessRPCStats();
315     if (cmd_OptionPresent(opts, OPT_nojumbo))
316         rxJumbograms = 0;
317     if (cmd_OptionPresent(opts, OPT_jumbo))
318         rxJumbograms = 1;
319 #ifndef AFS_NT40_ENV
320     if (cmd_OptionPresent(opts, OPT_syslog)) {
321         serverLogSyslog = 1;
322         cmd_OptionAsInt(opts, OPT_syslog, &serverLogSyslogFacility);
323     }
324 #endif
325     cmd_OptionAsInt(opts, OPT_rxmaxmtu, &rxMaxMTU);
326     if (cmd_OptionAsInt(opts, OPT_udpsize, &optval) == 0) {
327         if (optval < rx_GetMinUdpBufSize()) {
328             printf("Warning:udpsize %d is less than minimum %d; ignoring\n",
329                     optval, rx_GetMinUdpBufSize());
330         } else
331             udpBufSize = optval;
332     }
333     cmd_OptionAsString(opts, OPT_auditlog, &auditFileName);
334
335     if (cmd_OptionAsString(opts, OPT_audit_interface, &optstring) == 0) {
336         if (osi_audit_interface(optstring)) {
337             printf("Invalid audit interface '%s'\n", optstring);
338             return -1;
339         }
340         free(optstring);
341         optstring = NULL;
342     }
343     if (cmd_OptionAsInt(opts, OPT_threads, &lwps) == 0) {
344         if (lwps > MAXLWP) {
345             printf("Warning: '-p %d' is too big; using %d instead\n", lwps, MAXLWP);
346             lwps = MAXLWP;
347         }
348     }
349     if (cmd_OptionAsString(opts, OPT_sleep, &sleepSpec) == 0) {
350         printf("Warning: -sleep option ignored; this option is obsolete\n");
351     }
352     if (cmd_OptionAsString(opts, OPT_sync, &sync_behavior) == 0) {
353         if (ih_SetSyncBehavior(sync_behavior)) {
354             printf("Invalid -sync value %s\n", sync_behavior);
355             return -1;
356         }
357     }
358     cmd_OptionAsString(opts, OPT_logfile, &logFile);
359     cmd_OptionAsString(opts, OPT_config, &configDir);
360     if (cmd_OptionAsString(opts, OPT_restricted_query,
361                            &restricted_query_parameter) == 0) {
362         if (strcmp(restricted_query_parameter, "anyuser") == 0)
363             restrictedQueryLevel = RESTRICTED_QUERY_ANYUSER;
364         else if (strcmp(restricted_query_parameter, "admin") == 0)
365             restrictedQueryLevel = RESTRICTED_QUERY_ADMIN;
366         else {
367             printf("invalid argument for -restricted_query: %s\n",
368                    restricted_query_parameter);
369             return -1;
370         }
371         free(restricted_query_parameter);
372     }
373
374     return 0;
375 }
376
377 #include "AFS_component_version_number.c"
378 int
379 main(int argc, char **argv)
380 {
381     afs_int32 code;
382     struct rx_securityClass **securityClasses;
383     afs_int32 numClasses;
384     struct rx_service *service;
385     int rxpackets = 100;
386     afs_uint32 host = ntohl(INADDR_ANY);
387     VolumePackageOptions opts;
388
389 #ifdef  AFS_AIX32_ENV
390     /*
391      * The following signal action for AIX is necessary so that in case of a
392      * crash (i.e. core is generated) we can include the user's data section
393      * in the core dump. Unfortunately, by default, only a partial core is
394      * generated which, in many cases, isn't too useful.
395      */
396     struct sigaction nsa;
397
398     sigemptyset(&nsa.sa_mask);
399     nsa.sa_handler = SIG_DFL;
400     nsa.sa_flags = SA_FULLDUMP;
401     sigaction(SIGABRT, &nsa, NULL);
402     sigaction(SIGSEGV, &nsa, NULL);
403 #endif
404     osi_audit_init();
405     osi_audit(VS_StartEvent, 0, AUD_END);
406
407     /* Initialize dirpaths */
408     if (!(initAFSDirPath() & AFSDIR_SERVER_PATHS_OK)) {
409 #ifdef AFS_NT40_ENV
410         ReportErrorEventAlt(AFSEVT_SVR_NO_INSTALL_DIR, 0, argv[0], 0);
411 #endif
412         fprintf(stderr, "%s: Unable to obtain AFS server directory.\n",
413                 argv[0]);
414         exit(2);
415     }
416
417     configDir = strdup(AFSDIR_SERVER_ETC_DIRPATH);
418     logFile = strdup(AFSDIR_SERVER_VOLSERLOG_FILEPATH);
419
420     if (ParseArgs(argc, argv)) {
421         exit(1);
422     }
423
424     if (auditFileName) {
425         osi_audit_file(auditFileName);
426         osi_audit(VS_StartEvent, 0, AUD_END);
427     }
428 #ifdef AFS_SGI_VNODE_GLUE
429     if (afs_init_kernel_config(-1) < 0) {
430         printf
431             ("Can't determine NUMA configuration, not starting volserver.\n");
432         exit(1);
433     }
434 #endif
435     InitErrTabs();
436
437 #ifdef AFS_PTHREAD_ENV
438     SetLogThreadNumProgram( rx_GetThreadNum );
439 #endif
440
441 #ifdef AFS_NT40_ENV
442     if (afs_winsockInit() < 0) {
443         ReportErrorEventAlt(AFSEVT_SVR_WINSOCK_INIT_FAILED, 0, argv[0], 0);
444         printf("Volume server unable to start winsock, exiting.\n");
445         exit(1);
446     }
447 #endif
448     /* Open VolserLog and map stdout, stderr into it; VInitVolumePackage2 can
449        log, so we need to do this here */
450     OpenLog(logFile);
451
452     VOptDefaults(volumeServer, &opts);
453     if (VInitVolumePackage2(volumeServer, &opts)) {
454         Log("Shutting down: errors encountered initializing volume package\n");
455         exit(1);
456     }
457     /* For nuke() */
458     Lock_Init(&localLock);
459     DInit(40);
460 #ifndef AFS_PTHREAD_ENV
461     vol_PollProc = IOMGR_Poll;  /* tell vol pkg to poll io system periodically */
462 #endif
463 #ifndef AFS_NT40_ENV
464     rxi_syscallp = volser_syscall;
465 #endif
466     rx_nPackets = rxpackets;    /* set the max number of packets */
467     if (udpBufSize)
468         rx_SetUdpBufSize(udpBufSize);   /* set the UDP buffer size for receive */
469     if (rxBind) {
470         afs_int32 ccode;
471         if (AFSDIR_SERVER_NETRESTRICT_FILEPATH ||
472             AFSDIR_SERVER_NETINFO_FILEPATH) {
473             char reason[1024];
474             ccode = afsconf_ParseNetFiles(SHostAddrs, NULL, NULL,
475                                           ADDRSPERSITE, reason,
476                                           AFSDIR_SERVER_NETINFO_FILEPATH,
477                                           AFSDIR_SERVER_NETRESTRICT_FILEPATH);
478         } else
479         {
480             ccode = rx_getAllAddr(SHostAddrs, ADDRSPERSITE);
481         }
482         if (ccode == 1)
483             host = SHostAddrs[0];
484     }
485
486     code = rx_InitHost(host, (int)htons(AFSCONF_VOLUMEPORT));
487     if (code) {
488         fprintf(stderr, "rx init failed on socket AFSCONF_VOLUMEPORT %u\n",
489                 AFSCONF_VOLUMEPORT);
490         VS_EXIT(1);
491     }
492     if (!rxJumbograms) {
493         /* Don't allow 3.4 vos clients to send jumbograms and we don't send. */
494         rx_SetNoJumbo();
495     }
496     if (rxMaxMTU != -1) {
497         if (rx_SetMaxMTU(rxMaxMTU) != 0) {
498             fprintf(stderr, "rxMaxMTU %d is invalid\n", rxMaxMTU);
499             VS_EXIT(1);
500         }
501     }
502     rx_GetIFInfo();
503     rx_SetRxDeadTime(420);
504     memset(busyFlags, 0, sizeof(busyFlags));
505
506 #ifdef AFS_PTHREAD_ENV
507     opr_softsig_Init();
508     SetupLogSoftSignals();
509 #else
510     SetupLogSignals();
511 #endif
512
513     {
514 #ifdef AFS_PTHREAD_ENV
515         pthread_t tid;
516         pthread_attr_t tattr;
517         opr_Verify(pthread_attr_init(&tattr) == 0);
518         opr_Verify(pthread_attr_setdetachstate(&tattr,
519                                                PTHREAD_CREATE_DETACHED) == 0);
520         opr_Verify(pthread_create(&tid, &tattr, BKGLoop, NULL) == 0);
521 #else
522         PROCESS pid;
523         LWP_CreateProcess(BKGLoop, 16*1024, 3, 0, "vol bkg daemon", &pid);
524 #endif
525     }
526
527     /* Create a single security object, in this case the null security object, for unauthenticated connections, which will be used to control security on connections made to this server */
528
529     tdir = afsconf_Open(configDir);
530     if (!tdir) {
531         Abort("volser: could not open conf files in %s\n",
532               configDir);
533         VS_EXIT(1);
534     }
535
536     /* initialize audit user check */
537     osi_audit_set_user_check(tdir, vol_IsLocalRealmMatch);
538
539     afsconf_BuildServerSecurityObjects(tdir, &securityClasses, &numClasses);
540     if (securityClasses[0] == NULL)
541         Abort("rxnull_NewServerSecurityObject");
542     service =
543         rx_NewServiceHost(host, 0, VOLSERVICE_ID, "VOLSER", securityClasses,
544                           numClasses, AFSVolExecuteRequest);
545     if (service == (struct rx_service *)0)
546         Abort("rx_NewService");
547     rx_SetBeforeProc(service, MyBeforeProc);
548     rx_SetAfterProc(service, MyAfterProc);
549     rx_SetIdleDeadTime(service, 0);     /* never timeout */
550     if (lwps < 4)
551         lwps = 4;
552     rx_SetMaxProcs(service, lwps);
553 #if defined(AFS_XBSD_ENV)
554     rx_SetStackSize(service, (128 * 1024));
555 #elif defined(AFS_SGI_ENV)
556     rx_SetStackSize(service, (48 * 1024));
557 #else
558     rx_SetStackSize(service, (32 * 1024));
559 #endif
560
561     if (rxkadDisableDotCheck) {
562         rx_SetSecurityConfiguration(service, RXS_CONFIG_FLAGS,
563                                     (void *)RXS_CONFIG_FLAGS_DISABLE_DOTCHECK);
564     }
565
566     service =
567         rx_NewService(0, RX_STATS_SERVICE_ID, "rpcstats", securityClasses,
568                       numClasses, RXSTATS_ExecuteRequest);
569     if (service == (struct rx_service *)0)
570         Abort("rx_NewService");
571     rx_SetMinProcs(service, 2);
572     rx_SetMaxProcs(service, 4);
573
574     LogCommandLine(argc, argv, "Volserver", VolserVersion, "Starting AFS",
575                    Log);
576     if (afsconf_GetLatestKey(tdir, NULL, NULL) == 0) {
577         LogDesWarning();
578     }
579
580     /* allow super users to manage RX statistics */
581     rx_SetRxStatUserOk(vol_rxstat_userok);
582
583     rx_StartServer(1);          /* Donate this process to the server process pool */
584
585     osi_audit(VS_FinishEvent, (-1), AUD_END);
586     Abort("StartServer returned?");
587     return 0; /* not reached */
588 }