viced-fix-port-logging-20030218
[openafs.git] / src / viced / host.c
1 /*
2  * Copyright 2000, International Business Machines Corporation and others.
3  * All Rights Reserved.
4  * 
5  * This software has been released under the terms of the IBM Public
6  * License.  For details, see the LICENSE file in the top-level source
7  * directory or online at http://www.openafs.org/dl/license10.html
8  */
9
10 #include <afsconfig.h>
11 #include <afs/param.h>
12
13 RCSID("$Header$");
14
15 #include <stdio.h>
16 #include <errno.h>
17 #ifdef AFS_NT40_ENV
18 #include <fcntl.h>
19 #include <winsock2.h>
20 #else
21 #include <sys/file.h>
22 #include <netdb.h>
23 #include <netinet/in.h>
24 #endif
25
26 #ifdef HAVE_STRING_H
27 #include <string.h>
28 #else
29 #ifdef HAVE_STRINGS_H
30 #include <strings.h>
31 #endif
32 #endif
33
34 #include <afs/stds.h>
35 #include <rx/xdr.h>
36 #include <afs/assert.h>
37 #include <lwp.h>
38 #include <lock.h>
39 #include <afs/afsint.h>
40 #include <afs/rxgen_consts.h>
41 #include <afs/nfs.h>
42 #include <afs/errors.h>
43 #include <afs/ihandle.h>
44 #include <afs/vnode.h>
45 #include <afs/volume.h>
46 #ifdef AFS_ATHENA_STDENV
47 #include <krb.h>
48 #endif
49 #include <afs/acl.h>
50 #include <afs/ptclient.h>
51 #include <afs/prs_fs.h>
52 #include <afs/auth.h>
53 #include <afs/afsutil.h>
54 #include <rx/rx.h>
55 #include <afs/cellconfig.h>
56 #include <stdlib.h>
57 #include "viced_prototypes.h"
58 #include "viced.h"
59 #include "host.h"
60
61
62 #ifdef AFS_PTHREAD_ENV
63 pthread_mutex_t host_glock_mutex;
64 #endif /* AFS_PTHREAD_ENV */
65
66 extern  int     Console;
67 extern  int     CurrentConnections;
68 extern  int     SystemId;
69 extern  int     AnonymousID;
70 extern  prlist  AnonCPS;
71 extern  int     LogLevel;
72 extern  struct afsconf_dir *confDir; /* config dir object */
73 extern  int     lwps;   /* the max number of server threads */
74 extern  afsUUID FS_HostUUID;
75
76 int     CEs = 0;            /* active clients */
77 int     CEBlocks = 0;       /* number of blocks of CEs */
78 struct  client *CEFree = 0; /* first free client */
79 struct  host *hostList = 0; /* linked list of all hosts */
80 int     hostCount = 0;      /* number of hosts in hostList */
81 int     rxcon_ident_key;
82 int     rxcon_client_key;
83
84 #define CESPERBLOCK 73
85 struct CEBlock              /* block of CESPERBLOCK file entries */
86 {
87     struct client entry[CESPERBLOCK];
88 };
89
90 /*
91  * Make sure the subnet macros have been defined.
92  */
93 #ifndef IN_SUBNETA
94 #define IN_SUBNETA(i)           ((((afs_int32)(i))&0x80800000)==0x00800000)
95 #endif
96
97 #ifndef IN_CLASSA_SUBNET
98 #define IN_CLASSA_SUBNET        0xffff0000
99 #endif
100
101 #ifndef IN_SUBNETB
102 #define IN_SUBNETB(i)           ((((afs_int32)(i))&0xc0008000)==0x80008000)
103 #endif
104
105 #ifndef IN_CLASSB_SUBNET
106 #define IN_CLASSB_SUBNET        0xffffff00
107 #endif
108
109 #define rxr_GetEpoch(aconn) (((struct rx_connection *)(aconn))->epoch)
110
111 #define rxr_CidOf(aconn) (((struct rx_connection *)(aconn))->cid)
112
113 #define rxr_PortOf(aconn) \
114     rx_PortOf(rx_PeerOf(((struct rx_connection *)(aconn))))
115
116 #define rxr_HostOf(aconn) \
117     rx_HostOf(rx_PeerOf((struct rx_connection *)(aconn)))
118
119
120 /* get a new block of CEs and chain it on CEFree */
121 static void GetCEBlock()
122 {
123     register struct CEBlock *block;
124     register int i;
125
126     block = (struct CEBlock *)malloc(sizeof(struct CEBlock));
127     if (!block) {
128         ViceLog(0, ("Failed malloc in GetCEBlock\n"));
129         ShutDownAndCore(PANIC);
130     }
131
132     for(i = 0; i < (CESPERBLOCK -1); i++) {
133         Lock_Init(&block->entry[i].lock);
134         block->entry[i].next = &(block->entry[i+1]);
135     }
136     block->entry[CESPERBLOCK-1].next = 0;
137     Lock_Init(&block->entry[CESPERBLOCK-1].lock);
138     CEFree = (struct client *)block;
139     CEBlocks++;
140
141 } /*GetCEBlock*/
142
143
144 /* get the next available CE */
145 static struct client *GetCE()
146 {
147     register struct client *entry;
148
149     if (CEFree == 0)
150         GetCEBlock();
151     if (CEFree == 0) {
152         ViceLog(0, ("CEFree NULL in GetCE\n"));
153         ShutDownAndCore(PANIC);
154     }
155
156     entry = CEFree;
157     CEFree = entry->next;
158     CEs++;
159     memset((char *)entry, 0, CLIENT_TO_ZERO(entry));
160     return(entry);
161
162 } /*GetCE*/
163
164
165 /* return an entry to the free list */
166 static void FreeCE(register struct client *entry)
167 {
168     entry->next = CEFree;
169     CEFree = entry;
170     CEs--;
171
172 } /*FreeCE*/
173
174 /*
175  * The HTs and HTBlocks variables were formerly static, but they are
176  * now referenced elsewhere in the FileServer.
177  */
178 int HTs = 0;                            /* active file entries */
179 int HTBlocks = 0;                       /* number of blocks of HTs */
180 static struct host *HTFree = 0;         /* first free file entry */
181
182 /*
183  * Hash tables of host pointers. We need two tables, one
184  * to map IP addresses onto host pointers, and another
185  * to map host UUIDs onto host pointers.
186  */
187 static struct h_hashChain *hostHashTable[h_HASHENTRIES];
188 static struct h_hashChain *hostUuidHashTable[h_HASHENTRIES];
189 #define h_HashIndex(hostip) ((hostip) & (h_HASHENTRIES-1))
190 #define h_UuidHashIndex(uuidp) (((int)(afs_uuid_hash(uuidp))) & (h_HASHENTRIES-1))
191
192 struct HTBlock          /* block of HTSPERBLOCK file entries */
193 {
194     struct host entry[h_HTSPERBLOCK];
195 };
196
197
198 /* get a new block of HTs and chain it on HTFree */
199 static void GetHTBlock()
200 {
201     register struct HTBlock *block;
202     register int i;
203     static int index = 0;
204
205     block = (struct HTBlock *)malloc(sizeof(struct HTBlock));
206     if (!block) {
207         ViceLog(0, ("Failed malloc in GetHTBlock\n"));
208         ShutDownAndCore(PANIC);
209     }
210
211 #ifdef AFS_PTHREAD_ENV
212     for(i=0; i < (h_HTSPERBLOCK); i++)
213         assert(pthread_cond_init(&block->entry[i].cond, NULL) == 0);
214 #endif /* AFS_PTHREAD_ENV */
215     for(i=0; i < (h_HTSPERBLOCK); i++)
216         Lock_Init(&block->entry[i].lock);
217     for(i=0; i < (h_HTSPERBLOCK -1); i++)
218         block->entry[i].next = &(block->entry[i+1]);
219     for (i=0; i< (h_HTSPERBLOCK); i++)
220         block->entry[i].index = index++;
221     block->entry[h_HTSPERBLOCK-1].next = 0;
222     HTFree = (struct host *)block;
223     hosttableptrs[HTBlocks++] = block->entry;
224
225 } /*GetHTBlock*/
226
227
228 /* get the next available HT */
229 static struct host *GetHT()
230 {
231     register struct host *entry;
232
233     if (HTFree == 0)
234         GetHTBlock();
235     assert(HTFree != 0);
236     entry = HTFree;
237     HTFree = entry->next;
238     HTs++;
239     memset((char *)entry, 0, HOST_TO_ZERO(entry));
240     return(entry);
241
242 } /*GetHT*/
243
244
245 /* return an entry to the free list */
246 static void FreeHT(register struct host *entry)
247 {
248     entry->next = HTFree;
249     HTFree = entry;
250     HTs--;
251
252 } /*FreeHT*/
253
254
255 static short consolePort = 0;
256
257 int h_Release(register struct host *host)
258 {
259     H_LOCK
260     h_Release_r(host);
261     H_UNLOCK
262     return 0;
263 }
264
265 /**
266  * If this thread does not have a hold on this host AND
267  * if other threads also dont have any holds on this host AND
268  * If either the HOSTDELETED or CLIENTDELETED flags are set
269  * then toss the host
270  */
271 int h_Release_r(register struct host *host)
272 {       
273     
274     if (!((host)->holds[h_holdSlot()] & ~h_holdbit()) ) {
275         if (! h_OtherHolds_r(host) ) {
276             /* must avoid masking this until after h_OtherHolds_r runs
277                but it should be run before h_TossStuff_r */
278             (host)->holds[h_holdSlot()] &= ~h_holdbit();
279             if ( (host->hostFlags & HOSTDELETED) || 
280                 (host->hostFlags & CLIENTDELETED) ) {
281                 h_TossStuff_r(host);
282             }           
283         } else 
284             (host)->holds[h_holdSlot()] &= ~h_holdbit();
285     } else 
286       (host)->holds[h_holdSlot()] &= ~h_holdbit();
287
288     return 0;
289 }
290
291 int h_OtherHolds_r(register struct host *host)
292 {
293     register int i, bit, slot;
294     bit = h_holdbit();
295     slot = h_holdSlot();
296     for (i = 0 ; i < h_maxSlots ; i++) {
297         if (host->holds[i] != ((i == slot) ? bit : 0)) {
298             return 1;
299         }
300     }
301     return 0;
302 }
303
304 int h_Lock_r(register struct host *host)
305 {
306     H_UNLOCK
307     h_Lock(host);
308     H_LOCK
309     return 0;
310 }
311
312 /**
313   * Non-blocking lock
314   * returns 1 if already locked
315   * else returns locks and returns 0
316   */
317
318 int h_NBLock_r(register struct host *host)
319 {
320     struct Lock *hostLock = &host->lock;
321     int locked = 0;
322
323     H_UNLOCK
324     LOCK_LOCK(hostLock)
325     if ( !(hostLock->excl_locked) && !(hostLock->readers_reading) )
326         hostLock->excl_locked = WRITE_LOCK;
327     else
328         locked = 1;
329
330     LOCK_UNLOCK(hostLock)
331     H_LOCK
332     if ( locked )
333         return 1;
334     else
335         return 0;
336 }
337
338
339 #if FS_STATS_DETAILED
340 /*------------------------------------------------------------------------
341  * PRIVATE h_AddrInSameNetwork
342  *
343  * Description:
344  *      Given a target IP address and a candidate IP address (both
345  *      in host byte order), return a non-zero value (1) if the
346  *      candidate address is in a different network from the target
347  *      address.
348  *
349  * Arguments:
350  *      a_targetAddr       : Target address.
351  *      a_candAddr         : Candidate address.
352  *
353  * Returns:
354  *      1 if the candidate address is in the same net as the target,
355  *      0 otherwise.
356  *
357  * Environment:
358  *      The target and candidate addresses are both in host byte
359  *      order, NOT network byte order, when passed in.  We return
360  *      our value as a character, since that's the type of field in
361  *      the host structure, where this info will be stored.
362  *
363  * Side Effects:
364  *      As advertised.
365  *------------------------------------------------------------------------*/
366
367 static char h_AddrInSameNetwork(afs_uint32 a_targetAddr, afs_uint32 a_candAddr)
368 { /*h_AddrInSameNetwork*/
369
370     afs_uint32 targetNet;
371     afs_uint32 candNet;
372
373     /*
374      * Pull out the network and subnetwork numbers from the target
375      * and candidate addresses.  We can short-circuit this whole
376      * affair if the target and candidate addresses are not of the
377      * same class.
378      */
379     if (IN_CLASSA(a_targetAddr)) {
380         if (!(IN_CLASSA(a_candAddr))) {
381             return(0);
382         }
383         targetNet = a_targetAddr & IN_CLASSA_NET;
384         candNet   = a_candAddr   & IN_CLASSA_NET;
385     }
386     else
387         if (IN_CLASSB(a_targetAddr)) {
388             if (!(IN_CLASSB(a_candAddr))) {
389                 return(0);
390             }
391             targetNet = a_targetAddr & IN_CLASSB_NET;
392             candNet   = a_candAddr   & IN_CLASSB_NET;
393         } /*Class B target*/
394         else
395             if (IN_CLASSC(a_targetAddr)) {
396                 if (!(IN_CLASSC(a_candAddr))) {
397                     return(0);
398                 }
399                 targetNet = a_targetAddr & IN_CLASSC_NET;
400                 candNet   = a_candAddr   & IN_CLASSC_NET;
401             } /*Class C target*/
402             else {
403                 targetNet = a_targetAddr;
404                 candNet = a_candAddr;
405             } /*Class D address*/
406     
407     /*
408      * Now, simply compare the extracted net values for the two addresses
409      * (which at this point are known to be of the same class)
410      */
411     if (targetNet == candNet)
412         return(1);
413     else
414         return(0);
415
416 } /*h_AddrInSameNetwork*/
417 #endif /* FS_STATS_DETAILED */
418
419
420 /* Assumptions: called with held host */
421 void
422 h_gethostcps_r(register struct host *host, register afs_int32 now)
423 {
424     register int code;
425     int  slept=0;
426
427     /* wait if somebody else is already doing the getCPS call */
428     while ( host->hostFlags & HCPS_INPROGRESS ) 
429     {
430         slept = 1;              /* I did sleep */
431         host->hostFlags |= HCPS_WAITING; /* I am sleeping now */
432 #ifdef AFS_PTHREAD_ENV
433         pthread_cond_wait(&host->cond, &host_glock_mutex);
434 #else /* AFS_PTHREAD_ENV */
435         if (( code = LWP_WaitProcess( &(host->hostFlags ))) != LWP_SUCCESS)
436                 ViceLog(0, ("LWP_WaitProcess returned %d\n", code));
437 #endif /* AFS_PTHREAD_ENV */
438     }
439
440
441     host->hostFlags |= HCPS_INPROGRESS; /* mark as CPSCall in progress */
442     if (host->hcps.prlist_val)
443         free(host->hcps.prlist_val);    /* this is for hostaclRefresh */
444     host->hcps.prlist_val = NULL;
445     host->hcps.prlist_len = 0;
446     slept? (host->cpsCall = FT_ApproxTime()): (host->cpsCall = now );
447
448     H_UNLOCK
449     code = pr_GetHostCPS(htonl(host->host), &host->hcps);
450     H_LOCK
451     if (code) {
452         /*
453          * Although ubik_Call (called by pr_GetHostCPS) traverses thru all protection servers
454          * and reevaluates things if no sync server or quorum is found we could still end up
455          * with one of these errors. In such case we would like to reevaluate the rpc call to
456          * find if there's cps for this guy. We treat other errors (except network failures
457          * ones - i.e. code < 0) as an indication that there is no CPS for this host. Ideally
458          * we could like to deal this problem the other way around (i.e. if code == NOCPS 
459          * ignore else retry next time) but the problem is that there're other errors (i.e.
460          * EPERM) for which we don't want to retry and we don't know the whole code list!
461          */
462         if (code < 0 || code == UNOQUORUM || code == UNOTSYNC) {
463             /* 
464              * We would have preferred to use a while loop and try again since ops in protected
465              * acls for this host will fail now but they'll be reevaluated on any subsequent
466              * call. The attempt to wait for a quorum/sync site or network error won't work
467              * since this problems really should only occurs during a complete fileserver 
468              * restart. Since the fileserver will start before the ptservers (and thus before
469              * quorums are complete) clients will be utilizing all the fileserver's lwps!!
470              */
471             host->hcpsfailed = 1;
472             ViceLog(0, ("Warning:  GetHostCPS failed (%d) for %x; will retry\n", code, host->host));
473         } else {
474             host->hcpsfailed = 0;
475             ViceLog(1, ("gethost:  GetHostCPS failed (%d) for %x; ignored\n", code, host->host));
476         }
477         if (host->hcps.prlist_val)
478             free(host->hcps.prlist_val);
479         host->hcps.prlist_val = NULL;
480         host->hcps.prlist_len = 0;      /* Make sure it's zero */
481     } else
482         host->hcpsfailed = 0;
483
484     host->hostFlags &=  ~HCPS_INPROGRESS;
485                                         /* signal all who are waiting */
486     if ( host->hostFlags & HCPS_WAITING) /* somebody is waiting */
487     {
488         host->hostFlags &= ~HCPS_WAITING;
489 #ifdef AFS_PTHREAD_ENV
490         assert(pthread_cond_broadcast(&host->cond) == 0);
491 #else /* AFS_PTHREAD_ENV */
492         if ( (code = LWP_NoYieldSignal( &(host->hostFlags) )) != LWP_SUCCESS )
493                 ViceLog(0, ("LWP_NoYieldSignal returns %d\n", code));
494 #endif /* AFS_PTHREAD_ENV */
495     }
496 }
497
498 /* args in net byte order */
499 void h_flushhostcps(register afs_uint32 hostaddr, register afs_uint32 hport)
500 {
501     register struct host *host;
502     int held;
503     
504     H_LOCK
505     host = h_Lookup_r(hostaddr, hport, &held);
506     if (host) {
507       host->hcpsfailed = 1;
508     }
509     if (!held)
510       h_Release_r(host);
511     H_UNLOCK
512
513     return;
514 }
515
516
517 /*
518  * Allocate a host.  It will be identified by the peer (ip,port) info in the
519  * rx connection provided.  The host is returned held and locked
520  */
521 #define DEF_ROPCONS 2115
522
523 struct host *h_Alloc_r(register struct rx_connection *r_con)
524 {
525     register int code;
526     struct servent *serverentry;
527     register index = h_HashIndex(rxr_HostOf(r_con));
528     register struct host *host;
529     static struct rx_securityClass *sc = 0;
530     afs_int32   now;
531     struct h_hashChain* h_hashChain;
532 #if FS_STATS_DETAILED
533     afs_uint32 newHostAddr_HBO; /*New host IP addr, in host byte order*/
534 #endif /* FS_STATS_DETAILED */
535
536     host = GetHT();
537
538     h_hashChain = (struct h_hashChain*) malloc(sizeof(struct h_hashChain));
539     if (!h_hashChain) {
540         ViceLog(0, ("Failed malloc in h_Alloc_r\n"));
541         assert(0);
542     }
543     h_hashChain->hostPtr = host;
544     h_hashChain->addr = rxr_HostOf(r_con);
545     h_hashChain->next = hostHashTable[index];
546     hostHashTable[index] = h_hashChain;
547
548     host->host = rxr_HostOf(r_con);
549     host->port = rxr_PortOf(r_con);
550     if(consolePort == 0 ) { /* find the portal number for console */
551 #if     defined(AFS_OSF_ENV)
552         serverentry = getservbyname("ropcons", "");
553 #else
554         serverentry = getservbyname("ropcons", 0);
555 #endif 
556         if (serverentry)
557             consolePort = serverentry->s_port;
558         else
559             consolePort = htons(DEF_ROPCONS);   /* Use a default */
560     }
561     if (host->port == consolePort) host->Console = 1;
562     /* Make a callback channel even for the console, on the off chance that it
563        makes a request that causes a break call back.  It shouldn't. */
564     {
565         if (!sc)
566             sc = rxnull_NewClientSecurityObject();
567         host->callback_rxcon = rx_NewConnection (host->host, host->port,
568                                                  1, sc, 0);
569         rx_SetConnDeadTime(host->callback_rxcon, 50);
570         rx_SetConnHardDeadTime(host->callback_rxcon, AFS_HARDDEADTIME);
571     }
572     now = host->LastCall = host->cpsCall = host->ActiveCall = FT_ApproxTime();
573     host->hostFlags = 0;
574     host->hcps.prlist_val = NULL;
575     host->hcps.prlist_len = 0;
576     host->interface = 0;
577 #ifdef undef
578     host->hcpsfailed = 0;       /* save cycles */
579     h_gethostcps(host);      /* do this under host hold/lock */
580 #endif
581     host->FirstClient = 0;      
582     h_Hold_r(host);
583     h_Lock_r(host);
584     h_InsertList_r(host);       /* update global host List */
585 #if FS_STATS_DETAILED
586     /*
587      * Compare the new host's IP address (in host byte order) with ours
588      * (the File Server's), remembering if they are in the same network.
589      */
590     newHostAddr_HBO = (afs_uint32)ntohl(host->host);
591     host->InSameNetwork = h_AddrInSameNetwork(FS_HostAddr_HBO,
592                                               newHostAddr_HBO);
593 #endif /* FS_STATS_DETAILED */
594     return host;
595
596 } /*h_Alloc_r*/
597
598
599 /* Lookup a host given an IP address and UDP port number. */
600 /* hostaddr and hport are in network order */
601 /* Note: host should be released by caller if 0 == *heldp and non-null */
602 /* hostaddr and hport are in network order */
603 struct host *h_Lookup_r(afs_uint32 hostaddr, afs_uint32 hport, int *heldp)
604 {
605     register afs_int32 now;
606     register struct host *host=0;
607     register struct h_hashChain* chain;
608     register index = h_HashIndex(hostaddr);
609     extern int hostaclRefresh;
610
611 restart:
612     for (chain=hostHashTable[index]; chain; chain=chain->next) {
613         host = chain->hostPtr;
614         assert(host);
615         if (!(host->hostFlags & HOSTDELETED) && chain->addr == hostaddr
616             && host->port == hport) {
617             *heldp = h_Held_r(host);
618             if (!*heldp)
619                 h_Hold_r(host);
620             h_Lock_r(host);
621             if (host->hostFlags & HOSTDELETED) {
622                 h_Unlock_r(host);
623                 if (!*heldp)
624                     h_Release_r(host);
625                 goto restart;
626             }
627             h_Unlock_r(host);
628             now = FT_ApproxTime();              /* always evaluate "now" */
629             if (host->hcpsfailed || (host->cpsCall+hostaclRefresh < now )) {
630                 /*
631                  * Every hostaclRefresh period (def 2 hrs) get the new
632                  * membership list for the host.  Note this could be the
633                  * first time that the host is added to a group.  Also
634                  * here we also retry on previous legitimate hcps failures.
635                  *
636                  * If we get here we still have a host hold.
637                  */
638                 h_gethostcps_r(host,now); 
639             }
640             break;
641         }
642         host = NULL;
643     }
644     return host;
645
646 } /*h_Lookup*/
647
648 /* Lookup a host given its UUID. */
649 struct host *h_LookupUuid_r(afsUUID *uuidp)
650 {
651     register struct host *host=0;
652     register struct h_hashChain* chain;
653     register index = h_UuidHashIndex(uuidp);
654
655     for (chain=hostUuidHashTable[index]; chain; chain=chain->next) {
656         host = chain->hostPtr;
657         assert(host);
658         if (!(host->hostFlags & HOSTDELETED) && host->interface
659          && afs_uuid_equal(&host->interface->uuid, uuidp)) {
660             break;
661         }
662         host = NULL;
663     }
664     return host;
665
666 } /*h_Lookup*/
667
668
669 /*
670  * h_Hold_r: Establish a hold by the current LWP on this host--the host
671  * or its clients will not be physically deleted until all holds have
672  * been released.
673  * NOTE: h_Hold_r is a macro defined in host.h.
674  */
675
676 /* h_TossStuff_r:  Toss anything in the host structure (the host or
677  * clients marked for deletion.  Called from h_Release_r ONLY.
678  * To be called, there must be no holds, and either host->deleted
679  * or host->clientDeleted must be set.
680  */
681 int h_TossStuff_r(register struct host *host)
682 {
683     register struct client **cp, *client;
684     int         i;
685
686     /* if somebody still has this host held */
687     for (i=0; (i<h_maxSlots)&&(!(host)->holds[i]); i++);
688     if  (i!=h_maxSlots)
689         return;
690
691     /* if somebody still has this host locked */
692     if (h_NBLock_r(host) != 0) {
693         char hoststr[16];
694         ViceLog(0, ("Warning:  h_TossStuff_r failed; Host %s:%d was locked.\n",
695                     afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port))); 
696         return;
697     } else {
698         h_Unlock_r(host);
699     }
700
701     /* ASSUMPTION: rxi_FreeConnection() does not yield */
702     for (cp = &host->FirstClient; (client = *cp); ) {
703         if ((host->hostFlags & HOSTDELETED) || client->deleted) {
704             if (client->refCount) {
705                 char hoststr[16];
706                 ViceLog(0, ("Warning: Host %s:%d client %x refcount %d while deleting.\n",
707                             afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port),
708                             client, client->refCount)); 
709             }
710             if ((client->ViceId != ANONYMOUSID) && client->CPS.prlist_val) {
711                 free(client->CPS.prlist_val);
712                 client->CPS.prlist_val = NULL;
713             }
714             client->CPS.prlist_len = 0;
715             if (client->tcon) {
716                 rx_SetSpecific(client->tcon, rxcon_client_key, (void *)0);
717             }
718             CurrentConnections--;
719             *cp = client->next;
720             FreeCE(client);
721         } else cp = &client->next;
722     }
723
724     /* We've just cleaned out all the deleted clients; clear the flag */
725     host->hostFlags &= ~CLIENTDELETED;
726
727     if (host->hostFlags & HOSTDELETED) {
728         register struct h_hashChain **hp, *th;
729         register struct rx_connection *rxconn;
730         afsUUID *uuidp;
731         afs_uint32 hostAddr;
732         int i;
733
734         if (host->Console & 1) Console--;
735         if ((rxconn = host->callback_rxcon)) {
736             host->callback_rxcon = (struct rx_connection *)0;
737             /*
738              * If rx_DestroyConnection calls h_FreeConnection we will
739              * deadlock on the host_glock_mutex. Work around the problem
740              * by unhooking the client from the connection before
741              * destroying the connection.
742              */
743             client = rx_GetSpecific(rxconn, rxcon_client_key);
744             if (client && client->tcon == rxconn)
745                 client->tcon = NULL;
746             rx_SetSpecific(rxconn, rxcon_client_key, (void *)0);
747             rx_DestroyConnection(rxconn);
748         }
749         if (host->hcps.prlist_val)
750             free(host->hcps.prlist_val);
751         host->hcps.prlist_val = NULL;
752         host->hcps.prlist_len = 0;
753         DeleteAllCallBacks_r(host, 1);
754         host->hostFlags &= ~RESETDONE;  /* just to be safe */
755
756         /* if alternate addresses do not exist */
757         if ( !(host->interface) )
758         {
759                 for (hp = &hostHashTable[h_HashIndex(host->host)];
760                         (th = *hp); hp = &th->next) 
761                 {
762                         assert(th->hostPtr);
763                         if (th->hostPtr == host) 
764                         {
765                                 *hp = th->next;
766                                 h_DeleteList_r(host); 
767                                 FreeHT(host);
768                                 break;
769                         }               
770                 }
771         }
772         else 
773         {
774             /* delete all hash entries for the UUID */
775             uuidp = &host->interface->uuid;
776             for (hp = &hostUuidHashTable[h_UuidHashIndex(uuidp)];
777                  (th = *hp); hp = &th->next) {
778                 assert(th->hostPtr);
779                 if (th->hostPtr == host)
780                 {
781                     *hp = th->next;
782                     free(th);
783                     break;
784                 }
785             }
786             /* delete all hash entries for alternate addresses */
787             assert(host->interface->numberOfInterfaces > 0 );
788             for ( i=0; i < host->interface->numberOfInterfaces; i++)
789             {
790                 hostAddr = host->interface->addr[i];
791                 for (hp = &hostHashTable[h_HashIndex(hostAddr)];
792                         (th = *hp); hp = &th->next) 
793                 {
794                         assert(th->hostPtr);
795                         if (th->hostPtr == host) 
796                         {
797                                 *hp = th->next;
798                                 free(th);
799                                 break;
800                         }
801                 }
802             }
803             free(host->interface);
804             host->interface = NULL;
805             h_DeleteList_r(host); /* remove host from global host List */
806             FreeHT(host);
807         }                       /* if alternate address exists */
808     } 
809 } /*h_TossStuff_r*/
810
811
812 /* Called by rx when a server connection disappears */
813 int h_FreeConnection(struct rx_connection *tcon)
814 {
815     register struct client *client;
816
817     client = (struct client *) rx_GetSpecific(tcon, rxcon_client_key);
818     if (client) {
819         H_LOCK
820         if (client->tcon == tcon)
821             client->tcon = (struct rx_connection *)0;
822         H_UNLOCK
823     }
824 } /*h_FreeConnection*/
825
826
827 /* h_Enumerate: Calls (*proc)(host, held, param) for at least each host in the
828  * system at the start of the enumeration (perhaps more).  Hosts may be deleted
829  * (have delete flag set); ditto for clients.  (*proc) is always called with
830  * host h_held().  The hold state of the host with respect to this lwp is passed
831  * to (*proc) as the param held.  The proc should return 0 if the host should be
832  * released, 1 if it should be held after enumeration.
833  */
834 void h_Enumerate(int (*proc)(), char *param)
835 {
836     register struct host *host, **list;
837     register int *held;
838     register int i, count;
839     
840     H_LOCK
841     if (hostCount == 0) {
842         H_UNLOCK
843         return;
844     }
845     list = (struct host **)malloc(hostCount * sizeof(struct host *));
846     if (!list) {
847         ViceLog(0, ("Failed malloc in h_Enumerate\n"));
848         assert(0);
849     }
850     held = (int *)malloc(hostCount * sizeof(int));
851     if (!held) {
852         ViceLog(0, ("Failed malloc in h_Enumerate\n"));
853         assert(0);
854     }
855     for (count = 0, host = hostList ; host ; host = host->next, count++) {
856         list[count] = host;
857         if (!(held[count] = h_Held_r(host)))
858             h_Hold_r(host);
859     }
860     assert(count == hostCount);
861     H_UNLOCK
862     for ( i = 0 ; i < count ; i++) {
863         held[i] = (*proc)(list[i], held[i], param);
864         if (!held[i])
865             h_Release(list[i]);/* this might free up the host */
866     }
867     free((void *)list);
868     free((void *)held);
869 } /*h_Enumerate*/
870
871 /* h_Enumerate_r (revised):
872  * Calls (*proc)(host, held, param) for each host in hostList, starting
873  * at enumstart
874  * Hosts may be deleted (have delete flag set); ditto for clients.
875  * (*proc) is always called with
876  * host h_held() and the global host lock (H_LOCK) locked.The hold state of the
877  * host with respect to this lwp is passed to (*proc) as the param held.
878  * The proc should return 0 if the host should be released, 1 if it should
879  * be held after enumeration.
880  */
881 void h_Enumerate_r(int (*proc)(), struct host* enumstart, char *param)
882 {
883     register struct host *host;
884     register int held;
885     
886     if (hostCount == 0) {
887         return;
888     }
889     for (host = enumstart ; host ; host = host->next) {
890         if (!(held = h_Held_r(host)))
891             h_Hold_r(host);
892         held = (*proc)(host, held, param);
893         if (!held)
894             h_Release_r(host);/* this might free up the host */
895     }
896 } /*h_Enumerate_r*/
897
898 /* inserts a new HashChain structure corresponding to this UUID */
899 void hashInsertUuid_r(struct afsUUID *uuid, struct host* host)
900 {
901         int index;
902         struct h_hashChain*     chain;
903
904         /* hash into proper bucket */
905         index = h_UuidHashIndex(uuid);
906
907         /* insert into beginning of list for this bucket */
908         chain = (struct h_hashChain *)malloc(sizeof(struct h_hashChain));
909         if (!chain) {
910             ViceLog(0, ("Failed malloc in hashInsertUuid_r\n"));
911             assert(0);
912         }
913         assert(chain);
914         chain->hostPtr = host;
915         chain->next = hostUuidHashTable[index];
916         hostUuidHashTable[index] = chain;
917 }
918
919 /* Host is returned held */
920 struct host *h_GetHost_r(struct rx_connection *tcon)
921 {
922     struct host *host;
923     struct host *oldHost;
924     int code;
925     int held;
926     struct interfaceAddr interf;
927     int interfValid = 0;
928     struct Identity *identP = NULL;
929     afs_int32 haddr;
930     afs_int32 hport;
931     int i, j, count;
932     char hoststr[16], hoststr2[16];
933
934     haddr = rxr_HostOf(tcon);
935     hport = rxr_PortOf(tcon);
936 retry:
937     code = 0;
938     identP = (struct Identity *)rx_GetSpecific(tcon, rxcon_ident_key);
939     host = h_Lookup_r(haddr, hport, &held);
940     if (host && !identP && !(host->Console&1)) {
941         /* This is a new connection, and we already have a host
942          * structure for this address. Verify that the identity
943          * of the caller matches the identity in the host structure.
944          */
945         h_Lock_r(host);
946         if ( !(host->hostFlags & ALTADDR) )
947         {
948                 /* Another thread is doing initialization */
949                 h_Unlock_r(host);
950                 if ( !held) h_Release_r(host);
951                 ViceLog(125, ("Host %s:%d starting h_Lookup again\n",
952                              afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port)));
953                 goto retry;
954         }
955         host->hostFlags &= ~ALTADDR;
956         H_UNLOCK
957         code = RXAFSCB_WhoAreYou(host->callback_rxcon, &interf);
958         H_LOCK
959         if ( code == RXGEN_OPCODE ) {
960                 identP = (struct Identity *)malloc(sizeof(struct Identity));
961                 if (!identP) {
962                     ViceLog(0, ("Failed malloc in h_GetHost_r\n"));
963                     assert(0);
964                 }
965                 identP->valid = 0;
966                 rx_SetSpecific(tcon, rxcon_ident_key, identP);
967                 /* The host on this connection was unable to respond to 
968                  * the WhoAreYou. We will treat this as a new connection
969                  * from the existing host. The worst that can happen is
970                  * that we maintain some extra callback state information */
971                 if (host->interface) {
972                     ViceLog(0,
973                             ("Host %s:%d used to support WhoAreYou, deleting.\n",
974                             afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port)));
975                     host->hostFlags |= HOSTDELETED;
976                     h_Unlock_r(host);
977                     if (!held) h_Release_r(host);
978                     host = NULL;
979                     goto retry;
980                 }
981         } else if (code == 0) {
982                 interfValid = 1;
983                 identP = (struct Identity *)malloc(sizeof(struct Identity));
984                 if (!identP) {
985                     ViceLog(0, ("Failed malloc in h_GetHost_r\n"));
986                     assert(0);
987                 }
988                 identP->valid = 1;
989                 identP->uuid = interf.uuid;
990                 rx_SetSpecific(tcon, rxcon_ident_key, identP);
991                 /* Check whether the UUID on this connection matches
992                  * the UUID in the host structure. If they don't match
993                  * then this is not the same host as before. */
994                 if ( !host->interface
995                   || !afs_uuid_equal(&interf.uuid, &host->interface->uuid) ) {
996                     ViceLog(25,
997                             ("Host %s:%d has changed its identity, deleting.\n",
998                             afs_inet_ntoa_r(host->host, hoststr), host->port));
999                     host->hostFlags |= HOSTDELETED;
1000                     h_Unlock_r(host);
1001                     if (!held) h_Release_r(host);
1002                     host = NULL;
1003                     goto retry;
1004                 }
1005         } else {
1006             afs_inet_ntoa_r(host->host, hoststr);
1007             ViceLog(0,("CB: WhoAreYou failed for %s:%d, error %d\n", 
1008                        hoststr, ntohs(host->port), code));
1009             host->hostFlags |= VENUSDOWN;
1010         }
1011         host->hostFlags |= ALTADDR;
1012         h_Unlock_r(host);
1013     } else if (host) {
1014         if ( ! (host->hostFlags & ALTADDR) ) 
1015         {
1016                 /* another thread is doing the initialisation */
1017                 ViceLog(125, ("Host %s:%d waiting for host-init to complete\n",
1018                              afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port)));
1019                 h_Lock_r(host);
1020                 h_Unlock_r(host);
1021                 if ( !held) h_Release_r(host);
1022                 ViceLog(125, ("Host %s:%d starting h_Lookup again\n",
1023                              afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port)));
1024                 goto retry;
1025         }
1026         /* We need to check whether the identity in the host structure
1027          * matches the identity on the connection. If they don't match
1028          * then treat this a new host. */
1029         if ( !(host->Console&1)
1030           && ( ( !identP->valid && host->interface )
1031             || ( identP->valid && !host->interface )
1032             || ( identP->valid
1033               && !afs_uuid_equal(&identP->uuid, &host->interface->uuid) ) ) ) 
1034         {
1035             char uuid1[128], uuid2[128];
1036             if (identP->valid)
1037                 afsUUID_to_string(identP->uuid, uuid1, 127);
1038             if (host->interface)
1039                 afsUUID_to_string(host->interface->uuid, uuid2, 127);
1040             ViceLog(0, 
1041                     ("CB: new identity for host %s:%d, deleting(%x %x %s %s)\n", 
1042                      afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port), 
1043                      identP->valid, host->interface, identP->valid ? uuid1 : 
1044                      "", host->interface ? uuid2 : ""));
1045
1046             /* The host in the cache is not the host for this connection */
1047             host->hostFlags |= HOSTDELETED;
1048             h_Unlock_r(host);
1049             if (!held) h_Release_r(host);
1050             goto retry;
1051         }
1052     } else {
1053         host = h_Alloc_r(tcon); /* returned held and locked */
1054         h_gethostcps_r(host,FT_ApproxTime());
1055         if (!(host->Console&1)) {
1056             if (!identP || !interfValid) {
1057                 H_UNLOCK
1058                 code = RXAFSCB_WhoAreYou(host->callback_rxcon, &interf);
1059                 H_LOCK
1060                 if ( code == RXGEN_OPCODE ) {
1061                     identP = (struct Identity *)malloc(sizeof(struct Identity));
1062                     if (!identP) {
1063                         ViceLog(0, ("Failed malloc in h_GetHost_r\n"));
1064                         assert(0);
1065                     }
1066                     identP->valid = 0;
1067                     rx_SetSpecific(tcon, rxcon_ident_key, identP);
1068                     ViceLog(25,
1069                             ("Host %s:%d does not support WhoAreYou.\n",
1070                             afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port)));
1071                     code = 0;
1072                 } else if (code == 0) {
1073                     interfValid = 1;
1074                     identP = (struct Identity *)malloc(sizeof(struct Identity));
1075                     if (!identP) {
1076                         ViceLog(0, ("Failed malloc in h_GetHost_r\n"));
1077                         assert(0);
1078                     }
1079                     identP->valid = 1;
1080                     identP->uuid = interf.uuid;
1081                     rx_SetSpecific(tcon, rxcon_ident_key, identP);
1082                     ViceLog(25, ("WhoAreYou success on %s:%d\n",
1083                                 afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port)));
1084                 }
1085             }
1086             if (code == 0 && !identP->valid) {
1087                 H_UNLOCK
1088                 code = RXAFSCB_InitCallBackState(host->callback_rxcon);
1089                 H_LOCK
1090             } else if (code == 0) {
1091                 oldHost = h_LookupUuid_r(&identP->uuid);
1092                 if (oldHost) {
1093                     /* This is a new address for an existing host. Update
1094                      * the list of interfaces for the existing host and
1095                      * delete the host structure we just allocated. */
1096                     if (!(held = h_Held_r(oldHost)))
1097                         h_Hold_r(oldHost);
1098                     h_Lock_r(oldHost);
1099                     ViceLog(25, ("CB: new addr %s:%d for old host %s:%d\n",
1100                                 afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port),
1101                                 afs_inet_ntoa_r(oldHost->host, hoststr2), ntohs(oldHost->port)));
1102                     host->hostFlags |= HOSTDELETED;
1103                     h_Unlock_r(host);
1104                     h_Release_r(host);
1105                     host = oldHost;
1106                     addInterfaceAddr_r(host, haddr);
1107                 } else {
1108                     /* This really is a new host */
1109                     hashInsertUuid_r(&identP->uuid, host);
1110                     H_UNLOCK
1111                     code = RXAFSCB_InitCallBackState3(host->callback_rxcon,
1112                                                       &FS_HostUUID);
1113                     H_LOCK
1114                     if (code == 0) {
1115                         ViceLog(25, ("InitCallBackState3 success on %s:%d\n",
1116                                     afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port)));
1117                         assert(interfValid == 1);
1118                         initInterfaceAddr_r(host, &interf);
1119                     }
1120                 }
1121            }
1122            if (code) {
1123                afs_inet_ntoa_r(host->host, hoststr);
1124                ViceLog(0,("CB: RCallBackConnectBack failed for %s:%d\n", 
1125                           hoststr, ntohs(host->port)));
1126                host->hostFlags |= VENUSDOWN;
1127             }
1128             else
1129                 host->hostFlags |= RESETDONE;
1130
1131         }
1132         host->hostFlags |= ALTADDR;/* host structure iniatilisation complete */
1133         h_Unlock_r(host);
1134     }
1135     return host;
1136
1137 } /*h_GetHost_r*/
1138
1139
1140 static char localcellname[PR_MAXNAMELEN+1];
1141 char local_realm[AFS_REALM_SZ] = "";
1142
1143 /* not reentrant */
1144 void h_InitHostPackage()
1145 {
1146     afsconf_GetLocalCell (confDir, localcellname, PR_MAXNAMELEN);
1147     if (!local_realm[0]) {
1148         if (afs_krb_get_lrealm(local_realm, 0) != 0/*KSUCCESS*/) {
1149             ViceLog(0, ("afs_krb_get_lrealm failed, using %s.\n",localcellname));
1150             strcpy (local_realm, localcellname);
1151         }
1152     }
1153     rxcon_ident_key = rx_KeyCreate((rx_destructor_t)free);
1154     rxcon_client_key = rx_KeyCreate((rx_destructor_t)0);
1155 #ifdef AFS_PTHREAD_ENV
1156     assert(pthread_mutex_init(&host_glock_mutex, NULL) == 0);
1157 #endif /* AFS_PTHREAD_ENV */
1158 }
1159
1160 static int MapName_r(char *aname, char *acell, afs_int32 *aval)
1161 {
1162     namelist lnames;
1163     idlist lids;
1164     afs_int32 code;
1165     afs_int32 anamelen, cnamelen;
1166     int foreign = 0;
1167     char *tname;
1168
1169     anamelen=strlen(aname);
1170     if (anamelen >= PR_MAXNAMELEN)
1171         return -1; /* bad name -- caller interprets this as anonymous, but retries later */
1172
1173     lnames.namelist_len = 1;
1174     lnames.namelist_val = (prname *) aname;  /* don't malloc in the common case */
1175     lids.idlist_len = 0;
1176     lids.idlist_val = NULL;
1177
1178     cnamelen=strlen(acell);
1179     if (cnamelen) {
1180         if (strcasecmp(local_realm, acell) && strcasecmp(localcellname, acell))  {
1181             ViceLog(2, ("MapName: cell is foreign.  cell=%s, localcell=%s, localrealm=%s\n",
1182                         acell, localcellname, local_realm));
1183             if ((anamelen+cnamelen+1) >= PR_MAXNAMELEN) {
1184                 ViceLog(2, ("MapName: Name too long, using AnonymousID for %s@%s\n",
1185                             aname, acell));
1186                 *aval = AnonymousID;
1187                 return 0;
1188             }               
1189             foreign = 1;  /* attempt cross-cell authentication */
1190             tname = (char *) malloc(anamelen+cnamelen+2);
1191             if (!tname) {
1192                 ViceLog(0, ("Failed malloc in MapName_r\n"));
1193                 assert(0);
1194             }
1195             strcpy(tname, aname);
1196             tname[anamelen] = '@';
1197             strcpy(tname+anamelen+1, acell);
1198             lnames.namelist_val = (prname *) tname;
1199         }
1200     }
1201
1202     H_UNLOCK
1203     code = pr_NameToId(&lnames, &lids); 
1204     H_LOCK
1205     if (code == 0) {
1206        if (lids.idlist_val) {
1207           *aval = lids.idlist_val[0];
1208           if (*aval == AnonymousID) {
1209              ViceLog(2, ("MapName: NameToId on %s returns anonymousID\n", lnames.namelist_val));
1210           }
1211           free(lids.idlist_val);  /* return parms are not malloced in stub if server proc aborts */
1212        } else {
1213           ViceLog(0, ("MapName: NameToId on '%s' is unknown\n", lnames.namelist_val));
1214           code = -1;
1215        }
1216     }
1217
1218     if (foreign) {
1219         free(lnames.namelist_val);  /* We allocated this above, so we must free it now. */
1220     }
1221     return code;
1222 }
1223 /*MapName*/
1224
1225
1226 /* NOTE: this returns the client with a Shared lock */
1227 struct client *h_ID2Client(afs_int32 vid)
1228 {
1229     register struct client *client;
1230     register struct host *host;
1231
1232     H_LOCK
1233
1234       for (host=hostList; host; host=host->next) {
1235         if (host->hostFlags & HOSTDELETED)
1236           continue;
1237         for (client = host->FirstClient; client; client = client->next) {
1238           if (!client->deleted && client->ViceId == vid) {
1239             client->refCount++;
1240             H_UNLOCK
1241             ObtainSharedLock(&client->lock);
1242             H_LOCK
1243             client->refCount--;
1244             H_UNLOCK
1245             return client;
1246           }
1247         }
1248       }
1249
1250     H_UNLOCK
1251     return 0;
1252 }
1253
1254 /*
1255  * Called by the server main loop.  Returns a h_Held client, which must be
1256  * released later the main loop.  Allocates a client if the matching one
1257  * isn't around. The client is returned with its reference count incremented
1258  * by one. The caller must call h_ReleaseClient_r when finished with
1259  * the client.
1260  */
1261 struct client *h_FindClient_r(struct rx_connection *tcon)
1262 {
1263     register struct client *client;
1264     register struct host *host;
1265     struct client *oldClient;
1266     afs_int32 viceid;
1267     afs_int32 expTime;
1268     afs_int32 code;
1269     int authClass;
1270 #if (64-MAXKTCNAMELEN)
1271 ticket name length != 64
1272 #endif
1273     char tname[64];
1274     char tinst[64];
1275     char uname[PR_MAXNAMELEN];
1276     char tcell[MAXKTCREALMLEN];
1277     int fail = 0;
1278
1279     client = (struct client *) rx_GetSpecific(tcon, rxcon_client_key);
1280     if (client && !client->deleted) {
1281        client->refCount++;
1282        h_Hold_r(client->host);
1283        if (client->prfail != 2) {  /* Could add shared lock on client here */
1284           /* note that we don't have to lock entry in this path to
1285            * ensure CPS is initialized, since we don't call rx_SetSpecific
1286            * until initialization is done, and we only get here if
1287            * rx_GetSpecific located the client structure.
1288            */
1289           return client;
1290        }
1291        H_UNLOCK
1292        ObtainWriteLock(&client->lock); /* released at end */
1293        H_LOCK
1294     } else if (client) {
1295        client->refCount++;
1296     }
1297
1298     authClass = rx_SecurityClassOf((struct rx_connection *)tcon);
1299     ViceLog(5,("FindClient: authenticating connection: authClass=%d\n",
1300                authClass));
1301     if (authClass == 1) {
1302        /* A bcrypt tickets, no longer supported */
1303        ViceLog(1, ("FindClient: bcrypt ticket, using AnonymousID\n"));
1304        viceid = AnonymousID;
1305        expTime = 0x7fffffff;
1306     } else if (authClass == 2) {
1307        afs_int32 kvno;
1308
1309        /* kerberos ticket */
1310        code = rxkad_GetServerInfo (tcon, /*level*/0, &expTime,
1311                                    tname, tinst, tcell, &kvno);
1312        if (code) {
1313           ViceLog(1, ("Failed to get rxkad ticket info\n"));
1314           viceid = AnonymousID;
1315           expTime = 0x7fffffff;
1316        } else {
1317           int ilen = strlen(tinst);
1318           ViceLog(5,
1319                   ("FindClient: rxkad conn: name=%s,inst=%s,cell=%s,exp=%d,kvno=%d\n",
1320                    tname, tinst, tcell, expTime, kvno));
1321           strncpy (uname, tname, sizeof(uname));
1322           if (ilen) {
1323              if (strlen(uname) + 1 + ilen >= sizeof(uname))
1324                 goto bad_name;
1325              strcat (uname, ".");
1326              strcat (uname, tinst);
1327           }
1328           /* translate the name to a vice id */
1329           code = MapName_r(uname, tcell, &viceid);
1330           if (code) {
1331           bad_name:
1332              ViceLog(1, ("failed to map name=%s, cell=%s -> code=%d\n",
1333                          uname, tcell, code));
1334              fail = 1;
1335              viceid = AnonymousID;
1336              expTime = 0x7fffffff;
1337           }
1338        }
1339     } else {
1340        viceid = AnonymousID;    /* unknown security class */
1341        expTime = 0x7fffffff;
1342     }
1343
1344     if (!client) {
1345        host = h_GetHost_r(tcon); /* Returns it h_Held */
1346
1347        /* First try to find the client structure */
1348        for (client = host->FirstClient; client; client = client->next) {
1349           if (!client->deleted && (client->sid == rxr_CidOf(tcon)) &&
1350                                   (client->VenusEpoch == rxr_GetEpoch(tcon))) {
1351              if (client->tcon && (client->tcon != tcon)) {
1352                 ViceLog(0, ("*** Vid=%d, sid=%x, tcon=%x, Tcon=%x ***\n", 
1353                             client->ViceId, client->sid, client->tcon, tcon));
1354                 oldClient = (struct client *) rx_GetSpecific(client->tcon,
1355                                                              rxcon_client_key);
1356                 if (oldClient) {
1357                     if (oldClient == client)
1358                         rx_SetSpecific(client->tcon, rxcon_client_key, NULL);
1359                     else
1360                         ViceLog(0,
1361                             ("Client-conn mismatch: CL1=%x, CN=%x, CL2=%x\n",
1362                              client, client->tcon, oldClient));
1363                 }
1364                 client->tcon = (struct rx_connection *)0;
1365              }
1366              client->refCount++;
1367              H_UNLOCK
1368              ObtainWriteLock(&client->lock);
1369              H_LOCK
1370              break;
1371           }
1372        }
1373
1374        /* Still no client structure - get one */
1375        if (!client) {
1376           client = GetCE();
1377           ObtainWriteLock(&client->lock);
1378           client->refCount = 1;
1379           client->host = host;
1380           client->next = host->FirstClient;
1381           host->FirstClient = client;
1382 #if FS_STATS_DETAILED
1383           client->InSameNetwork = host->InSameNetwork;
1384 #endif /* FS_STATS_DETAILED */
1385           client->ViceId = viceid;
1386           client->expTime       = expTime;      /* rx only */
1387           client->authClass = authClass;        /* rx only */
1388           client->sid = rxr_CidOf(tcon);
1389           client->VenusEpoch = rxr_GetEpoch(tcon);
1390           client->CPS.prlist_val = 0;
1391           client->CPS.prlist_len = 0;
1392           CurrentConnections++; /* increment number of connections */
1393        }
1394     }
1395     client->prfail = fail;
1396
1397     if (!(client->CPS.prlist_val) || (viceid != client->ViceId)) {
1398         if (client->CPS.prlist_val && (client->ViceId != ANONYMOUSID)) {
1399            free(client->CPS.prlist_val);
1400         }
1401         client->CPS.prlist_val = NULL;
1402         client->CPS.prlist_len = 0;
1403         client->ViceId = viceid;
1404         client->expTime = expTime;
1405
1406         if (viceid == ANONYMOUSID) {
1407           client->CPS.prlist_len = AnonCPS.prlist_len;
1408           client->CPS.prlist_val = AnonCPS.prlist_val;
1409         } else {
1410           H_UNLOCK
1411           code = pr_GetCPS(viceid, &client->CPS);
1412           H_LOCK
1413           if (code) {
1414             char hoststr[16];
1415             ViceLog(0, ("pr_GetCPS failed(%d) for user %d, host %s:%d\n",
1416                        code, viceid,
1417                        afs_inet_ntoa_r(client->host->host, hoststr),
1418                        ntohs(client->host->port)));
1419
1420             /* Although ubik_Call (called by pr_GetCPS) traverses thru
1421              * all protection servers and reevaluates things if no
1422              * sync server or quorum is found we could still end up
1423              * with one of these errors. In such case we would like to
1424              * reevaluate the rpc call to find if there's cps for this
1425              * guy. We treat other errors (except network failures
1426              * ones - i.e. code < 0) as an indication that there is no
1427              * CPS for this host.  Ideally we could like to deal this
1428              * problem the other way around (i.e.  if code == NOCPS
1429              * ignore else retry next time) but the problem is that
1430              * there're other errors (i.e.  EPERM) for which we don't
1431              * want to retry and we don't know the whole code list!
1432              */
1433             if (code < 0 || code == UNOQUORUM || code == UNOTSYNC) 
1434                 client->prfail = 1;
1435           }
1436         }
1437         /* the disabling of system:administrators is so iffy and has so many
1438          * possible failure modes that we will disable it again */
1439         /* Turn off System:Administrator for safety  
1440            if (AL_IsAMember(SystemId, client->CPS) == 0)
1441            assert(AL_DisableGroup(SystemId, client->CPS) == 0); */
1442     }
1443
1444     /* Now, tcon may already be set to a rock, since we blocked with no host
1445      * or client locks set above in pr_GetCPS (XXXX some locking is probably
1446      * required).  So, before setting the RPC's rock, we should disconnect
1447      * the RPC from the other client structure's rock.
1448      */
1449     oldClient = (struct client *) rx_GetSpecific(tcon, rxcon_client_key);
1450     if (oldClient && oldClient->tcon == tcon) {
1451         oldClient->tcon = (struct rx_connection *) 0;
1452         /* rx_SetSpecific will be done immediately below */
1453     }
1454     client->tcon = tcon;
1455     rx_SetSpecific(tcon, rxcon_client_key, client);
1456     ReleaseWriteLock(&client->lock);
1457
1458     return client;
1459
1460 } /*h_FindClient_r*/
1461
1462 int h_ReleaseClient_r(struct client *client)
1463 {
1464     assert(client->refCount > 0);
1465     client->refCount--;
1466     return 0;
1467 }
1468
1469
1470 /*
1471  * Sigh:  this one is used to get the client AGAIN within the individual
1472  * server routines.  This does not bother h_Holding the host, since
1473  * this is assumed already have been done by the server main loop.
1474  * It does check tokens, since only the server routines can return the
1475  * VICETOKENDEAD error code
1476  */
1477 int GetClient(struct rx_connection * tcon, struct client **cp)
1478 {
1479     register struct client *client;
1480
1481     H_LOCK
1482
1483     *cp = client = (struct client *) rx_GetSpecific(tcon, rxcon_client_key);
1484     if (!(client && client->tcon && rxr_CidOf(client->tcon) == client->sid)) {
1485         if (!client)
1486             ViceLog(0, ("GetClient: no client in conn %x\n", tcon));
1487         else
1488             ViceLog(0, ("GetClient: tcon %x tcon sid %d client sid %d\n", 
1489                         client->tcon, client->tcon ? rxr_CidOf(client->tcon)
1490                         : -1, client->sid));
1491         assert(0);
1492     }
1493     if (client &&
1494         client->LastCall > client->expTime && client->expTime) {
1495         char hoststr[16];
1496         ViceLog(1, ("Token for %s at %s:%d expired %d\n",
1497                 h_UserName(client),
1498                 afs_inet_ntoa_r(client->host->host, hoststr),
1499                 ntohs(client->host->port), client->expTime));
1500         H_UNLOCK
1501         return VICETOKENDEAD;
1502     }
1503
1504     H_UNLOCK
1505     return 0;
1506
1507 } /*GetClient*/
1508
1509
1510 /* Client user name for short term use.  Note that this is NOT inexpensive */
1511 char *h_UserName(struct client *client)
1512 {
1513     static char User[PR_MAXNAMELEN+1];
1514     namelist lnames;
1515     idlist lids;
1516
1517     lids.idlist_len = 1;
1518     lids.idlist_val = (afs_int32 *)malloc(1*sizeof(afs_int32));
1519     if (!lids.idlist_val) {
1520         ViceLog(0, ("Failed malloc in h_UserName\n"));
1521         assert(0);
1522     }
1523     lnames.namelist_len = 0;
1524     lnames.namelist_val = (prname *)0;
1525     lids.idlist_val[0] = client->ViceId;
1526     if (pr_IdToName(&lids,&lnames)) {
1527         /* We need to free id we alloced above! */
1528         free(lids.idlist_val);
1529         return "*UNKNOWN USER NAME*";
1530     }
1531     strncpy(User,lnames.namelist_val[0],PR_MAXNAMELEN);
1532     free(lids.idlist_val);
1533     free(lnames.namelist_val);
1534     return User;
1535
1536 } /*h_UserName*/
1537
1538
1539 void h_PrintStats()
1540 {
1541     ViceLog(0,
1542             ("Total Client entries = %d, blocks = %d; Host entries = %d, blocks = %d\n",
1543             CEs, CEBlocks, HTs, HTBlocks));
1544
1545 } /*h_PrintStats*/
1546
1547
1548 static int 
1549 h_PrintClient(register struct host *host, int held, StreamHandle_t *file)
1550 {
1551     register struct client *client;
1552     int i;
1553     char tmpStr[256];
1554     char tbuffer[32];
1555     char hoststr[16];
1556
1557     H_LOCK
1558     if (host->hostFlags & HOSTDELETED) {
1559         H_UNLOCK
1560         return held;
1561     }
1562     sprintf(tmpStr,"Host %s:%d down = %d, LastCall %s",
1563             afs_inet_ntoa_r(host->host, hoststr), ntohs(host->port),
1564             (host->hostFlags & VENUSDOWN),
1565             afs_ctime((time_t *)&host->LastCall, tbuffer, sizeof(tbuffer)));
1566     STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1567     for (client = host->FirstClient; client; client=client->next) {
1568         if (!client->deleted) {
1569             if (client->tcon) {
1570                 sprintf(tmpStr, "    user id=%d,  name=%s, sl=%s till %s",
1571                         client->ViceId, h_UserName(client),
1572                         client->authClass ? "Authenticated" : "Not authenticated",
1573                         client->authClass ?
1574                         afs_ctime((time_t *)&client->expTime, tbuffer, sizeof(tbuffer))
1575                         : "No Limit\n");
1576                 STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1577             }
1578             else {
1579                 sprintf(tmpStr, "    user=%s, no current server connection\n",
1580                         h_UserName(client));
1581                 STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1582             }
1583             sprintf(tmpStr, "      CPS-%d is [", client->CPS.prlist_len);
1584             STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1585             if (client->CPS.prlist_val) {
1586                 for (i=0; i > client->CPS.prlist_len; i++) {
1587                     sprintf(tmpStr, " %d", client->CPS.prlist_val[i]);
1588                     STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1589                 }
1590             }
1591             sprintf(tmpStr, "]\n");         
1592             STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1593         }
1594     }
1595     H_UNLOCK
1596     return held;
1597
1598 } /*h_PrintClient*/
1599
1600
1601
1602 /*
1603  * Print a list of clients, with last security level and token value seen,
1604  * if known
1605  */
1606 void h_PrintClients()
1607 {
1608     time_t now;
1609     char tmpStr[256];
1610     char tbuffer[32];
1611
1612     StreamHandle_t *file = STREAM_OPEN(AFSDIR_SERVER_CLNTDUMP_FILEPATH, "w");
1613
1614     if (file == NULL) {
1615         ViceLog(0, ("Couldn't create client dump file %s\n", AFSDIR_SERVER_CLNTDUMP_FILEPATH));
1616         return;
1617     }
1618     now = FT_ApproxTime();
1619     sprintf(tmpStr, "List of active users at %s\n",
1620             afs_ctime(&now, tbuffer, sizeof(tbuffer)));
1621     STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1622     h_Enumerate(h_PrintClient, (char *)file);
1623     STREAM_REALLYCLOSE(file);
1624     ViceLog(0, ("Created client dump %s\n", AFSDIR_SERVER_CLNTDUMP_FILEPATH));
1625 }
1626
1627
1628
1629
1630 static int 
1631 h_DumpHost(register struct host *host, int held, StreamHandle_t *file)
1632 {
1633     int i;
1634     char tmpStr[256];
1635
1636     H_LOCK
1637     sprintf(tmpStr, "ip:%x port:%d hidx:%d cbid:%d lock:%x last:%u active:%u down:%d del:%d cons:%d cldel:%d\n\t hpfailed:%d hcpsCall:%u hcps [",
1638             host->host, ntohs(host->port), host->index, host->cblist,
1639             CheckLock(&host->lock), host->LastCall, host->ActiveCall, 
1640             (host->hostFlags & VENUSDOWN), host->hostFlags&HOSTDELETED, 
1641             host->Console, host->hostFlags & CLIENTDELETED, 
1642             host->hcpsfailed, host->cpsCall);
1643     STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1644     if (host->hcps.prlist_val)
1645         for (i=0; i < host->hcps.prlist_len; i++) {
1646             sprintf(tmpStr, " %d", host->hcps.prlist_val[i]);
1647             STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1648         }
1649     sprintf(tmpStr, "] [");
1650     STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1651     if ( host->interface)
1652         for (i=0; i < host->interface->numberOfInterfaces; i++) {
1653             sprintf(tmpStr, " %x", host->interface->addr[i]);
1654             STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1655         }
1656     sprintf(tmpStr, "] holds: ");
1657     STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1658
1659     for (i = 0 ; i < h_maxSlots ; i++) {
1660       sprintf(tmpStr, "%04x", host->holds[i]);
1661       STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1662     }
1663     sprintf(tmpStr, " slot/bit: %d/%d\n", h_holdSlot(), h_holdbit());
1664     STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1665
1666     H_UNLOCK
1667     return held;
1668
1669 } /*h_DumpHost*/
1670
1671
1672 void h_DumpHosts()
1673 {
1674     time_t now;
1675     StreamHandle_t *file = STREAM_OPEN(AFSDIR_SERVER_HOSTDUMP_FILEPATH, "w");
1676     char tmpStr[256];
1677     char tbuffer[32];
1678
1679     if (file == NULL) {
1680         ViceLog(0, ("Couldn't create host dump file %s\n", AFSDIR_SERVER_HOSTDUMP_FILEPATH));
1681         return;
1682     }
1683     now = FT_ApproxTime();
1684     sprintf(tmpStr, "List of active hosts at %s\n",
1685             afs_ctime(&now, tbuffer, sizeof(tbuffer)));
1686     STREAM_WRITE(tmpStr, strlen(tmpStr), 1, file);
1687     h_Enumerate(h_DumpHost, (char *) file);
1688     STREAM_REALLYCLOSE(file);
1689     ViceLog(0, ("Created host dump %s\n", AFSDIR_SERVER_HOSTDUMP_FILEPATH));
1690
1691 } /*h_DumpHosts*/
1692
1693
1694 /*
1695  * This counts the number of workstations, the number of active workstations,
1696  * and the number of workstations declared "down" (i.e. not heard from
1697  * recently).  An active workstation has received a call since the cutoff
1698  * time argument passed.
1699  */
1700 void 
1701 h_GetWorkStats(int *nump, int *activep, int *delp, afs_int32 cutofftime)
1702 {
1703     register int i;
1704     register struct host *host;
1705     register int num=0, active=0, del=0;
1706
1707     H_LOCK
1708     for (host = hostList; host; host = host->next) {
1709             if (!(host->hostFlags & HOSTDELETED)) {
1710                 num++;
1711                 if (host->ActiveCall > cutofftime)
1712                     active++;
1713                 if (host->hostFlags & VENUSDOWN)
1714                     del++;
1715             }
1716     }
1717     H_UNLOCK
1718     if (nump)
1719         *nump = num;
1720     if (activep)
1721         *activep = active;
1722     if (delp)
1723         *delp = del;
1724
1725 } /*h_GetWorkStats*/
1726
1727
1728 /*------------------------------------------------------------------------
1729  * PRIVATE h_ClassifyAddress
1730  *
1731  * Description:
1732  *      Given a target IP address and a candidate IP address (both
1733  *      in host byte order), classify the candidate into one of three
1734  *      buckets in relation to the target by bumping the counters passed
1735  *      in as parameters.
1736  *
1737  * Arguments:
1738  *      a_targetAddr       : Target address.
1739  *      a_candAddr         : Candidate address.
1740  *      a_sameNetOrSubnetP : Ptr to counter to bump when the two
1741  *                           addresses are either in the same network
1742  *                           or the same subnet.
1743  *      a_diffSubnetP      : ...when the candidate is in a different
1744  *                           subnet.
1745  *      a_diffNetworkP     : ...when the candidate is in a different
1746  *                           network.
1747  *
1748  * Returns:
1749  *      Nothing.
1750  *
1751  * Environment:
1752  *      The target and candidate addresses are both in host byte
1753  *      order, NOT network byte order, when passed in.
1754  *
1755  * Side Effects:
1756  *      As advertised.
1757  *------------------------------------------------------------------------*/
1758
1759 static void h_ClassifyAddress(afs_uint32 a_targetAddr, afs_uint32 a_candAddr,
1760                               afs_int32 *a_sameNetOrSubnetP, 
1761                               afs_int32 *a_diffSubnetP, 
1762                               afs_int32 *a_diffNetworkP)
1763 { /*h_ClassifyAddress*/
1764
1765     register int i;                      /*Iterator thru host hash table*/
1766     register struct host *hostP;         /*Ptr to current host entry*/
1767     register afs_uint32 currHostAddr; /*Current host address*/
1768     afs_uint32 targetNet;
1769     afs_uint32 targetSubnet;
1770     afs_uint32 candNet;
1771     afs_uint32 candSubnet;
1772
1773     /*
1774      * Put bad values into the subnet info to start with.
1775      */
1776     targetSubnet = (afs_uint32) 0;
1777     candSubnet   = (afs_uint32) 0;
1778
1779     /*
1780      * Pull out the network and subnetwork numbers from the target
1781      * and candidate addresses.  We can short-circuit this whole
1782      * affair if the target and candidate addresses are not of the
1783      * same class.
1784      */
1785     if (IN_CLASSA(a_targetAddr)) {
1786         if (!(IN_CLASSA(a_candAddr))) {
1787             (*a_diffNetworkP)++;
1788             return;
1789         }
1790         targetNet = a_targetAddr & IN_CLASSA_NET;
1791         candNet   = a_candAddr   & IN_CLASSA_NET;
1792         if (IN_SUBNETA(a_targetAddr))
1793             targetSubnet = a_targetAddr & IN_CLASSA_SUBNET;
1794         if (IN_SUBNETA(a_candAddr))
1795             candSubnet = a_candAddr & IN_CLASSA_SUBNET;
1796     }
1797     else
1798         if (IN_CLASSB(a_targetAddr)) {
1799             if (!(IN_CLASSB(a_candAddr))) {
1800                 (*a_diffNetworkP)++;
1801                 return;
1802             }
1803             targetNet = a_targetAddr & IN_CLASSB_NET;
1804             candNet   = a_candAddr   & IN_CLASSB_NET;
1805             if (IN_SUBNETB(a_targetAddr))
1806                 targetSubnet = a_targetAddr & IN_CLASSB_SUBNET;
1807             if (IN_SUBNETB(a_candAddr))
1808                 candSubnet = a_candAddr & IN_CLASSB_SUBNET;
1809         } /*Class B target*/
1810         else
1811             if (IN_CLASSC(a_targetAddr)) {
1812                 if (!(IN_CLASSC(a_candAddr))) {
1813                     (*a_diffNetworkP)++;
1814                     return;
1815                 }
1816                 targetNet = a_targetAddr & IN_CLASSC_NET;
1817                 candNet   = a_candAddr   & IN_CLASSC_NET;
1818
1819                 /*
1820                  * Note that class C addresses can't have subnets,
1821                  * so we leave the defaults untouched.
1822                  */
1823             } /*Class C target*/
1824             else {
1825                 targetNet = a_targetAddr;
1826                 candNet = a_candAddr;
1827             } /*Class D address*/
1828     
1829     /*
1830      * Now, simply compare the extracted net and subnet values for
1831      * the two addresses (which at this point are known to be of the
1832      * same class)
1833      */
1834     if (targetNet == candNet) {
1835         if (targetSubnet == candSubnet)
1836             (*a_sameNetOrSubnetP)++;
1837         else
1838             (*a_diffSubnetP)++;
1839     }
1840     else
1841         (*a_diffNetworkP)++;
1842
1843 } /*h_ClassifyAddress*/
1844
1845
1846 /*------------------------------------------------------------------------
1847  * EXPORTED h_GetHostNetStats
1848  *
1849  * Description:
1850  *      Iterate through the host table, and classify each (non-deleted)
1851  *      host entry into ``proximity'' categories (same net or subnet,
1852  *      different subnet, different network).
1853  *
1854  * Arguments:
1855  *      a_numHostsP        : Set to total number of (non-deleted) hosts.
1856  *      a_sameNetOrSubnetP : Set to # hosts on same net/subnet as server.
1857  *      a_diffSubnetP      : Set to # hosts on diff subnet as server.
1858  *      a_diffNetworkP     : Set to # hosts on diff network as server.
1859  *
1860  * Returns:
1861  *      Nothing.
1862  *
1863  * Environment:
1864  *      We only count non-deleted hosts.  The storage pointed to by our
1865  *      parameters is zeroed upon entry.
1866  *
1867  * Side Effects:
1868  *      As advertised.
1869  *------------------------------------------------------------------------*/
1870
1871 void h_GetHostNetStats(afs_int32 *a_numHostsP, afs_int32 *a_sameNetOrSubnetP,
1872                        afs_int32 *a_diffSubnetP, afs_int32 *a_diffNetworkP)
1873 { /*h_GetHostNetStats*/
1874
1875     register struct host *hostP;         /*Ptr to current host entry*/
1876     register afs_uint32 currAddr_HBO; /*Curr host addr, host byte order*/
1877
1878     /*
1879      * Clear out the storage pointed to by our parameters.
1880      */
1881     *a_numHostsP        = (afs_int32) 0;
1882     *a_sameNetOrSubnetP = (afs_int32) 0;
1883     *a_diffSubnetP      = (afs_int32) 0;
1884     *a_diffNetworkP     = (afs_int32) 0;
1885
1886     H_LOCK
1887     for (hostP = hostList; hostP; hostP = hostP->next) {
1888             if (!(hostP->hostFlags & HOSTDELETED)) {
1889                 /*
1890                  * Bump the number of undeleted host entries found.
1891                  * In classifying the current entry's address, make
1892                  * sure to first convert to host byte order.
1893                  */
1894                 (*a_numHostsP)++;
1895                 currAddr_HBO = (afs_uint32)ntohl(hostP->host);
1896                 h_ClassifyAddress(FS_HostAddr_HBO,
1897                                   currAddr_HBO,
1898                                   a_sameNetOrSubnetP,
1899                                   a_diffSubnetP,
1900                                   a_diffNetworkP);
1901             } /*Only look at non-deleted hosts*/
1902     } /*For each host record hashed to this index*/
1903     H_UNLOCK
1904
1905 } /*h_GetHostNetStats*/
1906
1907 static afs_uint32       checktime;
1908 static afs_uint32    clientdeletetime;
1909 static struct AFSFid zerofid;
1910
1911
1912 /*
1913  * XXXX: This routine could use Multi-Rx to avoid serializing the timeouts.
1914  * Since it can serialize them, and pile up, it should be a separate LWP
1915  * from other events.
1916  */
1917 int CheckHost(register struct host *host, int held)
1918 {
1919     register struct client *client;
1920     int code;
1921
1922     /* Host is held by h_Enumerate */
1923     H_LOCK
1924     for (client = host->FirstClient; client; client = client->next) {
1925         if (client->refCount == 0 && client->LastCall < clientdeletetime) {
1926             client->deleted = 1;
1927             host->hostFlags  |= CLIENTDELETED;
1928         }
1929     }
1930     if (host->LastCall < checktime) {
1931         h_Lock_r(host);
1932         if (!(host->hostFlags & HOSTDELETED)) {
1933             if (host->LastCall < clientdeletetime) {
1934                 host->hostFlags |= HOSTDELETED;
1935                 if (!(host->hostFlags & VENUSDOWN)) {
1936                     host->hostFlags &= ~ALTADDR; /* alternate address invalid*/
1937                     if (host->interface) {
1938                         H_UNLOCK
1939                         code = RXAFSCB_InitCallBackState3(host->callback_rxcon,
1940                                                           &FS_HostUUID);
1941                         H_LOCK
1942                     } else {
1943                         H_UNLOCK
1944                         code = RXAFSCB_InitCallBackState(host->callback_rxcon);
1945                         H_LOCK
1946                     }
1947                     host->hostFlags |= ALTADDR; /* alternate addresses valid */
1948                     if ( code )
1949                     {
1950                         char hoststr[16];
1951                         afs_inet_ntoa_r(host->host, hoststr);
1952                         ViceLog(0,
1953                                 ("CB: RCallBackConnectBack (host.c) failed for host %s:%d\n",
1954                                  hoststr, ntohs(host->port)));
1955                         host->hostFlags |= VENUSDOWN;
1956                     }
1957                     /* Note:  it's safe to delete hosts even if they have call
1958                      * back state, because break delayed callbacks (called when a
1959                      * message is received from the workstation) will always send a 
1960                      * break all call backs to the workstation if there is no
1961                      *callback.
1962                      */
1963                 }
1964             }
1965             else {
1966                 if (!(host->hostFlags & VENUSDOWN) && host->cblist) {
1967                     if (host->interface) {
1968                         afsUUID uuid = host->interface->uuid;
1969                         H_UNLOCK
1970                         code = RXAFSCB_ProbeUuid(host->callback_rxcon, &uuid);
1971                         H_LOCK
1972                         if(code) {
1973                             if ( MultiProbeAlternateAddress_r(host) ) {
1974                                 char hoststr[16];
1975                                 afs_inet_ntoa_r(host->host, hoststr);
1976                                 ViceLog(0,
1977                                         ("ProbeUuid failed for host %s:%d\n",
1978                                          hoststr, ntohs(host->port)));
1979                                 host->hostFlags |= VENUSDOWN;
1980                             }
1981                         }
1982                     } else {
1983                         H_UNLOCK
1984                         code = RXAFSCB_Probe(host->callback_rxcon);
1985                         H_LOCK
1986                         if (code) {
1987                             char hoststr[16];
1988                             afs_inet_ntoa_r(host->host, hoststr);
1989                             ViceLog(0, ("ProbeUuid failed for host %s:%d\n",
1990                                         hoststr, ntohs(host->port)));
1991                             host->hostFlags |= VENUSDOWN;
1992                         }
1993                     }
1994                 }
1995             }
1996         }
1997         h_Unlock_r(host);
1998     }
1999     H_UNLOCK
2000     return held;
2001
2002 } /*CheckHost*/
2003
2004
2005 /*
2006  * Set VenusDown for any hosts that have not had a call in 15 minutes and
2007  * don't respond to a probe.  Note that VenusDown can only be cleared if
2008  * a message is received from the host (see ServerLWP in file.c).
2009  * Delete hosts that have not had any calls in 1 hour, clients that
2010  * have not had any calls in 15 minutes.
2011  *
2012  * This routine is called roughly every 5 minutes.
2013  */
2014 void h_CheckHosts() {
2015     afs_uint32 now = FT_ApproxTime();
2016
2017     memset((char *)&zerofid, 0, sizeof(zerofid));
2018     /*
2019      * Send a probe to the workstation if it hasn't been heard from in
2020      * 15 minutes
2021      */
2022     checktime = now - 15*60;
2023     clientdeletetime = now - 120*60;    /* 2 hours ago */
2024     h_Enumerate(CheckHost, NULL);
2025
2026 } /*h_CheckHosts*/
2027
2028 /*
2029  * This is called with host locked and held. At this point, the
2030  * hostHashTable should not be having entries for the alternate
2031  * interfaces. This function has to insert these entries in the
2032  * hostHashTable.
2033  *
2034  * The addresses in the ineterfaceAddr list are in host byte order.
2035  */
2036 int
2037 initInterfaceAddr_r(struct host *host, struct interfaceAddr *interf)
2038 {
2039         int i, j;
2040         int number, count;
2041         afs_int32               myHost;
2042         int found;
2043         struct Interface *interface;
2044
2045         assert(host);
2046         assert(interf);
2047
2048         ViceLog(125,("initInterfaceAddr : host %x numAddr %d\n",
2049                 host->host, interf->numberOfInterfaces));
2050
2051         number = interf->numberOfInterfaces;
2052         myHost = host->host; /* current interface address */
2053
2054         /* validation checks */
2055         if ( number < 0 || number > AFS_MAX_INTERFACE_ADDR )
2056         {
2057                 ViceLog(0,("Number of alternate addresses returned is %d\n",
2058                          number));
2059                 return  -1;
2060         }
2061
2062         /*
2063          * Convert IP addresses to network byte order, and remove for
2064          * duplicate IP addresses from the interface list.
2065          */
2066         for (i = 0, count = 0, found = 0; i < number; i++)
2067         {
2068             interf->addr_in[i] = htonl(interf->addr_in[i]);
2069             for (j = 0 ; j < count ; j++) {
2070                 if (interf->addr_in[j] == interf->addr_in[i])
2071                     break;
2072             }
2073             if (j == count) {
2074                 interf->addr_in[count] = interf->addr_in[i];
2075                 if (interf->addr_in[count] == myHost)
2076                     found = 1;
2077                 count++;
2078             }
2079         }
2080
2081         /*
2082          * Allocate and initialize an interface structure for this host.
2083          */
2084         if (found) {
2085             interface = (struct Interface *)
2086                         malloc(sizeof(struct Interface) +
2087                                (sizeof(afs_int32) * (count-1)));
2088             if (!interface) {
2089                 ViceLog(0, ("Failed malloc in initInterfaceAddr_r\n"));
2090                 assert(0);
2091             }
2092             interface->numberOfInterfaces = count;
2093         } else {
2094             interface = (struct Interface *)
2095                         malloc(sizeof(struct Interface) +
2096                                (sizeof(afs_int32) * count));
2097             assert(interface);
2098             interface->numberOfInterfaces = count + 1;
2099             interface->addr[count] = myHost;
2100         }
2101         interface->uuid = interf->uuid;
2102         for (i = 0 ; i < count ; i++)
2103             interface->addr[i] = interf->addr_in[i];
2104
2105         assert(!host->interface);
2106         host->interface = interface;
2107
2108         for ( i=0; i < host->interface->numberOfInterfaces; i++)
2109         {
2110                 ViceLog(125,("--- alt address %x\n", host->interface->addr[i]));
2111         }
2112
2113         return 0;
2114 }
2115
2116 /* inserts a new HashChain structure corresponding to this address */
2117 void hashInsert_r(afs_int32 addr, struct host* host)
2118 {
2119         int index;
2120         struct h_hashChain*     chain;
2121
2122         /* hash into proper bucket */
2123         index = h_HashIndex(addr);
2124
2125         /* insert into beginning of list for this bucket */
2126         chain = (struct h_hashChain *)malloc(sizeof(struct h_hashChain));
2127         if (!chain) {
2128             ViceLog(0, ("Failed malloc in hashInsert_r\n"));
2129             assert(0);
2130         }
2131         chain->hostPtr = host;
2132         chain->next = hostHashTable[index];
2133         chain->addr = addr;
2134         hostHashTable[index] = chain;
2135
2136 }
2137
2138 /*
2139  * This is called with host locked and held. At this point, the
2140  * hostHashTable should not be having entries for the alternate
2141  * interfaces. This function has to insert these entries in the
2142  * hostHashTable.
2143  *
2144  * All addresses are in network byte order.
2145  */
2146 int
2147 addInterfaceAddr_r(struct host *host, afs_int32 addr)
2148 {
2149         int i;
2150         int number;
2151         int found;
2152         struct Interface *interface;
2153
2154         assert(host);
2155         assert(host->interface);
2156
2157         ViceLog(125,("addInterfaceAddr : host %x addr %d\n",
2158                 host->host, addr));
2159
2160         /*
2161          * Make sure this address is on the list of known addresses
2162          * for this host.
2163          */
2164         number = host->interface->numberOfInterfaces;
2165         for ( i=0, found=0; i < number && !found; i++)
2166         {
2167             if ( host->interface->addr[i] == addr)
2168                 found = 1;
2169         }
2170         if (!found) {
2171             interface = (struct Interface *)
2172                         malloc(sizeof(struct Interface) +
2173                                (sizeof(afs_int32) * number));
2174             if (!interface) {
2175                 ViceLog(0, ("Failed malloc in addInterfaceAddr_r\n"));
2176                 assert(0);
2177             }
2178             interface->numberOfInterfaces = number + 1;
2179             interface->uuid = host->interface->uuid;
2180             for (i = 0 ; i < number ; i++)
2181                 interface->addr[i] = host->interface->addr[i];
2182             interface->addr[number] = addr;
2183             free(host->interface);
2184             host->interface = interface;
2185         }
2186
2187         /*
2188          * Create a hash table entry for this address
2189          */
2190         hashInsert_r(addr, host);
2191
2192         return 0;
2193 }
2194
2195 /* deleted a HashChain structure for this address and host */
2196 /* returns 1 on success */
2197 int
2198 hashDelete_r(afs_int32 addr, struct host* host)
2199 {
2200         int flag;
2201         int index;
2202         register struct h_hashChain **hp, *th;
2203
2204         for (hp = &hostHashTable[h_HashIndex(addr)]; (th = *hp); )
2205         {
2206                 assert(th->hostPtr);
2207                 if (th->hostPtr == host && th->addr == addr)
2208                 {
2209                         *hp = th->next;
2210                         free(th);
2211                         flag = 1;
2212                         break;
2213                 } else {
2214                         hp = &th->next;
2215                 }
2216         }
2217         return flag;
2218 }
2219
2220
2221 /*
2222 ** prints out all alternate interface address for the host. The 'level'
2223 ** parameter indicates what level of debugging sets this output
2224 */
2225 void
2226 printInterfaceAddr(struct host *host, int level)
2227 {
2228         int i, number;
2229         if ( host-> interface )
2230         {
2231                 /* check alternate addresses */
2232                 number = host->interface->numberOfInterfaces;
2233                 assert( number > 0 );
2234                 for ( i=0; i < number; i++)
2235                         ViceLog(level, ("%x ", host->interface->addr[i]));
2236         }
2237          ViceLog(level, ("\n"));
2238 }
2239