Windows: optimize InitCallback3 processing
[openafs.git] / src / WINNT / afsd / cm_callback.c
1 /*
2  * Copyright 2000, International Business Machines Corporation and others.
3  * All Rights Reserved.
4  *
5  * This software has been released under the terms of the IBM Public
6  * License.  For details, see the LICENSE file in the top-level source
7  * directory or online at http://www.openafs.org/dl/license10.html
8  */
9
10 #include <afsconfig.h>
11 #include <afs/param.h>
12 #include <roken.h>
13
14 #include <afs/afs_args.h>
15 #include <afs/stds.h>
16
17 #include <windows.h>
18 #include <winsock2.h>
19 #include <malloc.h>
20 #include <string.h>
21 #include <stdlib.h>
22
23 #include "afsd.h"
24 #include "smb.h"
25 #include <osi.h>
26 #include <rx_pthread.h>
27
28 #include <WINNT/syscfg.h>
29 #include <WINNT/afsreg.h>
30
31 int
32 SRXAFSCB_InitCallBackState3(struct rx_call *callp, afsUUID* serverUuid);
33
34 /* read/write lock for all global storage in this module */
35 osi_rwlock_t cm_callbackLock;
36
37 afs_int32 cm_OfflineROIsValid = 0;
38
39 afs_int32 cm_giveUpAllCBs = 1;
40
41 afs_int32 cm_shutdown = 0;
42
43 #ifdef AFS_FREELANCE_CLIENT
44 extern osi_mutex_t cm_Freelance_Lock;
45 #endif
46
47 /* count of # of callback breaking messages received by this CM so far.  We use
48  * this count in determining whether there have been any callback breaks that
49  * apply to a call that returned a new callback.  If the counter doesn't
50  * increase during a call, then we know that no callbacks were broken during
51  * that call, and thus that the callback that was just returned is still valid.
52  */
53 long cm_callbackCount;
54
55 /* count of number of RPCs potentially returning a callback executing now.
56  * When this counter hits zero, we can clear out the racing revokes list, since
57  * at that time, we know that none of the just-executed callback revokes will
58  * apply to any future call that returns a callback (since the latter hasn't
59  * even started execution yet).
60  */
61 long cm_activeCallbackGrantingCalls;
62
63 /* list of callbacks that have been broken recently.  If a call returning a
64  * callback is executing and a callback revoke runs immediately after it at the
65  * server, the revoke may end up being processed before the response to the
66  * original callback granting call.  We detect this by keeping a list of
67  * callback revokes that have been received since we *started* the callback
68  * granting call, and discarding any callbacks received for the same file ID,
69  * even if the callback revoke was received before the callback grant.
70  */
71 cm_racingRevokes_t *cm_racingRevokesp;
72
73 /* record a (potentially) racing revoke for this file ID; null means for all
74  * file IDs, and is used by InitCallBackState.
75  *
76  * The cancelFlags describe whether we're just discarding callbacks for the same
77  * file ID, the same volume, or all from the same server.
78  *
79  * Called with no locks held.
80  */
81 void cm_RecordRacingRevoke(cm_fid_t *fidp, long cancelFlags)
82 {
83     cm_racingRevokes_t *rp;
84
85     lock_ObtainWrite(&cm_callbackLock);
86
87     osi_Log3(afsd_logp, "RecordRacingRevoke Volume %d Flags %lX activeCalls %d",
88                 fidp ? fidp->volume : 0, cancelFlags, cm_activeCallbackGrantingCalls);
89
90     if (cm_activeCallbackGrantingCalls > 0) {
91         rp = malloc(sizeof(*rp));
92         memset(rp, 0, sizeof(*rp));
93         osi_QAdd((osi_queue_t **) &cm_racingRevokesp, &rp->q);
94         rp->flags |= (cancelFlags & CM_RACINGFLAG_ALL);
95         if (fidp) rp->fid = *fidp;
96         rp->callbackCount = ++cm_callbackCount;
97     }
98     lock_ReleaseWrite(&cm_callbackLock);
99 }
100
101 /*
102  * When we lose a callback, may have to send change notification replies.
103  * Do not call with a lock on the scp.
104  */
105 void cm_CallbackNotifyChange(cm_scache_t *scp)
106 {
107     DWORD dwDelay = 0;
108     HKEY  hKey;
109     DWORD dummyLen;
110
111     /* why does this have to query the registry each time? */
112         if (RegOpenKeyEx( HKEY_LOCAL_MACHINE,
113                       AFSREG_CLT_OPENAFS_SUBKEY,
114                       0,
115                       KEY_READ|KEY_QUERY_VALUE,
116                       &hKey) == ERROR_SUCCESS) {
117
118         dummyLen = sizeof(DWORD);
119         RegQueryValueEx(hKey, "CallBack Notify Change Delay", NULL, NULL,
120                         (BYTE *) &dwDelay, &dummyLen);
121         RegCloseKey(hKey);
122     }
123
124     if (dwDelay > 5000)    /* do not allow a delay of more then 5 seconds */
125         dwDelay = 5000;
126
127     osi_Log3(afsd_logp, "CallbackNotifyChange FileType %d Flags %lX Delay %dms",
128               scp->fileType, scp->flags, dwDelay);
129
130     if (dwDelay)
131         Sleep(dwDelay);
132
133     /* for directories, this sends a change notification on the dir itself */
134     if (scp->fileType == CM_SCACHETYPE_DIRECTORY) {
135         if (scp->flags & CM_SCACHEFLAG_ANYWATCH)
136             smb_NotifyChange(0,
137                              FILE_NOTIFY_GENERIC_DIRECTORY_FILTER,
138                              scp, NULL, NULL, TRUE);
139     } else {
140         /* and for files, this sends a change notification on the file's parent dir */
141         cm_fid_t tfid;
142         cm_scache_t *dscp;
143
144         cm_SetFid(&tfid, scp->fid.cell, scp->fid.volume, scp->parentVnode, scp->parentUnique);
145         dscp = cm_FindSCache(&tfid);
146         if ( dscp &&
147              dscp->flags & CM_SCACHEFLAG_ANYWATCH )
148             smb_NotifyChange( 0,
149                               FILE_NOTIFY_GENERIC_FILE_FILTER,
150                               dscp, NULL, NULL, TRUE);
151         if (dscp)
152             cm_ReleaseSCache(dscp);
153     }
154 }
155
156 /* called with no locks held for every file ID that is revoked directly by
157  * a callback revoke call.  Does not have to handle volume callback breaks,
158  * since those have already been split out.
159  *
160  * The callp parameter is currently unused.
161  */
162 void cm_RevokeCallback(struct rx_call *callp, cm_cell_t * cellp, AFSFid *fidp)
163 {
164     cm_fid_t tfid;
165     cm_scache_t *scp;
166     long hash;
167
168     tfid.cell = cellp ? cellp->cellID : 0;
169     tfid.volume = fidp->Volume;
170     tfid.vnode = fidp->Vnode;
171     tfid.unique = fidp->Unique;
172     CM_FID_GEN_HASH(&tfid);
173     hash = CM_SCACHE_HASH(&tfid);
174
175     osi_Log3(afsd_logp, "RevokeCallback vol %u vn %u uniq %u",
176              fidp->Volume, fidp->Vnode, fidp->Unique);
177
178     /* do this first, so that if we're executing a callback granting call
179      * at this moment, we kill it before it can be merged in.  Otherwise,
180      * it could complete while we're doing the scan below, and get missed
181      * by both the scan and by this code.
182      */
183     cm_RecordRacingRevoke(&tfid, 0);
184
185     lock_ObtainWrite(&cm_scacheLock);
186     /* do all in the hash bucket, since we don't know how many we'll find with
187      * varying cells.
188      */
189     for (scp = cm_data.scacheHashTablep[hash]; scp; scp=scp->nextp) {
190         if (scp->fid.volume == tfid.volume &&
191              scp->fid.vnode == tfid.vnode &&
192              scp->fid.unique == tfid.unique &&
193              (cellp == NULL || scp->fid.cell == cellp->cellID) &&
194              cm_HaveCallback(scp))
195         {
196             cm_HoldSCacheNoLock(scp);
197             lock_ReleaseWrite(&cm_scacheLock);
198             osi_Log4(afsd_logp, "RevokeCallback Discarding SCache scp 0x%p vol %u vn %u uniq %u",
199                      scp, scp->fid.volume, scp->fid.vnode, scp->fid.unique);
200
201             lock_ObtainWrite(&scp->rw);
202             cm_DiscardSCache(scp);
203             lock_ReleaseWrite(&scp->rw);
204
205             if (RDR_Initialized)
206                 RDR_InvalidateObject(scp->fid.cell, scp->fid.volume, scp->fid.vnode, scp->fid.unique,
207                                      scp->fid.hash, scp->fileType, AFS_INVALIDATE_CALLBACK);
208
209             cm_CallbackNotifyChange(scp);
210
211             lock_ObtainWrite(&cm_scacheLock);
212             cm_ReleaseSCacheNoLock(scp);
213         }
214     }
215     lock_ReleaseWrite(&cm_scacheLock);
216
217     osi_Log3(afsd_logp, "RevokeCallback Complete vol %u vn %u uniq %u",
218              fidp->Volume, fidp->Vnode, fidp->Unique);
219 }
220
221 static __inline void
222 cm_callbackDiscardROVolumeByFID(cm_fid_t *fidp)
223 {
224     cm_volume_t *volp = cm_GetVolumeByFID(fidp);
225     if (volp) {
226         cm_PutVolume(volp);
227         if (volp->cbExpiresRO) {
228             volp->cbExpiresRO = 0;
229             volp->cbIssuedRO = 0;
230             if (volp->cbServerpRO) {
231                 cm_PutServer(volp->cbServerpRO);
232                 volp->cbServerpRO = NULL;
233             }
234             volp->creationDateRO = 0;
235         }
236     }
237 }
238
239 /* called to revoke a volume callback, which is typically issued when a volume
240  * is moved from one server to another.
241  *
242  * Called with no locks held.
243  */
244 void cm_RevokeVolumeCallback(struct rx_call *callp, cm_cell_t *cellp, AFSFid *fidp)
245 {
246     unsigned long hash;
247     cm_scache_t *scp;
248     cm_fid_t tfid;
249
250     osi_Log1(afsd_logp, "RevokeVolumeCallback vol %u", fidp->Volume);
251
252     /* do this first, so that if we're executing a callback granting call
253      * at this moment, we kill it before it can be merged in.  Otherwise,
254      * it could complete while we're doing the scan below, and get missed
255      * by both the scan and by this code.
256      */
257     tfid.cell = cellp ? cellp->cellID : 0;
258     tfid.volume = fidp->Volume;
259     tfid.vnode = tfid.unique = 0;
260     cm_RecordRacingRevoke(&tfid, CM_RACINGFLAG_CANCELVOL);
261
262     lock_ObtainWrite(&cm_scacheLock);
263     for (hash = 0; hash < cm_data.scacheHashTableSize; hash++) {
264         for(scp=cm_data.scacheHashTablep[hash]; scp; scp=scp->nextp) {
265             if (scp->fid.volume == fidp->Volume &&
266                 (cellp == NULL || scp->fid.cell == cellp->cellID) &&
267                  scp->cbExpires > 0 &&
268                  scp->cbServerp != NULL) {
269                 cm_HoldSCacheNoLock(scp);
270                 lock_ReleaseWrite(&cm_scacheLock);
271
272                 lock_ObtainWrite(&scp->rw);
273                 osi_Log5(afsd_logp, "RevokeVolumeCallback Discarding SCache scp 0x%p vol %u vn %u uniq %u",
274                           scp, scp->fid.cell, scp->fid.volume, scp->fid.vnode, scp->fid.unique);
275                 osi_Log2(afsd_logp, ".... dv 0x%x:%x",
276                           (afs_uint32)((scp->dataVersion >> 32) & 0xFFFFFFFF),
277                           (afs_uint32)(scp->dataVersion & 0xFFFFFFFF));
278
279                 cm_DiscardSCache(scp);
280                 lock_ReleaseWrite(&scp->rw);
281
282                 if (RDR_Initialized)
283                     RDR_InvalidateObject(scp->fid.cell, scp->fid.volume, scp->fid.vnode, scp->fid.unique,
284                                          scp->fid.hash, scp->fileType, AFS_INVALIDATE_CALLBACK);
285
286                 cm_CallbackNotifyChange(scp);
287                 lock_ObtainWrite(&cm_scacheLock);
288                 cm_ReleaseSCacheNoLock(scp);
289                 if (scp->flags & CM_SCACHEFLAG_PURERO)
290                     cm_callbackDiscardROVolumeByFID(&scp->fid);
291             }
292         }       /* search one hash bucket */
293     }   /* search all hash buckets */
294
295     lock_ReleaseWrite(&cm_scacheLock);
296
297     if (cellp && RDR_Initialized)
298         RDR_InvalidateVolume(cellp->cellID, fidp->Volume, AFS_INVALIDATE_CALLBACK);
299
300     osi_Log1(afsd_logp, "RevokeVolumeCallback Complete vol %d", fidp->Volume);
301 }
302
303 /*
304  * afs_data_pointer_to_int32() - returns least significant afs_int32 of the
305  * given data pointer, without triggering "cast truncates pointer"
306  * warnings.  We use this where we explicitly don't care whether a
307  * pointer is truncated -- it loses information where a pointer is
308  * larger than an afs_int32.
309  */
310
311 static afs_int32
312 afs_data_pointer_to_int32(const void *p)
313 {
314     union {
315         afs_int32 i32[sizeof(void *) / sizeof(afs_int32)];
316         const void *p;
317     } ip;
318
319     int i32_sub;                /* subscript of least significant afs_int32 in ip.i32[] */
320
321     /* set i32_sub */
322
323     {
324         /* used to determine the byte order of the system */
325
326         union {
327             char c[sizeof(int) / sizeof(char)];
328             int i;
329         } ci;
330
331         ci.i = 1;
332         if (ci.c[0] == 1) {
333             /* little-endian system */
334             i32_sub = 0;
335         } else {
336             /* big-endian system */
337             i32_sub = (sizeof ip.i32 / sizeof ip.i32[0]) - 1;
338         }
339     }
340
341     ip.p = p;
342     return ip.i32[i32_sub];
343 }
344 /*------------------------------------------------------------------------
345  * EXPORTED SRXAFSCB_CallBack
346  *
347  * Description:
348  *      Routine called by the server-side callback RPC interface to
349  *      implement passing in callback information.
350  *      table.
351  *
352  * Arguments:
353  *      rx_call    : Ptr to Rx call on which this request came in.
354  *      fidsArrayp : Ptr to array of fids involved.
355  *      cbsArrayp  : Ptr to matching callback info for the fids.
356  *
357  * Returns:
358  *      0 (always).
359  *
360  * Environment:
361  *      Nothing interesting.
362  *
363  * Side Effects:
364  *      As advertised.
365  *------------------------------------------------------------------------*/
366 /* handle incoming RPC callback breaking message.
367  * Called with no locks held.
368  */
369 int
370 SRXAFSCB_CallBack(struct rx_call *callp, AFSCBFids *fidsArrayp, AFSCBs *cbsArrayp)
371 {
372     int i;
373     AFSFid *tfidp;
374     struct rx_connection *connp;
375     struct rx_peer *peerp;
376     unsigned long host = 0;
377     unsigned short port = 0;
378     cm_server_t *tsp = NULL;
379     cm_cell_t* cellp = NULL;
380
381     if (cm_shutdown)
382         return 1;
383
384     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
385         host = rx_HostOf(peerp);
386         port = rx_PortOf(peerp);
387
388         tsp = cm_FindServerByIP(host, port, CM_SERVER_FILE, FALSE);
389         if (tsp) {
390             cellp = tsp->cellp;
391             cm_PutServer(tsp);
392         }
393
394         if (!cellp)
395             osi_Log2(afsd_logp, "SRXAFSCB_CallBack from host 0x%x port %d",
396                      ntohl(host),
397                      ntohs(port));
398         else
399             osi_Log3(afsd_logp, "SRXAFSCB_CallBack from host 0x%x port %d for cell %s",
400                      ntohl(host),
401                      ntohs(port),
402                      cellp->name /* does not need to be saved, doesn't change */);
403     } else {
404         osi_Log0(afsd_logp, "SRXAFSCB_CallBack from unknown host");
405     }
406
407
408     for (i=0; i < (long) fidsArrayp->AFSCBFids_len; i++) {
409         tfidp = &fidsArrayp->AFSCBFids_val[i];
410
411         if (tfidp->Volume == 0)
412             continue;   /* means don't do anything */
413         else if (tfidp->Vnode == 0)
414             cm_RevokeVolumeCallback(callp, cellp, tfidp);
415         else
416             cm_RevokeCallback(callp, cellp, tfidp);
417     }
418     return 0;
419 }
420
421 /*------------------------------------------------------------------------
422  * EXPORTED SRXAFSCB_InitCallBackState
423  *
424  * Description:
425  *      Routine called by the server-side callback RPC interface to
426  *      implement clearing all callbacks from this host.
427  *
428  * Arguments:
429  *      rx_call : Ptr to Rx call on which this request came in.
430  *
431  * Returns:
432  *      0 (always).
433  *
434  * Environment:
435  *      Nothing interesting.
436  *
437  * Side Effects:
438  *      As advertised.
439  *------------------------------------------------------------------------*/
440 /* called with no locks by RPC system when a server indicates that it has never
441  * heard from us, or for other reasons has had to discard callbacks from us
442  * without telling us, e.g. a network partition.
443  */
444 int
445 SRXAFSCB_InitCallBackState(struct rx_call *callp)
446 {
447     if (cm_shutdown)
448         return 1;
449
450     osi_Log0(afsd_logp, "SRXAFSCB_InitCallBackState ->");
451
452     return SRXAFSCB_InitCallBackState3(callp, NULL);
453 }
454
455 /*------------------------------------------------------------------------
456  * EXPORTED SRXAFSCB_Probe
457  *
458  * Description:
459  *      Routine called by the server-side callback RPC interface to
460  *      implement ``probing'' the Cache Manager, just making sure it's
461  *      still there.
462  *
463  * Arguments:
464  *      rx_call : Ptr to Rx call on which this request came in.
465  *
466  * Returns:
467  *      0 (always).
468  *
469  * Environment:
470  *      Nothing interesting.
471  *
472  * Side Effects:
473  *      As advertised.
474  *------------------------------------------------------------------------*/
475 int
476 SRXAFSCB_Probe(struct rx_call *callp)
477 {
478     struct rx_connection *connp;
479     struct rx_peer *peerp;
480     unsigned long host = 0;
481     unsigned short port = 0;
482
483     if (cm_shutdown)
484         return 1;
485
486     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
487         host = rx_HostOf(peerp);
488         port = rx_PortOf(peerp);
489     }
490
491     osi_Log2(afsd_logp, "SRXAFSCB_Probe from host 0x%x port %d",
492               ntohl(host),
493               ntohs(port));
494
495     return 0;
496 }
497
498 /*------------------------------------------------------------------------
499  * EXPORTED SRXAFSCB_GetLock
500  *
501  * Description:
502  *      Routine called by the server-side callback RPC interface to
503  *      implement pulling out the contents of a lock in the lock
504  *      table.
505  *
506  * Arguments:
507  *      a_call   : Ptr to Rx call on which this request came in.
508  *      a_index  : Index of desired lock.
509  *      a_result : Ptr to a buffer for the given lock.
510  *
511  * Returns:
512  *      0 if everything went fine,
513  *      1 if we were given a bad index.
514  *
515  * Environment:
516  *      Nothing interesting.
517  *
518  * Side Effects:
519  *      As advertised.
520  *------------------------------------------------------------------------*/
521 /* debug interface */
522
523 extern osi_rwlock_t cm_aclLock;
524 extern osi_rwlock_t buf_globalLock;
525 extern osi_rwlock_t cm_cellLock;
526 extern osi_rwlock_t cm_connLock;
527 extern osi_rwlock_t cm_dnlcLock;
528 extern osi_rwlock_t cm_scacheLock;
529 extern osi_rwlock_t cm_serverLock;
530 extern osi_rwlock_t cm_syscfgLock;
531 extern osi_rwlock_t cm_userLock;
532 extern osi_rwlock_t cm_utilsLock;
533 extern osi_rwlock_t cm_volumeLock;
534 extern osi_rwlock_t smb_globalLock;
535 extern osi_rwlock_t smb_rctLock;
536
537 extern osi_mutex_t cm_Freelance_Lock;
538 extern osi_mutex_t cm_Afsdsbmt_Lock;
539 extern osi_mutex_t tokenEventLock;
540 extern osi_mutex_t  smb_ListenerLock;
541 extern osi_mutex_t smb_RawBufLock;
542 extern osi_mutex_t smb_Dir_Watch_Lock;
543
544 #define LOCKTYPE_RW     1
545 #define LOCKTYPE_MUTEX  2
546 static struct _ltable {
547     char *name;
548     char *addr;
549     int  type;
550 } ltable[] = {
551     {"cm_scacheLock",    (char*)&cm_scacheLock,         LOCKTYPE_RW},
552     {"buf_globalLock",   (char*)&buf_globalLock,        LOCKTYPE_RW},
553     {"cm_serverLock",    (char*)&cm_serverLock,         LOCKTYPE_RW},
554     {"cm_callbackLock",  (char*)&cm_callbackLock,       LOCKTYPE_RW},
555     {"cm_syscfgLock",    (char*)&cm_syscfgLock,         LOCKTYPE_RW},
556     {"cm_aclLock",       (char*)&cm_aclLock,            LOCKTYPE_RW},
557     {"cm_cellLock",      (char*)&cm_cellLock,           LOCKTYPE_RW},
558     {"cm_connLock",      (char*)&cm_connLock,           LOCKTYPE_RW},
559     {"cm_userLock",      (char*)&cm_userLock,           LOCKTYPE_RW},
560     {"cm_volumeLock",    (char*)&cm_volumeLock,         LOCKTYPE_RW},
561     {"cm_dnlcLock",      (char*)&cm_dnlcLock,           LOCKTYPE_RW},
562     {"cm_utilsLock",     (char*)&cm_utilsLock,          LOCKTYPE_RW},
563     {"smb_globalLock",   (char*)&smb_globalLock,        LOCKTYPE_RW},
564     {"smb_rctLock",      (char*)&smb_rctLock,           LOCKTYPE_RW},
565     {"cm_Freelance_Lock",(char*)&cm_Freelance_Lock,     LOCKTYPE_MUTEX},
566     {"cm_Afsdsbmt_Lock", (char*)&cm_Afsdsbmt_Lock,      LOCKTYPE_MUTEX},
567     {"tokenEventLock",   (char*)&tokenEventLock,        LOCKTYPE_MUTEX},
568     {"smb_ListenerLock", (char*)&smb_ListenerLock,      LOCKTYPE_MUTEX},
569     {"smb_RawBufLock",   (char*)&smb_RawBufLock,        LOCKTYPE_MUTEX},
570     {"smb_Dir_Watch_Lock",(char*)&smb_Dir_Watch_Lock,   LOCKTYPE_MUTEX}
571 };
572
573 int
574 SRXAFSCB_GetLock(struct rx_call *callp, long index, AFSDBLock *lockp)
575 {
576     struct _ltable *tl;          /*Ptr to lock table entry */
577     osi_rwlock_t  *rwp;
578     osi_mutex_t   *mtxp;
579     int nentries;               /*Num entries in table */
580     int code;                   /*Return code */
581     struct rx_connection *connp;
582     struct rx_peer *peerp;
583     unsigned long host = 0;
584     unsigned short port = 0;
585
586     if (cm_shutdown)
587         return 1;
588
589     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
590         host = rx_HostOf(peerp);
591         port = rx_PortOf(peerp);
592     }
593
594     osi_Log3(afsd_logp, "SRXAFSCB_GetLock(%d) from host 0x%x port %d",
595              index, ntohl(host), ntohs(port));
596
597     nentries = sizeof(ltable) / sizeof(struct _ltable);
598     if (index < 0 || index >= nentries) {
599         /*
600          * Past EOF
601          */
602         code = 1;
603     } else {
604         /*
605          * Found it - copy out its contents.
606          */
607         tl = &ltable[index];
608         strncpy(lockp->name, tl->name, sizeof(lockp->name));
609         lockp->name[sizeof(lockp->name)-1] = '\0';
610         lockp->lock.waitStates = 0;
611         switch ( tl->type ) {
612         case LOCKTYPE_RW:
613             rwp = (osi_rwlock_t *)tl->addr;
614             lockp->lock.exclLocked = rwp->flags;
615             lockp->lock.readersReading = rwp->readers;
616             lockp->lock.numWaiting = rwp->waiters;
617             break;
618         case LOCKTYPE_MUTEX:
619             mtxp = (osi_mutex_t *)tl->addr;
620             lockp->lock.exclLocked = mtxp->flags;
621             lockp->lock.readersReading = 0;
622             lockp->lock.numWaiting = mtxp->waiters;
623             break;
624         }
625         lockp->lock.pid_last_reader = 0;
626         lockp->lock.pid_writer = 0;
627         lockp->lock.src_indicator = 0;
628         code = 0;
629     }
630
631     return code;
632 }
633
634 /* debug interface */
635 int
636 SRXAFSCB_GetCE(struct rx_call *callp, long index, AFSDBCacheEntry *cep)
637 {
638     afs_uint32 i;
639     cm_scache_t * scp;
640     int code;
641     struct rx_connection *connp;
642     struct rx_peer *peerp;
643     unsigned long host = 0;
644     unsigned short port = 0;
645
646     if (cm_shutdown)
647         return 1;
648
649     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
650         host = rx_HostOf(peerp);
651         port = rx_PortOf(peerp);
652     }
653
654     osi_Log2(afsd_logp, "SRXAFSCB_GetCE from host 0x%x port %d",
655              ntohl(host), ntohs(port));
656
657     lock_ObtainRead(&cm_scacheLock);
658     for (i = 0; i < cm_data.scacheHashTableSize; i++) {
659         for (scp = cm_data.scacheHashTablep[i]; scp; scp = scp->nextp) {
660             if (index == 0)
661                 goto searchDone;
662             index--;
663         }                       /*Zip through current hash chain */
664     }                           /*Zip through hash chains */
665
666   searchDone:
667     if (scp == NULL) {
668         /*Past EOF */
669         code = 1;
670         goto fcnDone;
671     }
672
673     /*
674      * Copy out the located entry.
675      */
676     memset(cep, 0, sizeof(AFSDBCacheEntry));
677     cep->addr = afs_data_pointer_to_int32(scp);
678     cep->cell = scp->fid.cell;
679     cep->netFid.Volume = scp->fid.volume;
680     cep->netFid.Vnode = scp->fid.vnode;
681     cep->netFid.Unique = scp->fid.unique;
682     cep->lock.waitStates = 0;
683     cep->lock.exclLocked = scp->rw.flags;
684     cep->lock.readersReading = 0;
685     cep->lock.numWaiting = scp->rw.waiters;
686     cep->lock.pid_last_reader = 0;
687     cep->lock.pid_writer = 0;
688     cep->lock.src_indicator = 0;
689     cep->Length = scp->length.LowPart;
690     cep->DataVersion = (afs_uint32)(scp->dataVersion & 0xFFFFFFFF);
691     cep->callback = afs_data_pointer_to_int32(scp->cbServerp);
692     if (scp->flags & CM_SCACHEFLAG_PURERO) {
693         cm_volume_t *volp = cm_GetVolumeByFID(&scp->fid);
694         if (volp) {
695             cep->cbExpires = volp->cbExpiresRO;
696             cm_PutVolume(volp);
697         }
698     } else {
699         /* TODO: deal with time_t below */
700         cep->cbExpires = (afs_int32) scp->cbExpires;
701     }
702     cep->refCount = scp->refCount;
703     cep->opens = scp->openReads;
704     cep->writers = scp->openWrites;
705     switch (scp->fileType) {
706     case CM_SCACHETYPE_FILE:
707         cep->mvstat = 0;
708         break;
709     case CM_SCACHETYPE_MOUNTPOINT:
710         cep->mvstat = 1;
711         break;
712     case CM_SCACHETYPE_DIRECTORY:
713         if (scp->fid.vnode == 1 && scp->fid.unique == 1)
714             cep->mvstat = 2;
715         else
716             cep->mvstat = 3;
717         break;
718     case CM_SCACHETYPE_SYMLINK:
719         cep->mvstat = 4;
720         break;
721     case CM_SCACHETYPE_DFSLINK:
722         cep->mvstat = 5;
723         break;
724     case CM_SCACHETYPE_INVALID:
725         cep->mvstat = 6;
726         break;
727     }
728     cep->states = 0;
729     if (scp->flags & CM_SCACHEFLAG_STATD)
730         cep->states |= 1;
731     if (scp->flags & CM_SCACHEFLAG_RO || scp->flags & CM_SCACHEFLAG_PURERO)
732         cep->states |= 4;
733     if (scp->fileType == CM_SCACHETYPE_MOUNTPOINT &&
734         scp->mountPointStringp[0])
735         cep->states |= 8;
736     if (scp->flags & CM_SCACHEFLAG_WAITING)
737         cep->states |= 0x40;
738     code = 0;
739
740     /*
741      * Return our results.
742      */
743   fcnDone:
744     lock_ReleaseRead(&cm_scacheLock);
745
746     return (code);
747 }
748
749 /* debug interface */
750 int
751 SRXAFSCB_GetCE64(struct rx_call *callp, long index, AFSDBCacheEntry64 *cep)
752 {
753     afs_uint32 i;
754     cm_scache_t * scp;
755     int code;
756     struct rx_connection *connp;
757     struct rx_peer *peerp;
758     unsigned long host = 0;
759     unsigned short port = 0;
760
761     if (cm_shutdown)
762         return 1;
763
764     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
765         host = rx_HostOf(peerp);
766         port = rx_PortOf(peerp);
767     }
768
769     osi_Log2(afsd_logp, "SRXAFSCB_GetCE64 from host 0x%x port %d",
770              ntohl(host), ntohs(port));
771
772     lock_ObtainRead(&cm_scacheLock);
773     for (i = 0; i < cm_data.scacheHashTableSize; i++) {
774         for (scp = cm_data.scacheHashTablep[i]; scp; scp = scp->nextp) {
775             if (index == 0)
776                 goto searchDone;
777             index--;
778         }                       /*Zip through current hash chain */
779     }                           /*Zip through hash chains */
780
781   searchDone:
782     if (scp == NULL) {
783         /*Past EOF */
784         code = 1;
785         goto fcnDone;
786     }
787
788     /*
789      * Copy out the located entry.
790      */
791     memset(cep, 0, sizeof(AFSDBCacheEntry64));
792     cep->addr = afs_data_pointer_to_int32(scp);
793     cep->cell = scp->fid.cell;
794     cep->netFid.Volume = scp->fid.volume;
795     cep->netFid.Vnode = scp->fid.vnode;
796     cep->netFid.Unique = scp->fid.unique;
797     cep->lock.waitStates = 0;
798     cep->lock.exclLocked = scp->rw.flags;
799     cep->lock.readersReading = 0;
800     cep->lock.numWaiting = scp->rw.waiters;
801     cep->lock.pid_last_reader = 0;
802     cep->lock.pid_writer = 0;
803     cep->lock.src_indicator = 0;
804     cep->Length = (afs_int64) scp->length.QuadPart;
805     cep->DataVersion = (afs_uint32)(scp->dataVersion & 0xFFFFFFFF);
806     cep->callback = afs_data_pointer_to_int32(scp->cbServerp);
807     if (scp->flags & CM_SCACHEFLAG_PURERO) {
808         cm_volume_t *volp = cm_GetVolumeByFID(&scp->fid);
809         if (volp) {
810             cep->cbExpires = volp->cbExpiresRO;
811             cm_PutVolume(volp);
812         }
813     } else {
814         /* TODO: handle time_t */
815         cep->cbExpires = (afs_int32) scp->cbExpires;
816     }
817     cep->refCount = scp->refCount;
818     cep->opens = scp->openReads;
819     cep->writers = scp->openWrites;
820     switch (scp->fileType) {
821     case CM_SCACHETYPE_FILE:
822         cep->mvstat = 0;
823         break;
824     case CM_SCACHETYPE_MOUNTPOINT:
825         cep->mvstat = 1;
826         break;
827     case CM_SCACHETYPE_DIRECTORY:
828         if (scp->fid.vnode == 1 && scp->fid.unique == 1)
829             cep->mvstat = 2;
830         else
831             cep->mvstat = 3;
832         break;
833     case CM_SCACHETYPE_SYMLINK:
834         cep->mvstat = 4;
835         break;
836     case CM_SCACHETYPE_DFSLINK:
837         cep->mvstat = 5;
838         break;
839     case CM_SCACHETYPE_INVALID:
840         cep->mvstat = 6;
841         break;
842     }
843     cep->states = 0;
844     if (scp->flags & CM_SCACHEFLAG_STATD)
845         cep->states |= 1;
846     if (scp->flags & CM_SCACHEFLAG_RO || scp->flags & CM_SCACHEFLAG_PURERO)
847         cep->states |= 4;
848     if (scp->fileType == CM_SCACHETYPE_MOUNTPOINT &&
849         scp->mountPointStringp[0])
850         cep->states |= 8;
851     if (scp->flags & CM_SCACHEFLAG_WAITING)
852         cep->states |= 0x40;
853     code = 0;
854
855     /*
856      * Return our results.
857      */
858   fcnDone:
859     lock_ReleaseRead(&cm_scacheLock);
860
861     return (code);
862 }
863
864 /* debug interface: not implemented */
865 int
866 SRXAFSCB_XStatsVersion(struct rx_call *callp, long *vp)
867 {
868     struct rx_connection *connp;
869     struct rx_peer *peerp;
870     unsigned long host = 0;
871     unsigned short port = 0;
872
873     if (cm_shutdown)
874         return 1;
875
876     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
877         host = rx_HostOf(peerp);
878         port = rx_PortOf(peerp);
879     }
880
881     osi_Log2(afsd_logp, "SRXAFSCB_XStatsVersion from host 0x%x port %d - not implemented",
882              ntohl(host), ntohs(port));
883     *vp = -1;
884
885     return RXGEN_OPCODE;
886 }
887
888 /* debug interface: not implemented */
889 int
890 SRXAFSCB_GetXStats(struct rx_call *callp, long cvn, long coln, long *srvp, long *timep,
891                    AFSCB_CollData *datap)
892 {
893     struct rx_connection *connp;
894     struct rx_peer *peerp;
895     unsigned long host = 0;
896     unsigned short port = 0;
897
898     if (cm_shutdown)
899         return 1;
900
901     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
902         host = rx_HostOf(peerp);
903         port = rx_PortOf(peerp);
904     }
905
906     osi_Log2(afsd_logp, "SRXAFSCB_GetXStats from host 0x%x port %d - not implemented",
907              ntohl(host), ntohs(port));
908
909     return RXGEN_OPCODE;
910 }
911
912 int
913 SRXAFSCB_InitCallBackState2(struct rx_call *callp, struct interfaceAddr* addr)
914 {
915     if (cm_shutdown)
916         return 1;
917
918     osi_Log0(afsd_logp, "SRXAFSCB_InitCallBackState2 ->");
919
920     return SRXAFSCB_InitCallBackState3(callp, NULL);
921 }
922
923 /* debug interface */
924 int
925 SRXAFSCB_WhoAreYou(struct rx_call *callp, struct interfaceAddr* addr)
926 {
927     int i;
928     long code;
929     struct rx_connection *connp;
930     struct rx_peer *peerp;
931     unsigned long host = 0;
932     unsigned short port = 0;
933
934     if (cm_shutdown)
935         return 1;
936
937     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
938         host = rx_HostOf(peerp);
939         port = rx_PortOf(peerp);
940     }
941
942     osi_Log2(afsd_logp, "SRXAFSCB_WhoAreYou from host 0x%x port %d",
943               ntohl(host),
944               ntohs(port));
945
946     lock_ObtainRead(&cm_syscfgLock);
947     if (cm_LanAdapterChangeDetected) {
948         lock_ConvertRToW(&cm_syscfgLock);
949         if (cm_LanAdapterChangeDetected) {
950             /* get network related info */
951             cm_noIPAddr = CM_MAXINTERFACE_ADDR;
952             code = syscfg_GetIFInfo(&cm_noIPAddr,
953                                      cm_IPAddr, cm_SubnetMask,
954                                      cm_NetMtu, cm_NetFlags);
955             cm_LanAdapterChangeDetected = 0;
956         }
957         lock_ConvertWToR(&cm_syscfgLock);
958     }
959
960     /* return all network interface addresses */
961     addr->numberOfInterfaces = cm_noIPAddr;
962     addr->uuid = cm_data.Uuid;
963     for ( i=0; i < cm_noIPAddr; i++ ) {
964         addr->addr_in[i] = cm_IPAddr[i];
965         addr->subnetmask[i] = cm_SubnetMask[i];
966         addr->mtu[i] = (rx_mtu == -1 || (rx_mtu != -1 && cm_NetMtu[i] < rx_mtu)) ?
967             cm_NetMtu[i] : rx_mtu;
968     }
969
970     lock_ReleaseRead(&cm_syscfgLock);
971
972     return 0;
973 }
974
975 int
976 SRXAFSCB_InitCallBackState3(struct rx_call *callp, afsUUID* serverUuid)
977 {
978     char *p = NULL;
979
980     cm_server_t *tsp = NULL;
981     cm_scache_t *scp = NULL;
982     cm_cell_t* cellp = NULL;
983     afs_uint32 hash;
984     int discarded;
985     cm_fid_t discardFid;
986     afs_uint32 discardType;
987     struct rx_connection *connp;
988     struct rx_peer *peerp;
989     unsigned long host = 0;
990     unsigned short port = 0;
991
992     if (cm_shutdown)
993         return 1;
994
995     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
996         host = rx_HostOf(peerp);
997         port = rx_PortOf(peerp);
998
999         if (serverUuid) {
1000             if (UuidToString((UUID *)serverUuid, &p) == RPC_S_OK) {
1001                 osi_Log1(afsd_logp, "SRXAFSCB_InitCallBackState3 Uuid%s ->",osi_LogSaveString(afsd_logp,p));
1002                 RpcStringFree(&p);
1003             }
1004
1005             tsp = cm_FindServerByUuid(serverUuid, CM_SERVER_FILE, FALSE);
1006         }
1007         if (!tsp)
1008             tsp = cm_FindServerByIP(host, port, CM_SERVER_FILE, FALSE);
1009         if (tsp) {
1010             cellp = tsp->cellp;
1011             cm_PutServer(tsp);
1012         }
1013
1014         if (!cellp)
1015             osi_Log2(afsd_logp, "SRXAFSCB_InitCallBackState3 from host 0x%x port %d",
1016                      ntohl(host),
1017                      ntohs(port));
1018         else
1019             osi_Log3(afsd_logp, "SRXAFSCB_InitCallBackState3 from host 0x%x port %d for cell %s",
1020                      ntohl(host),
1021                      ntohs(port),
1022                      cellp->name /* does not need to be saved, doesn't change */);
1023     } else {
1024         osi_Log0(afsd_logp, "SRXAFSCB_InitCallBackState3 from unknown host");
1025     }
1026
1027     if (connp && peerp) {
1028         tsp = cm_FindServerByIP(host, port, CM_SERVER_FILE, FALSE);
1029
1030         osi_Log1(afsd_logp, "InitCallbackState3 server %x", tsp);
1031
1032         /* record the callback in the racing revokes structure.  This
1033          * shouldn't be necessary, since we shouldn't be making callback
1034          * granting calls while we're going to get an initstate call,
1035          * but there probably are some obscure races, so better safe
1036          * than sorry.
1037          *
1038          * We do this first since we don't hold the cm_scacheLock and vnode
1039          * locks over the entire callback scan operation below.  The
1040          * big loop below is guaranteed to hit any callback already
1041          * processed.  The call to RecordRacingRevoke is guaranteed
1042          * to kill any callback that is currently being returned.
1043          * Anything that sneaks past both must start
1044          * after the call to RecordRacingRevoke.
1045          */
1046         if (cellp) {
1047             cm_fid_t fid;
1048
1049             fid.cell = cellp->cellID;
1050             fid.volume = fid.vnode = fid.unique = 0;
1051
1052             cm_RecordRacingRevoke(&fid, CM_RACINGFLAG_CANCELALL);
1053         } else {
1054             cm_RecordRacingRevoke(NULL, CM_RACINGFLAG_CANCELALL);
1055         }
1056
1057         /* now search all vnodes looking for guys with this callback, if we
1058          * found it, or guys with any callbacks, if we didn't find the server
1059          * (that's how multihomed machines will appear and how we'll handle
1060          * them, albeit a little inefficiently).  That is, we're discarding all
1061          * callbacks from all hosts if we get an initstate call from an unknown
1062          * host.  Since these calls are rare, and multihomed servers
1063          * are "rare," hopefully this won't be a problem.
1064          */
1065         lock_ObtainWrite(&cm_scacheLock);
1066         for (hash = 0; hash < cm_data.scacheHashTableSize; hash++) {
1067             for (scp=cm_data.scacheHashTablep[hash]; scp; scp=scp->nextp) {
1068                 if (scp->cbExpires > 0 && scp->cbServerp != NULL) {
1069                     cm_HoldSCacheNoLock(scp);
1070                     lock_ReleaseWrite(&cm_scacheLock);
1071                     discarded = 0;
1072                     lock_ObtainWrite(&scp->rw);
1073                     if (scp->cbExpires > 0 && scp->cbServerp != NULL) {
1074                         /* we have a callback, now decide if we should clear it */
1075                         if (cm_ServerEqual(scp->cbServerp, tsp)) {
1076                             osi_Log4(afsd_logp, "InitCallbackState3 Discarding SCache scp 0x%p vol %u vn %u uniq %u",
1077                                      scp, scp->fid.volume, scp->fid.vnode, scp->fid.unique);
1078                             discardFid = scp->fid;
1079                             discardType = scp->fileType;
1080                             cm_DiscardSCache(scp);
1081                             discarded = 1;
1082                         }
1083                     }
1084                     lock_ReleaseWrite(&scp->rw);
1085                     if (discarded) {
1086                         cm_CallbackNotifyChange(scp);
1087                         if (RDR_Initialized)
1088                             RDR_InvalidateObject(discardFid.cell, discardFid.volume, discardFid.vnode, discardFid.unique,
1089                                                  discardFid.hash, discardType, AFS_INVALIDATE_EXPIRED);
1090                     }
1091                     lock_ObtainWrite(&cm_scacheLock);
1092                     cm_ReleaseSCacheNoLock(scp);
1093
1094                     if (discarded && (scp->flags & CM_SCACHEFLAG_PURERO))
1095                         cm_callbackDiscardROVolumeByFID(&scp->fid);
1096                 }
1097             }   /* search one hash bucket */
1098         }       /* search all hash buckets */
1099
1100         lock_ReleaseWrite(&cm_scacheLock);
1101
1102         if (tsp) {
1103             /* reset the No flags on the server */
1104             cm_SetServerNo64Bit(tsp, 0);
1105             cm_SetServerNoInlineBulk(tsp, 0);
1106
1107             /* we're done with the server structure */
1108             cm_PutServer(tsp);
1109         }
1110     }
1111     return 0;
1112 }
1113
1114 /* debug interface */
1115 int
1116 SRXAFSCB_ProbeUuid(struct rx_call *callp, afsUUID* clientUuid)
1117 {
1118     struct rx_connection *connp;
1119     struct rx_peer *peerp;
1120     unsigned long host = 0;
1121     unsigned short port = 0;
1122     char *p,*q;
1123     int code = 0;
1124
1125     if (cm_shutdown)
1126         return 1;
1127
1128     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
1129         host = rx_HostOf(peerp);
1130         port = rx_PortOf(peerp);
1131     }
1132
1133     if ( !afs_uuid_equal(&cm_data.Uuid, clientUuid) ) {
1134         UuidToString((UUID *)&cm_data.Uuid, &p);
1135         UuidToString((UUID *)clientUuid, &q);
1136         osi_Log4(afsd_logp, "SRXAFSCB_ProbeUuid %s != %s from host 0x%x port %d",
1137                   osi_LogSaveString(afsd_logp,p),
1138                   osi_LogSaveString(afsd_logp,q),
1139                   ntohl(host),
1140                   ntohs(port));
1141         RpcStringFree(&p);
1142         RpcStringFree(&q);
1143
1144         code = 1;       /* failure */
1145     } else
1146         osi_Log2(afsd_logp, "SRXAFSCB_ProbeUuid (success) from host 0x%x port %d",
1147                   ntohl(host),
1148                   ntohs(port));
1149
1150     return code;
1151 }
1152
1153 /* debug interface */
1154 static int
1155 GetCellCommon(afs_int32 a_cellnum, char **a_name, serverList *a_hosts)
1156 {
1157     afs_int32 sn;
1158     cm_cell_t * cellp;
1159     cm_serverRef_t * serverRefp;
1160     size_t len;
1161
1162     cellp = cm_FindCellByID(a_cellnum, CM_FLAG_NOPROBE);
1163     if (!cellp) {
1164         *a_name = (char *)xdr_alloc(sizeof(char));
1165         if (*a_name)
1166             *a_name = '\0';
1167         return 0;
1168     }
1169
1170     lock_ObtainRead(&cm_serverLock);
1171     len = strlen(cellp->name)+1;
1172     *a_name = (char *)xdr_alloc(len);
1173     if (*a_name)
1174         memcpy(*a_name, cellp->name, len);
1175
1176     for ( sn = 0, serverRefp = cellp->vlServersp;
1177           sn < AFSMAXCELLHOSTS && serverRefp;
1178           sn++, serverRefp = serverRefp->next);
1179
1180     a_hosts->serverList_len = sn;
1181     a_hosts->serverList_val = (afs_int32 *)xdr_alloc(sn * sizeof(afs_int32));
1182
1183     for ( sn = 0, serverRefp = cellp->vlServersp;
1184           sn < AFSMAXCELLHOSTS && serverRefp;
1185           sn++, serverRefp = serverRefp->next)
1186     {
1187         a_hosts->serverList_val[sn] = ntohl(serverRefp->server->addr.sin_addr.s_addr);
1188     }
1189
1190     lock_ReleaseRead(&cm_serverLock);
1191     return 0;
1192 }
1193
1194 /* debug interface */
1195 int
1196 SRXAFSCB_GetCellByNum(struct rx_call *callp, afs_int32 a_cellnum,
1197                       char **a_name, serverList *a_hosts)
1198 {
1199     struct rx_connection *connp;
1200     struct rx_peer *peerp;
1201     unsigned long host = 0;
1202     unsigned short port = 0;
1203     int rc;
1204
1205     if (cm_shutdown)
1206         return 1;
1207
1208     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
1209         host = rx_HostOf(peerp);
1210         port = rx_PortOf(peerp);
1211     }
1212
1213     osi_Log3(afsd_logp, "SRXAFSCB_GetCellByNum(%d) from host 0x%x port %d",
1214              a_cellnum, ntohl(host), ntohs(port));
1215
1216     a_hosts->serverList_val = 0;
1217     a_hosts->serverList_len = 0;
1218
1219
1220     rc = GetCellCommon(a_cellnum, a_name, a_hosts);
1221
1222     return rc;
1223 }
1224
1225 /* debug interface */
1226 int
1227 SRXAFSCB_TellMeAboutYourself( struct rx_call *callp,
1228                               struct interfaceAddr *addr,
1229                               Capabilities * capabilities)
1230 {
1231     int i;
1232     afs_uint32 *dataBuffP;
1233     afs_int32 dataBytes;
1234     long code;
1235     struct rx_connection *connp;
1236     struct rx_peer *peerp;
1237     unsigned long host = 0;
1238     unsigned short port = 0;
1239
1240     if (cm_shutdown)
1241         return 1;
1242
1243     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
1244         host = rx_HostOf(peerp);
1245         port = rx_PortOf(peerp);
1246     }
1247
1248     osi_Log2(afsd_logp, "SRXAFSCB_TellMeAboutYourself from host 0x%x port %d",
1249               ntohl(host),
1250               ntohs(port));
1251
1252     lock_ObtainRead(&cm_syscfgLock);
1253     if (cm_LanAdapterChangeDetected) {
1254         lock_ConvertRToW(&cm_syscfgLock);
1255         if (cm_LanAdapterChangeDetected) {
1256             /* get network related info */
1257             cm_noIPAddr = CM_MAXINTERFACE_ADDR;
1258             code = syscfg_GetIFInfo(&cm_noIPAddr,
1259                                      cm_IPAddr, cm_SubnetMask,
1260                                      cm_NetMtu, cm_NetFlags);
1261             cm_LanAdapterChangeDetected = 0;
1262         }
1263         lock_ConvertWToR(&cm_syscfgLock);
1264     }
1265
1266     /* return all network interface addresses */
1267     addr->numberOfInterfaces = cm_noIPAddr;
1268     addr->uuid = cm_data.Uuid;
1269     for ( i=0; i < cm_noIPAddr; i++ ) {
1270         addr->addr_in[i] = cm_IPAddr[i];
1271         addr->subnetmask[i] = cm_SubnetMask[i];
1272         addr->mtu[i] = (rx_mtu == -1 || (rx_mtu != -1 && cm_NetMtu[i] < rx_mtu)) ?
1273             cm_NetMtu[i] : rx_mtu;
1274     }
1275     lock_ReleaseRead(&cm_syscfgLock);
1276
1277     dataBytes = 1 * sizeof(afs_uint32);
1278     dataBuffP = (afs_uint32 *) xdr_alloc(dataBytes);
1279     dataBuffP[0] = CLIENT_CAPABILITY_ERRORTRANS;
1280     capabilities->Capabilities_len = dataBytes / sizeof(afs_uint32);
1281     capabilities->Capabilities_val = dataBuffP;
1282
1283     return 0;
1284 }
1285
1286 /*------------------------------------------------------------------------
1287  * EXPORTED SRXAFSCB_GetServerPrefs
1288  *
1289  * Description:
1290  *      Routine to list server preferences used by this client.
1291  *
1292  * Arguments:
1293  *      a_call  : Ptr to Rx call on which this request came in.
1294  *      a_index : Input server index
1295  *      a_srvr_addr  : Output server address (0xffffffff on last server)
1296  *      a_srvr_rank  : Output server rank
1297  *
1298  * Returns:
1299  *      0 on success
1300  *
1301  * Environment:
1302  *      Nothing interesting.
1303  *
1304  * Side Effects:
1305  *      As advertised.
1306  *------------------------------------------------------------------------*/
1307
1308 int SRXAFSCB_GetServerPrefs(
1309     struct rx_call *callp,
1310     afs_int32 a_index,
1311     afs_int32 *a_srvr_addr,
1312     afs_int32 *a_srvr_rank)
1313 {
1314     struct rx_connection *connp;
1315     struct rx_peer *peerp;
1316     unsigned long host = 0;
1317     unsigned short port = 0;
1318
1319     if (cm_shutdown)
1320         return 1;
1321
1322     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
1323         host = rx_HostOf(peerp);
1324         port = rx_PortOf(peerp);
1325     }
1326
1327     osi_Log2(afsd_logp, "SRXAFSCB_GetServerPrefs from host 0x%x port %d - not implemented",
1328               ntohl(host),
1329               ntohs(port));
1330
1331     *a_srvr_addr = 0xffffffff;
1332     *a_srvr_rank = 0xffffffff;
1333
1334     return 0;
1335 }
1336
1337 /*------------------------------------------------------------------------
1338  * EXPORTED SRXAFSCB_GetCellServDB
1339  *
1340  * Description:
1341  *      Routine to list cells configured for this client
1342  *
1343  * Arguments:
1344  *      a_call  : Ptr to Rx call on which this request came in.
1345  *      a_index : Input cell index
1346  *      a_name  : Output cell name ("" on last cell)
1347  *      a_hosts : Output cell database servers
1348  *
1349  * Returns:
1350  *      0 on success
1351  *
1352  * Environment:
1353  *      Nothing interesting.
1354  *
1355  * Side Effects:
1356  *      As advertised.
1357  *------------------------------------------------------------------------*/
1358
1359 int SRXAFSCB_GetCellServDB(struct rx_call *callp, afs_int32 index, char **a_name,
1360                            serverList *a_hosts)
1361 {
1362     struct rx_connection *connp;
1363     struct rx_peer *peerp;
1364     unsigned long host = 0;
1365     unsigned short port = 0;
1366     int rc;
1367
1368     if (cm_shutdown)
1369         return 1;
1370
1371     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
1372         host = rx_HostOf(peerp);
1373         port = rx_PortOf(peerp);
1374     }
1375
1376     osi_Log2(afsd_logp, "SRXAFSCB_GetCellServDB from host 0x%x port %d - not implemented",
1377              ntohl(host), ntohs(port));
1378
1379 #ifdef AFS_FREELANCE_CLIENT
1380     if (cm_freelanceEnabled && index == 0) {
1381         rc = GetCellCommon(AFS_FAKE_ROOT_CELL_ID, a_name, a_hosts);
1382     } else
1383 #endif
1384     {
1385         rc = GetCellCommon(index+1, a_name, a_hosts);
1386     }
1387     return 0;
1388 }
1389
1390 /*------------------------------------------------------------------------
1391  * EXPORTED SRXAFSCB_GetLocalCell
1392  *
1393  * Description:
1394  *      Routine to return name of client's local cell
1395  *
1396  * Arguments:
1397  *      a_call  : Ptr to Rx call on which this request came in.
1398  *      a_name  : Output cell name
1399  *
1400  * Returns:
1401  *      0 on success
1402  *
1403  * Environment:
1404  *      Nothing interesting.
1405  *
1406  * Side Effects:
1407  *      As advertised.
1408  *------------------------------------------------------------------------*/
1409
1410 int SRXAFSCB_GetLocalCell(struct rx_call *callp, char **a_name)
1411 {
1412     char *t_name;
1413     struct rx_connection *connp;
1414     struct rx_peer *peerp;
1415     unsigned long host = 0;
1416     unsigned short port = 0;
1417     size_t len;
1418
1419     if (cm_shutdown)
1420         return 1;
1421
1422     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
1423         host = rx_HostOf(peerp);
1424         port = rx_PortOf(peerp);
1425     }
1426
1427     osi_Log2(afsd_logp, "SRXAFSCB_GetLocalCell from host 0x%x port %d",
1428              ntohl(host), ntohs(port));
1429
1430     if (cm_data.rootCellp) {
1431         len = strlen(cm_data.rootCellp->name) + 1;
1432         t_name = (char *)xdr_alloc(len);
1433         if (t_name)
1434             memcpy(t_name, cm_data.rootCellp->name, len);
1435     } else {
1436         t_name = (char *)xdr_alloc(1);
1437         t_name[0] = '\0';
1438     }
1439     *a_name = t_name;
1440
1441     return 0;
1442 }
1443
1444
1445 /*
1446  * afs_MarshallCacheConfig - marshall client cache configuration
1447  *
1448  * PARAMETERS
1449  *
1450  * IN callerVersion - the rpc stat version of the caller.
1451  *
1452  * IN config - client cache configuration.
1453  *
1454  * OUT ptr - buffer where configuration is marshalled.
1455  *
1456  * RETURN CODES
1457  *
1458  * Returns void.
1459  */
1460 static void afs_MarshallCacheConfig(
1461     afs_uint32 callerVersion,
1462     cm_initparams_v1 *config,
1463     afs_uint32 *ptr)
1464 {
1465     /*
1466      * We currently only support version 1.
1467      */
1468     *(ptr++) = config->nChunkFiles;
1469     *(ptr++) = config->nStatCaches;
1470     *(ptr++) = config->nDataCaches;
1471     *(ptr++) = config->nVolumeCaches;
1472     *(ptr++) = config->firstChunkSize;
1473     *(ptr++) = config->otherChunkSize;
1474     *(ptr++) = config->cacheSize;
1475     *(ptr++) = config->setTime;
1476     *(ptr++) = config->memCache;
1477
1478 }
1479
1480
1481 /*------------------------------------------------------------------------
1482  * EXPORTED SRXAFSCB_GetCacheConfig
1483  *
1484  * Description:
1485  *      Routine to return parameters used to initialize client cache.
1486  *      Client may request any format version. Server may not return
1487  *      format version greater than version requested by client.
1488  *
1489  * Arguments:
1490  *      a_call:        Ptr to Rx call on which this request came in.
1491  *      callerVersion: Data format version desired by the client.
1492  *      serverVersion: Data format version of output data.
1493  *      configCount:   Number bytes allocated for output data.
1494  *      config:        Client cache configuration.
1495  *
1496  * Returns:
1497  *      0 on success
1498  *
1499  * Environment:
1500  *      Nothing interesting.
1501  *
1502  * Side Effects:
1503  *      As advertised.
1504  *------------------------------------------------------------------------*/
1505
1506 int SRXAFSCB_GetCacheConfig(struct rx_call *callp,
1507                             afs_uint32 callerVersion,
1508                             afs_uint32 *serverVersion,
1509                             afs_uint32 *configCount,
1510                             cacheConfig *config)
1511 {
1512     afs_uint32 *t_config;
1513     size_t allocsize;
1514     extern cm_initparams_v1 cm_initParams;
1515     struct rx_connection *connp;
1516     struct rx_peer *peerp;
1517     unsigned long host = 0;
1518     unsigned short port = 0;
1519
1520     if (cm_shutdown)
1521         return 1;
1522
1523     if ((connp = rx_ConnectionOf(callp)) && (peerp = rx_PeerOf(connp))) {
1524         host = rx_HostOf(peerp);
1525         port = rx_PortOf(peerp);
1526     }
1527
1528     osi_Log2(afsd_logp, "SRXAFSCB_GetCacheConfig from host 0x%x port %d - version 1 only",
1529              ntohl(host), ntohs(port));
1530
1531     /*
1532      * Currently only support version 1
1533      */
1534     allocsize = sizeof(cm_initparams_v1);
1535     t_config = (afs_uint32 *)xdr_alloc(allocsize);
1536
1537     afs_MarshallCacheConfig(callerVersion, &cm_initParams, t_config);
1538
1539     *serverVersion = AFS_CLIENT_RETRIEVAL_FIRST_EDITION;
1540 #ifdef DEBUG
1541 #ifndef SIZE_MAX
1542 #define SIZE_MAX UINT_MAX
1543 #endif
1544     osi_assertx(allocsize < SIZE_MAX, "allocsize >= SIZE_MAX");
1545 #endif
1546     *configCount = (afs_uint32)allocsize;
1547     config->cacheConfig_val = t_config;
1548     config->cacheConfig_len = (*configCount)/sizeof(afs_uint32);
1549
1550     return 0;
1551 }
1552
1553 /* called by afsd without any locks to initialize this module */
1554 void cm_InitCallback(void)
1555 {
1556     lock_InitializeRWLock(&cm_callbackLock, "cm_callbackLock", LOCK_HIERARCHY_CALLBACK_GLOBAL);
1557     cm_activeCallbackGrantingCalls = 0;
1558 }
1559
1560 /* called with locked scp; tells us whether we've got a callback.
1561  * Expirations are checked by a background daemon so as to make
1562  * this function as inexpensive as possible
1563  */
1564 int cm_HaveCallback(cm_scache_t *scp)
1565 {
1566 #ifdef AFS_FREELANCE_CLIENT
1567     if (cm_freelanceEnabled &&
1568         scp->fid.cell==AFS_FAKE_ROOT_CELL_ID &&
1569         scp->fid.volume==AFS_FAKE_ROOT_VOL_ID) {
1570         if (cm_getLocalMountPointChange()) {
1571             cm_clearLocalMountPointChange();
1572             lock_ReleaseWrite(&scp->rw);
1573             cm_reInitLocalMountPoints();
1574             lock_ObtainWrite(&scp->rw);
1575         }
1576         return (cm_data.fakeDirVersion == scp->dataVersion);
1577     }
1578 #endif
1579     if (cm_readonlyVolumeVersioning &&
1580         (scp->flags & CM_SCACHEFLAG_PURERO)) {
1581         cm_volume_t *volp = cm_GetVolumeByFID(&scp->fid);
1582         if (volp) {
1583             int haveCB = 0;
1584             if (cm_OfflineROIsValid) {
1585                 switch (cm_GetVolumeStatus(volp, scp->fid.volume)) {
1586                 case vl_offline:
1587                 case vl_alldown:
1588                 case vl_unknown:
1589                     haveCB = 1;
1590                     break;
1591                 }
1592             }
1593             if (cm_readonlyVolumeVersioning &&
1594                 !haveCB &&
1595                 volp->creationDateRO == scp->volumeCreationDate &&
1596                 volp->cbServerpRO != NULL) {
1597                 haveCB = 1;
1598             }
1599             cm_PutVolume(volp);
1600             return haveCB;
1601         }
1602     }
1603     if (scp->cbServerp != NULL)
1604         return 1;
1605     else
1606         return 0;
1607 }
1608
1609 /* need to detect a broken callback that races with our obtaining a callback.
1610  * Need to be able to do this even if we don't know the file ID of the file
1611  * we're breaking the callback on at the time we start the acquisition of the
1612  * callback (as in the case where we are creating a file).
1613  *
1614  * So, we start by writing down the count of the # of callbacks we've received
1615  * so far, and bumping a global counter of the # of callback granting calls
1616  * outstanding (all done under cm_callbackLock).
1617  *
1618  * When we're back from the call, we look at all of the callback revokes with
1619  * counter numbers greater than the one we recorded in our caller's structure,
1620  * and replay those that are higher than when we started the call.
1621  *
1622  * We free all the structures in the queue when the count of the # of outstanding
1623  * callback-granting calls drops to zero.
1624  *
1625  * We call this function with the scp locked, too, but in its current implementation,
1626  * this knowledge is not used.
1627  */
1628 void cm_StartCallbackGrantingCall(cm_scache_t *scp, cm_callbackRequest_t *cbrp)
1629 {
1630     lock_ObtainWrite(&cm_callbackLock);
1631     cbrp->callbackCount = cm_callbackCount;
1632     cm_activeCallbackGrantingCalls++;
1633     cbrp->startTime = time(NULL);
1634     cbrp->serverp = NULL;
1635     lock_ReleaseWrite(&cm_callbackLock);
1636 }
1637
1638 /* Called at the end of a callback-granting call, to remove the callback
1639  * info from the scache entry, if necessary.
1640  *
1641  * Called with scp write locked, so we can discard the callbacks easily with
1642  * this locking hierarchy.
1643  *
1644  * Performs cleanup of the stack allocated cm_callbackRequest_t object.
1645  *
1646  * Returns 0 on success and non-zero if the callback lost a race.
1647  */
1648 int
1649 cm_EndCallbackGrantingCall(cm_scache_t *scp, cm_callbackRequest_t *cbrp,
1650                            AFSCallBack *cbp, AFSVolSync *volSyncp, long flags)
1651 {
1652     cm_racingRevokes_t *revp;           /* where we are */
1653     cm_racingRevokes_t *nrevp;          /* where we'll be next */
1654     int freeRacingRevokes;
1655     int freeServer;
1656     cm_server_t * serverp = NULL;
1657     int lostRace = 0;
1658
1659     lock_ObtainWrite(&cm_callbackLock);
1660     if (flags & CM_CALLBACK_MAINTAINCOUNT) {
1661         osi_assertx(cm_activeCallbackGrantingCalls > 0,
1662                     "CM_CALLBACK_MAINTAINCOUNT && cm_activeCallbackGrantingCalls == 0");
1663         freeServer = 0;
1664     }
1665     else {
1666         osi_assertx(cm_activeCallbackGrantingCalls-- > 0,
1667                     "!CM_CALLBACK_MAINTAINCOUNT && cm_activeCallbackGrantingCalls == 0");
1668         freeServer = 1;
1669     }
1670     if (cm_activeCallbackGrantingCalls == 0)
1671         freeRacingRevokes = 1;
1672     else
1673         freeRacingRevokes = 0;
1674
1675     /*
1676      * a callback was revoked during our granting call, so
1677      * run down the list of revoked fids, looking for ours.
1678      * If activeCallbackGrantingCalls is zero, free the elements, too.
1679      *
1680      * May need to go through entire list just to do the freeing.
1681      */
1682     for (revp = cm_racingRevokesp; revp; revp = nrevp) {
1683         nrevp = (cm_racingRevokes_t *) osi_QNext(&revp->q);
1684         /* if this callback came in later than when we started the
1685          * callback-granting call, and if this fid is the right fid,
1686          * then clear the callback.
1687          */
1688         if (scp && cbrp && cbrp->callbackCount != cm_callbackCount
1689              && revp->callbackCount > cbrp->callbackCount
1690              && (( scp->fid.volume == revp->fid.volume &&
1691                    scp->fid.vnode == revp->fid.vnode &&
1692                    scp->fid.unique == revp->fid.unique)
1693                   ||
1694                   ((revp->flags & CM_RACINGFLAG_CANCELVOL) &&
1695                     scp->fid.volume == revp->fid.volume)
1696                   ||
1697                   ((revp->flags & CM_RACINGFLAG_CANCELALL) &&
1698                    (revp->fid.cell == 0 || scp->fid.cell == revp->fid.cell)))) {
1699             /* this one matches */
1700             osi_Log4(afsd_logp,
1701                       "Racing revoke scp 0x%p old cbc %d rev cbc %d cur cbc %d",
1702                       scp,
1703                       cbrp->callbackCount, revp->callbackCount,
1704                       cm_callbackCount);
1705             lostRace = 1;
1706             if ((scp->flags & CM_SCACHEFLAG_PURERO) &&
1707                  (revp->flags & CM_RACINGFLAG_ALL))
1708                 cm_callbackDiscardROVolumeByFID(&scp->fid);
1709         }
1710         if (freeRacingRevokes)
1711             free(revp);
1712     }
1713
1714     /* if we freed the list, zap the pointer to it */
1715     if (freeRacingRevokes)
1716         cm_racingRevokesp = NULL;
1717     lock_ReleaseWrite(&cm_callbackLock);
1718
1719     /* record the callback if we didn't lose it */
1720     if (!lostRace && scp) {
1721         if (cbrp) {
1722             if (!cm_ServerEqual(scp->cbServerp, cbrp->serverp)) {
1723                 serverp = scp->cbServerp;
1724                 scp->cbServerp = cbrp->serverp;
1725                 if (freeServer) {
1726                     cbrp->serverp = NULL;
1727                 } else {
1728                     cm_GetServer(scp->cbServerp);
1729                 }
1730             } else if (freeServer) {
1731                 serverp = cbrp->serverp;
1732                 cbrp->serverp = NULL;
1733             }
1734             scp->cbExpires = cbrp->startTime + cbp->ExpirationTime;
1735             scp->cbIssued = time(NULL);
1736         }
1737
1738         if (scp->flags & CM_SCACHEFLAG_PURERO) {
1739             cm_volume_t * volp = cm_GetVolumeByFID(&scp->fid);
1740             if (volp) {
1741                 if (volSyncp) {
1742                     lock_ObtainWrite(&cm_scacheLock);
1743                     volp->cbExpiresRO = scp->cbExpires;
1744                     volp->cbIssuedRO = scp->cbIssued;
1745                     volp->creationDateRO = volSyncp->spare1;
1746                     if (volp->cbServerpRO != scp->cbServerp) {
1747                         if (volp->cbServerpRO)
1748                             cm_PutServer(volp->cbServerpRO);
1749                         cm_GetServer(scp->cbServerp);
1750                         volp->cbServerpRO = scp->cbServerp;
1751                     }
1752                     lock_ReleaseWrite(&cm_scacheLock);
1753                 }
1754                 cm_PutVolume(volp);
1755             }
1756         }
1757     }
1758     else
1759     {
1760         /*
1761          * No need to discard the cm_scache object or notify the
1762          * afs redirector or smb client about a change if we did lose
1763          * the race.  That was done when the callback was processed in
1764          * cm_RevokeCallback().
1765          */
1766         if (cbrp && freeServer) {
1767             serverp = cbrp->serverp;
1768             cbrp->serverp = NULL;
1769         }
1770     }
1771
1772     if ( serverp ) {
1773         lock_ObtainWrite(&cm_serverLock);
1774         cm_FreeServer(serverp);
1775         lock_ReleaseWrite(&cm_serverLock);
1776     }
1777
1778     return lostRace;
1779 }
1780
1781 /* if flags is 1, we want to force the code to make one call, anyway.
1782  * called with locked scp; returns with same.
1783  */
1784 long cm_GetCallback(cm_scache_t *scp, struct cm_user *userp,
1785                     struct cm_req *reqp, long flags)
1786 {
1787     long code = 0;
1788     cm_conn_t *connp = NULL;
1789     AFSFetchStatus afsStatus;
1790     AFSVolSync volSync;
1791     AFSCallBack callback;
1792     AFSFid tfid;
1793     cm_callbackRequest_t cbr;
1794     int mustCall;
1795     cm_fid_t sfid;
1796     struct rx_connection * rxconnp = NULL;
1797     int syncop_done = 0;
1798
1799     memset(&volSync, 0, sizeof(volSync));
1800
1801     osi_Log4(afsd_logp, "GetCallback scp 0x%p cell %d vol %d flags %lX",
1802              scp, scp->fid.cell, scp->fid.volume, flags);
1803
1804 #ifdef AFS_FREELANCE_CLIENT
1805     // The case where a callback is needed on /afs is handled
1806     // specially. We need to fetch the status by calling
1807     // cm_MergeStatus
1808     if (cm_freelanceEnabled &&
1809         (scp->fid.cell==AFS_FAKE_ROOT_CELL_ID &&
1810          scp->fid.volume==AFS_FAKE_ROOT_VOL_ID)) {
1811
1812         code = cm_SyncOp(scp, NULL, userp, reqp, 0,
1813                           CM_SCACHESYNC_FETCHSTATUS | CM_SCACHESYNC_GETCALLBACK);
1814         if (code)
1815             goto done;
1816         syncop_done = 1;
1817
1818         if (scp->dataVersion != cm_data.fakeDirVersion) {
1819             memset(&afsStatus, 0, sizeof(afsStatus));
1820             memset(&volSync, 0, sizeof(volSync));
1821             InterlockedIncrement(&scp->activeRPCs);
1822
1823             // Fetch the status info
1824             cm_MergeStatus(NULL, scp, &afsStatus, &volSync, userp, reqp, 0);
1825         }
1826         goto done;
1827     }
1828 #endif /* AFS_FREELANCE_CLIENT */
1829
1830     mustCall = (flags & 1);
1831     cm_AFSFidFromFid(&tfid, &scp->fid);
1832     while (1) {
1833         if (!mustCall && cm_HaveCallback(scp))
1834             break;
1835
1836         /* turn off mustCall, since it has now forced us past the check above */
1837         mustCall = 0;
1838
1839         /* otherwise, we have to make an RPC to get the status */
1840         if (!syncop_done) {
1841             code = cm_SyncOp(scp, NULL, userp, reqp, 0,
1842                              CM_SCACHESYNC_FETCHSTATUS | CM_SCACHESYNC_GETCALLBACK);
1843             if (code)
1844                 break;
1845             syncop_done = 1;
1846         }
1847         cm_StartCallbackGrantingCall(scp, &cbr);
1848         sfid = scp->fid;
1849         lock_ReleaseWrite(&scp->rw);
1850
1851         /* now make the RPC */
1852         InterlockedIncrement(&scp->activeRPCs);
1853         osi_Log4(afsd_logp, "CALL FetchStatus scp 0x%p vol %u vn %u uniq %u",
1854                  scp, sfid.volume, sfid.vnode, sfid.unique);
1855         do {
1856             code = cm_ConnFromFID(&sfid, userp, reqp, &connp);
1857             if (code)
1858                 continue;
1859
1860             rxconnp = cm_GetRxConn(connp);
1861             code = RXAFS_FetchStatus(rxconnp, &tfid,
1862                                      &afsStatus, &callback, &volSync);
1863             rx_PutConnection(rxconnp);
1864
1865         } while (cm_Analyze(connp, userp, reqp, &sfid, 0, &volSync, NULL,
1866                             &cbr, code));
1867         code = cm_MapRPCError(code, reqp);
1868         if (code)
1869             osi_Log4(afsd_logp, "CALL FetchStatus FAILURE code 0x%x scp 0x%p vol %u vn %u",
1870                      code, scp, scp->fid.volume, scp->fid.vnode);
1871         else
1872             osi_Log4(afsd_logp, "CALL FetchStatus SUCCESS scp 0x%p vol %u vn %u uniq %u",
1873                      scp, scp->fid.volume, scp->fid.vnode, scp->fid.unique);
1874
1875         lock_ObtainWrite(&scp->rw);
1876         if (code == 0) {
1877             int lostRace = cm_EndCallbackGrantingCall(scp, &cbr, &callback, &volSync, 0);
1878             if (!lostRace)
1879                 cm_MergeStatus(NULL, scp, &afsStatus, &volSync, userp, reqp, 0);
1880         } else {
1881             cm_EndCallbackGrantingCall(NULL, &cbr, NULL, NULL, 0);
1882             InterlockedDecrement(&scp->activeRPCs);
1883         }
1884
1885         /* if we got an error, return to caller */
1886         if (code)
1887             break;
1888     }
1889
1890   done:
1891     if (syncop_done)
1892         cm_SyncOpDone(scp, NULL, CM_SCACHESYNC_FETCHSTATUS | CM_SCACHESYNC_GETCALLBACK);
1893
1894     if (code) {
1895         osi_Log2(afsd_logp, "GetCallback Failed code 0x%x scp 0x%p -->",code, scp);
1896         osi_Log4(afsd_logp, "            cell %u vol %u vn %u uniq %u",
1897                  scp->fid.cell, scp->fid.volume, scp->fid.vnode, scp->fid.unique);
1898     } else {
1899         osi_Log3(afsd_logp, "GetCallback Complete scp 0x%p cell %d vol %d",
1900                   scp, scp->fid.cell, scp->fid.volume);
1901     }
1902
1903     return code;
1904 }
1905
1906
1907 /*
1908  * cm_CBServersDownTime() returns 1 if the downTime parameter is valid.
1909  *
1910  * Servers with multiple interfaces have multiple cm_server_t objects
1911  * which share the same UUID.  If one interface is down but others are up,
1912  * the server should not be considered down.  The returned downTime should
1913  * be the largest non-zero value if down or zero if up.  If the cbServerp
1914  * is down, it is updated to refer to an interface that is up (if one exists).
1915  *
1916  * called with cm_scacheLock held
1917  */
1918 static long
1919 cm_CBServersDownTime(cm_scache_t *scp, cm_volume_t *volp, time_t * pdownTime)
1920 {
1921     cm_vol_state_t *statep;
1922     cm_serverRef_t *tsrp;
1923     int alldown = 1;
1924     time_t downTime = 0;
1925     cm_server_t * upserver = NULL;
1926     cm_server_t * downserver;
1927
1928     *pdownTime = 0;
1929
1930     if (scp->cbServerp == NULL)
1931         return 1;
1932
1933     if (!(scp->cbServerp->flags & CM_SERVERFLAG_DOWN))
1934         return 1;
1935
1936     statep = cm_VolumeStateByID(volp, scp->fid.volume);
1937     if (statep) {
1938         for (tsrp = statep->serversp; tsrp; tsrp=tsrp->next) {
1939             if (tsrp->status == srv_deleted)
1940                 continue;
1941
1942             if (!cm_ServerEqual(tsrp->server, scp->cbServerp))
1943                 continue;
1944
1945             if (!(tsrp->server->flags & CM_SERVERFLAG_DOWN)) {
1946                 alldown = 0;
1947                 if (!upserver) {
1948                     upserver = tsrp->server;
1949                     cm_GetServer(upserver);
1950                 }
1951             }
1952
1953             if (tsrp->server->downTime > downTime)
1954                 downTime = tsrp->server->downTime;
1955         }
1956     } else {
1957         downTime = scp->cbServerp->downTime;
1958     }
1959
1960     /* if the cbServerp does not match the current volume server list
1961      * we report the callback server as up so the callback can be
1962      * expired.
1963      */
1964
1965     if (alldown) {
1966         *pdownTime = downTime;
1967     } else {
1968         lock_ObtainWrite(&scp->rw);
1969         downserver = scp->cbServerp;
1970         scp->cbServerp = upserver;
1971         lock_ReleaseWrite(&scp->rw);
1972         cm_PutServer(downserver);
1973     }
1974     return 1;
1975 }
1976
1977 /* called periodically by cm_daemon to shut down use of expired callbacks */
1978 void cm_CheckCBExpiration(void)
1979 {
1980     afs_uint32 i;
1981     cm_scache_t *scp;
1982     cm_volume_t *volp;
1983     enum volstatus volstate;
1984     time_t now, downTime;
1985
1986     osi_Log0(afsd_logp, "CheckCBExpiration");
1987
1988     now = time(NULL);
1989     lock_ObtainWrite(&cm_scacheLock);
1990     for (i=0; i<cm_data.scacheHashTableSize; i++) {
1991         for (scp = cm_data.scacheHashTablep[i]; scp; scp=scp->nextp) {
1992             volp = NULL;
1993             cm_HoldSCacheNoLock(scp);
1994             lock_ReleaseWrite(&cm_scacheLock);
1995
1996             /*
1997              * If this is not a PURERO object and there is no callback
1998              * or it hasn't expired, there is nothing to do
1999              */
2000             if (!(scp->flags & CM_SCACHEFLAG_PURERO) &&
2001                 (scp->cbServerp == NULL || scp->cbExpires == 0 || now < scp->cbExpires))
2002                 goto scp_complete;
2003
2004             /*
2005              * Determine the volume state and update the callback info
2006              * to the latest if it is a PURERO object.
2007              */
2008             volp = cm_GetVolumeByFID(&scp->fid);
2009             volstate = vl_unknown;
2010             downTime = 0;
2011             if (volp) {
2012                 if ((scp->flags & CM_SCACHEFLAG_PURERO) &&
2013                     volp->cbExpiresRO > scp->cbExpires && scp->cbExpires > 0)
2014                 {
2015                     lock_ObtainWrite(&scp->rw);
2016                     scp->cbExpires = volp->cbExpiresRO;
2017                     scp->cbIssued = volp->cbIssuedRO;
2018                     if (volp->cbServerpRO != scp->cbServerp) {
2019                         if (scp->cbServerp)
2020                             cm_PutServer(scp->cbServerp);
2021                         cm_GetServer(volp->cbServerpRO);
2022                         scp->cbServerp = volp->cbServerpRO;
2023                     }
2024                     lock_ReleaseWrite(&scp->rw);
2025                 }
2026                 volstate = cm_GetVolumeStatus(volp, scp->fid.volume);
2027             }
2028
2029             /* If there is no callback or it hasn't expired, there is nothing to do */
2030             if (scp->cbServerp == NULL || scp->cbExpires == 0 || now < scp->cbExpires)
2031                 goto scp_complete;
2032
2033             /* If the volume is known not to be online, do not expire the callback */
2034             if (volstate != vl_online)
2035                 goto scp_complete;
2036
2037             /*
2038              * If all the servers are down and the callback expired after the
2039              * issuing server went down, do not expire the callback
2040              */
2041             if (cm_CBServersDownTime(scp, volp, &downTime) && downTime && downTime < scp->cbExpires)
2042                 goto scp_complete;
2043
2044             /* The callback has expired, discard the status info */
2045             osi_Log4(afsd_logp, "Callback Expiration Discarding SCache scp 0x%p vol %u vn %u uniq %u",
2046                      scp, scp->fid.volume, scp->fid.vnode, scp->fid.unique);
2047             lock_ObtainWrite(&scp->rw);
2048             cm_DiscardSCache(scp);
2049             lock_ReleaseWrite(&scp->rw);
2050
2051             if (RDR_Initialized)
2052                 RDR_InvalidateObject(scp->fid.cell, scp->fid.volume, scp->fid.vnode, scp->fid.unique,
2053                                      scp->fid.hash, scp->fileType, AFS_INVALIDATE_EXPIRED);
2054
2055             cm_CallbackNotifyChange(scp);
2056
2057           scp_complete:
2058             if (volp)
2059                 cm_PutVolume(volp);
2060
2061             lock_ObtainWrite(&cm_scacheLock);
2062             cm_ReleaseSCacheNoLock(scp);
2063         }
2064     }
2065     lock_ReleaseWrite(&cm_scacheLock);
2066
2067     osi_Log0(afsd_logp, "CheckCBExpiration Complete");
2068 }
2069
2070
2071 void
2072 cm_GiveUpAllCallbacks(cm_server_t *tsp, afs_int32 markDown)
2073 {
2074     long code;
2075     cm_conn_t *connp;
2076     struct rx_connection * rxconnp;
2077
2078     if ((tsp->type == CM_SERVER_FILE) && !(tsp->flags & CM_SERVERFLAG_DOWN))
2079     {
2080         code = cm_ConnByServer(tsp, cm_rootUserp, FALSE, &connp);
2081         if (code == 0) {
2082             rxconnp = cm_GetRxConn(connp);
2083             rx_SetConnDeadTime(rxconnp, 10);
2084             code = RXAFS_GiveUpAllCallBacks(rxconnp);
2085             rx_SetConnDeadTime(rxconnp, ConnDeadtimeout);
2086             rx_PutConnection(rxconnp);
2087         }
2088
2089         if (markDown) {
2090             cm_server_vols_t * tsrvp;
2091             cm_volume_t * volp;
2092             int i;
2093
2094             cm_ForceNewConnections(tsp);
2095
2096             lock_ObtainMutex(&tsp->mx);
2097             if (!(tsp->flags & CM_SERVERFLAG_DOWN)) {
2098                 _InterlockedOr(&tsp->flags, CM_SERVERFLAG_DOWN);
2099                 tsp->downTime = time(NULL);
2100             }
2101             /* Now update the volume status */
2102             for (tsrvp = tsp->vols; tsrvp; tsrvp = tsrvp->nextp) {
2103                 for (i=0; i<NUM_SERVER_VOLS; i++) {
2104                     if (tsrvp->ids[i] != 0) {
2105                         cm_req_t req;
2106
2107                         cm_InitReq(&req);
2108                         lock_ReleaseMutex(&tsp->mx);
2109                         code = cm_FindVolumeByID(tsp->cellp, tsrvp->ids[i], cm_rootUserp,
2110                                                  &req, CM_GETVOL_FLAG_NO_LRU_UPDATE | CM_GETVOL_FLAG_NO_RESET, &volp);
2111                         lock_ObtainMutex(&tsp->mx);
2112                         if (code == 0) {
2113                             cm_UpdateVolumeStatus(volp, tsrvp->ids[i]);
2114                             cm_PutVolume(volp);
2115                         }
2116                     }
2117                 }
2118             }
2119             lock_ReleaseMutex(&tsp->mx);
2120         }
2121     }
2122 }
2123
2124 void
2125 cm_GiveUpAllCallbacksAllServers(afs_int32 markDown)
2126 {
2127     cm_server_t *tsp;
2128
2129     if (!cm_giveUpAllCBs)
2130         return;
2131
2132     lock_ObtainRead(&cm_serverLock);
2133     for (tsp = cm_allServersp; tsp; tsp = tsp->allNextp) {
2134         cm_GetServerNoLock(tsp);
2135         lock_ReleaseRead(&cm_serverLock);
2136         cm_GiveUpAllCallbacks(tsp, markDown);
2137         lock_ObtainRead(&cm_serverLock);
2138         cm_PutServerNoLock(tsp);
2139     }
2140     lock_ReleaseRead(&cm_serverLock);
2141 }
2142
2143 void
2144 cm_GiveUpAllCallbacksAllServersMulti(afs_int32 markDown)
2145 {
2146     long code;
2147     cm_conn_t **conns = NULL;
2148     struct rx_connection **rxconns = NULL;
2149     afs_int32 i, nconns = 0, maxconns;
2150     cm_server_t ** serversp, *tsp;
2151     afs_int32 *results;
2152     time_t start, *deltas;
2153
2154     maxconns = cm_numFileServers;
2155     if (maxconns == 0)
2156         return;
2157
2158     conns = (cm_conn_t **)malloc(maxconns * sizeof(cm_conn_t *));
2159     rxconns = (struct rx_connection **)malloc(maxconns * sizeof(struct rx_connection *));
2160     deltas = (time_t *)malloc(maxconns * sizeof (time_t));
2161     results = (afs_int32 *)malloc(maxconns * sizeof (afs_int32));
2162     serversp = (cm_server_t **)malloc(maxconns * sizeof(cm_server_t *));
2163
2164     lock_ObtainRead(&cm_serverLock);
2165     for (nconns=0, tsp = cm_allServersp; tsp && nconns < maxconns; tsp = tsp->allNextp) {
2166         if (tsp->type != CM_SERVER_FILE ||
2167             (tsp->flags & CM_SERVERFLAG_DOWN) ||
2168             tsp->cellp == NULL          /* SetPrefs only */)
2169             continue;
2170
2171         cm_GetServerNoLock(tsp);
2172         lock_ReleaseRead(&cm_serverLock);
2173
2174         serversp[nconns] = tsp;
2175         code = cm_ConnByServer(tsp, cm_rootUserp, FALSE, &conns[nconns]);
2176         if (code) {
2177             lock_ObtainRead(&cm_serverLock);
2178             cm_PutServerNoLock(tsp);
2179             continue;
2180         }
2181         lock_ObtainRead(&cm_serverLock);
2182         rxconns[nconns] = cm_GetRxConn(conns[nconns]);
2183         rx_SetConnDeadTime(rxconns[nconns], 10);
2184
2185         nconns++;
2186     }
2187     lock_ReleaseRead(&cm_serverLock);
2188
2189     if (nconns) {
2190         /* Perform the multi call */
2191         start = time(NULL);
2192         multi_Rx(rxconns,nconns)
2193         {
2194             multi_RXAFS_GiveUpAllCallBacks();
2195             results[multi_i]=multi_error;
2196         } multi_End;
2197     }
2198
2199     /* Process results of servers that support RXAFS_GetCapabilities */
2200     for (i=0; i<nconns; i++) {
2201         rx_SetConnDeadTime(rxconns[i], ConnDeadtimeout);
2202         rx_PutConnection(rxconns[i]);
2203         cm_PutConn(conns[i]);
2204
2205         tsp = serversp[i];
2206         cm_GCConnections(tsp);
2207
2208         if (markDown) {
2209             cm_server_vols_t * tsrvp;
2210             cm_volume_t * volp;
2211             int i;
2212
2213             cm_ForceNewConnections(tsp);
2214
2215             lock_ObtainMutex(&tsp->mx);
2216             if (!(tsp->flags & CM_SERVERFLAG_DOWN)) {
2217                 _InterlockedOr(&tsp->flags, CM_SERVERFLAG_DOWN);
2218                 tsp->downTime = time(NULL);
2219             }
2220             /* Now update the volume status */
2221             for (tsrvp = tsp->vols; tsrvp; tsrvp = tsrvp->nextp) {
2222                 for (i=0; i<NUM_SERVER_VOLS; i++) {
2223                     if (tsrvp->ids[i] != 0) {
2224                         cm_req_t req;
2225
2226                         cm_InitReq(&req);
2227                         lock_ReleaseMutex(&tsp->mx);
2228                         code = cm_FindVolumeByID(tsp->cellp, tsrvp->ids[i], cm_rootUserp,
2229                                                  &req, CM_GETVOL_FLAG_NO_LRU_UPDATE | CM_GETVOL_FLAG_NO_RESET, &volp);
2230                         lock_ObtainMutex(&tsp->mx);
2231                         if (code == 0) {
2232                             cm_UpdateVolumeStatus(volp, tsrvp->ids[i]);
2233                             cm_PutVolume(volp);
2234                         }
2235                     }
2236                 }
2237             }
2238             lock_ReleaseMutex(&tsp->mx);
2239         }
2240     }
2241
2242     free(conns);
2243     free(rxconns);
2244     free(deltas);
2245     free(results);
2246     free(serversp);
2247 }
2248
2249