src/afs/afs_vcache.c

   1 /*
   2  * Copyright 2000, International Business Machines Corporation and others.
   3  * All Rights Reserved.
   4  *
   5  * This software has been released under the terms of the IBM Public
   6  * License.  For details, see the LICENSE file in the top-level source
   7  * directory or online at http://www.openafs.org/dl/license10.html
   8  */
   9
  10 /*
  11  * Implements:
  12  * afs_FlushVCache
  13  * afs_AllocCBR
  14  * afs_FreeCBR
  15  * afs_FlushVCBs
  16  * afs_QueueVCB
  17  * afs_RemoveVCB
  18  * afs_NewVCache
  19  * afs_FlushActiveVcaches
  20  * afs_VerifyVCache2
  21  * afs_WriteVCache
  22  * afs_WriteVCacheDiscon
  23  * afs_SimpleVStat
  24  * afs_ProcessFS
  25  * afs_RemoteLookup
  26  * afs_GetVCache
  27  * afs_LookupVCache
  28  * afs_GetRootVCache
  29  * afs_UpdateStatus
  30  * afs_FetchStatus
  31  * afs_StuffVcache
  32  * afs_PutVCache
  33  * afs_FindVCache
  34  * afs_NFSFindVCache
  35  * afs_vcacheInit
  36  * shutdown_vcache
  37  *
  38  */
  39 #include <afsconfig.h>
  40 #include "afs/param.h"
  41
  42 #include "afs/sysincludes.h"   /*Standard vendor system headers */
  43 #include "afsincludes.h"       /*AFS-based standard headers */
  44 #include "afs/afs_stats.h"
  45 #include "afs/afs_cbqueue.h"
  46 #include "afs/afs_osidnlc.h"
  47
  48 afs_int32 afs_maxvcount = 0;    /* max number of vcache entries */
  49 afs_int32 afs_vcount = 0;       /* number of vcache in use now */
  50
  51 #ifdef AFS_SGI_ENV
  52 int afsvnumbers = 0;
  53 #endif
  54
  55 #ifdef AFS_SGI64_ENV
  56 char *makesname();
  57 #endif /* AFS_SGI64_ENV */
  58
  59 /* Exported variables */
  60 afs_rwlock_t afs_xvcdirty;      /*Lock: discon vcache dirty list mgmt */
  61 afs_rwlock_t afs_xvcache;       /*Lock: alloc new stat cache entries */
  62 afs_rwlock_t afs_xvreclaim;     /*Lock: entries reclaimed, not on free list */
  63 afs_lock_t afs_xvcb;            /*Lock: fids on which there are callbacks */
  64 #if !defined(AFS_LINUX22_ENV)
  65 static struct vcache *freeVCList;       /*Free list for stat cache entries */
  66 struct vcache *ReclaimedVCList; /*Reclaimed list for stat entries */
  67 static struct vcache *Initial_freeVCList;       /*Initial list for above */
  68 #endif
  69 struct afs_q VLRU;              /*vcache LRU */
  70 afs_int32 vcachegen = 0;
  71 unsigned int afs_paniconwarn = 0;
  72 struct vcache *afs_vhashT[VCSIZE];
  73 struct afs_q afs_vhashTV[VCSIZE];
  74 static struct afs_cbr *afs_cbrHashT[CBRSIZE];
  75 afs_int32 afs_bulkStatsLost;
  76 int afs_norefpanic = 0;
  77
  78
  79 /* Disk backed vcache definitions
  80  * Both protected by xvcache */
  81 static int afs_nextVcacheSlot = 0;
  82 static struct afs_slotlist *afs_freeSlotList = NULL;
  83
  84 /* Forward declarations */
  85 static afs_int32 afs_QueueVCB(struct vcache *avc, int *slept);
  86
  87
  88 /*
  89  * The PFlush algorithm makes use of the fact that Fid.Unique is not used in
  90  * below hash algorithms.  Change it if need be so that flushing algorithm
  91  * doesn't move things from one hash chain to another.
  92  */
  93 /* Don't hash on the cell; our callback-breaking code sometimes fails to compute
  94  * the cell correctly, and only scans one hash bucket. */
  95 int VCHash(struct VenusFid *fid)
  96 {
  97     return opr_jhash_int2(fid->Fid.Volume, fid->Fid.Vnode, 0) &
  98         opr_jhash_mask(VCSIZEBITS);
  99 }
 100 /* Hash only on volume to speed up volume callbacks. */
 101 int VCHashV(struct VenusFid *fid)
 102 {
 103     return opr_jhash_int(fid->Fid.Volume, 0) & opr_jhash_mask(VCSIZEBITS);
 104 }
 105
 106 /*!
 107  * Generate an index into the hash table for a given Fid.
 108  * \param fid
 109  * \return The hash value.
 110  */
 111 static int
 112 afs_HashCBRFid(struct AFSFid *fid)
 113 {
 114     return (fid->Volume + fid->Vnode + fid->Unique) % CBRSIZE;
 115 }
 116
 117 /*!
 118  * Insert a CBR entry into the hash table.
 119  * Must be called with afs_xvcb held.
 120  * \param cbr
 121  * \return
 122  */
 123 static void
 124 afs_InsertHashCBR(struct afs_cbr *cbr)
 125 {
 126     int slot = afs_HashCBRFid(&cbr->fid);
 127
 128     cbr->hash_next = afs_cbrHashT[slot];
 129     if (afs_cbrHashT[slot])
 130         afs_cbrHashT[slot]->hash_pprev = &cbr->hash_next;
 131
 132     cbr->hash_pprev = &afs_cbrHashT[slot];
 133     afs_cbrHashT[slot] = cbr;
 134 }
 135
 136 /*!
 137  *
 138  * Flush the given vcache entry.
 139  *
 140  * Environment:
 141  *      afs_xvcache lock must be held for writing upon entry to
 142  *      prevent people from changing the vrefCount field, and to
 143  *      protect the lruq and hnext fields.
 144  * LOCK: afs_FlushVCache afs_xvcache W
 145  * REFCNT: vcache ref count must be zero on entry except for osf1
 146  * RACE: lock is dropped and reobtained, permitting race in caller
 147  *
 148  * \param avc Pointer to vcache entry to flush.
 149  * \param slept Pointer to int to set 1 if we sleep/drop locks, 0 if we don't.
 150  *
 151  */
 152 int
 153 afs_FlushVCache(struct vcache *avc, int *slept)
 154 {                               /*afs_FlushVCache */
 155
 156     afs_int32 i, code;
 157     struct vcache **uvc, *wvc;
 158
 159     /* NOTE: We must have nothing drop afs_xvcache until we have removed all
 160      * possible references to this vcache. This means all hash tables, queues,
 161      * DNLC, etc. */
 162
 163     *slept = 0;
 164     AFS_STATCNT(afs_FlushVCache);
 165     afs_Trace2(afs_iclSetp, CM_TRACE_FLUSHV, ICL_TYPE_POINTER, avc,
 166                ICL_TYPE_INT32, avc->f.states);
 167
 168     code = osi_VM_FlushVCache(avc);
 169     if (code)
 170         goto bad;
 171
 172     if (avc->f.states & CVFlushed) {
 173         code = EBUSY;
 174         goto bad;
 175     }
 176 #if !defined(AFS_LINUX22_ENV)
 177     if (avc->nextfree || !avc->vlruq.prev || !avc->vlruq.next) {        /* qv afs.h */
 178         refpanic("LRU vs. Free inconsistency");
 179     }
 180 #endif
 181     avc->f.states |= CVFlushed;
 182     /* pull the entry out of the lruq and put it on the free list */
 183     QRemove(&avc->vlruq);
 184
 185     /* keep track of # of files that we bulk stat'd, but never used
 186      * before they got recycled.
 187      */
 188     if (avc->f.states & CBulkStat)
 189         afs_bulkStatsLost++;
 190     vcachegen++;
 191     /* remove entry from the hash chain */
 192     i = VCHash(&avc->f.fid);
 193     uvc = &afs_vhashT[i];
 194     for (wvc = *uvc; wvc; uvc = &wvc->hnext, wvc = *uvc) {
 195         if (avc == wvc) {
 196             *uvc = avc->hnext;
 197             avc->hnext = NULL;
 198             break;
 199         }
 200     }
 201
 202     /* remove entry from the volume hash table */
 203     QRemove(&avc->vhashq);
 204
 205 #if defined(AFS_LINUX26_ENV)
 206     {
 207         struct pagewriter *pw, *store;
 208         struct list_head tofree;
 209
 210         INIT_LIST_HEAD(&tofree);
 211         spin_lock(&avc->pagewriter_lock);
 212         list_for_each_entry_safe(pw, store, &avc->pagewriters, link) {
 213             list_del(&pw->link);
 214             /* afs_osi_Free may sleep so we need to defer it */
 215             list_add_tail(&pw->link, &tofree);
 216         }
 217         spin_unlock(&avc->pagewriter_lock);
 218         list_for_each_entry_safe(pw, store, &tofree, link) {
 219             list_del(&pw->link);
 220             afs_osi_Free(pw, sizeof(struct pagewriter));
 221         }
 222     }
 223 #endif
 224
 225     if (avc->mvid.target_root)
 226         osi_FreeSmallSpace(avc->mvid.target_root);
 227     avc->mvid.target_root = NULL;
 228     if (avc->linkData) {
 229         afs_osi_Free(avc->linkData, strlen(avc->linkData) + 1);
 230         avc->linkData = NULL;
 231     }
 232 #if defined(AFS_XBSD_ENV) || defined(AFS_DARWIN_ENV)
 233     /* OK, there are no internal vrefCounts, so there shouldn't
 234      * be any more refs here. */
 235     if (avc->v) {
 236 #ifdef AFS_DARWIN80_ENV
 237         vnode_clearfsnode(AFSTOV(avc));
 238         vnode_removefsref(AFSTOV(avc));
 239 #else
 240         avc->v->v_data = NULL;  /* remove from vnode */
 241 #endif
 242         AFSTOV(avc) = NULL;             /* also drop the ptr to vnode */
 243     }
 244 #endif
 245
 246 #ifdef AFS_SUN511_ENV
 247     if (avc->v) {
 248         vn_free(avc->v);
 249         avc->v = NULL;
 250     }
 251 #elif defined(AFS_SUN510_ENV)
 252     /* As we use private vnodes, cleanup is up to us */
 253     vn_reinit(AFSTOV(avc));
 254 #endif
 255     afs_FreeAllAxs(&(avc->Access));
 256     afs_StaleVCacheFlags(avc, AFS_STALEVC_FILENAME, CUnique);
 257
 258     /* By this point, the vcache has been removed from all global structures
 259      * via which someone could try to use the vcache. It is okay to drop
 260      * afs_xvcache at this point (if *slept is set). */
 261
 262     if (afs_shuttingdown == AFS_RUNNING)
 263         afs_QueueVCB(avc, slept);
 264
 265     /*
 266      * Next, keep track of which vnodes we've deleted for create's
 267      * optimistic synchronization algorithm
 268      */
 269     afs_allZaps++;
 270     if (avc->f.fid.Fid.Vnode & 1)
 271         afs_oddZaps++;
 272     else
 273         afs_evenZaps++;
 274
 275     afs_vcount--;
 276 #if !defined(AFS_LINUX22_ENV)
 277     /* put the entry in the free list */
 278     avc->nextfree = freeVCList;
 279     freeVCList = avc;
 280     if (avc->vlruq.prev || avc->vlruq.next) {
 281         refpanic("LRU vs. Free inconsistency");
 282     }
 283     avc->f.states |= CVFlushed;
 284 #else
 285     /* This should put it back on the vnode free list since usecount is 1 */
 286     vSetType(avc, VREG);
 287     if (VREFCOUNT_GT(avc,0)) {
 288         AFS_RELE(AFSTOV(avc));
 289         afs_stats_cmperf.vcacheXAllocs--;
 290     } else {
 291         if (afs_norefpanic) {
 292             afs_warn("flush vc refcnt < 1");
 293             afs_norefpanic++;
 294         } else
 295             osi_Panic("flush vc refcnt < 1");
 296     }
 297 #endif /* AFS_LINUX22_ENV */
 298     return 0;
 299
 300   bad:
 301     return code;
 302 }                               /*afs_FlushVCache */
 303
 304 #ifndef AFS_SGI_ENV
 305 /*!
 306  *  The core of the inactive vnode op for all but IRIX.
 307  *
 308  * \param avc
 309  * \param acred
 310  */
 311 void
 312 afs_InactiveVCache(struct vcache *avc, afs_ucred_t *acred)
 313 {
 314     AFS_STATCNT(afs_inactive);
 315     if (avc->f.states & CDirty) {
 316         /* we can't keep trying to push back dirty data forever.  Give up. */
 317         afs_InvalidateAllSegments(avc); /* turns off dirty bit */
 318     }
 319     avc->f.states &= ~CMAPPED;
 320     avc->f.states &= ~CDirty;   /* Turn it off */
 321     if (avc->f.states & CUnlinked) {
 322         if (CheckLock(&afs_xvcache) || CheckLock(&afs_xdcache)) {
 323             avc->f.states |= CUnlinkedDel;
 324             return;
 325         }
 326         afs_remunlink(avc, 1);  /* ignore any return code */
 327     }
 328
 329 }
 330 #endif
 331
 332 /*!
 333  *   Allocate a callback return structure from the
 334  * free list and return it.
 335  *
 336  * Environment: The alloc and free routines are both called with the afs_xvcb lock
 337  * held, so we don't have to worry about blocking in osi_Alloc.
 338  *
 339  * \return The allocated afs_cbr.
 340  */
 341 static struct afs_cbr *afs_cbrSpace = 0;
 342 /* if alloc limit below changes, fix me! */
 343 static struct afs_cbr *afs_cbrHeads[16];
 344 struct afs_cbr *
 345 afs_AllocCBR(void)
 346 {
 347     struct afs_cbr *tsp;
 348     int i;
 349
 350     while (!afs_cbrSpace) {
 351         if (afs_stats_cmperf.CallBackAlloced >= sizeof(afs_cbrHeads)/sizeof(afs_cbrHeads[0])) {
 352             /* don't allocate more than 16 * AFS_NCBRS for now */
 353             afs_FlushVCBs(0);
 354             afs_stats_cmperf.CallBackFlushes++;
 355         } else {
 356             /* try allocating */
 357             tsp = afs_osi_Alloc(AFS_NCBRS * sizeof(struct afs_cbr));
 358             osi_Assert(tsp != NULL);
 359             for (i = 0; i < AFS_NCBRS - 1; i++) {
 360                 tsp[i].next = &tsp[i + 1];
 361             }
 362             tsp[AFS_NCBRS - 1].next = 0;
 363             afs_cbrSpace = tsp;
 364             afs_cbrHeads[afs_stats_cmperf.CallBackAlloced] = tsp;
 365             afs_stats_cmperf.CallBackAlloced++;
 366         }
 367     }
 368     tsp = afs_cbrSpace;
 369     afs_cbrSpace = tsp->next;
 370     return tsp;
 371 }
 372
 373 /*!
 374  * Free a callback return structure, removing it from all lists.
 375  *
 376  * Environment: the xvcb lock is held over these calls.
 377  *
 378  * \param asp The address of the structure to free.
 379  *
 380  * \rerurn 0
 381  */
 382 int
 383 afs_FreeCBR(struct afs_cbr *asp)
 384 {
 385     *(asp->pprev) = asp->next;
 386     if (asp->next)
 387         asp->next->pprev = asp->pprev;
 388
 389     *(asp->hash_pprev) = asp->hash_next;
 390     if (asp->hash_next)
 391         asp->hash_next->hash_pprev = asp->hash_pprev;
 392
 393     asp->next = afs_cbrSpace;
 394     afs_cbrSpace = asp;
 395     return 0;
 396 }
 397
 398 static void
 399 FlushAllVCBs(int nconns, struct rx_connection **rxconns,
 400              struct afs_conn **conns)
 401 {
 402     afs_int32 *results;
 403     afs_int32 i;
 404
 405     results = afs_osi_Alloc(nconns * sizeof (afs_int32));
 406     osi_Assert(results != NULL);
 407
 408     AFS_GUNLOCK();
 409     multi_Rx(rxconns,nconns)
 410     {
 411         multi_RXAFS_GiveUpAllCallBacks();
 412         results[multi_i] = multi_error;
 413     } multi_End;
 414     AFS_GLOCK();
 415
 416     /*
 417      * Freeing the CBR will unlink it from the server's CBR list
 418      * do it here, not in the loop, because a dynamic CBR will call
 419      * into the memory management routines.
 420      */
 421     for ( i = 0 ; i < nconns ; i++ ) {
 422         if (results[i] == 0) {
 423             /* Unchain all of them */
 424             while (conns[i]->parent->srvr->server->cbrs)
 425                 afs_FreeCBR(conns[i]->parent->srvr->server->cbrs);
 426         }
 427     }
 428     afs_osi_Free(results, nconns * sizeof(afs_int32));
 429 }
 430
 431 /*!
 432  *   Flush all queued callbacks to all servers.
 433  *
 434  * Environment: holds xvcb lock over RPC to guard against race conditions
 435  *      when a new callback is granted for the same file later on.
 436  *
 437  * \return 0 for success.
 438  */
 439 afs_int32
 440 afs_FlushVCBs(afs_int32 lockit)
 441 {
 442     struct AFSFid *tfids;
 443     struct AFSCallBack callBacks[1];
 444     struct AFSCBFids fidArray;
 445     struct AFSCBs cbArray;
 446     afs_int32 code;
 447     struct afs_cbr *tcbrp;
 448     int tcount;
 449     struct server *tsp;
 450     int i;
 451     struct vrequest *treq = NULL;
 452     struct afs_conn *tc;
 453     int safety1, safety2, safety3;
 454     XSTATS_DECLS;
 455
 456     if (AFS_IS_DISCONNECTED)
 457         return ENETDOWN;
 458
 459     if ((code = afs_CreateReq(&treq, afs_osi_credp)))
 460         return code;
 461     treq->flags |= O_NONBLOCK;
 462     tfids = afs_osi_Alloc(sizeof(struct AFSFid) * AFS_MAXCBRSCALL);
 463     osi_Assert(tfids != NULL);
 464
 465     if (lockit)
 466         ObtainWriteLock(&afs_xvcb, 273);
 467     /*
 468      * Shutting down.
 469      * First, attempt a multi across everything, all addresses
 470      * for all servers we know of.
 471      */
 472
 473     if (lockit == 2)
 474         afs_LoopServers(AFS_LS_ALL, NULL, 0, FlushAllVCBs, NULL);
 475
 476     ObtainReadLock(&afs_xserver);
 477     for (i = 0; i < NSERVERS; i++) {
 478         for (safety1 = 0, tsp = afs_servers[i];
 479              tsp && safety1 < afs_totalServers + 10;
 480              tsp = tsp->next, safety1++) {
 481             /* don't have any */
 482             if (tsp->cbrs == (struct afs_cbr *)0)
 483                 continue;
 484
 485             /* otherwise, grab a block of AFS_MAXCBRSCALL from the list
 486              * and make an RPC, over and over again.
 487              */
 488             tcount = 0;         /* number found so far */
 489             for (safety2 = 0; safety2 < afs_cacheStats; safety2++) {
 490                 if (tcount >= AFS_MAXCBRSCALL || !tsp->cbrs) {
 491                     struct rx_connection *rxconn;
 492                     /* if buffer is full, or we've queued all we're going
 493                      * to from this server, we should flush out the
 494                      * callbacks.
 495                      */
 496                     fidArray.AFSCBFids_len = tcount;
 497                     fidArray.AFSCBFids_val = (struct AFSFid *)tfids;
 498                     cbArray.AFSCBs_len = 1;
 499                     cbArray.AFSCBs_val = callBacks;
 500                     memset(&callBacks[0], 0, sizeof(callBacks[0]));
 501                     callBacks[0].CallBackType = CB_EXCLUSIVE;
 502                     for (safety3 = 0; safety3 < AFS_MAXHOSTS * 2; safety3++) {
 503                         tc = afs_ConnByHost(tsp, tsp->cell->fsport,
 504                                             tsp->cell->cellNum, treq, 0,
 505                                             SHARED_LOCK, 0, &rxconn);
 506                         if (tc) {
 507                             XSTATS_START_TIME
 508                                 (AFS_STATS_FS_RPCIDX_GIVEUPCALLBACKS);
 509                             RX_AFS_GUNLOCK();
 510                             code =
 511                                 RXAFS_GiveUpCallBacks(rxconn, &fidArray,
 512                                                       &cbArray);
 513                             RX_AFS_GLOCK();
 514                             XSTATS_END_TIME;
 515                         } else
 516                             code = -1;
 517                         if (!afs_Analyze
 518                             (tc, rxconn, code, 0, treq,
 519                              AFS_STATS_FS_RPCIDX_GIVEUPCALLBACKS, SHARED_LOCK,
 520                              tsp->cell)) {
 521                             break;
 522                         }
 523                     }
 524                     /* ignore return code, since callbacks may have
 525                      * been returned anyway, we shouldn't leave them
 526                      * around to be returned again.
 527                      *
 528                      * Next, see if we are done with this server, and if so,
 529                      * break to deal with the next one.
 530                      */
 531                     if (!tsp->cbrs)
 532                         break;
 533                     tcount = 0;
 534                 }
 535                 /* if to flush full buffer */
 536                 /* if we make it here, we have an entry at the head of cbrs,
 537                  * which we should copy to the file ID array and then free.
 538                  */
 539                 tcbrp = tsp->cbrs;
 540                 tfids[tcount++] = tcbrp->fid;
 541
 542                 /* Freeing the CBR will unlink it from the server's CBR list */
 543                 afs_FreeCBR(tcbrp);
 544             }                   /* while loop for this one server */
 545             if (safety2 > afs_cacheStats) {
 546                 afs_warn("possible internal error afs_flushVCBs (%d)\n",
 547                          safety2);
 548             }
 549         }                       /* for loop for this hash chain */
 550     }                           /* loop through all hash chains */
 551     if (safety1 > afs_totalServers + 2) {
 552         afs_warn
 553             ("AFS internal error (afs_flushVCBs) (%d > %d), continuing...\n",
 554              safety1, afs_totalServers + 2);
 555         if (afs_paniconwarn)
 556             osi_Panic("afs_flushVCBS safety1");
 557     }
 558
 559     ReleaseReadLock(&afs_xserver);
 560     if (lockit)
 561         ReleaseWriteLock(&afs_xvcb);
 562     afs_osi_Free(tfids, sizeof(struct AFSFid) * AFS_MAXCBRSCALL);
 563     afs_DestroyReq(treq);
 564     return 0;
 565 }
 566
 567 /*!
 568  *  Queue a callback on the given fid.
 569  *
 570  * Environment:
 571  *      Locks the xvcb lock.
 572  *      Called when the xvcache lock is already held.
 573  * RACE: afs_xvcache may be dropped and reacquired
 574  *
 575  * \param avc vcache entry
 576  * \param slep Set to 1 if we dropped afs_xvcache
 577  * \return 1 if queued, 0 otherwise
 578  */
 579
 580 static afs_int32
 581 afs_QueueVCB(struct vcache *avc, int *slept)
 582 {
 583     int queued = 0;
 584     struct server *tsp;
 585     struct afs_cbr *tcbp;
 586     int reacquire = 0;
 587
 588     AFS_STATCNT(afs_QueueVCB);
 589
 590     ObtainWriteLock(&afs_xvcb, 274);
 591
 592     /* we can't really give back callbacks on RO files, since the
 593      * server only tracks them on a per-volume basis, and we don't
 594      * know whether we still have some other files from the same
 595      * volume. */
 596     if (!((avc->f.states & CRO) == 0 && avc->callback)) {
 597         goto done;
 598     }
 599
 600     /* The callback is really just a struct server ptr. */
 601     tsp = (struct server *)(avc->callback);
 602
 603     if (!afs_cbrSpace) {
 604         /* If we don't have CBR space, AllocCBR may block or hit the net for
 605          * clearing up CBRs. Hitting the net may involve a fileserver
 606          * needing to contact us, so we must drop xvcache so we don't block
 607          * those requests from going through. */
 608         reacquire = *slept = 1;
 609         ReleaseWriteLock(&afs_xvcache);
 610     }
 611
 612     /* we now have a pointer to the server, so we just allocate
 613      * a queue entry and queue it.
 614      */
 615     tcbp = afs_AllocCBR();
 616     tcbp->fid = avc->f.fid.Fid;
 617
 618     tcbp->next = tsp->cbrs;
 619     if (tsp->cbrs)
 620         tsp->cbrs->pprev = &tcbp->next;
 621
 622     tsp->cbrs = tcbp;
 623     tcbp->pprev = &tsp->cbrs;
 624
 625     afs_InsertHashCBR(tcbp);
 626     queued = 1;
 627
 628  done:
 629     /* now release locks and return */
 630     ReleaseWriteLock(&afs_xvcb);
 631
 632     if (reacquire) {
 633         /* make sure this is after dropping xvcb, for locking order */
 634         ObtainWriteLock(&afs_xvcache, 279);
 635     }
 636     return queued;
 637 }
 638
 639
 640 /*!
 641  *   Remove a queued callback for a given Fid.
 642  *
 643  * Environment:
 644  *      Locks xvcb and xserver locks.
 645  *      Typically called with xdcache, xvcache and/or individual vcache
 646  *      entries locked.
 647  *
 648  * \param afid The fid we want cleansed of queued callbacks.
 649  *
 650  */
 651
 652 void
 653 afs_RemoveVCB(struct VenusFid *afid)
 654 {
 655     int slot;
 656     struct afs_cbr *cbr, *ncbr;
 657
 658     AFS_STATCNT(afs_RemoveVCB);
 659     ObtainWriteLock(&afs_xvcb, 275);
 660
 661     slot = afs_HashCBRFid(&afid->Fid);
 662     ncbr = afs_cbrHashT[slot];
 663
 664     while (ncbr) {
 665         cbr = ncbr;
 666         ncbr = cbr->hash_next;
 667
 668         if (afid->Fid.Volume == cbr->fid.Volume &&
 669             afid->Fid.Vnode == cbr->fid.Vnode &&
 670             afid->Fid.Unique == cbr->fid.Unique) {
 671             afs_FreeCBR(cbr);
 672         }
 673     }
 674
 675     ReleaseWriteLock(&afs_xvcb);
 676 }
 677
 678 void
 679 afs_FlushReclaimedVcaches(void)
 680 {
 681 #if !defined(AFS_LINUX22_ENV)
 682     struct vcache *tvc;
 683     int code, fv_slept;
 684     struct vcache *tmpReclaimedVCList = NULL;
 685
 686     ObtainWriteLock(&afs_xvreclaim, 76);
 687     while (ReclaimedVCList) {
 688         tvc = ReclaimedVCList;  /* take from free list */
 689         ReclaimedVCList = tvc->nextfree;
 690         tvc->nextfree = NULL;
 691         code = afs_FlushVCache(tvc, &fv_slept);
 692         if (code) {
 693             /* Ok, so, if we got code != 0, uh, wtf do we do? */
 694             /* Probably, build a temporary list and then put all back when we
 695                get to the end of the list */
 696             /* This is actually really crappy, but we need to not leak these.
 697                We probably need a way to be smarter about this. */
 698             tvc->nextfree = tmpReclaimedVCList;
 699             tmpReclaimedVCList = tvc;
 700             /* printf("Reclaim list flush %lx failed: %d\n", (unsigned long) tvc, code); */
 701         }
 702         if (tvc->f.states & (CVInit
 703 #ifdef AFS_DARWIN80_ENV
 704                           | CDeadVnode
 705 #endif
 706            )) {
 707            tvc->f.states &= ~(CVInit
 708 #ifdef AFS_DARWIN80_ENV
 709                             | CDeadVnode
 710 #endif
 711            );
 712            afs_osi_Wakeup(&tvc->f.states);
 713         }
 714     }
 715     if (tmpReclaimedVCList)
 716         ReclaimedVCList = tmpReclaimedVCList;
 717
 718     ReleaseWriteLock(&afs_xvreclaim);
 719 #endif
 720 }
 721
 722 void
 723 afs_PostPopulateVCache(struct vcache *avc, struct VenusFid *afid, int seq)
 724 {
 725     /*
 726      * The proper value for mvstat (for root fids) is setup by the caller.
 727      */
 728     avc->mvstat = AFS_MVSTAT_FILE;
 729     if (afid->Fid.Vnode == 1 && afid->Fid.Unique == 1)
 730         avc->mvstat = AFS_MVSTAT_ROOT;
 731
 732     if (afs_globalVFS == 0)
 733         osi_Panic("afs globalvfs");
 734
 735     osi_PostPopulateVCache(avc);
 736
 737     avc->dchint = NULL;
 738     osi_dnlc_purgedp(avc);      /* this may be overkill */
 739     memset(&(avc->callsort), 0, sizeof(struct afs_q));
 740     avc->slocks = NULL;
 741     avc->f.states &=~ CVInit;
 742     if (seq) {
 743         avc->f.states |= CBulkFetching;
 744         avc->f.m.Length = seq;
 745     }
 746     afs_osi_Wakeup(&avc->f.states);
 747 }
 748
 749 int
 750 afs_ShakeLooseVCaches(afs_int32 anumber)
 751 {
 752     afs_int32 i, loop;
 753     int evicted;
 754     struct vcache *tvc;
 755     struct afs_q *tq, *uq;
 756     int fv_slept, defersleep = 0;
 757     int limit;
 758     afs_int32 target = anumber;
 759
 760     loop = 0;
 761
 762  retry:
 763     i = 0;
 764     limit = afs_vcount;
 765     for (tq = VLRU.prev; tq != &VLRU && anumber > 0; tq = uq) {
 766         tvc = QTOV(tq);
 767         uq = QPrev(tq);
 768         if (tvc->f.states & CVFlushed) {
 769             refpanic("CVFlushed on VLRU");
 770         } else if (i++ > limit) {
 771             afs_warn("afs_ShakeLooseVCaches: i %d limit %d afs_vcount %d afs_maxvcount %d\n",
 772                      (int)i, limit, (int)afs_vcount, (int)afs_maxvcount);
 773             refpanic("Found too many AFS vnodes on VLRU (VLRU cycle?)");
 774         } else if (QNext(uq) != tq) {
 775             refpanic("VLRU inconsistent");
 776         } else if (tvc->f.states & CVInit) {
 777             continue;
 778         }
 779
 780         fv_slept = 0;
 781         evicted = osi_TryEvictVCache(tvc, &fv_slept, defersleep);
 782         if (evicted) {
 783             anumber--;
 784         }
 785
 786         if (fv_slept) {
 787             if (loop++ > 100)
 788                 break;
 789             if (!evicted) {
 790                 /*
 791                  * This vcache was busy and we slept while trying to evict it.
 792                  * Move this busy vcache to the head of the VLRU so vcaches
 793                  * following this busy vcache can be evicted during the retry.
 794                  */
 795                 QRemove(&tvc->vlruq);
 796                 QAdd(&VLRU, &tvc->vlruq);
 797             }
 798             goto retry; /* start over - may have raced. */
 799         }
 800         if (uq == &VLRU) {
 801             if (anumber && !defersleep) {
 802                 defersleep = 1;
 803                 goto retry;
 804             }
 805             break;
 806         }
 807     }
 808     if (!afsd_dynamic_vcaches && anumber == target) {
 809         afs_warn("afs_ShakeLooseVCaches: warning none freed, using %d of %d\n",
 810                afs_vcount, afs_maxvcount);
 811     }
 812
 813     return 0;
 814 }
 815
 816 /* Alloc new vnode. */
 817
 818 static struct vcache *
 819 afs_AllocVCache(void)
 820 {
 821     struct vcache *tvc;
 822
 823     tvc = osi_NewVnode();
 824
 825     afs_vcount++;
 826
 827     /* track the peak */
 828     if (afsd_dynamic_vcaches && afs_maxvcount < afs_vcount) {
 829         afs_maxvcount = afs_vcount;
 830         /*printf("peak vnodes: %d\n", afs_maxvcount);*/
 831     }
 832
 833     afs_stats_cmperf.vcacheXAllocs++;   /* count in case we have a leak */
 834
 835     /* If we create a new inode, we either give it a new slot number,
 836      * or if one's available, use a slot number from the slot free list
 837      */
 838     if (afs_freeSlotList != NULL) {
 839        struct afs_slotlist *tmp;
 840
 841        tvc->diskSlot = afs_freeSlotList->slot;
 842        tmp = afs_freeSlotList;
 843        afs_freeSlotList = tmp->next;
 844        afs_osi_Free(tmp, sizeof(struct afs_slotlist));
 845     }  else {
 846        tvc->diskSlot = afs_nextVcacheSlot++;
 847     }
 848
 849     return tvc;
 850 }
 851
 852 /* Pre populate a newly allocated vcache. On platforms where the actual
 853  * vnode is attached to the vcache, this function is called before attachment,
 854  * therefore it cannot perform any actions on the vnode itself */
 855
 856 static void
 857 afs_PrePopulateVCache(struct vcache *avc, struct VenusFid *afid,
 858                       struct server *serverp) {
 859
 860     afs_uint32 slot;
 861     afs_hyper_t zero;
 862     slot = avc->diskSlot;
 863
 864     osi_PrePopulateVCache(avc);
 865
 866     avc->diskSlot = slot;
 867     QZero(&avc->metadirty);
 868
 869     AFS_RWLOCK_INIT(&avc->lock, "vcache lock");
 870
 871     memset(&avc->mvid, 0, sizeof(avc->mvid));
 872     avc->linkData = NULL;
 873     avc->cbExpires = 0;
 874     avc->opens = 0;
 875     avc->execsOrWriters = 0;
 876     avc->flockCount = 0;
 877     avc->f.states = CVInit;
 878     avc->last_looker = 0;
 879     avc->f.fid = *afid;
 880     avc->asynchrony = -1;
 881     avc->vc_error = 0;
 882
 883     hzero(avc->mapDV);
 884     avc->f.truncPos = AFS_NOTRUNC;   /* don't truncate until we need to */
 885     hzero(zero);
 886     afs_SetDataVersion(avc, &zero);  /* in case we copy it into flushDV */
 887     avc->Access = NULL;
 888     avc->callback = serverp;         /* to minimize chance that clear
 889                                       * request is lost */
 890
 891 #if defined(AFS_CACHE_BYPASS)
 892     avc->cachingStates = 0;
 893     avc->cachingTransitions = 0;
 894 #endif
 895 }
 896
 897 void
 898 afs_FlushAllVCaches(void)
 899 {
 900     int i;
 901     struct vcache *tvc, *nvc;
 902
 903     ObtainWriteLock(&afs_xvcache, 867);
 904
 905  retry:
 906     for (i = 0; i < VCSIZE; i++) {
 907         for (tvc = afs_vhashT[i]; tvc; tvc = nvc) {
 908             int slept;
 909
 910             nvc = tvc->hnext;
 911             if (afs_FlushVCache(tvc, &slept)) {
 912                 afs_warn("Failed to flush vcache 0x%lx\n", (unsigned long)(uintptrsz)tvc);
 913             }
 914             if (slept) {
 915                 goto retry;
 916             }
 917         }
 918     }
 919
 920     ReleaseWriteLock(&afs_xvcache);
 921 }
 922
 923 /*!
 924  *   This routine is responsible for allocating a new cache entry
 925  * from the free list.  It formats the cache entry and inserts it
 926  * into the appropriate hash tables.  It must be called with
 927  * afs_xvcache write-locked so as to prevent several processes from
 928  * trying to create a new cache entry simultaneously.
 929  *
 930  * LOCK: afs_NewVCache  afs_xvcache W
 931  *
 932  * \param afid The file id of the file whose cache entry is being created.
 933  *
 934  * \return The new vcache struct.
 935  */
 936
 937 static_inline struct vcache *
 938 afs_NewVCache_int(struct VenusFid *afid, struct server *serverp, int seq)
 939 {
 940     struct vcache *tvc;
 941     afs_int32 i, j;
 942     afs_int32 anumber = VCACHE_FREE;
 943
 944     AFS_STATCNT(afs_NewVCache);
 945
 946     afs_FlushReclaimedVcaches();
 947
 948 #if defined(AFS_LINUX22_ENV)
 949     if(!afsd_dynamic_vcaches && afs_vcount >= afs_maxvcount) {
 950         afs_ShakeLooseVCaches(anumber);
 951         if (afs_vcount >= afs_maxvcount) {
 952             afs_warn("afs_NewVCache - none freed\n");
 953             return NULL;
 954         }
 955     }
 956     tvc = afs_AllocVCache();
 957 #else /* AFS_LINUX22_ENV */
 958     /* pull out a free cache entry */
 959     if (!freeVCList) {
 960         afs_ShakeLooseVCaches(anumber);
 961     }
 962
 963     if (!freeVCList) {
 964         tvc = afs_AllocVCache();
 965     } else {
 966         tvc = freeVCList;       /* take from free list */
 967         freeVCList = tvc->nextfree;
 968         tvc->nextfree = NULL;
 969         afs_vcount++; /* balanced by FlushVCache */
 970     } /* end of if (!freeVCList) */
 971
 972 #endif /* AFS_LINUX22_ENV */
 973
 974 #if defined(AFS_XBSD_ENV) || defined(AFS_DARWIN_ENV)
 975     if (tvc->v)
 976         panic("afs_NewVCache(): free vcache with vnode attached");
 977 #endif
 978
 979     /* Populate the vcache with as much as we can. */
 980     afs_PrePopulateVCache(tvc, afid, serverp);
 981
 982     /* Thread the vcache onto the VLRU */
 983
 984     i = VCHash(afid);
 985     j = VCHashV(afid);
 986
 987     tvc->hnext = afs_vhashT[i];
 988     afs_vhashT[i] = tvc;
 989     QAdd(&afs_vhashTV[j], &tvc->vhashq);
 990
 991     if ((VLRU.next->prev != &VLRU) || (VLRU.prev->next != &VLRU)) {
 992         refpanic("NewVCache VLRU inconsistent");
 993     }
 994     QAdd(&VLRU, &tvc->vlruq);   /* put in lruq */
 995     if ((VLRU.next->prev != &VLRU) || (VLRU.prev->next != &VLRU)) {
 996         refpanic("NewVCache VLRU inconsistent2");
 997     }
 998     if (tvc->vlruq.next->prev != &(tvc->vlruq)) {
 999         refpanic("NewVCache VLRU inconsistent3");
1000     }
1001     if (tvc->vlruq.prev->next != &(tvc->vlruq)) {
1002         refpanic("NewVCache VLRU inconsistent4");
1003     }
1004     vcachegen++;
1005
1006     /* it should now be safe to drop the xvcache lock - so attach an inode
1007      * to this vcache, where necessary */
1008     osi_AttachVnode(tvc, seq);
1009
1010     /* Get a reference count to hold this vcache for the VLRUQ. Note that
1011      * we have to do this after attaching the vnode, because the reference
1012      * count may be held in the vnode itself */
1013
1014 #if defined(AFS_LINUX22_ENV)
1015     /* Hold it for the LRU (should make count 2) */
1016     AFS_FAST_HOLD(tvc);
1017 #elif !(defined (AFS_DARWIN_ENV) || defined(AFS_XBSD_ENV))
1018     VREFCOUNT_SET(tvc, 1);      /* us */
1019 #endif
1020
1021 #if defined (AFS_FBSD_ENV)
1022     if (tvc->f.states & CVInit)
1023 #endif
1024     afs_PostPopulateVCache(tvc, afid, seq);
1025
1026     return tvc;
1027 }                               /*afs_NewVCache */
1028
1029
1030 struct vcache *
1031 afs_NewVCache(struct VenusFid *afid, struct server *serverp)
1032 {
1033     return afs_NewVCache_int(afid, serverp, 0);
1034 }
1035
1036 struct vcache *
1037 afs_NewBulkVCache(struct VenusFid *afid, struct server *serverp, int seq)
1038 {
1039     return afs_NewVCache_int(afid, serverp, seq);
1040 }
1041
1042 /*!
1043  * ???
1044  *
1045  * LOCK: afs_FlushActiveVcaches afs_xvcache N
1046  *
1047  * \param doflocks : Do we handle flocks?
1048  */
1049 void
1050 afs_FlushActiveVcaches(afs_int32 doflocks)
1051 {
1052     struct vcache *tvc;
1053     int i;
1054     struct afs_conn *tc;
1055     afs_int32 code;
1056     afs_ucred_t *cred = NULL;
1057     struct vrequest *treq = NULL;
1058     struct AFSVolSync tsync;
1059     int didCore;
1060     XSTATS_DECLS;
1061     AFS_STATCNT(afs_FlushActiveVcaches);
1062
1063     code = afs_CreateReq(&treq, afs_osi_credp);
1064     if (code) {
1065         afs_warn("unable to alloc treq\n");
1066         return;
1067     }
1068
1069     ObtainReadLock(&afs_xvcache);
1070     for (i = 0; i < VCSIZE; i++) {
1071         for (tvc = afs_vhashT[i]; tvc; tvc = tvc->hnext) {
1072             if (tvc->f.states & CVInit) continue;
1073 #ifdef AFS_DARWIN80_ENV
1074             if (tvc->f.states & CDeadVnode &&
1075                 (tvc->f.states & (CCore|CUnlinkedDel) ||
1076                  tvc->flockCount)) panic("Dead vnode has core/unlinkedel/flock");
1077 #endif
1078             if (doflocks && tvc->flockCount != 0) {
1079                 struct rx_connection *rxconn;
1080                 /* if this entry has an flock, send a keep-alive call out */
1081                 osi_vnhold(tvc, 0);
1082                 ReleaseReadLock(&afs_xvcache);
1083                 ObtainWriteLock(&tvc->lock, 51);
1084                 do {
1085                     code = afs_InitReq(treq, afs_osi_credp);
1086                     if (code) {
1087                         code = -1;
1088                         break; /* shutting down: do not try to extend the lock */
1089                     }
1090                     treq->flags |= O_NONBLOCK;
1091
1092                     tc = afs_Conn(&tvc->f.fid, treq, SHARED_LOCK, &rxconn);
1093                     if (tc) {
1094                         XSTATS_START_TIME(AFS_STATS_FS_RPCIDX_EXTENDLOCK);
1095                         RX_AFS_GUNLOCK();
1096                         code =
1097                             RXAFS_ExtendLock(rxconn,
1098                                              (struct AFSFid *)&tvc->f.fid.Fid,
1099                                              &tsync);
1100                         RX_AFS_GLOCK();
1101                         XSTATS_END_TIME;
1102                     } else
1103                         code = -1;
1104                 } while (afs_Analyze
1105                          (tc, rxconn, code, &tvc->f.fid, treq,
1106                           AFS_STATS_FS_RPCIDX_EXTENDLOCK, SHARED_LOCK, NULL));
1107
1108                 ReleaseWriteLock(&tvc->lock);
1109 #ifdef AFS_DARWIN80_ENV
1110                 AFS_FAST_RELE(tvc);
1111                 ObtainReadLock(&afs_xvcache);
1112 #else
1113                 ObtainReadLock(&afs_xvcache);
1114                 AFS_FAST_RELE(tvc);
1115 #endif
1116             }
1117             didCore = 0;
1118             if ((tvc->f.states & CCore) || (tvc->f.states & CUnlinkedDel)) {
1119                 /*
1120                  * Don't let it evaporate in case someone else is in
1121                  * this code.  Also, drop the afs_xvcache lock while
1122                  * getting vcache locks.
1123                  */
1124                 osi_vnhold(tvc, 0);
1125                 ReleaseReadLock(&afs_xvcache);
1126 #if defined(AFS_SGI_ENV)
1127                 /*
1128                  * That's because if we come in via the CUnlinkedDel bit state path we'll be have 0 refcnt
1129                  */
1130                 osi_Assert(VREFCOUNT_GT(tvc,0));
1131                 AFS_RWLOCK((vnode_t *) tvc, VRWLOCK_WRITE);
1132 #endif
1133                 ObtainWriteLock(&tvc->lock, 52);
1134                 if (tvc->f.states & CCore) {
1135                     tvc->f.states &= ~CCore;
1136                     /* XXXX Find better place-holder for cred XXXX */
1137                     cred = (afs_ucred_t *)tvc->linkData;
1138                     tvc->linkData = NULL;       /* XXX */
1139                     code = afs_InitReq(treq, cred);
1140                     afs_Trace2(afs_iclSetp, CM_TRACE_ACTCCORE,
1141                                ICL_TYPE_POINTER, tvc, ICL_TYPE_INT32,
1142                                tvc->execsOrWriters);
1143                     if (!code) {  /* avoid store when shutting down */
1144                         code = afs_StoreOnLastReference(tvc, treq);
1145                     }
1146                     ReleaseWriteLock(&tvc->lock);
1147                     hzero(tvc->flushDV);
1148                     osi_FlushText(tvc);
1149                     didCore = 1;
1150                     if (code && code != VNOVNODE) {
1151                         afs_StoreWarn(code, tvc->f.fid.Fid.Volume,
1152                                       /* /dev/console */ 1);
1153                     }
1154                 } else if (tvc->f.states & CUnlinkedDel) {
1155                     /*
1156                      * Ignore errors
1157                      */
1158                     ReleaseWriteLock(&tvc->lock);
1159 #if defined(AFS_SGI_ENV)
1160                     AFS_RWUNLOCK((vnode_t *) tvc, VRWLOCK_WRITE);
1161 #endif
1162                     afs_remunlink(tvc, 0);
1163 #if defined(AFS_SGI_ENV)
1164                     AFS_RWLOCK((vnode_t *) tvc, VRWLOCK_WRITE);
1165 #endif
1166                 } else {
1167                     /* lost (or won, perhaps) the race condition */
1168                     ReleaseWriteLock(&tvc->lock);
1169                 }
1170 #if defined(AFS_SGI_ENV)
1171                 AFS_RWUNLOCK((vnode_t *) tvc, VRWLOCK_WRITE);
1172 #endif
1173 #ifdef AFS_DARWIN80_ENV
1174                 AFS_FAST_RELE(tvc);
1175                 if (didCore) {
1176                     AFS_RELE(AFSTOV(tvc));
1177                     /* Matches write code setting CCore flag */
1178                     crfree(cred);
1179                 }
1180                 ObtainReadLock(&afs_xvcache);
1181 #else
1182                 ObtainReadLock(&afs_xvcache);
1183                 AFS_FAST_RELE(tvc);
1184                 if (didCore) {
1185                     AFS_RELE(AFSTOV(tvc));
1186                     /* Matches write code setting CCore flag */
1187                     crfree(cred);
1188                 }
1189 #endif
1190             }
1191         }
1192     }
1193     ReleaseReadLock(&afs_xvcache);
1194     afs_DestroyReq(treq);
1195 }
1196
1197
1198
1199 /*!
1200  *   Make sure a cache entry is up-to-date status-wise.
1201  *
1202  * NOTE: everywhere that calls this can potentially be sped up
1203  *       by checking CStatd first, and avoiding doing the InitReq
1204  *       if this is up-to-date.
1205  *
1206  *  Anymore, the only places that call this KNOW already that the
1207  *  vcache is not up-to-date, so we don't screw around.
1208  *
1209  * \param avc  : Ptr to vcache entry to verify.
1210  * \param areq : ???
1211  */
1212
1213 /*!
1214  *
1215  *   Make sure a cache entry is up-to-date status-wise.
1216  *
1217  *   NOTE: everywhere that calls this can potentially be sped up
1218  *       by checking CStatd first, and avoiding doing the InitReq
1219  *       if this is up-to-date.
1220  *
1221  *   Anymore, the only places that call this KNOW already that the
1222  * vcache is not up-to-date, so we don't screw around.
1223  *
1224  * \param avc Pointer to vcache entry to verify.
1225  * \param areq
1226  *
1227  * \return 0 for success or other error codes.
1228  */
1229 int
1230 afs_VerifyVCache2(struct vcache *avc, struct vrequest *areq)
1231 {
1232     struct vcache *tvc;
1233
1234     AFS_STATCNT(afs_VerifyVCache);
1235
1236     /* otherwise we must fetch the status info */
1237
1238     ObtainWriteLock(&avc->lock, 53);
1239     if (avc->f.states & CStatd) {
1240         ReleaseWriteLock(&avc->lock);
1241         return 0;
1242     }
1243     afs_StaleVCacheFlags(avc, AFS_STALEVC_FILENAME | AFS_STALEVC_CLEARCB,
1244                          CUnique);
1245     ReleaseWriteLock(&avc->lock);
1246
1247     /* fetch the status info */
1248     tvc = afs_GetVCache(&avc->f.fid, areq);
1249     if (!tvc)
1250         return EIO;
1251     /* Put it back; caller has already incremented vrefCount */
1252     afs_PutVCache(tvc);
1253     return 0;
1254
1255 }                               /*afs_VerifyVCache */
1256
1257
1258 /*!
1259  * Simple copy of stat info into cache.
1260  *
1261  * Callers:as of 1992-04-29, only called by WriteVCache
1262  *
1263  * \param avc   Ptr to vcache entry involved.
1264  * \param astat Ptr to stat info to copy.
1265  *
1266  */
1267 static void
1268 afs_SimpleVStat(struct vcache *avc,
1269                 struct AFSFetchStatus *astat, struct vrequest *areq)
1270 {
1271     afs_size_t length;
1272     AFS_STATCNT(afs_SimpleVStat);
1273
1274 #ifdef AFS_64BIT_CLIENT
1275         FillInt64(length, astat->Length_hi, astat->Length);
1276 #else /* AFS_64BIT_CLIENT */
1277         length = astat->Length;
1278 #endif /* AFS_64BIT_CLIENT */
1279
1280 #if defined(AFS_SGI_ENV)
1281     if ((avc->execsOrWriters <= 0) && !afs_DirtyPages(avc)
1282         && !AFS_VN_MAPPED((vnode_t *) avc)) {
1283         osi_Assert((valusema(&avc->vc_rwlock) <= 0)
1284                    && (OSI_GET_LOCKID() == avc->vc_rwlockid));
1285         if (length < avc->f.m.Length) {
1286             vnode_t *vp = (vnode_t *) avc;
1287
1288             osi_Assert(WriteLocked(&avc->lock));
1289             ReleaseWriteLock(&avc->lock);
1290             AFS_GUNLOCK();
1291             PTOSSVP(vp, (off_t) length, (off_t) MAXLONG);
1292             AFS_GLOCK();
1293             ObtainWriteLock(&avc->lock, 67);
1294         }
1295     }
1296 #endif
1297
1298     if (!afs_DirtyPages(avc)) {
1299         /* if actively writing the file, don't fetch over this value */
1300         afs_Trace3(afs_iclSetp, CM_TRACE_SIMPLEVSTAT, ICL_TYPE_POINTER, avc,
1301                    ICL_TYPE_OFFSET, ICL_HANDLE_OFFSET(avc->f.m.Length),
1302                    ICL_TYPE_OFFSET, ICL_HANDLE_OFFSET(length));
1303         avc->f.m.Length = length;
1304         avc->f.m.Date = astat->ClientModTime;
1305     }
1306     avc->f.m.Owner = astat->Owner;
1307     avc->f.m.Group = astat->Group;
1308     avc->f.m.Mode = astat->UnixModeBits;
1309     if (vType(avc) == VREG) {
1310         avc->f.m.Mode |= S_IFREG;
1311     } else if (vType(avc) == VDIR) {
1312         avc->f.m.Mode |= S_IFDIR;
1313     } else if (vType(avc) == VLNK) {
1314         avc->f.m.Mode |= S_IFLNK;
1315         if ((avc->f.m.Mode & 0111) == 0)
1316             avc->mvstat = AFS_MVSTAT_MTPT;
1317     }
1318     if (avc->f.states & CForeign) {
1319         struct axscache *ac;
1320         avc->f.anyAccess = astat->AnonymousAccess;
1321 #ifdef badidea
1322         if ((astat->CallerAccess & ~astat->AnonymousAccess))
1323             /*   USED TO SAY :
1324              * Caller has at least one bit not covered by anonymous, and
1325              * thus may have interesting rights.
1326              *
1327              * HOWEVER, this is a really bad idea, because any access query
1328              * for bits which aren't covered by anonymous, on behalf of a user
1329              * who doesn't have any special rights, will result in an answer of
1330              * the form "I don't know, lets make a FetchStatus RPC and find out!"
1331              * It's an especially bad idea under Ultrix, since (due to the lack of
1332              * a proper access() call) it must perform several afs_access() calls
1333              * in order to create magic mode bits that vary according to who makes
1334              * the call.  In other words, _every_ stat() generates a test for
1335              * writeability...
1336              */
1337 #endif /* badidea */
1338             if (avc->Access && (ac = afs_FindAxs(avc->Access, areq->uid)))
1339                 ac->axess = astat->CallerAccess;
1340             else                /* not found, add a new one if possible */
1341                 afs_AddAxs(avc->Access, areq->uid, astat->CallerAccess);
1342     }
1343
1344 }                               /*afs_SimpleVStat */
1345
1346
1347 /*!
1348  * Store the status info *only* back to the server for a
1349  * fid/vrequest.
1350  *
1351  * Environment: Must be called with a shared lock held on the vnode.
1352  *
1353  * \param avc Ptr to the vcache entry.
1354  * \param astatus Ptr to the status info to store.
1355  * \param areq Ptr to the associated vrequest.
1356  *
1357  * \return Operation status.
1358  */
1359
1360 int
1361 afs_WriteVCache(struct vcache *avc,
1362                 struct AFSStoreStatus *astatus,
1363                 struct vrequest *areq)
1364 {
1365     afs_int32 code;
1366     struct afs_conn *tc;
1367     struct AFSFetchStatus OutStatus;
1368     struct AFSVolSync tsync;
1369     struct rx_connection *rxconn;
1370     XSTATS_DECLS;
1371     AFS_STATCNT(afs_WriteVCache);
1372     afs_Trace2(afs_iclSetp, CM_TRACE_WVCACHE, ICL_TYPE_POINTER, avc,
1373                ICL_TYPE_OFFSET, ICL_HANDLE_OFFSET(avc->f.m.Length));
1374     do {
1375         tc = afs_Conn(&avc->f.fid, areq, SHARED_LOCK, &rxconn);
1376         if (tc) {
1377             XSTATS_START_TIME(AFS_STATS_FS_RPCIDX_STORESTATUS);
1378             RX_AFS_GUNLOCK();
1379             code =
1380                 RXAFS_StoreStatus(rxconn, (struct AFSFid *)&avc->f.fid.Fid,
1381                                   astatus, &OutStatus, &tsync);
1382             RX_AFS_GLOCK();
1383             XSTATS_END_TIME;
1384         } else
1385             code = -1;
1386     } while (afs_Analyze
1387              (tc, rxconn, code, &avc->f.fid, areq, AFS_STATS_FS_RPCIDX_STORESTATUS,
1388               SHARED_LOCK, NULL));
1389
1390     UpgradeSToWLock(&avc->lock, 20);
1391     if (code == 0) {
1392         /* success, do the changes locally */
1393         afs_SimpleVStat(avc, &OutStatus, areq);
1394         /*
1395          * Update the date, too.  SimpleVStat didn't do this, since
1396          * it thought we were doing this after fetching new status
1397          * over a file being written.
1398          */
1399         avc->f.m.Date = OutStatus.ClientModTime;
1400     } else {
1401         /* failure, set up to check with server next time */
1402         afs_StaleVCacheFlags(avc, 0, CUnique);
1403     }
1404     ConvertWToSLock(&avc->lock);
1405     return code;
1406
1407 }                               /*afs_WriteVCache */
1408
1409 /*!
1410  * Store status info only locally, set the proper disconnection flags
1411  * and add to dirty list.
1412  *
1413  * \param avc The vcache to be written locally.
1414  * \param astatus Get attr fields from local store.
1415  * \param attrs This one is only of the vs_size.
1416  *
1417  * \note Must be called with a shared lock on the vnode
1418  */
1419 int
1420 afs_WriteVCacheDiscon(struct vcache *avc,
1421                       struct AFSStoreStatus *astatus,
1422                       struct vattr *attrs)
1423 {
1424     afs_int32 code = 0;
1425     afs_int32 flags = 0;
1426
1427     UpgradeSToWLock(&avc->lock, 700);
1428
1429     if (!astatus->Mask) {
1430
1431         return code;
1432
1433     } else {
1434
1435         /* Set attributes. */
1436         if (astatus->Mask & AFS_SETMODTIME) {
1437                 avc->f.m.Date = astatus->ClientModTime;
1438                 flags |= VDisconSetTime;
1439         }
1440
1441         if (astatus->Mask & AFS_SETOWNER) {
1442             /* printf("Not allowed yet. \n"); */
1443             /*avc->f.m.Owner = astatus->Owner;*/
1444         }
1445
1446         if (astatus->Mask & AFS_SETGROUP) {
1447             /* printf("Not allowed yet. \n"); */
1448             /*avc->f.m.Group =  astatus->Group;*/
1449         }
1450
1451         if (astatus->Mask & AFS_SETMODE) {
1452                 avc->f.m.Mode = astatus->UnixModeBits;
1453
1454                 flags |= VDisconSetMode;
1455          }              /* if(astatus.Mask & AFS_SETMODE) */
1456
1457      }                  /* if (!astatus->Mask) */
1458
1459      if (attrs->va_size > 0) {
1460         /* XXX: Do I need more checks? */
1461         /* Truncation operation. */
1462         flags |= VDisconTrunc;
1463      }
1464
1465     if (flags)
1466         afs_DisconAddDirty(avc, flags, 1);
1467
1468     /* XXX: How about the rest of the fields? */
1469
1470     ConvertWToSLock(&avc->lock);
1471
1472     return code;
1473 }
1474
1475 /*!
1476  * Copy astat block into vcache info
1477  *
1478  * \note This code may get dataversion and length out of sync if the file has
1479  * been modified.  This is less than ideal.  I haven't thought about it sufficiently
1480  * to be certain that it is adequate.
1481  *
1482  * \note Environment: Must be called under a write lock
1483  *
1484  * \param avc  Ptr to vcache entry.
1485  * \param astat Ptr to stat block to copy in.
1486  * \param areq Ptr to associated request.
1487  */
1488 void
1489 afs_ProcessFS(struct vcache *avc,
1490               struct AFSFetchStatus *astat, struct vrequest *areq)
1491 {
1492     afs_size_t length;
1493     afs_hyper_t newDV;
1494     AFS_STATCNT(afs_ProcessFS);
1495
1496 #ifdef AFS_64BIT_CLIENT
1497     FillInt64(length, astat->Length_hi, astat->Length);
1498 #else /* AFS_64BIT_CLIENT */
1499     length = astat->Length;
1500 #endif /* AFS_64BIT_CLIENT */
1501     /* WARNING: afs_DoBulkStat uses the Length field to store a sequence
1502      * number for each bulk status request. Under no circumstances
1503      * should afs_DoBulkStat store a sequence number if the new
1504      * length will be ignored when afs_ProcessFS is called with
1505      * new stats. If you change the following conditional then you
1506      * also need to change the conditional in afs_DoBulkStat.  */
1507 #ifdef AFS_SGI_ENV
1508     if ((avc->execsOrWriters <= 0) && !afs_DirtyPages(avc)
1509         && !AFS_VN_MAPPED((vnode_t *) avc)) {
1510 #else
1511     if ((avc->execsOrWriters <= 0) && !afs_DirtyPages(avc)) {
1512 #endif
1513         /* if we're writing or mapping this file, don't fetch over these
1514          *  values.
1515          */
1516         afs_Trace3(afs_iclSetp, CM_TRACE_PROCESSFS, ICL_TYPE_POINTER, avc,
1517                    ICL_TYPE_OFFSET, ICL_HANDLE_OFFSET(avc->f.m.Length),
1518                    ICL_TYPE_OFFSET, ICL_HANDLE_OFFSET(length));
1519         avc->f.m.Length = length;
1520         avc->f.m.Date = astat->ClientModTime;
1521     }
1522     hset64(newDV, astat->dataVersionHigh, astat->DataVersion);
1523     afs_SetDataVersion(avc, &newDV);
1524     avc->f.m.Owner = astat->Owner;
1525     avc->f.m.Mode = astat->UnixModeBits;
1526     avc->f.m.Group = astat->Group;
1527     avc->f.m.LinkCount = astat->LinkCount;
1528     if (astat->FileType == File) {
1529         vSetType(avc, VREG);
1530         avc->f.m.Mode |= S_IFREG;
1531     } else if (astat->FileType == Directory) {
1532         vSetType(avc, VDIR);
1533         avc->f.m.Mode |= S_IFDIR;
1534     } else if (astat->FileType == SymbolicLink) {
1535         if (afs_fakestat_enable && (avc->f.m.Mode & 0111) == 0) {
1536             vSetType(avc, VDIR);
1537             avc->f.m.Mode |= S_IFDIR;
1538         } else {
1539             vSetType(avc, VLNK);
1540             avc->f.m.Mode |= S_IFLNK;
1541         }
1542         if ((avc->f.m.Mode & 0111) == 0) {
1543             avc->mvstat = AFS_MVSTAT_MTPT;
1544         }
1545     }
1546     avc->f.anyAccess = astat->AnonymousAccess;
1547 #ifdef badidea
1548     if ((astat->CallerAccess & ~astat->AnonymousAccess))
1549         /*   USED TO SAY :
1550          * Caller has at least one bit not covered by anonymous, and
1551          * thus may have interesting rights.
1552          *
1553          * HOWEVER, this is a really bad idea, because any access query
1554          * for bits which aren't covered by anonymous, on behalf of a user
1555          * who doesn't have any special rights, will result in an answer of
1556          * the form "I don't know, lets make a FetchStatus RPC and find out!"
1557          * It's an especially bad idea under Ultrix, since (due to the lack of
1558          * a proper access() call) it must perform several afs_access() calls
1559          * in order to create magic mode bits that vary according to who makes
1560          * the call.  In other words, _every_ stat() generates a test for
1561          * writeability...
1562          */
1563 #endif /* badidea */
1564     {
1565         struct axscache *ac;
1566         if (avc->Access && (ac = afs_FindAxs(avc->Access, areq->uid)))
1567             ac->axess = astat->CallerAccess;
1568         else                    /* not found, add a new one if possible */
1569             afs_AddAxs(avc->Access, areq->uid, astat->CallerAccess);
1570     }
1571 }                               /*afs_ProcessFS */
1572
1573
1574 /*!
1575  * Get fid from server.
1576  *
1577  * \param afid
1578  * \param areq Request to be passed on.
1579  * \param name Name of ?? to lookup.
1580  * \param OutStatus Fetch status.
1581  * \param CallBackp
1582  * \param serverp
1583  * \param tsyncp
1584  *
1585  * \return Success status of operation.
1586  */
1587 int
1588 afs_RemoteLookup(struct VenusFid *afid, struct vrequest *areq,
1589                  char *name, struct VenusFid *nfid,
1590                  struct AFSFetchStatus *OutStatusp,
1591                  struct AFSCallBack *CallBackp, struct server **serverp,
1592                  struct AFSVolSync *tsyncp)
1593 {
1594     afs_int32 code;
1595     struct afs_conn *tc;
1596     struct rx_connection *rxconn;
1597     struct AFSFetchStatus OutDirStatus;
1598     XSTATS_DECLS;
1599     if (!name)
1600         name = "";              /* XXX */
1601     do {
1602         tc = afs_Conn(afid, areq, SHARED_LOCK, &rxconn);
1603         if (tc) {
1604             if (serverp)
1605                 *serverp = tc->parent->srvr->server;
1606             XSTATS_START_TIME(AFS_STATS_FS_RPCIDX_XLOOKUP);
1607             RX_AFS_GUNLOCK();
1608             code =
1609                 RXAFS_Lookup(rxconn, (struct AFSFid *)&afid->Fid, name,
1610                              (struct AFSFid *)&nfid->Fid, OutStatusp,
1611                              &OutDirStatus, CallBackp, tsyncp);
1612             RX_AFS_GLOCK();
1613             XSTATS_END_TIME;
1614         } else
1615             code = -1;
1616     } while (afs_Analyze
1617              (tc, rxconn, code, afid, areq, AFS_STATS_FS_RPCIDX_XLOOKUP, SHARED_LOCK,
1618               NULL));
1619
1620     return code;
1621 }
1622
1623
1624 /*!
1625  * afs_GetVCache
1626  *
1627  * Given a file id and a vrequest structure, fetch the status
1628  * information associated with the file.
1629  *
1630  * \param afid File ID.
1631  * \param areq Ptr to associated vrequest structure, specifying the
1632  *  user whose authentication tokens will be used.
1633  *
1634  * \note Environment:
1635  *      The cache entry is returned with an increased vrefCount field.
1636  *      The entry must be discarded by calling afs_PutVCache when you
1637  *      are through using the pointer to the cache entry.
1638  *
1639  *      You should not hold any locks when calling this function, except
1640  *      locks on other vcache entries.  If you lock more than one vcache
1641  *      entry simultaneously, you should lock them in this order:
1642  *
1643  *          1. Lock all files first, then directories.
1644  *          2.  Within a particular type, lock entries in Fid.Vnode order.
1645  *
1646  *      This locking hierarchy is convenient because it allows locking
1647  *      of a parent dir cache entry, given a file (to check its access
1648  *      control list).  It also allows renames to be handled easily by
1649  *      locking directories in a constant order.
1650  *
1651  * \note NB.  NewVCache -> FlushVCache presently (4/10/95) drops the xvcache lock.
1652  */
1653 struct vcache *
1654 afs_GetVCache(struct VenusFid *afid, struct vrequest *areq)
1655 {
1656
1657     afs_int32 code, newvcache = 0;
1658     struct vcache *tvc;
1659     struct volume *tvp;
1660     afs_int32 retry;
1661
1662     AFS_STATCNT(afs_GetVCache);
1663
1664 #if     defined(AFS_SGI_ENV) && !defined(AFS_SGI53_ENV)
1665   loop:
1666 #endif
1667
1668     ObtainSharedLock(&afs_xvcache, 5);
1669
1670     tvc = afs_FindVCache(afid, &retry, DO_STATS | DO_VLRU | IS_SLOCK);
1671     if (tvc && retry) {
1672 #if     defined(AFS_SGI_ENV) && !defined(AFS_SGI53_ENV)
1673         ReleaseSharedLock(&afs_xvcache);
1674         spunlock_psema(tvc->v.v_lock, retry, &tvc->v.v_sync, PINOD);
1675         goto loop;
1676 #endif
1677     }
1678     if (tvc) {
1679         osi_Assert((tvc->f.states & CVInit) == 0);
1680         /* If we are in readdir, return the vnode even if not statd */
1681         if ((tvc->f.states & CStatd) || afs_InReadDir(tvc)) {
1682             ReleaseSharedLock(&afs_xvcache);
1683             return tvc;
1684         }
1685     } else {
1686         UpgradeSToWLock(&afs_xvcache, 21);
1687
1688         /* no cache entry, better grab one */
1689         tvc = afs_NewVCache(afid, NULL);
1690         newvcache = 1;
1691
1692         ConvertWToSLock(&afs_xvcache);
1693         if (tvc == NULL)
1694         {
1695                 ReleaseSharedLock(&afs_xvcache);
1696                 return NULL;
1697         }
1698
1699         afs_stats_cmperf.vcacheMisses++;
1700     }
1701
1702     ReleaseSharedLock(&afs_xvcache);
1703
1704     ObtainWriteLock(&tvc->lock, 54);
1705
1706     if (tvc->f.states & CStatd) {
1707         ReleaseWriteLock(&tvc->lock);
1708         return tvc;
1709     }
1710 #ifdef AFS_DARWIN80_ENV
1711 /* Darwin 8.0 only has bufs in nfs, so we shouldn't have to worry about them.
1712    What about ubc? */
1713 #else
1714 #if defined(AFS_DARWIN_ENV) || defined(AFS_FBSD_ENV)
1715     /*
1716      * XXX - I really don't like this.  Should try to understand better.
1717      * It seems that sometimes, when we get called, we already hold the
1718      * lock on the vnode (e.g., from afs_getattr via afs_VerifyVCache).
1719      * We can't drop the vnode lock, because that could result in a race.
1720      * Sometimes, though, we get here and don't hold the vnode lock.
1721      * I hate code paths that sometimes hold locks and sometimes don't.
1722      * In any event, the dodge we use here is to check whether the vnode
1723      * is locked, and if it isn't, then we gain and drop it around the call
1724      * to vinvalbuf; otherwise, we leave it alone.
1725      */
1726     {
1727         struct vnode *vp = AFSTOV(tvc);
1728         int iheldthelock;
1729
1730 #if defined(AFS_DARWIN_ENV)
1731         iheldthelock = VOP_ISLOCKED(vp);
1732         if (!iheldthelock)
1733             vn_lock(vp, LK_EXCLUSIVE | LK_RETRY, current_proc());
1734         /* this is messy. we can call fsync which will try to reobtain this */
1735         if (VTOAFS(vp) == tvc)
1736           ReleaseWriteLock(&tvc->lock);
1737         if (UBCINFOEXISTS(vp)) {
1738           vinvalbuf(vp, V_SAVE, &afs_osi_cred, current_proc(), PINOD, 0);
1739         }
1740         if (VTOAFS(vp) == tvc)
1741           ObtainWriteLock(&tvc->lock, 954);
1742         if (!iheldthelock)
1743             VOP_UNLOCK(vp, LK_EXCLUSIVE, current_proc());
1744 #elif defined(AFS_FBSD_ENV)
1745         iheldthelock = VOP_ISLOCKED(vp);
1746         if (!iheldthelock) {
1747             /* nosleep/sleep lock order reversal */
1748             int glocked = ISAFS_GLOCK();
1749             if (glocked)
1750                 AFS_GUNLOCK();
1751             vn_lock(vp, LK_EXCLUSIVE | LK_RETRY);
1752             if (glocked)
1753                 AFS_GLOCK();
1754         }
1755         vinvalbuf(vp, V_SAVE, PINOD, 0); /* changed late in 8.0-CURRENT */
1756         if (!iheldthelock)
1757             VOP_UNLOCK(vp, 0);
1758 #elif defined(AFS_OBSD_ENV)
1759         iheldthelock = VOP_ISLOCKED(vp, curproc);
1760         if (!iheldthelock)
1761             VOP_LOCK(vp, LK_EXCLUSIVE | LK_RETRY, curproc);
1762         uvm_vnp_uncache(vp);
1763         if (!iheldthelock)
1764             VOP_UNLOCK(vp, 0, curproc);
1765 #elif defined(AFS_NBSD40_ENV)
1766         iheldthelock = VOP_ISLOCKED(vp);
1767         if (!iheldthelock) {
1768             VOP_LOCK(vp, LK_EXCLUSIVE | LK_RETRY);
1769         }
1770         uvm_vnp_uncache(vp);
1771         if (!iheldthelock)
1772             VOP_UNLOCK(vp, 0);
1773 #endif
1774     }
1775 #endif
1776 #endif
1777
1778     afs_StaleVCacheFlags(tvc, AFS_STALEVC_NODNLC | AFS_STALEVC_CLEARCB,
1779                          CUnique);
1780
1781     /* It is always appropriate to throw away all the access rights? */
1782     afs_FreeAllAxs(&(tvc->Access));
1783     tvp = afs_GetVolume(afid, areq, READ_LOCK); /* copy useful per-volume info */
1784     if (tvp) {
1785         if ((tvp->states & VForeign)) {
1786             if (newvcache)
1787                 tvc->f.states |= CForeign;
1788             if (newvcache && (tvp->rootVnode == afid->Fid.Vnode)
1789                 && (tvp->rootUnique == afid->Fid.Unique)) {
1790                 tvc->mvstat = AFS_MVSTAT_ROOT;
1791             }
1792         }
1793         if (tvp->states & VRO)
1794             tvc->f.states |= CRO;
1795         if (tvp->states & VBackup)
1796             tvc->f.states |= CBackup;
1797         /* now copy ".." entry back out of volume structure, if necessary */
1798         if (tvc->mvstat == AFS_MVSTAT_ROOT && tvp->dotdot.Fid.Volume != 0) {
1799             if (!tvc->mvid.parent)
1800                 tvc->mvid.parent = (struct VenusFid *)
1801                     osi_AllocSmallSpace(sizeof(struct VenusFid));
1802             *tvc->mvid.parent = tvp->dotdot;
1803         }
1804         afs_PutVolume(tvp, READ_LOCK);
1805     }
1806
1807     /* stat the file */
1808     afs_RemoveVCB(afid);
1809     {
1810         struct AFSFetchStatus OutStatus;
1811
1812         if (afs_DynrootNewVnode(tvc, &OutStatus)) {
1813             afs_ProcessFS(tvc, &OutStatus, areq);
1814             tvc->f.states |= CStatd | CUnique;
1815             tvc->f.parent.vnode  = OutStatus.ParentVnode;
1816             tvc->f.parent.unique = OutStatus.ParentUnique;
1817             code = 0;
1818         } else {
1819
1820             if (AFS_IS_DISCONNECTED) {
1821                 /* Nothing to do otherwise...*/
1822                 code = ENETDOWN;
1823                 /* printf("Network is down in afs_GetCache"); */
1824             } else
1825                 code = afs_FetchStatus(tvc, afid, areq, &OutStatus);
1826
1827             /* For the NFS translator's benefit, make sure
1828              * non-directory vnodes always have their parent FID set
1829              * correctly, even when created as a result of decoding an
1830              * NFS filehandle.  It would be nice to also do this for
1831              * directories, but we can't because the fileserver fills
1832              * in the FID of the directory itself instead of that of
1833              * its parent.
1834              */
1835             if (!code && OutStatus.FileType != Directory &&
1836                 !tvc->f.parent.vnode) {
1837                 tvc->f.parent.vnode  = OutStatus.ParentVnode;
1838                 tvc->f.parent.unique = OutStatus.ParentUnique;
1839                 /* XXX - SXW - It's conceivable we should mark ourselves
1840                  *             as dirty again here, incase we've been raced
1841                  *             out of the FetchStatus call.
1842                  */
1843             }
1844         }
1845     }
1846
1847     if (code) {
1848         ReleaseWriteLock(&tvc->lock);
1849
1850         afs_PutVCache(tvc);
1851         return NULL;
1852     }
1853
1854     ReleaseWriteLock(&tvc->lock);
1855     return tvc;
1856
1857 }                               /*afs_GetVCache */
1858
1859
1860
1861 /*!
1862  * Lookup a vcache by fid. Look inside the cache first, if not
1863  * there, lookup the file on the server, and then get it's fresh
1864  * cache entry.
1865  *
1866  * \param afid
1867  * \param areq
1868  * \param adp
1869  * \param aname
1870  *
1871  * \return The found element or NULL.
1872  */
1873 struct vcache *
1874 afs_LookupVCache(struct VenusFid *afid, struct vrequest *areq,
1875                  struct vcache *adp, char *aname)
1876 {
1877     afs_int32 code, now, newvcache = 0;
1878     struct VenusFid nfid;
1879     struct vcache *tvc;
1880     struct volume *tvp;
1881     struct AFSFetchStatus OutStatus;
1882     struct AFSCallBack CallBack;
1883     struct AFSVolSync tsync;
1884     struct server *serverp = 0;
1885     afs_int32 origCBs;
1886     afs_int32 retry;
1887
1888     AFS_STATCNT(afs_GetVCache);
1889
1890 #if     defined(AFS_SGI_ENV) && !defined(AFS_SGI53_ENV)
1891   loop1:
1892 #endif
1893
1894     ObtainReadLock(&afs_xvcache);
1895     tvc = afs_FindVCache(afid, &retry, DO_STATS /* no vlru */ );
1896
1897     if (tvc) {
1898         ReleaseReadLock(&afs_xvcache);
1899         if (retry) {
1900 #if     defined(AFS_SGI_ENV) && !defined(AFS_SGI53_ENV)
1901             spunlock_psema(tvc->v.v_lock, retry, &tvc->v.v_sync, PINOD);
1902             goto loop1;
1903 #endif
1904         }
1905         ObtainReadLock(&tvc->lock);
1906
1907         if (tvc->f.states & CStatd) {
1908             ReleaseReadLock(&tvc->lock);
1909             return tvc;
1910         }
1911         tvc->f.states &= ~CUnique;
1912
1913         ReleaseReadLock(&tvc->lock);
1914         afs_PutVCache(tvc);
1915         ObtainReadLock(&afs_xvcache);
1916     }
1917     /* if (tvc) */
1918     ReleaseReadLock(&afs_xvcache);
1919
1920     /* lookup the file */
1921     nfid = *afid;
1922     now = osi_Time();
1923     origCBs = afs_allCBs;       /* if anything changes, we don't have a cb */
1924
1925     if (AFS_IS_DISCONNECTED) {
1926         /* printf("Network is down in afs_LookupVcache\n"); */
1927         code = ENETDOWN;
1928     } else
1929         code =
1930             afs_RemoteLookup(&adp->f.fid, areq, aname, &nfid, &OutStatus,
1931                              &CallBack, &serverp, &tsync);
1932
1933 #if     defined(AFS_SGI_ENV) && !defined(AFS_SGI53_ENV)
1934   loop2:
1935 #endif
1936
1937     ObtainSharedLock(&afs_xvcache, 6);
1938     tvc = afs_FindVCache(&nfid, &retry, DO_VLRU | IS_SLOCK/* no xstats now */ );
1939     if (tvc && retry) {
1940 #if     defined(AFS_SGI_ENV) && !defined(AFS_SGI53_ENV)
1941         ReleaseSharedLock(&afs_xvcache);
1942         spunlock_psema(tvc->v.v_lock, retry, &tvc->v.v_sync, PINOD);
1943         goto loop2;
1944 #endif
1945     }
1946
1947     if (!tvc) {
1948         /* no cache entry, better grab one */
1949         UpgradeSToWLock(&afs_xvcache, 22);
1950         tvc = afs_NewVCache(&nfid, serverp);
1951         newvcache = 1;
1952         ConvertWToSLock(&afs_xvcache);
1953         if (!tvc)
1954         {
1955                 ReleaseSharedLock(&afs_xvcache);
1956                 return NULL;
1957         }
1958     }
1959
1960     ReleaseSharedLock(&afs_xvcache);
1961     ObtainWriteLock(&tvc->lock, 55);
1962
1963     /* It is always appropriate to throw away all the access rights? */
1964     afs_FreeAllAxs(&(tvc->Access));
1965     tvp = afs_GetVolume(afid, areq, READ_LOCK); /* copy useful per-vol info */
1966     if (tvp) {
1967         if ((tvp->states & VForeign)) {
1968             if (newvcache)
1969                 tvc->f.states |= CForeign;
1970             if (newvcache && (tvp->rootVnode == afid->Fid.Vnode)
1971                 && (tvp->rootUnique == afid->Fid.Unique))
1972                 tvc->mvstat = AFS_MVSTAT_ROOT;
1973         }
1974         if (tvp->states & VRO)
1975             tvc->f.states |= CRO;
1976         if (tvp->states & VBackup)
1977             tvc->f.states |= CBackup;
1978         /* now copy ".." entry back out of volume structure, if necessary */
1979         if (tvc->mvstat == AFS_MVSTAT_ROOT && tvp->dotdot.Fid.Volume != 0) {
1980             if (!tvc->mvid.parent)
1981                 tvc->mvid.parent = (struct VenusFid *)
1982                     osi_AllocSmallSpace(sizeof(struct VenusFid));
1983             *tvc->mvid.parent = tvp->dotdot;
1984         }
1985     }
1986
1987     if (code) {
1988         afs_StaleVCacheFlags(tvc, 0, CUnique);
1989         if (tvp)
1990             afs_PutVolume(tvp, READ_LOCK);
1991         ReleaseWriteLock(&tvc->lock);
1992         afs_PutVCache(tvc);
1993         return NULL;
1994     }
1995
1996     ObtainWriteLock(&afs_xcbhash, 466);
1997     if (origCBs == afs_allCBs) {
1998         if (CallBack.ExpirationTime) {
1999             tvc->callback = serverp;
2000             tvc->cbExpires = CallBack.ExpirationTime + now;
2001             tvc->f.states |= CStatd | CUnique;
2002             tvc->f.states &= ~CBulkFetching;
2003             afs_QueueCallback(tvc, CBHash(CallBack.ExpirationTime), tvp);
2004         } else if (tvc->f.states & CRO) {
2005             /* adapt gives us an hour. */
2006             tvc->cbExpires = 3600 + osi_Time();
2007              /*XXX*/ tvc->f.states |= CStatd | CUnique;
2008             tvc->f.states &= ~CBulkFetching;
2009             afs_QueueCallback(tvc, CBHash(3600), tvp);
2010         } else {
2011             afs_StaleVCacheFlags(tvc,
2012                                  AFS_STALEVC_CBLOCKED | AFS_STALEVC_CLEARCB,
2013                                  CUnique);
2014         }
2015     } else {
2016         afs_StaleVCacheFlags(tvc,
2017                              AFS_STALEVC_CBLOCKED | AFS_STALEVC_CLEARCB,
2018                              CUnique);
2019     }
2020     ReleaseWriteLock(&afs_xcbhash);
2021     if (tvp)
2022         afs_PutVolume(tvp, READ_LOCK);
2023     afs_ProcessFS(tvc, &OutStatus, areq);
2024
2025     ReleaseWriteLock(&tvc->lock);
2026     return tvc;
2027
2028 }
2029
2030 struct vcache *
2031 afs_GetRootVCache(struct VenusFid *afid, struct vrequest *areq,
2032                   struct volume *tvolp)
2033 {
2034     afs_int32 code = 0, i, newvcache = 0, haveStatus = 0;
2035     afs_int32 getNewFid = 0;
2036     afs_uint32 start;
2037     struct VenusFid nfid;
2038     struct vcache *tvc;
2039     struct server *serverp = 0;
2040     struct AFSFetchStatus OutStatus;
2041     struct AFSCallBack CallBack;
2042     struct AFSVolSync tsync;
2043     int origCBs = 0;
2044 #ifdef AFS_DARWIN80_ENV
2045     vnode_t tvp;
2046 #endif
2047
2048     start = osi_Time();
2049
2050   newmtpt:
2051     if (!tvolp->rootVnode || getNewFid) {
2052         struct VenusFid tfid;
2053
2054         tfid = *afid;
2055         tfid.Fid.Vnode = 0;     /* Means get rootfid of volume */
2056         origCBs = afs_allCBs;   /* ignore InitCallBackState */
2057         code =
2058             afs_RemoteLookup(&tfid, areq, NULL, &nfid, &OutStatus, &CallBack,
2059                              &serverp, &tsync);
2060         if (code) {
2061             return NULL;
2062         }
2063 /*      ReleaseReadLock(&tvolp->lock);           */
2064         ObtainWriteLock(&tvolp->lock, 56);
2065         tvolp->rootVnode = afid->Fid.Vnode = nfid.Fid.Vnode;
2066         tvolp->rootUnique = afid->Fid.Unique = nfid.Fid.Unique;
2067         ReleaseWriteLock(&tvolp->lock);
2068 /*      ObtainReadLock(&tvolp->lock);*/
2069         haveStatus = 1;
2070     } else {
2071         afid->Fid.Vnode = tvolp->rootVnode;
2072         afid->Fid.Unique = tvolp->rootUnique;
2073     }
2074
2075  rootvc_loop:
2076     ObtainSharedLock(&afs_xvcache, 7);
2077     i = VCHash(afid);
2078     for (tvc = afs_vhashT[i]; tvc; tvc = tvc->hnext) {
2079         if (!FidCmp(&(tvc->f.fid), afid)) {
2080             if (tvc->f.states & CVInit) {
2081                 ReleaseSharedLock(&afs_xvcache);
2082                 afs_osi_Sleep(&tvc->f.states);
2083                 goto rootvc_loop;
2084             }
2085 #ifdef AFS_DARWIN80_ENV
2086             if (tvc->f.states & CDeadVnode) {
2087                 ReleaseSharedLock(&afs_xvcache);
2088                 afs_osi_Sleep(&tvc->f.states);
2089                 goto rootvc_loop;
2090             }
2091             tvp = AFSTOV(tvc);
2092             if (vnode_get(tvp))       /* this bumps ref count */
2093                 continue;
2094             if (vnode_ref(tvp)) {
2095                 AFS_GUNLOCK();
2096                 /* AFSTOV(tvc) may be NULL */
2097                 vnode_put(tvp);
2098                 AFS_GLOCK();
2099                 continue;
2100             }
2101 #endif
2102             break;
2103         }
2104     }
2105
2106     if (!haveStatus && (!tvc || !(tvc->f.states & CStatd))) {
2107         /* Mount point no longer stat'd or unknown. FID may have changed. */
2108         getNewFid = 1;
2109         ReleaseSharedLock(&afs_xvcache);
2110 #ifdef AFS_DARWIN80_ENV
2111         if (tvc) {
2112             AFS_GUNLOCK();
2113             vnode_put(AFSTOV(tvc));
2114             vnode_rele(AFSTOV(tvc));
2115             AFS_GLOCK();
2116         }
2117 #endif
2118         tvc = NULL;
2119         goto newmtpt;
2120     }
2121
2122     if (!tvc) {
2123         UpgradeSToWLock(&afs_xvcache, 23);
2124         /* no cache entry, better grab one */
2125         tvc = afs_NewVCache(afid, NULL);
2126         if (!tvc)
2127         {
2128                 ReleaseWriteLock(&afs_xvcache);
2129                 return NULL;
2130         }
2131         newvcache = 1;
2132         afs_stats_cmperf.vcacheMisses++;
2133     } else {
2134         afs_stats_cmperf.vcacheHits++;
2135 #if     defined(AFS_DARWIN80_ENV)
2136         /* we already bumped the ref count in the for loop above */
2137 #else /* AFS_DARWIN80_ENV */
2138         osi_vnhold(tvc, 0);
2139 #endif
2140         UpgradeSToWLock(&afs_xvcache, 24);
2141         if ((VLRU.next->prev != &VLRU) || (VLRU.prev->next != &VLRU)) {
2142             refpanic("GRVC VLRU inconsistent0");
2143         }
2144         if (tvc->vlruq.next->prev != &(tvc->vlruq)) {
2145             refpanic("GRVC VLRU inconsistent1");
2146         }
2147         if (tvc->vlruq.prev->next != &(tvc->vlruq)) {
2148             refpanic("GRVC VLRU inconsistent2");
2149         }
2150         QRemove(&tvc->vlruq);   /* move to lruq head */
2151         QAdd(&VLRU, &tvc->vlruq);
2152         if ((VLRU.next->prev != &VLRU) || (VLRU.prev->next != &VLRU)) {
2153             refpanic("GRVC VLRU inconsistent3");
2154         }
2155         if (tvc->vlruq.next->prev != &(tvc->vlruq)) {
2156             refpanic("GRVC VLRU inconsistent4");
2157         }
2158         if (tvc->vlruq.prev->next != &(tvc->vlruq)) {
2159             refpanic("GRVC VLRU inconsistent5");
2160         }
2161         vcachegen++;
2162     }
2163
2164     ReleaseWriteLock(&afs_xvcache);
2165
2166     if (tvc->f.states & CStatd) {
2167         return tvc;
2168     } else {
2169
2170         ObtainReadLock(&tvc->lock);
2171         tvc->f.states &= ~CUnique;
2172         tvc->callback = NULL;   /* redundant, perhaps */
2173         ReleaseReadLock(&tvc->lock);
2174     }
2175
2176     ObtainWriteLock(&tvc->lock, 57);
2177
2178     /* It is always appropriate to throw away all the access rights? */
2179     afs_FreeAllAxs(&(tvc->Access));
2180
2181     if (newvcache)
2182         tvc->f.states |= CForeign;
2183     if (tvolp->states & VRO)
2184         tvc->f.states |= CRO;
2185     if (tvolp->states & VBackup)
2186         tvc->f.states |= CBackup;
2187     /* now copy ".." entry back out of volume structure, if necessary */
2188     if (newvcache && (tvolp->rootVnode == afid->Fid.Vnode)
2189         && (tvolp->rootUnique == afid->Fid.Unique)) {
2190         tvc->mvstat = AFS_MVSTAT_ROOT;
2191     }
2192     if (tvc->mvstat == AFS_MVSTAT_ROOT && tvolp->dotdot.Fid.Volume != 0) {
2193         if (!tvc->mvid.parent)
2194             tvc->mvid.parent = (struct VenusFid *)
2195                 osi_AllocSmallSpace(sizeof(struct VenusFid));
2196         *tvc->mvid.parent = tvolp->dotdot;
2197     }
2198
2199     /* stat the file */
2200     afs_RemoveVCB(afid);
2201
2202     if (!haveStatus) {
2203         struct VenusFid tfid;
2204
2205         tfid = *afid;
2206         tfid.Fid.Vnode = 0;     /* Means get rootfid of volume */
2207         origCBs = afs_allCBs;   /* ignore InitCallBackState */
2208         code =
2209             afs_RemoteLookup(&tfid, areq, NULL, &nfid, &OutStatus, &CallBack,
2210                              &serverp, &tsync);
2211     }
2212
2213     if (code) {
2214         afs_StaleVCacheFlags(tvc, AFS_STALEVC_CLEARCB, CUnique);
2215         ReleaseWriteLock(&tvc->lock);
2216         afs_PutVCache(tvc);
2217         return NULL;
2218     }
2219
2220     ObtainWriteLock(&afs_xcbhash, 468);
2221     if (origCBs == afs_allCBs) {
2222         tvc->f.states |= CTruth;
2223         tvc->callback = serverp;
2224         if (CallBack.ExpirationTime != 0) {
2225             tvc->cbExpires = CallBack.ExpirationTime + start;
2226             tvc->f.states |= CStatd;
2227             tvc->f.states &= ~CBulkFetching;
2228             afs_QueueCallback(tvc, CBHash(CallBack.ExpirationTime), tvolp);
2229         } else if (tvc->f.states & CRO) {
2230             /* adapt gives us an hour. */
2231             tvc->cbExpires = 3600 + osi_Time();
2232              /*XXX*/ tvc->f.states |= CStatd;
2233             tvc->f.states &= ~CBulkFetching;
2234             afs_QueueCallback(tvc, CBHash(3600), tvolp);
2235         }
2236     } else {
2237         afs_StaleVCacheFlags(tvc, AFS_STALEVC_CBLOCKED | AFS_STALEVC_CLEARCB,
2238                              CUnique);
2239     }
2240     ReleaseWriteLock(&afs_xcbhash);
2241     afs_ProcessFS(tvc, &OutStatus, areq);
2242
2243     ReleaseWriteLock(&tvc->lock);
2244     return tvc;
2245 }
2246
2247
2248 /*!
2249  * Update callback status and (sometimes) attributes of a vnode.
2250  * Called after doing a fetch status RPC. Whilst disconnected, attributes
2251  * shouldn't be written to the vcache here.
2252  *
2253  * \param avc
2254  * \param afid
2255  * \param areq
2256  * \param Outsp Server status after rpc call.
2257  * \param acb Callback for this vnode.
2258  *
2259  * \note The vcache must be write locked.
2260  */
2261 void
2262 afs_UpdateStatus(struct vcache *avc, struct VenusFid *afid,
2263                  struct vrequest *areq, struct AFSFetchStatus *Outsp,
2264                  struct AFSCallBack *acb, afs_uint32 start)
2265 {
2266     struct volume *volp;
2267
2268     if (!AFS_IN_SYNC)
2269         /* Dont write status in vcache if resyncing after a disconnection. */
2270         afs_ProcessFS(avc, Outsp, areq);
2271
2272     volp = afs_GetVolume(afid, areq, READ_LOCK);
2273     ObtainWriteLock(&afs_xcbhash, 469);
2274     avc->f.states |= CTruth;
2275     if (avc->callback /* check for race */ ) {
2276         if (acb->ExpirationTime != 0) {
2277             avc->cbExpires = acb->ExpirationTime + start;
2278             avc->f.states |= CStatd;
2279             avc->f.states &= ~CBulkFetching;
2280             afs_QueueCallback(avc, CBHash(acb->ExpirationTime), volp);
2281         } else if (avc->f.states & CRO) {
2282             /* ordinary callback on a read-only volume -- AFS 3.2 style */
2283             avc->cbExpires = 3600 + start;
2284             avc->f.states |= CStatd;
2285             avc->f.states &= ~CBulkFetching;
2286             afs_QueueCallback(avc, CBHash(3600), volp);
2287         } else {
2288             afs_StaleVCacheFlags(avc,
2289                                  AFS_STALEVC_CBLOCKED | AFS_STALEVC_CLEARCB,
2290                                  CUnique);
2291         }
2292     } else {
2293         afs_StaleVCacheFlags(avc, AFS_STALEVC_CBLOCKED | AFS_STALEVC_CLEARCB,
2294                              CUnique);
2295     }
2296     ReleaseWriteLock(&afs_xcbhash);
2297     if (volp)
2298         afs_PutVolume(volp, READ_LOCK);
2299 }
2300
2301 void
2302 afs_BadFetchStatus(struct afs_conn *tc)
2303 {
2304     int addr = ntohl(tc->parent->srvr->sa_ip);
2305     afs_warn("afs: Invalid AFSFetchStatus from server %u.%u.%u.%u\n",
2306              (addr >> 24) & 0xff, (addr >> 16) & 0xff, (addr >> 8) & 0xff,
2307              (addr) & 0xff);
2308     afs_warn("afs: This suggests the server may be sending bad data that "
2309              "can lead to availability issues or data corruption. The "
2310              "issue has been avoided for now, but it may not always be "
2311              "detectable. Please upgrade the server if possible.\n");
2312 }
2313
2314 /**
2315  * Check if a given AFSFetchStatus structure is sane.
2316  *
2317  * @param[in] tc The server from which we received the status
2318  * @param[in] status The status we received
2319  *
2320  * @return whether the given structure is valid or not
2321  *  @retval 0 the structure is fine
2322  *  @retval nonzero the structure looks like garbage; act as if we received
2323  *                  the returned error code from the server
2324  */
2325 int
2326 afs_CheckFetchStatus(struct afs_conn *tc, struct AFSFetchStatus *status)
2327 {
2328     if (status->errorCode ||
2329         status->InterfaceVersion != 1 ||
2330         !(status->FileType > Invalid && status->FileType <= SymbolicLink) ||
2331         status->ParentVnode == 0 || status->ParentUnique == 0) {
2332
2333         afs_warn("afs: FetchStatus ec %u iv %u ft %u pv %u pu %u\n",
2334                  (unsigned)status->errorCode, (unsigned)status->InterfaceVersion,
2335                  (unsigned)status->FileType, (unsigned)status->ParentVnode,
2336                  (unsigned)status->ParentUnique);
2337         afs_BadFetchStatus(tc);
2338
2339         return VBUSY;
2340     }
2341     return 0;
2342 }
2343
2344 /*!
2345  * Must be called with avc write-locked
2346  * don't absolutely have to invalidate the hint unless the dv has
2347  * changed, but be sure to get it right else there will be consistency bugs.
2348  */
2349 afs_int32
2350 afs_FetchStatus(struct vcache * avc, struct VenusFid * afid,
2351                 struct vrequest * areq, struct AFSFetchStatus * Outsp)
2352 {
2353     int code;
2354     afs_uint32 start = 0;
2355     struct afs_conn *tc;
2356     struct AFSCallBack CallBack;
2357     struct AFSVolSync tsync;
2358     struct rx_connection *rxconn;
2359     XSTATS_DECLS;
2360     do {
2361         tc = afs_Conn(afid, areq, SHARED_LOCK, &rxconn);
2362         avc->dchint = NULL;     /* invalidate hints */
2363         if (tc) {
2364             avc->callback = tc->parent->srvr->server;
2365             start = osi_Time();
2366             XSTATS_START_TIME(AFS_STATS_FS_RPCIDX_FETCHSTATUS);
2367             RX_AFS_GUNLOCK();
2368             code =
2369                 RXAFS_FetchStatus(rxconn, (struct AFSFid *)&afid->Fid, Outsp,
2370                                   &CallBack, &tsync);
2371             RX_AFS_GLOCK();
2372
2373             XSTATS_END_TIME;
2374
2375             if (code == 0) {
2376                 code = afs_CheckFetchStatus(tc, Outsp);
2377             }
2378
2379         } else
2380             code = -1;
2381     } while (afs_Analyze
2382              (tc, rxconn, code, afid, areq, AFS_STATS_FS_RPCIDX_FETCHSTATUS,
2383               SHARED_LOCK, NULL));
2384
2385     if (!code) {
2386         afs_UpdateStatus(avc, afid, areq, Outsp, &CallBack, start);
2387     } else {
2388         /* used to undo the local callback, but that's too extreme.
2389          * There are plenty of good reasons that fetchstatus might return
2390          * an error, such as EPERM.  If we have the vnode cached, statd,
2391          * with callback, might as well keep track of the fact that we
2392          * don't have access...
2393          */
2394         if (code == EPERM || code == EACCES) {
2395             struct axscache *ac;
2396             if (avc->Access && (ac = afs_FindAxs(avc->Access, areq->uid)))
2397                 ac->axess = 0;
2398             else                /* not found, add a new one if possible */
2399                 afs_AddAxs(avc->Access, areq->uid, 0);
2400         }
2401     }
2402     return code;
2403 }
2404
2405 /*!
2406  * Decrements the reference count on a cache entry.
2407  *
2408  * \param avc Pointer to the cache entry to decrement.
2409  *
2410  * \note Environment: Nothing interesting.
2411  */
2412 void
2413 afs_PutVCache(struct vcache *avc)
2414 {
2415     AFS_STATCNT(afs_PutVCache);
2416 #ifdef AFS_DARWIN80_ENV
2417     vnode_put(AFSTOV(avc));
2418     AFS_FAST_RELE(avc);
2419 #else
2420     /*
2421      * Can we use a read lock here?
2422      */
2423     ObtainReadLock(&afs_xvcache);
2424     AFS_FAST_RELE(avc);
2425     ReleaseReadLock(&afs_xvcache);
2426 #endif
2427 }                               /*afs_PutVCache */
2428
2429
2430 /*!
2431  * Reset a vcache entry, so local contents are ignored, and the
2432  * server will be reconsulted next time the vcache is used
2433  *
2434  * \param avc Pointer to the cache entry to reset
2435  * \param acred
2436  * \param skipdnlc  skip the dnlc purge for this vnode
2437  *
2438  * \note avc must be write locked on entry
2439  *
2440  * \note The caller should purge the dnlc when skipdnlc is set.
2441  */
2442 void
2443 afs_ResetVCache(struct vcache *avc, afs_ucred_t *acred, afs_int32 skipdnlc)
2444 {
2445     afs_stalevc_flags_t flags = 0;
2446     if (skipdnlc) {
2447         flags |= AFS_STALEVC_NODNLC;
2448     }
2449
2450     afs_StaleVCacheFlags(avc, flags, CDirty); /* next reference will re-stat */
2451     /* now find the disk cache entries */
2452     afs_TryToSmush(avc, acred, 1);
2453     if (avc->linkData && !(avc->f.states & CCore)) {
2454         afs_osi_Free(avc->linkData, strlen(avc->linkData) + 1);
2455         avc->linkData = NULL;
2456     }
2457 }
2458
2459 /*!
2460  * Sleepa when searching for a vcache. Releases all the pending locks,
2461  * sleeps then obtains the previously released locks.
2462  *
2463  * \param vcache Enter sleep state.
2464  * \param flag Determines what locks to use.
2465  *
2466  * \return
2467  */
2468 static void
2469 findvc_sleep(struct vcache *avc, int flag)
2470 {
2471     if (flag & IS_SLOCK) {
2472             ReleaseSharedLock(&afs_xvcache);
2473     } else {
2474         if (flag & IS_WLOCK) {
2475             ReleaseWriteLock(&afs_xvcache);
2476         } else {
2477             ReleaseReadLock(&afs_xvcache);
2478         }
2479     }
2480     afs_osi_Sleep(&avc->f.states);
2481     if (flag & IS_SLOCK) {
2482             ObtainSharedLock(&afs_xvcache, 341);
2483     } else {
2484         if (flag & IS_WLOCK) {
2485             ObtainWriteLock(&afs_xvcache, 343);
2486         } else {
2487             ObtainReadLock(&afs_xvcache);
2488         }
2489     }
2490 }
2491
2492 /*!
2493  * Add a reference on an existing vcache entry.
2494  *
2495  * \param tvc Pointer to the vcache.
2496  *
2497  * \note Environment: Must be called with at least one reference from
2498  * elsewhere on the vcache, even if that reference will be dropped.
2499  * The global lock is required.
2500  *
2501  * \return 0 on success, -1 on failure.
2502  */
2503
2504 int
2505 afs_RefVCache(struct vcache *tvc)
2506 {
2507 #ifdef AFS_DARWIN80_ENV
2508     vnode_t tvp;
2509 #endif
2510
2511     /* AFS_STATCNT(afs_RefVCache); */
2512
2513 #ifdef  AFS_DARWIN80_ENV
2514     tvp = AFSTOV(tvc);
2515     if (vnode_get(tvp))
2516         return -1;
2517     if (vnode_ref(tvp)) {
2518         AFS_GUNLOCK();
2519         /* AFSTOV(tvc) may be NULL */
2520         vnode_put(tvp);
2521         AFS_GLOCK();
2522         return -1;
2523     }
2524 #else
2525         osi_vnhold(tvc, 0);
2526 #endif
2527     return 0;
2528 }                               /*afs_RefVCache */
2529
2530 /*!
2531  * Find a vcache entry given a fid.
2532  *
2533  * \param afid Pointer to the fid whose cache entry we desire.
2534  * \param retry (SGI-specific) tell the caller to drop the lock on xvcache,
2535  *  unlock the vnode, and try again.
2536  * \param flag Bit 1 to specify whether to compute hit statistics.  Not
2537  *  set if FindVCache is called as part of internal bookkeeping.
2538  *
2539  * \note Environment: Must be called with the afs_xvcache lock at least held at
2540  * the read level.  In order to do the VLRU adjustment, the xvcache lock
2541  * must be shared-- we upgrade it here.
2542  */
2543
2544 struct vcache *
2545 afs_FindVCache(struct VenusFid *afid, afs_int32 * retry, afs_int32 flag)
2546 {
2547
2548     struct vcache *tvc;
2549     afs_int32 i;
2550 #ifdef AFS_DARWIN80_ENV
2551     struct vcache *deadvc = NULL, *livevc = NULL;
2552     vnode_t tvp;
2553 #endif
2554
2555     AFS_STATCNT(afs_FindVCache);
2556
2557  findloop:
2558     i = VCHash(afid);
2559     for (tvc = afs_vhashT[i]; tvc; tvc = tvc->hnext) {
2560         if (FidMatches(afid, tvc)) {
2561             if (tvc->f.states & CVInit) {
2562                 findvc_sleep(tvc, flag);
2563                 goto findloop;
2564             }
2565 #ifdef  AFS_DARWIN80_ENV
2566             if (tvc->f.states & CDeadVnode) {
2567                 findvc_sleep(tvc, flag);
2568                 goto findloop;
2569             }
2570 #endif
2571             break;
2572         }
2573     }
2574
2575     /* should I have a read lock on the vnode here? */
2576     if (tvc) {
2577         if (retry)
2578             *retry = 0;
2579 #if defined(AFS_DARWIN80_ENV)
2580         tvp = AFSTOV(tvc);
2581         if (vnode_get(tvp))
2582             tvp = NULL;
2583         if (tvp && vnode_ref(tvp)) {
2584             AFS_GUNLOCK();
2585             /* AFSTOV(tvc) may be NULL */
2586             vnode_put(tvp);
2587             AFS_GLOCK();
2588             tvp = NULL;
2589         }
2590         if (!tvp) {
2591             tvc = NULL;
2592             return tvc;
2593         }
2594 #elif defined(AFS_DARWIN_ENV)
2595         tvc->f.states |= CUBCinit;
2596         AFS_GUNLOCK();
2597         if (UBCINFOMISSING(AFSTOV(tvc)) ||
2598             UBCINFORECLAIMED(AFSTOV(tvc))) {
2599           ubc_info_init(AFSTOV(tvc));
2600         }
2601         AFS_GLOCK();
2602         tvc->f.states &= ~CUBCinit;
2603 #else
2604         osi_vnhold(tvc, retry); /* already held, above */
2605         if (retry && *retry)
2606             return 0;
2607 #endif
2608         /*
2609          * only move to front of vlru if we have proper vcache locking)
2610          */
2611         if (flag & DO_VLRU) {
2612             if ((VLRU.next->prev != &VLRU) || (VLRU.prev->next != &VLRU)) {
2613                 refpanic("FindVC VLRU inconsistent1");
2614             }
2615             if (tvc->vlruq.next->prev != &(tvc->vlruq)) {
2616                 refpanic("FindVC VLRU inconsistent1");
2617             }
2618             if (tvc->vlruq.prev->next != &(tvc->vlruq)) {
2619                 refpanic("FindVC VLRU inconsistent2");
2620             }
2621             UpgradeSToWLock(&afs_xvcache, 26);
2622             QRemove(&tvc->vlruq);
2623             QAdd(&VLRU, &tvc->vlruq);
2624             ConvertWToSLock(&afs_xvcache);
2625             if ((VLRU.next->prev != &VLRU) || (VLRU.prev->next != &VLRU)) {
2626                 refpanic("FindVC VLRU inconsistent1");
2627             }
2628             if (tvc->vlruq.next->prev != &(tvc->vlruq)) {
2629                 refpanic("FindVC VLRU inconsistent2");
2630             }
2631             if (tvc->vlruq.prev->next != &(tvc->vlruq)) {
2632                 refpanic("FindVC VLRU inconsistent3");
2633             }
2634         }
2635         vcachegen++;
2636     }
2637
2638     if (flag & DO_STATS) {
2639         if (tvc)
2640             afs_stats_cmperf.vcacheHits++;
2641         else
2642             afs_stats_cmperf.vcacheMisses++;
2643         if (afs_IsPrimaryCellNum(afid->Cell))
2644             afs_stats_cmperf.vlocalAccesses++;
2645         else
2646             afs_stats_cmperf.vremoteAccesses++;
2647     }
2648     return tvc;
2649 }                               /*afs_FindVCache */
2650
2651 /*!
2652  * Find a vcache entry given a fid. Does a wildcard match on what we
2653  * have for the fid. If more than one entry, don't return anything.
2654  *
2655  * \param avcp Fill in pointer if we found one and only one.
2656  * \param afid Pointer to the fid whose cache entry we desire.
2657  * \param retry (SGI-specific) tell the caller to drop the lock on xvcache,
2658  *             unlock the vnode, and try again.
2659  * \param flags bit 1 to specify whether to compute hit statistics.  Not
2660  *             set if FindVCache is called as part of internal bookkeeping.
2661  *
2662  * \note Environment: Must be called with the afs_xvcache lock at least held at
2663  *  the read level.  In order to do the VLRU adjustment, the xvcache lock
2664  *  must be shared-- we upgrade it here.
2665  *
2666  * \return Number of matches found.
2667  */
2668
2669 int afs_duplicate_nfs_fids = 0;
2670
2671 afs_int32
2672 afs_NFSFindVCache(struct vcache **avcp, struct VenusFid *afid)
2673 {
2674     struct vcache *tvc;
2675     afs_int32 i;
2676     afs_int32 count = 0;
2677     struct vcache *found_tvc = NULL;
2678 #ifdef AFS_DARWIN80_ENV
2679     vnode_t tvp;
2680 #endif
2681
2682     AFS_STATCNT(afs_FindVCache);
2683
2684   loop:
2685
2686     ObtainSharedLock(&afs_xvcache, 331);
2687
2688     i = VCHash(afid);
2689     for (tvc = afs_vhashT[i]; tvc; tvc = tvc->hnext) {
2690         /* Match only on what we have.... */
2691         if (((tvc->f.fid.Fid.Vnode & 0xffff) == afid->Fid.Vnode)
2692             && (tvc->f.fid.Fid.Volume == afid->Fid.Volume)
2693             && ((tvc->f.fid.Fid.Unique & 0xffffff) == afid->Fid.Unique)
2694             && (tvc->f.fid.Cell == afid->Cell)) {
2695             if (tvc->f.states & CVInit) {
2696                 ReleaseSharedLock(&afs_xvcache);
2697                 afs_osi_Sleep(&tvc->f.states);
2698                 goto loop;
2699             }
2700 #ifdef  AFS_DARWIN80_ENV
2701             if (tvc->f.states & CDeadVnode) {
2702                 ReleaseSharedLock(&afs_xvcache);
2703                 afs_osi_Sleep(&tvc->f.states);
2704                 goto loop;
2705             }
2706             tvp = AFSTOV(tvc);
2707             if (vnode_get(tvp)) {
2708                 /* This vnode no longer exists. */
2709                 continue;
2710             }
2711             if (vnode_ref(tvp)) {
2712                 /* This vnode no longer exists. */
2713                 AFS_GUNLOCK();
2714                 /* AFSTOV(tvc) may be NULL */
2715                 vnode_put(tvp);
2716                 AFS_GLOCK();
2717                 continue;
2718             }
2719 #endif /* AFS_DARWIN80_ENV */
2720             count++;
2721             if (found_tvc) {
2722                 /* Duplicates */
2723                 afs_duplicate_nfs_fids++;
2724                 ReleaseSharedLock(&afs_xvcache);
2725 #ifdef AFS_DARWIN80_ENV
2726                 /* Drop our reference counts. */
2727                 vnode_put(AFSTOV(tvc));
2728                 vnode_put(AFSTOV(found_tvc));
2729 #endif
2730                 return count;
2731             }
2732             found_tvc = tvc;
2733         }
2734     }
2735
2736     tvc = found_tvc;
2737     /* should I have a read lock on the vnode here? */
2738     if (tvc) {
2739 #ifndef AFS_DARWIN80_ENV
2740 #if defined(AFS_SGI_ENV) && !defined(AFS_SGI53_ENV)
2741         afs_int32 retry = 0;
2742         osi_vnhold(tvc, &retry);
2743         if (retry) {
2744             count = 0;
2745             found_tvc = (struct vcache *)0;
2746             ReleaseSharedLock(&afs_xvcache);
2747             spunlock_psema(tvc->v.v_lock, retry, &tvc->v.v_sync, PINOD);
2748             goto loop;
2749         }
2750 #else
2751         osi_vnhold(tvc, (int *)0);      /* already held, above */
2752 #endif
2753 #endif
2754         /*
2755          * We obtained the xvcache lock above.
2756          */
2757         if ((VLRU.next->prev != &VLRU) || (VLRU.prev->next != &VLRU)) {
2758             refpanic("FindVC VLRU inconsistent1");
2759         }
2760         if (tvc->vlruq.next->prev != &(tvc->vlruq)) {
2761             refpanic("FindVC VLRU inconsistent1");
2762         }
2763         if (tvc->vlruq.prev->next != &(tvc->vlruq)) {
2764             refpanic("FindVC VLRU inconsistent2");
2765         }
2766         UpgradeSToWLock(&afs_xvcache, 568);
2767         QRemove(&tvc->vlruq);
2768         QAdd(&VLRU, &tvc->vlruq);
2769         ConvertWToSLock(&afs_xvcache);
2770         if ((VLRU.next->prev != &VLRU) || (VLRU.prev->next != &VLRU)) {
2771             refpanic("FindVC VLRU inconsistent1");
2772         }
2773         if (tvc->vlruq.next->prev != &(tvc->vlruq)) {
2774             refpanic("FindVC VLRU inconsistent2");
2775         }
2776         if (tvc->vlruq.prev->next != &(tvc->vlruq)) {
2777             refpanic("FindVC VLRU inconsistent3");
2778         }
2779     }
2780     vcachegen++;
2781
2782     if (tvc)
2783         afs_stats_cmperf.vcacheHits++;
2784     else
2785         afs_stats_cmperf.vcacheMisses++;
2786     if (afs_IsPrimaryCellNum(afid->Cell))
2787         afs_stats_cmperf.vlocalAccesses++;
2788     else
2789         afs_stats_cmperf.vremoteAccesses++;
2790
2791     *avcp = tvc;                /* May be null */
2792
2793     ReleaseSharedLock(&afs_xvcache);
2794     return (tvc ? 1 : 0);
2795
2796 }                               /*afs_NFSFindVCache */
2797
2798
2799
2800
2801 /*!
2802  * Initialize vcache related variables
2803  *
2804  * \param astatSize
2805  */
2806 void
2807 afs_vcacheInit(int astatSize)
2808 {
2809 #if !defined(AFS_LINUX22_ENV)
2810     struct vcache *tvp;
2811 #endif
2812     int i;
2813     if (!afs_maxvcount) {
2814         afs_maxvcount = astatSize;      /* no particular limit on linux? */
2815     }
2816 #if !defined(AFS_LINUX22_ENV)
2817     freeVCList = NULL;
2818 #endif
2819
2820     AFS_RWLOCK_INIT(&afs_xvcache, "afs_xvcache");
2821     LOCK_INIT(&afs_xvcb, "afs_xvcb");
2822
2823 #if !defined(AFS_LINUX22_ENV)
2824     /* Allocate and thread the struct vcache entries */
2825     tvp = afs_osi_Alloc(astatSize * sizeof(struct vcache));
2826     osi_Assert(tvp != NULL);
2827     memset(tvp, 0, sizeof(struct vcache) * astatSize);
2828
2829     Initial_freeVCList = tvp;
2830     freeVCList = &(tvp[0]);
2831     for (i = 0; i < astatSize - 1; i++) {
2832         tvp[i].nextfree = &(tvp[i + 1]);
2833     }
2834     tvp[astatSize - 1].nextfree = NULL;
2835 # ifdef  KERNEL_HAVE_PIN
2836     pin((char *)tvp, astatSize * sizeof(struct vcache));        /* XXX */
2837 # endif
2838 #endif
2839
2840 #if defined(AFS_SGI_ENV)
2841     for (i = 0; i < astatSize; i++) {
2842         char name[METER_NAMSZ];
2843         struct vcache *tvc = &tvp[i];
2844
2845         tvc->v.v_number = ++afsvnumbers;
2846         tvc->vc_rwlockid = OSI_NO_LOCKID;
2847         initnsema(&tvc->vc_rwlock, 1,
2848                   makesname(name, "vrw", tvc->v.v_number));
2849 #ifndef AFS_SGI53_ENV
2850         initnsema(&tvc->v.v_sync, 0, makesname(name, "vsy", tvc->v.v_number));
2851 #endif
2852 #ifndef AFS_SGI62_ENV
2853         initnlock(&tvc->v.v_lock, makesname(name, "vlk", tvc->v.v_number));
2854 #endif /* AFS_SGI62_ENV */
2855     }
2856 #endif
2857     QInit(&VLRU);
2858     for(i = 0; i < VCSIZE; ++i)
2859         QInit(&afs_vhashTV[i]);
2860 }
2861
2862 /*!
2863  * Shutdown vcache.
2864  */
2865 void
2866 shutdown_vcache(void)
2867 {
2868     int i;
2869     struct afs_cbr *tsp;
2870     /*
2871      * XXX We may potentially miss some of the vcaches because if when
2872      * there are no free vcache entries and all the vcache entries are active
2873      * ones then we allocate an additional one - admittedly we almost never
2874      * had that occur.
2875      */
2876
2877     {
2878         struct afs_q *tq, *uq = NULL;
2879         struct vcache *tvc;
2880         for (tq = VLRU.prev; tq != &VLRU; tq = uq) {
2881             tvc = QTOV(tq);
2882             uq = QPrev(tq);
2883             if (tvc->mvid.target_root) {
2884                 osi_FreeSmallSpace(tvc->mvid.target_root);
2885                 tvc->mvid.target_root = NULL;
2886             }
2887 #ifdef  AFS_AIX_ENV
2888             aix_gnode_rele(AFSTOV(tvc));
2889 #endif
2890             if (tvc->linkData) {
2891                 afs_osi_Free(tvc->linkData, strlen(tvc->linkData) + 1);
2892                 tvc->linkData = 0;
2893             }
2894         }
2895         /*
2896          * Also free the remaining ones in the Cache
2897          */
2898         for (i = 0; i < VCSIZE; i++) {
2899             for (tvc = afs_vhashT[i]; tvc; tvc = tvc->hnext) {
2900                 if (tvc->mvid.target_root) {
2901                     osi_FreeSmallSpace(tvc->mvid.target_root);
2902                     tvc->mvid.target_root = NULL;
2903                 }
2904 #ifdef  AFS_AIX_ENV
2905                 if (tvc->v.v_gnode)
2906                     afs_osi_Free(tvc->v.v_gnode, sizeof(struct gnode));
2907 #ifdef  AFS_AIX32_ENV
2908                 if (tvc->segid) {
2909                     AFS_GUNLOCK();
2910                     vms_delete(tvc->segid);
2911                     AFS_GLOCK();
2912                     tvc->segid = tvc->vmh = NULL;
2913                     if (VREFCOUNT_GT(tvc,0))
2914                         osi_Panic("flushVcache: vm race");
2915                 }
2916                 if (tvc->credp) {
2917                     crfree(tvc->credp);
2918                     tvc->credp = NULL;
2919                 }
2920 #endif
2921 #endif
2922 #if     defined(AFS_SUN5_ENV)
2923                 if (tvc->credp) {
2924                     crfree(tvc->credp);
2925                     tvc->credp = NULL;
2926                 }
2927 #endif
2928                 if (tvc->linkData) {
2929                     afs_osi_Free(tvc->linkData, strlen(tvc->linkData) + 1);
2930                     tvc->linkData = 0;
2931                 }
2932
2933                 if (tvc->Access)
2934                     afs_FreeAllAxs(&(tvc->Access));
2935             }
2936             afs_vhashT[i] = 0;
2937         }
2938     }
2939     /*
2940      * Free any leftover callback queue
2941      */
2942     for (i = 0; i < afs_stats_cmperf.CallBackAlloced; i++) {
2943         tsp = afs_cbrHeads[i];
2944         afs_cbrHeads[i] = 0;
2945         afs_osi_Free((char *)tsp, AFS_NCBRS * sizeof(struct afs_cbr));
2946     }
2947     afs_cbrSpace = 0;
2948
2949 #if !defined(AFS_LINUX22_ENV)
2950     afs_osi_Free(Initial_freeVCList, afs_cacheStats * sizeof(struct vcache));
2951
2952 # ifdef  KERNEL_HAVE_PIN
2953     unpin(Initial_freeVCList, afs_cacheStats * sizeof(struct vcache));
2954 # endif
2955
2956     freeVCList = Initial_freeVCList = 0;
2957 #endif
2958
2959     AFS_RWLOCK_INIT(&afs_xvcache, "afs_xvcache");
2960     LOCK_INIT(&afs_xvcb, "afs_xvcb");
2961     QInit(&VLRU);
2962     for(i = 0; i < VCSIZE; ++i)
2963         QInit(&afs_vhashTV[i]);
2964 }
2965
2966 void
2967 afs_DisconGiveUpCallbacks(void)
2968 {
2969     int i;
2970     struct vcache *tvc;
2971     int nq=0;
2972
2973     ObtainWriteLock(&afs_xvcache, 1002); /* XXX - should be a unique number */
2974
2975  retry:
2976     /* Somehow, walk the set of vcaches, with each one coming out as tvc */
2977     for (i = 0; i < VCSIZE; i++) {
2978         for (tvc = afs_vhashT[i]; tvc; tvc = tvc->hnext) {
2979             int slept = 0;
2980             if (afs_QueueVCB(tvc, &slept)) {
2981                 tvc->callback = NULL;
2982                 nq++;
2983             }
2984             if (slept) {
2985                 goto retry;
2986             }
2987         }
2988     }
2989
2990     ReleaseWriteLock(&afs_xvcache);
2991
2992     afs_FlushVCBs(2);
2993 }
2994
2995 /*!
2996  *
2997  * Clear the Statd flag from all vcaches
2998  *
2999  * This function removes the Statd flag from all vcaches. It's used by
3000  * disconnected mode to tidy up during reconnection
3001  *
3002  */
3003 void
3004 afs_ClearAllStatdFlag(void)
3005 {
3006     int i;
3007     struct vcache *tvc;
3008
3009     ObtainWriteLock(&afs_xvcache, 715);
3010
3011     for (i = 0; i < VCSIZE; i++) {
3012         for (tvc = afs_vhashT[i]; tvc; tvc = tvc->hnext) {
3013             afs_StaleVCacheFlags(tvc, AFS_STALEVC_NODNLC | AFS_STALEVC_NOCB,
3014                                  CUnique);
3015         }
3016     }
3017     ReleaseWriteLock(&afs_xvcache);
3018 }
3019
3020 /**
3021  * Mark a vcache as stale; our metadata for the relevant file may be out of
3022  * date.
3023  *
3024  * @post Any subsequent access to this vcache will cause us to fetch the
3025  *       metadata for this vcache again.
3026  */
3027 void
3028 afs_StaleVCacheFlags(struct vcache *avc, afs_stalevc_flags_t flags,
3029                      afs_uint32 cflags)
3030 {
3031     int do_dnlc = 1;
3032     int do_filename = 0;
3033     int do_dequeue = 1;
3034     int lock_cbhash = 1;
3035
3036     if ((flags & AFS_STALEVC_NODNLC)) {
3037         do_dnlc = 0;
3038     }
3039     if ((flags & AFS_STALEVC_FILENAME)) {
3040         do_filename = 1;
3041     }
3042     if ((flags & AFS_STALEVC_CBLOCKED)) {
3043         lock_cbhash = 0;
3044     }
3045     if ((flags & AFS_STALEVC_NOCB)) {
3046         do_dequeue = 0;
3047         lock_cbhash = 0;
3048     }
3049
3050     if (lock_cbhash) {
3051         ObtainWriteLock(&afs_xcbhash, 486);
3052     }
3053     if (do_dequeue) {
3054         afs_DequeueCallback(avc);
3055     }
3056
3057     cflags |= CStatd;
3058     avc->f.states &= ~cflags;
3059
3060     if (lock_cbhash) {
3061         ReleaseWriteLock(&afs_xcbhash);
3062     }
3063
3064     if ((flags & AFS_STALEVC_SKIP_DNLC_FOR_INIT_FLUSHED) &&
3065         (avc->f.states & (CVInit | CVFlushed))) {
3066         do_dnlc = 0;
3067     }
3068
3069     if (flags & AFS_STALEVC_CLEARCB) {
3070         avc->callback = NULL;
3071     }
3072
3073     if (do_dnlc) {
3074         if ((avc->f.fid.Fid.Vnode & 1) ||
3075             AFSTOV(avc) == NULL || vType(avc) == VDIR ||
3076             (avc->f.states & CForeign)) {
3077             /* This vcache is (or could be) a directory. */
3078             osi_dnlc_purgedp(avc);
3079
3080         } else if (do_filename) {
3081             osi_dnlc_purgevp(avc);
3082         }
3083     }
3084 }
3085
3086 void
3087 afs_SetDataVersion(struct vcache *avc, afs_hyper_t *avers)
3088 {
3089     hset(avc->f.m.DataVersion, *avers);
3090 }