DEVEL15-volserver-split-volume-functionality-20090324
[openafs.git] / src / vol / namei_ops.c
1 /*
2  * Copyright 2000, International Business Machines Corporation and others.
3  * All Rights Reserved.
4  * 
5  * This software has been released under the terms of the IBM Public
6  * License.  For details, see the LICENSE file in the top-level source
7  * directory or online at http://www.openafs.org/dl/license10.html
8  */
9
10 /* I/O operations for the Unix open by name (namei) interface. */
11
12 #include <afsconfig.h>
13 #include <afs/param.h>
14
15 RCSID
16     ("$Header$");
17
18 #ifdef AFS_NAMEI_ENV
19 #include <stdio.h>
20 #include <stdlib.h>
21 #include <unistd.h>
22 #include <errno.h>
23 #include <fcntl.h>
24 #include <sys/stat.h>
25 #include <dirent.h>
26 #include <afs/assert.h>
27 #include <string.h>
28 #include <sys/file.h>
29 #include <sys/param.h>
30 #include <lock.h>
31 #if defined(AFS_SUN5_ENV) || defined(AFS_HPUX_ENV)
32 #include <unistd.h>
33 #endif
34 #include <afs/afsutil.h>
35 #include <lwp.h>
36 #include "nfs.h"
37 #include <afs/afsint.h>
38 #include "ihandle.h"
39 #include "vnode.h"
40 #include "volume.h"
41 #include "viceinode.h"
42 #include "voldefs.h"
43 #include "partition.h"
44 #include "fssync.h"
45 #include <afs/errors.h>
46
47 /*@+fcnmacros +macrofcndecl@*/
48 #ifdef O_LARGEFILE
49 #ifdef S_SPLINT_S
50 extern off64_t afs_lseek(int FD, off64_t O, int F);
51 #endif /*S_SPLINT_S */
52 #define afs_lseek(FD, O, F)     lseek64(FD, (off64_t)(O), F)
53 #define afs_stat                stat64
54 #define afs_fstat               fstat64
55 #define afs_open                open64
56 #define afs_fopen               fopen64
57 #else /* !O_LARGEFILE */
58 #ifdef S_SPLINT_S
59 extern off_t afs_lseek(int FD, off_t O, int F);
60 #endif /*S_SPLINT_S */
61 #define afs_lseek(FD, O, F)     lseek(FD, (off_t)(O), F)
62 #define afs_stat                stat
63 #define afs_fstat               fstat
64 #define afs_open                open
65 #define afs_fopen               fopen
66 #endif /* !O_LARGEFILE */
67 /*@=fcnmacros =macrofcndecl@*/
68
69 /*@printflike@*/ extern void Log(const char *format, ...);
70
71 #ifndef LOCK_SH
72 #define   LOCK_SH   1    /* shared lock */
73 #define   LOCK_EX   2    /* exclusive lock */
74 #define   LOCK_NB   4    /* don't block when locking */
75 #define   LOCK_UN   8    /* unlock */
76 #endif
77
78 #ifndef HAVE_FLOCK
79 #include <fcntl.h>
80
81 /*
82  * This function emulates a subset of flock()
83  */
84 int 
85 emul_flock(int fd, int cmd)
86 {    struct flock f;
87
88     memset(&f, 0, sizeof (f));
89
90     if (cmd & LOCK_UN)
91         f.l_type = F_UNLCK;
92     if (cmd & LOCK_SH)
93         f.l_type = F_RDLCK;
94     if (cmd & LOCK_EX)
95         f.l_type = F_WRLCK;
96
97     return fcntl(fd, (cmd & LOCK_NB) ? F_SETLK : F_SETLKW, &f);
98 }
99
100 #define flock(f,c)      emul_flock(f,c)
101 #endif
102
103 extern char *volutil_PartitionName_r(int volid, char *buf, int buflen);
104 int Testing=0;
105
106
107 afs_sfsize_t
108 namei_iread(IHandle_t * h, afs_foff_t offset, char *buf, afs_fsize_t size)
109 {
110     afs_sfsize_t nBytes;
111     FdHandle_t *fdP;
112
113     fdP = IH_OPEN(h);
114     if (fdP == NULL)
115         return -1;
116
117     if (FDH_SEEK(fdP, offset, SEEK_SET) < 0) {
118         FDH_REALLYCLOSE(fdP);
119         return -1;
120     }
121
122     nBytes = FDH_READ(fdP, buf, size);
123     FDH_CLOSE(fdP);
124     return nBytes;
125 }
126
127 afs_sfsize_t
128 namei_iwrite(IHandle_t * h, afs_foff_t offset, char *buf, afs_fsize_t size)
129 {
130     afs_sfsize_t nBytes;
131     FdHandle_t *fdP;
132
133     fdP = IH_OPEN(h);
134     if (fdP == NULL)
135         return -1;
136
137     if (FDH_SEEK(fdP, offset, SEEK_SET) < 0) {
138         FDH_REALLYCLOSE(fdP);
139         return -1;
140     }
141     nBytes = FDH_WRITE(fdP, buf, size);
142     FDH_CLOSE(fdP);
143     return nBytes;
144 }
145
146
147
148 /* Inode number format:
149  * low 26 bits - vnode number - all 1's if volume special file.
150  * next 3 bits - tag 
151  * next 3 bits spare (0's)
152  * high 32 bits - uniquifier (regular) or type if spare
153  */
154 #define NAMEI_VNODEMASK    0x003ffffff
155 #define NAMEI_TAGMASK      0x7
156 #define NAMEI_TAGSHIFT     26
157 #define NAMEI_UNIQMASK     0xffffffff
158 #define NAMEI_UNIQSHIFT    32
159 #define NAMEI_INODESPECIAL ((Inode)NAMEI_VNODEMASK)
160 #define NAMEI_VNODESPECIAL NAMEI_VNODEMASK
161
162 /* dir1 is the high 8 bits of the 26 bit vnode */
163 #define VNO_DIR1(vno) ((vno >> 14) & 0xff)
164 /* dir2 is the next 9 bits */
165 #define VNO_DIR2(vno) ((vno >> 9) & 0x1ff)
166 /* "name" is the low 9 bits of the vnode, the 3 bit tag and the uniq */
167
168 #define NAMEI_SPECDIR "special"
169 #define NAMEI_SPECDIRLEN (sizeof(NAMEI_SPECDIR)-1)
170
171 #define NAMEI_MAXVOLS 5         /* Maximum supported number of volumes per volume
172                                  * group, not counting temporary (move) volumes.
173                                  * This is the number of separate files, all having
174                                  * the same vnode number, which can occur in a volume
175                                  * group at once.
176                                  */
177
178
179 typedef struct {
180     int ogm_owner;
181     int ogm_group;
182     int ogm_mode;
183 } namei_ogm_t;
184
185 static int namei_GetLinkCount2(FdHandle_t * h, Inode ino, int lockit, int fixup, int nowrite);
186
187 static int GetFreeTag(IHandle_t * ih, int vno);
188
189 /* namei_HandleToInodeDir
190  *
191  * Construct the path name of the directory holding the inode data.
192  * Format: /<vicepx>/INODEDIR
193  *
194  */
195 #define PNAME_BLEN 64
196 static void
197 namei_HandleToInodeDir(namei_t * name, IHandle_t * ih)
198 {
199     char *tmp = name->n_base;
200
201     memset(name, '\0', sizeof(*name));
202
203     (void)volutil_PartitionName_r(ih->ih_dev, tmp, NAMEI_LCOMP_LEN);
204     tmp += VICE_PREFIX_SIZE;
205     tmp += ih->ih_dev > 25 ? 2 : 1;
206     *tmp = '/';
207     tmp++;
208     (void)strcpy(tmp, INODEDIR);
209     (void)strcpy(name->n_path, name->n_base);
210 }
211
212 #define addtoname(N, C) \
213 do { \
214          strcat((N)->n_path, "/"); strcat((N)->n_path, C); \
215 } while(0)
216
217
218 static void
219 namei_HandleToVolDir(namei_t * name, IHandle_t * ih)
220 {
221     lb64_string_t tmp;
222
223     namei_HandleToInodeDir(name, ih);
224     (void)int32_to_flipbase64(tmp, (int64_t) (ih->ih_vid & 0xff));
225     (void)strcpy(name->n_voldir1, tmp);
226     addtoname(name, name->n_voldir1);
227     (void)int32_to_flipbase64(tmp, (int64_t) ih->ih_vid);
228     (void)strcpy(name->n_voldir2, tmp);
229     addtoname(name, name->n_voldir2);
230 }
231
232 /* namei_HandleToName
233  *
234  * Constructs a file name for the fully qualified handle.
235  * Note that special files end up in /vicepX/InodeDir/Vxx/V*.data/special
236  */
237 void
238 namei_HandleToName(namei_t * name, IHandle_t * ih)
239 {
240     lb64_string_t str;
241     int vno = (int)(ih->ih_ino & NAMEI_VNODEMASK);
242
243     namei_HandleToVolDir(name, ih);
244
245     if (vno == NAMEI_VNODESPECIAL) {
246         (void)strcpy(name->n_dir1, NAMEI_SPECDIR);
247         addtoname(name, name->n_dir1);
248         name->n_dir2[0] = '\0';
249     } else {
250         (void)int32_to_flipbase64(str, VNO_DIR1(vno));
251         (void)strcpy(name->n_dir1, str);
252         addtoname(name, name->n_dir1);
253         (void)int32_to_flipbase64(str, VNO_DIR2(vno));
254         (void)strcpy(name->n_dir2, str);
255         addtoname(name, name->n_dir2);
256     }
257     (void)int64_to_flipbase64(str, (int64_t) ih->ih_ino);
258     (void)strcpy(name->n_inode, str);
259     addtoname(name, name->n_inode);
260 }
261
262 /* The following is a warning to tell sys-admins to not muck about in this
263  * name space.
264  */
265 #define VICE_README "These files and directories are a part of the AFS \
266 namespace. Modifying them\nin any way will result in loss of AFS data,\n\
267 ownership and permissions included.\n"
268 int
269 namei_ViceREADME(char *partition)
270 {
271     char filename[32];
272     int fd;
273
274     /* Create the inode directory if we're starting for the first time */
275     (void)afs_snprintf(filename, sizeof filename, "%s/%s", partition,
276                        INODEDIR);
277     mkdir(filename, 0700);
278
279     (void)afs_snprintf(filename, sizeof filename, "%s/%s/README", partition,
280                        INODEDIR);
281     fd = afs_open(filename, O_WRONLY | O_CREAT | O_TRUNC, 0444);
282     if (fd >= 0) {
283         (void)write(fd, VICE_README, strlen(VICE_README));
284         close(fd);
285     }
286     return (errno);
287 }
288
289
290 #define create_dir() \
291 do { \
292     if (mkdir(tmp, 0700)<0) { \
293         if (errno != EEXIST) \
294             return -1; \
295     } \
296     else { \
297         *created = 1; \
298     } \
299 } while (0)
300
301 #define create_nextdir(A) \
302 do { \
303          strcat(tmp, "/"); strcat(tmp, A); create_dir();  \
304 } while(0)
305
306 /* namei_CreateDataDirectories
307  *
308  * If creating the file failed because of ENOENT or ENOTDIR, try
309  * creating all the directories first.
310  */
311 static int
312 namei_CreateDataDirectories(namei_t * name, int *created)
313 {
314     char tmp[256];
315
316     *created = 0;
317
318     (void)strcpy(tmp, name->n_base);
319     create_dir();
320
321     create_nextdir(name->n_voldir1);
322     create_nextdir(name->n_voldir2);
323     create_nextdir(name->n_dir1);
324     if (name->n_dir2[0]) {
325         create_nextdir(name->n_dir2);
326     }
327     return 0;
328 }
329
330 /* delTree(): Deletes an entire tree of directories (no files)
331  * Input:
332  *   root : Full path to the subtree. Should be big enough for PATH_MAX
333  *   tree : the subtree to be deleted is rooted here. Specifies only the
334  *          subtree beginning at tree (not the entire path). It should be
335  *          a pointer into the "root" buffer.
336  * Output:
337  *  errp : errno of the first error encountered during the directory cleanup.
338  *         *errp should have been initialized to 0.
339  * 
340  * Return Values:
341  *  -1  : If errors were encountered during cleanup and error is set to 
342  *        the first errno.
343  *   0  : Success.
344  *
345  * If there are errors, we try to work around them and delete as many
346  * directories as possible. We don't attempt to remove directories that still
347  * have non-dir entries in them.
348  */
349 static int
350 delTree(char *root, char *tree, int *errp)
351 {
352     char *cp;
353     DIR *ds;
354     struct dirent *dirp;
355     struct afs_stat st;
356
357     if (*tree) {
358         /* delete the children first */
359         cp = strchr(tree, '/');
360         if (cp) {
361             delTree(root, cp + 1, errp);
362             *cp = '\0';
363         } else
364             cp = tree + strlen(tree);   /* move cp to the end of string tree */
365
366         /* now delete all entries in this dir */
367         if ((ds = opendir(root)) != (DIR *) NULL) {
368             errno = 0;
369             while ((dirp = readdir(ds))) {
370                 /* ignore . and .. */
371                 if (!strcmp(dirp->d_name, ".") || !strcmp(dirp->d_name, ".."))
372                     continue;
373                 /* since root is big enough, we reuse the space to
374                  * concatenate the dirname to the current tree 
375                  */
376                 strcat(root, "/");
377                 strcat(root, dirp->d_name);
378                 if (afs_stat(root, &st) == 0 && S_ISDIR(st.st_mode)) {
379                     /* delete this subtree */
380                     delTree(root, cp + 1, errp);
381                 } else
382                     *errp = *errp ? *errp : errno;
383
384                 /* recover path to our cur tree by truncating it to 
385                  * its original len 
386                  */
387                 *cp = 0;
388             }
389             /* if (!errno) -- closedir not implicit if we got an error */
390             closedir(ds);
391         }
392
393         /* finally axe the current dir */
394         if (rmdir(root))
395             *errp = *errp ? *errp : errno;
396
397 #ifndef AFS_PTHREAD_ENV         /* let rx get some work done */
398         IOMGR_Poll();
399 #endif /* !AFS_PTHREAD_ENV */
400
401     }
402
403     /* if valid tree */
404     /* if we encountered errors during cleanup, we return a -1 */
405     if (*errp)
406         return -1;
407
408     return 0;
409
410 }
411
412 /* namei_RemoveDataDirectories
413  * Return Values:
414  * Returns 0 on success.
415  * Returns -1 on error. Typically, callers ignore this error bcause we
416  * can continue running if the removes fail. The salvage process will
417  * finish tidying up for us. We only use the n_base and n_voldir1 entries
418  * and only do rmdir's.
419  */
420
421 static int
422 namei_RemoveDataDirectories(namei_t * name)
423 {
424     char pbuf[MAXPATHLEN], *path = pbuf;
425     int prefixlen = strlen(name->n_base), err = 0;
426
427     strcpy(path, name->n_path);
428
429     /* move past the prefix */
430     path = path + prefixlen + 1;        /* skip over the trailing / */
431
432     /* now delete all dirs upto path */
433     return delTree(pbuf, path, &err);
434
435 }
436
437 /* Create the file in the name space.
438  *
439  * Parameters stored as follows:
440  * Regular files:
441  * p1 - volid - implied in containing directory.
442  * p2 - vnode - name is <vno:31-23>/<vno:22-15>/<vno:15-0><uniq:31-5><tag:2-0>
443  * p3 - uniq -- bits 4-0 are in mode bits 4-0
444  * p4 - dv ---- dv:15-0 in uid, dv:29-16 in gid, dv:31-30 in mode:6-5
445  * Special files:
446  * p1 - volid - creation time - dwHighDateTime
447  * p2 - vnode - -1 means special, file goes in "S" subdirectory.
448  * p3 - type -- name is <type>.<tag> where tag is a file name unqiquifier.
449  * p4 - parid - parent volume id - implied in containing directory.
450  *
451  * Return value is the inode number or (Inode)-1 if error.
452  * We "know" there is only one link table, so return EEXIST if there already
453  * is a link table. It's up to the calling code to test errno and increment
454  * the link count.
455  */
456
457 /* namei_MakeSpecIno
458  *
459  * This function is called by VCreateVolume to hide the implementation
460  * details of the inode numbers. This only allows for 7 volume special
461  * types, but if we get that far, this could should be dead by then.
462  */
463 Inode
464 namei_MakeSpecIno(int volid, int type)
465 {
466     Inode ino;
467     ino = NAMEI_INODESPECIAL;
468     type &= NAMEI_TAGMASK;
469     ino |= ((Inode) type) << NAMEI_TAGSHIFT;
470     ino |= ((Inode) volid) << NAMEI_UNIQSHIFT;
471     return ino;
472 }
473
474 /* SetOGM - set owner group and mode bits from parm and tag
475  *
476  * owner - low 15 bits of parm.
477  * group - next 15 bits of parm.
478  * mode - 2 bits of parm, then lowest = 3 bits of tag.
479  */
480 static int
481 SetOGM(int fd, int parm, int tag)
482 {
483     int owner, group, mode;
484
485     owner = parm & 0x7fff;
486     group = (parm >> 15) & 0x7fff;
487     if (fchown(fd, owner, group) < 0)
488         return -1;
489
490     mode = (parm >> 27) & 0x18;
491     mode |= tag & 0x7;
492     if (fchmod(fd, mode) < 0)
493         return -1;
494
495     return 0;
496
497 }
498
499 /* GetOGM - get parm and tag from owner, group and mode bits. */
500 static void
501 GetOGMFromStat(struct afs_stat *status, int *parm, int *tag)
502 {
503     *parm = status->st_uid | (status->st_gid << 15);
504     *parm |= (status->st_mode & 0x18) << 27;
505     *tag = status->st_mode & 0x7;
506 }
507
508 static int
509 GetOGM(int fd, int *parm, int *tag)
510 {
511     struct afs_stat status;
512     if (afs_fstat(fd, &status) < 0)
513         return -1;
514
515     GetOGMFromStat(&status, parm, tag);
516     return 0;
517 }
518
519 int big_vno = 0;                /* Just in case we ever do 64 bit vnodes. */
520
521 /* Derive the name and create it O_EXCL. If that fails we have an error.
522  * Get the tag from a free column in the link table.
523  */
524 Inode
525 namei_icreate(IHandle_t * lh, char *part, int p1, int p2, int p3, int p4)
526 {
527     namei_t name;
528     int fd = -1;
529     int code = 0;
530     int created_dir = 0;
531     IHandle_t tmp;
532     FdHandle_t *fdP;
533     FdHandle_t tfd;
534     int tag;
535     int ogm_parm;
536
537
538     memset((void *)&tmp, 0, sizeof(IHandle_t));
539
540
541     tmp.ih_dev = volutil_GetPartitionID(part);
542     if (tmp.ih_dev == -1) {
543         errno = EINVAL;
544         return -1;
545     }
546
547     if (p2 == -1) {
548         /* Parameters for special file:
549          * p1 - volume id - goes into owner/group/mode
550          * p2 - vnode == -1
551          * p3 - type
552          * p4 - parent volume id
553          */
554         ogm_parm = p1;
555         tag = p3;
556
557         tmp.ih_vid = p4;        /* Use parent volume id, where this file will be. */
558         tmp.ih_ino = namei_MakeSpecIno(p1, p3);
559     } else {
560         int vno = p2 & NAMEI_VNODEMASK;
561         /* Parameters for regular file:
562          * p1 - volume id
563          * p2 - vnode
564          * p3 - uniq
565          * p4 - dv
566          */
567
568         if (vno != p2) {
569             big_vno++;
570             errno = EINVAL;
571             return -1;
572         }
573         /* If GetFreeTag succeeds, it atomically sets link count to 1. */
574         tag = GetFreeTag(lh, p2);
575         if (tag < 0)
576             goto bad;
577
578         /* name is <uniq(p3)><tag><vno(p2)> */
579         tmp.ih_vid = p1;
580         tmp.ih_ino = (Inode) p2;
581         tmp.ih_ino |= ((Inode) tag) << NAMEI_TAGSHIFT;
582         tmp.ih_ino |= ((Inode) p3) << NAMEI_UNIQSHIFT;
583
584         ogm_parm = p4;
585     }
586
587     namei_HandleToName(&name, &tmp);
588     fd = afs_open(name.n_path, O_CREAT | O_EXCL | O_TRUNC | O_RDWR, 0);
589     if (fd < 0) {
590         if (errno == ENOTDIR || errno == ENOENT) {
591             if (namei_CreateDataDirectories(&name, &created_dir) < 0)
592                 goto bad;
593             fd = afs_open(name.n_path, O_CREAT | O_EXCL | O_TRUNC | O_RDWR,
594                           0);
595             if (fd < 0)
596                 goto bad;
597         } else {
598             goto bad;
599         }
600     }
601     if (SetOGM(fd, ogm_parm, tag) < 0) {
602         close(fd);
603         fd = -1;
604         goto bad;
605     }
606
607     if (p2 == -1 && p3 == VI_LINKTABLE) {
608         /* hack at tmp to setup for set link count call. */
609         memset((void *)&tfd, 0, sizeof(FdHandle_t));    /* minimalistic still, but a little cleaner */
610         tfd.fd_ih = &tmp;
611         tfd.fd_fd = fd;
612         code = namei_SetLinkCount(&tfd, (Inode) 0, 1, 0);
613     }
614
615   bad:
616     if (fd >= 0)
617         close(fd);
618
619
620     if (code || (fd < 0)) {
621         if (p2 != -1) {
622             fdP = IH_OPEN(lh);
623             if (fdP) {
624                 namei_SetLinkCount(fdP, tmp.ih_ino, 0, 0);
625                 FDH_CLOSE(fdP);
626             }
627         }
628     }
629     return (code || (fd < 0)) ? (Inode) - 1 : tmp.ih_ino;
630 }
631
632
633 /* namei_iopen */
634 int
635 namei_iopen(IHandle_t * h)
636 {
637     int fd;
638     namei_t name;
639
640     /* Convert handle to file name. */
641     namei_HandleToName(&name, h);
642     fd = afs_open(name.n_path, O_RDWR, 0666);
643     return fd;
644 }
645
646 /* Need to detect vol special file and just unlink. In those cases, the
647  * handle passed in _is_ for the inode. We only check p1 for the special
648  * files.
649  */
650 int
651 namei_dec(IHandle_t * ih, Inode ino, int p1)
652 {
653     int count = 0;
654     namei_t name;
655     int code = 0;
656     FdHandle_t *fdP;
657
658     if ((ino & NAMEI_INODESPECIAL) == NAMEI_INODESPECIAL) {
659         IHandle_t *tmp;
660         int inode_p1, tag;
661         int type = (int)((ino >> NAMEI_TAGSHIFT) & NAMEI_TAGMASK);
662
663         /* Verify this is the right file. */
664         IH_INIT(tmp, ih->ih_dev, ih->ih_vid, ino);
665
666         fdP = IH_OPEN(tmp);
667         if (fdP == NULL) {
668             IH_RELEASE(tmp);
669             errno = EINVAL;
670             return -1;
671         }
672
673         if ((GetOGM(fdP->fd_fd, &inode_p1, &tag) < 0) || (inode_p1 != p1)) {
674             FDH_REALLYCLOSE(fdP);
675             IH_RELEASE(tmp);
676             errno = EINVAL;
677             return -1;
678         }
679
680         /* If it's the link table itself, decrement the link count. */
681         if (type == VI_LINKTABLE) {
682             if ((count = namei_GetLinkCount(fdP, (Inode) 0, 1)) < 0) {
683                 FDH_REALLYCLOSE(fdP);
684                 IH_RELEASE(tmp);
685                 return -1;
686             }
687
688             count--;
689             if (namei_SetLinkCount(fdP, (Inode) 0, count < 0 ? 0 : count, 1) <
690                 0) {
691                 FDH_REALLYCLOSE(fdP);
692                 IH_RELEASE(tmp);
693                 return -1;
694             }
695
696             if (count > 0) {
697                 FDH_REALLYCLOSE(fdP);
698                 IH_RELEASE(tmp);
699                 return 0;
700             }
701         }
702
703         namei_HandleToName(&name, tmp);
704         if ((code = unlink(name.n_path)) == 0) {
705             if (type == VI_LINKTABLE) {
706                 /* Try to remove directory. If it fails, that's ok.
707                  * Salvage will clean up.
708                  */
709                 (void)namei_RemoveDataDirectories(&name);
710             }
711         }
712         FDH_REALLYCLOSE(fdP);
713         IH_RELEASE(tmp);
714     } else {
715         /* Get a file descriptor handle for this Inode */
716         fdP = IH_OPEN(ih);
717         if (fdP == NULL) {
718             return -1;
719         }
720
721         if ((count = namei_GetLinkCount(fdP, ino, 1)) < 0) {
722             FDH_REALLYCLOSE(fdP);
723             return -1;
724         }
725
726         count--;
727         if (count >= 0) {
728             if (namei_SetLinkCount(fdP, ino, count, 1) < 0) {
729                 FDH_REALLYCLOSE(fdP);
730                 return -1;
731             }
732         } else {
733             IHandle_t *th;
734             IH_INIT(th, ih->ih_dev, ih->ih_vid, ino);
735             Log("Warning: Lost ref on ihandle dev %d vid %d ino %" AFS_INT64_FMT "\n",
736                 th->ih_dev, th->ih_vid, (int64_t) th->ih_ino);
737             IH_RELEASE(th);
738           
739             /* If we're less than 0, someone presumably unlinked;
740                don't bother setting count to 0, but we need to drop a lock */
741             if (namei_SetLinkCount(fdP, ino, 0, 1) < 0) {
742                 FDH_REALLYCLOSE(fdP);
743                 return -1;
744             }
745         }
746         if (count == 0) {
747             IHandle_t *th;
748             IH_INIT(th, ih->ih_dev, ih->ih_vid, ino);
749
750             namei_HandleToName(&name, th);
751             IH_RELEASE(th);
752             code = unlink(name.n_path);
753         }
754         FDH_CLOSE(fdP);
755     }
756
757     return code;
758 }
759
760 int
761 namei_inc(IHandle_t * h, Inode ino, int p1)
762 {
763     int count;
764     int code = 0;
765     FdHandle_t *fdP;
766
767     if ((ino & NAMEI_INODESPECIAL) == NAMEI_INODESPECIAL) {
768         int type = (int)((ino >> NAMEI_TAGSHIFT) & NAMEI_TAGMASK);
769         if (type != VI_LINKTABLE)
770             return 0;
771         ino = (Inode) 0;
772     }
773
774     /* Get a file descriptor handle for this Inode */
775     fdP = IH_OPEN(h);
776     if (fdP == NULL) {
777         return -1;
778     }
779
780     if ((count = namei_GetLinkCount(fdP, ino, 1)) < 0)
781         code = -1;
782     else {
783         count++;
784         if (count > 7) {
785             errno = EINVAL;
786             code = -1;
787             count = 7;
788         }
789         if (namei_SetLinkCount(fdP, ino, count, 1) < 0)
790             code = -1;
791     }
792     if (code) {
793         FDH_REALLYCLOSE(fdP);
794     } else {
795         FDH_CLOSE(fdP);
796     }
797     return code;
798 }
799
800 int
801 namei_replace_file_by_hardlink(IHandle_t *hLink, IHandle_t *hTarget)
802 {
803     afs_int32 code;
804     namei_t nameLink;
805     namei_t nameTarget;
806     
807     /* Convert handle to file name. */
808     namei_HandleToName(&nameLink, hLink);
809     namei_HandleToName(&nameTarget, hTarget);
810     
811     unlink(nameLink.n_path);
812     code = link(nameTarget.n_path, nameLink.n_path);
813     return code;
814 }
815
816 int
817 namei_copy_on_write(IHandle_t *h)
818 {
819     afs_int32 fd, code = 0;
820     namei_t name;
821     FdHandle_t *fdP;
822     struct afs_stat tstat;
823     
824     namei_HandleToName(&name, h);
825     if (afs_stat(name.n_path, &tstat) < 0) 
826         return EIO;
827     if (tstat.st_nlink > 1) {                   /* do a copy on write */
828         char path[259];
829         char *buf;
830         afs_size_t size;
831         afs_int32 tlen;
832         
833         fdP = IH_OPEN(h);
834         if (!fdP)
835             return EIO;
836         strcpy(&path, name.n_path);
837         strcat(&path, "-tmp");
838         fd = afs_open(path, O_CREAT | O_EXCL | O_TRUNC | O_RDWR, 0);
839         if (fd < 0) {
840             FDH_CLOSE(fdP);
841             return EIO;
842         }
843         buf = malloc(8192);
844         if (!buf) {
845             close(fd);
846             unlink(path);
847             FDH_CLOSE(fdP);
848             return ENOMEM;
849         }
850         size = tstat.st_size;
851         FDH_SEEK(fdP, 0, 0);
852         while (size) {
853             tlen = size > 8192 ? 8192 : size;
854             if (FDH_READ(fdP, buf, tlen) != tlen) 
855                 break;
856             if (write(fd, buf, tlen) != tlen) 
857                 break;
858             size -= tlen;
859         }
860         close(fd);
861         FDH_REALLYCLOSE(fdP);
862         free(buf);
863         if (size)
864             code = EIO;
865         else {
866             unlink(name.n_path);
867             code = rename(path, name.n_path);
868         }
869     }
870     return code;
871 }
872
873 /************************************************************************
874  * File Name Structure
875  ************************************************************************
876  *
877  * Each AFS file needs a unique name and it needs to be findable with
878  * minimal lookup time. Note that the constraint on the number of files and
879  * directories in a volume is the size of the vnode index files and the
880  * max file size AFS supports (for internal files) of 2^31. Since a record
881  * in the small vnode index file is 64 bytes long, we can have at most
882  * (2^31)/64 or 33554432 files. A record in the large index file is
883  * 256 bytes long, giving a maximum of (2^31)/256 = 8388608 directories.
884  * Another layout parameter is that there is roughly a 16 to 1 ratio between
885  * the number of files and the number of directories.
886  *
887  * Using this information we can see that a layout of 256 directories, each
888  * with 512 subdirectories and each of those having 512 files gives us
889  * 256*512*512 = 67108864 AFS files and directories. 
890  *
891  * The volume, vnode, uniquifier and data version, as well as the tag
892  * are required, either for finding the file or for salvaging. It's best to 
893  * restrict the name to something that can be mapped into 64 bits so the
894  * "Inode" is easily comparable (using "==") to other "Inodes". The tag
895  * is used to distinguish between different versions of the same file
896  * which are currently in the RW and clones of a volume. See "Link Table
897  * Organization" below for more information on the tag. The tag is 
898  * required in the name of the file to ensure a unique name. 
899  *
900  * We can store data in the uid, gid and mode bits of the files, provided
901  * the directories have root only access. This gives us 15 bits for each
902  * of uid and gid (GNU chown considers 65535 to mean "don't change").
903  * There are 9 available mode bits. Adn we need to store a total of 
904  * 32 (volume id) + 26 (vnode) + 32 (uniquifier) + 32 (data-version) + 3 (tag)
905  * or 131 bits somewhere. 
906  *
907  * The format of a file name for a regular file is:
908  * /vicepX/AFSIDat/V1/V2/AA/BB/<tag><uniq><vno>
909  * V1 - low 8 bits of RW volume id
910  * V2 - all bits of RW volume id
911  * AA - high 8 bits of vnode number.
912  * BB - next 9 bits of vnode number.
913  * <tag><uniq><vno> - file name
914  *
915  * Volume special files are stored in a separate directory:
916  * /vicepX/AFSIDat/V1/V2/special/<tag><uniq><vno>
917  *
918  *
919  * The vnode is hashed into the directory using the high bits of the
920  * vnode number. This is so that consecutively created vnodes are in
921  * roughly the same area on the disk. This will at least be optimal if
922  * the user is creating many files in the same AFS directory. The name
923  * should be formed so that the leading characters are different as quickly
924  * as possible, leading to faster discards of incorrect matches in the
925  * lookup code.
926  * 
927  */
928
929
930 /************************************************************************
931  *  Link Table Organization
932  ************************************************************************
933  *
934  * The link table volume special file is used to hold the link counts that
935  * are held in the inodes in inode based AFS vice filesystems. For user
936  * space access, the link counts are being kept in a separate
937  * volume special file. The file begins with the usual version stamp
938  * information and is then followed by one row per vnode number. vnode 0
939  * is used to hold the link count of the link table itself. That is because
940  * the same link table is shared among all the volumes of the volume group
941  * and is deleted only when the last volume of a volume group is deleted.
942  *
943  * Within each row, the columns are 3 bits wide. They can each hold a 0 based
944  * link count from 0 through 7. Each colume represents a unique instance of
945  * that vnode. Say we have a file shared between the RW and a RO and a
946  * different version of the file (or a different uniquifer) for the BU volume.
947  * Then one column would be holding the link count of 2 for the RW and RO
948  * and a different column would hold the link count of 1 for the BU volume.
949  * Note that we allow only 5 volumes per file, giving 15 bits used in the
950  * short.
951  */
952 #define LINKTABLE_WIDTH 2
953 #define LINKTABLE_SHIFT 1       /* log 2 = 1 */
954
955 static void
956 namei_GetLCOffsetAndIndexFromIno(Inode ino, afs_foff_t * offset, int *index)
957 {
958     int toff = (int)(ino & NAMEI_VNODEMASK);
959     int tindex = (int)((ino >> NAMEI_TAGSHIFT) & NAMEI_TAGMASK);
960
961     *offset = (afs_foff_t) ((toff << LINKTABLE_SHIFT) + 8);     /* * 2 + sizeof stamp */
962     *index = (tindex << 1) + tindex;
963 }
964
965
966 /* namei_GetLinkCount
967  * If lockit is set, lock the file and leave it locked upon a successful
968  * return.
969  */
970 static int
971 namei_GetLinkCount2(FdHandle_t * h, Inode ino, int lockit, int fixup, int nowrite)
972 {
973     unsigned short row = 0;
974     afs_foff_t offset;
975     ssize_t rc;
976     int index;
977
978     /* there's no linktable yet. the salvager will create one later */
979     if (h->fd_fd == -1 && fixup)
980        return 1;
981     namei_GetLCOffsetAndIndexFromIno(ino, &offset, &index);
982
983     if (lockit) {
984         if (flock(h->fd_fd, LOCK_EX) < 0)
985             return -1;
986     }
987
988     if (afs_lseek(h->fd_fd, offset, SEEK_SET) == -1)
989         goto bad_getLinkByte;
990
991     rc = read(h->fd_fd, (char *)&row, sizeof(row));
992     if ((rc == 0 || !((row >> index) & NAMEI_TAGMASK)) && fixup && nowrite)
993         return 1;
994     if (rc == 0 && fixup) {
995         struct stat st;
996         if (fstat(h->fd_fd, &st) || st.st_size >= offset+sizeof(row))
997            goto bad_getLinkByte;
998         FDH_TRUNC(h, offset+sizeof(row));
999         row = 1 << index;
1000         rc = write(h->fd_fd, (char *)&row, sizeof(row));
1001     }
1002     if (rc != sizeof(row)) {
1003         goto bad_getLinkByte;
1004     }
1005
1006     if (fixup && !((row >> index) & NAMEI_TAGMASK)) {
1007         row |= 1<<index;
1008         if (afs_lseek(h->fd_fd, offset, SEEK_SET) == -1)
1009             goto bad_getLinkByte;
1010         rc = write(h->fd_fd, (char *)&row, sizeof(row));
1011         if (rc != sizeof(row))
1012             goto bad_getLinkByte;
1013     }
1014  
1015     return (int)((row >> index) & NAMEI_TAGMASK);
1016
1017   bad_getLinkByte:
1018     if (lockit)
1019         flock(h->fd_fd, LOCK_UN);
1020     return -1;
1021 }
1022
1023 int
1024 namei_GetLinkCount(FdHandle_t * h, Inode ino, int lockit) 
1025 {
1026     return namei_GetLinkCount2(h, ino, lockit, 0, 1);
1027 }
1028
1029 /* Return a free column index for this vnode. */
1030 static int
1031 GetFreeTag(IHandle_t * ih, int vno)
1032 {
1033     FdHandle_t *fdP;
1034     afs_foff_t offset;
1035     int col;
1036     int coldata;
1037     short row;
1038     int code;
1039
1040
1041     fdP = IH_OPEN(ih);
1042     if (fdP == NULL)
1043         return -1;
1044
1045     /* Only one manipulates at a time. */
1046     if (flock(fdP->fd_fd, LOCK_EX) < 0) {
1047         FDH_REALLYCLOSE(fdP);
1048         return -1;
1049     }
1050
1051     offset = (vno << LINKTABLE_SHIFT) + 8;      /* * 2 + sizeof stamp */
1052     if (afs_lseek(fdP->fd_fd, offset, SEEK_SET) == -1) {
1053         goto badGetFreeTag;
1054     }
1055
1056     code = read(fdP->fd_fd, (char *)&row, sizeof(row));
1057     if (code != sizeof(row)) {
1058         if (code != 0)
1059             goto badGetFreeTag;
1060         row = 0;
1061     }
1062
1063     /* Now find a free column in this row and claim it. */
1064     for (col = 0; col < NAMEI_MAXVOLS; col++) {
1065         coldata = 7 << (col * 3);
1066         if ((row & coldata) == 0)
1067             break;
1068     }
1069     if (col >= NAMEI_MAXVOLS) {
1070         errno = ENOSPC;
1071         goto badGetFreeTag;
1072     }
1073
1074     coldata = 1 << (col * 3);
1075     row |= coldata;
1076
1077     if (afs_lseek(fdP->fd_fd, offset, SEEK_SET) == -1) {
1078         goto badGetFreeTag;
1079     }
1080     if (write(fdP->fd_fd, (char *)&row, sizeof(row)) != sizeof(row)) {
1081         goto badGetFreeTag;
1082     }
1083     FDH_SYNC(fdP);
1084     flock(fdP->fd_fd, LOCK_UN);
1085     FDH_REALLYCLOSE(fdP);
1086     return col;;
1087
1088   badGetFreeTag:
1089     flock(fdP->fd_fd, LOCK_UN);
1090     FDH_REALLYCLOSE(fdP);
1091     return -1;
1092 }
1093
1094
1095
1096 /* namei_SetLinkCount
1097  * If locked is set, assume file is locked. Otherwise, lock file before
1098  * proceeding to modify it.
1099  */
1100 int
1101 namei_SetLinkCount(FdHandle_t * fdP, Inode ino, int count, int locked)
1102 {
1103     afs_foff_t offset;
1104     int index;
1105     unsigned short row;
1106     int junk;
1107     int code = -1;
1108
1109     namei_GetLCOffsetAndIndexFromIno(ino, &offset, &index);
1110
1111     if (!locked) {
1112         if (flock(fdP->fd_fd, LOCK_EX) < 0) {
1113             return -1;
1114         }
1115     }
1116     if (afs_lseek(fdP->fd_fd, offset, SEEK_SET) == -1) {
1117         errno = EBADF;
1118         goto bad_SetLinkCount;
1119     }
1120
1121
1122     code = read(fdP->fd_fd, (char *)&row, sizeof(row));
1123     if (code != sizeof(row)) {
1124         if (code != 0) {
1125             errno = EBADF;
1126             goto bad_SetLinkCount;
1127         }
1128         row = 0;
1129     }
1130
1131     junk = 7 << index;
1132     count <<= index;
1133     row &= (unsigned short)~junk;
1134     row |= (unsigned short)count;
1135
1136     if (afs_lseek(fdP->fd_fd, offset, SEEK_SET) == -1) {
1137         errno = EBADF;
1138         goto bad_SetLinkCount;
1139     }
1140
1141     if (write(fdP->fd_fd, (char *)&row, sizeof(short)) != sizeof(short)) {
1142         errno = EBADF;
1143         goto bad_SetLinkCount;
1144     }
1145     FDH_SYNC(fdP);
1146
1147     code = 0;
1148
1149
1150   bad_SetLinkCount:
1151     flock(fdP->fd_fd, LOCK_UN);
1152
1153     return code;
1154 }
1155
1156
1157 /* ListViceInodes - write inode data to a results file. */
1158 static int DecodeInode(char *dpath, char *name, struct ViceInodeInfo *info,
1159                        int volid);
1160 static int DecodeVolumeName(char *name, int *vid);
1161 static int namei_ListAFSSubDirs(IHandle_t * dirIH,
1162                                 int (*write_fun) (FILE *,
1163                                                   struct ViceInodeInfo *,
1164                                                   char *, char *), FILE * fp,
1165                                 int (*judgeFun) (struct ViceInodeInfo *,
1166                                                  afs_uint32 vid, void *),
1167                                 afs_uint32 singleVolumeNumber, void *rock);
1168
1169
1170 /* WriteInodeInfo
1171  *
1172  * Write the inode data to the results file. 
1173  *
1174  * Returns -2 on error, 0 on success.
1175  *
1176  * This is written as a callback simply so that other listing routines
1177  * can use the same inode reading code.
1178  */
1179 static int
1180 WriteInodeInfo(FILE * fp, struct ViceInodeInfo *info, char *dir, char *name)
1181 {
1182     int n;
1183     n = fwrite(info, sizeof(*info), 1, fp);
1184     return (n == 1) ? 0 : -2;
1185 }
1186
1187
1188 int mode_errors;                /* Number of errors found in mode bits on directories. */
1189 void
1190 VerifyDirPerms(char *path)
1191 {
1192     struct afs_stat status;
1193
1194     if (afs_stat(path, &status) < 0) {
1195         Log("Unable to stat %s. Please manually verify mode bits for this"
1196             " directory\n", path);
1197     } else {
1198         if (((status.st_mode & 0777) != 0700) || (status.st_uid != 0))
1199             mode_errors++;
1200     }
1201 }
1202
1203 /* ListViceInodes
1204  * Fill the results file with the requested inode information.
1205  *
1206  * Return values:
1207  *  0 - success
1208  * -1 - complete failure, salvage should terminate.
1209  * -2 - not enough space on partition, salvager has error message for this.
1210  *
1211  * This code optimizes single volume salvages by just looking at that one
1212  * volume's directory. 
1213  *
1214  * If the resultFile is NULL, then don't call the write routine.
1215  */
1216 int
1217 ListViceInodes(char *devname, char *mountedOn, char *resultFile,
1218                int (*judgeInode) (struct ViceInodeInfo * info, afs_uint32 vid, void *rock),
1219                afs_uint32 singleVolumeNumber, int *forcep, int forceR, char *wpath, 
1220                void *rock)
1221 {
1222     FILE *fp = (FILE *) - 1;
1223     int ninodes;
1224     struct afs_stat status;
1225
1226     *forcep = 0; /* no need to salvage until further notice */
1227
1228     if (resultFile) {
1229         fp = afs_fopen(resultFile, "w");
1230         if (!fp) {
1231             Log("Unable to create inode description file %s\n", resultFile);
1232             return -1;
1233         }
1234     }
1235
1236     /* Verify protections on directories. */
1237     mode_errors = 0;
1238     VerifyDirPerms(mountedOn);
1239
1240     ninodes =
1241         namei_ListAFSFiles(mountedOn, WriteInodeInfo, fp, judgeInode,
1242                            singleVolumeNumber, rock);
1243
1244     if (!resultFile)
1245         return ninodes;
1246
1247     if (ninodes < 0) {
1248         fclose(fp);
1249         return ninodes;
1250     }
1251
1252     if (fflush(fp) == EOF) {
1253         Log("Unable to successfully flush inode file for %s\n", mountedOn);
1254         fclose(fp);
1255         return -2;
1256     }
1257     if (fsync(fileno(fp)) == -1) {
1258         Log("Unable to successfully fsync inode file for %s\n", mountedOn);
1259         fclose(fp);
1260         return -2;
1261     }
1262     if (fclose(fp) == EOF) {
1263         Log("Unable to successfully close inode file for %s\n", mountedOn);
1264         return -2;
1265     }
1266
1267     /*
1268      * Paranoia:  check that the file is really the right size
1269      */
1270     if (afs_stat(resultFile, &status) == -1) {
1271         Log("Unable to successfully stat inode file for %s\n", mountedOn);
1272         return -2;
1273     }
1274     if (status.st_size != ninodes * sizeof(struct ViceInodeInfo)) {
1275         Log("Wrong size (%d instead of %d) in inode file for %s\n",
1276             status.st_size, ninodes * sizeof(struct ViceInodeInfo),
1277             mountedOn);
1278         return -2;
1279     }
1280     return 0;
1281 }
1282
1283
1284 /* namei_ListAFSFiles
1285  *
1286  * Collect all the matching AFS files on the drive.
1287  * If singleVolumeNumber is non-zero, just return files for that volume.
1288  *
1289  * Returns <0 on error, else number of files found to match.
1290  */
1291 int
1292 namei_ListAFSFiles(char *dev,
1293                    int (*writeFun) (FILE *, struct ViceInodeInfo *, char *,
1294                                     char *), FILE * fp,
1295                    int (*judgeFun) (struct ViceInodeInfo *, afs_uint32, void *),
1296                    afs_uint32 singleVolumeNumber, void *rock)
1297 {
1298     IHandle_t ih;
1299     namei_t name;
1300     int ninodes = 0;
1301     DIR *dirp1, *dirp2;
1302     struct dirent *dp1, *dp2;
1303     char path2[512];
1304 #ifdef DELETE_ZLC
1305     static void FreeZLCList(void);
1306 #endif
1307
1308     memset((void *)&ih, 0, sizeof(IHandle_t));
1309     ih.ih_dev = volutil_GetPartitionID(dev);
1310
1311     if (singleVolumeNumber) {
1312         ih.ih_vid = singleVolumeNumber;
1313         namei_HandleToVolDir(&name, &ih);
1314         ninodes =
1315             namei_ListAFSSubDirs(&ih, writeFun, fp, judgeFun,
1316                                  singleVolumeNumber, rock);
1317         if (ninodes < 0)
1318             return ninodes;
1319     } else {
1320         /* Find all volume data directories and descend through them. */
1321         namei_HandleToInodeDir(&name, &ih);
1322         ninodes = 0;
1323         dirp1 = opendir(name.n_path);
1324         if (!dirp1)
1325             return 0;
1326         while ((dp1 = readdir(dirp1))) {
1327             if (*dp1->d_name == '.')
1328                 continue;
1329             (void)strcpy(path2, name.n_path);
1330             (void)strcat(path2, "/");
1331             (void)strcat(path2, dp1->d_name);
1332             dirp2 = opendir(path2);
1333             if (dirp2) {
1334                 while ((dp2 = readdir(dirp2))) {
1335                     if (*dp2->d_name == '.')
1336                         continue;
1337                     if (!DecodeVolumeName(dp2->d_name, &ih.ih_vid)) {
1338                         ninodes +=
1339                             namei_ListAFSSubDirs(&ih, writeFun, fp, judgeFun,
1340                                                  0, rock);
1341                     }
1342                 }
1343                 closedir(dirp2);
1344             }
1345         }
1346         closedir(dirp1);
1347     }
1348 #ifdef DELETE_ZLC
1349     FreeZLCList();
1350 #endif
1351     return ninodes;
1352 }
1353
1354
1355
1356 /* namei_ListAFSSubDirs
1357  *
1358  *
1359  * Return values:
1360  * < 0 - an error
1361  * > = 0 - number of AFS files found.
1362  */
1363 static int
1364 namei_ListAFSSubDirs(IHandle_t * dirIH,
1365                      int (*writeFun) (FILE *, struct ViceInodeInfo *, char *,
1366                                       char *), FILE * fp,
1367                      int (*judgeFun) (struct ViceInodeInfo *, afs_uint32, void *),
1368                      afs_uint32 singleVolumeNumber, void *rock)
1369 {
1370     IHandle_t myIH = *dirIH;
1371     namei_t name;
1372     char path1[512], path2[512], path3[512];
1373     DIR *dirp1, *dirp2, *dirp3;
1374     struct dirent *dp1, *dp2, *dp3;
1375     struct ViceInodeInfo info;
1376     FdHandle_t linkHandle;
1377     int ninodes = 0;
1378 #ifdef DELETE_ZLC
1379     int i;
1380     static void AddToZLCDeleteList(char dir, char *name);
1381     static void DeleteZLCFiles(char *path);
1382 #endif
1383
1384     namei_HandleToVolDir(&name, &myIH);
1385     (void)strcpy(path1, name.n_path);
1386
1387     /* Do the directory containing the special files first to pick up link
1388      * counts.
1389      */
1390     (void)strcat(path1, "/");
1391     (void)strcat(path1, NAMEI_SPECDIR);
1392
1393     linkHandle.fd_fd = -1;
1394     dirp1 = opendir(path1);
1395     if (dirp1) {
1396         while ((dp1 = readdir(dirp1))) {
1397             if (*dp1->d_name == '.')
1398                 continue;
1399             if (DecodeInode(path1, dp1->d_name, &info, myIH.ih_vid) < 0)
1400                 continue;
1401             if (info.u.param[2] != VI_LINKTABLE) {
1402                 info.linkCount = 1;
1403             } else {
1404                 /* Open this handle */
1405                 (void)afs_snprintf(path2, sizeof path2, "%s/%s", path1,
1406                                    dp1->d_name);
1407                 linkHandle.fd_fd = afs_open(path2, Testing ? O_RDONLY : O_RDWR, 0666);
1408                 info.linkCount =
1409                     namei_GetLinkCount2(&linkHandle, (Inode) 0, 1, 1, Testing);
1410             }
1411             if (judgeFun && !(*judgeFun) (&info, singleVolumeNumber, rock))
1412                 continue;
1413
1414             if ((*writeFun) (fp, &info, path1, dp1->d_name) < 0) {
1415                 if (linkHandle.fd_fd >= 0)
1416                     close(linkHandle.fd_fd);
1417                 closedir(dirp1);
1418                 return -1;
1419             }
1420             ninodes++;
1421         }
1422         closedir(dirp1);
1423     }
1424
1425     /* Now run through all the other subdirs */
1426     namei_HandleToVolDir(&name, &myIH);
1427     (void)strcpy(path1, name.n_path);
1428
1429     dirp1 = opendir(path1);
1430     if (dirp1) {
1431         while ((dp1 = readdir(dirp1))) {
1432             if (*dp1->d_name == '.')
1433                 continue;
1434             if (!strcmp(dp1->d_name, NAMEI_SPECDIR))
1435                 continue;
1436
1437             /* Now we've got a next level subdir. */
1438             (void)strcpy(path2, path1);
1439             (void)strcat(path2, "/");
1440             (void)strcat(path2, dp1->d_name);
1441             dirp2 = opendir(path2);
1442             if (dirp2) {
1443                 while ((dp2 = readdir(dirp2))) {
1444                     if (*dp2->d_name == '.')
1445                         continue;
1446
1447                     /* Now we've got to the actual data */
1448                     (void)strcpy(path3, path2);
1449                     (void)strcat(path3, "/");
1450                     (void)strcat(path3, dp2->d_name);
1451                     dirp3 = opendir(path3);
1452                     if (dirp3) {
1453                         while ((dp3 = readdir(dirp3))) {
1454                             if (*dp3->d_name == '.')
1455                                 continue;
1456                             if (DecodeInode
1457                                 (path3, dp3->d_name, &info, myIH.ih_vid) < 0)
1458                                 continue;
1459                             info.linkCount =
1460                                 namei_GetLinkCount2(&linkHandle,
1461                                                    info.inodeNumber, 1, 1, Testing);
1462                             if (info.linkCount == 0) {
1463 #ifdef DELETE_ZLC
1464                                 Log("Found 0 link count file %s/%s, deleting it.\n", path3, dp3->d_name);
1465                                 AddToZLCDeleteList((char)i, dp3->d_name);
1466 #else
1467                                 Log("Found 0 link count file %s/%s.\n", path3,
1468                                     dp3->d_name);
1469 #endif
1470                                 continue;
1471                             }
1472                             if (judgeFun
1473                                 && !(*judgeFun) (&info, singleVolumeNumber, rock))
1474                                 continue;
1475
1476                             if ((*writeFun) (fp, &info, path3, dp3->d_name) <
1477                                 0) {
1478                                 close(linkHandle.fd_fd);
1479                                 closedir(dirp3);
1480                                 closedir(dirp2);
1481                                 closedir(dirp1);
1482                                 return -1;
1483                             }
1484                             ninodes++;
1485                         }
1486                         closedir(dirp3);
1487                     }
1488                 }
1489                 closedir(dirp2);
1490             }
1491         }
1492         closedir(dirp1);
1493     }
1494
1495     if (linkHandle.fd_fd >= 0)
1496         close(linkHandle.fd_fd);
1497     if (!ninodes) {
1498         /* Then why does this directory exist? Blow it away. */
1499         namei_HandleToVolDir(&name, dirIH);
1500         namei_RemoveDataDirectories(&name);
1501     }
1502
1503     return ninodes;
1504 }
1505
1506 static int
1507 DecodeVolumeName(char *name, int *vid)
1508 {
1509     if (strlen(name) <= 2)
1510         return -1;
1511     *vid = (int)flipbase64_to_int64(name);
1512     return 0;
1513 }
1514
1515
1516 /* DecodeInode
1517  *
1518  * Get the inode number from the name.
1519  * Get
1520  */
1521 static int
1522 DecodeInode(char *dpath, char *name, struct ViceInodeInfo *info, int volid)
1523 {
1524     char fpath[512];
1525     struct afs_stat status;
1526     int parm, tag;
1527     lb64_string_t check;
1528
1529     (void)strcpy(fpath, dpath);
1530     (void)strcat(fpath, "/");
1531     (void)strcat(fpath, name);
1532
1533     if (afs_stat(fpath, &status) < 0) {
1534         return -1;
1535     }
1536
1537     info->byteCount = status.st_size;
1538     info->inodeNumber = (Inode) flipbase64_to_int64(name);
1539
1540     int64_to_flipbase64(check, info->inodeNumber);
1541     if (strcmp(name, check))
1542         return -1;
1543     
1544     GetOGMFromStat(&status, &parm, &tag);
1545     if ((info->inodeNumber & NAMEI_INODESPECIAL) == NAMEI_INODESPECIAL) {
1546         /* p1 - vid, p2 - -1, p3 - type, p4 - rwvid */
1547         info->u.param[0] = parm;
1548         info->u.param[1] = -1;
1549         info->u.param[2] = tag;
1550         info->u.param[3] = volid;
1551     } else {
1552         /* p1 - vid, p2 - vno, p3 - uniq, p4 - dv */
1553         info->u.param[0] = volid;
1554         info->u.param[1] = (int)(info->inodeNumber & NAMEI_VNODEMASK);
1555         info->u.param[2] = (int)((info->inodeNumber >> NAMEI_UNIQSHIFT)
1556                                  & (Inode) NAMEI_UNIQMASK);
1557         info->u.param[3] = parm;
1558     }
1559     return 0;
1560 }
1561
1562 /*
1563  * Convert the VolumeInfo file from RO to RW
1564  * this routine is called by namei_convertROtoRWvolume()
1565  */
1566
1567 static afs_int32
1568 convertVolumeInfo(int fdr, int fdw, afs_uint32 vid)
1569 {
1570     struct VolumeDiskData vd;
1571     char *p;
1572
1573     if (read(fdr, &vd, sizeof(struct VolumeDiskData)) !=
1574         sizeof(struct VolumeDiskData)) {
1575         Log("1 convertVolumeInfo: read failed for %lu with code %d\n", vid,
1576             errno);
1577         return -1;
1578     }
1579     vd.restoredFromId = vd.id;  /* remember the RO volume here */
1580     vd.cloneId = vd.id;
1581     vd.id = vd.parentId;
1582     vd.type = RWVOL;
1583     vd.dontSalvage = 0;
1584     vd.uniquifier += 5000;      /* just in case there are still file copies from
1585                                  * the old RW volume around */
1586     p = strrchr(vd.name, '.');
1587     if (p && !strcmp(p, ".readonly")) {
1588         memset(p, 0, 9);
1589     }
1590     if (write(fdw, &vd, sizeof(struct VolumeDiskData)) !=
1591         sizeof(struct VolumeDiskData)) {
1592         Log("1 convertVolumeInfo: write failed for %lu with code %d\n", vid,
1593             errno);
1594         return -1;
1595     }
1596     return 0;
1597 }
1598
1599 /*
1600  * Convert a RO-volume into a RW-volume
1601  *
1602  * This function allows to recover very fast from the loss of a partition
1603  * from RO-copies if all RO-Copies exist on another partition.
1604  * Then these RO-volumes can be made to the new RW-volumes.
1605  * Backup of RW-volumes then consists in "vos release".
1606  *
1607  * We must make sure in this partition exists only the RO-volume which
1608  * is typical for remote replicas.
1609  *
1610  * Then the linktable is already ok,
1611  *      the vnode files need to be renamed
1612  *      the volinfo file needs to be replaced by another one with
1613  *                      slightly different contents and new name.
1614  * The volume header file of the RO-volume in the /vicep<x> directory
1615  * is destroyed by this call. A new header file for the RW-volume must
1616  * be created after return from this routine.
1617  */
1618
1619 int
1620 namei_ConvertROtoRWvolume(char *pname, afs_uint32 volumeId)
1621 {
1622 #ifdef FSSYNC_BUILD_CLIENT
1623     namei_t n;
1624     char dir_name[512], oldpath[512], newpath[512];
1625     char smallName[64];
1626     char largeName[64];
1627     char infoName[64];
1628     IHandle_t t_ih;
1629     IHandle_t *ih;
1630     char infoSeen = 0;
1631     char smallSeen = 0;
1632     char largeSeen = 0;
1633     char linkSeen = 0;
1634     int code, fd, fd2;
1635     char *p;
1636     DIR *dirp;
1637     Inode ino;
1638     struct dirent *dp;
1639     struct DiskPartition64 *partP;
1640     struct ViceInodeInfo info;
1641     struct VolumeDiskHeader h;
1642     char headername[16];
1643     afs_int32 error = 0;
1644
1645     (void)afs_snprintf(headername, sizeof headername, VFORMAT, afs_cast_uint32(volumeId));
1646     (void)afs_snprintf(oldpath, sizeof oldpath, "%s/%s", pname, headername);
1647     fd = open(oldpath, O_RDONLY);
1648     if (fd < 0) {
1649         Log("1 namei_ConvertROtoRWvolume: Couldn't open header for RO-volume %lu.\n", volumeId);
1650         return ENOENT;
1651     }
1652     if (read(fd, &h, sizeof(h)) != sizeof(h)) {
1653         Log("1 namei_ConvertROtoRWvolume: Couldn't read header for RO-volume %lu.\n", volumeId);
1654         close(fd);
1655         return EIO;
1656     }
1657     close(fd);
1658     FSYNC_VolOp(volumeId, pname, FSYNC_VOL_BREAKCBKS, 0, NULL);
1659
1660     for (partP = DiskPartitionList; partP && strcmp(partP->name, pname);
1661          partP = partP->next);
1662     if (!partP) {
1663         Log("1 namei_ConvertROtoRWvolume: Couldn't find DiskPartition for %s\n", pname);
1664         return EIO;
1665     }
1666     ino = namei_MakeSpecIno(h.parent, VI_LINKTABLE);
1667     IH_INIT(ih, partP->device, h.parent, ino);
1668
1669     namei_HandleToName(&n, ih);
1670     strcpy(dir_name, n.n_path);
1671     p = strrchr(dir_name, '/');
1672     *p = 0;
1673     dirp = opendir(dir_name);
1674     if (!dirp) {
1675         Log("1 namei_ConvertROtoRWvolume: Could not opendir(%s)\n", dir_name);
1676         return EIO;
1677     }
1678
1679     while ((dp = readdir(dirp))) {
1680         /* struct ViceInodeInfo info; */
1681
1682         if (*dp->d_name == '.')
1683             continue;
1684         if (DecodeInode(dir_name, dp->d_name, &info, ih->ih_vid) < 0) {
1685             Log("1 namei_ConvertROtoRWvolume: DecodeInode failed for %s/%s\n",
1686                 dir_name, dp->d_name);
1687             closedir(dirp);
1688             return -1;
1689         }
1690         if (info.u.param[1] != -1) {
1691             Log("1 namei_ConvertROtoRWvolume: found other than volume special file %s/%s\n", dir_name, dp->d_name);
1692             closedir(dirp);
1693             return -1;
1694         }
1695         if (info.u.param[0] != volumeId) {
1696             if (info.u.param[0] == ih->ih_vid) {
1697                 if (info.u.param[2] == VI_LINKTABLE) {  /* link table */
1698                     linkSeen = 1;
1699                     continue;
1700                 }
1701             }
1702             Log("1 namei_ConvertROtoRWvolume: found special file %s/%s for volume %lu\n", dir_name, dp->d_name, info.u.param[0]);
1703             closedir(dirp);
1704             return VVOLEXISTS;
1705         }
1706         if (info.u.param[2] == VI_VOLINFO) {    /* volume info file */
1707             strcpy(infoName, dp->d_name);
1708             infoSeen = 1;
1709         } else if (info.u.param[2] == VI_SMALLINDEX) {  /* small vnodes file */
1710             strcpy(smallName, dp->d_name);
1711             smallSeen = 1;
1712         } else if (info.u.param[2] == VI_LARGEINDEX) {  /* large vnodes file */
1713             strcpy(largeName, dp->d_name);
1714             largeSeen = 1;
1715         } else {
1716             closedir(dirp);
1717             Log("1 namei_ConvertROtoRWvolume: unknown type %d of special file found : %s/%s\n", info.u.param[2], dir_name, dp->d_name);
1718             return -1;
1719         }
1720     }
1721     closedir(dirp);
1722
1723     if (!infoSeen || !smallSeen || !largeSeen || !linkSeen) {
1724         Log("1 namei_ConvertROtoRWvolume: not all special files found in %s\n", dir_name);
1725         return -1;
1726     }
1727
1728     /*
1729      * If we come here then there was only a RO-volume and we can safely
1730      * proceed.
1731      */
1732
1733     memset(&t_ih, 0, sizeof(t_ih));
1734     t_ih.ih_dev = ih->ih_dev;
1735     t_ih.ih_vid = ih->ih_vid;
1736
1737     (void)afs_snprintf(oldpath, sizeof oldpath, "%s/%s", dir_name, infoName);
1738     fd = afs_open(oldpath, O_RDWR, 0);
1739     if (fd < 0) {
1740         Log("1 namei_ConvertROtoRWvolume: could not open RO info file: %s\n",
1741             oldpath);
1742         return -1;
1743     }
1744     t_ih.ih_ino = namei_MakeSpecIno(ih->ih_vid, VI_VOLINFO);
1745     namei_HandleToName(&n, &t_ih);
1746     fd2 = afs_open(n.n_path, O_CREAT | O_EXCL | O_TRUNC | O_RDWR, 0);
1747     if (fd2 < 0) {
1748         Log("1 namei_ConvertROtoRWvolume: could not create RW info file: %s\n", n.n_path);
1749         close(fd);
1750         return -1;
1751     }
1752     code = convertVolumeInfo(fd, fd2, ih->ih_vid);
1753     close(fd);
1754     if (code) {
1755         close(fd2);
1756         unlink(n.n_path);
1757         return -1;
1758     }
1759     SetOGM(fd2, ih->ih_vid, 1);
1760     close(fd2);
1761
1762     t_ih.ih_ino = namei_MakeSpecIno(ih->ih_vid, VI_SMALLINDEX);
1763     namei_HandleToName(&n, &t_ih);
1764     (void)afs_snprintf(newpath, sizeof newpath, "%s/%s", dir_name, smallName);
1765     fd = afs_open(newpath, O_RDWR, 0);
1766     if (fd < 0) {
1767         Log("1 namei_ConvertROtoRWvolume: could not open SmallIndex file: %s\n", newpath);
1768         return -1;
1769     }
1770     SetOGM(fd, ih->ih_vid, 2);
1771     close(fd);
1772     link(newpath, n.n_path);
1773     unlink(newpath);
1774
1775     t_ih.ih_ino = namei_MakeSpecIno(ih->ih_vid, VI_LARGEINDEX);
1776     namei_HandleToName(&n, &t_ih);
1777     (void)afs_snprintf(newpath, sizeof newpath, "%s/%s", dir_name, largeName);
1778     fd = afs_open(newpath, O_RDWR, 0);
1779     if (fd < 0) {
1780         Log("1 namei_ConvertROtoRWvolume: could not open LargeIndex file: %s\n", newpath);
1781         return -1;
1782     }
1783     SetOGM(fd, ih->ih_vid, 3);
1784     close(fd);
1785     link(newpath, n.n_path);
1786     unlink(newpath);
1787
1788     unlink(oldpath);
1789
1790     h.id = h.parent;
1791     h.volumeInfo_hi = h.id;
1792     h.smallVnodeIndex_hi = h.id;
1793     h.largeVnodeIndex_hi = h.id;
1794     h.linkTable_hi = h.id;
1795     (void)afs_snprintf(headername, sizeof headername, VFORMAT, afs_cast_uint32(h.id));
1796     (void)afs_snprintf(newpath, sizeof newpath, "%s/%s", pname, headername);
1797     fd = open(newpath, O_CREAT | O_EXCL | O_RDWR, 0644);
1798     if (fd < 0) {
1799         Log("1 namei_ConvertROtoRWvolume: Couldn't create header for RW-volume %lu.\n", h.id);
1800         return EIO;
1801     }
1802     if (write(fd, &h, sizeof(h)) != sizeof(h)) {
1803         Log("1 namei_ConvertROtoRWvolume: Couldn't write header for RW-volume\
1804  %lu.\n", h.id);
1805         close(fd);
1806         return EIO;
1807     }
1808     close(fd);
1809     if (unlink(oldpath) < 0) {
1810         Log("1 namei_ConvertROtoRWvolume: Couldn't unlink RO header, error = %d\n", error);
1811     }
1812     FSYNC_VolOp(volumeId, pname, FSYNC_VOL_DONE, 0, NULL);
1813     FSYNC_VolOp(h.id, pname, FSYNC_VOL_ON, 0, NULL);
1814 #endif
1815     return 0;
1816 }
1817
1818 /* PrintInode
1819  *
1820  * returns a static string used to print either 32 or 64 bit inode numbers.
1821  */
1822 char *
1823 PrintInode(char *s, Inode ino)
1824 {
1825     static afs_ino_str_t result;
1826     if (!s)
1827         s = result;
1828
1829     (void)afs_snprintf(s, sizeof(afs_ino_str_t), "%llu", (afs_uintmax_t) ino);
1830
1831     return s;
1832 }
1833
1834
1835 #ifdef DELETE_ZLC
1836 /* Routines to facilitate removing zero link count files. */
1837 #define MAX_ZLC_NAMES 32
1838 #define MAX_ZLC_NAMELEN 16
1839 typedef struct zlcList_s {
1840     struct zlcList_s *zlc_next;
1841     int zlc_n;
1842     char zlc_names[MAX_ZLC_NAMES][MAX_ZLC_NAMELEN];
1843 } zlcList_t;
1844
1845 static zlcList_t *zlcAnchor = NULL;
1846 static zlcList_t *zlcCur = NULL;
1847
1848 static void
1849 AddToZLCDeleteList(char dir, char *name)
1850 {
1851     assert(strlen(name) <= MAX_ZLC_NAMELEN - 3);
1852
1853     if (!zlcCur || zlcCur->zlc_n >= MAX_ZLC_NAMES) {
1854         if (zlcCur && zlcCur->zlc_next)
1855             zlcCur = zlcCur->zlc_next;
1856         else {
1857             zlcList_t *tmp = (zlcList_t *) malloc(sizeof(zlcList_t));
1858             if (!tmp)
1859                 return;
1860             if (!zlcAnchor) {
1861                 zlcAnchor = tmp;
1862             } else {
1863                 zlcCur->zlc_next = tmp;
1864             }
1865             zlcCur = tmp;
1866             zlcCur->zlc_n = 0;
1867             zlcCur->zlc_next = NULL;
1868         }
1869     }
1870
1871     (void)sprintf(zlcCur->zlc_names[zlcCur->zlc_n], "%c\\%s", dir, name);
1872     zlcCur->zlc_n++;
1873 }
1874
1875 static void
1876 DeleteZLCFiles(char *path)
1877 {
1878     zlcList_t *z;
1879     int i;
1880     char fname[1024];
1881
1882     for (z = zlcAnchor; z; z = z->zlc_next) {
1883         for (i = 0; i < z->zlc_n; i++) {
1884             (void)sprintf(fname, "%s\\%s", path, z->zlc_names[i]);
1885             if (namei_unlink(fname) < 0) {
1886                 Log("ZLC: Can't unlink %s, dos error = %d\n", fname,
1887                     GetLastError());
1888             }
1889         }
1890         z->zlc_n = 0;           /* Can reuse space. */
1891     }
1892     zlcCur = zlcAnchor;
1893 }
1894
1895 static void
1896 FreeZLCList(void)
1897 {
1898     zlcList_t *tnext;
1899     zlcList_t *i;
1900
1901     i = zlcAnchor;
1902     while (i) {
1903         tnext = i->zlc_next;
1904         free(i);
1905         i = tnext;
1906     }
1907     zlcCur = zlcAnchor = NULL;
1908 }
1909 #endif
1910
1911 #endif /* AFS_NAMEI_ENV */