src/volser/dumpstuff.c

   1 /*
   2  * Copyright 2000, International Business Machines Corporation and others.
   3  * All Rights Reserved.
   4  *
   5  * This software has been released under the terms of the IBM Public
   6  * License.  For details, see the LICENSE file in the top-level source
   7  * directory or online at http://www.openafs.org/dl/license10.html
   8  */
   9
  10 #include <afsconfig.h>
  11 #include <afs/param.h>
  12
  13 #include <roken.h>
  14
  15 #include <ctype.h>
  16
  17 #include <afs/opr.h>
  18 #include <rx/rx.h>
  19 #include <rx/rx_queue.h>
  20 #include <afs/afsint.h>
  21 #include <afs/nfs.h>
  22 #include <afs/errors.h>
  23 #include <lock.h>
  24 #include <lwp.h>
  25 #include <afs/ihandle.h>
  26 #include <afs/vnode.h>
  27 #include <afs/volume.h>
  28 #include <afs/partition.h>
  29 #include <afs/daemon_com.h>
  30 #include <afs/fssync.h>
  31 #include <afs/acl.h>
  32 #include <afs/com_err.h>
  33 #include <afs/vol_prototypes.h>
  34
  35 #include "dump.h"
  36 #include "volser.h"
  37 #include "volint.h"
  38 #include "dumpstuff.h"
  39
  40 #ifndef AFS_NT40_ENV
  41 #ifdef O_LARGEFILE
  42 #define afs_stat        stat64
  43 #define afs_fstat       fstat64
  44 #else /* !O_LARGEFILE */
  45 #define afs_stat        stat
  46 #define afs_fstat       fstat
  47 #endif /* !O_LARGEFILE */
  48 #endif /* !AFS_NT40_ENV */
  49
  50 /*@printflike@*/ extern void Log(const char *format, ...);
  51
  52 extern int DoLogging;
  53 extern int DoPreserveVolumeStats;
  54
  55
  56 /* Forward Declarations */
  57 static int DumpDumpHeader(struct iod *iodp, Volume * vp,
  58                           afs_int32 fromtime);
  59 static int DumpPartial(struct iod *iodp, Volume * vp,
  60                        afs_int32 fromtime, int dumpAllDirs);
  61 static int DumpVnodeIndex(struct iod *iodp, Volume * vp,
  62                           VnodeClass class, afs_int32 fromtime,
  63                           int forcedump);
  64 static int DumpVnode(struct iod *iodp, struct VnodeDiskObject *v,
  65                      VolumeId volid, int vnodeNumber, int dumpEverything);
  66 static int ReadDumpHeader(struct iod *iodp, struct DumpHeader *hp);
  67 static int ReadVnodes(struct iod *iodp, Volume * vp, int incremental,
  68                       afs_foff_t * Lbuf, afs_int32 s1, afs_foff_t * Sbuf,
  69                       afs_int32 s2, afs_int32 delo);
  70 static afs_fsize_t volser_WriteFile(int vn, struct iod *iodp,
  71                                     FdHandle_t * handleP, int tag,
  72                                     Error * status);
  73
  74 static int SizeDumpDumpHeader(struct iod *iodp, Volume * vp,
  75                               afs_int32 fromtime,
  76                               struct volintSize *size);
  77 static int SizeDumpPartial(struct iod *iodp, Volume * vp,
  78                            afs_int32 fromtime, int dumpAllDirs,
  79                            struct volintSize *size);
  80 static int SizeDumpVnodeIndex(struct iod *iodp, Volume * vp,
  81                               VnodeClass class, afs_int32 fromtime,
  82                               int forcedump,
  83                               struct volintSize *size);
  84 static int SizeDumpVnode(struct iod *iodp, struct VnodeDiskObject *v,
  85                          VolumeId volid, int vnodeNumber, int dumpEverything,
  86                          struct volintSize *size);
  87
  88 #define MAX_SECTIONS    3
  89
  90 /* The TLV range must start above D_MAX */
  91 #define MIN_TLV_TAG     21
  92 #define MAX_TLV_TAG     0x60
  93 #define MAX_STANDARD_TAG 0x7a
  94 static afs_uint32 oldtags[MAX_SECTIONS][16];
  95 int oldtagsInited = 0;
  96
  97 static void
  98 RegisterTag(afs_int32 section, unsigned char tag)
  99 {
 100     afs_uint32 off = tag >> 5;
 101     afs_uint32 mask = 1 << (tag & 0x1f);
 102     oldtags[section][off] |= mask;
 103 }
 104
 105 static void
 106 initNonStandardTags(void)
 107 {
 108     RegisterTag(0, 'n');                /* volume name */
 109     RegisterTag(0, 't');                /* fromtime, V_backupDate */
 110     RegisterTag(1, 'A');                /* V_accessDate */
 111     RegisterTag(1, 'C');                /* V_creationDate */
 112     RegisterTag(1, 'D');                /* V_dayUseDate */
 113     RegisterTag(1, 'E');                /* V_expirationDate */
 114     RegisterTag(1, 'M');                /* nullstring (motd) */
 115     RegisterTag(1, 'U');                /* V_updateDate */
 116     RegisterTag(1, 'W');                /* V_weekUse */
 117     RegisterTag(1, 'Z');                /* V_dayUse */
 118     RegisterTag(1, 'O');                /* V_offlineMessage */
 119     RegisterTag(1, 'b');                /* V_blessed */
 120     RegisterTag(1, 'n');                /* V_name */
 121     RegisterTag(1, 's');                /* V_inService */
 122     RegisterTag(1, 't');                /* V_type */
 123     RegisterTag(2, 'A');                /* VVnodeDiskACL */
 124     RegisterTag(2, 'b');                /* modeBits */
 125     RegisterTag(2, 'f');                /* small file */
 126     RegisterTag(2, 'h');                /* large file */
 127     RegisterTag(2, 'l');                /* linkcount */
 128     RegisterTag(2, 't');                /* type */
 129     oldtagsInited = 1;
 130 }
 131
 132 static void
 133 iod_Init(struct iod *iodp, struct rx_call *call)
 134 {
 135     iodp->call = call;
 136     iodp->haveOldChar = 0;
 137     iodp->ncalls = 1;
 138     iodp->calls = (struct rx_call **)0;
 139 }
 140
 141 static void
 142 iod_InitMulti(struct iod *iodp, struct rx_call **calls, int ncalls,
 143               int *codes)
 144 {
 145
 146     iodp->calls = calls;
 147     iodp->haveOldChar = 0;
 148     iodp->ncalls = ncalls;
 149     iodp->codes = codes;
 150     iodp->call = (struct rx_call *)0;
 151 }
 152
 153 /* N.B. iod_Read doesn't check for oldchar (see previous comment) */
 154 #define iod_Read(iodp, buf, nbytes) rx_Read((iodp)->call, buf, nbytes)
 155
 156 /* For the single dump case, it's ok to just return the "bytes written"
 157  * that rx_Write returns, since all the callers of iod_Write abort when
 158  * the returned value is less than they expect.  For the multi dump case,
 159  * I don't think we want half the replicas to go bad just because one
 160  * connection timed out, but if they all time out, then we should give up.
 161  */
 162 static int
 163 iod_Write(struct iod *iodp, char *buf, int nbytes)
 164 {
 165     int code, i;
 166     int one_success = 0;
 167
 168     opr_Assert((iodp->call && iodp->ncalls == 1 && !iodp->calls)
 169            || (!iodp->call && iodp->ncalls >= 1 && iodp->calls));
 170
 171     if (iodp->call) {
 172         code = rx_Write(iodp->call, buf, nbytes);
 173         return code;
 174     }
 175
 176     for (i = 0; i < iodp->ncalls; i++) {
 177         if (iodp->calls[i] && !iodp->codes[i]) {
 178             code = rx_Write(iodp->calls[i], buf, nbytes);
 179             if (code != nbytes) {       /* everything gets merged into a single error */
 180                 iodp->codes[i] = VOLSERDUMPERROR;       /* but that's exactly what the */
 181             } /* standard dump does, anyways */
 182             else {
 183                 one_success = TRUE;
 184             }
 185         }
 186     }                           /* for all calls */
 187
 188     if (one_success)
 189         return nbytes;
 190     else
 191         return 0;
 192 }
 193
 194 static void
 195 iod_ungetc(struct iod *iodp, int achar)
 196 {
 197     iodp->oldChar = achar;
 198     iodp->haveOldChar = 1;
 199 }
 200
 201 static int
 202 iod_getc(struct iod *iodp)
 203 {
 204     unsigned char t;
 205
 206     if (iodp->haveOldChar) {
 207         iodp->haveOldChar = 0;
 208         return iodp->oldChar;
 209     }
 210     if (iod_Read(iodp, (char *) &t, 1) == 1)
 211         return t;
 212     return EOF;
 213 }
 214
 215 static int
 216 ReadShort(struct iod *iodp, unsigned short *sp)
 217 {
 218     int b1, b0;
 219     b1 = iod_getc(iodp);
 220     if (b1 == EOF)
 221         return 0;
 222     b0 = iod_getc(iodp);
 223     if (b0 == EOF)
 224         return 0;
 225     *sp = (b1 << 8) | b0;
 226     return 1;
 227 }
 228
 229 static int
 230 ReadInt32(struct iod *iodp, afs_uint32 * lp)
 231 {
 232     afs_uint32 b3, b2, b1, b0;
 233     b3 = iod_getc(iodp);
 234     if (b3 == EOF)
 235         return 0;
 236     b2 = iod_getc(iodp);
 237     if (b2 == EOF)
 238         return 0;
 239     b1 = iod_getc(iodp);
 240     if (b1 == EOF)
 241         return 0;
 242     b0 = iod_getc(iodp);
 243     if (b0 == EOF)
 244         return 0;
 245     *lp = (((((b3 << 8) | b2) << 8) | b1) << 8) | b0;
 246     return 1;
 247 }
 248
 249 static void
 250 ReadString(struct iod *iodp, char *to, int maxa)
 251 {
 252     int c;
 253
 254     *to = '\0';
 255     if (maxa == 0)
 256         return;
 257
 258     while (maxa--) {
 259         if ((*to++ = c = iod_getc(iodp)) == 0 || c == EOF)
 260             break;
 261     }
 262     if (to[-1]) {
 263         while ((c = iod_getc(iodp)) && c != EOF);
 264         to[-1] = '\0';
 265     }
 266 }
 267
 268 static int
 269 ReadByteString(struct iod *iodp, byte * to, int size)
 270 {
 271     int nbytes = 0;
 272     int c;
 273
 274     while (size-- > 0 && (c = iod_getc(iodp)) != EOF) {
 275         *to++ = c;
 276         nbytes++;
 277     }
 278     return nbytes;
 279 }
 280
 281 /*
 282  * returns 1 on success and 0 otherwise
 283  */
 284 static afs_int32
 285 ReadStandardTagLen(struct iod *iodp, unsigned char tag, afs_int32 section,
 286                         afs_size_t *length)
 287 {
 288     afs_int32 code, i;
 289     afs_uint32 off = tag >> 5;
 290     afs_uint32 mask = 1 << (tag & 0x1f);
 291     int len;
 292     unsigned char buf[8], *p;
 293
 294     if (!oldtagsInited)
 295         initNonStandardTags();
 296
 297     if (tag < MIN_TLV_TAG
 298       || tag > MAX_STANDARD_TAG
 299       || section >= MAX_SECTIONS
 300       || (oldtags[section][ off] & mask)) {
 301         Log("Trying to use ReadStandardTag with tag 0x%02x for section %d, aborting\n", tag, section);
 302         return 0;
 303     }
 304     if (tag <= MAX_TLV_TAG) {
 305         len = iod_getc(iodp);
 306         if (len == EOF)
 307             return VOLSERDUMPERROR;
 308         else if (len < 128)
 309             *length = len;
 310         else {
 311             len &= 0x7f;
 312             if ((code = iod_Read(iodp, (char *)buf, len)) != len)
 313                 return VOLSERDUMPERROR;
 314             *length = 0;
 315             p = (unsigned char *)&buf;
 316             for (i=0; i<len; i++) {
 317                 *length = ((*length) << 8) | *p++;
 318             }
 319         }
 320     } else {
 321         if (tag < MAX_STANDARD_TAG)
 322             *length = 4;
 323     }
 324     return 1;
 325 }
 326
 327 static char skipbuf[256];
 328
 329 static afs_int32
 330 SkipData(struct iod *iodp, afs_size_t length)
 331 {
 332     while (length > 256) {
 333         if (iod_Read(iodp, (char *)&skipbuf, 256) != 256)
 334             return 0;
 335         length -= 256;
 336     }
 337     if (iod_Read(iodp, (char *)&skipbuf, length) != length)
 338         return 0;
 339     return 1;
 340 }
 341
 342 static char *secname[3] = {"ReadDumpHeader", "ReadVolumeHeader", "ReadVnodes"};
 343
 344 static int
 345 HandleUnknownTag(struct iod *iodp, int tag, afs_int32 section,
 346                 afs_int32 critical)
 347 {
 348     afs_size_t taglen = 0;
 349     afs_uint32 trash;
 350
 351     if (critical) {
 352         Log("%s: unknown critical tag x%02x, aborting\n",
 353                 secname[section], tag);
 354         return 0;
 355     }
 356     Log("%s: unknown tag x%02x found, skipping\n", secname[section], tag);
 357     if (tag >= 0x06 && tag <= 0x60) {
 358         if (!ReadStandardTagLen(iodp, tag, 1, &taglen)) {
 359             Log("%s: error reading length field for tag x%02x, aborting\n",
 360                 secname[section], tag);
 361             return 0;
 362         }
 363         if (!SkipData(iodp, taglen)) {
 364             Log("%s: error skipping %llu bytes for tag x%02x, aborting\n",
 365                 secname[section], taglen, tag);
 366             return 0;
 367         }
 368         return 1;
 369     }
 370     if (tag >= 0x61 && tag <= 0x7a) {
 371         if (!ReadInt32(iodp, &trash)) {
 372             Log("%s: error skipping int32 for tag x%02x, aborting\n",
 373                 secname[section], tag);
 374             return 0;
 375         }
 376         return 1;
 377     }
 378     if (tag >= 0x7b && tag < 0x80)      /* dataless tag */
 379         return 1;
 380     Log("%s: unknown invalid tag x%02x, aborting\n", secname[section], tag);
 381     return 0;
 382 }
 383
 384 static int
 385 ReadVolumeHeader(struct iod *iodp, VolumeDiskData * vol)
 386 {
 387     int tag;
 388     afs_uint32 trash;
 389     afs_int32 critical = 0;
 390     memset(vol, 0, sizeof(*vol));
 391     while ((tag = iod_getc(iodp)) > D_MAX && tag != EOF) {
 392         if (critical)
 393             critical--;
 394         switch (tag) {
 395         case 'i':
 396             if (!ReadInt32(iodp, &vol->id))
 397                 return VOLSERREAD_DUMPERROR;
 398             break;
 399         case 'v':
 400             if (!ReadInt32(iodp, &trash))
 401                 return VOLSERREAD_DUMPERROR;
 402             break;
 403         case 'n':
 404             ReadString(iodp, vol->name, sizeof(vol->name));
 405             /*this means the name of the retsored volume could be possibly different. In conjunction with SAFSVolSignalRestore */
 406             break;
 407         case 's':
 408             vol->inService = iod_getc(iodp);
 409             break;
 410         case 'b':
 411             vol->blessed = iod_getc(iodp);
 412             break;
 413         case 'u':
 414             if (!ReadInt32(iodp, &vol->uniquifier))
 415                 return VOLSERREAD_DUMPERROR;
 416             break;
 417         case 't':
 418             vol->type = iod_getc(iodp);
 419             break;
 420         case 'p':
 421             if (!ReadInt32(iodp, &vol->parentId))
 422                 return VOLSERREAD_DUMPERROR;
 423             break;
 424         case 'c':
 425             if (!ReadInt32(iodp, &vol->cloneId))
 426                 return VOLSERREAD_DUMPERROR;
 427             break;
 428         case 'q':
 429             if (!ReadInt32(iodp, (afs_uint32 *) & vol->maxquota))
 430                 return VOLSERREAD_DUMPERROR;
 431             break;
 432         case 'm':
 433             if (!ReadInt32(iodp, (afs_uint32 *) & vol->minquota))
 434                 return VOLSERREAD_DUMPERROR;
 435             break;
 436         case 'd':
 437             if (!ReadInt32(iodp, (afs_uint32 *) & vol->diskused))
 438                 return VOLSERREAD_DUMPERROR;    /* Bogus:  should calculate this */
 439             break;
 440         case 'f':
 441             if (!ReadInt32(iodp, (afs_uint32 *) & vol->filecount))
 442                 return VOLSERREAD_DUMPERROR;
 443             break;
 444         case 'a':
 445             if (!ReadInt32(iodp, &vol->accountNumber))
 446                 return VOLSERREAD_DUMPERROR;
 447             break;
 448         case 'o':
 449             if (!ReadInt32(iodp, &vol->owner))
 450                 return VOLSERREAD_DUMPERROR;
 451             break;
 452         case 'C':
 453             if (!ReadInt32(iodp, &vol->creationDate))
 454                 return VOLSERREAD_DUMPERROR;
 455             break;
 456         case 'A':
 457             if (!ReadInt32(iodp, &vol->accessDate))
 458                 return VOLSERREAD_DUMPERROR;
 459             break;
 460         case 'U':
 461             if (!ReadInt32(iodp, &vol->updateDate))
 462                 return VOLSERREAD_DUMPERROR;
 463             break;
 464         case 'E':
 465             if (!ReadInt32(iodp, &vol->expirationDate))
 466                 return VOLSERREAD_DUMPERROR;
 467             break;
 468         case 'B':
 469             if (!ReadInt32(iodp, &vol->backupDate))
 470                 return VOLSERREAD_DUMPERROR;
 471             break;
 472         case 'O':
 473             ReadString(iodp, vol->offlineMessage,
 474                        sizeof(vol->offlineMessage));
 475             break;
 476         case 'M':
 477             /*
 478              * Detailed volume statistics are never stored in dumps,
 479              * so we just restore either the null string if this volume
 480              * had already been set to store statistics, or the old motd
 481              * contents otherwise.  It doesn't matter, since this field
 482              * will soon get initialized anyway.
 483              */
 484             ReadString(iodp, (char *)(vol->stat_reads), VMSGSIZE);
 485             break;
 486         case 'W':{
 487                 unsigned short length;
 488                 int i;
 489                 afs_uint32 data;
 490                 if (!ReadShort(iodp, &length))
 491                     return VOLSERREAD_DUMPERROR;
 492                 for (i = 0; i < length; i++) {
 493                     if (!ReadInt32(iodp, &data))
 494                         return VOLSERREAD_DUMPERROR;
 495                     if (i < sizeof(vol->weekUse) / sizeof(vol->weekUse[0]))
 496                         vol->weekUse[i] = data;
 497                 }
 498                 break;
 499             }
 500         case 'D':
 501             if (!ReadInt32(iodp, &vol->dayUseDate))
 502                 return VOLSERREAD_DUMPERROR;
 503             break;
 504         case 'Z':
 505             if (!ReadInt32(iodp, (afs_uint32 *) & vol->dayUse))
 506                 return VOLSERREAD_DUMPERROR;
 507             break;
 508         case 'V':
 509             if (!ReadInt32(iodp, (afs_uint32 *) &trash/*volUpdateCounter*/))
 510                 return VOLSERREAD_DUMPERROR;
 511             break;
 512         case 0x7e:
 513             critical = 2;
 514             break;
 515         default:
 516             if (!HandleUnknownTag(iodp, tag, 1, critical))
 517                 return VOLSERREAD_DUMPERROR;
 518         }
 519     }
 520     iod_ungetc(iodp, tag);
 521     return 0;
 522 }
 523
 524 static int
 525 DumpTag(struct iod *iodp, int tag)
 526 {
 527     char p;
 528
 529     p = tag;
 530     return ((iod_Write(iodp, &p, 1) == 1) ? 0 : VOLSERDUMPERROR);
 531
 532 }
 533
 534 static int
 535 DumpByte(struct iod *iodp, char tag, byte value)
 536 {
 537     char tbuffer[2];
 538     byte *p = (unsigned char *)tbuffer;
 539     *p++ = tag;
 540     *p = value;
 541     return ((iod_Write(iodp, tbuffer, 2) == 2) ? 0 : VOLSERDUMPERROR);
 542 }
 543
 544 #define afs_putint32(p, v)  *p++ = v>>24, *p++ = v>>16, *p++ = v>>8, *p++ = v
 545 #define afs_putshort(p, v) *p++ = v>>8, *p++ = v
 546
 547 static int
 548 DumpDouble(struct iod *iodp, char tag, afs_uint32 value1,
 549            afs_uint32 value2)
 550 {
 551     char tbuffer[9];
 552     byte *p = (unsigned char *)tbuffer;
 553     *p++ = tag;
 554     afs_putint32(p, value1);
 555     afs_putint32(p, value2);
 556     return ((iod_Write(iodp, tbuffer, 9) == 9) ? 0 : VOLSERDUMPERROR);
 557 }
 558
 559 static int
 560 DumpInt32(struct iod *iodp, char tag, afs_uint32 value)
 561 {
 562     char tbuffer[5];
 563     byte *p = (unsigned char *)tbuffer;
 564     *p++ = tag;
 565     afs_putint32(p, value);
 566     return ((iod_Write(iodp, tbuffer, 5) == 5) ? 0 : VOLSERDUMPERROR);
 567 }
 568
 569 static int
 570 DumpArrayInt32(struct iod *iodp, char tag,
 571                afs_uint32 * array, int nelem)
 572 {
 573     char tbuffer[4];
 574     afs_uint32 v;
 575     int code = 0;
 576     byte *p = (unsigned char *)tbuffer;
 577     *p++ = tag;
 578     afs_putshort(p, nelem);
 579     code = iod_Write(iodp, tbuffer, 3);
 580     if (code != 3)
 581         return VOLSERDUMPERROR;
 582     while (nelem--) {
 583         p = (unsigned char *)tbuffer;
 584         v = *array++;           /*this was register */
 585
 586         afs_putint32(p, v);
 587         code = iod_Write(iodp, tbuffer, 4);
 588         if (code != 4)
 589             return VOLSERDUMPERROR;
 590     }
 591     return 0;
 592 }
 593
 594 static int
 595 DumpShort(struct iod *iodp, char tag, unsigned int value)
 596 {
 597     char tbuffer[3];
 598     byte *p = (unsigned char *)tbuffer;
 599     *p++ = tag;
 600     *p++ = value >> 8;
 601     *p = value;
 602     return ((iod_Write(iodp, tbuffer, 3) == 3) ? 0 : VOLSERDUMPERROR);
 603 }
 604
 605 static int
 606 DumpBool(struct iod *iodp, char tag, unsigned int value)
 607 {
 608     char tbuffer[2];
 609     byte *p = (unsigned char *)tbuffer;
 610     *p++ = tag;
 611     *p = value;
 612     return ((iod_Write(iodp, tbuffer, 2) == 2) ? 0 : VOLSERDUMPERROR);
 613 }
 614
 615 static int
 616 DumpString(struct iod *iodp, char tag, char *s)
 617 {
 618     int n;
 619     int code = 0;
 620     code = iod_Write(iodp, &tag, 1);
 621     if (code != 1)
 622         return VOLSERDUMPERROR;
 623     n = strlen(s) + 1;
 624     code = iod_Write(iodp, s, n);
 625     if (code != n)
 626         return VOLSERDUMPERROR;
 627     return 0;
 628 }
 629
 630 static int
 631 DumpByteString(struct iod *iodp, char tag, byte * bs,
 632                int nbytes)
 633 {
 634     int code = 0;
 635
 636     code = iod_Write(iodp, &tag, 1);
 637     if (code != 1)
 638         return VOLSERDUMPERROR;
 639     code = iod_Write(iodp, (char *)bs, nbytes);
 640     if (code != nbytes)
 641         return VOLSERDUMPERROR;
 642     return 0;
 643 }
 644
 645 static afs_int32
 646 DumpStandardTag(struct iod *iodp, char tag, afs_uint32 section)
 647 {
 648     afs_int32 code;
 649     afs_uint32 off = tag >> 5;
 650     afs_uint32 mask = 1 << (tag & 0x1f);
 651
 652     if (!oldtagsInited)
 653         initNonStandardTags();
 654
 655     if (tag < MIN_TLV_TAG
 656       || tag > MAX_STANDARD_TAG
 657       || section >= MAX_SECTIONS
 658       || (oldtags[section][ off] & mask)) {
 659         Log("Trying to use DumpStandardTag with tag 0x%02x for section %d, aborting\n", tag, section);
 660         return VOLSERDUMPERROR;
 661     }
 662     code = iod_Write(iodp, &tag, 1);
 663     if (code != 1)
 664         return VOLSERDUMPERROR;
 665     return 0;
 666 }
 667
 668 AFS_UNUSED
 669 static afs_int32
 670 DumpStandardTagLen(struct iod *iodp, char tag, afs_uint32 section,
 671                         afs_size_t length)
 672 {
 673     char buf[10];
 674     char *p;
 675     afs_int32 code, len;
 676
 677     if (tag < MIN_TLV_TAG || tag > MAX_TLV_TAG) {
 678         Log("Trying to use DumpStandardTagLen with tag 0x%02x for section %d, aborting\n", tag, section);
 679         return VOLSERDUMPERROR;
 680     }
 681     code = DumpStandardTag(iodp, tag, section);
 682     if (code)
 683         return code;
 684     p = &buf[9];
 685     if (length < 128) { /* byte after tag contains length */
 686         *p-- = length;
 687         len = 1;
 688     } else {            /* byte after tag contains length of length field | 0x80 */
 689         for (len=0; length; length=length >> 8) {
 690             *p-- = length;
 691             len++;
 692         }
 693         *p-- = len + 128;
 694         len += 1;
 695     }
 696     p++;
 697     code = iod_Write(iodp, p, len);
 698     if (code != len)
 699         return VOLSERDUMPERROR;
 700     return 0;
 701 }
 702
 703 static int
 704 DumpFile(struct iod *iodp, int vnode, FdHandle_t * handleP)
 705 {
 706     int code = 0, error = 0;
 707     afs_int32 pad = 0;
 708     afs_foff_t offset = 0;
 709     afs_sfsize_t nbytes, howBig;
 710     ssize_t n;
 711     size_t howMany;
 712     afs_foff_t howFar = 0;
 713     byte *p;
 714     afs_uint32 hi, lo;
 715     afs_ino_str_t stmp;
 716 #ifndef AFS_NT40_ENV
 717     struct afs_stat status;
 718 #else
 719     LARGE_INTEGER fileSize;
 720 #endif
 721 #ifdef  AFS_AIX_ENV
 722 #include <sys/statfs.h>
 723 #if defined(AFS_AIX52_ENV)
 724     struct statfs64 tstatfs;
 725 #else /* !AFS_AIX52_ENV */
 726     struct statfs tstatfs;
 727 #endif /* !AFS_AIX52_ENV */
 728     int statfs_code;
 729 #endif
 730
 731 #ifdef AFS_NT40_ENV
 732     if (!GetFileSizeEx(handleP->fd_fd, &fileSize)) {
 733         Log("DumpFile: GetFileSizeEx returned error code %d on descriptor %d\n", GetLastError(), handleP->fd_fd);
 734             return VOLSERDUMPERROR;
 735     }
 736     howBig = fileSize.QuadPart;
 737     howMany = 4096;
 738
 739 #else
 740     afs_fstat(handleP->fd_fd, &status);
 741     howBig = status.st_size;
 742
 743 #ifdef  AFS_AIX_ENV
 744     /* Unfortunately in AIX valuable fields such as st_blksize are
 745      * gone from the stat structure.
 746      */
 747 #if defined(AFS_AIX52_ENV)
 748     statfs_code = fstatfs64(handleP->fd_fd, &tstatfs);
 749 #else /* !AFS_AIX52_ENV */
 750     statfs_code = fstatfs(handleP->fd_fd, &tstatfs);
 751 #endif /* !AFS_AIX52_ENV */
 752     if (statfs_code != 0) {
 753         Log("DumpFile: fstatfs returned error code %d on descriptor %d\n", errno, handleP->fd_fd);
 754         return VOLSERDUMPERROR;
 755     }
 756     howMany = tstatfs.f_bsize;
 757 #else
 758     howMany = status.st_blksize;
 759 #endif /* AFS_AIX_ENV */
 760 #endif /* AFS_NT40_ENV */
 761
 762
 763     SplitInt64(howBig, hi, lo);
 764     if (hi == 0L) {
 765         code = DumpInt32(iodp, 'f', lo);
 766     } else {
 767         code = DumpDouble(iodp, 'h', hi, lo);
 768     }
 769     if (code) {
 770         return VOLSERDUMPERROR;
 771     }
 772
 773     p = malloc(howMany);
 774     if (!p) {
 775         Log("1 Volser: DumpFile: not enough memory to allocate %u bytes\n", (unsigned)howMany);
 776         return VOLSERDUMPERROR;
 777     }
 778
 779     for (nbytes = howBig; (nbytes && !error); nbytes -= howMany) {
 780         if (nbytes < howMany)
 781             howMany = nbytes;
 782
 783         /* Read the data */
 784         n = FDH_PREAD(handleP, p, howMany, howFar);
 785         howFar += n;
 786
 787         /* If read any good data and we null padded previously, log the
 788          * amount that we had null padded.
 789          */
 790         if ((n > 0) && pad) {
 791             Log("1 Volser: DumpFile: Null padding file %d bytes at offset %lld\n", pad, (long long)offset);
 792             pad = 0;
 793         }
 794
 795         /* If didn't read enough data, null padd the rest of the buffer. This
 796          * can happen if, for instance, the media has some bad spots. We don't
 797          * want to quit the dump, so we start null padding.
 798          */
 799         if (n < howMany) {
 800             /* Record the read error */
 801             if (n < 0) {
 802                 n = 0;
 803                 Log("1 Volser: DumpFile: Error reading inode %s for vnode %d: %s\n", PrintInode(stmp, handleP->fd_ih->ih_ino), vnode, afs_error_message(errno));
 804             } else if (!pad) {
 805                 Log("1 Volser: DumpFile: Error reading inode %s for vnode %d\n", PrintInode(stmp, handleP->fd_ih->ih_ino), vnode);
 806             }
 807
 808             /* Pad the rest of the buffer with zeros. Remember offset we started
 809              * padding. Keep total tally of padding.
 810              */
 811             memset(p + n, 0, howMany - n);
 812             if (!pad)
 813                 offset = (howBig - nbytes) + n;
 814             pad += (howMany - n);
 815
 816             /* Now seek over the data we could not get. An error here means we
 817              * can't do the next read.
 818              */
 819             howFar = (size_t)((howBig - nbytes) + howMany);
 820         }
 821
 822         /* Now write the data out */
 823         if (iod_Write(iodp, (char *)p, howMany) != howMany)
 824             error = VOLSERDUMPERROR;
 825 #ifndef AFS_PTHREAD_ENV
 826         IOMGR_Poll();
 827 #endif
 828     }
 829
 830     if (pad) {                  /* Any padding we hadn't reported yet */
 831         Log("1 Volser: DumpFile: Null padding file: %d bytes at offset %lld\n",
 832             pad, (long long)offset);
 833     }
 834
 835     free(p);
 836     return error;
 837 }
 838
 839 static int
 840 DumpVolumeHeader(struct iod *iodp, Volume * vp)
 841 {
 842     int code = 0;
 843     static char nullString[1] = "";     /*The ``contents'' of motd */
 844
 845     if (!code)
 846         code = DumpTag(iodp, D_VOLUMEHEADER);
 847     if (!code) {
 848         code = DumpInt32(iodp, 'i', V_id(vp));
 849     }
 850     if (!code)
 851         code = DumpInt32(iodp, 'v', V_stamp(vp).version);
 852     if (!code)
 853         code = DumpString(iodp, 'n', V_name(vp));
 854     if (!code)
 855         code = DumpBool(iodp, 's', V_inService(vp));
 856     if (!code)
 857         code = DumpBool(iodp, 'b', V_blessed(vp));
 858     if (!code)
 859         code = DumpInt32(iodp, 'u', V_uniquifier(vp));
 860     if (!code)
 861         code = DumpByte(iodp, 't', (byte) V_type(vp));
 862     if (!code) {
 863         code = DumpInt32(iodp, 'p', V_parentId(vp));
 864     }
 865     if (!code)
 866         code = DumpInt32(iodp, 'c', V_cloneId(vp));
 867     if (!code)
 868         code = DumpInt32(iodp, 'q', V_maxquota(vp));
 869     if (!code)
 870         code = DumpInt32(iodp, 'm', V_minquota(vp));
 871     if (!code)
 872         code = DumpInt32(iodp, 'd', V_diskused(vp));
 873     if (!code)
 874         code = DumpInt32(iodp, 'f', V_filecount(vp));
 875     if (!code)
 876         code = DumpInt32(iodp, 'a', V_accountNumber(vp));
 877     if (!code)
 878         code = DumpInt32(iodp, 'o', V_owner(vp));
 879     if (!code)
 880         code = DumpInt32(iodp, 'C', V_creationDate(vp));        /* Rw volume creation date */
 881     if (!code)
 882         code = DumpInt32(iodp, 'A', V_accessDate(vp));
 883     if (!code)
 884         code = DumpInt32(iodp, 'U', V_updateDate(vp));
 885     if (!code)
 886         code = DumpInt32(iodp, 'E', V_expirationDate(vp));
 887     if (!code)
 888         code = DumpInt32(iodp, 'B', V_backupDate(vp));  /* Rw volume backup clone date */
 889     if (!code)
 890         code = DumpString(iodp, 'O', V_offlineMessage(vp));
 891     /*
 892      * We do NOT dump the detailed volume statistics residing in the old
 893      * motd field, since we cannot tell from the info in a dump whether
 894      * statistics data has been put there.  Instead, we dump a null string,
 895      * just as if that was what the motd contained.
 896      */
 897     if (!code)
 898         code = DumpString(iodp, 'M', nullString);
 899     if (!code)
 900         code =
 901             DumpArrayInt32(iodp, 'W', (afs_uint32 *) V_weekUse(vp),
 902                            sizeof(V_weekUse(vp)) / sizeof(V_weekUse(vp)[0]));
 903     if (!code)
 904         code = DumpInt32(iodp, 'D', V_dayUseDate(vp));
 905     if (!code)
 906         code = DumpInt32(iodp, 'Z', V_dayUse(vp));
 907     return code;
 908 }
 909
 910 static int
 911 DumpEnd(struct iod *iodp)
 912 {
 913     return (DumpInt32(iodp, D_DUMPEND, DUMPENDMAGIC));
 914 }
 915
 916 /* Guts of the dump code */
 917
 918 /* Dump a whole volume */
 919 int
 920 DumpVolume(struct rx_call *call, Volume * vp,
 921            afs_int32 fromtime, int dumpAllDirs)
 922 {
 923     struct iod iod;
 924     int code = 0;
 925     struct iod *iodp = &iod;
 926     iod_Init(iodp, call);
 927
 928     if (!code)
 929         code = DumpDumpHeader(iodp, vp, fromtime);
 930
 931     if (!code)
 932         code = DumpPartial(iodp, vp, fromtime, dumpAllDirs);
 933
 934 /* hack follows.  Errors should be handled quite differently in this version of dump than they used to be.*/
 935     if (rx_Error(iodp->call)) {
 936         Log("1 Volser: DumpVolume: Rx call failed during dump, error %d\n",
 937             rx_Error(iodp->call));
 938         return VOLSERDUMPERROR;
 939     }
 940     if (!code)
 941         code = DumpEnd(iodp);
 942
 943     return code;
 944 }
 945
 946 /* Dump a volume to multiple places*/
 947 int
 948 DumpVolMulti(struct rx_call **calls, int ncalls, Volume * vp,
 949              afs_int32 fromtime, int dumpAllDirs, int *codes)
 950 {
 951     struct iod iod;
 952     int code = 0;
 953     iod_InitMulti(&iod, calls, ncalls, codes);
 954
 955     if (!code)
 956         code = DumpDumpHeader(&iod, vp, fromtime);
 957     if (!code)
 958         code = DumpPartial(&iod, vp, fromtime, dumpAllDirs);
 959     if (!code)
 960         code = DumpEnd(&iod);
 961     return code;
 962 }
 963
 964 /* A partial dump (no dump header) */
 965 static int
 966 DumpPartial(struct iod *iodp, Volume * vp,
 967             afs_int32 fromtime, int dumpAllDirs)
 968 {
 969     int code = 0;
 970     if (!code)
 971         code = DumpVolumeHeader(iodp, vp);
 972     if (!code)
 973         code = DumpVnodeIndex(iodp, vp, vLarge, fromtime, dumpAllDirs);
 974     if (!code)
 975         code = DumpVnodeIndex(iodp, vp, vSmall, fromtime, 0);
 976     return code;
 977 }
 978
 979 static int
 980 DumpVnodeIndex(struct iod *iodp, Volume * vp, VnodeClass class,
 981                afs_int32 fromtime, int forcedump)
 982 {
 983     int code = 0;
 984     struct VnodeClassInfo *vcp = &VnodeClassInfo[class];
 985     char buf[SIZEOF_LARGEDISKVNODE];
 986     struct VnodeDiskObject *vnode = (struct VnodeDiskObject *)buf;
 987     StreamHandle_t *file;
 988     FdHandle_t *fdP;
 989     afs_sfsize_t size, nVnodes;
 990     int flag;
 991     int vnodeIndex;
 992
 993     fdP = IH_OPEN(vp->vnodeIndex[class].handle);
 994     opr_Assert(fdP != NULL);
 995     file = FDH_FDOPEN(fdP, "r+");
 996     opr_Assert(file != NULL);
 997     size = OS_SIZE(fdP->fd_fd);
 998     opr_Assert(size != -1);
 999     nVnodes = (size / vcp->diskSize) - 1;
1000     if (nVnodes > 0) {
1001         opr_Assert((nVnodes + 1) * vcp->diskSize == size);
1002         opr_Assert(STREAM_ASEEK(file, vcp->diskSize) == 0);
1003     } else
1004         nVnodes = 0;
1005     for (vnodeIndex = 0;
1006          nVnodes && STREAM_READ(vnode, vcp->diskSize, 1, file) == 1 && !code;
1007          nVnodes--, vnodeIndex++) {
1008         flag = forcedump || (vnode->serverModifyTime >= fromtime);
1009         /* Note:  the >= test is very important since some old volumes may not have
1010          * a serverModifyTime.  For an epoch dump, this results in 0>=0 test, which
1011          * does dump the file! */
1012         if (!code)
1013             code =
1014                 DumpVnode(iodp, vnode, V_id(vp),
1015                           bitNumberToVnodeNumber(vnodeIndex, class), flag);
1016 #ifndef AFS_PTHREAD_ENV
1017         if (!flag)
1018             IOMGR_Poll();       /* if we dont' xfr data, but scan instead, could lose conn */
1019 #endif
1020     }
1021     STREAM_CLOSE(file);
1022     FDH_CLOSE(fdP);
1023     return code;
1024 }
1025
1026 static int
1027 DumpDumpHeader(struct iod *iodp, Volume * vp,
1028                afs_int32 fromtime)
1029 {
1030     int code = 0;
1031     int UseLatestReadOnlyClone = 1;
1032     afs_int32 dumpTimes[2];
1033     iodp->device = vp->device;
1034     iodp->parentId = V_parentId(vp);
1035     iodp->dumpPartition = vp->partition;
1036     if (!code)
1037         code = DumpDouble(iodp, D_DUMPHEADER, DUMPBEGINMAGIC, DUMPVERSION);
1038     if (!code)
1039         code =
1040             DumpInt32(iodp, 'v',
1041                       UseLatestReadOnlyClone ? V_id(vp) : V_parentId(vp));
1042     if (!code)
1043         code = DumpString(iodp, 'n', V_name(vp));
1044     dumpTimes[0] = fromtime;
1045     switch (V_type(vp)) {
1046     case readwriteVolume:
1047         dumpTimes[1] = V_updateDate(vp);        /* until last update */
1048         break;
1049     case readonlyVolume:
1050         dumpTimes[1] = V_creationDate(vp);      /* until clone was updated */
1051         break;
1052     case backupVolume:
1053         /* until backup was made */
1054         dumpTimes[1] = V_backupDate(vp) != 0 ? V_backupDate(vp) :
1055                                                V_creationDate(vp);
1056         break;
1057     default:
1058         code = EINVAL;
1059     }
1060     if (!code)
1061         code = DumpArrayInt32(iodp, 't', (afs_uint32 *) dumpTimes, 2);
1062     return code;
1063 }
1064
1065 static int
1066 DumpVnode(struct iod *iodp, struct VnodeDiskObject *v, VolumeId volid,
1067           int vnodeNumber, int dumpEverything)
1068 {
1069     int code = 0;
1070     IHandle_t *ihP;
1071     FdHandle_t *fdP;
1072     afs_ino_str_t stmp;
1073
1074     if (!v || v->type == vNull)
1075         return code;
1076     if (!code)
1077         code = DumpDouble(iodp, D_VNODE, vnodeNumber, v->uniquifier);
1078     if (!dumpEverything)
1079         return code;
1080     if (!code)
1081         code = DumpByte(iodp, 't', (byte) v->type);
1082     if (!code)
1083         code = DumpShort(iodp, 'l', v->linkCount);      /* May not need this */
1084     if (!code)
1085         code = DumpInt32(iodp, 'v', v->dataVersion);
1086     if (!code)
1087         code = DumpInt32(iodp, 'm', v->unixModifyTime);
1088     if (!code)
1089         code = DumpInt32(iodp, 'a', v->author);
1090     if (!code)
1091         code = DumpInt32(iodp, 'o', v->owner);
1092     if (!code && v->group)
1093         code = DumpInt32(iodp, 'g', v->group);  /* default group is 0 */
1094     if (!code)
1095         code = DumpShort(iodp, 'b', v->modeBits);
1096     if (!code)
1097         code = DumpInt32(iodp, 'p', v->parent);
1098     if (!code)
1099         code = DumpInt32(iodp, 's', v->serverModifyTime);
1100     if (v->type == vDirectory) {
1101         code = acl_HtonACL(VVnodeDiskACL(v));
1102         if (code) {
1103             Log("DumpVnode: Skipping invalid acl vnode %u (volume %"AFS_VOLID_FMT")\n",
1104                  vnodeNumber, afs_printable_VolumeId_lu(volid));
1105         }
1106         if (!code)
1107             code =
1108                 DumpByteString(iodp, 'A', (byte *) VVnodeDiskACL(v),
1109                                VAclDiskSize(v));
1110     }
1111     if (VNDISK_GET_INO(v)) {
1112         afs_sfsize_t indexlen, disklen;
1113         IH_INIT(ihP, iodp->device, iodp->parentId, VNDISK_GET_INO(v));
1114         fdP = IH_OPEN(ihP);
1115         if (fdP == NULL) {
1116             Log("1 Volser: DumpVnode: dump: Unable to open inode %s "
1117                 "for vnode %u (volume %" AFS_VOLID_FMT "); "
1118                 "not dumped, error %d\n",
1119                 PrintInode(stmp, VNDISK_GET_INO(v)), vnodeNumber,
1120                 afs_printable_VolumeId_lu(volid), errno);
1121             IH_RELEASE(ihP);
1122             return VOLSERREAD_DUMPERROR;
1123         }
1124         VNDISK_GET_LEN(indexlen, v);
1125         disklen = FDH_SIZE(fdP);
1126         if (indexlen != disklen) {
1127             FDH_REALLYCLOSE(fdP);
1128             IH_RELEASE(ihP);
1129             Log("DumpVnode: volume %"AFS_VOLID_FMT" "
1130                 "vnode %lu has inconsistent length "
1131                 "(index %lu disk %lu); aborting dump\n",
1132                 afs_printable_VolumeId_lu(volid), (unsigned long)vnodeNumber,
1133                 (unsigned long)indexlen, (unsigned long)disklen);
1134             return VOLSERREAD_DUMPERROR;
1135         }
1136         code = DumpFile(iodp, vnodeNumber, fdP);
1137         FDH_CLOSE(fdP);
1138         IH_RELEASE(ihP);
1139     }
1140     return code;
1141 }
1142
1143
1144 int
1145 ProcessIndex(Volume * vp, VnodeClass class, afs_foff_t ** Bufp, int *sizep,
1146              int del)
1147 {
1148     int i, nVnodes, code;
1149     afs_foff_t offset;
1150     afs_foff_t *Buf;
1151     int cnt = 0;
1152     afs_sfsize_t size;
1153     StreamHandle_t *afile;
1154     FdHandle_t *fdP;
1155     struct VnodeClassInfo *vcp = &VnodeClassInfo[class];
1156     char buf[SIZEOF_LARGEDISKVNODE], zero[SIZEOF_LARGEDISKVNODE];
1157     struct VnodeDiskObject *vnode = (struct VnodeDiskObject *)buf;
1158     afs_ino_str_t stmp;
1159
1160     memset(zero, 0, sizeof(zero));      /* zero out our proto-vnode */
1161     fdP = IH_OPEN(vp->vnodeIndex[class].handle);
1162     if (fdP == NULL)
1163         return -1;
1164     afile = FDH_FDOPEN(fdP, "r+");
1165     if (del) {
1166         int cnt1 = 0;
1167         Buf = *Bufp;
1168         for (i = 0; i < *sizep; i++) {
1169             if (Buf[i]) {
1170                 cnt++;
1171                 STREAM_ASEEK(afile, Buf[i]);
1172                 code = STREAM_READ(vnode, vcp->diskSize, 1, afile);
1173                 if (code == 1) {
1174                     if (vnode->type != vNull && VNDISK_GET_INO(vnode)) {
1175                         cnt1++;
1176                         if (DoLogging) {
1177                             Log("RestoreVolume %"AFS_VOLID_FMT" "
1178                                 "Cleanup: Removing old vnode=%u inode=%s "
1179                                 "size=unknown\n",
1180                                 afs_printable_VolumeId_lu(V_id(vp)),
1181                                 bitNumberToVnodeNumber(i, class),
1182                                 PrintInode(stmp, VNDISK_GET_INO(vnode)));
1183                         }
1184                         IH_DEC(V_linkHandle(vp), VNDISK_GET_INO(vnode),
1185                                V_parentId(vp));
1186                         DOPOLL;
1187                     }
1188                     STREAM_ASEEK(afile, Buf[i]);
1189                     (void)STREAM_WRITE(zero, vcp->diskSize, 1, afile);  /* Zero it out */
1190                 }
1191                 Buf[i] = 0;
1192             }
1193         }
1194         if (DoLogging) {
1195             Log("RestoreVolume Cleanup: Removed %d inodes for volume %d\n",
1196                 cnt1, V_id(vp));
1197         }
1198         STREAM_FLUSH(afile);    /* ensure 0s are on the disk */
1199         OS_SYNC(afile->str_fd);
1200     } else {
1201         size = OS_SIZE(fdP->fd_fd);
1202         opr_Assert(size != -1);
1203         nVnodes =
1204             (size <=
1205              vcp->diskSize ? 0 : size - vcp->diskSize) >> vcp->logSize;
1206         if (nVnodes > 0) {
1207             Buf = calloc(nVnodes,  sizeof(afs_foff_t));
1208             if (Buf == NULL) {
1209                 STREAM_CLOSE(afile);
1210                 FDH_CLOSE(fdP);
1211                 return -1;
1212             }
1213             STREAM_ASEEK(afile, offset = vcp->diskSize);
1214             while (1) {
1215                 code = STREAM_READ(vnode, vcp->diskSize, 1, afile);
1216                 if (code != 1) {
1217                     break;
1218                 }
1219                 if (vnode->type != vNull && VNDISK_GET_INO(vnode)) {
1220                     Buf[(offset >> vcp->logSize) - 1] = offset;
1221                     cnt++;
1222                 }
1223                 offset += vcp->diskSize;
1224             }
1225             *Bufp = Buf;
1226             *sizep = nVnodes;
1227         }
1228     }
1229     STREAM_CLOSE(afile);
1230     FDH_CLOSE(fdP);
1231     return 0;
1232 }
1233
1234
1235 int
1236 RestoreVolume(struct rx_call *call, Volume * avp, int incremental,
1237               struct restoreCookie *cookie)
1238 {
1239     VolumeDiskData vol;
1240     struct DumpHeader header;
1241     afs_uint32 endMagic;
1242     Error error = 0, vupdate;
1243     Volume *vp;
1244     struct iod iod;
1245     struct iod *iodp = &iod;
1246     afs_foff_t *b1 = NULL, *b2 = NULL;
1247     int s1 = 0, s2 = 0, delo = 0, tdelo;
1248     int tag;
1249     VolumeDiskData saved_header;
1250     afs_uint32 uptime, crtime;
1251
1252     iod_Init(iodp, call);
1253
1254     vp = avp;
1255
1256     if (DoPreserveVolumeStats) {
1257         CopyVolumeStats(&V_disk(vp), &saved_header);
1258     }
1259
1260     if (!ReadDumpHeader(iodp, &header)) {
1261         Log("1 Volser: RestoreVolume: Error reading header file for dump; aborted\n");
1262         return VOLSERREAD_DUMPERROR;
1263     }
1264     if (iod_getc(iodp) != D_VOLUMEHEADER) {
1265         Log("1 Volser: RestoreVolume: Volume header missing from dump; not restored\n");
1266         return VOLSERREAD_DUMPERROR;
1267     }
1268     if (ReadVolumeHeader(iodp, &vol) == VOLSERREAD_DUMPERROR)
1269         return VOLSERREAD_DUMPERROR;
1270
1271     if (!delo)
1272         delo = ProcessIndex(vp, vLarge, &b1, &s1, 0);
1273     if (!delo)
1274         delo = ProcessIndex(vp, vSmall, &b2, &s2, 0);
1275     if (delo < 0) {
1276         Log("1 Volser: RestoreVolume: ProcessIndex failed; not restored\n");
1277         error = VOLSERREAD_DUMPERROR;
1278         goto out;
1279     }
1280
1281     strncpy(vol.name, cookie->name, VOLSER_OLDMAXVOLNAME);
1282     vol.type = cookie->type;
1283     vol.cloneId = cookie->clone;
1284     vol.parentId = cookie->parent;
1285
1286     V_needsSalvaged(vp) = 0;
1287
1288     tdelo = delo;
1289     while (1) {
1290         if (ReadVnodes(iodp, vp, 0, b1, s1, b2, s2, tdelo)) {
1291             error = VOLSERREAD_DUMPERROR;
1292             goto clean;
1293         }
1294         tag = iod_getc(iodp);
1295         if (tag != D_VOLUMEHEADER)
1296             break;
1297
1298         if (ReadVolumeHeader(iodp, &vol) == VOLSERREAD_DUMPERROR) {
1299             error = VOLSERREAD_DUMPERROR;
1300             goto out;
1301         }
1302     }
1303     if (tag != D_DUMPEND || !ReadInt32(iodp, &endMagic)
1304         || endMagic != DUMPENDMAGIC) {
1305         Log("1 Volser: RestoreVolume: End of dump not found; restore aborted\n");
1306         error = VOLSERREAD_DUMPERROR;
1307         goto clean;
1308     }
1309
1310
1311     if (iod_getc(iodp) != EOF) {
1312         Log("1 Volser: RestoreVolume: Unrecognized postamble in dump; restore aborted\n");
1313         error = VOLSERREAD_DUMPERROR;
1314         goto clean;
1315     }
1316
1317     if (!delo) {
1318         delo = ProcessIndex(vp, vLarge, &b1, &s1, 1);
1319         if (!delo)
1320             delo = ProcessIndex(vp, vSmall, &b2, &s2, 1);
1321         if (delo < 0) {
1322             error = VOLSERREAD_DUMPERROR;
1323             goto clean;
1324         }
1325     }
1326
1327   clean:
1328     if (DoPreserveVolumeStats) {
1329         CopyVolumeStats(&saved_header, &vol);
1330     } else {
1331         ClearVolumeStats(&vol);
1332     }
1333     if (V_needsSalvaged(vp)) {
1334         /* needsSalvaged may have been set while we tried to write volume data.
1335          * prevent it from getting overwritten. */
1336         vol.needsSalvaged = V_needsSalvaged(vp);
1337     }
1338     crtime = V_creationDate(vp);
1339     uptime = V_updateDate(vp);
1340     CopyVolumeHeader(&vol, &V_disk(vp));
1341     V_destroyMe(vp) = 0;
1342     VUpdateVolume(&vupdate, vp);
1343     if (vupdate) {
1344         Log("1 Volser: RestoreVolume: Unable to rewrite volume header; restore aborted\n");
1345         error = VOLSERREAD_DUMPERROR;
1346         goto out;
1347     } else {
1348         /*
1349          * If the volume was not a new empty volume and the restored dump was
1350          * older than the volume in question, this is probably a mistake, and
1351          * may mean the resulting volume is corrupted. Log the following message
1352          * to give a clue as to why this volume suddenly looks strange or corrupt.
1353          */
1354         if ((crtime != uptime) && (uptime > V_updateDate(vp))) {
1355             Log("1 Volser: RestoreVolume: volume %s (%u) appears to have been partially or "
1356                 "completely restored to an earlier version (updateDate went from %u to %u). "
1357                 "This is allowed, but may indicate a mistake in whatever tool is restoring "
1358                 "this volume. If this volume appears corrupted, this is probably why.\n",
1359                 V_name(vp), V_id(vp), uptime, V_updateDate(vp));
1360         }
1361     }
1362   out:
1363     /* Free the malloced space above */
1364     if (b1)
1365         free(b1);
1366     if (b2)
1367         free(b2);
1368     return error;
1369 }
1370
1371 static int
1372 ReadVnodes(struct iod *iodp, Volume * vp, int incremental,
1373            afs_foff_t * Lbuf, afs_int32 s1, afs_foff_t * Sbuf, afs_int32 s2,
1374            afs_int32 delo)
1375 {
1376     afs_int32 vnodeNumber;
1377     char buf[SIZEOF_LARGEDISKVNODE];
1378     int tag;
1379     struct VnodeDiskObject *vnode = (struct VnodeDiskObject *)buf;
1380     struct VnodeDiskObject oldvnode;
1381     int idx;
1382     VnodeClass class;
1383     struct VnodeClassInfo *vcp;
1384     IHandle_t *tmpH;
1385     FdHandle_t *fdP;
1386     Inode nearInode AFS_UNUSED;
1387     afs_int32 critical = 0;
1388     int nbytes;
1389
1390     tag = iod_getc(iodp);
1391     V_pref(vp, nearInode);
1392     while (tag == D_VNODE) {
1393         int haveStuff = 0;
1394         int saw_f = 0;
1395         memset(buf, 0, sizeof(buf));
1396         if (!ReadInt32(iodp, (afs_uint32 *) & vnodeNumber))
1397             break;
1398
1399         if (!ReadInt32(iodp, &vnode->uniquifier))
1400             return VOLSERREAD_DUMPERROR;
1401
1402         while ((tag = iod_getc(iodp)) > D_MAX && tag != EOF) {
1403             haveStuff = 1;
1404             if (critical)
1405                 critical--;
1406             switch (tag) {
1407             case 't':
1408                 vnode->type = (VnodeType) iod_getc(iodp);
1409                 break;
1410             case 'l':
1411                 {
1412                     unsigned short tlc;
1413                     if (!ReadShort(iodp, &tlc))
1414                         return VOLSERREAD_DUMPERROR;
1415                     vnode->linkCount = (signed int)tlc;
1416                 }
1417                 break;
1418             case 'v':
1419                 if (!ReadInt32(iodp, &vnode->dataVersion))
1420                     return VOLSERREAD_DUMPERROR;
1421                 break;
1422             case 'm':
1423                 if (!ReadInt32(iodp, &vnode->unixModifyTime))
1424                     return VOLSERREAD_DUMPERROR;
1425                 break;
1426             case 's':
1427                 if (!ReadInt32(iodp, &vnode->serverModifyTime))
1428                     return VOLSERREAD_DUMPERROR;
1429                 break;
1430             case 'a':
1431                 if (!ReadInt32(iodp, &vnode->author))
1432                     return VOLSERREAD_DUMPERROR;
1433                 break;
1434             case 'o':
1435                 if (!ReadInt32(iodp, &vnode->owner))
1436                     return VOLSERREAD_DUMPERROR;
1437                 break;
1438             case 'g':
1439                 if (!ReadInt32(iodp, (afs_uint32 *) & vnode->group))
1440                     return VOLSERREAD_DUMPERROR;
1441                 break;
1442             case 'b':{
1443                     unsigned short modeBits;
1444                     if (!ReadShort(iodp, &modeBits))
1445                         return VOLSERREAD_DUMPERROR;
1446                     vnode->modeBits = (unsigned int)modeBits;
1447                     break;
1448                 }
1449             case 'p':
1450                 if (!ReadInt32(iodp, &vnode->parent))
1451                     return VOLSERREAD_DUMPERROR;
1452                 break;
1453             case 'A':
1454                 nbytes = ReadByteString(iodp, (byte *) VVnodeDiskACL(vnode),
1455                                VAclDiskSize(vnode));
1456                 if (nbytes != VAclDiskSize(vnode)) {
1457                     Log("ReadVnodes: could not read acl for vnode %lu in dump.\n",
1458                          (unsigned long)vnodeNumber);
1459                     return VOLSERREAD_DUMPERROR;
1460                 }
1461                 if (acl_NtohACL(VVnodeDiskACL(vnode)) != 0) {
1462                     Log("ReadVnodes: invalid acl for vnode %lu in dump.\n",
1463                          (unsigned long)vnodeNumber);
1464                     return VOLSERREAD_DUMPERROR;
1465                 }
1466                 break;
1467             case 'h':
1468             case 'f':{
1469                     Inode ino;
1470                     Error error;
1471                     afs_fsize_t vnodeLength;
1472
1473                     if (saw_f) {
1474                         Log("Volser: ReadVnodes: warning: ignoring duplicate "
1475                             "file entries for vnode %lu in dump\n",
1476                             (unsigned long)vnodeNumber);
1477                         volser_WriteFile(vnodeNumber, iodp, NULL, tag, &error);
1478                         break;
1479                     }
1480                     saw_f = 1;
1481
1482                     tmpH =
1483                         IH_CREATE_INIT(V_linkHandle(vp), V_device(vp),
1484                                   VPartitionPath(V_partition(vp)), nearInode,
1485                                   V_parentId(vp), vnodeNumber,
1486                                   vnode->uniquifier, vnode->dataVersion);
1487                     if (!tmpH) {
1488                         Log("1 Volser: ReadVnodes: IH_CREATE: %s - restore aborted\n",
1489                             afs_error_message(errno));
1490                         V_needsSalvaged(vp) = 1;
1491                         return VOLSERREAD_DUMPERROR;
1492                     }
1493                     ino = tmpH->ih_ino;
1494                     nearInode = ino;
1495                     VNDISK_SET_INO(vnode, ino);
1496                     fdP = IH_OPEN(tmpH);
1497                     if (fdP == NULL) {
1498                         Log("1 Volser: ReadVnodes: IH_OPEN: %s - restore aborted\n",
1499                             afs_error_message(errno));
1500                         IH_RELEASE(tmpH);
1501                         V_needsSalvaged(vp) = 1;
1502                         return VOLSERREAD_DUMPERROR;
1503                     }
1504                     vnodeLength =
1505                         volser_WriteFile(vnodeNumber, iodp, fdP, tag, &error);
1506                     VNDISK_SET_LEN(vnode, vnodeLength);
1507                     FDH_REALLYCLOSE(fdP);
1508                     IH_RELEASE(tmpH);
1509                     if (error) {
1510                         Log("1 Volser: ReadVnodes: IDEC inode %llu\n",
1511                             (afs_uintmax_t) ino);
1512                         IH_DEC(V_linkHandle(vp), ino, V_parentId(vp));
1513                         V_needsSalvaged(vp) = 1;
1514                         return VOLSERREAD_DUMPERROR;
1515                     }
1516                     break;
1517                 }
1518             case 0x7e:
1519                 critical = 2;
1520                 break;
1521             default:
1522                 if (!HandleUnknownTag(iodp, tag, 2, critical))
1523                     return VOLSERREAD_DUMPERROR;
1524             }
1525         }
1526
1527         class = vnodeIdToClass(vnodeNumber);
1528         vcp = &VnodeClassInfo[class];
1529
1530         /* Mark this vnode as in this dump - so we don't delete it later */
1531         if (!delo) {
1532             idx = (vnodeIndexOffset(vcp, vnodeNumber) >> vcp->logSize) - 1;
1533             if (class == vLarge) {
1534                 if (Lbuf && (idx < s1))
1535                     Lbuf[idx] = 0;
1536             } else {
1537                 if (Sbuf && (idx < s2))
1538                     Sbuf[idx] = 0;
1539             }
1540         }
1541
1542         if (haveStuff) {
1543             FdHandle_t *fdP = IH_OPEN(vp->vnodeIndex[class].handle);
1544             if (fdP == NULL) {
1545                 Log("1 Volser: ReadVnodes: Error opening vnode index: %s; restore aborted\n",
1546                     afs_error_message(errno));
1547                 V_needsSalvaged(vp) = 1;
1548                 return VOLSERREAD_DUMPERROR;
1549             }
1550             if (FDH_PREAD(fdP, &oldvnode, sizeof(oldvnode), vnodeIndexOffset(vcp, vnodeNumber)) ==
1551                 sizeof(oldvnode)) {
1552                 if (oldvnode.type != vNull && VNDISK_GET_INO(&oldvnode)) {
1553                     IH_DEC(V_linkHandle(vp), VNDISK_GET_INO(&oldvnode),
1554                            V_parentId(vp));
1555                 }
1556             }
1557             vnode->vnodeMagic = vcp->magic;
1558             if (FDH_PWRITE(fdP, vnode, vcp->diskSize, vnodeIndexOffset(vcp, vnodeNumber)) != vcp->diskSize) {
1559                 Log("1 Volser: ReadVnodes: Error writing vnode index: %s; restore aborted\n",
1560                     afs_error_message(errno));
1561                 FDH_REALLYCLOSE(fdP);
1562                 V_needsSalvaged(vp) = 1;
1563                 return VOLSERREAD_DUMPERROR;
1564             }
1565             FDH_CLOSE(fdP);
1566         }
1567     }
1568     iod_ungetc(iodp, tag);
1569
1570     return 0;
1571 }
1572
1573
1574 /* called with disk file only.  Note that we don't have to worry about rx_Read
1575  * needing to read an ungetc'd character, since the ReadInt32 will have read
1576  * it instead.
1577  *
1578  * if handleP == NULL, don't write the file anywhere; just read and discard
1579  * the file contents
1580  */
1581 static afs_fsize_t
1582 volser_WriteFile(int vn, struct iod *iodp, FdHandle_t * handleP, int tag,
1583                  Error * status)
1584 {
1585     afs_int32 code;
1586     ssize_t nBytes;
1587     afs_fsize_t filesize;
1588     afs_fsize_t written = 0;
1589     size_t size = 8192;
1590     afs_fsize_t nbytes;
1591     unsigned char *p;
1592
1593
1594     *status = 0;
1595     {
1596         afs_uint32 filesize_high = 0L, filesize_low = 0L;
1597         if (tag == 'h') {
1598             if (!ReadInt32(iodp, &filesize_high)) {
1599                 *status = 1;
1600                 return 0;
1601             }
1602         }
1603         if (!ReadInt32(iodp, &filesize_low)) {
1604             *status = 1;
1605             return 0;
1606         }
1607         FillInt64(filesize, filesize_high, filesize_low);
1608     }
1609     p = malloc(size);
1610     if (p == NULL) {
1611         *status = 2;
1612         return (0);
1613     }
1614     for (nbytes = filesize; nbytes; nbytes -= size) {
1615         if (nbytes < size)
1616             size = nbytes;
1617
1618         if ((code = iod_Read(iodp, (char *) p, size)) != size) {
1619             Log("1 Volser: WriteFile: Error reading dump file %d size=%llu nbytes=%u (%d of %u): %s; restore aborted\n", vn, (afs_uintmax_t) filesize, nbytes, code, (unsigned)size, afs_error_message(errno));
1620             *status = 3;
1621             break;
1622         }
1623         if (handleP) {
1624             nBytes = FDH_PWRITE(handleP, p, size, written);
1625             if (nBytes > 0)
1626                 written += nBytes;
1627             if (nBytes != size) {
1628                 Log("1 Volser: WriteFile: Error writing (%u) bytes to vnode %d; %s; restore aborted\n", (int)(nBytes & 0xffffffff), vn, afs_error_message(errno));
1629                 *status = 4;
1630                 break;
1631             }
1632         }
1633     }
1634     free(p);
1635     return (written);
1636 }
1637
1638 static int
1639 ReadDumpHeader(struct iod *iodp, struct DumpHeader *hp)
1640 {
1641     int tag;
1642     afs_uint32 beginMagic;
1643     afs_int32 critical = 0;
1644     if (iod_getc(iodp) != D_DUMPHEADER || !ReadInt32(iodp, &beginMagic)
1645         || !ReadInt32(iodp, (afs_uint32 *) & hp->version)
1646         || beginMagic != DUMPBEGINMAGIC)
1647         return 0;
1648     hp->volumeId = 0;
1649     hp->nDumpTimes = 0;
1650     while ((tag = iod_getc(iodp)) > D_MAX) {
1651         unsigned short arrayLength;
1652         int i;
1653         if (critical)
1654             critical--;
1655         switch (tag) {
1656         case 'v':
1657             if (!ReadInt32(iodp, &hp->volumeId))
1658                 return 0;
1659             break;
1660         case 'n':
1661             ReadString(iodp, hp->volumeName, sizeof(hp->volumeName));
1662             break;
1663         case 't':
1664             if (!ReadShort(iodp, &arrayLength))
1665                 return 0;
1666             hp->nDumpTimes = (arrayLength >> 1);
1667             for (i = 0; i < hp->nDumpTimes; i++)
1668                 if (!ReadInt32(iodp, (afs_uint32 *) & hp->dumpTimes[i].from)
1669                     || !ReadInt32(iodp, (afs_uint32 *) & hp->dumpTimes[i].to))
1670                     return 0;
1671             break;
1672         case 0x7e:
1673             critical = 2;
1674             break;
1675         default:
1676             if (!HandleUnknownTag(iodp, tag, 0, critical))
1677                 return VOLSERREAD_DUMPERROR;
1678         }
1679     }
1680     if (!hp->volumeId || !hp->nDumpTimes) {
1681         return 0;
1682     }
1683     iod_ungetc(iodp, tag);
1684     return 1;
1685 }
1686
1687
1688 /* ----- Below are the calls that calculate dump size ----- */
1689
1690 static int
1691 SizeDumpVolumeHeader(struct iod *iodp, Volume * vp,
1692                      struct volintSize *v_size)
1693 {
1694     int code = 0;
1695     static char nullString[1] = "";     /*The ``contents'' of motd */
1696     afs_uint64 addvar;
1697
1698 /*     if (!code) code = DumpTag(iodp, D_VOLUMEHEADER); */
1699     FillInt64(addvar,0, 1);
1700     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1701 /*     if (!code) {code = DumpInt32(iodp, 'i',V_id(vp));} */
1702     FillInt64(addvar,0, 5);
1703     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1704 /*     if (!code) code = DumpInt32(iodp, 'v',V_stamp(vp).version); */
1705     FillInt64(addvar,0, 5);
1706     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1707 /*     if (!code) code = DumpString(iodp, 'n',V_name(vp)); */
1708     FillInt64(addvar,0, (2 + strlen(V_name(vp))));
1709     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1710 /*     if (!code) code = DumpBool(iodp, 's',V_inService(vp)); */
1711     FillInt64(addvar,0, 2);
1712     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1713 /*     if (!code) code = DumpBool(iodp, 'b',V_blessed(vp)); */
1714     FillInt64(addvar,0, 2);
1715     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1716 /*     if (!code) code = DumpInt32(iodp, 'u',V_uniquifier(vp)); */
1717     FillInt64(addvar,0, 5);
1718     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1719 /*     if (!code) code = DumpByte(iodp, 't',(byte)V_type(vp)); */
1720     FillInt64(addvar,0, 2);
1721     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1722 /*     if (!code){ code = DumpInt32(iodp, 'p',V_parentId(vp));} */
1723     FillInt64(addvar,0, 5);
1724     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1725 /*     if (!code) code = DumpInt32(iodp, 'c',V_cloneId(vp)); */
1726     FillInt64(addvar,0, 5);
1727     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1728 /*     if (!code) code = DumpInt32(iodp, 'q',V_maxquota(vp)); */
1729     FillInt64(addvar,0, 5);
1730     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1731 /*     if (!code) code = DumpInt32(iodp, 'm',V_minquota(vp)); */
1732     FillInt64(addvar,0, 5);
1733     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1734 /*     if (!code) code = DumpInt32(iodp, 'd',V_diskused(vp)); */
1735     FillInt64(addvar,0, 5);
1736     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1737 /*     if (!code) code = DumpInt32(iodp, 'f',V_filecount(vp)); */
1738     FillInt64(addvar,0, 5);
1739     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1740 /*     if (!code) code = DumpInt32(iodp, 'a', V_accountNumber(vp)); */
1741     FillInt64(addvar,0, 5);
1742     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1743 /*     if (!code) code = DumpInt32(iodp, 'o', V_owner(vp)); */
1744     FillInt64(addvar,0, 5);
1745     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1746 /*     if (!code) code = DumpInt32(iodp, 'C',V_creationDate(vp));       /\* Rw volume creation date *\/ */
1747     FillInt64(addvar,0, 5);
1748     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1749 /*     if (!code) code = DumpInt32(iodp, 'A',V_accessDate(vp)); */
1750     FillInt64(addvar,0, 5);
1751     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1752 /*     if (!code) code = DumpInt32(iodp, 'U',V_updateDate(vp)); */
1753     FillInt64(addvar,0, 5);
1754     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1755 /*     if (!code) code = DumpInt32(iodp, 'E',V_expirationDate(vp)); */
1756     FillInt64(addvar,0, 5);
1757     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1758 /*     if (!code) code = DumpInt32(iodp, 'B',V_backupDate(vp));         /\* Rw volume backup clone date *\/ */
1759     FillInt64(addvar,0, 5);
1760     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1761 /*     if (!code) code = DumpString(iodp, 'O',V_offlineMessage(vp)); */
1762     FillInt64(addvar,0, (2 + strlen(V_offlineMessage(vp))));
1763     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1764 /*     /\* */
1765 /*      * We do NOT dump the detailed volume statistics residing in the old */
1766 /*      * motd field, since we cannot tell from the info in a dump whether */
1767 /*      * statistics data has been put there.  Instead, we dump a null string, */
1768 /*      * just as if that was what the motd contained. */
1769 /*      *\/ */
1770 /*     if (!code) code = DumpString(iodp, 'M', nullString); */
1771     FillInt64(addvar,0, (2 + strlen(nullString)));
1772     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1773 /*     if (!code) code = DumpArrayInt32(iodp, 'W', (afs_uint32 *)V_weekUse(vp), sizeof(V_weekUse(vp))/sizeof(V_weekUse(vp)[0])); */
1774     FillInt64(addvar,0, (3 + 4 * (sizeof(V_weekUse(vp)) / sizeof(V_weekUse(vp)[0]))));
1775     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1776 /*     if (!code) code = DumpInt32(iodp, 'D', V_dayUseDate(vp)); */
1777     FillInt64(addvar,0, 5);
1778     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1779 /*     if (!code) code = DumpInt32(iodp, 'Z', V_dayUse(vp)); */
1780     FillInt64(addvar,0, 5);
1781     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1782     return code;
1783 }
1784
1785 static int
1786 SizeDumpEnd(struct iod *iodp, struct volintSize *v_size)
1787 {
1788     int code = 0;
1789     afs_uint64 addvar;
1790     FillInt64(addvar,0, 5);
1791     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1792     return code;
1793 }
1794
1795 int
1796 SizeDumpVolume(struct rx_call *call, Volume * vp,
1797                afs_int32 fromtime, int dumpAllDirs,
1798                struct volintSize *v_size)
1799 {
1800     int code = 0;
1801     struct iod *iodp = (struct iod *)0;
1802 /*    iod_Init(iodp, call); */
1803
1804     if (!code)
1805         code = SizeDumpDumpHeader(iodp, vp, fromtime, v_size);
1806     if (!code)
1807         code = SizeDumpPartial(iodp, vp, fromtime, dumpAllDirs, v_size);
1808     if (!code)
1809         code = SizeDumpEnd(iodp, v_size);
1810
1811     return code;
1812 }
1813
1814 static int
1815 SizeDumpDumpHeader(struct iod *iodp, Volume * vp,
1816                    afs_int32 fromtime, struct volintSize *v_size)
1817 {
1818     int code = 0;
1819 /*    int UseLatestReadOnlyClone = 1; */
1820 /*    afs_int32 dumpTimes[2]; */
1821     afs_uint64 addvar;
1822 /*    iodp->device = vp->device; */
1823 /*    iodp->parentId = V_parentId(vp); */
1824 /*    iodp->dumpPartition = vp->partition; */
1825
1826     ZeroInt64(v_size->dump_size);       /* initialize the size */
1827 /*     if (!code) code = DumpDouble(iodp, D_DUMPHEADER, DUMPBEGINMAGIC, DUMPVERSION); */
1828     FillInt64(addvar,0, 9);
1829     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1830 /*     if (!code) code = DumpInt32(iodp, 'v', UseLatestReadOnlyClone? V_id(vp): V_parentId(vp)); */
1831     FillInt64(addvar,0, 5);
1832     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1833 /*     if (!code) code = DumpString(iodp, 'n',V_name(vp)); */
1834     FillInt64(addvar,0, (2 + strlen(V_name(vp))));
1835     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1836 /*     dumpTimes[0] = fromtime; */
1837 /*     dumpTimes[1] = V_backupDate(vp); /\* Until the time the clone was made *\/ */
1838 /*     if (!code) code = DumpArrayInt32(iodp, 't', (afs_uint32 *)dumpTimes, 2); */
1839     FillInt64(addvar,0, (3 + 4 * 2));
1840     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1841     return code;
1842 }
1843
1844 static int
1845 SizeDumpVnode(struct iod *iodp, struct VnodeDiskObject *v, VolumeId volid,
1846               int vnodeNumber, int dumpEverything,
1847               struct volintSize *v_size)
1848 {
1849     int code = 0;
1850     afs_uint64 addvar;
1851
1852     if (!v || v->type == vNull)
1853         return code;
1854 /*     if (!code) code = DumpDouble(iodp, D_VNODE, vnodeNumber, v->uniquifier); */
1855     FillInt64(addvar,0, 9);
1856     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1857     if (!dumpEverything)
1858         return code;
1859 /*     if (!code)  code = DumpByte(iodp, 't',(byte)v->type); */
1860     FillInt64(addvar,0, 2);
1861     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1862 /*     if (!code) code = DumpShort(iodp, 'l', v->linkCount); /\* May not need this *\/ */
1863     FillInt64(addvar,0, 3);
1864     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1865 /*     if (!code) code = DumpInt32(iodp, 'v', v->dataVersion); */
1866     FillInt64(addvar,0, 5);
1867     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1868 /*     if (!code) code = DumpInt32(iodp, 'm', v->unixModifyTime); */
1869     FillInt64(addvar,0, 5);
1870     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1871 /*     if (!code) code = DumpInt32(iodp, 'a', v->author); */
1872     FillInt64(addvar,0, 5);
1873     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1874 /*     if (!code) code = DumpInt32(iodp, 'o', v->owner); */
1875     FillInt64(addvar,0, 5);
1876     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1877 /*     if (!code && v->group) code = DumpInt32(iodp, 'g', v->group);    /\* default group is 0 *\/ */
1878     if (v->group) {
1879         FillInt64(addvar,0, 5);
1880         AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1881     }
1882 /*     if (!code) code = DumpShort(iodp, 'b', v->modeBits); */
1883     FillInt64(addvar,0, 3);
1884     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1885 /*     if (!code) code = DumpInt32(iodp, 'p', v->parent); */
1886     FillInt64(addvar,0, 5);
1887     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1888 /*     if (!code) code = DumpInt32(iodp, 's', v->serverModifyTime); */
1889     FillInt64(addvar,0, 5);
1890     AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1891     if (v->type == vDirectory) {
1892 /*      acl_HtonACL(VVnodeDiskACL(v)); */
1893 /*      if (!code) code = DumpByteString(iodp, 'A', (byte *) VVnodeDiskACL(v), VAclDiskSize(v)); */
1894         FillInt64(addvar,0, (1 + VAclDiskSize(v)));
1895         AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1896     }
1897
1898     if (VNDISK_GET_INO(v)) {
1899         VNDISK_GET_LEN(addvar, v);
1900         if (v->vn_length_hi)
1901             addvar += 9;
1902         else
1903             addvar += 5;
1904         AddUInt64(v_size->dump_size, addvar, &v_size->dump_size);
1905     }
1906     return code;
1907 }
1908
1909 /* A partial dump (no dump header) */
1910 static int
1911 SizeDumpPartial(struct iod *iodp, Volume * vp,
1912                 afs_int32 fromtime, int dumpAllDirs,
1913                 struct volintSize *v_size)
1914 {
1915     int code = 0;
1916     if (!code)
1917         code = SizeDumpVolumeHeader(iodp, vp, v_size);
1918     if (!code)
1919         code =
1920             SizeDumpVnodeIndex(iodp, vp, vLarge, fromtime, dumpAllDirs,
1921                                v_size);
1922     if (!code)
1923         code = SizeDumpVnodeIndex(iodp, vp, vSmall, fromtime, 0, v_size);
1924     return code;
1925 }
1926
1927 static int
1928 SizeDumpVnodeIndex(struct iod *iodp, Volume * vp, VnodeClass class,
1929                    afs_int32 fromtime, int forcedump,
1930                    struct volintSize *v_size)
1931 {
1932     int code = 0;
1933     struct VnodeClassInfo *vcp = &VnodeClassInfo[class];
1934     char buf[SIZEOF_LARGEDISKVNODE];
1935     struct VnodeDiskObject *vnode = (struct VnodeDiskObject *)buf;
1936     StreamHandle_t *file;
1937     FdHandle_t *fdP;
1938     afs_sfsize_t size, nVnodes;
1939     int flag;
1940     int vnodeIndex;
1941
1942     fdP = IH_OPEN(vp->vnodeIndex[class].handle);
1943     opr_Assert(fdP != NULL);
1944     file = FDH_FDOPEN(fdP, "r+");
1945     opr_Assert(file != NULL);
1946     size = OS_SIZE(fdP->fd_fd);
1947     opr_Assert(size != -1);
1948     nVnodes = (size / vcp->diskSize) - 1;
1949     if (nVnodes > 0) {
1950         opr_Assert((nVnodes + 1) * vcp->diskSize == size);
1951         opr_Assert(STREAM_ASEEK(file, vcp->diskSize) == 0);
1952     } else
1953         nVnodes = 0;
1954     for (vnodeIndex = 0;
1955          nVnodes && STREAM_READ(vnode, vcp->diskSize, 1, file) == 1 && !code;
1956          nVnodes--, vnodeIndex++) {
1957         flag = forcedump || (vnode->serverModifyTime >= fromtime);
1958         /* Note:  the >= test is very important since some old volumes may not have
1959          * a serverModifyTime.  For an epoch dump, this results in 0>=0 test, which
1960          * does dump the file! */
1961         if (!code)
1962             code =
1963                 SizeDumpVnode(iodp, vnode, V_id(vp),
1964                               bitNumberToVnodeNumber(vnodeIndex, class), flag,
1965                               v_size);
1966     }
1967     STREAM_CLOSE(file);
1968     FDH_CLOSE(fdP);
1969     return code;
1970 }