AFSLore/AdminFAQ.mdwn

   1 ## <a name="3  AFS administration"></a> 3 AFS administration
   2
   3 The Administration Section of the [[AFSFrequentlyAskedQuestions]].
   4
   5 - [[PreambleFAQ]]
   6 - [[GeneralFAQ]]
   7 - [[UsageFAQ]]
   8
   9 <div>
  10   <ul>
  11     <li><a href="#3  AFS administration"> 3 AFS administration</a><ul>
  12         <li><a href="#3.01  Is there a version of xdm"> 3.01 Is there a version of xdm available with AFS authentication?</a></li>
  13         <li><a href="#3.02  Is there a version of xloc"> 3.02 Is there a version of xlock available with AFS authentication?</a></li>
  14         <li><a href="#3.03  What is /afs/@cell?"> 3.03 What is /afs/@cell?</a></li>
  15         <li><a href="#3.04  Given that AFS data is loc"> 3.04 Given that AFS data is location independent, how does an AFS client determine which server houses the data its user is attempting to access?</a></li>
  16         <li><a href="#3.05  Which protocols does AFS u"> 3.05 Which protocols does AFS use?</a></li>
  17         <li><a href="#3.06  Are setuid programs execut"> 3.06 Are setuid programs executable across AFS cell boundaries?</a></li>
  18         <li><a href="#3.07  How does AFS maintain cons"> 3.07 How does AFS maintain consistency on read-write files?</a></li>
  19         <li><a href="#3.08  How can I run daemons with"> 3.08 How can I run daemons with tokens that do not expire?</a></li>
  20         <li><a href="#3.09  Can I check my user's pass"> 3.09 Can I check my user's passwords for security purposes?</a></li>
  21         <li><a href="#3.10  Is there a way to automati"> 3.10 Is there a way to automatically balance disk usage across fileservers?</a></li>
  22         <li><a href="#3.11  Can I shutdown an AFS file"> 3.11 Can I shutdown an AFS fileserver without affecting users?</a></li>
  23         <li><a href="#3.12  How can I set up mail deli"> 3.12 How can I set up mail delivery to users with $HOMEs in AFS?</a></li>
  24         <li><a href="#3.13  Should I replicate a _Read"> 3.13 Should I replicate a ReadOnly volume on the same partition and server as the ReadWrite volume?</a></li>
  25         <li><a href="#3.14  Should I start AFS before"> 3.14 Should I start AFS before NFS in /etc/inittab?</a></li>
  26         <li><a href="#3.15  Will AFS run on a multi-ho"> 3.15 Will AFS run on a multi-homed fileserver?</a></li>
  27         <li><a href="#3.16  Can I replicate my user's"> 3.16 Can I replicate my user's home directory AFS volumes?</a></li>
  28         <li><a href="#3.17  Which TCP/IP ports and pro"> 3.17 Which TCP/IP ports and protocols do I need to enable in order to operate AFS through my Internet firewall?</a></li>
  29         <li><a href="#3.18  What is the Andrew Benchma"> 3.18 What is the Andrew Benchmark?</a></li>
  30         <li><a href="#3.19  Is there a version of HP V"> 3.19 Is there a version of HP VUE login with AFS authentication?</a></li>
  31         <li><a href="#3.20  How can I list which clien"> 3.20 How can I list which clients have cached files from a server?</a></li>
  32         <li><a href="#3.21  Do Backup volumes require"> 3.21 Do Backup volumes require as much space as ReadWrite volumes?</a></li>
  33         <li><a href="#3.22  Should I run timed on my A"> 3.22 Should I run timed on my AFS client?</a></li>
  34         <li><a href="#3.23  Why should I keep /usr/vic"> 3.23 Why should I keep /usr/vice/etc/CellServDB current?</a></li>
  35         <li><a href="#3.24  How can I keep /usr/vice/e"> 3.24 How can I keep /usr/vice/etc/CellServDB current?</a></li>
  36         <li><a href="#3.25  How can I compute a list o"> 3.25 How can I compute a list of AFS fileservers?</a></li>
  37         <li><a href="#3.26  How can I set up anonymous"> 3.26 How can I set up anonymous FTP login to access /afs?</a></li>
  38         <li><a href="#3.27  Where can I find the Andre"> 3.27 Where can I find the Andrew Benchmark?</a></li>
  39         <li><a href="#3.28 Is the data sent over the n"> 3.28 Is the data sent over the network encrypted in AFS ?</a></li>
  40         <li><a href="#3.29 What underlying filesystems"> 3.29 What underlying filesystems can I use for AFS ?</a></li>
  41       </ul>
  42     </li>
  43   </ul>
  44 </div>
  45
  46 - [[ResourcesFAQ]]
  47 - [[AboutTheFAQ]]
  48 - [[FurtherReading]]
  49
  50 ### <a name="3.01  Is there a version of xdm"></a><a name="3.01  Is there a version of xdm "></a> 3.01 Is there a version of xdm available with AFS authentication?
  51
  52 Yes, xdm can be found in:
  53
  54 <file:///afs/transarc.com/public/afs-contrib/tools/xdm> <ftp://ftp.transarc.com/pub/afs-contrib/tools/xdm/MANIFEST>
  55
  56 ### <a name="3.02  Is there a version of xloc"></a> 3.02 Is there a version of xlock available with AFS authentication?
  57
  58 Yes, xlock can be found in:
  59
  60 <file:///afs/transarc.com/public/afs-contrib/tools/xlock> <ftp://ftp.transarc.com/pub/afs-contrib/tools/xlock/MANIFEST>
  61
  62 ### <a name="3.03  What is /afs/@cell?"></a> 3.03 What is /afs/@cell?
  63
  64 It is a symbolic link pointing at /afs/$your\_cell\_name.
  65
  66 NB, @cell is not something that is provided by AFS. You may decide it is useful in your cell and wish to create it yourself.
  67
  68 /afs/@cell is useful because:
  69
  70 - If you look after more than one AFS cell, you could create the link in each cell then set your PATH as:
  71   - PATH=$PATH:/afs/@cell/@sys/local/bin
  72
  73 - For most cells, it shortens the path names to be typed in thus reducing typos and saving time.
  74
  75 A disadvantage of using this convention is that when you cd into /afs/@cell then type "pwd" you see "/afs/@cell" instead of the full name of your cell. This may appear confusing if a user wants to tell a user in another cell the pathname to a file.
  76
  77 You could create your own /afs/@cell with the following:
  78
  79     #/bin/ksh -
  80     # author: mpb
  81     [ -L /afs/@cell ] && echo We already have @cell! && exit
  82     cell=$(cat /usr/vice/etc/ThisCell)
  83     cd /afs/.${cell} && fs mkm temp root.afs
  84     cd temp
  85     ln -s /afs/${cell} @cell
  86     ln -s /afs/.${cell} .@cell            # .@cell for RW path
  87     cd /afs/.${cell} && fs rmm temp
  88     vos release root.afs; fs checkv
  89
  90 <http://www-archive.stanford.edu/lists/info-afs/hyper95/0298.html>
  91
  92 ### <a name="3.04  Given that AFS data is loc"></a> 3.04 Given that AFS data is location independent, how does an AFS client determine which server houses the data its user is attempting to access?
  93
  94 The Volume Location Database (VLDB) is stored on AFS Database Servers and is ideally replicated across 3 or more Database Server machines. Replication of the Database ensures high availability and load balances the requests for the data. The VLDB maintains information regarding the current physical location of all volume data (files and directories) in the cell, including the IP address of the [[FileServer]], and the name of the disk partition the data is stored on.
  95
  96 A list of a cell's Database Servers is stored on the local disk of each AFS Client machine as: /usr/vice/etc/CellServDB
  97
  98 The Database Servers also house the Kerberos Authentication Database (encrypted user and server passwords), the Protection Database (user UID and protection group information) and the Backup Database (used by System Administrators to backup AFS file data to tape).
  99
 100 ### <a name="3.05  Which protocols does AFS u"></a> 3.05 Which protocols does AFS use?
 101
 102 AFS may be thought of as a collection of protocols and software processes, nested one on top of the other. The constant interaction between and within these levels makes AFS a very sophisticated software system.
 103
 104 At the lowest level is the UDP protocol, which is part of TCP/IP. UDP is the connection to the actual network wire. The next protocol level is the remote procedure call (RPC). In general, RPCs allow the developer to build applications using the client/server model, hiding the underlying networking mechanisms. AFS uses Rx, an RPC protocol developed specifically for AFS during its development phase at Carnegie Mellon University.
 105
 106 Above the RPC is a series of server processes and interfaces that all use Rx for communication between machines. Fileserver, volserver, upserver, upclient, and bosserver are server processes that export RPC interfaces to allow their user interface commands to request actions and get information. For example, a bos status  command will examine the bos server process on the indicated file server machine.
 107
 108 Database servers use ubik, a replicated database mechanism which is implemented using RPC. Ubik guarantees that the copies of AFS databases of multiple server machines remain consistent. It provides an application programming interface (API) for database reads and writes, and uses RPCs to keep the database synchronized. The database server processes, vlserver, kaserver, and ptserver, reside above ubik. These processes export an RPC interface which allows user commands to control their operation. For instance, the pts command is used to communicate with the ptserver, while the command klog uses the kaserver's RPC interface.
 109
 110 Some application programs are quite complex, and draw on RPC interfaces for communication with an assortment of processes. Scout utilizes the RPC interface to file server processes to display and monitor the status of file servers. The uss command interfaces with kaserver, ptserver, volserver and vlserver to create new user accounts.
 111
 112 The Cache Manager also exports an RPC interface. This interface is used principally by file server machines to break callbacks. It can also be used to obtain Cache Manager status information. The program cmdebug shows the status of a Cache Manager using this interface.
 113
 114 For additional information, Section 1.5 of the AFS System Administrator's Guide and the April 1990 Cache Update contain more information on ubik. Udebug information and short descriptions of all debugging tools were included in the January 1991 Cache Update. Future issues will discuss other debugging tools in more detail.
 115
 116 [ source: <ftp://ftp.transarc.com/pub/afsug/newsletter/apr91> ] [ Copyright 1991 Transarc Corporation ]
 117
 118 ### <a name="3.06  Are setuid programs execut"></a> 3.06 Are setuid programs executable across AFS cell boundaries?
 119
 120 By default, the setuid bit is ignored but the program may be run (without setuid privilege).
 121
 122 It is possible to configure an AFS client to honour the setuid bit. This is achieved by root running:
 123
 124        root@toontown # fs setcell -cell $cellname -suid
 125
 126 (where $cellname is the name of the foreign cell. Use with care!).
 127
 128 NB: making a program setuid (or setgid) in AFS does **not** mean that the program will get AFS permissions of a user or group. To become AFS authenticated, you have to klog. If you are not authenticated, AFS treats you as "system:anyuser".
 129
 130 ### <a name="3.07  How does AFS maintain cons"></a> 3.07 How does AFS maintain consistency on read-write files?
 131
 132 AFS uses a mechanism called "callback".
 133
 134 Callback is a promise from the fileserver that the cache version of a file/directory is up-to-date. It is established by the fileserver with the caching of a file.
 135
 136 When a file is modified the fileserver breaks the callback. When the user accesses the file again the Cache Manager fetches a new copy if the callback has been broken.
 137
 138 The following paragraphs describe AFS callback mechanism in more detail:
 139
 140 If I open() fileA and start reading, and you then open() fileA, write() a change **\*\*and close() or fsync()\*\*** the file to get your changes back to the server - at the time the server accepts and writes your changes to the appropriate location on the server disk, the server also breaks callbacks to all clients to which it issued a copy of fileA.
 141
 142 So my client receives a message to break the callback on fileA, which it dutifully does. But my application (editor, spreadsheet, whatever I'm using to read fileA) is still running, and doesn't really care that the callback has been broken.
 143
 144 When something causes the application to read() more of the file the read() system call executes AFS cache manager code via the VFS switch, which does check the callback and therefore gets new copies of the data.
 145
 146 Of course, the application may not re-read data that it has already read, but that would also be the case if you were both using the same host. So, for both AFS and local files, I may not see your changes.
 147
 148 Now if I exit the application and start it again, or if the application does another open() on the file, then I will see the changes you've made.
 149
 150 This information tends to cause tremendous heartache and discontent - but unnecessarily so. People imagine rampant synchronization problems. In practice this rarely happens and in those rare instances, the data in question is typically not critical enough to cause real problems or crashing and burning of applications. Since 1985, we've found that the synchronization algorithm has been more than adequate in practice - but people still like to worry!
 151
 152 The source of worry is that, if I make changes to a file from my workstation, your workstation is not guaranteed to be notified until I close or fsync the file, at which point AFS guarantees that your workstation will be notified. This is a significant departure from NFS, in which no guarantees are provided.
 153
 154 Partially because of the worry factor and largely because of Posix, this will change in DFS. DFS synchronization semantics are identical to local file system synchronization.
 155
 156 [ DFS is the Distributed File System which is part of the Distributed ] [ Computing Environment (DCE). ]
 157
 158 ### <a name="3.08  How can I run daemons with"></a> 3.08 How can I run daemons with tokens that do not expire?
 159
 160 It is not a good idea to run with tokens that do not expire because this would weaken one of the security features of Kerberos.
 161
 162 A better approach is to re-authenticate just before the token expires.
 163
 164 There are two examples of this that have been contributed to afs-contrib. The first is "reauth":
 165
 166 - <file:///afs/transarc.com/public/afs-contrib/tools/reauth/>
 167 - <ftp://ftp.transarc.com/pub/afs-contrib/tools/reauth/MANIFEST>
 168 - <ftp://ftp.andrew.cmu.edu/pub/AFS-Tools/reauth-0.0.5.tar.gz>
 169
 170 The second is "lat":
 171
 172 <file:///afs/transarc.com/public/afs-contrib/pointers/UMich-lat-authenticated-batch-jobs> <ftp://ftp.transarc.com/pub/afs-contrib/pointers/UMich-lat-authenticated-batch-jobs>
 173
 174 Another collection of tools was [mentioned](https://lists.openafs.org/pipermail/openafs-info/2002-October/006353.html) by [[DanielClark]]:
 175
 176 Another option is [OpenPBS](http://www.openpbs.org/) and [Password Storage and Retrieval](http://www.lam-mpi.org/software/psr/) (PSR), where you encrypt your AFS password with a public key and put it in your home directory, and trusted machine(s) which have the private key on local disk then decrypt your password and run your job. MIT uses a variant of this (e.g. [a](http://web.mit.edu/longjobs/www/) &amp; [b](http://mit.edu/longjobs-dev/notebook/)) that uses their own code (see [longjobs documentation](http://web.mit.edu/longjobs-dev/doc/netsec.txt) sections III and IV) instead of PSR.
 177
 178 ### <a name="3.09  Can I check my user&#39;s pass"></a> 3.09 Can I check my user's passwords for security purposes?
 179
 180 Yes. Alec Muffett's Crack tool (at version 4.1f) has been converted to work on the Transarc kaserver database. This modified Crack (AFS Crack) is available via anonymous ftp from:
 181
 182 - <ftp://export.acs.cmu.edu/pub/crack.tar.Z>
 183 - <ftp://ftp.andrew.cmu.edu/pub/AFS-Tools/crack.tar.Z>
 184
 185 and is known to work on: pmax\_\* sun4\*\_\* hp700\_\* rs\_aix\* next\_\*
 186
 187 It uses the file /usr/afs/db/kaserver.DB0, which is the database on the kaserver machine that contains the encrypted passwords. As a bonus, AFS Crack is usually two to three orders of magnitude faster than the standard Crack since there is no concept of salting in a Kerberos database.
 188
 189 On a normal UNIX /etc/passwd file, each password can have been encrypted around 4096 (2^12) different saltings of the crypt(3) algorithm, so for a large number of users it is easy to see that a potentially large (up to 4095) number of seperate encryptions of each word checked has been avoided.
 190
 191 Author: Dan Lovinger Contact: Derrick J. Brashear &lt;shadow+@andrew.cmu.edu&gt;
 192
 193 <table border="1" cellpadding="0" cellspacing="0">
 194   <tr>
 195     <td> Note: </td>
 196     <td> AFS Crack does not work for MIT Kerberos Databases. The author is willing to give general guidance to someone interested in doing the (probably minimal) amount of work to port it to do MIT Kerberos. The author does not have access to a MIT Kerberos server to do this. </td>
 197   </tr>
 198 </table>
 199
 200 ### <a name="3.10  Is there a way to automati"></a> 3.10 Is there a way to automatically balance disk usage across fileservers?
 201
 202 Yes. There is a tool, balance, which does exactly this. It can be retrieved via anonymous ftp from:
 203
 204 - <ftp://ftp.andrew.cmu.edu/pub/AFS-Tools/balance-1.1b.tar.gz>
 205
 206 Actually, it is possible to write arbitrary balancing algorithms for this tool. The default set of "agents" provided for the current version of balance balance by usage, # of volumes, and activity per week, the latter currently requiring a source patch to the AFS volserver. Balance is highly configurable.
 207
 208 Author: Dan Lovinger Contact: Derrick Brashear &lt;shadow+@andrew.cmu.edu&gt;
 209
 210 ### <a name="3.11  Can I shutdown an AFS file"></a> 3.11 Can I shutdown an AFS fileserver without affecting users?
 211
 212 Yes, this is an example of the flexibility you have in managing AFS.
 213
 214 Before attempting to shutdown an AFS fileserver you have to make some arrangements that any services that were being provided are moved to another AFS fileserver:
 215
 216 1. Move all AFS volumes to another fileserver. (Check you have the space!) This can be done "live" while users are actively using files in those volumes with no detrimental effects.
 217
 218 1. Make sure that critical services have been replicated on one (or more) other fileserver(s). Such services include:
 219   - kaserver - Kerberos Authentication server
 220   - vlserver - Volume Location server
 221   - ptserver - Protection server
 222   - buserver - Backup server
 223
 224 It is simple to test this before the real shutdown by issuing:
 225
 226        bos shutdown $server $service
 227
 228        where: $server is the name of the server to be shutdown
 229          and  $service is one (or all) of: kaserver vlserver ptserver buserver
 230
 231 Other points to bear in mind:
 232
 233 - "vos remove" any RO volumes on the server to be shutdown. Create corresponding RO volumes on the 2nd fileserver after moving the RW. There are two reasons for this:
 234   1. An RO on the same partition ("cheap replica") requires less space than a full-copy RO.
 235   2. Because AFS always accesses RO volumes in preference to RW, traffic will be directed to the RO and therefore quiesce the load on the fileserver to be shutdown.
 236
 237 - If the system to be shutdown has the lowest IP address there may be a brief delay in authenticating because of timeout experienced before contacting a second kaserver.
 238
 239 ### <a name="3.12  How can I set up mail deli"></a> 3.12 How can I set up mail delivery to users with $HOMEs in AFS?
 240
 241 There are many ways to do this. Here, only two methods are considered:
 242
 243 Method 1: deliver into local filestore
 244
 245 This is the simplest to implement. Set up your mail delivery to append mail to /var/spool/mail/$USER on one mailserver host. The mailserver is an AFS client so users draw their mail out of local filestore into their AFS $HOME (eg: inc).
 246
 247 Note that if you expect your (AFS unauthenticated) mail delivery program to be able to process .forward files in AFS $HOMEs then you need to add "system:anyuser rl" to each $HOMEs ACL.
 248
 249 The advantages are:
 250
 251 - Simple to implement and maintain.
 252 - No need to authenticate into AFS.
 253
 254 The drawbacks are:
 255
 256 - It doesn't scale very well.
 257 - Users have to login to the mailserver to access their new mail.
 258 - Probably less secure than having your mailbox in AFS.
 259 - System administrator has to manage space in /var/spool/mail.
 260
 261 Method 2: deliver into AFS
 262
 263 This takes a little more setting up than the first method.
 264
 265 First, you must have your mail delivery daemon AFS authenticated (probably as "postman"). The reauth example in afs-contrib shows how a daemon can renew its token. You will also need to setup the daemon startup soon after boot time to klog (see the -pipe option).
 266
 267 Second, you need to set up the ACLs so that "postman" has lookup rights down to the user's $HOME and "lik" on $HOME/Mail.
 268
 269 Advantages:
 270
 271 - Scales better than first method.
 272 - Delivers to user's $HOME in AFS giving location independence.
 273 - Probably more secure than first method.
 274 - User responsible for space used by mail.
 275
 276 Disadvantages:
 277
 278 - More complicated to set up.
 279 - Need to correctly set ACLs down to $HOME/Mail for every user.
 280 - Probably need to store postman's password in a file so that the mail delivery daemon can klog after boot time. This may be OK if the daemon runs on a relatively secure host.
 281
 282 An example of how to do this for IBM RISC System/6000 is auth-sendmail. A beta test version of auth-sendmail can be found in:
 283
 284 <file:///afs/transarc.com/public/afs-contrib/doc/faq/auth-sendmail.tar.Z> <ftp://ftp.transarc.com/pub/afs-contrib/doc/faq/auth-sendmail.tar.Z>
 285
 286 ### <a name="3.13  Should I replicate a _Read"></a> 3.13 Should I replicate a [[ReadOnly]] volume on the same partition and server as the [[ReadWrite]] volume?
 287
 288 Yes, Absolutely! It improves the robustness of your served volumes.
 289
 290 If [[ReadOnly]] volumes exist (note use of term **exist** rather than **are available**), Cache Managers will **never** utilize the [[ReadWrite]] version of the volume. The only way to access the RW volume is via the "dot" path (or by special mounting).
 291
 292 This means if **all** RO copies are on dead servers, are offline, are behind a network partition, etc, then clients will not be able to get the data, even if the RW version of the volume is healthy, on a healthy server and in a healthy network.
 293
 294 However, you are **very** strongly encouraged to keep one RO copy of a volume on the **same server and partition** as the RW. There are two reasons for this:
 295
 296 1. The RO that is on the same server and partition as the RW is a clone (just a copy of the header - not a full copy of each file). It therefore is very small, but provides access to the same set of files that all other (full copy) [[ReadOnly]] volume do. Transarc trainers refer to this as the "cheap replica".
 297 2. To prevent the frustration that occurs when all your ROs are unavailable but a perfectly healthy RW was accessible but not used.
 298
 299 If you keep a "cheap replica", then by definition, if the RW is available, one of the RO's is also available, and clients will utilize that site.
 300
 301 ### <a name="3.14  Should I start AFS before"></a><a name="3.14  Should I start AFS before "></a> 3.14 Should I start AFS before NFS in /etc/inittab?
 302
 303 Yes, it is possible to run both AFS and NFS on the same system but you should start AFS first.
 304
 305 In IBM's AIX 3.2, your /etc/inittab would contain:
 306
 307     rcafs:2:wait:/etc/rc.afs > /dev/console 2>&1 # Start AFS daemons
 308     rcnfs:2:wait:/etc/rc.nfs > /dev/console 2>&1 # Start NFS daemons
 309
 310 With AIX, you need to load NFS kernel extensions before the AFS KEs in /etc/rc.afs like this:
 311
 312     #!/bin/sh -
 313     # example /etc/rc.afs for an AFS fileserver running AIX 3.2
 314     #
 315     echo "Installing NFS kernel extensions (for AFS+NFS)"
 316     /etc/gfsinstall -a /usr/lib/drivers/nfs.ext
 317     echo "Installing AFS kernel extensions..."
 318     D=/usr/afs/bin/dkload
 319     ${D}/cfgexport -a ${D}/export.ext
 320     ${D}/cfgafs    -a ${D}/afs.ext
 321     /usr/afs/bin/bosserver &
 322
 323 ### <a name="3.15  Will AFS run on a multi-ho"></a> 3.15 Will AFS run on a multi-homed fileserver?
 324
 325 (multi-homed = host has more than one network interface.)
 326
 327 Yes, it will. However, AFS was designed for hosts with a single IP address. There can be problems if you have one host name being resolved to several IP addresses.
 328
 329 Transarc suggest designating unique hostnames for each network interface. For example, a host called "spot" has two tokenring and one ethernet interfaces: spot-tr0, spot-tr1, spot-en0. Then, select which interface will be used for AFS and use that hostname in the [[CellServDB]] file (eg: spot-tr0).
 330
 331 You also have to remember to use the AFS interface name with any AFS commands that require a server name (eg: vos listvol spot-tr0).
 332
 333 There is a more detailed discussion of this in the August 1993 issue of "Cache Update" (see: <ftp://ftp.transarc.com/pub/afsug/newsletter/aug93>).
 334
 335 The simplest way of dealing with this is to make your AFS fileservers single-homed (eg only use one network interface).
 336
 337 At release 3.4 of AFS, it is possible to have multi-homed fileservers (but _not_ multi-homed database servers).
 338
 339 ### <a name="3.16  Can I replicate my user&#39;s"></a><a name="3.16  Can I replicate my user&#39;s "></a> 3.16 Can I replicate my user's home directory AFS volumes?
 340
 341 No.
 342
 343 Users with $HOMEs in /afs normally have an AFS [[ReadWrite]] volume mounted in their home directory.
 344
 345 You can replicate a RW volume but only as a [[ReadOnly]] volume and there can only be one instance of a [[ReadWrite]] volume.
 346
 347 In theory, you could have RO copies of a user's RW volume on a second server but in practice this won't work for the following reasons:
 348
 349     a) AFS has built-in bias to always access the RO copy of a RW volume.
 350        So the user would have a ReadOnly $HOME which is not too useful!
 351
 352     b) Even if a) was not true you would have to arrange frequent
 353        synchronisation of the RO copy with the RW volume (for example:
 354        "vos release user.fred; fs checkv") and this would have to be
 355        done for all such user volumes.
 356
 357     c) Presumably, the idea of replicating is to recover the $HOME
 358        in the event of a server crash. Even if a) and b) were not
 359        problems consider what you might have to do to recover a $HOME:
 360
 361        1) Create a new RW volume for the user on the second server
 362           (perhaps named "user.fred.2").
 363
 364        2) Now, where do you mount it?
 365
 366           The existing mountpoint cannot be used because it already has
 367           the ReadOnly copy of the original volume mounted there.
 368
 369           Let's choose: /afs/MyCell/user/fred.2
 370
 371        3) Copy data from the RO of the original into the new RW volume
 372           user.fred.2
 373
 374        4) Change the user's entry in the password file for the new $HOME:
 375           /afs/MyCell/user/fred.2
 376
 377        You would have to attempt steps 1 to 4 for every user who had
 378        their RW volume on the crashed server. By the time you had done
 379        all of this, the crashed server would probably have rebooted.
 380
 381        The bottom line is: you cannot replicate $HOMEs across servers.
 382
 383 ### <a name="3.17  Which TCP/IP ports and pro"></a> 3.17 Which TCP/IP ports and protocols do I need to enable in order to operate AFS through my Internet firewall?
 384
 385 Assuming you have already taken care of nameserving, you may wish to use an Internet timeserver for Network Time Protocol [[[NTP|Main/FurtherReading#NTP]]] and question [[3.22|Main/WebHome#NTP]]:
 386
 387 ntp 123/udp
 388
 389 A list of NTP servers is available via anonymous FTP from:
 390
 391 - <http://www.eecis.udel.edu/~mills/ntp/servers.html>
 392
 393 For further details on NTP see: <http://www.eecis.udel.edu/~ntp/>
 394
 395 For a "minimal" AFS service which does not allow inbound or outbound klog:
 396
 397        cachemanager    4711/udp (only if you use the arla-client instead of OpenAFS)
 398        fileserver      7000/udp
 399        cachemanager    7001/udp
 400        ptserver        7002/udp
 401        vlserver        7003/udp
 402        kaserver        7004/udp
 403        volserver       7005/udp
 404        reserved        7006/udp
 405        bosserver       7007/udp
 406
 407 (Ports in the 7020-7029 range are used by the AFS backup system, and won't be needed by external clients performing simple file accesses.)
 408
 409 Additionally, for "klog" to work through the firewall you need to allow inbound and outbound UDP on ports &gt;1024 (probably 1024&lt;port&lt;2048 would suffice depending on the number of simultaneous klogs).
 410
 411 See also: <http://www-archive.stanford.edu/lists/info-afs/hyper95/0874.html>
 412
 413 ### <a name="3.18  What is the Andrew Benchma"></a> 3.18 What is the Andrew Benchmark?
 414
 415 "It is a script that operates on a collection of files constituting an application program. The operations are intended to represent typical actions of an average user. The input to the benchmark is a source tree of about 70 files. The files total about 200 KB in size. The benchmark consists of five distinct phases:
 416
 417       I MakeDir - Construct a target subtree that is identical to the
 418                   source subtree.
 419      II Copy    - Copy every file from the source subtree to the target subtree.
 420     III ScanDir - Traverse the target subtree and examine the status
 421                   of every file in it.
 422      IV ReadAll - Scan every byte of every file in the target subtree.
 423       V Make    - Complete and link all files in the target subtree."
 424
 425 Source: <file:///afs/transarc.com/public/afs-contrib/doc/benchmark/Andrew.Benchmark.ps> <ftp://ftp.transarc.com/pub/afs-contrib/doc/benchmark/Andrew.Benchmark.ps>
 426
 427 ### <a name="3.19  Is there a version of HP V"></a> 3.19 Is there a version of HP VUE login with AFS authentication?
 428
 429 Yes, the availability of this is described in: <file:///afs/transarc.com/public/afs-contrib/pointers/HP-VUElogin.txt> <ftp://ftp.transarc.com/pub/afs-contrib/pointers/HP-VUElogin.txt>
 430
 431 If you don't have access to the above, please contact Rajeev Pandey of Hewlett Packard whose email address is &lt;rpandey@cv.hp.com&gt;.
 432
 433 ### <a name="3.20  How can I list which clien"></a> 3.20 How can I list which clients have cached files from a server?
 434
 435 By using the following script:
 436
 437     #!/bin/ksh -
 438     #
 439     # NAME          afsclients
 440     # AUTHOR        Rainer Toebbicke  <rtb@dxcern.cern.ch>
 441     # DATE          June 1994
 442     # PURPOSE       Display AFS clients which have grabbed files from a server
 443
 444     if [ $# = 0 ]; then
 445             echo "Usage: $0 <afs_server 1> ... <afsserver n>"
 446             exit 1
 447     fi
 448     for n; do
 449             /usr/afsws/etc/rxdebug -servers $n -allconn
 450     done | grep '^Connection' | \
 451     while  read x y z ipaddr rest; do echo $ipaddr; done | sort -u |
 452     while read ipaddr; do
 453             ipaddr=${ipaddr%%,}
 454             n="`nslookup $ipaddr`"
 455             n="${n##*Name: }"
 456             n="${n%%Address:*}"
 457             n="${n##*([ ])}"
 458             n="${n%?}"
 459             echo "$n ($ipaddr)"
 460     done
 461
 462 ### <a name="3.21  Do Backup volumes require"></a><a name="3.21  Do Backup volumes require "></a> 3.21 Do Backup volumes require as much space as [[ReadWrite]] volumes?
 463
 464 No.
 465
 466 The technique used is to create a new volume, where every file in the RW copy is pointed to by the new backup volume. The files don't exist in the BK, only in the RW volume. The backup volume therefore takes up very little space.
 467
 468 If the user now starts modifying data, the old copy must not be destroyed.
 469
 470 There is a Copy-On-Write bit in the vnode - if the fileserver writes to a vnode with the bit on it allocates a new vnode for the data and turns off the COW bit. The BK volume hangs onto the old data, and the RW volume slowly splits itself away over time.
 471
 472 The BK volume is re-synchronised with the RW next time a "vos backupsys" is run.
 473
 474 The space needed for the BK volume is directly related to the size of all files changed in the RW between runs of "vos backupsys".
 475
 476 ### <a name="3.22  Should I run timed on my A"></a> 3.22 Should I run timed on my AFS client?
 477
 478 No.
 479
 480 <a name="NTP"></a> The AFS Servers make use of NTP [[[NTP|Main/FurtherReading#NTP]]] to synchronise time each other and typically with one or more external NTP servers. By default, clients synchronize their time with one of the servers in the local cell. Thus all the machines participating in the AFS cell have an accurate view of the time.
 481
 482 For further details on NTP see: <http://www.eecis.udel.edu/~ntp/>. The latest version is 4.1, dated August 2001, which is **much** more recent that the version packaged with Transarc AFS.
 483
 484 A list of NTP servers is available via anonymous FTP from:
 485
 486 - <http://www.eecis.udel.edu/~mills/ntp/servers.html>
 487
 488 The default time setting behavior of the AFS client can be disabled by specifying the `-nosettime` argument to [afsd](http://www.transarc.ibm.com/Library/documentation/afs/3.5/unix/cmd/cmd53.htm). This is recommended for AFS servers which are also configured as clients (because servers normally run NTP daemons) and for clients that run NTP.
 489
 490 ### <a name="3.23  Why should I keep /usr/vic"></a> 3.23 Why should I keep /usr/vice/etc/CellServDB current?
 491
 492 On AFS clients, /usr/vice/etc/CellservDB, defines the cells and (their servers) that can be accessed via /afs.
 493
 494 Over time, site details change: servers are added/removed or moved onto new network addresses. New sites appear.
 495
 496 In order to keep up-to-date with such changes, the [[CellservDB]] file on each AFS client should be kept consistent with some master copy (at your site).
 497
 498 As well as updating [[CellservDB]], your AFS administrator should ensure that new cells are mounted in your cell's root.afs volume.
 499
 500 ### <a name="3.24  How can I keep /usr/vice/e"></a> 3.24 How can I keep /usr/vice/etc/CellServDB current?
 501
 502 Do a daily copy from a master source and update the AFS kernel sitelist.
 503
 504 One good master source is the grand.central.org [[CellServDB]], available from <http://grand.central.org/dl/cellservdb/CellServDB> or <file:/afs/openafs.org/service/CellServDB> (N.B. update to /afs/grand.central.org path when available). You can send updates for this to <cellservdb@central.org>.
 505
 506 The client [[CellServDB]] file must not reside under /afs and is best located in local filespace.
 507
 508 Simply updating a client [[CellServDB]] file is not enough. You also need to update the AFS kernel sitelist by either: 1 rebooting the client or 1 running "fs newcell $cell\_name $server\_list" for each site in the [[CellServDB]] file.
 509
 510 A script to update the AFS kernel sitelist on a running system is newCellServDB.
 511
 512 <file:///afs/ece.cmu.edu/usr/awk/Public/newCellServDB> <ftp://ftp.ece.cmu.edu/pub/afs-tools/newCellServDB>
 513
 514 One way to distribute [[CellServDB]] is to have a root cron job on each AFS client copy the file then run newCellServDB.
 515
 516 Example:
 517
 518     #!/bin/ksh -
 519     #
 520     # NAME       syncCellServDB
 521     # PURPOSE    Update local CellServDB file and update AFS kernel sitelist
 522     # USAGE      run by daily root cron job eg:
 523     #                    0 3 * * * /usr/local/sbin/syncCellServDB
 524     #
 525     # NOTE       "@cell" is a symbolic link to /afs/$this_cell_name
 526
 527     src=/afs/@cell/service/etc/CellServDB
 528     dst=/usr/vice/etc/CellServDB
 529     xec=/usr/local/sbin/newCellServDB
 530     log=/var/log/syncCellServDB
 531
 532     if [ -s ${src} ]; then
 533             if [ ${src} -nt ${dst} ]; then
 534                     cp $dst ${dst}- && cp $src $dst && $xec 2>&1 >$log
 535             else
 536                     echo "master copy no newer: no processing to be done" >$log
 537             fi
 538     else
 539             echo "zero length file: ${src}" >&2
 540     fi
 541
 542 ### <a name="3.25  How can I compute a list o"></a> 3.25 How can I compute a list of AFS fileservers?
 543
 544 Here is a Korn shell command to do it:
 545
 546        stimpy@nick $ vos listvldb -cell $(cat /usr/vice/etc/ThisCell) \
 547                      | awk '(/server/) {print $2}' | sort -u
 548
 549 ### <a name="3.26  How can I set up anonymous"></a> 3.26 How can I set up anonymous FTP login to access /afs?
 550
 551 The easiest way on a primarily "normal" machine (where you don't want to have everything in AFS) is to actually mount root.cell under ~ftp, and then symlink /afs to ~ftp/afs or whatever. It's as simple as changing the mountpoint in /usr/vice/etc/cacheinfo and restarting afsd.
 552
 553 Note that when you do this, anon ftp users can go anywhere system:anyuser can (or worse, if you're using IP-based ACLs and the ftp host is PTS groups). The only "polite" solution I've arrived at is to have the ftp host machine run a minimal [[CellServDB]] and police my ACLs tightly.
 554
 555 Alternatively, you can make ~ftp an AFS volume and just mount whatever you need under that - this works well if you can keep everything in AFS, and you don't have the same problems with anonymous "escapes" into /afs.
 556
 557 Unless you need to do authenticating ftp, you are _strongly_ recommended using wu-ftpdv2.4 (or better).
 558
 559 ### <a name="3.27  Where can I find the Andre"></a> 3.27 Where can I find the Andrew Benchmark?
 560
 561 <file:///afs/transarc.com/public/afs-contrib/doc/faq/ab.tar.Z> [156k] <ftp://ftp.transarc.com/pub/afs-contrib/doc/faq/ab.tar.Z> [156k]
 562
 563 This is a tar archive of <file:///afs/cs.cmu.edu/user/satya/ftp/ab/>
 564
 565 ### <a name="3.28 Is the data sent over the n"></a> 3.28 Is the data sent over the network encrypted in AFS ?
 566
 567 There is still no easy way to do this in Transarc AFS, but [[OpenAFS]] now has a "fs" subcommand to turn on encryption of regular file data sent and received by a client. This is a per client setting that persist until reboot. No server actions are needed to support this change. The syntax is:
 568
 569 - `fs setcrypt on`
 570 - `fs setcrypt off`
 571 - `fs getcrypt`
 572
 573 Note that this only encrypts network traffic between the client and server. The data on the server's disk is not encrypted nor is the data in the client's disk cache. The encryption algorithm used is [fcrypt](http://tedanderson.home.mindspring.com/fcrypt-paper.txt), which is a DES variant.
 574
 575 Getting encryption enabled by default:
 576
 577 - [[RedHat]] Linux: ([src](https://lists.openafs.org/pipermail/openafs-info/2002-July/005085.html)) change the last line of /etc/sysconfig/afs to `AFS_POST_INIT="/usr/bin/fs setcrypt on"`
 578 - Windows ([src](https://lists.openafs.org/pipermail/openafs-info/2003-June/009416.html)) set the following registry value named `SecurityLevel` under `HKLM\SYSTEM\CurrentControlSet\Services\TransarcAFSDaemon\Parameters` to 2.
 579
 580 I have not tested either of these procedures. -- [[TedAnderson]] - 05 Jun 2003
 581
 582 ### <a name="3.29 What underlying filesystems"></a> 3.29 What underlying filesystems can I use for AFS ?
 583
 584 See also [[SupportedConfigurations]].
 585
 586 You need to distinguish between the filesystem used by the file server to store the actual AFS data (by convention in /vicep?) and the filesystem used by the client cache manager to cache files.
 587
 588 With the new namei file server you can basically use any filesystem you want. Tne namei file server does not do any fancy stuff behind the scenes but only accesses normal files (their names are a bit strange though).
 589
 590 It is a different story with the old inode based server. It directly operates on the inodes of the underlying file system which therefore has to fully support the inode abstraction scheme. The the Administrators Guide for more details (they differ from system to system).
 591
 592 On the client side, you always have to use a file system supporting the inode abstraction for the cache (usually /usr/vice/cache) since the cache manager references files by their inode. Fortunately, it does not do such tricky stuff as the inode based server. The following file systems have been reported _not_ to work:
 593
 594 - reiserfs
 595 - vxfs (HP-UX)
 596 - advfs (Tru64), it works but gives cachecurruption
 597
 598 - Patch committed to cvs around 6/2003 will now enforce this in some cases and generate a warning to the user if the filesystem type is wrong.
 599
 600 The following file systems have been reported to work for the AFS client cache:
 601
 602 - ext2
 603 - ext3
 604 - hfs (HP-UX)
 605 - xfs (at least on IRIX 6.5)