rx: Make statistics interface use Atomics
[openafs.git] / src / rx / rx_user.c
1 /*
2  * Copyright 2000, International Business Machines Corporation and others.
3  * All Rights Reserved.
4  *
5  * This software has been released under the terms of the IBM Public
6  * License.  For details, see the LICENSE file in the top-level source
7  * directory or online at http://www.openafs.org/dl/license10.html
8  */
9
10 /* rx_user.c contains routines specific to the user space UNIX implementation of rx */
11
12 /* rxi_syscall is currently not prototyped */
13
14 #include <afsconfig.h>
15 #include <afs/param.h>
16
17
18 # include <sys/types.h>
19 # include <errno.h>
20 # include <signal.h>
21 # include <string.h>
22 #ifdef AFS_NT40_ENV
23 # include <WINNT/syscfg.h>
24 #else
25 # include <sys/socket.h>
26 # include <sys/file.h>
27 # include <netdb.h>
28 # include <sys/stat.h>
29 # include <netinet/in.h>
30 # include <sys/time.h>
31 # include <net/if.h>
32 # include <sys/ioctl.h>
33 # include <unistd.h>
34 #endif
35 # include <fcntl.h>
36 #if !defined(AFS_AIX_ENV) && !defined(AFS_NT40_ENV)
37 # include <sys/syscall.h>
38 #endif
39 #include <afs/afs_args.h>
40 #include <afs/afsutil.h>
41
42 #ifndef IPPORT_USERRESERVED
43 /* If in.h doesn't define this, define it anyway.  Unfortunately, defining
44    this doesn't put the code into the kernel to restrict kernel assigned
45    port numbers to numbers below IPPORT_USERRESERVED...  */
46 #define IPPORT_USERRESERVED 5000
47 # endif
48
49 #if defined(HAVE_LINUX_ERRQUEUE_H) && defined(ADAPT_PMTU)
50 #include <linux/types.h>
51 #include <linux/errqueue.h>
52 #ifndef IP_MTU
53 #define IP_MTU 14
54 #endif
55 #endif
56
57 #ifndef AFS_NT40_ENV
58 # include <sys/time.h>
59 #endif
60 #include "rx.h"
61 #include "rx_atomic.h"
62 #include "rx_globals.h"
63 #include "rx_stats.h"
64 #ifdef AFS_PTHREAD_ENV
65 #include <assert.h>
66
67 /*
68  * The rx_if_init_mutex mutex protects the following global variables:
69  * Inited
70  */
71
72 afs_kmutex_t rx_if_init_mutex;
73 #define LOCK_IF_INIT MUTEX_ENTER(&rx_if_init_mutex)
74 #define UNLOCK_IF_INIT MUTEX_EXIT(&rx_if_init_mutex)
75
76 /*
77  * The rx_if_mutex mutex protects the following global variables:
78  * myNetFlags
79  * myNetMTUs
80  * myNetMasks
81  */
82
83 afs_kmutex_t rx_if_mutex;
84 #define LOCK_IF MUTEX_ENTER(&rx_if_mutex)
85 #define UNLOCK_IF MUTEX_EXIT(&rx_if_mutex)
86 #else
87 #define LOCK_IF_INIT
88 #define UNLOCK_IF_INIT
89 #define LOCK_IF
90 #define UNLOCK_IF
91 #endif /* AFS_PTHREAD_ENV */
92
93
94 /*
95  * Make a socket for receiving/sending IP packets.  Set it into non-blocking
96  * and large buffering modes.  If port isn't specified, the kernel will pick
97  * one.  Returns the socket (>= 0) on success.  Returns OSI_NULLSOCKET on
98  * failure. Port must be in network byte order.
99  */
100 osi_socket
101 rxi_GetHostUDPSocket(u_int ahost, u_short port)
102 {
103     int binds, code = 0;
104     osi_socket socketFd = OSI_NULLSOCKET;
105     struct sockaddr_in taddr;
106     char *name = "rxi_GetUDPSocket: ";
107 #ifdef AFS_LINUX22_ENV
108 #if defined(ADAPT_PMTU)
109     int pmtu=IP_PMTUDISC_WANT;
110     int recverr=1;
111 #else
112     int pmtu=IP_PMTUDISC_DONT;
113 #endif
114 #endif
115
116 #if !defined(AFS_NT40_ENV)
117     if (ntohs(port) >= IPPORT_RESERVED && ntohs(port) < IPPORT_USERRESERVED) {
118 /*      (osi_Msg "%s*WARNING* port number %d is not a reserved port number.  Use port numbers above %d\n", name, port, IPPORT_USERRESERVED);
119 */ ;
120     }
121     if (ntohs(port) > 0 && ntohs(port) < IPPORT_RESERVED && geteuid() != 0) {
122         (osi_Msg
123          "%sport number %d is a reserved port number which may only be used by root.  Use port numbers above %d\n",
124          name, ntohs(port), IPPORT_USERRESERVED);
125         goto error;
126     }
127 #endif
128     socketFd = socket(AF_INET, SOCK_DGRAM, 0);
129
130     if (socketFd < 0) {
131         perror("socket");
132         goto error;
133     }
134
135 #ifdef AFS_NT40_ENV
136     rxi_xmit_init(socketFd);
137 #endif /* AFS_NT40_ENV */
138
139     taddr.sin_addr.s_addr = ahost;
140     taddr.sin_family = AF_INET;
141     taddr.sin_port = (u_short) port;
142 #ifdef STRUCT_SOCKADDR_HAS_SA_LEN
143     taddr.sin_len = sizeof(struct sockaddr_in);
144 #endif
145 #define MAX_RX_BINDS 10
146     for (binds = 0; binds < MAX_RX_BINDS; binds++) {
147         if (binds)
148             rxi_Delay(10);
149         code = bind(socketFd, (struct sockaddr *)&taddr, sizeof(taddr));
150         if (!code)
151             break;
152     }
153     if (code) {
154         perror("bind");
155         (osi_Msg "%sbind failed\n", name);
156         goto error;
157     }
158 #if !defined(AFS_NT40_ENV)
159     /*
160      * Set close-on-exec on rx socket
161      */
162     fcntl(socketFd, F_SETFD, 1);
163 #endif
164
165     /* Use one of three different ways of getting a socket buffer expanded to
166      * a reasonable size.
167      */
168     {
169         int greedy = 0;
170         int len1, len2;
171
172         len1 = 32766;
173         len2 = rx_UdpBufSize;
174
175         /* find the size closest to rx_UdpBufSize that will be accepted */
176         while (!greedy && len2 > len1) {
177             greedy =
178                 (setsockopt
179                   (socketFd, SOL_SOCKET, SO_RCVBUF, (char *)&len2,
180                    sizeof(len2)) >= 0);
181             if (!greedy)
182                 len2 /= 2;
183         }
184
185         /* but do not let it get smaller than 32K */
186         if (len2 < len1)
187             len2 = len1;
188
189         if (len1 < len2)
190             len1 = len2;
191
192
193         greedy =
194             (setsockopt
195              (socketFd, SOL_SOCKET, SO_SNDBUF, (char *)&len1,
196               sizeof(len1)) >= 0)
197             &&
198             (setsockopt
199              (socketFd, SOL_SOCKET, SO_RCVBUF, (char *)&len2,
200               sizeof(len2)) >= 0);
201         if (!greedy)
202             (osi_Msg "%s*WARNING* Unable to increase buffering on socket\n",
203              name);
204         if (rx_stats_active)
205             rx_atomic_set(&rx_stats.socketGreedy, greedy);
206     }
207
208 #ifdef AFS_LINUX22_ENV
209     setsockopt(socketFd, SOL_IP, IP_MTU_DISCOVER, &pmtu, sizeof(pmtu));
210 #if defined(ADAPT_PMTU)
211     setsockopt(socketFd, SOL_IP, IP_RECVERR, &recverr, sizeof(recverr));
212 #endif
213 #endif
214     if (rxi_Listen(socketFd) < 0) {
215         goto error;
216     }
217
218     return socketFd;
219
220   error:
221 #ifdef AFS_NT40_ENV
222     if (socketFd >= 0)
223         closesocket(socketFd);
224 #else
225     if (socketFd >= 0)
226         close(socketFd);
227 #endif
228
229     return OSI_NULLSOCKET;
230 }
231
232 osi_socket
233 rxi_GetUDPSocket(u_short port)
234 {
235     return rxi_GetHostUDPSocket(htonl(INADDR_ANY), port);
236 }
237
238 void
239 osi_Panic(char *msg, ...)
240 {
241     va_list ap;
242     va_start(ap, msg);
243     (osi_Msg "Fatal Rx error: ");
244     (osi_VMsg msg, ap);
245     va_end(ap);
246     fflush(stderr);
247     fflush(stdout);
248     afs_abort();
249 }
250
251 /*
252  * osi_AssertFailU() -- used by the osi_Assert() macro.
253  */
254
255 void
256 osi_AssertFailU(const char *expr, const char *file, int line)
257 {
258     osi_Panic("assertion failed: %s, file: %s, line: %d\n", expr,
259               file, line);
260 }
261
262 #if defined(AFS_AIX32_ENV) && !defined(KERNEL)
263 #ifndef osi_Alloc
264 static const char memZero;
265 void *
266 osi_Alloc(afs_int32 x)
267 {
268     /*
269      * 0-length allocs may return NULL ptr from malloc, so we special-case
270      * things so that NULL returned iff an error occurred
271      */
272     if (x == 0)
273         return (void *)&memZero;
274     return(malloc(x));
275 }
276
277 void
278 osi_Free(void *x, afs_int32 size)
279 {
280     if (x == &memZero)
281         return;
282     free(x);
283 }
284 #endif
285 #endif /* defined(AFS_AIX32_ENV) && !defined(KERNEL) */
286
287 #define ADDRSPERSITE    16
288
289
290 static afs_uint32 rxi_NetAddrs[ADDRSPERSITE];   /* host order */
291 static int myNetMTUs[ADDRSPERSITE];
292 static int myNetMasks[ADDRSPERSITE];
293 static int myNetFlags[ADDRSPERSITE];
294 static u_int rxi_numNetAddrs;
295 static int Inited = 0;
296
297 #if defined(AFS_NT40_ENV)
298 int
299 rxi_getaddr(void)
300 {
301     /* The IP address list can change so we must query for it */
302     rx_GetIFInfo();
303
304     /* we don't want to use the loopback adapter which is first */
305     /* this is a bad bad hack */
306     if (rxi_numNetAddrs > 1)
307         return htonl(rxi_NetAddrs[1]);
308     else if (rxi_numNetAddrs > 0)
309         return htonl(rxi_NetAddrs[0]);
310     else
311         return 0;
312 }
313
314 /*
315 ** return number of addresses
316 ** and the addresses themselves in the buffer
317 ** maxSize - max number of interfaces to return.
318 */
319 int
320 rx_getAllAddr(afs_uint32 * buffer, int maxSize)
321 {
322     int count = 0, offset = 0;
323
324     /* The IP address list can change so we must query for it */
325     rx_GetIFInfo();
326
327     for (count = 0; offset < rxi_numNetAddrs && maxSize > 0;
328          count++, offset++, maxSize--)
329         buffer[count] = htonl(rxi_NetAddrs[offset]);
330
331     return count;
332 }
333
334 /* this function returns the total number of interface addresses
335  * the buffer has to be passed in by the caller. It also returns
336  * the matching interface mask and mtu.  All values are returned
337  * in network byte order.
338  */
339 int
340 rx_getAllAddrMaskMtu(afs_uint32 addrBuffer[], afs_uint32 maskBuffer[],
341                      afs_uint32 mtuBuffer[], int maxSize)
342 {
343     int count = 0, offset = 0;
344
345     /* The IP address list can change so we must query for it */
346     rx_GetIFInfo();
347
348     for (count = 0;
349          offset < rxi_numNetAddrs && maxSize > 0;
350          count++, offset++, maxSize--) {
351         addrBuffer[count] = htonl(rxi_NetAddrs[offset]);
352         maskBuffer[count] = htonl(myNetMasks[offset]);
353         mtuBuffer[count]  = htonl(myNetMTUs[offset]);
354     }
355     return count;
356 }
357 #endif
358
359 #ifdef AFS_NT40_ENV
360 extern int rxinit_status;
361 void
362 rxi_InitMorePackets(void) {
363     int npackets, ncbufs;
364
365     ncbufs = (rx_maxJumboRecvSize - RX_FIRSTBUFFERSIZE);
366     if (ncbufs > 0) {
367         ncbufs = ncbufs / RX_CBUFFERSIZE;
368         npackets = rx_initSendWindow - 1;
369         rxi_MorePackets(npackets * (ncbufs + 1));
370     }
371 }
372 void
373 rx_GetIFInfo(void)
374 {
375     u_int maxsize;
376     u_int rxsize;
377     afs_uint32 i;
378
379     LOCK_IF_INIT;
380     if (Inited) {
381         if (Inited < 2 && rxinit_status == 0) {
382             /* We couldn't initialize more packets earlier.
383              * Do it now. */
384             rxi_InitMorePackets();
385             Inited = 2;
386         }
387         UNLOCK_IF_INIT;
388         return;
389     }
390     Inited = 1;
391     UNLOCK_IF_INIT;
392
393     LOCK_IF;
394     rxi_numNetAddrs = ADDRSPERSITE;
395     (void)syscfg_GetIFInfo(&rxi_numNetAddrs, rxi_NetAddrs,
396                            myNetMasks, myNetMTUs, myNetFlags);
397
398     for (i = 0; i < rxi_numNetAddrs; i++) {
399         rxsize = rxi_AdjustIfMTU(myNetMTUs[i] - RX_IPUDP_SIZE);
400         maxsize =
401             rxi_nRecvFrags * rxsize + (rxi_nRecvFrags - 1) * UDP_HDR_SIZE;
402         maxsize = rxi_AdjustMaxMTU(rxsize, maxsize);
403         if (rx_maxReceiveSize > maxsize) {
404             rx_maxReceiveSize = MIN(RX_MAX_PACKET_SIZE, maxsize);
405             rx_maxReceiveSize =
406                 MIN(rx_maxReceiveSize, rx_maxReceiveSizeUser);
407         }
408         if (rx_MyMaxSendSize > maxsize) {
409             rx_MyMaxSendSize = MIN(RX_MAX_PACKET_SIZE, maxsize);
410         }
411     }
412     UNLOCK_IF;
413
414     /*
415      * If rxinit_status is still set, rx_InitHost() has yet to be called
416      * and we therefore do not have any mutex locks initialized.  As a
417      * result we cannot call rxi_MorePackets() without crashing.
418      */
419     if (rxinit_status)
420         return;
421
422     rxi_InitMorePackets();
423 }
424 #endif
425
426 static afs_uint32
427 fudge_netmask(afs_uint32 addr)
428 {
429     afs_uint32 msk;
430
431     if (IN_CLASSA(addr))
432         msk = IN_CLASSA_NET;
433     else if (IN_CLASSB(addr))
434         msk = IN_CLASSB_NET;
435     else if (IN_CLASSC(addr))
436         msk = IN_CLASSC_NET;
437     else
438         msk = 0;
439
440     return msk;
441 }
442
443
444
445 #if !defined(AFS_AIX_ENV) && !defined(AFS_NT40_ENV) && !defined(AFS_LINUX20_ENV)
446 int
447 rxi_syscall(afs_uint32 a3, afs_uint32 a4, void *a5)
448 {
449     afs_uint32 rcode;
450     void (*old) (int);
451
452     old = signal(SIGSYS, SIG_IGN);
453
454 #if defined(AFS_SGI_ENV)
455     rcode = afs_syscall(AFS_SYSCALL, 28, a3, a4, a5);
456 #else
457     rcode = syscall(AFS_SYSCALL, 28 /* AFSCALL_CALL */ , a3, a4, a5);
458 #endif /* AFS_SGI_ENV */
459
460     signal(SIGSYS, old);
461
462     return rcode;
463 }
464 #endif /* AFS_AIX_ENV */
465
466 #ifndef AFS_NT40_ENV
467 void
468 rx_GetIFInfo(void)
469 {
470     int s;
471     int i, j, len, res;
472     struct ifconf ifc;
473     struct ifreq ifs[ADDRSPERSITE];
474     struct ifreq *ifr;
475 #ifdef  AFS_AIX41_ENV
476     char buf[BUFSIZ], *cp, *cplim;
477 #endif
478     struct sockaddr_in *a;
479
480     LOCK_IF_INIT;
481     if (Inited) {
482         UNLOCK_IF_INIT;
483         return;
484     }
485     Inited = 1;
486     UNLOCK_IF_INIT;
487     LOCK_IF;
488     rxi_numNetAddrs = 0;
489     memset(rxi_NetAddrs, 0, sizeof(rxi_NetAddrs));
490     memset(myNetFlags, 0, sizeof(myNetFlags));
491     memset(myNetMTUs, 0, sizeof(myNetMTUs));
492     memset(myNetMasks, 0, sizeof(myNetMasks));
493     UNLOCK_IF;
494     s = socket(AF_INET, SOCK_DGRAM, 0);
495     if (s < 0)
496         return;
497
498 #ifdef  AFS_AIX41_ENV
499     ifc.ifc_len = sizeof(buf);
500     ifc.ifc_buf = buf;
501     ifr = ifc.ifc_req;
502 #else
503     ifc.ifc_len = sizeof(ifs);
504     ifc.ifc_buf = (caddr_t) & ifs[0];
505     memset(&ifs[0], 0, sizeof(ifs));
506 #endif
507     res = ioctl(s, SIOCGIFCONF, &ifc);
508     if (res < 0) {
509         /* fputs(stderr, "ioctl error IFCONF\n"); */
510         close(s);
511         return;
512     }
513
514     LOCK_IF;
515 #ifdef  AFS_AIX41_ENV
516 #define size(p) MAX((p).sa_len, sizeof(p))
517     cplim = buf + ifc.ifc_len;  /*skip over if's with big ifr_addr's */
518     for (cp = buf; cp < cplim;
519          cp += sizeof(ifr->ifr_name) + MAX(a->sin_len, sizeof(*a))) {
520         if (rxi_numNetAddrs >= ADDRSPERSITE)
521             break;
522
523         ifr = (struct ifreq *)cp;
524 #else
525     len = ifc.ifc_len / sizeof(struct ifreq);
526     if (len > ADDRSPERSITE)
527         len = ADDRSPERSITE;
528
529     for (i = 0; i < len; ++i) {
530         ifr = &ifs[i];
531         res = ioctl(s, SIOCGIFADDR, ifr);
532 #endif
533         if (res < 0) {
534             /* fputs(stderr, "ioctl error IFADDR\n");
535              * perror(ifr->ifr_name);   */
536             continue;
537         }
538         a = (struct sockaddr_in *)&ifr->ifr_addr;
539         if (a->sin_family != AF_INET)
540             continue;
541         rxi_NetAddrs[rxi_numNetAddrs] = ntohl(a->sin_addr.s_addr);
542         if (rx_IsLoopbackAddr(rxi_NetAddrs[rxi_numNetAddrs])) {
543             /* we don't really care about "localhost" */
544             continue;
545         }
546         for (j = 0; j < rxi_numNetAddrs; j++) {
547             if (rxi_NetAddrs[j] == rxi_NetAddrs[rxi_numNetAddrs])
548                 break;
549         }
550         if (j < rxi_numNetAddrs)
551             continue;
552
553         /* fprintf(stderr, "if %s addr=%x\n", ifr->ifr_name,
554          * rxi_NetAddrs[rxi_numNetAddrs]); */
555
556 #ifdef SIOCGIFFLAGS
557         res = ioctl(s, SIOCGIFFLAGS, ifr);
558         if (res == 0) {
559             myNetFlags[rxi_numNetAddrs] = ifr->ifr_flags;
560 #ifdef IFF_LOOPBACK
561             /* Handle aliased loopbacks as well. */
562             if (ifr->ifr_flags & IFF_LOOPBACK)
563                 continue;
564 #endif
565             /* fprintf(stderr, "if %s flags=%x\n",
566              * ifr->ifr_name, ifr->ifr_flags); */
567         } else {                /*
568                                  * fputs(stderr, "ioctl error IFFLAGS\n");
569                                  * perror(ifr->ifr_name); */
570         }
571 #endif /* SIOCGIFFLAGS */
572
573 #if !defined(AFS_AIX_ENV)  && !defined(AFS_LINUX20_ENV)
574         /* this won't run on an AIX system w/o a cache manager */
575         rxi_syscallp = rxi_syscall;
576 #endif
577
578         /* If I refer to kernel extensions that aren't loaded on AIX, the
579          * program refuses to load and run, so I simply can't include the
580          * following code.  Fortunately, AIX is the one operating system in
581          * which the subsequent ioctl works reliably. */
582         if (rxi_syscallp) {
583             if ((*rxi_syscallp) (20 /*AFSOP_GETMTU */ ,
584                                  htonl(rxi_NetAddrs[rxi_numNetAddrs]),
585                                  &(myNetMTUs[rxi_numNetAddrs]))) {
586                 /* fputs(stderr, "syscall error GETMTU\n");
587                  * perror(ifr->ifr_name); */
588                 myNetMTUs[rxi_numNetAddrs] = 0;
589             }
590             if ((*rxi_syscallp) (42 /*AFSOP_GETMASK */ ,
591                                  htonl(rxi_NetAddrs[rxi_numNetAddrs]),
592                                  &(myNetMasks[rxi_numNetAddrs]))) {
593                 /* fputs(stderr, "syscall error GETMASK\n");
594                  * perror(ifr->ifr_name); */
595                 myNetMasks[rxi_numNetAddrs] = 0;
596             } else
597                 myNetMasks[rxi_numNetAddrs] =
598                     ntohl(myNetMasks[rxi_numNetAddrs]);
599             /* fprintf(stderr, "if %s mask=0x%x\n",
600              * ifr->ifr_name, myNetMasks[rxi_numNetAddrs]); */
601         }
602
603         if (myNetMTUs[rxi_numNetAddrs] == 0) {
604             myNetMTUs[rxi_numNetAddrs] = OLD_MAX_PACKET_SIZE + RX_IPUDP_SIZE;
605 #ifdef SIOCGIFMTU
606             res = ioctl(s, SIOCGIFMTU, ifr);
607             if ((res == 0) && (ifr->ifr_metric > 128)) {        /* sanity check */
608                 myNetMTUs[rxi_numNetAddrs] = ifr->ifr_metric;
609                 /* fprintf(stderr, "if %s mtu=%d\n",
610                  * ifr->ifr_name, ifr->ifr_metric); */
611             } else {
612                 /* fputs(stderr, "ioctl error IFMTU\n");
613                  * perror(ifr->ifr_name); */
614             }
615 #endif
616         }
617
618         if (myNetMasks[rxi_numNetAddrs] == 0) {
619             myNetMasks[rxi_numNetAddrs] =
620                 fudge_netmask(rxi_NetAddrs[rxi_numNetAddrs]);
621 #ifdef SIOCGIFNETMASK
622             res = ioctl(s, SIOCGIFNETMASK, ifr);
623             if ((res == 0)) {
624                 a = (struct sockaddr_in *)&ifr->ifr_addr;
625                 myNetMasks[rxi_numNetAddrs] = ntohl(a->sin_addr.s_addr);
626                 /* fprintf(stderr, "if %s subnetmask=0x%x\n",
627                  * ifr->ifr_name, myNetMasks[rxi_numNetAddrs]); */
628             } else {
629                 /* fputs(stderr, "ioctl error IFMASK\n");
630                  * perror(ifr->ifr_name); */
631             }
632 #endif
633         }
634
635         if (!rx_IsLoopbackAddr(rxi_NetAddrs[rxi_numNetAddrs])) {        /* ignore lo0 */
636             int maxsize;
637             maxsize =
638                 rxi_nRecvFrags * (myNetMTUs[rxi_numNetAddrs] - RX_IP_SIZE);
639             maxsize -= UDP_HDR_SIZE;    /* only the first frag has a UDP hdr */
640             if (rx_maxReceiveSize < maxsize)
641                 rx_maxReceiveSize = MIN(RX_MAX_PACKET_SIZE, maxsize);
642             ++rxi_numNetAddrs;
643         }
644     }
645     UNLOCK_IF;
646     close(s);
647
648     /* have to allocate at least enough to allow a single packet to reach its
649      * maximum size, so ReadPacket will work.  Allocate enough for a couple
650      * of packets to do so, for good measure */
651     {
652         int npackets, ncbufs;
653
654         rx_maxJumboRecvSize =
655             RX_HEADER_SIZE + rxi_nDgramPackets * RX_JUMBOBUFFERSIZE +
656             (rxi_nDgramPackets - 1) * RX_JUMBOHEADERSIZE;
657         rx_maxJumboRecvSize = MAX(rx_maxJumboRecvSize, rx_maxReceiveSize);
658         ncbufs = (rx_maxJumboRecvSize - RX_FIRSTBUFFERSIZE);
659         if (ncbufs > 0) {
660             ncbufs = ncbufs / RX_CBUFFERSIZE;
661             npackets = rx_initSendWindow - 1;
662             rxi_MorePackets(npackets * (ncbufs + 1));
663         }
664     }
665 }
666 #endif /* AFS_NT40_ENV */
667
668 /* Called from rxi_FindPeer, when initializing a clear rx_peer structure,
669  * to get interesting information.
670  * Curiously enough, the rx_peerHashTable_lock currently protects the
671  * Inited variable (and hence rx_GetIFInfo). When the fs suite uses
672  * pthreads, this issue will need to be revisited.
673  */
674
675 void
676 rxi_InitPeerParams(struct rx_peer *pp)
677 {
678     afs_uint32 ppaddr;
679     u_short rxmtu;
680     int ix;
681 #if defined(ADAPT_PMTU) && defined(IP_MTU)
682     int sock;
683     struct sockaddr_in addr;
684 #endif
685
686
687
688     LOCK_IF_INIT;
689     if (!Inited) {
690         UNLOCK_IF_INIT;
691         /*
692          * there's a race here since more than one thread could call
693          * rx_GetIFInfo.  The race stops in rx_GetIFInfo.
694          */
695         rx_GetIFInfo();
696     } else {
697         UNLOCK_IF_INIT;
698     }
699
700 #ifdef ADAPT_MTU
701     /* try to second-guess IP, and identify which link is most likely to
702      * be used for traffic to/from this host. */
703     ppaddr = ntohl(pp->host);
704
705     pp->ifMTU = 0;
706     pp->timeout.sec = 2;
707     pp->rateFlag = 2;           /* start timing after two full packets */
708     /* I don't initialize these, because I presume they are bzero'd...
709      * pp->burstSize pp->burst pp->burstWait.sec pp->burstWait.usec
710      * pp->timeout.usec */
711
712     LOCK_IF;
713     for (ix = 0; ix < rxi_numNetAddrs; ++ix) {
714         if ((rxi_NetAddrs[ix] & myNetMasks[ix]) == (ppaddr & myNetMasks[ix])) {
715 #ifdef IFF_POINTOPOINT
716             if (myNetFlags[ix] & IFF_POINTOPOINT)
717                 pp->timeout.sec = 4;
718 #endif /* IFF_POINTOPOINT */
719             rxmtu = myNetMTUs[ix] - RX_IPUDP_SIZE;
720             if (rxmtu < RX_MIN_PACKET_SIZE)
721                 rxmtu = RX_MIN_PACKET_SIZE;
722             if (pp->ifMTU < rxmtu)
723                 pp->ifMTU = MIN(rx_MyMaxSendSize, rxmtu);
724         }
725     }
726     UNLOCK_IF;
727     if (!pp->ifMTU) {           /* not local */
728         pp->timeout.sec = 3;
729         pp->ifMTU = MIN(rx_MyMaxSendSize, RX_REMOTE_PACKET_SIZE);
730     }
731 #else /* ADAPT_MTU */
732     pp->rateFlag = 2;           /* start timing after two full packets */
733     pp->timeout.sec = 2;
734     pp->ifMTU = MIN(rx_MyMaxSendSize, OLD_MAX_PACKET_SIZE);
735 #endif /* ADAPT_MTU */
736 #if defined(ADAPT_PMTU) && defined(IP_MTU)
737     sock=socket(PF_INET, SOCK_DGRAM, IPPROTO_UDP);
738     if (sock >= 0) {
739       addr.sin_family = AF_INET;
740       addr.sin_addr.s_addr = pp->host;
741       addr.sin_port = pp->port;
742       if (connect(sock, (struct sockaddr *)&addr, sizeof(addr)) == 0) {
743         int mtu=0;
744         socklen_t s = sizeof(mtu);
745         if (getsockopt(sock, SOL_IP, IP_MTU, &mtu, &s)== 0) {
746           pp->ifMTU = MIN(mtu - RX_IPUDP_SIZE, pp->ifMTU);
747         }
748       }
749       close(sock);
750     }
751 #endif
752     pp->ifMTU = rxi_AdjustIfMTU(pp->ifMTU);
753     pp->maxMTU = OLD_MAX_PACKET_SIZE;   /* for compatibility with old guys */
754     pp->natMTU = MIN((int)pp->ifMTU, OLD_MAX_PACKET_SIZE);
755     pp->maxDgramPackets =
756         MIN(rxi_nDgramPackets,
757             rxi_AdjustDgramPackets(rxi_nSendFrags, pp->ifMTU));
758     pp->ifDgramPackets =
759         MIN(rxi_nDgramPackets,
760             rxi_AdjustDgramPackets(rxi_nSendFrags, pp->ifMTU));
761     pp->maxDgramPackets = 1;
762     /* Initialize slow start parameters */
763     pp->MTU = MIN(pp->natMTU, pp->maxMTU);
764     pp->cwind = 1;
765     pp->nDgramPackets = 1;
766     pp->congestSeq = 0;
767 }
768
769 /* Don't expose jumobgram internals. */
770 void
771 rx_SetNoJumbo(void)
772 {
773     rx_maxReceiveSize = OLD_MAX_PACKET_SIZE;
774     rxi_nSendFrags = rxi_nRecvFrags = 1;
775 }
776
777 /* Override max MTU.  If rx_SetNoJumbo is called, it must be
778    called before calling rx_SetMaxMTU since SetNoJumbo clobbers rx_maxReceiveSize */
779 void
780 rx_SetMaxMTU(int mtu)
781 {
782     rx_MyMaxSendSize = rx_maxReceiveSizeUser = rx_maxReceiveSize = mtu;
783 }
784
785 #if defined(ADAPT_PMTU)
786 int
787 rxi_HandleSocketError(int socket)
788 {
789     int ret=0;
790 #if defined(HAVE_LINUX_ERRQUEUE_H)
791     struct msghdr msg;
792     struct cmsghdr *cmsg;
793     struct sock_extended_err *err;
794     struct sockaddr_in addr;
795     char controlmsgbuf[256];
796     int code;
797
798     msg.msg_name = &addr;
799     msg.msg_namelen = sizeof(addr);
800     msg.msg_iov = NULL;
801     msg.msg_iovlen = 0;
802     msg.msg_control = controlmsgbuf;
803     msg.msg_controllen = 256;
804     msg.msg_flags = 0;
805     code = recvmsg(socket, &msg, MSG_ERRQUEUE|MSG_DONTWAIT|MSG_TRUNC);
806
807     if (code < 0 || !(msg.msg_flags & MSG_ERRQUEUE))
808         goto out;
809
810     for (cmsg = CMSG_FIRSTHDR(&msg); cmsg; cmsg = CMSG_NXTHDR(&msg, cmsg)) {
811        if ((char *)cmsg - controlmsgbuf > msg.msg_controllen - CMSG_SPACE(0) ||
812            (char *)cmsg - controlmsgbuf > msg.msg_controllen - CMSG_SPACE(cmsg->cmsg_len) ||
813            cmsg->cmsg_len == 0) {
814            cmsg = 0;
815            break;
816         }
817         if (cmsg->cmsg_level == SOL_IP && cmsg->cmsg_type == IP_RECVERR)
818             break;
819     }
820     if (!cmsg)
821         goto out;
822     ret=1;
823     err =(struct sock_extended_err *) CMSG_DATA(cmsg);
824
825     if (err->ee_errno == EMSGSIZE && err->ee_info >= 68) {
826         rxi_SetPeerMtu(NULL, addr.sin_addr.s_addr, addr.sin_port,
827                        err->ee_info - RX_IPUDP_SIZE);
828     }
829     /* other DEST_UNREACH's and TIME_EXCEEDED should be dealt with too */
830
831 out:
832 #endif
833     return ret;
834 }
835 #endif