rx-fpq-optimize-20050425

FIXES 17805

here's a patch that reduces the overhead of transfers
between the local and global free packet queues. The old algorithm was
O(n) in the number of store instructions -- 7 per rx_packet. I've added
some bulk transfer macros to the rx_queue package. Now, the number of
store instructions is O(1) -- 6 total. This should help reduce bus
contention and cache line invalidates on SMPs.

linux-global-sunlock-always-20050424

ok, well, in the land of pre-emption i guess we need this always

linux-dentry-revalidate-one-more-20050424

further updates

add-missing-inotify-test-20050424

so we actually detect the inotify sem

dentry-revalidate-cleanup-20050424

clean up dentry_revalidate one more time so performance improves

aix53-20050424

add param file for aix 53
check for cache partition type

maintain-volume-filecounts-20050424

maintain file counts in volume header

use-daemon-in-bosserver-and-afsd-20050424

provide daemon() if none exists. call it in bosserver and in afsd for afsdb handler

====================
This delta was composed from multiple commits as part of the CVS->Git migration.
The checkin message with each commit was inconsistent.
The following are the additional commit messages.
====================

add the file, too

avoid-leaking-stat-info-20050424

otherwise we are effectively giving stat powers to people who shouldn't have it

osi-file-use-dentry-open-20050423

FIXES 18335

use dentry_open et al instead of doing the work ourselves

linux-osi-module-proc-csdb-sprintf-bug-20050423

FIXES 18334

remove extraneous %s

freebsd60-20050422

Preliminary FreeBSD 6.0 support.
Builds, but unlikely to work.

ignore-ytab-20050421

add y.tab.h to .cvsignore

restore-tab-20050421

Restore lost tab.

windows-shell-ext-remove-mtpt-20050420

Conditionalize the AFS->Mount Point->Remove menu item based upon whether
or not the selected item(s) contain mount points

rx_fpq_take_three-20050420

FIXES 17805

I've been stress testing a patch all weekend that changes the way
thread-local packet quotas are computed.  I was able to replicate the
unbounded packet alloc problem on unix server components by eliminating my
code from rxi_StartServerProcs that sets the maximum number of expected
threads.  This patch makes the upper thread limit get computed on the fly,
adds some thread-local free packet queue statistics, and a few other minor
tweaks.  I still don't have a working windows development environment, so
I can't say whether this will fix all the windows client problems.  But,
the unbounded packet allocation problem should go away with this patch.

stress testing on windows succeeds as well. <jaltman@secure-endpoints.com>

fix-vc-v-macro-20050420

Fix IsAfsVnode and friends for OpenBSD and NetBSD.
Use "v" instead of "vc" for vnode args to macros (cosmetic only).
Redefine OpenBSD macros instead of using #ifdefs in afs_osi.h.

windows-hookdll-20050419

Some more tweaks for hook dll processing.

linux-conflate-rdwrs-20050419

FIXES 17561

conflate the 2 rdwr routines we have

aix53-20050419

add aix 5.3 support

windows-hooks-20050418

Add new hooks from "AfsdHook.dll" to the afsd_service.exe

   AfsdInitHook - where you currently have one

   AfsdRxStartedHook - after RxInit but before SmbInit

   AfsdSmbStartedHook - after SmbInit

   AfsdBkDaemonHook - called by the BkDaemon thread and is executed once per
                      cycle

   AfsdStoppingHook - called just after a shutdown event has been
                      received but before any shutdown has been performed

   AfsdStoppedHook - called just after all shutdown operations after
                     completed but before the service terminates

The type of the function is

   BOOL ( APIENTRY * AfsdHook )(void)

in all cases.  Returning FALSE will cause the service to shutdown.

windows-O_NOBLOCK-20050418

O_NOBLOCK is not defined on Windows

windows-rx-ts-fpq-20050418

FIXES 17805

Add a new function called rx_StartClientThread() which parallels the
behavior of rx_StartServer but is used for initializing client threads.

====================
This delta was composed from multiple commits as part of the CVS->Git migration.
The checkin message with each commit was inconsistent.
The following are the additional commit messages.
====================
FIXES 17805

Add a new function called rx_StartClientThread() which parallels the
behavior of rx_StartServer but is used for initializing client threads.

Also, disable RX_TSFPQ_ENABLE for Windows as it slows the client down.

windows-formatting-20050418

keep formatting consistent

windows-free-lib-20050418

call FreeLibrary not CloseHandle

macos104-not-yet-20050418

push first group of 10.4 changes

windows-syscfg-20050418

GetAdaptersAddressess -> GetAdaptersAddresses

linux-fmode-set-20050418

to avoid problems where we don't get truncated

logging-in-linux-vnodeops-sucks-20050418

given that we keep ending up with these weird errors, it's just not worth it.

solaris-largefile-not-on-ia32-20050417

disable largefile on solaris x86 32 bit

missing-eof-20050417

add missing eof

ptserver-restricted-mode-20050415

add restricted mode to pts
only admins can make changes

make-linux-proc-cellservdb-info-20050415

use info hook instead of read so we can have larger than a slab

license-compromise-20050415

just copy the full list of licenses here. bleh.

license-update-20050415

FIXES 18131

collect all licenses here

vos-release-compare-update-timestamps-20050415

FIXES 17758

use last updated timestamps to determine if a release needs to be done

fix-rxkad-prototype-20050415

FIXES 18079

fix cbc_encrypt prototype

kill-struct-osisocket-20050415

FIXES 18079

more complete version of what's in the patch, kill all refs to struct osi_socket in favor of just osi_socket

from  psomogyi@gamax.hu

viced-already-regd-warning-20050415

FIXES 18049

the ethernet address is irrelevant

windows-locking-freeacls-20050415

Ensure that the appropriate mutex locks are held on the stat cache
entry referred to by the acl back pointer when performing a cleanup

windows-memmap-adjust-20050415

Prepare to allow the maxVolumes and maxCells parameters to become
independent of the MaxStats value

sema-init-takes-2-args-20050415

FIXES 18271

init sema correctly

fifo-logs-20050415

use O_NONBLOCK during open if it's a fifo
suppress SIGPIPE in case we care (EPIPE handling still not needed: return value
of write is discarded)

windows-winlogon-logon-event-20050414

 Apparently the problem with multi-domain forests with cross-
 realm trusts to non-Windows realms was not entirely solved.
 The authentication to the AFS SMB service failed because
 the wrong name was being used.  Using ASU as an example,
 the authentication was being performed with the name
 "QAAD\user" (an account in the forest root) and not
 "user@ASU.EDU (the MIT Kerberos principal used to login with)

 The solution was to add an additional dependency on KFW
 in order or to be able to easily obtain the client principal
 name stored in the MSLSA ccache TGT.  This information is
 used in two locations:

 - the pioctl() function

 - a new WinLogon Event Handler for the "logon" event.

 The pioctl function will now be able to use the correct
 name when calling WNetAddConnection2() and the "logon"
 event handler will now be able to call WNetAddConnection2().
 The hope is that the "logon" event handler will be called
 before the profile is loaded but I have not guarrantee
 that will happen.

support-named-pipe-logs-20050414

so log files can be named pipes

renamefile-for-mrafslogs-20050414

call the renamefile wrapper so mrafs style logs on windows work like other logs

kill-rxglock-20050413

FIXES 18222

the rxglock was being defined out by all the platforms, just kill it.

rx-fpq-trying-again-20050413

FIXES 17805

this time we'll work it out on windows. multitier free packet queues to increase performance

bye-getitimer-20050413

FIXES 18221

stop using getitimer on linux

kill-rxglock-20050413

FIXES 18222

the rxglock was being defined out by all the platforms, just kill it.

linux26-unlocked-ioctl-20050413

FIXES 18224

add unlocked_ioctl support and compat_ioctl support

tbutc-avoid-lwp-libs-20050413

FIXES 18225

stop using lwp family libs when building tbutc

kill-clock-advance-20050413

FIXES 18228

we don't use clock_Advance, so it's gone

aix-volser-fix-retry-20050413

FIXES 18240

destroy lock only after we gave up permanently

hpux1123-parisc-20050413

FIXES 18245

hpux 11.23 changes for parisc

linux-inotify-sem-20050413

FIXES 18260

add inotify sem detection

rx-dont-use-kmutex-outside-linux-kernel-20050413

FIXES 18261

don't use kmutex in prototypes outside linux kernel

cblater-hold-lock-on-broadcast-20050411

avoid race from not holding lock around fsync_cond broadcast

cleanup-rcmd-killing-20050411

cleanup killing of rcmds.

linux-follow-link-light-needs-putlink-20050406

based on research by cg2v@andrew.cmu.edu and suggestion of jhutz@cmu.edu
needed so kmaps are balanced by kunmaps

afsdb-lock-20050405

init one more lock

osi-probe-old-kernels-20050405

old kernerls lack __user

windows-rx_mtu-20050404

cmdebug -addr should report the rx_mtu size if it is set and less than
the actual mtu size

windows-notes-20050404

final updates before 1.3.81

windows-version-20050404

1.3.8100

make-afs-h-includable-outside-kernel-20050404

so you don't need to define KERNEL to cinlude this

kdump-update-20050404

make kdump build again

remove-insecure-and-ntp-20050403

rcmds, inetd, ftpd and ntp are gone. leaving the files in the cvs head for now.

====================
This delta was composed from multiple commits as part of the CVS->Git migration.
The checkin message with each commit was inconsistent.
The following are the additional commit messages.
====================

rcmds, inetd, ftpd and ntp are gone. in 1.4, files also go away.

remove-rx-2tier-freepacketq-20050403

needs more work.

macos103-update-20050403

use system vnodes. one remaining bug, dangling vnodes at shutdown.

vos-partinfo-summary-portability-20050403

make this work on systems with non-native 64 bit int

rx-2tier-freepacketq-20050403

FIXES 17805

The attached patch turns the rx free packet queue into a 2-tiered cache
with a local thread-specific queue, backed by a global queue when using
pthreaded rx. The patch is against 1.3.79. Preliminary benchmarks show
scalability much closer to 2 cpus on sparc with this patch. Also,
fileserver performance under heavy load is improved: 50% improvement in
throughput for sequential writes, and a 10% improvement in performance for
random writes against an smp sparc solaris 10 fileserver.

hid2client-write-lock-20050403

FIXES 17867

h_ID2Client currently returns a client struct with a shared lock. The
only caller of h_ID2Client (SRXAFS_FlushCPS) immediately calls
BoostSharedLock. This patch just goes ahead and makes h_ID2Client return
it with the write lock so we don't enter the Lock struct mutex multiple
times in a row. This also happens to remove the last reference to
BoostSharedLock in the tree.

alpha-linux26-20050403

FIXES 18081

alpha linux26 port

rx-clock-rollover-fix-20050403

FIXES 17990

itimer rollover comes faster now; handle it.

more-linux26-cred-fixes-20050403

FIXES 18009

instead of crget() getting a groups_alloc(0) just to put it, we just fix
crref()/crdup()/afs_pioctl() to do the "right" thing

added missing task_lock()'s as well.

license-update-20050403

FIXES 18131

collect all licenses here

====================
This delta was composed from multiple commits as part of the CVS->Git migration.
The checkin message with each commit was inconsistent.
The following are the additional commit messages.
====================
FIXES 18131

install LICENSE into destdir builds

hpux-license-update-20050403

FIXES 18129

update hpux psf file copyright info

macos-update-packaging-20050403

FIXES 18127

add apsl 2.0 license. note it in ReadMe.rtf. update buildpkg to provide afsd options sample. update post_install to use sample ThisCell and options if none provided.

linux-ppc64-26-20050403

FIXES 18114

add support for ppc64 linux26

new-gcc-cleanup-20050403

more picky about some of this stuff, and it's right, so let's clean it up

remove-insecure-and-ntp-20050403

rcmds, inetd, ftpd and ntp are gone. leaving the files in the cvs head for now.

s390x-linux26-flavor-check-20050403

FIXES 18112

add missing flavor bit check for s390x

aix5-allocator-cleanup-20050403

* Removed memory allocation functions only used on AIX and ancient
   HPUX. If the performance penalty is noticeable, implement a wrapper
   at the osi-level in the same manner as LINUX/FBSD (ie not sprayed
   throughout the code).
* Removed all remnants of splnet()-style locking, it was not
   sufficient for MP anyway which the real locks are. Affects only AIX
   and HPUX.
* Drop the global locking in rxi_Alloc since the real locks do their
   jobs, affects only AIX41 and up (ie. MP capable OS).
* Fix the non-kernel wrapper for osi_Alloc/Free on AIX to take void *
   in the same manner as the rest of the functions. IMO this wrapper
   shouldn't be necessary since you should never ever malloc() 0 bytes,
   but since it's there I'd guess someone made stupid assumptions
   somewhere...
* Restores MAXKTCTICKETLEN to 12000 on AIX
* Restores AFS_LWP_MINSTACKSIZE to 48k on AIX (might affect
   server-stuff)

openafs-kill-dead-code-20050403

Code ifdef'd any of AFS_MACH_ENV, AFS_GFS_ENV, AFS_DEC_ENV dies

Code ifdef'd AFS_SUN_ENV either becomes AFS_SUN5_ENV or dies as appropriate,
in the kernel only. The database servers etc are probably still buildable,
and I still have a SunOS 4.1.4 machine. ;-) But the Solaris vnops get all
SunOS 4 code nuked.

Uses of AFS_ALPHA_ENV which secretly meant OSF/1,D/UX,Tru64 become
AFS_OSF_ENV.

Bozon lock use gets its own ifdef. OSF and Solaris define it. Darwin and any
BSDs have bozon lock usage removed: note that only OSF and Solaris were
bothering to *init* the bozon lock during NewVCache. Bozon locks are for
platforms where basically we could end up deadlocking ourselves because of
how locks are handled.

Some nonsensical ifdefs removed.
Some if 0'd code removed.
Some obsolete code (hpux pre-10, for instance) removed.

rxdebug-unsigned-20040403

use unsigned types when displaying stat data via printf

windows-notes-20050402

updates for version 1.3.81

windows-deadlock-20050402

One final deadlock was found in cm_TryBulkStat().  Do not hold the scp->mx
through the RXAFS call.

windows-time-20050331

Replace the time translation hack based on smb_NowTZ with a purely
mathematical conversion from UTC based unixTime (time_t) to UTC
based FILETIME

windows-afsd-minor-20050330

Add bounds checking to the comparison of fid->vnode and cm_localMountPoints
when Freelance mode is used.

Fix typo in DJGPP section of smb.c

Use rx_connection * instead of rx_call * in previous fix to cm_dcache.c

windows-stress-test-fixes-20050330

Ran more stress tests against 1.3.80b on a dual processor machine and
found a number of additional errors which could be fixed.

cm_callback.c: correct the refCount handling of server lists when
processing registering callbacks on the scache entry

cm_conn.c: cm_Analyze was not handling the CM_ERROR_NOSUCHVOLUME case.
In this case force a retry and Force Update the Volume info

cm_dcache.c; do not hold mx locks around calls to rx_NewCall().  That is
why we have reference counting on the rx_connection objects.

cm_ioctl.c: replace references to afsdcell.ini with CellServDB

cm_utils.c: formatting

cm_vnodeops.c: improve the logging and add a missing call to
cm_EndCallbackGrantingCall()

cm_volume.c: allows cm_volume_t objects to be reused if their
ref count is 0 and we have hit the maximum number allowed.

smb.c: improve the logging and the handling of dead_vcp references.
If all of the SMB sessions and NCBs are in use, return BUSY to the
CIFS client.

smb3.c: convert constants to preprocessor symbols

linux-vnode-macros-20050326

here's a place where we passed a vcache instead of a vnode for linux. doesn't
matter today, might as well fix it now.

lwp-deal-with-unaligned-memory-20050326

FIXES 18050

don't double-free lwp stack space

rx-getaddrs-skip-loopback-addr-on-bsd-too-20050326

as reported by Tracy Demarco-White

darwin-vnode-macros-20050325

use vnode to vcache conversion macros

darwin-fstrace-20050325

holy crap, it just worked.

acl-maxentry-comment-20050325

correct the comment related to the maximum number of entries in
an ACL.  the number of ACEs must be less than or equal to ACL_MAXENTRIES
not less than ACL_MAXENTRIES.

sb-list-fix-20050323

fix gaffe from my attempt at this

windows-logon-20050323

Fix initialization error when getting domain parameters

windows-version-8002-20050323

1.3.8002