ConnOpener lookup local-end TCP link details cleanly.

No more depending on fd_table to be setup for us.
Instead we do the lookups when connected and set fd_table from here.

Better debug for CommCalls connected callback

Ensure ListenStateData constructed properly from ConnectionPointer

Comm::Connection handling fixes

* initial roll into FTP (untested as yet)

* roll Comm::Connection into parent Server class.

* fixes several incorrect code paths in forwarding

* fixes several crashes in HTTP

Implement safe global IsOpen for COmm::ConnectionPointers

Merge from trunk

Roll Comm::Connection into TunnelStateData

Fixed builtest.sh shell script brokenness on non-linux platforms.

recommit

Fixed builtest.sh shell script brokenness on non-linux platforms.

Fix omitted part of rev10654

Update names for Comm Paths/paths - new ConnectionList/serverDestinations

Fixed comm.cc:377: "fd_table[fd].halfClosedReader != NULL" assertion

Client side must stop reading when switching to a tunnel mode. The old code
called low-level commSetSelect to stop reading, but that left Comm tables in
an inconsistent state, with the client side reader callback still scheduled.
Squid would assert when the tunnel called comm_read with its own callback.

The bug is unrelated to half-closed connections despite halfClosedReader
mentioned in the assertion text. The assertion means "no more than one active
reader per FD".

Improved libtool kludge

Kludge: try to detect system acinclude path, to fix libtool brokenness.

Bootstrapped

Author: Karl Benoit <karl.isatwork@gmail.com>
Author: Amos Jeffries <squid3@treenet.co.nz>
Bug 2885: cf_gen and diskd missing symbols

Author: isaac <isaacarsenal@gmail.com>
Bug 2985: search scope for digest_ldap_auth didn't work

TestBed: --with-valgrind-debug is not longer universally testable.

Will fail on some machines, so it cannot be in the master 02-maximus level.

SourceFormat Enforcement

Fallout from more auditing

Author: Chad E. Naugle <chad.naugle@travimp.com>
Bug 2905: eDirectory (8.7 & 8.8) IPv4/IPv6->Username external ACL helper

Original code import.

Make http.cc use io.fd instead of member FD on errors/timeout

Partial reverse of rev10645

recursive option hit problems. Its not really needed anyway.

Bug 2963: --with-valgrind-debug failures ignored

Made to hard-fail if --with is used.

Do peer conn accounting in comm layer

typo

Split start() in two: setup and connect handling. Cleanup call create/delete

More AsyncJob rules based on squid-dev reviews:

- You must implement start() and doneAll() methods.
- In doneAll(), always call doneAll() of the parent.

Polished job start documentation.

Make HttpStateData use Comm::Connection instead of raw server FD

Code fixes from second audit

Make --disable-loadable-modules work again

Correction documentation of QoS disable-preserve-miss

FwdState::abort can happen mid-connect

Add ConnOpener to Comm namespace

Improve CommCalls debug output display.

Make comm_local_port record local IP in fde table if unknown

Fix ConnOpener leak

Remove obsolete function

Merge from trunk

Remove watchers before recovering callback. So they get removed with a useful error reason

Make connect timeout a ConnOpener private

Make AsyncJob emit both constructed and destructed messages

Some polish on debug output

Convert ConnOpener callbacks to Async member-function Calls

* Also hold on to the EarlyAbort and Timeout call objects
   This fixes EarlyAbort crashes by allowing proper cancellation

* Also fix httpsAccept() build error.

Fix crash on forwarding abort

Added debugging scripts that work with detailed cache.log

  scripts/find-alive.pl: pinpoint objects that are still alive, to find leaks
  scripts/trace-job.pl: find cache.log lines that correspond to a given job
  scripts/trace-master.pl: trace jobs related to a single master transaction

The scripts require maintenance as the logging format changes, but
they often simplify debugging by extracting relevant information from
tons of poorly structured cache.log data.

Polished AsyncJob documentation. Removed obsolete job call wrapping notes.

Only the comments have been changed.

Added initial extended documentation for AsyncJob API.

Needs dox syntax check and polishing.

Improved Async implementation.

* use AsyncJob::AsyncStart instead of start()

* implements doneAll()

* handle timeouts on INPROGRESS states

Update libtool autoconf macros to libtool2 style

Fix build errors where we meet new SMP code

Merge from trunk

Remove .so from SASL build checks

We definitely require the .a and .la files to build against SASL libraries.
The run-time .so is only relevant later.

Author: Karl Benoit <karl.isatwork@gmail.com>
Bug 2885: AIX support: c only c++ style comments test case

Bug 2885: AIX support: check libm for log()

Document BodyPipe.h

Maintenance: reset working directory after snapshot sub-make.sh

Bug 2651 fix: squid crashing with ident auth

Check whether the old-style (function-based) callback has the
function address to call. A writer may leave no "callback number".

Typo in Joomla fix

Correct Joomla DB auth handling

Found while reading the code. Original clearly could not have worked as
it split the password field using an uninitialized delimiter.

Author: Milen Pankov <mail@milen.pankov.eu>
squid_db_auth support md5 encrypted passwords

--md5 option supporting unsalted MD5 password

Fixed memory leak related to retried requests.

ErrorState object was not destroyed if the failed request to the origin
server or peer was retried.

Prevent memory leaks when cloning Range requests.

HttpRequest::range field was set to a new HttpHdrRange object twice:
once in HttpRequest::clone() and once in HttpRequest::hdrCacheInit()
called from clone().

Polished HttpReply::clone() to make sure HttpReply::hdrCacheInit()
does not use uninitialized HttpReply::sline field and to prevent
benign double-initialization of HttpReply::keep_alive.

Fixed memory leaks related to Range requests.

HttpRequest::range field could be cleared without destroying HttpHdrRange
object in clientInterpretRequestHeaders().

The range field is essentially a cached value of the parsed Range header.
Managing the cache outside its owner object is a bad idea.

Merge from trunk

SourceFormat Enforcement

Author: Various Translators
Translations Update auto-save

Helpers: cleanup wbinfo_group manual on distclean

Helpers: Naming and C++ update for external ACL helpers

 * Also adds the Fake auth helper for testing Basic authentication.
 * Also adds manual pages for most external ACL helpers

TODO: test for and fix any build issues on Windows.

SourceFormat Enforcement

Author: Henrik Nordstrom <henrik@henriknordstrom.net>
purge tool: making it work proper with current Squid versions

Author: Jens-S. V�ckler <voeckler@rvs.uni-hannover.de>
Import squid cache 'purge' tool

Just the original code import for crediting the original author.

TODO:
 - patch to fix build problems in modern systems
 - upgrade to cope with current cache_dir formats
 - bundle and distribute updated tool

Helpers: unify auth helpers use of debug and HELPER_INPUT_BUFFER

Helpers: upgrade digest helpers to C++

Maintenance: run webpage make from web directory

SMP: Use sys/uio.h for struct iovec

Bootstrapped

Define MSG_NOSIGNAL if it is missing.

Solaris and possibly others do not provide this optional optimization.

Polished KidName example to use a real Squid process name.

Do not use NAME_MAX because it is not portable.

Re-defined preprocessor macro for better consistency.

Increased consistency in configure.in quoting
Fixed some compilation conditionals

SMP: Kid depends on sys/wait.h

Bootstrapped

Bootstrapped

Moved KidIdentifier to globals to make pinger happy.

Pinger and possibly other optional externals require KidIdentifier via
debugs(). Instead of making KidIdentifier global, we could add a "plugin" API
to add program-dependent stuff to debugs() and friends, but we should not add
that kind of complexity unless really necessary. We could also link pinger
with libipc.la but that will probably cause more problems with IPC
dependencies.

SourceFormat Enforcement

Maintenance: wrap all snapshot script variables

SMP: updated release notes

SMP support, part 1: Essential non-caching functionality.

Added workers squid.conf option to specify how many main Squid
processes to fork and maintain. Zero means old no-daemon mode.
One means the old non-SMP mode.

Added support for process_name and process_number macros and
if-statement conditionals in squid.conf. Search for .pre changes for
documented details. These features allow the admin to configure each
worker process differently if needed.

Support multiple workers listening on the same HTTP[S] port (port
sharing). This allows multiple workers to split the load without any
special rules.

Support or prohibit port sharing for WCCP, DNS, ICP, HTCP, SNMP, and
Ident protocols, depending on protocol-specific restrictions. Sharing is
implemented by registering listening socket descriptors with the
Coordinator process and obtaining them from the Coordinator as needed.
Here are protocol-specific notes:

   WCCP: Restricted to the Coordinator process due to how WCCP works.
   Workers do not need access to the WCCP code.

   DNS: Done by each worker with no sharing. Fixed source ports not
   supported unless each worker is given its own outgoing address
   because we do not want to match outgoing queries and incoming
   responses across processes.

   SNMP: Workers share incoming and outgoing sockets.

   ICP and HTCP _clients_: Cannot be supported in SMP environment
   unless each process has its own address (i.e., unique IP address
   and/or unique [ICP] port) because we do not want to match outgoing
   queries and incoming responses across processes.

   ICP and HTCP _servers_: share listening sockets.

   Ident clients do not need to share sockets because they use
   unique ports.

Support management signals (squid -k ...) in SMP mode, acting as a
single Squid instance.

Refork dying workers, similar to how we reforked dying process in
non-SMP daemon mode.

Merged from lp smp branch r10306.

Do not stop testheaders.sh on the first error, to be compatible with
"make -k check".

If testheaders.sh stops on the first error, it becomes very difficult to
test your changes with "make check" when somebody else broke some other
code or when the checks reach src/cf_parser.h and fail.

TODO: stop on the first error unless running under "make -k check".

Do not stop accepting just because we got COMM_NOMESSAGE.

Do not dereference a possibly NULL callback pointer.

Merged from parent (trunk r10600).

Applied source formatting rules in preparation for trunk merge.

Fixed comment formatting.

Renamed "main_processes" to "workers" per Squid Project review.

Removed Descriptor-related code used for testing fd passing via UDS messages.

Better bug 2972 fix.

sed the includes explicitly. Previous run worked unless code was actually
bootstrapped to an older libtool version.