Add the "opportunistic TLS" option.

Add a new configuration option to allow remote connections to proceed in
unencrypted mode if the STARTTLS negotiation fails.

dma.8: correct logic of comment/uncomment wording

catch SIGHUP so that sleeps can be interrupted by the user

A SIGHUP sent to the dma process will run the no-op signal handler and
break the sleep(3) call in deliver.
Do not increase the backoff if sleep was interrupted.

Submitted-by: Peter Pentchev <roam@ringlet.net> (earlier version)

Honor LDFLAGS if specified in the environment.

fix wrong argument to free()

Check the parsed recipient address for validity.

Fix a crash when the SMTP server does not support STARTTLS.

properly randomize the message id

We would only use the queue id of the message as its message id, which
is generated from the inode number of the message's queue file.  Inode
numbers are readily reused on many file systems, which leads to
repeating message ids.

Create real randomized message ids instead.

Submitted-by: Peter Pentchev <roam@ringlet.net> (earlier version)

load_queue: use stat(2) instead of de->d_type

Some filesystems (notably XFS) do not set the d_type field in the dirent
structure.  This prevents dma from delivering any of the queued messages.
Rework the code to use stat() instead.

Submitted-by: Peter Pentchev <roam@ringlet.net> (earlier version)

mailnamefile: fix parsing

Fix a file descriptor leak in the MAILNAMEFILE code.
Fix a mistake in my patch submitted to DFBSD - "initialized" should be static!

check result of vasprintf and asprintf

Fix a typo in an error message.

todo: create mbox files with correct user/permissions

document the EMAIL environment variable

drop the virtusertable support

A better way to set the envelope sender is to use either the -f argument
or to set the EMAIL environment variable.

install with correct permissions

Linux -Wall fixes

fix parsing for "name <real@example.org>" addresses

Noticed-by: Ed Maste <emaste@freebsd.org>

use the EMAIL env var as originating mail address

remove debug output

flip the polarity of the compatibility macros to HAVE_*

use the plain makefile as default

treat st_ino as uintmax_t to match the format string

Submitted-By: Ed Maste <emaste@freebsd.org>

dma: move config files to source directory

dma: add a plain Makefile for other systems

Submitted-by: Michel Salim <salimma@fedoraproject.org>

dma: add DragonFly compat files

These are not used in DragonFly, but for compilation on other systems.

dma: don't use sockaddr_storage.ss_len

sockaddr_storage.ss_len is not mandated by POSIX, so we shouldn't use
it.  Instead, use addrinfo.ai_addrlen.

dma: don't use __unused

__unused avoids a gcc warning that the parameter is not being used, but
this does not exist in other systems or is overloaded with a different
meaning.

Instead simply use a cast to (void) to silence gcc.

dma: sort includes

dma: use st_mtim to make source more POSIXy

dma: defer delivery if STARTTLS fails

dma: treat connect status messages properly

dma: rework config parsing

dma: perform MX lookups

dma: allow empty sender in queue files

Empty senders happen when a bounce gets queued, so we need to accept
such queue files.

dma: create spool files mode 660

dma runs setgid mail, so we need to create files which are group
readable, otherwise we won't be able to read them later.

gcc44 warns: Put input() under YY_NO_INPUT and set that if it isn't used.

Fix typo: aquire -> acquire.

dma: add TODO

dma: bump man page date

dma: man page cleanup

dma: add recipient parsing from headers

dma: convert to more extensible queue file format

dma: beautify queue listing output

dma: add queue-only mode (no instant delivery attempt)

This acts like the DEFER config option, just from the command line.

dma: move sender into queue

dma: initialize queue structures

dma: factor out mail handling code

dma: don't set it->mailf too early

We may not set it->mailf in newspoolf(), or aquirespool() will not
(re-)open the mail file, leading to concurrent seeks.

Reported-by: Daniel Roethlisberger
DragonFly-Bug: <http://bugs.dragonflybsd.org/issue1462>

dma: don't block when trying to aquire a queue file

We might race with some other process, so it is imperative to treat a
locked file as a soft error instead of blocking on the file until the
other process unlocks it.

dma: don't block on lock/opening the mbox file, backoff instead

dma: accept -q without argument.  report argument errors.

dma: add comments for ESMTP support

dma: treat seek errors as permanent errors

dma: more loudly note that we should query for MX records

dma: fix various bugs in local mbox delivery

dma: fix mail bouncing

dma: always log error exits

dma: drop CVS ids

dma: rewrite file management

Close files as early as possible, possibly re-open them later.  This is
so that we avoid filedesc sharing problems completely and that we won't
run out of fdesc in case of a large queue.

dma: correct logic for setting the locked flag

dma: restructure logging

Don't carry the ident manually.  Instead set a global tag once the
ident is fixed.

dma: note that the data file provides the id

dma: rework queue handling

dma: Move comment.

dma: Re-arrange argument consistency checks.

dma: better tag handling

dma: add required headers if they are not present

RFC2822 states that we must or should include the Date, Message-Id, and
From headers, so add them if they are not present in the message.

dma: use ANSI string continuations

dma: pass over the code and improve error handling

dma: clean up network code

- free memory where necessary
- don't just abort without error message
- don't bounce if we want to defer the message

dma: treat encrypted connections as secure

Users have to set the INSECURE config option to allow dma to send
plaintext passwords on login.  This commit allows dma to send plaintext
passwords through TLS connections even if the INSECURE config option is
not set.

The downside is that this allows a man-in-the-middle attack on the
password exchange.  The only solution to this is checking the server
certificate, but we don't do that (yet).

dma: properly close and free SSL connection state

dma: log mail queueing more thoroughly

Directly log when a mail is accepted and not only when a delivery attempt
is made.

dma: note that we will have to clean up SSL state

dma: unconditionally use openssl

Drop HAVE_CRYPTO and unconditionally use openssl.  Dma is supposed to be
small and secure, so there is no way around openssl anyways.

dma: implement alternate identity for mailq

mailq does not take the standard sendmail options, but behaves like -bp.

dma: correctly initialize error before delivering mail

error is used to return failure or success from deliver_remote().  However
error is also used before, so we have to make sure that it is initialized
to 0, else a previous (non-fatal) error could pull through, even if the
delivery was successful.

dma: adjust syslog logging levels

Most invocations of syslog used LOG_ERR.  Clearly this is not good
practise.  Adjust the levels to be reasonable.

dma: always send EHLO after tls setup

We have to send EHLO even after a STARTTLS, so unconditionally send it
after connection/tls setup.

dma: prevent races from sharing fd between children

On fork, fds are shared between children.  If two processes work on
different recipients, but on the same queue file, they might get
confused when the fd (and thus the offset) is shared.  Prevent this by
re-opening the queue file after fork.

Reported-by: Daniel Roethlisberger <daniel@roe.ch>

dma: restructure set_username

Restructure to perform early exit and check for strdup() error.

dma: constify bounce reason and avoid strdup

We don't need to care about freeing the bounce reason string, because
bounce is only called once.  Convert all bounce reason strings to
const char * and avoid calling strdup() on them.  Dynamic strings from
asprintf() need some de-const massaging.

dma: ignore a whole slew of sendmail options

Probably some more left.

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: better logic for guessing username

Apply better logic to guess the username when getlogin(3) is not
available for some reason, e.g. no login session at all, no access
to utmp/wtmp, etc.

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: add the MAILNAME and MAILNAMEFILE config options

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: add FULLBOUNCE config option

FULLBOUNCE will include the full message in the bounce

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: provide proper bounce error message

This may not be the best solution - the error message buffer has now
turned dynamic, but the only alternative I see is to make it a static
array in net.c... and I'm not quite sure if I want to do that just now.

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: lock temp files on creation

Lock the temporary files after creating them to protect from a "dma -q"
run at just the wrong time causing a double delivery attempt for
the same message.

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: various code hardening

(as found by the Debian hardening wrapper)

- check the result of fgets()
- loop the network writes until the whole thing is sent
- check one more write() result

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: note that the -q option requires an unused argument

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: fix two typos and a word order problem

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: also list locked queue files

When listing the queue, show all messages, even those that are
currently locked for delivery.  Indicate the lock with a '*' after
the queue ID.

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: bounce message instantly on permanent remote delivery errors

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: treat a QUIT error as merely a warning

RFC 2821 only mandates that a QUIT error should abort an unfinished
transaction, and since we've reached this point, the DATA command has
succeeded and the message has been accepted for delivery by the remote
end.  Thus, just warn about it.

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: properly log last remote status message

Store the last error or status message received from the remote server in
the neterr[] buffer and display it instead of the meaningless %m in
remote delivery syslog messages.

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma: several fixes to make dma build on non-BSD OS's

- replace open(..., O_EXLOCK) with a new open_locked() routine;
- define the __unused function attribute;
- do not redefine PATH_MAX.

Submitted-by: Peter Pentchev <roam@ringlet.net>

dma(8): Raise WARNS to 6.

Revert 4dcaa51ba4d4238e035a802067366a28527cd570

This reverts the .forward commit.  I committed the code to early, there are some
bugs inside (queue handling broken and some security issues).  I back this out
until we have more time to fix all the issues or rewrite some parts from scratch.

This brings dma back in a fully working state, only the .forward stuff is gone.

Tested-by: Daniel Roethlisberger <daniel@roe.ch> and me
Ok-to-back-out: corecode@

Silence warnings.