lib-storage: Recent change broke deleting mailboxes with LAYOUT=index

lib-http: server: Fixed a hang occurring sometimes when response is sent for a request that had payload.
Forgot to always trigger sending response when processing request payload
finishes.

lib-http: client: Removed asssert in http_client_connection_is_ready().
There is no reason why the input stream couldn't be full.

lib-http: client: The asserts recently added to http_connection_check_idle() are bogus.

fs-posix: fs_copy() no longer fails if destination exists and FS_OPEN_MODE_REPLACE is used

lib-http server: If i/ostream fails, don't return wrong "stream input size changed" error.
Also handle the real case in a bit nicer way.

man: Global options includes: Added back the newline at end of files.

They were accidentally removed in the previous commit.

man: Global options includes: Added description of `-o setting=value'.

lib: If i_stream_seek() works by reading forward and read() fails, don't override the error message.

master: Don't start new processes while shutting down.

dsync: Added debug logging for attribute importing

Added signature for changeset e8b793f2c409

Added tag 2.2.15 for changeset e8b793f2c409

Released v2.2.15.

lmtp: Use mail_log_prefix while mails are being delivered.

lmtp: Added missing session_id to mail_user

lib-storage: LAYOUT=index now first creates the backend mailbox and only then adds it to list index.
This avoids any race conditions with mailbox creation and opening it.

lib-storage: Don't update mailbox list index status fields when deleting a mailbox.

lib-storage: When mailbox is deleted, reset its cached paths.
If mailbox is still later on recreated, the paths may have changed.

lib-storage: Fully unreference indexes when deleting mailboxes.

lib-index: Don't assert-crash if expunge event handling finds that everything is already expunged.

quota: Fixed including the right system quota.h with NetBSD
Patch by Manuel Bouyer.

I guess the quota.h could be renamed to something at some point..

quota: Fixed NetBSD quota
I guess it's because quota is refreshed only at quota_open() time.
Based on patch by Manuel Bouyer

auth: Some unsuccessful passdb lookups weren't returned as failures to passdb lookups.
These lookups were only being done internally, so it usually didn't matter.
Also this only affected things like allow_nets checking and some non-common
passdb { result_* } settings.

auth: allow_nets=local matches now connections without any IP address

virtual plugin: Fixed assert-crash when backend mailbox was auto-closed while it had pending expunges.

lib-http: client: Handle situation in which server sends response before request payload is fully sent.

lib-http: client: Fixed handling of requests aborted while still sending payload to server.

lib-http: client: Fixed conflict between request abort and request delayed error.

lib-http: client: Fixed cleanup of remaining waiting requests at connection destroy.
Forgot to dereference the requests for the reference that the connection
itself holds for each waiting request.

lib-http: client: Aborted requests were not counted as finished in the connection's response receive loop.
This caused a hang.

lib-fs: Improved error logging

Use i_stream_get_error() wherever possible instead of %m

lib-storage: Added data stack frames for most calls.
So neither the callers nor the implementations need to worry about those so
much.

lib: Added "istream-seekable: " error message prefixes.

dsync: Added some debugging output for mailbox trees.

dsync: Removed in/out state from debugging.
This was initially added for debugging hangs, but those haven't existed for
a long time now. Maybe we should eventually make debug categories
configurable, but for now nobody wants to see these messages.

login proxy: If proxy_timeout is set, try to reconnect until the timeout is reached.
This allows quickly restarting/upgrading backend servers without returning
login failures.

doveadm: Added metadata set/unset/get/list commands.

doveadm fetch: Use doveadm_print_istream()

doveadm: Added doveadm_print_istream() for easily printing istreams.

lib-http: client: Fixed proxied client connect timeout.
Timeout didn't cause requests to be aborted with error.

lib-http: client: Implemented maximum for connection backoff time.
Without a maximum, the backoff time grows exponentially to enormous values,
because it isn't reset until the connection succeeds. This causes recovery
from connection failures to become very slow. Current maximum is one
minute.

lib-http: client: Assertion in http_client_queue_fail() was wrong.
It is not guaranteed that all queue lists are empty, because new requests
can be submitted from the callbacks. Changed this into a proper invariant
check, which asserts tbat the number of requests in sub-queues add up to
the total number in the main queue.

lib-http: client: Clear req->conn when request is finished.
This prevents a spurious assert failure.

lib-index: Detect broken log_file_tail_offset updates without assert-crashing.

dsync: Fixed assert-crash / memory leak on error handling path.

lib-storage: Make sure mailbox names are valid UTF-8 with LAYOUT=index

replication plugin: Use low priority for mail copying operations.

lib: Added unit tests for guid_128_*()

lib: Added guid_128_copy()

lib-http: client: If peer is unlinked from queue and no other links remain, close any pending connections.
Those pending connections would no longer serve any purpose.

lib-storage: LAYOUT=index no longer keeps list index locked while creating mailbox.
Mailbox opening can be slow and complicated and could even try to lock the
list index again. So it's a bit more racy now, but all mailbox formats can
already handle races with mailbox creation.

lib-storage: Partially reverted previous change. Added mailbox_list_index_sync_delete() instead.

lib-storage: Added mailbox_list_index_delete_entry()

lib: test-buffer was randomly crashing with SIGFPE

lib-http: client: Created list of all submitted requests.
Currently only needed to improve debugging of hanging requests.

lib-http: client: Fixed behavior of connection backoff timer when multiple IPs are returned for hostname.
Peer backoff data was lost because peer was destroyed quickly. Now the peer
object is retained during the backoff period, so that new connection
attempts adhere to the backoff period.

lib-http: client: Connection erroneously indicated that it was ready while SSL handshake was not yet completed.

lib-http: client: Fixed behavior for max_connect_attempts with fewer IPs than attempts.
This was broken by earlier 'fix'.

lib-http: client: Fixed handling of connection timeouts.
A timeout caused an assert failure, because the connection status was
altered before the peer_connection_failure handler was called.

man: Reworked some formatting requests.

On some systems, for example SunOS 5.10, the example commands were cut off.

imap, pop3, lmtp: If client gets disconnected due to iostream error, log the full error.

doveadm fetch: If istream reading fails, log a better error message.

lib-storage: When logging about corrupted cached message size, log the filename also.

lib-storage: If we detect a broken cached message size, log more information about it.
Also try to include one of the cached headers in the message, which could
allow detecting if the cached data pointed to a completely different
message.

lib-lda: And fixed the earlier commit.

lib-lda: duplicate_flush() now unlocks the duplicate database even if nothing had changed.

lib-storage: LAYOUT=index doesn't reserve '~' as internal separator anymore.
The index doesn't reserve any character as hierarchy separator, so the
internal separator can change at any time. Use the namespace's configured
hierarchy separator as the internal separator to avoid reserving any
characters. If namespace separator isn't configured, fallback to the
original '~' so this change shouldn't break anything.

doveconf: Changed _doveconf_comment symbol suffix to _doveconf_banner
That describes its behavior better.

doveconf: Allow settings plugins to print comments to the output header.
If plugin contains <plugin name>_doveconf_comment string, it's written as
part of the doveconf output. The idea mainly being that the major plugins
(such as Pigeonhole) could print their version number there to avoid having
to ask for it separately.

imap-zlib: Removed check for disallowing COMPRESS to be used with TLS compression.
Clients shouldn't be doing this in any case, and this check doesn't work
properly with proxies.

We could solve the check properly for Dovecot proxies by having them send
the TLS compression state to backends, but it would still leave non-Dovecot
proxies broken. Although we could just not advertise COMPRESS=DEFLATE
extension if TLS compression is enabled and non-Dovecot proxies at least
wouldn't cause failures. Still, overall seems like a lot of work for such a
small and probably unnecessary extra check.

lib-ssl-iostream: Allow commas also in ssl_protocols setting.

Compiling fix for some systems.

auth: Minor fix to previous commit.

auth: Check for empty username after doing all the username changes.

Added signature for changeset 6dad1f6e8930

Added tag 2.2.14 for changeset 6dad1f6e8930

Released v2.2.14.

lib-storage: Added X-REAL-UID search parameter.

Compiler warning fix

lib: i_stream_read_next_line() now sets a better error message if line is too long.

auth: Fix to earlier commit: Don't try to resume already finished user iteration.

lib-index: Automatically grow header size on header updates.
This fixes assert-crashes when it didn't happen.

For example an old Maildir index could have had a header size 24. Dovecot
crashed then when trying to update it, because the new header size is 36 and
there wasn't an explicit mail_index_ext_resize_hdr() call.

Compile fix for systems without dlopen()

lib-http: client: Moved delayed failed requests from host to client object.

lib-http: client: With the recent addition of a connection attempt limit, connection failures weren't always handled correctly.

lib-http: client: Fixed segfault caused by earlier change.

auth: Make sure userdb iteration is destroyed if worker connection disconnects.

auth: Userdb iteration optimization.
Don't keep re-creating the timeout after iterating each user.

lib-dns: The dns_lookup() call caused a crash upon a connect error, because dns_client_disconnect() can indirectly call itself recursively.
Solved by dropping the list of lookups from the client object before the
lookups are destroyed.

auth: If userdb iteration client disconnects early, make sure we don't get stuck.

maildir: Don't limit uidlist line lengths to 4096 bytes.
Although this always indicates corruption, the current code doesn't handle
that very nicely. One fix would be to just ignore such long lines, but this
is easier to implement..

lib-http: client: Fixed assert crash occurring when DNS lookup fails immediately during request submission.
In that situation, the request was not dropped from the queue immediately, triggering the assert crash.

lib-lda: Compiler warning fix

mbox: Removed obsolete code that also wasn't compiling because of previous commit.

man: doveadm-acl.1: Corrected description of default output formatter.

lib-index: Removed dovecot.index locking related code, which is no longer used.

lib: Updated comment to o_stream_send_istream()

lib: Fixed assert-crash in o_stream_send_istream() if input stream was the one that failed.