dict-sql: Added support for async operations.

dict: Use the new async APIs for everything.
If the dict backend supports async operations, this means that dict service
can now be configured with client_count>1.

lib-dict: Added async API for lookup and iteration.

dict-sql: Code cleanup - added sql_dict_transaction_has_nonexistent()

dict-sql: Code cleanup - use a common sql_dict_transaction_free()

dict-sql: Fixed memory leak when committing/rollbacking unchanged transaction.

dict-sql: Code cleanup - separated SQL query building function from sending it.

lib-dict: Code cleanup - give name for enum dict_protocol_cmd/reply

lib-sql: Mark Cassandra driver as pooled.
Otherwise all the asynchronous operations will assert-crash, since all the
auto-connecting code is in the sqlpool code.

lib-sql: Debugging help - Added assert before clearing sql_result.callback.
If result is unrefed too many times, this still allows accessing the
callback from a debugger.

lib-sql: sql_result.free() should never be reached from the query callback.
This code was probably added before sql_result refcounting.

lib-imap-client: If connect() fails immediately, log an error and retry the next IP.
Only if all IPs fail return a full failure. This is mainly intended to skip
IPv6 addresses when IPv6 connectivity doesn't work.

auth: Added ":protected" suffix to passdb and userdb field names.
This means that if the field is set only if it hasn't already been set.
Usually an earlier passdb/userdb would have set the field and this is
setting a default (e.g. per-user settings override per-domain settings).

lib-fs: Added "dict" backend, which is a wrapper to using lib-dict.

imap-hibernate: Use sockets' st_dev and st_ino to verify that the passed fd is correct.

lib: Added str_to_ino()

imap: NOTIFY SET STATUS didn't send HIGHESTMODSEQ in STATUS reponses when needed.

*-login: mail_max_userip_connections=0 was broken by f8ab4f979e92

cassandra: Changed default consistency levels to local-quorum.
It is a much safer default than "one".

cassandra: Split consistency setting to read_consistency and write_consistency.

lib-fts: Add missing "j'" to French contractions.

Earlier in_port_t fix was ineffective due to one small detail.
The new SET_IN_PORT_ZERO did not actually use the new net_str2port_zero() function.

lib-fts: Add UTF-8 unit test for lowercase filter.

lib-fts: Add prefixing contraction filter.
Filters away prefixing contracted words, e.g. "l'homme" -> "homme".
Tokens to be filtered must be lower case. Only supports French in
this initial version.

aggregator: Allow replicator_port=0 setting (fix to previous in_port_t changes)

Earlier in_port_t fix created problems with service listener configuration.
Listeners are disabled with port=0, which was not allowed anymore.

lib-master: Compiler warning fix

http-client: Added support for using an HTTP proxy running on a unix socket.

Removed all invocations of strtoll() and friends.

strnum: Implemented many more numeric string parsing functions.
Created macros for most of the implementation to avoid further code
duplication.

Removed all invocations of atoi().

Changed type of internet port values to in_port_t everywhere.
Created special SET_IN_PORT setting type for internet port values.
Created net_str2port() for parsing internet port values.
Removed several atoi() invocations in the process.

ioloop-epoll: Fix fatal epoll_wait() error occurring when there are only ios with no fd.

lib-http: client: Added proper handling of 408 response status.
This is treated as a special server connection close event, rather than a
response to the last issued request.

lib-storage: Added %{userdb:*} expansion to mail settings.

lib-settings: Added settings_var_expand_with_funcs()

lib: If var_expand_with_funcs() function returns NULL, it should be treated the same as ""
The previous behavior was to return "%{foo:bar}" as "foo:bar}".

*-login: Added %{passdb:*} fields to login_log_format_elements

doveadm fs delete: Support giving multiple filename parameters.

dsync: Include mailboxes' full path in debug messages.

imapc: Don't crash with mailbox_list_index=yes

lib: Try fixing ec6e672a6e32 (ioloop timeout fixing)
Previous code was broken at least when moving a timeout between ioloops.
This is now tested and works.

dsync: Fixed running with tcp/tcps destination.

dsync: Fixed another crash with recent end-of-list changes.

Reverted ec6e672a6e32 for now due to some bugs.

dsync: Added -D parameter to disable mailbox renaming.
The renaming logic is annoyingly complex and there are some bugs left in it.
With this parameter renames are never even attempted, but instead a rename
would be done (slowly) with mailbox delete + create + fill.

Although with imapc protocol mailbox renames are rarely detected anyway.

dsync: Fixed again waiting for remote process wait to die.
We can't rely on stderr getting closed. It doesn't happen if the remote
process crashes. Now waiting for SIGCHLD in ioloop should solve this and
still log all the error messages at exit.

ioloop: Delay actual start of a new normal timeout until the next io_loop_run() cycle.
This makes sure that timeouts will not expire before they get a chance to
run.

imapc: Fixed handling escape-char
The current code should now handle all kinds of mailbox names correctly, including:

~/foo
%7e/bar

lib-storage: mailbox_list_[un]escape_name() can now be called globally

dsync: Earlier end-of-list change broke single-process dsync.

dsync: Make sure we print all the stderr output from remote processes at deinit.
Earlier the final messages may have been lost, especially if debug logging
was enabled.

dsync: Added -T parameter to specify the I/O stall timeout.

dsync: If mailbox export deinit failed, the failure state may not have reached mailbox importer.
The "end of list" was sent to the importer side dsync before export noticed
the failure. This could have caused import to complain about missing mails.

dsync: Added assert to make sure end-of-list isn't sent when brain has already failed.

imap: If mailbox state couldn't be exported for hibernation, log also the mailbox name.

login_log_format_elements: Added %{listener} variable to expand to the listener socket name.

example-config: Updated mail_attribute_dict comment

imap: Fail silently if selected mailbox format doesn't support GUIDs.

imap: Fixed hibernation to work with non-TCP connections.
Mainly meaning UNIX socket connections from login processes, which are
proxying TLS connections.

lib-http: Added more debug logging.
Patch by Stephan Bosch.

lib-imap-client: Allow reconnecting to IMAP server even if there had been no idle moments.

lib-imap-client: Removed unused pending_box_command_count

imapc: If FETCH commands fail, have imapc_mail_fetch() always return failure.
Earlier it may have returned success and imapc would later complain about a
missing FETCH field.

lib: Fixed io_loop_extract_notify_fd() to compile with kqueue.

lib-master: struct master_service_connection.name must never be NULL, use "" instead.
Fixes crash at least in auth process when there are inet_listeners without
names.

dsync: Compiler warning fix to previous change.

dsync: Fixed memory leaks when importing attributes whose values were in istreams.

doveadm backup: Fixed assert-crash due to duplicate 'R' in getopt args.

imap: Compiler warning fix to imap-hibernate commit

Added imap-hibernate process for gathering IDLEing imap processes.
imap_hibernate_timeout setting controls how quickly the connection is moved
from imap process to imap-hibernate process.

Some IMAP extensions like NOTIFY, SEARCH=CONTEXT and COMPRESS aren't
supported yet.

There's also a new X-STATE command, which can be used to export the current
IMAP connection state to a string and later on imported to get back to the
original state (a quick resync feature for IMAP clients). However, this
command is disabled for now due to the current code being unoptimized for
untrusted input.

lib-storage: Added mailbox_watch_extract_notify_fd()

lib: Added io_loop_extract_notify_fd()

lib-storage: Added mailbox_recent_flags_set_uid_forced()
This allows adding recent flags to mails whose UID is lower than the
existing recent mails.

lib-storage: mail_storage_service_user_free() needs to update log prefix if current user is freed.

lib-storage: mail_user_var_expand_table() may not have returned %{auth_username} correctly

Use io_stream_get_disconnect_reason() instead of duplicating its code all over the place.

lib: Added io_stream_get_disconnect_reason() to iostream.h

lib: connection_disconnect_reason() now returns the full iostream error string.

imap: Fixed memory leak in SELECT QRESYNC error handling path.

imap: Code cleanup
Keep client_add_input() functionality separate from
client_create_from_input(). Also this way temporary buffer doesn't need to
be created to add the input in login_client_connected().

lib: Log notify IO leaks when ioloop is destroyed.

lib: io_add_notify() wasn't setting struct io.source_linenum

imap: If command has no imap_parser, don't crash when freeing the command.
All the current commands have a parser though, so this doesn't actually fix
anything.

lib: inotify doesn't need to watch for IN_CLOSE
This doesn't indicate that the file was modified. We don't care if some
reader accessed a watched file.

lib-storage: Moved index/index-mailbox-check.c code to mailbox-watch.c
This changes the API, but adds backwards compatibility macros.

Removed support for dnotify.
Everybody should be using inotify by now.

pop3: Added %{deleted_bytes} variable to pop3_logout_format

pop3: If transcation commit failed at QUIT, don't log any messages as expunged.

lib: kqueue notification should trigger also on file renames.
For example if dovecot.index.log is renamed to dovecot.index.log.2, we
should notice that since there's now a new dovecot.index.log containing new
changes.

lib-storage: Code cleanup - Don't keep a separate notify_ios list.

lib-storage: Moved most of the \Recent flag handling code to mailbox-recent-flags.c
There are also some API changes, because functions were renamed and the
recent_* fields were moved to struct mailbox. I'm not aware of any plugins
using these though, except for index_mailbox_set_recent_seq() which for now
is kept as a backwards compatibility macro.

No changes were made to the actual code logic.

*-login: Removed dead assignment to make static analyzer happy.

fts-solr: Flush Solr indexing HTTP requests every 1000 mails.
This avoids the HTTP request from becoming too huge.

fts-solr: If HTTP request fails, log the status number as well.

fts-solr: Fix to previous memory leak fix - second request was failing.
Duplicated data was sent to Solr because string wasn't truncated.

fts-solr: Fixed memory leak when indexing multiple mailboxes in one update context.

lib-http: client: Fixed handling of request timeout.
It was inappropriately active when the client needed to take action.
This showed particularly with large payloads sent using
http_client_request_send_payload().

lib-http: Previous test-http-client safe_memset() change broke in some systems.
Since there's no easy way to fix this in Makefile.am, just do it by actually
using safe_memset()..

lib-http: test-http-client may have failed to load SSL library plugin.
safe_memset() wasn't necessarily compiled into test-http-client. This is a
bit kludgy way of just adding it. Another possibility could have been to use
-Wl,--whole-archive with GNU ld, but it's a bit tricky here.