dsync: Fill doveadm_server.port field

In preparation for following changes.

doveadm: server-connection - Delay handshaking until client_connected is called

In preparation for connecting to remote IP asynchronously.

doveadm: server-connection - Invalid log type should be printed as error

It's a bug if it happens.

doveadm: server-connection - Convert to using event logging

doveadm: server-connection - Convert to connection API

doveadm: server-connection - Add struct connection

In preparation for using the full connection API.

doveadm: server-connection - Remove the concept of idle connections

The connection is always disconnected after processing commands, unless
the callback started a new command.

doveadm: Remove server_connection_get_server()

doveadm: Avoid using server_connection_get_server()

doveadm: Remove old doveadm-server exit-code workaround

The "old" means v2.2.2 or older.

doveadm: Simplify connection choosing when a server command is finished

The newly chosen connection is always the one that had just finished the
command.

doveadm: server-connection - Don't do connection-specific config lookups

The config is used only for doveadm_username and doveadm_password.
In theory it might be nice to support different passwords for different
remote hosts, practically nobody is doing this and it just complicates
the code and slows things down.

doveadm: Fix connecting to doveadm-server via UNIX socket

Broken by recent changes.

doveadm: Add support for proxy_redirect_reauth

doveadm: Split off doveadm_cmd_redirect_finish()

doveadm: Split off doveadm_cmd_pass_reply_parse()

doveadm: doveadm_mail_server_user_get_host() - Return the full proxy settings

doveadm: Split off doveadm_cmd_pass_lookup()

doveadm: doveadm_mail_server_user() - Remove input parameter

All the necessary information is in the command context already. Also note
that mail_storage_service_init_settings() doesn't actually need anything but
the service.

doveadm: Add support for proxy loop detection

doveadm: Add DOVEADM_PROTO_MINOR_MIN_* macros

doveadm: Use auth proxy parsing API

doveadm-server: Support referrals returned by passdb

doveadm: Add support for proxy destination referrals from initial backend.

This mimics login referral support.

doveadm: Delay freeing doveadm_mail_server_cmd()

Needed by the next commit.

doveadm: Split off doveadm_mail_server_cmd_free()

doveadm: doveadm_server_get() - Remove unnecessary ctx parameter

doveadm: Split off server_connection_input_cmd_error()

doveadm: Add struct doveadm_server_reply for server command callback

doveadm: Simplify passdb fields parsing

lmtp: Use auth_proxy_parse_redirect()

lib-auth: Add auth_proxy_parse_redirect()

lmtp: Use auth proxy parsing API

*-login: Use auth proxy parsing API

lib-auth: Add API for parsing proxy settings from passdb lookup results

doveadm: Rename doveadm_cmd_*_ver2() to doveadm_cmdline_*()

These are command-line specific functions, and there's no need to clarify
that they're for v2 commands.

lmtp: Make sure error is returned if passdb returns invalid input

lib-lua: dlua_table_get() - Pop key from stack if idx doesn't point to a table

Otherwise it leaks the key into the stack.

lib-lua: dlua_pcall_yieldable() - On failure keep only the error in stack

Otherwise the full call stack would be in the stack.

lib-dict: Make dict_deinit(&NULL) no-op

lib-dict: Add dict_have_async_operations()

login-common: Don't log auth referral disconnects as having "internal error"

lib-lua: dlua-resume - Ensure timeout is handled correctly

lmtp: lmtp-proxy - Add support for recipient referrals.

This mimics login referral support.

lmtp: lmtp-proxy - Use struct lmtp_proxy_recipient for lmtp_proxy_rcpt_parse_fields().

lmtp: lmtp-proxy - Split off lmtp_proxy_rcpt_get_connection().

lmtp: lmtp-proxy - Add approved recipient hook before initiating connection.

Before, it was added in the client login callback, which can be called more than
once after later commits.

lmtp: lmtp-proxy - Split off lmtp_proxy_rcpt_init_auth_user_info().

lmtp: lmtp-proxy - Create proxy recipient struct immediately in lmtp_proxy_rcpt().

lmtp: lmtp-recipient - Put lmtp_local_rcpt() and lmtp_proxy_rcpt() parameters in struct lmtp_recipient.

lmtp: lmtp-client - Add forward declaration of struct master_service_connection.

Later changes to includes makes this necessary.

lmtp: lmtp-proxy - Remove unused finish timout.

lib-smtp: smtp-reply - Add smtp_reply_code_equals().

lib-smtp: Add smtp_client_connection_get_remote_ip().

login-common: Add proxy_redirect_reauth auth extra field support

Without this a proxy redirect request is immediately trusted and will be
reconnected to. With this enabled, a new EXTERNAL authentication request
is performed, which contains the redirect destination as well as the
current redirection path. The auth server can catch this request and
figure out whether the redirect is allowed or not, or if the proxy
should be reconnecting to a different IP entirely.

login-common: Add login_proxy_get_redirect_path()

login-common: Fix event logging when aborting auth requests

The reason was NULL, so the event was missing "error" field and also the
error message was logged as "(null)" (or it could have crashed in some
OSes).

login-common: Fail if auth returns invalid source_ip

login-common: Check validity of auth proxy fields' values earlier

login-common: If auth lookup returns invalid extra fields, fail authentication

This is a safer behavior.

login-common: Split off client_auth_reply_args()

login-common: client_auth_parse_args() - Don't modify client directly

Return alt_usernames in reply, and modify client in
client_auth_handle_reply().

login-common: Split off sasl_server_auth_request_info_fill()

login-common: sasl_server_auth_begin() - Remove service parameter

Use login_binary->protocol directly. It's always going to be that.

imap-login: proxy - Support parsing REFERRAL on remote auth failure

login-proxy: Add support for reconnecting to a different IP:port

For now only IP is supported. Hostname lookup would require further code to
do it asynchronously.

login-common: Split off proxy_reset()

It doesn't harm to call client_vfuncs.proxy_reset() also on non-reconnect
case.

login-common: Set log prefix in login_proxy_set_destination()

This way the log prefix changes if destination changes.

login-proxy: Split off login_proxy_set_destination()

NEWS: Add news for 2.3.17.1

NEWS: Add news for 2.3.17

lib-storage: Remove reason_code=mailbox:search

Continues the slow per-mail event removals started in
f3c568e3cbc113920bc029e07e56619589c6a26d.

Reverts 87cd6570a14b3f572fc6000f710df409371a4bcb

lmtp: lmtp-proxy - Add session ID to backend connection error replies.

submssion: submission-backend-relay - Avoid logging two errors about a connection problem.

Earlier commit changed lib-smtp to consistently log an error for connection
problems, which causes a second error to occur for submission relay backend.
This is undesirable.

lmtp: lmtp-proxy - Add lmtp_verbose_replies setting.

It causes the proxy to return errors with full details in replies to the LMTP
client.

lmtp: lmtp-proxy - Split off lmtp_proxy_handle_connection_error().

lmtp: lmtp-proxy - Change proxy connection failure message make more sense.

lib-smtp: smtp-client - Add verbose_user_errors setting.

It returns the detailed administrator errors as user error in the reply returned
to the calling application.

lib-smtp: smtp-client-connection - Log administrator connection failures at a single place.

lib-smtp: smtp-client-connection - Consistently log an error for connection failures.

lib-smtp: smtp-client-connection - Add definition for repeatedly used connection error.

lmtp: Reformat lmtp-proxy.c.

lib-smtp: Reformat smtp-client-connection.c.

lib-compression: ostream-zlib - Fix signed vs unsigned comparison.

lib: test-event-flatten - Fix format string specifier for usec time

lib-storage: Remove most reason_code=mail:*

Event reasons create events internally. This is rather expensive if it's
done for operations that access all emails in a large folder, e.g. SORT.
The per-mail reason_codes also didn't seem to be hugely helpful, so best
to just remove them.

Some of the mail:* reasons were left where they are causing mail stream to
be opened anyway. In these cases the extra CPU used by event reasons is
relatively little.

Reverts ce517f8323fa4a60b230f29712b207139badb3f0

maildir: maildir_filename_base_hash() - Disable ubsan integer wrapping checks

lib-fts: Reuse textcat handle between sessions

textcat initialization is rather CPU intensive. Its configuration is
normally always the same between sessions, so we can keep the latest textcat
handle cached.

lib-storage: Remove index_mail_data.seq

The seq already exists in struct mail, so this unnecessarily duplicated it.

lib-storage: Minor optimization - Use mail_index_lookup_full() to avoid two index lookups

mail_index_is_expunged() was already internally doing the full lookup.

lib-index: mail_index_lookup_full() - Add expunged_r parameter

lib-storage: Optimize setting mail event log prefix

This was much more important before mail event creation was delayed. In one
installation the t_strdup_printf() call itself took about 4% of the total CPU
usage. Now that mail events are delayed, this is likely much less of an issue.
Still, this is easy enough of an optimization that might as well do it.

lib-storage: Delay creating mail event until mail_event() is called

Mails can be accessed a lot. The event handling code takes up a lot of CPU,
but most of the time the created event wasn't actually used for anything.

lib-storage: Make sure mail event is created before accessing streams or metadata

This is in preparation for the next commit which delays the mail event
creation. The event duration behaves better if the event is created before
any potentially slow access is done.

lib-storage: Move struct mail.event to mail_private

lib-lda, lib-storage: Use mail_event()

lib-storage: Add mail_event()

lib-storage: Add and use mail_metadata_access_start()

lib-storage: Add and use mail_stream_access_start()

This replaces setting mail_stream_accessed directly.

lib-storage: raw: get_stream() - Add missing lookup_abort and mail_stream_accessed handling