imapc: Delay fetching state after untagged exists reply

imapc: imapc_copy() - Make sure capabilities are known before copying

imapc: Implement rollback for failed copies

imapc: imapc_save_copyuid() deduplicate code

imapc: Enable bulk copying if remote backend has UIDPLUS capability

imapc: Implement bulk copying for imapc

imapc: Extract imapc_copy_simple() from imapc_copy()

Keep the old one by one copying functionality as simple call. This will
be used if the remote backend does not have the UIDPLUS capability.

lib-storage: index_save_context_free() - Add assertion on non-NULL ctx->dest_mail

lib: Add seq-set-builder and tests for it

lib: json-parser - Fix detecting truncated JSON input

Based on patch by Dmitry Yakunin

dovecot.service.in: Add remote-fs.target to systemd service

man: doveadm-director - drop acute accent

Found by Lintian:

    This manual page uses the \' groff sequence. Usually, the intent to
    generate an apostrophe, but that sequence actually renders as a an acute
    accent.

    For an apostrophe or a single closing quote, use plain '. For single
    opening quote, i.e. a straight downward line ' like the one used in
    shell commands, use \(aq.

doc/mkcert.sh: Fix variables used for paths in error messages

The used variables are by default equal, but might get distinct by
distribution patches.

auth: passdb-sql - Clear passwords from memory after use

Based on patch by Miecio Za

global: Use consistently "time moved forward"

Based on patch by Tyson Williams

global: Fix spelling

Found via `codespell -q 3`

INSTALL.m4: Add note about autogen.sh

Based on patch by Fritz Zaucker

imap: Shorten test-imap-client-hibernate socket path length

README.m4: Add a link to the GSSAPI-in-SASL spec.

director: Fix crashes caused by changing host tag

Fixes:
Panic: file director.c: line 1175 (director_move_user): assertion failed: (user->host->tag == host->tag)
Panic: file director-request.c: line 303 (director_request_continue_real): assertion failed: (user->host->tag == mail_tag)

director: Prevent loops where directors keep changing host tags

config: old-set-parser - Remove stale FIXME

config: old-set-parser - Remove ssl-parameters.dat processing

dsync: Log reason why mailbox is synced with debug logging

dsync: If modseqs aren't permanent, assume HIGHESTMODSEQ=0

Otherwise the HIGHESTMODSEQ is just whatever happens to be in the in-memory
view of the index, which most likely isn't the true HIGHESTMODSEQ. Using 0
makes it clear that the HIGHESTMODSEQ isn't valid and can't be used.

lib-storage: Fix renaming mailbox hierarchies with FULLDIRNAME

If INDEX/INDEXPVT/INDEXCACHE/CONTROL were specified separately, they
weren't being renamed correctly. This mainly meant that if there was
a "foo/bar" folder, renaming "foo" to "foo2" wouldn't work correctly.

lib-storage: Split off path_get_parent_dir()

config: old-set-parser - Mark license_checksum obsolete

lib: Remove deprecated src_pos_r parameter from base64_decode()

The src_pos_r parameter in base64_decode() has been deprecated in commit
afa3db0a6f15e1b1038cb47f0632baa8f23d0f67 and is now removed - both from
the function as well as all it's calls.

submission-login: submission-proxy - Do not include initial response in AUTH command if it is too long.

submission-login: submission-proxy - Rename local variable in proxy_send_login().

lib-smtp: smtp-client - Move SMTP_BASE_LINE_LENGTH_LIMIT definition to smtp-common.h.

lib-smtp: smtp-client-connection - Rename SMTP_CLIENT_BASE_LINE_LENGTH_LIMIT to SMTP_BASE_LINE_LENGTH_LIMIT.

lib-smtp: smtp-client-connection - Fix typo in comment.

master: Fix logging errors when service listener creation fails

Only some of the errors were logged.

Broken by 6934b81afa05e25ac919a49a7fd30acf78ffa3dd

master: service_unix_listener_listen() - Don't ignore EISDIR/ENOENT errors on reload

The listener is likely important, so failure to be able to create it
shouldn't be ignored. These errors aren't expected to happen though.

anvil: Free all memory used by still connected processes at deinit

anvil: Split off connect_limit_process_free()

anvil: Use a maximum of 100 open admin-client connections while kicking users

anvil: Split off kick_user_iter_more()

anvil: Move add_conn_guid to struct anvil_cmd_kick

anvil: Move prev_pid to struct anvil_cmd_kick

anvil: Always use a new admin-connection for KICK-USER-SIGNAL commands

Otherwise the race condition prevention doesn't work. Also it may have
attempted to send the KICK-USER-SIGNAL command to admin-client connection,
which would respond with "Unknown command".

anvil: Improve error logging if KICK-USER command fails

The kick target-specific struct will be also useful in the next commit.

anvil: Make admin_client_unref(&NULL) no-op

anvil: admin-client - Add reference counting

This allows the command callback to free the admin-client.

anvil: connect-limit - Support multiple asynchronous iterators

lib-storage: mail_user_get_anvil_session() - Add alt_usernames

lib-storage: Add mail_user_get_alt_usernames()

lib: array - Add array_get_copy() which copies the array_get() result to the provided pool.

configure: Stop using cru with ar

Fixes ar: 'u' modifier ignored since 'D' is the default (see 'U')

configure: Use silent rules by default

Makefile: Add AM_V_GEN to generated files

m4: dovecot.m4 - Bump serial

run-test.sh: Move to build-aux

m4: dovecot.m4 - Fix moduledir self-reference

Fixes distcheck by not referencing itself eventually.

configure: Use external script to determine version

Makes packaging easier

configure: Use build-aux for external scripts

autogen.sh: Do not set ACLOCAL environment variable

m4 directory is set in configure.ac

configure.ac: Add tar-ustar option to AM_INIT_AUTOMAKE

Allows using longer filenames, without it, we are limited to 99 chars.

dict: Fix potential timeout leak at deinit

The deinit code could still trigger proctitle refresh.

dict: Make sure proctitle refresh timeout goes to the main ioloop

In some situations it could have gone to dict_wait() ioloop, causing
timeout leaks or crashes.

doveadm: Remove unused doveadm_killed_signo()

doveadm sync: Remove duplicate "Killed with signal" logging

It's already logged by lib-master.

lib-master: Always log a warning if process is killed by signal

If it's not logged by a delayed signal handler, log it at deinit.

lib-master: Split off log_killed_signal()

lib-master: Use sig_delayed_ prefix for delayed signal handler functions

This makes it clearer which signal handlers are immediate and which are
delayed.

lib-storage: Interrupt long mailbox searches on signal

When interrupt signal (SIGTERM) is received, run mailbox search for 2 more
seconds until failing it with MAIL_ERROR_INTERRUPTED.

indexer: Log MAIL_ERROR_INTERRUPTED with info-level instead of error

lib-storage: Add MAIL_ERROR_INTERRUPTED

This is going to be used to interrupt operations when e.g. SIGTERM is
received.

lib-storage: Avoid transaction rollback if mailbox delete fails in the middle

Commit the changes done so far and then return failure.

imap: Don't rollback transaction if expunge search fails

Just commit the expunges done before the failure. The next EXPUNGE will
continue from there.

imap: Add comment explaining EXPUNGE batching

doveadm: Remove duplicate SIGINT/SIGTERM handlers

lib-master already handles these.

doveadm: Remove duplicate "Killed with signal" logging in user iteration

It's already logged by lib-master.

lib-master: Add master_service_get_kill_time()

lib-master: Add master_service_get_kill_signal()

lib-master: Set killed-flag immediately in standalone programs

lib-master: Set killed-flag immediately in SIGTERM handler

This allows master_service_is_killed() to return TRUE without waiting for
the next ioloop to run.

lib: If log prefix update can't be sent to log, exit with FATAL_LOGERROR

lib: Fix losing log prefix or IP change when log process is busy

The fd for writing to log process is non-blocking. When sending options
to log process, it was done with write_full(), which stopped whenever
EAGAIN was returned. This error was simply ignored, and the logging code
thought that the prefix was successfully changed (or the IP was sent).

This mainly caused a problem when processes were reused and log process
was busy. The prefix update could have failed, and the following logging
would be using the previous session's log prefix, i.e. log lines could have
been logged for the wrong user/session.

Broken by 9372e48b702a3af5705785e08fbf47b0e37f2047

configure: Remove DOVECOT_WANT_SHADOW

Forgotten in 62cde650ebc83a8af6fe23f85dc92214afee672b

lib: connection - Fix changing istream in handshake_line() or input_line()

If the istream was changed (e.g. istream-multiplex added), the following
line was still read using the previous istream.

Fixes errors caused by recent anvil changes:
anvil: Error: Anvil client sent empty line

lib: Split off connection_input_parse_lines()

anvil: Log errors using connection event

indexer: Free user after anvil disconnect

Fixes invalid use after free. Broken by f9627ea62b5cb471d9adde0cc188ee8dea93c172

fts-squat: Remove the plugin

imap-hibernate: Support kicking connections

lib-master, global: Add and use MASTER_SERVICE_SHUTTING_DOWN_MSG

Use a macro to replace "Server shutting down" texts in different services.

imap-hibernate: Send BYE message to client when process shuts down.

Since the BYE message isn't explicitly flushed, this change also disables
error handling for the client ostream to prevent assert-crash at destroy.

imap-hibernate: Use the same "Server shutting down" log message as imap

Not just "Shutting down".

imap, imap-urlauth, pop3: Remove trailing period from "Server shutting down" log message

It's a bit weird having it in the log message. It's still sent to the
client though.

fts-lucene: Remove the plugin

auth: Remove shadow passdb driver

Drop support of shadow passdb driver by removing the implementation,
relevant references, build chain entries and the example config.

mail-crypt: Fix for mail being wrongly storing encrypted via LMTP

If 1st recipient has mail_crypt_save_version=2,
and 2nd recipient has mail_crypt_save_version=0,
the mail for 2nd recipient is wrongly stored encrypted.

Same happens if 2nd recipient has mail_crypt disabled

mail-crypt: Remove "plugin disabled" texts from errors

The plugin isn't just disabled, the user initialization fails entirely.

mail-crypt: Fix crash when plugin is already initialized, but not used for another user

Fixes:
Panic: Module context mail_crypt_user_module missing

old-stats: Remove the plugin, lib-old-stats old-stats plugins/imap-old-stats plugins/old-stats

lib-storage: Drop struct mail_user_vfuncs.stats_fill API

auth: Drop auth-stat