lib-dcrypt: ctx_hmac_init() - Fix memory leak if MAC initialization failed

lib-dcrypt: ctx_hmac_init() - Fix memory allocation failure handling with OpenSSL3

configure: Remove extra space from capabilities

Broken in 16218e44ace1af2952b5090a4e2bb26b9495ba94

lib-dcrypt: test-stream - Test multiple ciphers

lib-dcrypt: Add OID for chacha20-poly1305 for OpenSSL1

lib-dcrypt: istream-decrypt - Read more if footer has not been fully read

Fixes signal 11 crash caused by decrypt_size underflowing.

Broken in 316cbe323513a0f20d1cf519fe9405e231d633e2

lib: test-file-cache - build expected error strings using strerror

Different libc libraries like musl and glibc have different error
strings for the same errno's, to make the tests work as expected
with musl libc, use strerror to build the expected error string.

global: Move some settings back to non-hidden for core/CE

lib-master, config: Add a required dovecot_storage_version setting

This setting specifies specifies the oldest Dovecot version that must be
able to read the files written by this Dovecot. This setting replaces
separate settings that are added when file formats are changed.

The intention is that when upgrading Dovecot cluster, this setting is
first kept as the old Dovecot version. Once the cluster is fully upgraded
to a new version and there is no intention to rollback to the old version
anymore, this version number can be increased.

lib-master: Add version_is_valid() and version_cmp()

config: doveconf - Change is_config_binary() to return TRUE

Previously only the "config" binary returned TRUE, while doveconf didn't.
The intention was always for both to return TRUE, since it's an alternative
runtime check for CONFIG_BINARY macro.

doc/example-config: Add dovecot_config_version setting to dovecot.conf

config: doveconf - Output dovecot_config_version setting

It is not currently output for e.g. "doveconf -d"

config: Add a required dovecot_config_version setting

This version must now be the first setting in the configuration file.
This is just the minimal version to allow supporting backwards
compatibility better in later versions.

master: --build-options: Print "pro" for Pro build

quota: Remove support for setting quota limits via dict

imap-quota: Remove support for SETQUOTA

It always now just returns "No permission".

quota: Add quota_mailbox_count setting

lib-storage: Add mailbox_list_get_count()

lib: test-ostream-multiplex - Free output2 as well

lib: ostream-multiplex - Fix sign mismatch

settings: Mark various settings as advanced

global: Try shutdown connections before closing

This is to avoid closing connections uncleanly.

login-common: Set correct disconnect reason if TLS handshake failed

lib-ssl-iostream: Properly shutdown TLS connections

lib-ssl-iostream: Do not overwrite last_error

lib-ssl-iostream: Set correct alerts

lib-oauth2: Add grant_type=client_credentials method

lib-oauth2: oauth2_request_start() - Allow starting a request without input->token

This is needed for the client_credentials grant type as it does not pass
a token but a client_secret to authenticate.

dovecot-config: Add lib-oauth2 to LIBDOVECOT_INCLUDE

lmtp: Add support for SMTPUTF8

This is based on code from someone called 'vk'. It's incomplete (needs
RFC8265 support at least), but works for him/her.

smtp: Add support for SMTPUTF8

This adds support for SMTPUTF8 (RFC 6531) to the LMTP and Submission
services. The Submission service advertises this extension only if its
upstream relay does, and takes some care to avoid a misunderstood error
message.

imap: Add UTF8=ACCEPT capability (RFC 6855)

This adds the capability and accepts UTF8 quoted-strings.

The SEARCH command is changed as required by RFC 6855, section 3, final
paragraph. There are no changes to the searching, as 6855 only changes
changes the syntax.

This does not add any kind of downgrading. Before this change, Dovecot would
accept an APPEND of a message such as

   From: grå@grå.org
   Subject: grå
   ...

and would just-send-8 that to any IMAP clients. This change maintains that policy.

lib-mail: Make FETCH ENVELOPE and SEARCH work on the human-readable domains

This stores the unicode form of domains in all indexes, meaning that
searching uses and serverside parsing shows the human-readable form of all
addresses.

lib: Add punycode decoder

doc: Use stamp files to ensure man and html are downloaded once

dsync: Don't fail when metadata cannot be retrieved

This become necessary when imapc is accessing a backend with
no metadata capabilities as the attribute_get imap primitive
cannot reply OK when it cannot provide the requested metadata
entry (attribute_iter already iterated an emtpy set in this case).

doc: Fix check for installed html

README: Add reference to RFC-9585

README: Remove stray spaces

dsync: Don't commit transaction after every mail on slave side

dsync_commit_msgs_interval setting worked only on the master side. On the
slave side it was always 0, which caused it to commit after every mail save.

Also, dsync_commit_msgs_interval should be handled independently on each
side. Master shouldn't send its dsync_commit_msgs_interval setting to the
slave side.

Broken by a76faea3eb26c4cd67886fbe02c604f74d54be8c

doc: Get man page assets from version dependant location

quota: Add quota_mailbox_message_count setting

doveadm compress: Add support for STARTTLS

doveadm compress: Refactor line reading

doveadm compress: Move struct client earlier

imap: Add tagged reply to "Command finished" debug log line

imap: Don't send imap_command_finished event if command name wasn't parsed

imap: Don't reset "last command stats" if command name wasn't parsed

imap: Support hibernation when COMPRESS is enabled via imap-login process

imap, imap-login: Handle COMPRESS in imap-login process if possible

This is currently done only in the connecting Dovecot proxy's imap-login
process. If no proxying is used, the COMPRESS handling stays in the imap
process. (That could be changed with some extra work.)

login-common: Add login_proxy_replace_client_iostream_pre/post()

login-common: Add support for reading commands from multiplex side channel istream

login-common: Add login_proxy_get_client_[io]stream()

login-common, *-login: Rename login_proxy_get_[io]stream() to login_proxy_get_server_[io]stream()

imap: COMPRESS - Fail if client pipelines data without waiting for OK reply

imap, imap-hibernate: Preserve multiplex ostream while hibernating

login-common, imap: Allow imap process to handle multiplex ostream

imap: client_create*() - Change unhibernated boolean to enum flags

imap-login: Support starting multiplex iostream using ID command

This is automatically attempted by IMAP proxying, as long as the destination
isn't untrusted.

login-common: Add support for multiplex iostreams

This is an internal protocol between two trusted Dovecots.

lib: ostream-multiplex - Fix working with small buffer sizes

For example imap FETCH command sets buffer size to 0 to avoid growing the
ostream buffers. This broke ostream-multiplex, because it always needs to
buffer the data internally before sending it to parent stream. Fix this
by always keeping the internal buffer size at least IO_BLOCK_SIZE bytes.

lib: ostream-multiplex - Allow destroying with a different flush callback

This is needed to fix a crash (after the changes in following commits):

 - login-proxy aborts multiplex ostream because both sides of the proxy
   want multiplexing.
 - login-proxy creates iostream-proxy, which sets ostream flush callback
 - proxy_input() had multiplex ostream still referenced, and now unrefs it
 - ostream-multiplex is destroyed with a different flush callback

lib: iostream-multiplex - Implement streaming format

lib: ostream-multiplex - Use ostream_private.corked instead of duplicating it

This also fixes o_stream_is_corked() to work correctly.

lib: ostream-multiplex - Split off o_stream_multiplex_send_packet()

lib: ostream-multiplex - Make sure parent stream write errors are noticed early

lib: ostream-multiplex - Fix propagating parent stream error messages

lib, global: o_stream_create_multiplex() - Add format parameter

lib: ostream-multiplex - Remove unused multiplex_ostream.remain

lib: ostream-multiplex - Remove unnecessary check

It's already checked above to be >0.

lib: istream-multiplex - Split off i_stream_multiplex_add()

lib: istream-multiplex - Allow destroying stream without closing it

lib: istream-multiplex - Fix propagating parent stream error messages

lib: istream-multiplex - Rename struct multiplex_istream.remain to packet_bytes_left

lib: istream-multiplex - Rename struct multiplex_ichannel.pending_pos to pending_count

lib: iostream-pump - Call o_stream_finish() when input is finished

This is required to cleanly finish ostreams that have "end of stream"
marker.

README.md: Remove dead link to doc/documentation.txt

lib-dns: Fix potential timeout leak

README.md: Fix link to mailing lists

lib: istream-seekable - Allow in-memory fallback only for up to 10 MB streams

lib: istream-seekable - Improve logging after write() errors

Also don't silently handle out of disk space errors - log a warning instead.

lib: istream-seekable - Assert that write() won't return 0

lib: istream-seekable - Fix moving stream to memory on write() failure

Fixes:
Panic: file istream-seekable.c: line 238 (read_from_buffer): assertion failed: (*ret_r > 0)

doveadm save: Fix potential assert-crash if saving failed

The input stream may not have been fully read at failure time.

Fixes:
Panic: file doveadm-mail-save.c: line 91 (cmd_save_to_mailbox): assertion failed: (input->eof)

imap: Remove unused includes from imap-settings.c

imap: Enable imap hibernation in Dovecot Pro build

m4: Define DOVECOT_PRO_EDITION if pro build is enabled

lib-dns: Fix dns_lookup_abort(&NULL) to not crash

Broken by f9e7f71e48dd4fe2b9af23796022fc256db3866d

dict: Check that dict client provides username when using private dict keys

Prevents assert-crashes later on.

config: Fix potential crash when parsing invalid values for settings

config: Add assert to avoid scan-build warning

anvil: test-connect-limit - Add asserts to avoid scan-build warnings

lib-dns: Fix clearing dns requests list at disconnect

lib-dns: Move cache entry refreshing out of dns-client-cache

lib-dns: Fix error handling if background dns refresh lookup fails

If we got disconnected from dns-client, the background dns refresh callback
was never called.

lib-dns: Fix error handling when disconnection aborts requests

lib-dns: Abort pending requests when disconnecting, even when not connected

lib-dns: Remove lookup from linked list independently of freeing it

This probably doesn't fix anything, but makes it clearer how it's intended
to work.

lib-dns: Disconnect from server on lookup timeout

Since the timeout removed the lookup from the responses linked list, any
following replies could become matched against a wrong lookup.