doveadm: test-doveadm-util - Remove duplicate symbol

5beff56913f57c42597687e871109e095738946c changed the tests to be linked to
libmaster, which added this duplication.

lib-auth-client: Link tests to all library dependencies

Now that test-auth-master links to libmaster, remove duplicate symbols from
it. And since it's now using the real master_service_is_killed(),
master_service must be non-NULL.

lib-auth: Link libauth to libotp dependency

lib-storage: Don't try to add attachment flags for readonly mailboxes

lib-storage: Fix mail_attachment_detection_options=no-flags-on-fetch

The attachment flag was still added if message body was parsed.

lib-storage: Don't ignore mailbox list index refresh error when updating STATUS info

lib-storage: mailbox_list_index_refresh() - Don't skip refresh if index opening failed

lib-master: Assert-crash if master_service_init_log*() is called before master_getopt()

This makes sure that -L parameter will work for all services.

auth, *-login: Fix using -L parameter to log directly

lib-settings: Don't add proxy_session_established to @metric_defaults/proxy until dovecot_config_version is changed

config: Support settings change tracking for named list filters

config: Assume dovecot_config_version=0.0.0 is the same as the latest version

It's used for git builds.

imap: LSUB - Hide MAILBOX_NOSELECT flag if returned by mailbox listing

lib-storage: Fix children flags when listing mailbox subscriptions with nonexistent mailboxes

lib-storage: Fix subscription listing showing parent namespace prefix

If e.g. shared/user/box was subscribed, LSUB "" % didn't list shared
namespace prefix.

lib-storage: Subscription notifications - Fix crash if initial subscription refresh failed

lib-storage: Remove unused mailbox_list_set_subscription_flags()

acl: Fix potential crash when listing shared mailbox subscriptions

This code is obsolete now that subscriptions handling was moved to
lib-storage.

Using IMAP LIST (SUBSCRIBED) resulted in a crash:

Panic: file acl-mailbox-list.c: line 384 (acl_mailbox_list_info_is_visible): assertion failed: ((info->flags & PRESERVE_MAILBOX_FLAGS) != 0)

lib-storage: Fix subscription listing hiding public/shared namespace prefixes

lib-storage: mailbox_list_ns_prefix_return() - Move subscription checks to be last

This will be needed by the following changes.

lib-storage, acl: Move hiding non-listable public/shared mailboxes to lib-storage

The subscriptions handling is now in lib-storage code, and ACL code doesn't
know about it. Change this so that if public/shared namespace has
subscriptions=yes (i.e. shared across all users), any nonexistent mailboxes'
subscriptions are hidden. This assumes that the user doesn't have enough
ACL rights to list the mailboxes, so they also don't want subscriptions for
them.

lib-storage: mailbox_list_iter_update() - Don't set mailbox list children-flags

Especially when it's used with subscriptions, the existence of subscription
tree nodes has nothing to do with whether the nodes contain existing
mailboxes.

imapc: Set children-flags manually using the mailbox list output

lib-storage: Fix subscription refresh when it autocreates a namespace

If there's a shared/user/foo subscription, it might create shared/user/
namespace. In that case the subscription should go to shared/user/
namespace, not shared/.

lib-storage: mailbox_list_subscriptions_fill() - Remove unused default_nonexistent parameter

lib-storage: Remove unused struct mailbox_list_iter_update_context.update_only

It was always FALSE.

lib-storage: Fix listing nonexistent subscriptions with children

If both A and A/B were subscribed, but nonexistent, the A/B listing marked A
as having been listed already, so it wasn't returned.

lib-storage: fs layout listing - Don't return both MAILBOX_SELECT and MAILBOX_NOSELECT flags

lib-storage: Send mail_opened event only once per mail

The first time mail is opened it is read into cache, while the following
reads are likely to be using the cache. Sending a mail_opened event for the
following reads just confuses statistics.

lib-settings: Change v3.1.1 default settings to v3.2.0

imap, pop3, submission: Remove non-working environment variable handling

Remove support for IP, LOCAL_IP and CLIENT_INPUT environments. These were
originally used by Dovecot v1.x for passing these fields from master
process. They are no longer useful, and they haven't been working anyway.

Also for imap remove support for IMAPLOGINTAG environment.

imap, pop3, submission, imap-urlauth: Fix using USER environment when running standalone

lmtp: lmtp-client - Support command pipelining

lmtp: lmtp-local - Correctly return -1 in lmtp_local_rcpt() upon quota error

This not extremely important, but original code was confusing.

lib-smtp: smtp-server-cmd-data - Properly block pipeline upon final DATA/BDAT command

Never process the next transaction from the input when the current one is not
finished.

lib-smtp: smtp-server - Drop smtp_server_reply_early()

Pipeline handling revised in previous commit makes this functionality
superfluous.

lib-smtp: smtp-server-connection - Fix handling of data commands blocking the pipeline

Data commands would cause the server to hang upon blocking the pipeline if a
reply was submitted while data was still pending from input.

lib-smtp: smtp-command-parser - Allow skipping data from previous command without reading the next

lib-smtp: smtp-server-command - Make smtp_server_command_pipeline_(un)block() debug logging consistent

config: @metric_defaults=proxy - Add proxy_session_established

This shows post-auth latency for actually logging into backend.

lib-var-expand: regex - Support older back references

virtual: If index file has UIDs out-of-order, mark the index corrupted

The next open will rebuild the index.

auth: passwd-file - Avoid assert-crash when using "=value" or "userdb_=value" extra field

auth: ldap - Avoid assert-crash when using %{ldap:} or %{ldap_multi:} with empty attribute name

auth: Avoid assert-crash if returning ":default" passdb or userdb extra field

auth: auth_request_import() - Avoid crash with "passdb_" or "userdb_" field

auth: auth_fields_import_*() - Handle empty key without crashing

auth: auth_request_set_userdb_field() - Add assert that name can't be empty

acl: Add acl_dict_index setting to rebuild ACL dict without iterating the whole dict

acl: struct acl_backend_vfile - Remove unused set

lib-auth, auth: Include auth_allow_weak_schemes setting in related log messages

Makes it easier to understand how to change the behavior.

plugins/acl: doveadm acl - Fix crash if ACLs not enabled

Ensure ACLs are actually enabled when opening mailbox.
Fixes Panic: Module context acl_storage_module missing

auth: mech-winbind - GSS-SPNEGO mechanism is erroneously marked as not accepting NUL

lib-http: http-url - Preserve significant path percent encoding through parse and create

Previously, %2f in the path part of the URL was parsed to '/' and not encoded
back to %2f when the (normalized) URL was written back to a string using
http_url_create(). Now, an encoded version of the path is preserved in struct
http_url, so that the distinction between real delimiters and encoded literals
is always preserved.

m4: Fix how pcre2_substitute_callout_block is checked

The old way was very wrong

doveadm: Clarify "Failed to communicate to doveadm server" error message

doveadm: If commands are aborted by signal, log them as "Shutting down"

doveadm: Replace master_service_is_killed() calls with doveadm_is_killed()

doveadm: Move doveadm_is_killed() to doveadm-util

doveadm: Link test programs against the whole libdovecot

Needed for the following commit.

doveadm: Fix mail server command failure handling with restart_request_count>1

If communication failed with doveadm server, or there was simply a
redirection, the next doveadm command handled by the process failed as well.

doveadm: mail-server - Rename internal_failure to server_connect_failure

This describes it better.

doveadm: For Pro edition, default to service_restart_request_count=1000

fts-flatcurve: Ensure that mailbox parameters are always truncated before changing

imapc: Fix imapc_features=guid-forced GUID generation

It was supposed to be only from header, but in some situations it included
the body as well.

lib-mail: istream-header-filter - Fix potential assert-crash

In some situations multiple snapshots were created, which broke the logic
of using a single snapshot_pending boolean. Changed it to refcount.

Fixes:
Panic: file istream-header-filter.c: line 665 (i_stream_header_filter_snapshot_free): assertion failed: (snapshot->mstream->snapshot_pending)

lib-regex: Fail if PCRE2_SUBSTITUTE_LITERAL is not supported by pcre2

lib-regex: Only use pcre2_substitute_callout_block() if it's available

lib-auth-client: auth-client-request - Fix panic occurring upon channel binding failure

Panic was:
imap-login: Panic: Can't create multiple passthrough events - finish the earlier with ->event()

auth: mech-oauth2 - Use lib-auth/auth-gs2

lib-sasl: mech-oauthbearer - Use lib-auth/auth-gs2

lib-auth: auth-scram-server - Use auth-gs2

lib-auth: auth-scram-client - Use auth-gs2

lib-auth: Add auth-gs2 API

lib-sasl: mech-oauthbearer - Use container_of()

auth: mech-oauth2 - Rename continued data to reponse data/payload

Makes more sense in SASL overall

auth: mech-oauth2 - Send openid-configuration result field only when available

auth: mech-oauth2 - Rework error handling

Treat passdb errors as "invalid_token" and treat request decoding problems as
"invalid_request" status, which makes more sense. Also simplify the overall
structure.

auth: mech-oauth2 - Don't send payload for internal error

auth: mech-oauth2 - Reorder mechanism functions

Makes more sense this way.

auth: mech-oauth2 - Rename oauth2_send_failure() to oauth2_fail()

Makes more sense; it also fails the request.

auth: mech-oauth2 - Improve use of json-ostream

auth: mech-oauth2 - Use str functions rather than direct access to underlying buffer_t

auth: mech-oauth2 - Rename reply buffer in oauth2_send_failure()

lib-sasl: Reformat mech-oauthbearer.c

auth: Reformat mech-oauth2.c

lib: test-istream-multiplex - Fix randomly trying to create 0 length variable array

Fixes:
test-istream-multiplex.c:184:29: runtime error: variable length array bound evaluates to non-positive value 0

dovecot-config: Add lib-regex

fts: Change default fts_search_read_fallback=no for Pro

config: import_environment - Allow spaces in values by separating them with tabs

config: doveconf - Don't store unused import_environment

config: config_connection_request() - Don't store unused import_environment

acl: Fix crash when group ACLs are used, but user's acl_groups is empty

lib: macros - Prevent using libc regex

lib-var-expand: Use lib-regex instead of libc regex

lib-dovecot: Add lib-regex

lib-regex: Add regex matching library

autoconf: Add libcpre2 detection

lib: macros - Use __typeof__ instead of typeof from C11 onwards

typeof and __typeof__ are not standard until C23, and C11
requires using __typeof__.

lib-auth-client: auth-master - Remove useless NULL check in auth_master_connection_output()

Found by Coverity (#41969)