imap, pop3, submission: Remove non-working environment variable handling

Remove support for IP, LOCAL_IP and CLIENT_INPUT environments. These were
originally used by Dovecot v1.x for passing these fields from master
process. They are no longer useful, and they haven't been working anyway.

Also for imap remove support for IMAPLOGINTAG environment.

imap, pop3, submission, imap-urlauth: Fix using USER environment when running standalone

lmtp: lmtp-client - Support command pipelining

lmtp: lmtp-local - Correctly return -1 in lmtp_local_rcpt() upon quota error

This not extremely important, but original code was confusing.

lib-smtp: smtp-server-cmd-data - Properly block pipeline upon final DATA/BDAT command

Never process the next transaction from the input when the current one is not
finished.

lib-smtp: smtp-server - Drop smtp_server_reply_early()

Pipeline handling revised in previous commit makes this functionality
superfluous.

lib-smtp: smtp-server-connection - Fix handling of data commands blocking the pipeline

Data commands would cause the server to hang upon blocking the pipeline if a
reply was submitted while data was still pending from input.

lib-smtp: smtp-command-parser - Allow skipping data from previous command without reading the next

lib-smtp: smtp-server-command - Make smtp_server_command_pipeline_(un)block() debug logging consistent

config: @metric_defaults=proxy - Add proxy_session_established

This shows post-auth latency for actually logging into backend.

lib-var-expand: regex - Support older back references

virtual: If index file has UIDs out-of-order, mark the index corrupted

The next open will rebuild the index.

auth: passwd-file - Avoid assert-crash when using "=value" or "userdb_=value" extra field

auth: ldap - Avoid assert-crash when using %{ldap:} or %{ldap_multi:} with empty attribute name

auth: Avoid assert-crash if returning ":default" passdb or userdb extra field

auth: auth_request_import() - Avoid crash with "passdb_" or "userdb_" field

auth: auth_fields_import_*() - Handle empty key without crashing

auth: auth_request_set_userdb_field() - Add assert that name can't be empty

acl: Add acl_dict_index setting to rebuild ACL dict without iterating the whole dict

acl: struct acl_backend_vfile - Remove unused set

lib-auth, auth: Include auth_allow_weak_schemes setting in related log messages

Makes it easier to understand how to change the behavior.

plugins/acl: doveadm acl - Fix crash if ACLs not enabled

Ensure ACLs are actually enabled when opening mailbox.
Fixes Panic: Module context acl_storage_module missing

auth: mech-winbind - GSS-SPNEGO mechanism is erroneously marked as not accepting NUL

lib-http: http-url - Preserve significant path percent encoding through parse and create

Previously, %2f in the path part of the URL was parsed to '/' and not encoded
back to %2f when the (normalized) URL was written back to a string using
http_url_create(). Now, an encoded version of the path is preserved in struct
http_url, so that the distinction between real delimiters and encoded literals
is always preserved.

m4: Fix how pcre2_substitute_callout_block is checked

The old way was very wrong

doveadm: Clarify "Failed to communicate to doveadm server" error message

doveadm: If commands are aborted by signal, log them as "Shutting down"

doveadm: Replace master_service_is_killed() calls with doveadm_is_killed()

doveadm: Move doveadm_is_killed() to doveadm-util

doveadm: Link test programs against the whole libdovecot

Needed for the following commit.

doveadm: Fix mail server command failure handling with restart_request_count>1

If communication failed with doveadm server, or there was simply a
redirection, the next doveadm command handled by the process failed as well.

doveadm: mail-server - Rename internal_failure to server_connect_failure

This describes it better.

doveadm: For Pro edition, default to service_restart_request_count=1000

fts-flatcurve: Ensure that mailbox parameters are always truncated before changing

imapc: Fix imapc_features=guid-forced GUID generation

It was supposed to be only from header, but in some situations it included
the body as well.

lib-mail: istream-header-filter - Fix potential assert-crash

In some situations multiple snapshots were created, which broke the logic
of using a single snapshot_pending boolean. Changed it to refcount.

Fixes:
Panic: file istream-header-filter.c: line 665 (i_stream_header_filter_snapshot_free): assertion failed: (snapshot->mstream->snapshot_pending)

lib-regex: Fail if PCRE2_SUBSTITUTE_LITERAL is not supported by pcre2

lib-regex: Only use pcre2_substitute_callout_block() if it's available

lib-auth-client: auth-client-request - Fix panic occurring upon channel binding failure

Panic was:
imap-login: Panic: Can't create multiple passthrough events - finish the earlier with ->event()

auth: mech-oauth2 - Use lib-auth/auth-gs2

lib-sasl: mech-oauthbearer - Use lib-auth/auth-gs2

lib-auth: auth-scram-server - Use auth-gs2

lib-auth: auth-scram-client - Use auth-gs2

lib-auth: Add auth-gs2 API

lib-sasl: mech-oauthbearer - Use container_of()

auth: mech-oauth2 - Rename continued data to reponse data/payload

Makes more sense in SASL overall

auth: mech-oauth2 - Send openid-configuration result field only when available

auth: mech-oauth2 - Rework error handling

Treat passdb errors as "invalid_token" and treat request decoding problems as
"invalid_request" status, which makes more sense. Also simplify the overall
structure.

auth: mech-oauth2 - Don't send payload for internal error

auth: mech-oauth2 - Reorder mechanism functions

Makes more sense this way.

auth: mech-oauth2 - Rename oauth2_send_failure() to oauth2_fail()

Makes more sense; it also fails the request.

auth: mech-oauth2 - Improve use of json-ostream

auth: mech-oauth2 - Use str functions rather than direct access to underlying buffer_t

auth: mech-oauth2 - Rename reply buffer in oauth2_send_failure()

lib-sasl: Reformat mech-oauthbearer.c

auth: Reformat mech-oauth2.c

lib: test-istream-multiplex - Fix randomly trying to create 0 length variable array

Fixes:
test-istream-multiplex.c:184:29: runtime error: variable length array bound evaluates to non-positive value 0

dovecot-config: Add lib-regex

fts: Change default fts_search_read_fallback=no for Pro

config: import_environment - Allow spaces in values by separating them with tabs

config: doveconf - Don't store unused import_environment

config: config_connection_request() - Don't store unused import_environment

acl: Fix crash when group ACLs are used, but user's acl_groups is empty

lib: macros - Prevent using libc regex

lib-var-expand: Use lib-regex instead of libc regex

lib-dovecot: Add lib-regex

lib-regex: Add regex matching library

autoconf: Add libcpre2 detection

lib: macros - Use __typeof__ instead of typeof from C11 onwards

typeof and __typeof__ are not standard until C23, and C11
requires using __typeof__.

lib-auth-client: auth-master - Remove useless NULL check in auth_master_connection_output()

Found by Coverity (#41969)

lib-auth-client: auth-master - Fix potential segfault in auth_master_wait()

Found by Coverity (#41970).

lib-auth-client: test-auth-master - Add tests for parallel requests

lib-auth-client: auth-master - Fix handling of parallel replies

doveadm: Print table formatter - Print empty values as "-"

It's more readable to see empty values as "-" in a table.

doveadm: Add named initializers to print drivers

lib-auth-client: auth-master - Improve some of the connection failure messages returned to caller

lib-auth-client: auth-master - Drop AUTH_MASTER_FLAG_NO_INNER_IOLOOP flag

It is no longer needed for testing, as async requests can be used instead.

lib-auth-client: test-auth-master - Add tests for asynchronous userdb/passdb lookups

lib-auth-client: auth-master - Allocate passdb/userdb lookup structs on default pool

lib-auth-client: auth-master - Make asynchronous userdb and passdb lookups available

lib-auth-client: auth-master - Define sub-class structure for userdb lookup

lib-auth-client: auth-master - Split off auth_master_user_lookup_start() from auth_master_user_lookup()

lib-auth-client: auth-master - Split off auth_master_user_lookup_finished() from auth_master_user_lookup()

lib-auth-client: auth-master - Define sub-class structure for passdb lookup

lib-auth-client: auth-master - Split off auth_master_pass_lookup_start() from auth_master_pass_lookup()

lib-auth-client: auth-master - Split off auth_master_pass_lookup_finished() from auth_master_pass_lookup()

lib-auth-client: auth-master - Introduce local variable for result in auth_lookup_reply_callback()

lib-auth-client: auth-master - Add internal support for initiating invalid requests

This avoids the need to return a NOTFOUND code at request creation when the
request is already known to fail. This is a means to handle this asynchronously.

lib-auth-client: auth-master - Make sending of requests fully asynchronous

lib-auth-client: auth-master - Add debug messages

lib-auth-client: auth-master - Add support for request destroy callback

lib-auth-client: auth-master - Implement auth_master_wait()

This allows waiting until all submitted requests are finished.

lib-auth-client: auth-master - Make request reply handling asynchronous

lib-auth-client: auth-master-request - Use request struct as argument for auth_master_request_send()

lib-auth-client: auth-master - Use new struct auth_master_request for request handling

lib-auth-client: auth-master - Allow duplicate calls to auth_master_unset_io()

lib-auth-client: auth-master - Handle connection failures in auth_master_connection_failure()

lib-auth-client: auth-master - Improve debug logging in auth_lookup_reply_callback()

lib-auth-client: auth-master - Compose command line at a single location

lib-auth-client: auth-master - Drop unnecessary and confusing additional connection events

Only use conn->conn.event instead.