lib: Add backtrace to "Growing data stack" debug log message

lib: Fix "Growing data stack" debug message to show a more useful frame

It always used the data stack frame in t_malloc_real(), which isn't useful.
Instead, change it to log about the previous frame.

config: Don't try to auto-prefix named filter setting keys

These can cause conflicts with other settings, and auto-prefixing isn't very
useful for named filters anyway.

lib-var-expand: Add "generate" provider

This can be used to generate guid, guid128 and uuid with various formats.

lib: Add event_set_forced_never_debug()

auth: Change auth_policy_request_attributes setting to strlist type

lib-settings, config: Allow clearing out strlist settings with "key="

If a non-empty value is given, it's an error.

lib-settings, config: Rename SET_BOOLLIST_* to SET_LIST_*

This is in preparation for STRLIST to use them as well.

lib-lda: Don't check for tempfail if deliver_mail() hook returns 0

This fixes plugins that want lib-lda to continue saving the mail by
returning 0. This may have wrongly caused temporary failure,
depending on what happened to be in mail_storage's error.

lib-lua: dlua-http - Use settings to configure HTTP client

This allows inheriting HTTP settings from Dovecot configuration.

lib-lua: test-lua-http-client - Fix HTTP client test

doveconf: Don't show requested settings where only prefix matches

For example asking for "doveconf passdb" could have returned passdb_lua
and other (default) named filters where the name started with "passdb".

config: Avoid panic if using auth settings inside local/remote filter

Change it to a normal error instead.

config: doveconf - Add -f filter parameters

config: Rename config_filter.service to protocol

config: Split off config_filter_parse()

config: Split off config_filter_match_no_recurse()

doveconf: Reorder if-branches

doveconf: Remove obsolete -m and -p parameters entirely

lib-dict, lib-settings: Link tests with libdl

lib-language: Link tests against libdovecot.la

lib-compression: Link tests against libdovecot.la

lib-var-expand: Move var-expand-crypt-plugin to lib-var-expand-crypto

var-expand-crypt: Ensure iv or salt is given in raw mode

Would generate non-decryptable output otherwise.

var-expand-crypt: Add aes-128-ecb tests

This ensures ecb mode works too

var-expand-crypt: Reduce random test loops to 100

It takes too long with valgrind otherwise.

var-expand-crypt: Support key material generation with key and salt

var-expand-crypt: Move structured input parsing to parse_parameters()

var-expand-crypt: Do not bail out early in var_expand_crypt_settings()

Simplifies next change.

var-expand-crypt: Defer creating key and iv in context

Simplifies next change.

var-expand-crypt: Make test_var_expand_crypt_random() stop on first error

var-expand-crypt: Split test into two

var-expand-crypt: Initialize/deinitialize with test runner

var-expand-crypt: Reformat test-var-expand-crypt.c

lib-dcrypt: Allow missing IV

This is needed for e.g. ECB mode.

lib-storage: mailbox-list - Use mkdir_get_executable_mode() instead of local static version

lib: mkdir-parents - Add mkdir_get_executable_mode()

Makes get_dir_mode() from src/lib-sieve/mailbox-list.c public.

lda: main - Use user event as event parent for lib-lda

This makes user variable expansions available for settings parsed by lib-lda and
lda plugins.

lmtp: lmtp-local - Use user event as event parent for lib-lda

This makes user variable expansions available for settings parsed by lib-lda and
lda plugins.

lib-settings: settings - Add settings_root_override_remove()

fs-posix: Change fs_posix_autodelete_empty_directories to be a hidden setting

fs-posix: Change fs_posix_autodelete_empty_directories default to no

config: Fix grouping settings under a named filter

auth: Move username matching to auth when listing users

Auth process knows how to match users correctly in each userdb,
so it is better to do it there.

auth: userdb-passwd-file - Support iterating variable paths if variables are provided

This still does not fix '*', but at least it can list users if you
provide domain.

auth: db-passwd-file - Normalize path with db_passwd_fix_path()

Otherwise there is a chance that we leak one ../

auth: db-passwd-file - Add db_passwd_fix_path()

auth: db-passwd-file - Include event in var_expand_params

auth: userdb-passwd-file - Use container_of() macro

lib-storage: Add metacache_service_user_module

This is a bit of a kludge to keep it in core, but it is wanted independently
by both obox and fts_dovecot plugins.

lib-storage: Add mailbox_list_lost_mailbox_prefix hidden setting

This replaces mail_storage.lost_mailbox_prefix.

lib-storage: Add mail_storage_service_user.module_contexts

This allows plugins to add plugin-specific fields to
mail_storage_service_user.

lib-storage: Make struct mail_storage_service_user public

Mainly to allow plugin-specific module_contexts in the next commit.

config: Add @metric_defaults = proxy/backend

config: Don't run settings check functions inside @groups

The groups can be included from different places, so alone they don't have a
usable context for the checks.

config: Allow specifying service settings inside @groups

doveconf: Added -I parameter to dump config imported from plugins

config: Support importing configuration from settings plugins

Add to the settings plugin:

const char *<plugin name>_config_import = "..."

This is mainly intended to be used for adding default @groups.

lib-storage: Check that mail_server_admin is valid URI

lib: test-uri - Fix sip tests

In RFC 3261 the tag is clearly outside the URI.

lib: uri - Allow host after scheme with 'iax' scheme

lib: uri - Allow parameters directly with semicolon

Fixes AAA validation.

lib: test-uri - Add test for [IPv6] with http scheme

lib: test-uri - Print error when RFC URI parsing fails

config: Fail with error if trying to use settings inside groups which don't work

config: doveconf - When asking for specific settings, show also defaults

doveconf: Expand include @groups when asking for specific settings

For example if you have:

group @example foo {
  namespace_separator = /
}

namespace inbox {
  @example = foo
}

Asking for "doveconf namespace/inbox/separator" will now output "/".

config: Fail if trying to use unknown @group label or name

config: Add config_filters_equal_no_recursion()

config: Replace config_module_parsers_get_setting() with config_parsed_get_setting()

The new function looks up both explicitly changed settings and default
settings.

master, config: Add default_* service settings

Added default_process_limit, default_client_limit,
default_idle_kill_interval and default_vsz_limit settings. The global
service_* settings default to using these.

These settings are added into a new global "default settings" filter.
Other default settings are kept mixed with explicit settings, because
for them it doesn't matter that they are mixed, and it simplifies
settings value lookups.

config: Initialize STRLIST and BOOLLIST arrays with defaults

This will be needed by the following changes. Otherwise doveconf output
shows only the elements in config file, not the built-in defaults.

config: Remove config_parsed_get_module_parsers() wrapper

config: Remove config_export_get_*() wrapper functions

Use config_module_parsers_get_setting() directly.

config: Remove separate ordering for default service settings

This changes e.g. a global "service_process_limit = N" to override it for
all services, unless they have an explicit service { process_limit = M }
in the config file.

This change simplifies the following changes and removes the special
handling of global service settings.

config: config_get_value() - Fix crash if looking up setting that only has default value

config: Fix doveconf output when using $SET: and $ENV:

If they were used for non-string values, they were attempted to be
validated, which caused e.g. "Not a valid number" errors.

config: Allow auto-creating new filters based on settings key paths

This is especially needed for old-set-parser where e.g. auth_worker_max_count
converts to service/auth-worker/process_limit. This worked so far because
service/auth was created as a non-default settings filter, so it was simply
updated. However, with the next change service/auth becomes a "service
default" filter, which can't be directly updated. Instead a whole new
non-default service/auth filter must be created.

This change shouldn't break anything, although it will now allow
auto-creating named list filters in configuration file, e.g.
"namespace/inbox/separator=/" will directly work.

run-test-valgrind.supp - Amend test_lib_fatal_ostream_file suppression

Make stack pattern more robust to compiler diversity.

auth: Add test for auth request export import

mail-lua: Add lua_call filter to var_expand

When mail-lua is loaded, it registers new var_expand filter
lua_call(fn, parameter, parameter)

This will call function in mail lua script with
fn(mail_user, parameter, parameter, .., state)

fn must (return 0, value) on success, and (-1, errmsg) on error

auth: passwd-file - Add all fields to passwd_file provider

global: Right-size some pools

Avoids excess malloc traffic

lib: Drop old var_expand

var-expand-crypt: Convert to new var_expand

quota-status: Use new var_expand

notify-status: Use new var_expand

stats: Use new var_expand

Dropping %{domain} in favor of %{value | domain}

config: Use new var_expand

master: Use new var_expand

lda: Use new var_expand

doveadm: Use new var_expand

submission: Use new var_expand

pop3: Use new var_expand

imap-hibernate: Drop username and domain %variable variants

These can be produced with %{user | username} and %{user | domain}

imap-hibernate: Use new var_expand

imap-urlauth: Change logout format to match new var expand syntax

imap: Use new var_expand

auth: Change auth_request_var_expand() return value

It now returns -1 on error and 0 on success

auth: Return error from auth worker on failure