imapc: Don't send broken FETCH command when we don't actually have to fetch anything.

lib-storage: mailbox_alloc() now takes a virtual mailbox name and other related API changes.
All storage_name <-> vname conversions now go through the same two
mailbox_list methods. This has many benefits, such as:

 * listescape plugin is now much simpler and bugfree
 * allows changing lib-storage API to use UTF-8 mailbox names in future
 * allows creation of "mailbox aliases" plugin

lib-storage: Added mailbox_get_last_*error() wrappers and use them.

lib-storage: Crashfix on trying to create index root dir.

lib-storage: Replaced mailbox_list_get_name_status() with mailbox_exists().

lmtp: Write "+ext" part to Delivered-To: header.
(reverted changeset 19231e3585db)

imapc: Fixed authenticating with AUTHENTICATE command without SASL-IR.

imapc: Fixed sending non-syncing literals.

auth: Logging improvement for nopassword=y.

lib-index: Avoid corrupting dovecot.index file when recreating it even in case of broken file locking.

auth: Fixed mech_winbind_ntlm by using mech_winbind_auth_initial()
In changeset 9002 a new function named mech_winbind_auth_initial() was
introduced, but only the mech_winbind_spnego module part was changed to finally
use this function.
The mech_winbind_ntlm module part was not properly adapted which leads to a non
functioning NTLM authentication mechanism while using winbind, because it will
never call the `ntlm_auth` helper.

The simple fix is to replace mech_generic_auth_initial() with
mech_winbind_auth_initial() as auth_initial "hook" when setting up the
mech_winbind_ntlm module, like it is done in the mech_winbind_spnego module.

References:

- Changeset 9002: http://hg.dovecot.org/dovecot-2.0/diff/9d0037a997f4/src/auth/mech-winbind.c
---
 src/auth/mech-winbind.c |    2 +-
 1 files changed, 1 insertions(+), 1 deletions(-)

man: Updated dsync.1's -o parameter description.

man: Added -o parameter to dovecot-lda.1

mkdir_*chown/chgrp(): If chown() fails, rmdir() the directory.

dsync: Fixed crash when mailbox had zero cache_fields but its array was initialized.

Added initial implementation of "imapc" storage.
It can be used to create a "smart IMAP proxy" where Dovecot uses remote IMAP
server as a mail storage.

This is a very rough early implementation. Performance isn't good, many
required features are missing, error handling is lacking and code needs
de-uglification. Still, it should be enough for selecting INBOX and
accessing mails in it.

Added signature for changeset 440fcf8cb338

Added tag 2.0.9 for changeset 440fcf8cb338

Released v2.0.9.

TODO updated

Added io_loop_move_io() and io_loop_move_timeout().

cydir: Minor fix.

i_stream_read(): Added extra assert.

istream-seekable: Minor code cleanup.

auth: Don't give an error if doing a passdb lookup and the result has NULL password.

pgsql: When executing synchronous queries, don't wrongly add a connect timeout.

cydir: Minor code fix.

istream-seekable: Minor code cleanup.

dsync: Don't crash if message can't be saved to destination mailbox.

mdbox: Don't leave partially written messages to mdbox files.

dsync: Fixed iterating through mailboxes when using proxy.
This fixes "Unexpected reply from server: +" errors.

config: Give clear error that auth settings aren't supported inside local/remote blocks.

login: ssl_require_client_cert and ssl_username_from_cert settings should have had auth_ prefix.
The actual functionality was provided by the auth_* settings, but with these
duplicated settings login process didn't give as good error messages.

auth: Minor code cleanup, use PASSWORD_HIDDEN_STR macro.

maildir: Fixed renaming child mailboxes when using a namespace prefix.

maildir: Getting mailbox GUID unnecessarily rewrote the uidlist.

IDLE was listed twice in capabilities.

dsync: Saved messages' save-date was set to 1970-01-01.

virtual: Fixed saving multiple mails in a transaction (e.g. copy multiple messages).

lib-sql: Include Dovecot version number check when loading SQL plugins.

lib-lda: Simplified mail_deliver_deduplicate_guid_if_needed() API.

lib-storage: Added mailbox_save_get_transaction().

lmtp: If delivering duplicate messages to same user's INBOX, use different GUIDs.
This is to avoid POP3 clients getting confused with duplicate UIDLs, when
using GUIDs as UIDLs.

dbox: If mail GUID is changed for copied mail, create a new copy of it so it changes.

configure: Added a note that this is the UNSTABLE branch.

Merged fixes from v2.0 tree.

TODO updated.

lib-storage: Moved some items from mailbox_get_status() to a new mailbox_get_metadata().
The idea is now that all status items are tracked all the time after mailbox
is opened and they can always be looked up without failure. The metadata
items are looked up lazily and the lookups may fail at any time.

mailbox_get_status() can be used after mailbox_alloc() to indicate that the
mailbox doesn't necessarily have to be opened, just that the status fields
get returned.

If mailbox is already known to be open, mailbox_get_open_status() can be
used. It never fails.

lib-storage: Added warning comments about mail_get_*header*utf8().

lib-storage: Don't double-demimefy headers when DISPLAYFROM/DISPLAYTO sorting.

lib-storage: Fixed deleting symlinked mailbox.

unlink_directory(): Return ELOOP for unexpected symlinks also when O_NOFOLLOW isn't supported.

doveadm quota: Don't crash if quota isn't enabled.

doveadm: Fixed mailbox-guid search key to work with shared/public mailboxes.

vpopmail: "Service disabled" check wasn't being done correctly.

doveadm user: If user isn't found, exit with status 2.

lib-storage: mailbox_get_status() can now fail.
It might have failed earlier also, but the errors were hidden from caller.

lib-storage: Crashfix for opening sdbox/mdbox mailbox.

lda: Removed optimization of not creating temp files for large mails when not using Sieve.
The backwards seeking was still needed if bouncing the mail because of
out of quota.

snarf: Make sure destination mailbox is open when syncing it.

master-child API change: Use a separate fd for tracking when master dies.
This works around a Linux performance problem where when one process writes
to status fd all the other processes of the same service type wake up.

net_listen(): If IPv6 isn't supported, don't fallback to IPv4 if my_ip is given.

quota: Quota warnings could have been executed at incorrect times with some configs.
If target mailbox had quota ignored, the warning was sent if the mail would
have otherwise exceeded the warning threshold. Same when using multiple
quota roots where all of the roots weren't used for the target mailbox.

imap: Fixed a memory leak in ESEARCH

lib-storage: Added assert check to make sure we never do timeout_add(0)

acl: Crashfix at deinit in some configurations.

auth: Master user login + prefetch userdb changed username to master user.

auth: Checkpassword's output fields are now logged with auth_debug=yes

auth: When logging in as anonymous user, return "anonymous" userdb extra field.

auth: When logging in as anonymous user, return "anonymous" userdb extra field.

TODO updated.

lib-storage: Moved mailbox.save_is_attachment() to mail_save_context.part_is_attachment()

lib-storage: Unvirtualized mailbox_header_lookup_*()

lib-storage: Unvirtualized some methods from struct mailbox.
There was never any point in overriding or hooking into them.

lib-storage: Added missing mailbox-keywords.c for recent commit.

fts: Added missing new files for last commit.

Moved fts/virtual plugin communication functions away from lib-storage.

lib-lda: duplicate_check() should return bool, not int.

lib-storage: Added mailbox_list_get_root_[dir_]permissions()
They should be used instead of mailbox_list_get_[dir_]permissions() with
name=NULL parameter.

lib-storage: Simplified mailbox_keyword*() APIs.
They are no longer struct mailbox methods, because they're always implemented
as being wrappers to lib-index APIs anyway.

Also mailbox_keywords_ref/unref() no longer take mailbox parameter.

lib-storage: Removed mailbox.backend_readonly. Backends set it internally lazily now.

maildir: Avoid harder to unnecessarily read uidlist when syncing mailbox.

maildir: Avoid harder to unnecessarily read uidlist when syncing mailbox.

maildir: Avoid unnecessarily reading uidlist when opening mailbox.

maildir: Avoid unnecessarily reading uidlist when opening mailbox.

lib-storage: Moved box->private_flags_mask to mailbox_get_private_flags_mask()
This allows getting it lazily only when it's actually needed.

lib-storage: Removed subscription name validity check from lib-storage after all.
It could have broken when subscriptions were being set for subscriptions=no
namespace.

lib-storage: Mailbox directory creation didn't properly enforce that the name was valid.
The name was checked against "valid existing name" rather than "valid create
name", which mainly meant that the name could have contained control characters
and other things that weren't really intended. This couldn't be used to
cause any security holes though.

acl: Make the mailbox visible only when it has l/r/i right.
This change only affects the ability to SUBSCRIBE to a mailbox. Previously
it was allowed when user had any rights at all to mailbox.

lib-storage: Removed unused mailbox_list_get_mailbox_name_status() status codes.

imap-acl, imap-quota: Compile fix for last change.

imap: Avoid using mailbox_list_get_mailbox_name_status()
The validity checks should already be done by the actual commands in most
cases (if they didn't, there would be race condition bugs). The only
exception is SUBSCRIBE. It doesn't require that the mailbox exists, but
we want to enforce that anyway via IMAP.

lib-storage: Don't allow subscribing to invalid mailbox names.

lib-storage: Mailbox directory creation didn't properly enforce that the name was valid.
The name was checked against "valid existing name" rather than "valid create
name", which mainly meant that the name could have contained control characters
and other things that weren't really intended. This couldn't be used to
cause any security holes though.

Removed unused BITS_IN_UINT and CLAMP macros.

Unexpand BITS_IN_SIZE_T in the only place it's used and remove the macro.

Moved a global NVL() macro to the few places in lib-imap where it was actually used.

lib-storage: Fixed error handling when trying to delete mailbox under noinferiors mailbox.

lib-storage: Don't allocate index until mailbox_open()

lib-storage: Lazily look up mailbox path and permissions. Added functions to get them.