lib-fs: Don't crash when trying to initialize nonexistent fs driver.

i_stream_default_stat(): If we can't know the size, return -1 instead of assert crash.
This fixes a crash saving to mdbox when input stream's size wasn't known.

fts-solr: XML-encode non-body fields as well

lib-storage: Handle better when attempting to access shared mailboxes for nonexistent users.

lib-storage: Added struct mail_user.nonexistent flag, which is filled by userdb lookup.

fts_parser: Minor error logging improvement

mdbox: When rebuilding storage, fsck the map index first to make sure it's valid.
This fixes assert-crash when the map index contained records with UIDs in
wrong order.

mailbox-alias plugin: Error handling fix.

NEWS updated

lib-index: Added v2.2+ forwards compatibility to dovecot.index.cache

login: Reverted previous fix attempt for SSL_accept() busy-looping.
Apparently didn't work. Probably this patch doesn't help anything then, so
just remove the extra complexity.

auth: userdb passwd lookups should have been done via worker processes by default.

fts-solr: Removed deprecated waitFlush parameter from commit.

Reversed recent "short utf8" changes.
Solr code needs to parse the UTF8 input explicitly anyway to encode the XML
characters. And all the character checks were already done in it.

doveadm-server: Reset headers in print output between running commands.

doveadm-server: Avoid eating CPU when client disconnects before authentication is done.

doveadm: Don't disconnect from server too early while there are still commands.

doveadm: Include username in internal errors and "no such user" errors when running via server.

fts-solr: Marked as FTS_BACKEND_FLAG_BUILD_SHORT_UTF8

fts: Added FTS_BACKEND_FLAG_BUILD_SHORT_UTF8 to require sending only short UTF8 data to backend.

liblib: Added uni_utf8_short_*() for handling UTF8 data where [56]-byte sequences are invalid.

quota: mailbox_get_status(STATUS_CHECK_OVER_QUOTA) returned wrong value on success.
This fixes lmtp_rcpt_check_quota=yes

man: Added -d parameter to doveadm expunge.
Patch by Pascal Volk.

dovecot-config: LIBDOVECOT_INCLUDE was missing path to lib-http

lib-fs: Automatically try to load missing driver as plugin.

liblib: Added lib_atexit() to register process deinit callbacks.

liblib: Added module_dir_find()

doveadm dump: Added support for "obox" index records.

lib-imap-storage: When returning an error istream, give it a useful name.

lib-storage: Fixes to LAYOUT=index backend.

lib-storage: Comment update for mail_prefetch()

lib-storage: If MAIL_STORAGE_CLASS_FLAG_NO_ROOT is set, don't even try to mkdir it.

lib-storage: Don't crash when trying to sync private index, if syncing had already failed.

sdbox: Verify that mail_attachment_fs backend supports RENAME property.
This isn't needed by mdbox.

lib-storage: Code cleanup: dbox_save_context.cur_file doesn't need to be in dbox-common.

Added libhttp to libdovecot.so

lib-http: Removed explicit safe-memset.lo links
At least in all my systems they just complain about duplicates..

lib-dns: Added DNS_CLIENT_SOCKET_NAME macro for the default socket name.

unlink_directory(): Added UNLINK_DIRECTORY_FLAG_FILES_ONLY

Added iostream-temp for easily creating a temporary istream (to memory/file).

liblib: Added assert-check to epoll code to make sure we don't wait infinitely with no events.

lib-fs: Added a temp_dir setting that the caller can specify.

lib-fs: Added ITER and RELIABLEITER properties for backends.

lib-fs: Fixed iteration with POSIX backend.

lib-fs: Iterating a nonexistent directory should be the same as iterating an empty directory.

lib-fs: fs_wait_async() can now return an error.

lib-http: Compiler warning fixes

lib-http: Added initial HTTP client implementation.

bsdauth: Use "auth-<service>" as the auth type.

login: Try to avoid busy-looping on SSL_accept() when client doesn't behave nicely.

auth: Added a way to set default values for nonexistent LDAP attributes.
%{ldap:attrName:default_value} expands to default_value if attrName doesn't
exist.

lib-imap: imap_append_string_for_humans() was broken for empty input string.

iostream-rawlog: Don't assert-crash if trying to write 0 bytes.

auth: Give a better error message for "client doesn't have lookup permissions".

Makefile: Add -lssl to installed dovecot-config's LIBDOVECOT_LOGIN if needed.

var_expand*(): Don't use a data stack frame when expanding long %{variables}
This avoids potential crashes if the destination string is also allocated
from data stack and requires growing.

mdbox: Don't leave extra records to dovecot.map.index if mailbox index locking fails.
Fixes errors such as:
Corrupted dbox file /mdbox/storage/m.1 (around offset=2652): EOF reading msg header (got 0/30 bytes)

module_dir_unload(): Don't dlclose() modules if GDB environment is set.

lib-ssl-iostream: Unload ssl_iostream_openssl plugin at exit.

module_dir_deinit(): If no modules were actually initialized, avoid doing memory allocation.
This allows calling module_dir_unload() with atexit(), as long as the module
doesn't need to call deinit().

auth: Require auth-token-secret.dat owner to be auth process's uid, not necessarily root.

imap: Various fixes for handling expunges in mailbox sync.

imap: Avoid sending multiple unnecessary VANISHED lines when sync had lots of changes.

istream-seekable: Underlying stream errors weren't handled correctly.

lib-ssl-iostream: Compiler warning fix when compiling without ssl

Makefile: Build lib-ssl-iostream before lib-http

Makefile: Fixed building libdovecot.so

dovecot-config: Removed LIBDOVECOT_SSL, which is no longer needed.

Reverted 269104a0821b (Build imapc and pop3c always as plugins.)
This is no longer needed now that lib-ssl-iostream can be linked without
linking openssl.

lib-ssl-iostream now dynamically loads openssl library instead of linking to it.
This allowed removing the separate libdovecot-ssl library. In future if
GnuTLS/NSS support is added it would also allow switching between them
dynamically.

lib-ssl-iostream: Call all of the OpenSSL deinit functions at exit

lib-ssl-iostream: [io]streams were added an unnecessary reference, causing memory leaks.

lib-ssl-iostream: [io]streams were added an unnecessary reference, causing memory leaks.

lib-ssl-iostream: Fixed potential assert-crash when reading.

lib-ssl-iostream: Copy the original istream's fd to the ssl istream.

lib-index: MAIL_INDEX_OPEN_FLAG_SAVEONLY may have caused stale data to be read from cache.

lib-index: Replaced cache's deleted_space with deleted_record_count.
This way when expunging messages we don't need to actually read through the
cache file and calculate how many bytes will be freed, we can simply
increase the deleted_record_count by 1. We'll still compress the cache file
approximately after 20% of the space (records) has been deleted.

This also converts the old "hole offset" header field to tracking the number
of records in the cache file. Otherwise we'd have to assume that all of the
messages in mailbox have a cache record, but that isn't true for users who
have only temporary cache fields. This "hole offset" cannot be trusted
completely, because nothing prevents old Dovecot version from simply writing
a hole offset there and messing up the record counts. Because of this there
are a couple of extra sanity checks for it. (Unfortunately there wasn't any
easy way to simply add a new field to header without breaking backwards
compatibility.)

lib-index: Added minor version to dovecot.index.cache file header.

lib-index: If a cache record is larger than 64 kB, don't add it to cache file.
This shouldn't affect anything except mails that probably shouldn't exist in
the first place.

lib-index: Cache record linking is now while writing new records, not later with pwrite().
This should make performance somewhat better. It also means that now the
only overwrites to cache file are to the file header and the fields header.
This means that we no longer have to invalidate file_cache (with
mmap_disable=yes) except when reading the headers, which is always done
anyway.

It would be nice to move the overwritten fields in the headers to a cache
header in dovecot.index file, but this is a bit tricky currently. When
writing these headers the cache file needs to be locked to avoid race
conditions. To avoid deadlocks the transaction log would have to be locked
before the cache. The code to do all this would still be a bit complex, and
to keep backwards compatibility with old Dovecot versions it would still
have to do the overwriting until the backwards compatibility code is
disabled.

lib-index: Transaction view shouldn't return ext records if the ext was already reset.

lib-index: Recent cache file changes broke writing.

lib-index: Recent cache file changes broke writing.

lib-storage: Crashfix when doing userdb lookup.

lib-index: Write to transaction log using O_APPEND flag.
Most OSes should do the writes atomically so that reads won't see partially
written data. We don't currently rely on this, but it would be possible in
future to remove locking entirely from writing to transaction log.

lib-storage: Error logging fixes.

hostpid_init(): Don't allow gethostname() to fail. Be more strict about what chars it can contain.

lib-storage: Don't require mailbox to be synced for MAILBOX_METADATA_GUID lookup
None of the mailbox formats currently require it, and lib-lda code
assert-crashes with it since syncing is done with a transaction already
open.

lib-storage: When mailbox_get_status/metadata() auto-syncs mailbox, use MAILBOX_SYNC_FLAG_FAST

Makefile: Add -lssl to installed dovecot-config's LIBDOVECOT_STORAGE if needed.

lib-dns: Added dns_lookup_switch_ioloop()

auth: Don't assert-crash in auth-token writing if process isn't running as root.

lib-lda: Avoid doing a costly mailbox sync when delivering mail to multiple recipients.

doveadm sync/backup: Added -s parameter to usage string.

Added signature for changeset f5941f3ac762

Added tag 2.2.alpha1 for changeset f5941f3ac762

Released v2.2.alpha1.

anvil: Added a comment to remind what the anvil checksums are all about.

If prefix="" namespace isn't defined, autocreate it as an unusable namespace.
This avoids having to handle mail_namespace_find() errors all over the
place. Instead now the mailbox accesses will simply fail.

lib-storage: Use const pointers for mail_namespace.(set|unexpanded_set)