ITS#9564 lmdb: fix race condition freeing spilled pages at end of transaction

Move the freeing of the spilled pages list inside the protection of the
transaction mutex so there is no race condition with another transaction

ITS#10396 lmdb: fix mdb_cursor_del0 with multiple DUPSORT cursors

Use the correct stack index when adjusting other cursors pointing to
the affected page and the DB has a subDB. Broken in ITS#8406.

ITS#10355 lmdb mplay: don't assign to stdin/stdout

ITS#10346 lmdb: fix compacting copy with large values

ITS#10342 lmdb: fix potential memleak in child txn_begin

More for rawpart

It was ignoring the mapsize recorded in the meta page, and was
redundantly mapping the meta pages.

ITS#10024 lmdb: fix MDB_PREVSNAPSHOT txnid initialization

ITS#10296 lmdb: fix typo in prev commit

ITS#10296 lmdb: fix fdatasync on MacOS

Patch from kero, with corrections by hyc

ITS#10275 mdb_load: add -Q option to use NOSYNC for faster loading

Keep module code in a separate object file

That way programs that don't use these functions won't needlessly
depend on -ldl

Cleanup redundant include

Delete unused module code

Move the crypto module helpers into main liblmdb.

Just makes things easier than using the individual mdb_env_set APIs.

ITS#9920 lmdb: fix page offset when converting subpage to real page

offset needs to account for additional space at page tail

ITS#9920 lmdb: fix data races in rpage decryption

ITS#9920 crypto: use libsodium instead of OpenSSL

Note: even though the same algorithms were used, the data produced by
this module doesn't work with the OpenSSL-based module and vice versa.

Another fix for OpenSSL 3.0+

Should rewrite this module to use libsodium instead.

LMDB: Add a separate mlm_setup0() to separate loading from setup

ITS#9920 lmdb: cleanup prev commit

ITS#9920 lmdb: fix page_split of encrypted page

ITS#10244 win32: Fix passed ptr type

From dfb3bbed656132456001c5aaca246fd4430e5ef5 ITS#9017

ITS#9378 don't try to print oversized keys in debug msg

LMDB: tweak mdb_load.1 manpage

Add missing -a option to Synopsis

ITS#10222 LMDB: Updated mdb_dump man page

The -a option to mdb_load makes the previous text obsolete.

ITS#10212 LMDB: better fix

ITS#10212 LMDB: init txnid for read-only DBs

ITS#10198 Win32 mdb_strerror - stop passing "ignored" parameter

The M$ docs say the parameter is ignored, but it actually isn't,
and will cause a SEGV if the pointed memory isn't an init'd va_list.

ITS#9037 mdb_page_search: fix error code when DBI record is missing

Use the more relevant MDB_BAD_DBI instead of MDB_NOTFOUND error code

ITS#9378 Add replay tool

Reads a replay log and executes all the write ops

ITS#9378 Add explicit replay logging

Logs essential ops so they can be replayed.
Ignores read ops for now.

More crypto fixups

crypto demo: fixup OpenSSL 3 compat

ITS#10137 LMDB: Allow users to define MDB_IDL_LOGN

ITS#10125 mdb_load: fix cursor reinit in Append mode

ITS#10095 partial revert of ITS#9278 2fd44e325195ae81664eb5dc36e7d265927c5ebc

The patch was incorrect and introduced numerous race conditions.
The original problem was a FreeBSD bug, subsequently fixed:
https://bugs.freebsd.org/bugzilla/show_bug.cgi?id=269277

ITS#9961 LMDB: fix MSVC error

ITS#9920 must account for size of authentication data

When computing amount of free space or fill factor in a page

ITS#9916 liblmdb: use alternate MDB_page2 struct for some accesses

fakepage pointers are only guaranteed to be 2-byte aligned. Use a
2-byte aligned struct definition when referencing 2-byte page members
if a page pointer possibly points to a fakepage.

ITS#9806 LMDB page_split: key threshold depends on page size

32 was chosen for page size of 4KB. Not large nough for 16KB pages.

ITS#9919 - Mark infrequently used functions as cold rather than manually putting them in a separate section

ITS#9030 - Use sys/cachectl.h rather than asm/cachectl.h on mips

It also contains the cacheflush function declaration.

ITS#9910 fix typo

in ad3f8367b0ef913dbff074ddd0fdcbcaa86fdbb0

ITS#9524 fix loose page tracking

Fixes commit 0e17ba43a818f6bdab7759586e247bae12692c25, loose pages
that have been dropped from dirty list should no longer be counted.

ITS#9910 fix undefined MDB_FDATASYNC on MacOSX

Broken by d85fe32 ITS#9372

ITS#9861 fix readonly regression from #9017

ITS#9385 fix using MDB_NOSUBDIR with nonexistent file

ITS#9618 fix Windows WRITEMAP flush

Revert back to using standard FlushViewOfFile/FlushFileBuffers
to sync data with WRITEMAP mode on Windows

ITS#9574 add mdb_drop to .gitignore

ITS#9496 fix mdb_env_open bug from #8704

Broken in 3585a1eb977326c7e178c53f4eef1fdc81b46e63

ITS#9500 fix regression from ITS#8662

ITS#9376 simplify

ITS#9469 - Typo fixes

ITS#9461 fix typo

ITS#9461 refix ITS#9376

Was setting C_DEL flag gratuitously

Happy New Year!

ITS#9372 Default to using POSIX semaphores on MacOS

Unless robust is specified (then use SysV)

ITS#9371 Fix unknown size of void compilation errors

ITS#9376 Fixes for repeated deletes with xcursor

On DUPSORT DBs, must initialize xcursor regardless of whether
caller requested its data. Also in cursor_prev must check whether
cursor index is still within range before using it.

Support db_pagesize in mdb_load

Since setting was added in de08119a296a4e8569fa04d7bfcbc7b3c2b41f2f

ITS#9364 fix doxygen comment

ITS#9364 Add docs for crypto modules

ITS#9364 Add crypto support to all tools

Using dynamically loaded crypto modules

ITS#9364 use crypto table properly

ITS#9364 tweak crypto sample again

ITS#9364 tweak sample

Cheat with OpenSSL 1.1 internal structures to avoid malloc/free per page

ITS#9364 add sample for authenticated encryption

ITS#9364 add error code texts

ITS#9364 rework crypto API

And add support for per-page checksums. Reserve space for checksum
at tail of page. Pass pgno+txnid as IV input for encryption.

ITS#9017 fixes for encryption

Fix rawpart flag collision

Fix fallthru warning

Add mdb_env_set_pagesize()

More RAWPART support

Use mmap to read and initialize the meta pages, raw device
may not support read/write syscalls.

Preliminary raw partition support

Autodetects that a block device is being used.

ITS#9278 fix robust mutex cleanup for FreeBSD

FreeBSD 11 supports robust process-shared POSIX mutexes,
but requires them to be explicitly destroyed before munmap

ITS#9017 cleanup Windows off_t

ITS#9017 doxygen comment for MDB_FIXEDSIZE

ITS#9017 LMDB: fix off_t usage on Windows

ITS#9017 LMDB: allow using fixed file size on Windows

ITS#9017 LMDB: improve Windows sync commit perf

ITS#9155 lmdb: free mt_spill_pgs in non-nested txn on end

Happy New Year!

Silence spurious fallthru warning

ITS#9118 add MAP_NOSYNC for FreeBSD

ITS#8704 add missing opt flags in prev commit

ITS#9068 fix backslash escaping

mdb_load wasn't properly inserting escaped backslashes into the data.
mdb_dump wasn't escaping backslashes when generating printable output.

ITS#9007 don't free loose writemap pages

Broken in ITS#8756

ITS#8978 Fix mdb_env_open2() failing when getting handle for NTDLL.dll

Always call GetModuleHandleW() with Unicode string, as mdb_fopen() is
calling CreateFileW() already.

ITS#8969 tweak mdb_page_split

Bump up number of keys for which we use fine-grained splitpoint search

IDLs for VL32 must be same size as for 64bit

Happy New Year

Happy New Year!

ITS#8857 document mdb_cursor_del does not invalidate the cursor

ITS#8908 DOC: GET_MULTIPLE etc don't return the key

Unnecessary since these are DUPs, the key will always be the same

ITS#8891 fix M$ WINAPI typedefs

ITS#8756 remove loose pg from dirty list in freelist_save

ITS#8844 use getpid() in mdb_env_close0()

ITS#8831 move flag init into readhdr

Avoid stomping on flags from 1st readhr invocation

Happy New Year