ITS#9017 LMDB: allow using fixed file size on Windows

ITS#9017 LMDB: improve Windows sync commit perf

ITS#9155 lmdb: free mt_spill_pgs in non-nested txn on end

Happy New Year!

Silence spurious fallthru warning

ITS#9118 add MAP_NOSYNC for FreeBSD

Revert "ITS#9116 LMDB: fix bogus error check in read-only txns"

This reverts commit 0e895ffe4391fd9a8a484395887a9f7d156b86ae.
Was not an LMDB bug.

ITS#8704 add missing opt flags in prev commit

ITS#9116 LMDB: fix bogus error check in read-only txns

ITS#9068 fix backslash escaping

mdb_load wasn't properly inserting escaped backslashes into the data.
mdb_dump wasn't escaping backslashes when generating printable output.

ITS#9007 don't free loose writemap pages

Broken in ITS#8756

ITS#8978 Fix mdb_env_open2() failing when getting handle for NTDLL.dll

Always call GetModuleHandleW() with Unicode string, as mdb_fopen() is
calling CreateFileW() already.

ITS#8969 tweak mdb_page_split

Bump up number of keys for which we use fine-grained splitpoint search

Fix merge error

Fix Android recognition

The official macro is __ANDROID__; ANDROID may or may not be defined.

Add -a append option to mdb_load

To allow reloading of custom-sorted DBs from mdb_dump

ITS#8704 Fix PREVMETA, rename to PREVSNAPSHOT

and enforce exclusive access to environment. Also fix txn_begin/pick_meta
to use correct meta page, and reset the flag after successful commit.

ITS#8704 Add MDB_PREVMETA support to tools

IDLs for VL32 must be same size as for 64bit

Happy New Year

Happy New Year!

ITS#8857 document mdb_cursor_del does not invalidate the cursor

ITS#8908 DOC: GET_MULTIPLE etc don't return the key

Unnecessary since these are DUPs, the key will always be the same

ITS#8891 fix M$ WINAPI typedefs

ITS#8756 remove loose pg from dirty list in freelist_save

ITS#8844 use getpid() in mdb_env_close0()

ITS#8831 move flag init into readhdr

Avoid stomping on flags from 1st readhr invocation

Happy New Year

ITS#8819 can't use fakepage mp_ptrs directly

ITS#8324 More for Win32 NTDLL junk

Use GetProcAddress at runtime, avoid buildtime NTDLL link issues

Add mdb_drop tool

ITS#8760 fix regression in 0.9.19

ITS#8612 Fix Solaris builds with liblmdb

This patch fixes liblmdb builds on Solaris and derivatives by defining
_POSIX_PTHREAD_SEMANTICS

Tweak ITS#8722 fix: Use XCURSOR_REFRESH()

This checks XCURSOR_INITED() and fixes the mn_flags check.

XCURSOR_REFRESH() fixups/cleanup

* Check NUMKEYS(), similar to f34b61f9471d1c03fe0517b9d817c50c920e378a
  "ITS#8722 fix FIRST_DUP/LAST_DUP cursor bounds check".
* Move XCURSOR_INITED() into XCURSOR_REFRESH().  This adds a check in
  mdb_cursor_put, below /* converted, write the original data first */.
* Factor mc_ki[] out to XCURSOR_REFRESH().
* Replace an mc_pg[] with mp which is equal (mdb_cursor_del0).

ITS#8728 fix MDB_VL32 freeing overflow page

ITS#8722 fix FIRST_DUP/LAST_DUP cursor bounds check

ITS#8704 add MDB_PREVMETA flag to mdb_env_open

used to open the previous meta page, in case the latest one
is corrupted

From https://github.com/LMDB/lmdb/pull/12

ITS#8699 more for cursor_del ITS#8622

Set C_DEL flag on reinit'd subcursor

ITS#8622 fix xcursor after cursor_del

Re-fix 6b1df0e4c7fadd21d1233d7157229b2d89ccaa04 from ITS#8406

ITS#8582 Fill in MDB_LOCK_FORMAT

Attempt to stop liblmdb variants compiled with conflicting options
from using the lockfile at the same time and thus breaking it.

Clear any struct padding in idbuf

Simplify mdb_hash_val() -> mdb_hash()

Simpler usage since it's only called once, rename to match new usage,
and drop 3 loop pessimizations which were optimizations 20 years ago.

Store lock ID instead of pathname in lockfile

This limits the namespace which the user can meddle with for
POSIX semaphores and Windows mutexes.  Their names change a
bit, they no longer have fixed lengths.

ITS#8582 MDB_LOCK_VERSION = 2 due to format change

ITS#8582 keep mutex at end of struct

since it's variable size on Linux/glibc

Workaround VL32 cursor refcounting miscount

Don't try to deref cursor page if txn's pagelist is empty

Further fix f8ce8a82717ddefdc912fa47c07f1bdee2a3336b

Fully revert the change to GET_MULTIPLE

Fix f8ce8a82717ddefdc912fa47c07f1bdee2a3336b

GET_MULTIPLE was broken

Happy New Year

More C_EOF tweaks

ITS#8557 fix prev commit

Tweak cursor_next C_EOF check

Allow C_EOF flag to be stale

ITS#8557 fix mdb_cursor_last

Optimize mdb_page_search_root(PS_LAST) when cursor is already near
last position, ignoring C_EOF flag for now.

ITS#8558 fix mdb_load with escaped plaintext

ITS#8554 kFreeBSD is like BSD

Doesn't have POSIX robust mutexes - GNU userland on BSD kernel

More MDB_node doc

Doxygen fixes. Use DISTRIBUTE_GROUP_DOC.

- DISTRIBUTE_GROUP_DOC makes doxygen give several fields the
  same doc: mn_hi + mn_lo in MDB_node.
- With mdb_mutex_t + mdb_mutexref_t, instead split them up.
- Don't hide a doxygen #name inside double quotes.

Mention MDB_PREV_MULTIPLE along with MDB_NEXT_MULTIPLE

ITS#8504 Fix prev commit: mc_error, #ifdef SIGPIPE

Never clear mc_error, we could lose a failure in the other thread.

ITS#8504 mdb_env_copyfd2(): Don't abort on SIGPIPE

Return EPIPE instead.

ITS#7377 Catch mdb_cursor_sibling() error

Clean up and comment C_UNTRACK

Don't use it as a "cursor is tracked" hint in mdb_pages_xkeep().
It's been harmless so far, but would break after mdb_cursor_copy().
Checking m0 directly short-circuits better anyway.

ITS#8355 cleanup

Drop ~C_EOF, pointless after 8c215aa970215a58ee0df458813c0405ad27a6e9

MDB_VL32 cleanup: MDB_env.mm_mapsize type

ITS#8542 mdb_dbi_open(): Protect mainDB cursors

Cleanup: Add flag DB_DUPDATA, drop DB_DIRTY hack

MDB_CP_COMPACT comments

doxygen cleanup

Note functions which must set MDB_TXN_ERROR on failure

Other functions depend on them to do so.
For mdb_node_read(), instead remove such a dependence.

MDB_VL32 mdb_page_get(): Set MDB_TXN_ERROR on failure.

Fix mdb_env_open() with MDB_VL32

Init me_rpmutex independently of MDB_NOLOCK.
Plug leaks on mdb_env_open() failure.
Tweak mdb_env_close0() to handle the rearranged mdb_env_open().

Factor out refreshing sub-page pointers

More for ITS#8406

xcursor fixup depends on init state

More for ITS#8406

Revert excess cursor fixup

Only set me_mfd if needed. Drop unused read access.

ITS#8505 Clarify fork() caveat, mdb_env_get_fd(), flock->fcntl.

ITS#8505 Protect parent from fork()-pthread_exit()

ITS#8505 Set FD_CLOEXEC for me_mfd,env_copy as well

Move opening files to mdb_fopen()

No change in functionality.

Factor filename handling out to mdb_fname_*()

No change in functionality, except needs less mallocing.

ITS#7992 Tighter utf8_to_utf16(), fix errcodes

The 0xFFFD check seems due to misleading MultiByteToWideChar() doc.
Bad UTF-8 gives 0xFFFD in the output string, not the return value.

Clean up strange fcntl result check

...and check !MDB_CLOEXEC in an 'if' rather than '#if'
to match its non-zero usage.

Drop spurious Errcode() call

ITS#7682 F_NOCACHE: Allow error, skip any O_DIRECT

We can run without F_NOCACHE if it fails. And we do not know
what combining it with O_DIRECT means, if a system has both.

Silence warning for initializer "mdb_copy my = {0}"

1st struct member was not a scalar.

ITS#8489 reset cursor EOF flag in cursor_set

It usually gets done anyway, but one of the fastpath shortcuts
bypassed this step.

Clean up MDB_USE_ROBUST #defines

Make explicit and default nonzero equivalent. Parenthesize.

Fix mdb_page_list() message

ITS#8481 make shared lib suffix overridable

MDB_VL32 plug rpage leak

mdb_cursor_set wasn't unref'ing as intended.

Comment MDB_page

Doc fixes: VALID_FLAGS, mm_last_pg, mt_loose_count

mdb_size comments

MDB_VL32: Switch to mdb_size_t formats PRIu64 & co

Drop macro Y=MDB_FMT_Y, add Yu/Yd=MDB_PRIy(). Replace
Y"d..." -> Yd"...", Y"u..." -> Yu"..." / MDB_SCNy(u)"...".

Refactor mdb_page_get()

MDB_VL32: Match mdb_size_t type with format modifier.

When using format modifier "ll" or "I64", use the matching
type unsigned <long long / __int64> rather than uint64_t.

Fix MDB_INTEGERKEY doc of integer types

Use mdb_size_t for line numbers in mdb_load

This matches the mdb_size_t entry counts.

Fix size_t/formats -> mdb_size_t for MDB_VL32