Further minor performance improvements and code-size reductions related to fts5 column filters on detail=col tables.

FossilOrigin-Name: b4ac61aeee976296e7719949cd4fb496147a29e8

Improve the performance of fts5 column filters on detail=col tables.

FossilOrigin-Name: 249a2d070c34bf884a04cb248b9691e239f2871c

Enhance fts5txt2db.tcl, a script used to generate fts5/fts4 databases for performance testing.

FossilOrigin-Name: c646e40350e5aa91abcf52de61fb31275bad38f9

Fix an fts5 problem with using both xPhraseFirst() and xPhraseFirstColumn() within a single statement in detail=col mode.

FossilOrigin-Name: 72d53699bf0dcdb9d2a22e229989d7435f061399

Merge trunk changes (including fixes for warnings in fts5) with this branch.

FossilOrigin-Name: ceccc9ad788fb4da9120915741995b9f088f85ff

Fix some signed/unsigned comparison compiler warnings in fts5.

FossilOrigin-Name: 3be336aa893f9eb0837d7d66c83bab1489792b9a

Fix a problem involving detail=col and column filters.

FossilOrigin-Name: 7558a0ad2276e91f2faced8ea405d9fdb4fa0c6e

Remove an assert() that can be false if compiled with SQLITE_USE_ALLOCA.

FossilOrigin-Name: f0a551edf87ef061deae34d88b02c3b484ae9adc

More work on the MSVC build.

FossilOrigin-Name: a79c46bc61a35edbaf6112c26e8052314b0eb16a

In the TCL interface, if a database connection object was opened with
the -uri 1 option, then also honor URI filenames for the "backup" and
"restore" commands.

FossilOrigin-Name: a1c8116ced62d81f3f5ca26bbe0877e829d4cc56

More MSVC makefile cleanup.

FossilOrigin-Name: df22556fd75997111e52f96572da8379dfe948be

Experimental performance enhancements for fts5.

FossilOrigin-Name: b5a57b812fd6a734cf2a342bf0b730ae18912d73

Reenable the xCurrentTime and xGetLastError methods on the unix VFSes as long
as SQLITE_OMIT_DEPRECATED is not defined.

FossilOrigin-Name: c11c85fdb6514cae54bb44945cc197dcaba72307

Add the sqlite3TokenInit() utility function.

FossilOrigin-Name: 7323175337b7ba85ac932ca892b28860f6a5b688

Have the dbstat module dequote any argument passed to the CREATE VIRTUAL TABLE statement before attempting to match it against the names of attached databases.

FossilOrigin-Name: e60461e984b8df09256bb0d733dbfae52568a145

Enable FTS4 when building the shell with the MSVC makefile.

FossilOrigin-Name: e4c07df557cd50786b05eecf011bf94708e6e31b

Further refinements to the MSVC makefile.

FossilOrigin-Name: 67625b963a6f5a0c6dff1a04a323e693569c2d94

MSVC makefile enhancements for use with the Windows 10 SDK.

FossilOrigin-Name: ac2e9d3de54d299f92fc35927b6df6d3aaa2dc59

Fix typo in 'Makefile.in'.

FossilOrigin-Name: 29a51c6dcc0ef7cab51aba0024e9c5bec89c6973

Improved comments on the FORDELETE hint.  No logic changes.

FossilOrigin-Name: a3cec529f0238e4ca1196fec420f2de80d28db78

Add 'rbu' to the clean targets.

FossilOrigin-Name: f60f025027ab3acdbc97701f81ff9c11c8463022

Add a -detail option to the loadfts5.tcl script. For creating tables with the detail= option set.

FossilOrigin-Name: 81e830e21f81b6428209afa0b8f42f2fd9bd7aab

Fix a problem in autoconf/configure.ac causing --enable-readline to fail if libedit was not present.

FossilOrigin-Name: e8adeb64d4e463772feb58dbd6f00715b92e735c

Case folding in the LIKE operator should look at all bits of the character,
not just the lower 8 bits.  Fix for ticket [80369eddd5c94].  This is a
back-out of check-in [0a99a8c4facf] with a testcase added.

FossilOrigin-Name: 204432ee72fda8e82d244c4aa18de7ec4811b8e1

Improve performance of sqlite3VtabImportErrmsg().

FossilOrigin-Name: 18d61c8e40ed1466b6a3a2f53bf0eeb09687c20e

Performance improvement in sqlite3DbMallocRaw().

FossilOrigin-Name: ff8eadbed5004ab03438f737492387dee6b9750a

Suppress the display of the P4 operand in EXPLAIN output when an opcode
has been converted into a No-op.

FossilOrigin-Name: 9f8297f862a110ded686d091854fae20c6bc393c

Remove an unnecessary memset() from the symbol name resolver.

FossilOrigin-Name: da527ddae06460ab4b706cdb871de2188ebaf5ac

Remove an unnecessary memset() for a small size reduction and speed improvement.

FossilOrigin-Name: 730d7efb6fef54ed7c1f4ae27e3b55778ea6ff01

During compilation, transfer the azVar[0..nzVar-1] array from Parse to Vdbe
rather than copying it.  Smaller and faster code.

FossilOrigin-Name: 80dd495f378614e4eca72e71e43061b1b94ee450

Very small simplification to the btree balancer.

FossilOrigin-Name: f421adf54c9db91ba6ca64a8ba3751680e47924a

Fix an incorrect VFS version number check in the threadtest3.c test program.

FossilOrigin-Name: 5bf6442bec83977006bc5049adcdbd4dd39369fe

Fix two harmless compiler warnings about comparisons of dangling pointers.

FossilOrigin-Name: 86944f193f1f06b64471953bb5713ecea7f3d803

Add further fts5 tests. 100% code coverage is finally restored.

FossilOrigin-Name: b914ece0d146cfc8adba4dc4e8633e14f174d6ea

Add tests for fts5. Fix a crash that can occur in fts5 if the database content is corrupted.

FossilOrigin-Name: acaf426449bf6fd3140fd63141750ff69d1119a5

Avoid unnecessary calls to memset() for a small performance improvement.

FossilOrigin-Name: 9e8c23acf74944a165c733682a956948b15bd401

Add a debugging function to print human-readable versions of fts5 detail=none leaf pages.

FossilOrigin-Name: 8358af3658d888516cdef5f8c8d89e9bdee53f91

Simplification of the VDBE bytecode for incremental blob I/O.

FossilOrigin-Name: d23849f64a110e336f26282bf2b961a2a2372468

Fix a problem with SQLITE_TEST_REALLOC_STRESS.

FossilOrigin-Name: 0aaf3febb00f622c5ef0853b2491d69f7ca7a21e

Add extra tests to cover untested branches in fts5.

FossilOrigin-Name: 61deab043dcea860070dba6b02601a7de627fff1

Improvements to the way sqlite3VdbeAddOpList() works, resulting in a slightly
smaller and faster binary.

FossilOrigin-Name: 88ceb588bcdb3ca86d0c58cfdeb61b5fe070872f

Add further tests for fts5. Fix some problems with detail=col mode and auxiliary functions.

FossilOrigin-Name: de77d6026e8035c505a704e7b8cfe5af6579d35f

Use sqlite3VdbeAddOp4() rather than a separate sqlite3VdbeChangeP4() call, for
a slightly smaller and faster binary.

FossilOrigin-Name: a4258cd4613c55acacb5c7b61faa3de7eb0759d2

Fix a potential use-after-free problem when compiling with SQLITE_HAS_CODEC.

FossilOrigin-Name: 653ea15ad8e23b333e234eb5dde7b80134db2baf

Remove an unnecessary memset().

FossilOrigin-Name: 689421a9f73ceeab9786840a2d6ee008124d1f25

Rationalize some code in fts5_storage.c. Add tests to cover recently added branches in fts5.

FossilOrigin-Name: 3b72df405ac9b3a71144f45317d32e25f0084c4b

Remove unnecessary de-initialization of the Parse object.

FossilOrigin-Name: 75ab30c5fcb51e556342dc3112f9acf122f79947

Work toward making the schema parsing logic simplier and more compact.

FossilOrigin-Name: c52ca2c0662bb30ab34574f933429512655b19ff

Fix a couple C99-isms in FTS5 that cause compile errors on MSVC.

FossilOrigin-Name: 584848d4396d7755027fab377c97e40fbcc90d21

Combine the xFunc and xStep pointers of the FuncDef object into a single
pointer xSFunc.

FossilOrigin-Name: 0d1b3d7d3ca66cb0b97493f1aeade1703af3c9f4

Add a test to verify that the fts3 and fts5 "unicode61" tokenizers are byte for byte compatible.

FossilOrigin-Name: 8ec8314354edc9d6f7d1c8a6370fd984a552a52f

Simplification to the ISO8610 parser in the imnplementation of date/time
functions.

FossilOrigin-Name: b9159f42a517a95ae52464c96431708c00b7bb36

Minor adjustments to the MSVC makefile.

FossilOrigin-Name: e2cba1bbfdcb24e35b2275e29071d8a4e4943417

Yet another change to FTS5 trying to get it to merge successfully into sessions.

FossilOrigin-Name: 8dedff3b9ac3e6bf9c131fee19f7d26dc1ebd61f

Fix more compiler warnings in FTS5.

FossilOrigin-Name: f791fc7009d68941c60d7bf953bab19d86112133

Fix another compiler warning in fts5 code.

FossilOrigin-Name: d17bc2c92f4d086280e49a3cc72993be7fee2da7

Fix compiler warnings in fts5.

FossilOrigin-Name: 5a343cc0336bba056df4449e6cd2e3fb9e75a105

Fix harmless compiler warnings in RBU and add RBU to the autoconf and windows
makefiles.

FossilOrigin-Name: fabe78c5d8ab353988f6fe0decacd651edc17ec2

Fix harmless compiler warnings in sqldiff.c.

FossilOrigin-Name: 74808a79ea3194f6cc00084b9dccc380846a6051

Fix the build so that it works for SQLITE_OMIT_WAL again.

FossilOrigin-Name: d55a557bc70460c46a67ae5acd9f8a8356a580c2

Look for pthread_mutexattr_init() instead of pthread_create() in autoconf
scripts, to work around issues with ASAN.

FossilOrigin-Name: 9c3a0dc2e8bf202cd846841bd5d4ea67aa189c1a

Add documentation for new API functions to the comments in fts5.h.

FossilOrigin-Name: 14d296fa7b43b4999a1fd070cf030f83fe1b94c3

Add the SQLITE_FCNTL_JOURNAL_POINTER file control.

FossilOrigin-Name: ad3daa5427672d2d236939ad3285b765f4601801

Add documentation for the SQLITE_FCNTL_JOURNAL_POINTER file-control.

FossilOrigin-Name: 807c5aee2e5e5c01eb33688a199755c345c3664e

When the [https://www.sqlite.org/queryplanner.html#partialsort|block sorting optimization]
is used in a scalar subquery, be sure to exit the loop as soon as the first
valid output row is received.  Fix for ticket [cb3aa0641d9a4].

FossilOrigin-Name: cdbb0947f9ce18d6d7e29ffab5ea6a2ee5365fbb

Add the "detail" option to fts5. Used to reduce the amount of information stored in an fts5 index.

FossilOrigin-Name: a220e85fe535af5ef2da6ef5fb76abe5a96b5abf

Add the ".vfslist" command to the command-line shell.

FossilOrigin-Name: 5727562b75edf25102cd72607c420d245379c96d

Improve performance of fts5 low level iterators.

FossilOrigin-Name: bc5118f40a11f64ffb4e1c086277fa80b9764745

Fix a harmless use of an uninitialized variable following system errors
in the multi-threaded sorter.

FossilOrigin-Name: 4bb2c1df105c2d21f5c4c7ef656ff1d6e15f78bc

Remove an unused field from the MemPage object.

FossilOrigin-Name: 5fc0a4c1f353c4c06fcbc4bce8bbe1897ef49eee

Make sure all bytes of the WAL file are initialized even if the checksums are
not being computed until commit due to WAL overwrite.

FossilOrigin-Name: 1f44a9bdc1577aed088d9b91882527228015dcd3

Fix an uninitialized field in the Select object when SELECTTRACE is enabled.

FossilOrigin-Name: fc62851667d9120f98a2641c87bbc5a2485482b2

Various #ifdef enhancements for improved VxWorks support.

FossilOrigin-Name: 75cd41ff179e29c5d45f9d7fed784bc339e0d7a0

Performance optimization in the sqlite3VdbeChangeP4() routine of the
code generator.

FossilOrigin-Name: 28bd8d5fc541464b69886b7e886939035b42a869

Fix duplicate test number in 'waloverwrite'.

FossilOrigin-Name: f5fb82686697e5fa1937323b1c1b35cf90ad0302

Merge trunk with this branch.

FossilOrigin-Name: a73d245f2e523a57163bc93d9fb6a74c4cdf21e7

Add the fts5speed.tcl script to ext/fts5/tool/.

FossilOrigin-Name: 2c0b93553ebb00a70c611eb8dac021877933f088

Performance optimization on the Column opcode.

FossilOrigin-Name: ecc98bef43c2fd07d64e4efddf340929a875ebac

Fix bugs in fts5 synonym processing for detail=col and other modes.

FossilOrigin-Name: 0e3c545423246231ddac8fed2f103d71d556e17f

Performance optimization in sqlite3WalkExpr().

FossilOrigin-Name: 2f8bd5fab8cc51d1f8932c3490fd24dbccf6ef31

Increase the version number to 3.11.0 due to the WAL overwrite enhancement.

FossilOrigin-Name: 8e807bfaa197027d0cb73532baa96755ce71ea12

If a single page is written to the wal file more than once, instead of appending the second and subsequent copy to the wal file, overwrite the first.

FossilOrigin-Name: d493d4f1186c15da50558a13490cba0191e6f649

Add a test case to waloverwrite.test to check that savepoint rollback does not cause a problem.

FossilOrigin-Name: 87dae56c322454094d445e474ae36a4f464272a4

Slightly smaller and faster LIKE/GLOB comparison implementation.

FossilOrigin-Name: 5dddcc78eec5bcd0c7e8fe1b70875ce775488f0c

Improved testability.

FossilOrigin-Name: e83d3a2a4e06665e8a056f63063bd6df03f063b9

All WAL frame overwrites even if there are active savepoints.  This is safe
because a ROLLBACK TO will cause all reverted pages to be rewritten to the
WAL file prior to COMMIT.

FossilOrigin-Name: 99b31a6b491c1c51227f478d3713b020d37a17cf

If it is known that checksums will be recalculated on transaction commit, skip calculating checksums when appending frames to the wal file. When recalculating checksums, recalculate them starting with the first overwritten frame - not the first frame in the transaction.

FossilOrigin-Name: 16b34f2537bbc7846d8e6dc2b35daae5af241c1b

If a single page is written to the wal file more than once, have each subsequent copy overwrite the original frame.

FossilOrigin-Name: 5d113aef2c7d746e8eda88d4e36c04a39b0a11be

Typo fix in the previous commit.

FossilOrigin-Name: 52c166039831cc8423e2252019ef64a21b9d7c2a

More #ifdef fixes for the unix VFS.

FossilOrigin-Name: 122c111e360761de8166e16ca151cb7260ee9bf8

Fix the build for SQLITE_OMIT_SHARED_CACHE, which was broken, possibly
by check-in [2d96aeba].

FossilOrigin-Name: 3392f8fa2ddf2c10ffe91ddd92470040c909b36d

Fix a problem with #ifdefs on the system calls in the unix VFS that causes
problems when compiling with SQLITE_OMIT_WAL.

FossilOrigin-Name: ceceea4c5ee242b20ebf216593c15c11ce2c369a

Remove an obsolete #ifdef related to iOS support.

FossilOrigin-Name: e9a51d2a580daa0fb152fe4c891149caa8025b9d

Begin adding fts5 tests involving synonyms and detail=none/col tables.

FossilOrigin-Name: b3e6f15ec2d9a834e2c80b91ffd7097553816228

Reduce the number of calls to memset() in sqlite3DbMallocZero().

FossilOrigin-Name: cede2bf8e42ac140a8cc75a1d173083f543ba467

Fix test file vtabH.test so that it works with SQLITE_ENABLE_ICU builds.

FossilOrigin-Name: 19c1f4483e3df7fa1e9ac7c8a510fa1c906ac7c7

Fix fts5vocab.test so that it works with detail=none tables.

FossilOrigin-Name: d9135cc723fc4227aace6dcf4ffa4630c9d23aa0

Add the experimental SQLITE_FCNTL_JOURNAL_POINTER file control for obtaining
the sqlite3_file pointer associated with a rollback journal or WAL file.

FossilOrigin-Name: a02ace9a746ff02fc1a5969bf13939b568624f93

Omit performance tracking from the memsys5 memory allocator if neither
SQLITE_DEBUG nor SQLITE_TEST are defined.

FossilOrigin-Name: af5c7714e993f060841f1e893f754ddf3870e6d0

Update the fts5vocab module to work with detail=col and detail=none tables.

FossilOrigin-Name: eedd095dc1c81ce45df00093ba237dd7b3cdff3d