Fix some problems with resuming ota updates if saving the state is interrupted by a power failure or system crash.

FossilOrigin-Name: 6d5ed70d0dbabe9c2ab2f2dba47747d17d937781

Update document on sqlite3_mprintf() and related functions.  Discuss the
%w format and point out that obscure ANSI-C formats are not supported.
No changes to code.

FossilOrigin-Name: f8917ba4d917bc762b3b252466ab72a8a70dc0d8

Merge all recent trunk changes into the sessions branch.

FossilOrigin-Name: f36bb5fa5c5e3430808fe35d58f45559a216d341

Fix a compiler warning associated with USE_PREAD64.

FossilOrigin-Name: c299e55a661c04f71ab43cb8aed04f8ece6e0567

Fix over-length source code lines in os_unix.c.

FossilOrigin-Name: 7560a9fa50236ecaa0617f1ab5bb5662f4a61c72

Keep track of the optimal number of reserved bytes (by looking at reserve
byte requests in calls to sqlite3BtreeSetPageSize()) and then change the
reserve byte count to the optimal when doing a VACUUM or when using the
backup API.

FossilOrigin-Name: 28c2b726285ea88b334acfd6390a057d2d244838

Add some missing comments and fix other minor code issues in sqlite3ota.c.

FossilOrigin-Name: 718fd8b673d6557dd0eaad03e6a3332b5490afbf

Ensure the mutex used to protect the linked list of all main database files opened by a single ota vfs is allocated.

FossilOrigin-Name: 9c8682d6650a94e11f9bec5baff69ed9668874fa

Update various documentation comments in sqlite3ota.c and sqlite3ota.h.

FossilOrigin-Name: 60e0a46b82dd9c704e8aa977d1ccdd73d388422f

Fix errors in the EBCDIC upper-case to lower-case translation table.

FossilOrigin-Name: 905009f6723040d4da4776b6fd07e83c628dea2b

Remove a redundant call to statfs() in the xOpen() method of the unix VFS.
Also fix an unused local variable warning.

FossilOrigin-Name: 8215727dda384351765ab1d5c53ea80775b4ec65

Merge latest trunk changes with this branch.

FossilOrigin-Name: 6f5888a5e430feb5d9a50009a2eb103d9945bd22

Add tests for a couple of previously untested branches in the ota code.

FossilOrigin-Name: a3c1bc5d5e3f4b197f48cbbc240608e94bfc2b45

Move the os_unix.c file closer to apple-osx.

FossilOrigin-Name: 81f242e338d6122e27aad86986bfd140012c6582

First small steps toward brining trunk and apple-osx closer together.

FossilOrigin-Name: 28284ccc0d7301503f6d2d7bee9093738d52e331

Add new file ota12.test, containing tests for applying ota updates to live databases with other active reader/writer clients.

FossilOrigin-Name: 0864d127fe42fc0db7ab30a3ebf74c0114095648

Add ota tests to increase code coverage. Fix some minor issues in error handling within the ota code.

FossilOrigin-Name: 2b10c5d2b8b8b535d3dec0c68a777db16268e1e5

Fix a problem with OTA updates in the presence of database readers.

FossilOrigin-Name: 144bb29ffcbfe96dc10c0224113e73a80e89314b

Improve test coverage of ota code a bit.

FossilOrigin-Name: a438fa6c9ad2fb1d78ac747172d07455d6381387

Add extra tests and fixes for ota.

FossilOrigin-Name: e0b7151962fedbcac975f2216fd6b33b995a8945

Add further tests and fixes for ota.

FossilOrigin-Name: 62dc1fffc38cb157c15105098749b6dd0198eb84

Move tcl test code from sqlite3ota.c to new file ext/ota/test_ota.c.

FossilOrigin-Name: f20779a6e890ba73bfaa904cefcf3a029b01fed4

Change the way the "incremental checkpoint" function of OTA works in order to reduce the effect on the SQLite core code.

FossilOrigin-Name: b64a11a754dc56f3406d3b703531ebe9e4af4908

Improvements to SQLITE_ENABLE_API_ARMOR.

FossilOrigin-Name: 823ad40ccb5b51aaa0d5a48da63b465df9d0649a

Make sure the prepared statement auto-resets on extended error codes
of SQLITE_BUSY and SQLITE_LOCKED even when compiled using
SQLITE_OMIT_AUTORESET.

FossilOrigin-Name: 3c6ca414879feb1f5d31d5fd95a1737530aca624

For the shell '.import' command, make sure the last column value present is considered before NULL filling any missing ones.

FossilOrigin-Name: 9c5bcad1f7d04c16f3ec7fc483280059ae93961b

Merge the ota-update-no-pager_ota_mode branch into this one.

FossilOrigin-Name: 71887cd9b38def398d48eaf0ec34eeac3c7c5177

Merge latest trunk changes with this branch.

FossilOrigin-Name: 0b63e8dcbaec5043e353734e684c2a46552a3409

Ensure that an error is reported if an attempt is made to update a wal mode database via ota.

FossilOrigin-Name: 6fc5d4d26a603b3906f02ceea0f507780d0c35eb

Further tweaks to work with zipvfs.

FossilOrigin-Name: 0f152416be792457c52417aeb531ac860d12a5bd

Add documentation and test cases for sqlite3ota_create_vfs(). Also code to detect errors in zipvfs/ota setup.

FossilOrigin-Name: e729668168f00325459bc2e9b515aa95e57f2754

Add the sqlite3ota_create_vfs() and sqlite3ota_destroy_vfs() functions.

FossilOrigin-Name: 96443ecb6909141aa621a16e628455857d036482

Propagate COLLATE operators upward through function calls and CASE operations.
And do not flatten an aggregate subquery into a query that uses other
subqueries.  Fixes for tickets [ca0d20b6cdddec5] and
[2f7170d73bf9], respectively.

FossilOrigin-Name: 24e78b8d65734a6a8ae21a20542cd1839e756fb1

Fix WITHOUT ROWID table handing in sqlite3_analyzer.

FossilOrigin-Name: 937e0fe7008c0f76b6a584180df9a9457166a0b1

Add test cases for the query flattener fix for
ticket [2f7170d73bf9abf8].

FossilOrigin-Name: dd8f7f7511639a1baa41a6ff2e359dc6f1e66943

Propagate the COLLATE operator upward through function calls.
Initial fix for ticket [ca0d20b6cdddec5e8].

FossilOrigin-Name: c053448a55f9d030e8ffe88cf4fc14ada7f6ec19

Disable the query flattener for aggregate subqueries if the parent query
uses other subqueries in its result set or WHERE clause or ORDER BY clause.
Preliminary fix for ticket [2f7170d73bf9abf8].  However it still contains
a defect similar to the COLLATE problem of [ca0d20b6cddd].

FossilOrigin-Name: 0b7d65e3fda676d193347cb782854c28a48252af

Rename the internal "EP_Constant" bitmask to a less misleading "EP_ConstFunc".

FossilOrigin-Name: 4ef7ceced2b0000d21f7f8014384c04a0e4661d3

In selecttrace 0x100 mode, show the parse tree after name resolution instead
of before flattening, so that it is always seen even if flattening does not
occur.  Also: add the hex pointer value to the top of each SELECT tree.

FossilOrigin-Name: aa093fef2d2a7e26d987b46654963e4d7e66d444

In selecttrace mode 0x100, show a complete parse-tree both before and after
query flattening.  This is a change to debugging code only.

FossilOrigin-Name: b3c6b8a3c1075d2a87cef68f061d6a0098e6d8d0

Fix over-length source code lines in resolver.c.  No logic changes.

FossilOrigin-Name: c12edb85076d0832e3a0abbbba4d07f3cb5d7f0e

Add comments to explain the role of the ota vfs.

FossilOrigin-Name: 7bb633639d1e41067903a49653f09a823054e213

Remove "PRAGMA pager_ota_mode".

FossilOrigin-Name: 8ac58e46782bd6b81c06fdf1cb5b316b8a4e1ddf

Fix potential 32-bit integer overflow problems on the offset and length
parameters to sqlite3_blob_read() and sqlite3_blob_write().  For
sqlite3_blob_open(), make sure the *ppBlob return parameter is zeroed if
the interface fails with SQLITE_MISUSE.

FossilOrigin-Name: 5df02f50f8348dfde4fc15126abc7b7ef7803e69

Merge all the latest enhancements from trunk.

FossilOrigin-Name: ae7eef117f28a5dae7a05805f2d31ac532a9fcc5

Merge the command-line shell enhancements from trunk.

FossilOrigin-Name: c3931db560ab4a2601c7f7318fb02c8d5e6862b1

Change the name of ".info" to ".dbinfo" and add an optional second argument
which is the ATTACH-ed DB about which information is provided.  Provide
".indexes" as an alternative name to the legacy ".indices" command.

FossilOrigin-Name: 0f65a7e2e09f801b66897479d501607caeae4abf

Add the ".info" command to the shell.

FossilOrigin-Name: 0a3100a7f264ffce6078c35e341f2f0af6c09fbb

Add the index_xinfo pragma which gives information about the fields that
reference the table PRIMARY KEY in addition to the index key fields.
Add extra columns "desc", "coll", and "key" to the index_info and index_xinfo
pragmas.  Add the "origin" and "partial" columns to the index_list pragma.

FossilOrigin-Name: 2743846cdba572f616f56d310633703b8b50959e

Revise the way that the index structure for a WITHOUT ROWID table is
discovered.

FossilOrigin-Name: 7f10a0eaf1fedfa020cbd7019ec9342ffdc3b9b0

Change a comment in sqlite3ota.h to make it clear that it is not possible to insert a NULL value into an INTEGER PRIMARY KEY column using ota.

FossilOrigin-Name: a5e86bea4ad51bbb988a2a2215961706894f4a02

Prevent ota updates from violating NOT NULL constraints. Add a comment to the "limitations" section of sqlite3ota.h saying that CHECK constraints are not enforced.

FossilOrigin-Name: 74e073dd604142212f3d3e1931065d124daabd80

Figure out the primary-key type of a table using queries of sqlite_master
and the table_info and index_list pragmas, obviating the need for
SQLITE_TESTCTRL_TBLTYPE.

FossilOrigin-Name: 50ecdfc443b51e3569c6add2fba5132f959c61cb

Merge all changes from index_xinfo, including the move of the pragma table
into the separate pragma.h file.

FossilOrigin-Name: 21e95d28a51e56b45a9d4166475972535e53f954

Merge all recent trunk changes, including the movement of the pragma
table into the separate pragma.h header file.

FossilOrigin-Name: 3af19f84446ba5fc1ed754d0d73f6a6d7fb2f365

Fix a missing mutex in SQLITE_TESTCTRL_IMPOSTER.

FossilOrigin-Name: 71691c4be54b9ac6a35e35013f939b7d6fd4e6b8

Fix the error messages returned by ota if an update violates a unique constraint.

FossilOrigin-Name: c4845a3b591723ff60b7b1da198f44908c12bdfc

Avoid a linear scan of the entire table when ota updates or deletes a row from a table with an external primary key index.

FossilOrigin-Name: 1db198ccca1e5c5a922cefe3daeff8d2e5d3a7f7

Fix a memory leak that could follow an OOM error in ota.

FossilOrigin-Name: 0d5415f26427d0af89663c5a3e944e488143b648

Fix a typo in the --help output for speedtest1.  Fix a dependency error
in the Makefile.in for speedtest1.

FossilOrigin-Name: f30a057aeeac2b863493b6325325b075a76b9d21

Fix some problems surrounding WITHOUT ROWID tables with DESC primary key indexes
.

FossilOrigin-Name: a21fefb79a161e6bb057ae4f6ba554f659706ac1

Remove "PRAGMA ota_mode".

FossilOrigin-Name: 1c111447a07687c30ed4ad5a6c27a169c85b7ea6

Break out the (script-generated) pragma parsing tables into a separate file,
pragma.h, to make editing easier.

FossilOrigin-Name: 32c0325bcb083fe3f0f0cfe999d00f754e15299e

Ensure generated header file fts5parse.h is included in sqlite3.c.

FossilOrigin-Name: bc7be2fcfd29d6f1b567b69b3b20896eceb99798

Fix some problems with building fts5 and fts3 together using the amalgamation.

FossilOrigin-Name: fb10bbb9f9c4481e6043d323a3018a4ec68eb0ff

Merge latest trunk changes with this branch.

FossilOrigin-Name: 76212f2c9a3c3ff0e238d6dad776938c6af674e6

Have ota use imposter tables to write to indexes instead of the sqlite3_index_writer() interface. The error handling in this version is broken in a few small ways.

FossilOrigin-Name: cdaeab467f6aa3217be161377a9b78a4eec37093

Minor optimizations to fts5 writes.

FossilOrigin-Name: 1fffe51fa92f1784365140d5b163ab6c690981ae

Merge in support for the index_xinfo pragma.

FossilOrigin-Name: f9b6dc77021ee421bffd5697d5d337d3bbd07eb9

Add the "index_xinfo" pragma.  Add new columns to the "index_info" and
"index_list" pragmas.

FossilOrigin-Name: 30f51d7b3b292191e8351223242e708bb7f3dfa6

Merge the SQLITE_TESTCTRL_IMPOSTER changes from trunk.

FossilOrigin-Name: 3ed6eb2fab5d95709ef392170339e6dd5ba13971

Change SQLITE_TESTCTRL_INITMODE to SQLITE_TESTCTRL_IMPOSTER.  Revise the order
of parameters.  Give it the ability to reset the schema parse table so that
imposter tables can be erased.

FossilOrigin-Name: 42d5601739c90434e5adfda8fa99ef7b903877db

Merge all recent trunk changes, and especially the SQLITE_TESTCTRL_INITMODE
enhancement.

FossilOrigin-Name: 36436dde74ce2536a9a430b4458216499ad113bf

Added SQLITE_TESTCTRL_INITMODE for improved testability.

FossilOrigin-Name: 98e029134dc1300d3ecb48b41b5107ec69ba85db

Add a few simple test cases for SQLITE_TESTCTRL_INITMODE - cases which
also test PRAGMA integrity_check.

FossilOrigin-Name: 3a6e2afe408d2b0c8166d00def2048568169d87a

Fix some problems with transactions that both read and write an fts5 table.

FossilOrigin-Name: 0e225b15357765f132c3364b222f9931a608a5b2

Fix some duplicated test names.

FossilOrigin-Name: 1797158db2a818134c5cba1578f69ed85948b980

Ensure that "PRAGMA wal_checkpoint = TRUNCATE|FULL|RESTART" block on other connections and truncate the database file as required even if the entire wal file has already been checkpointed.

FossilOrigin-Name: 53429689d4fcf472edbc89cc50b5e69ba3270634

Split up the SRC variable in Makefile.msc to avoid over-long cmd.exe commands when TOP is set to a long pathname.

FossilOrigin-Name: 7d70ac65c16f08832a1f0fc4dec0f62a17cbcc85

Add the INITMODE test-control.

FossilOrigin-Name: 5940af8e7872209ce41feb958643b23f7e55d258

Optimize range constraints on the rowid column of fts3/4 tables even if there is no MATCH clause in the query.

FossilOrigin-Name: 85dc12625d300fe48f3c096f54ebcb8b6ef4e30a

Add missing VdbeCoverage() macros to the sqlite3_index_writer() implementation.

FossilOrigin-Name: 6f8cda26e93f09eadf0b084131a1d4002d94d959

When a "full", "restart" or "truncate" checkpoint is attempted, return SQLITE_BUSY if a reader prevents the checkpointer from copying any frames at all into the database file.

FossilOrigin-Name: f270004016ef20f1963e0f1ad32e76bcbaeb6798

Correctly detect errors returned by walCheckpointStart() due to OOM.

FossilOrigin-Name: 8e878c20238ecf60e5d98d088a955e834ffd35c1

Merge in all changes from trunk.

FossilOrigin-Name: 17c69be80542c5f84e21d60df3edc49422b087d9

Fix harmless compiler warnings.

FossilOrigin-Name: e7d2ec048c88237c124fbe598f8f7e950d43d90f

Fix a problem with fts5 doclist-indexes that occured if the first rowid of the first non-term page of a doclist is zero.

FossilOrigin-Name: f704bc059e06b01f1d68fa7dad89e33eace6c389

Fix a bug in the fts3 snippet() function causing it to omit leading separator characters from snippets that begin with the first token in a column.

FossilOrigin-Name: adc9283dd9bc3a6463f8c4fe23dd58a3712c349d

Improve the performance of fts3/4 queries that use the OR operator and at least one auxiliary fts function.

FossilOrigin-Name: 245e8730451fbdc1c729beff7295c452df604009

Fix a (almost always harmless) read past the end of a memory allocation
that comes about because the Expr.pTab field is checked on an
EXPR_REDUCEDSIZE Expr object before checking the Expr.op field to
know that the Expr.pTab field is meaningless.

FossilOrigin-Name: e098de691002a78270540430b0df1e120582b53f

The va_list argument cannot take on a NULL value and cannot be compared with
NULL on some platforms (ex: ARM).  So do not attempt to do so.

FossilOrigin-Name: 1964e656b4b420e8d6a4ba12d270ed02db292b88

Have fts5 store rowids in ascending order. Query speed is virtually the same regardless of rowid order, and ascending order makes some insert optimizations easier.

FossilOrigin-Name: 5206ca6005bfa9dfc7346d4b89430c9748d32c10

In the command-line shell, make sure stderr is unbuffered so that it
automatically flushes.  This has always been the case already for unix and
on Windows when the output is a console, but apparently was not the case
on Windows when the output was a pipe.

FossilOrigin-Name: 2a9ea9b4a7d6904efb2112e32efe84123dfa75d7

Fix compression of keys stored on internal segment b-tree nodes by fts5.

FossilOrigin-Name: 51444f67c0cc58a3023eb1cd78e7cf889da6c80f

Remove some redundant code from fts5.

FossilOrigin-Name: 939b7a5de25e064bdf08e03864c35ab718da6f6f

Add further tests and fixes for fts5.

FossilOrigin-Name: 5b295897153e9b26cd0d2e7ea112a4d461d0a665

Make sure errors in the FROM clause of a SELECT cause analysis to abort
and unwind the stack before those errors have a chance to mischief
in the "*" column-name wildcard expander. Fix for ticket [32b63d542433ca67].

FossilOrigin-Name: 9e6eae660a02303fd140dac5fbff82364f4120cd

Change the undocumented ".selecttrace" command in the shell to accept
an integer bitmask rather than a boolean.

FossilOrigin-Name: bd63bf882c5a925f921adc9cf7425d2e7950f0b2

Further tests and fixes for fts5.

FossilOrigin-Name: c020a291ed293a66d21c5885e50a7fee04aa6366

Fix an fts5 issue with loading doclist-indexes for a term that is the last thing on its leaf page.

FossilOrigin-Name: e0d614425f7f5ffe266fdc03642931b1ec19ad25