Fix an operator precedence problem on the [1d8086902e] check-in.

FossilOrigin-Name: 4f5f3aebe81c3cbe539db3e33ec38fa3de47e90b

Merge experimental branch with trunk.

FossilOrigin-Name: 4e6e07a60e543d5d1727cde27ab11e156202a1b8

Do not attempt to set the permissions on an existing journal or wal file. Do this only immediately after creating a new file (or opening one zero bytes in size).

FossilOrigin-Name: 1d8086902ee96347491bce5ec04dc92ccd42efa1

Add extended error code SQLITE_READONLY_ROLLBACK. Returned if a read-only connection cannot read the database because doing so would require it to roll back a hot-journal.

FossilOrigin-Name: 39247b14a52b0c0222fe5a848bf0aef0854058c4

Fix a bug in the recent incremental-vacuum related changes.

FossilOrigin-Name: 717863fca6d58828bf9321bc8b169e385ad4263f

Simplified error message on the showdb utility.

FossilOrigin-Name: 8e0ced1af78d8c25a06423a8e7e337ac845155cc

Omit a test that uses the progress handler callback from view.test if OMIT_PROGRESS_HANDLER is defined.

FossilOrigin-Name: f40552ada57622825d2974d392356aa34612d5ee

Remove an assert() statement that has been incorrect since the recent incremental-vacuum related changes in [26e235b7a4].

FossilOrigin-Name: 090a47127fde90616a92a324d26bf9ddd4053120

Add the test_fs.c test module to Makefile.in.  Adjust the success criteria
on index5-1.3 so that it works under auto_vacuum configurations.

FossilOrigin-Name: b457c8870ac5ef58f2b7f8daed723c0cf0c07340

Update comments on the free-page allocator to accurately reflect the
latest implementation.  Add new asserts to the free-page allocator.

FossilOrigin-Name: 9a135e37b696b8544da8dbddf9d1041b8fa6f1c2

Complete the initialization of the loadable extension thunk table.  Also
fix other (harmless) compiler warnings.

FossilOrigin-Name: 780d06c5e54590f677f993fa9c313989c2eab8c7

Update the cygwin interface to use the newer 1.7 APIs instead of the
1.5 APIs.  Also shorten over-length source code lines in os_win.c.

FossilOrigin-Name: 6b2838336a31e34c540210ccc9c934d4ba94757c

Prevent Tcl file encoding issues in the tests for the unicode() and char() functions.

FossilOrigin-Name: c9c2b82c86fff457a0b32d5be84ec66639065ae1

Fix an overly restrictive assert() in the pager.

FossilOrigin-Name: f476eace86102fd5442cfbba169c18f6ee44eae2

Fix the handling of UTF16 surrogate pairs in the char() function.

FossilOrigin-Name: ff67d87894eeb0036374235c5723e267536909f9

Always use strncmp() rather than memcmp() when comparing strings where one
or other string might be less than the length parameter, since optimized
versions of memcmp() might read past the first difference and in so doing
generate an access violation.

FossilOrigin-Name: d73435587ba7459e2e2c32980d0e17abdeceb4bc

In the incrvacuum3 test, add missing call to the Tcl close command.

FossilOrigin-Name: cd8067238439638bcfd3966d55d2a3990f36d702

When comparing names during name resolution, make sure the names match
exactly and that one name isn't merely a prefix of the other.
Fix for ticket [7a31705a7e6c95d51].

FossilOrigin-Name: c2d5a23b1ab39918e97c596cf75c42f86a5fe2b7

Change the way test script incrvacuum3.test copies database files in order to avoid trying to read the (locked) 512 byte 'pending-byte' region.

FossilOrigin-Name: fa1842e462049b1366909fe36d6d81b634be3953

Prevent Tcl file encoding issues in the tests for the unicode() and char() functions.

FossilOrigin-Name: d2e7dfca5a92074a7984032deb6a4e3681389c72

Remove extra use of the sqlite3_value_int64() function.

FossilOrigin-Name: 6d7973524a7d3bf3158fdac58975945da7f51740

Add new SQL functions unicode() and char().

FossilOrigin-Name: be2493905281e12c7f4c146ab17c8872e52da350

Strengthen the final test case in index5.test.  Also provide additional
diagnostic information out the output.

FossilOrigin-Name: 47b6418242bb2cd718d1a73b0cb73a43ee74e503

Fix an error in test script index5.test.

FossilOrigin-Name: d87e5acf2802d2887e20f79a8bd4990b2cd47b91

Merge the incr-vacuum-opt branch with the trunk.

FossilOrigin-Name: 26e235b7a4cd4d0dc9725774d70174c4d369cb98

Add test file incrvacuum3.test. No code changes.

FossilOrigin-Name: bf57534188e044fb341315bfc05b7927e66a04e0

Catch a dropped error code in backup.c.

FossilOrigin-Name: ac8ca3ecee4d81bf522b330033e5d85638063670

Fix a case where database corruption may cause an assert() to fail.

FossilOrigin-Name: ba33bb059ed4f4547da2880dbc8bd827c06fae34

Fix a case in the incremental vacuum code where database corruption was going unreported.

FossilOrigin-Name: 4cd30c72629a7f44b18026a70103aa0bb8a3b959

Fix a cut-and-paste bug causing the library to fail to report database corruption in a few cases.

FossilOrigin-Name: f921df59560d536f5b80eef8c995cbe3ff591bae

Enhancements to test scripts. No code changes.

FossilOrigin-Name: ccab94c10d54e585de918bbf82dec188287d93b2

Fix off-by-one bug in [c3939d2491] uncovered by th3.

FossilOrigin-Name: 66f9faa9a969d004486ee38d492fb3eda6cdebab

If a rollback mode transaction reduces the size of the database file, avoid actually truncating the file until after the transaction has been committed (but before the db has been unlocked). This means pages that are removed from the database by truncating the file need not be journalled.

FossilOrigin-Name: b73847f17b7ae1298dfc52de6c4c4bc809bc77a3

Fix a problem with the previous commit.

FossilOrigin-Name: 720a3ceafc35b81936ed2eb1f07a7187d104f0a0

Avoid moving pages more than once in an incremental vacuum operation.

FossilOrigin-Name: c3939d249119b47bd57baa11a5ed7cc6014fc795

Two new SQL functions: unicode() and char().

FossilOrigin-Name: 209b21085b9767f10f6ffb7c7cac756fcb74ded5

On Minix, disable the ".timer" command in the shell in order to avoid
calling getrusage().

FossilOrigin-Name: 9bd9bd9cab8c804c1a51d472199459176044a633

Enhance the showdb tool with options to show PTRMAP usage and content.

FossilOrigin-Name: 06bd91305ed6752315c5224be5f89e87cafa6687

Fix the showdb utility so that it displays the correct secondary usage of
a page when reporting on an error of a page being used more than once.

FossilOrigin-Name: 4507f0b3d409cd14bb2b9c29c92c76aa3ccb22b6

Enhance the pgidx of the showdb utility so that it provides better information
even if the sqlite_master table is corrupt.

FossilOrigin-Name: d14263a719101d9c70054f2fc37e7788f73aab28

Do not rollback the schema if a parsing error occurs while parsing the schema
and writable_schema is set.

FossilOrigin-Name: 680d3ab56b578bd4b0170559f9e35615ff43cf2c

Truncate over-length source lines in sqliteInt.h to 80 characters or less.

FossilOrigin-Name: d71abab08518f0be1eb73c7068566ab813652318

Add the edit_cost_table= command to the spellfix1 virtual table, permitting
the edit distance cost table to be changed at runtime.

FossilOrigin-Name: 89d6368250f9ba2f49e930bbe5524f3da615ce70

Fix an unsafe VM register deallocation.

FossilOrigin-Name: cfba2c8dadbf1fa6f1602a327933570820a3b134

Check for a NULL handle prior to manually calling winClose.

FossilOrigin-Name: 843e1c543aabab8cd62f28742d5818887d36bcb7

Verify that the schema has not changed before running PRAGMA table_info,
index_list, index_info, and foreign_key_list.

FossilOrigin-Name: 82952d08f3e3aa80a7f51e80dbc89742cb4a09f0

On WinCE, fill in the winFile structure after winceCreateLock has succeeded.

FossilOrigin-Name: ec13544ce336e8a02b34d574ced5912b06c82c0e

Add recent API additions to the extension mechanism.

FossilOrigin-Name: 7e10a62d0eb1cb2bdafb6752b78a9d368e9f21f5

Allow an index to be used for sorting even if prior terms of the index
are constrained by IN operators.

FossilOrigin-Name: 2cef8b68f0e1216cf68bb7dd45a5a9a330748070

Improve memory allocation error handling on WinCE.

FossilOrigin-Name: cdbca259da80df901837034d2616da434cb82216

A bug report coming from from Firefox
([https://bugzilla.mozilla.org/show_bug.cgi?id=840377])
describes an infinite recursion.  We are unable to reproduce the problem.
Nevertheless, this check-in should prevent the problem from ever occurring
again.

FossilOrigin-Name: b7222a2bd035e7a32dc9416b25a488d9d017aad1

Improve memory allocation error handling on WinCE.

FossilOrigin-Name: 09dfc0c915ec2f0c5f633a3485d47cad15eec4dc

Add extended error codes for all SQLITE_CONSTRAINT errors.

FossilOrigin-Name: 939d8282748b00a7032cdd72e5d3bf3086ebfc97

Rename SQLITE_CONSTRAINT_RAISE to SQLITE_CONSTRAINT_TRIGGER.  Put the
extended constraint error codes in alphabetical order.  Add many test cases
for the extended constraint error codes.

FossilOrigin-Name: 3f67437536591a1b0742a25b983707933aaa16d5

Add extended error codes for constraint errors.

FossilOrigin-Name: 5461104668a49529577f21df97f6a0e7d8f0c679

Fix a potential NULL-pointer dereference following an OOM error
in the query planner logic for virtual tables with OR-connected terms.

FossilOrigin-Name: 71b6c26053fdf2a5a84116e005bad1f2ca873a66

Make sure the virtual tables that take advantage of IN operators sort the
RHS of the IN operator in the correct order according to the ORDER BY
clause.

FossilOrigin-Name: b016b7546d6fbfba06019398b9ac239b0cbe9086

Loop through the elements on the RHS of an IN operator in reverse order when
the ORDER BY clauses specifies DESC.

FossilOrigin-Name: f78395c8896666bb1359b83fbcd58d5e3dbc39d3

Allow the "a=?1 OR a=?2" to "a IN (?1,?2)" transformation to work on virtual
tables again.  This was formerly restricted because virtual tables could not
optimize IN terms.  (See check-in [fad88e71cf195e].)  But IN terms are now
used by virtual tables (as of check-in [3d65c70343]) so the restriction can
now be removed.

FossilOrigin-Name: a917c1f09254b54e03e31b119cc49c551269d82e

Allow an index to be used for sorting even if prior terms of the index
are constrained by IN operators.

FossilOrigin-Name: 98bf668ab1a8683b46ee8c94cb60f8215aabc517

Fix harmless compiler warnings.

FossilOrigin-Name: 4a7b4ee011fea911b981206c242e3d5553303b52

Add the ability to skip defining the localtime() function when being compiled for WinCE.

FossilOrigin-Name: e1640876df7ed6fb4e84292e5ce1f78635df64ab

Remove some debugging logic accidently left in the limit.test module.

FossilOrigin-Name: 7d346250e8a212880c4635a455cc9c98a1395c4c

Fix LIMIT and OFFSET so that they work and do not leak memory even on
complex queries involving deeply nested views of UNION ALL compounds.
Ticket [db4d96798da8].  Secondary to ticket [d58ccbb3f1b7].

FossilOrigin-Name: 497ee36cb8d07c936e6896135163c5cd7e94bdde

New debugging pragmas:  PRAGMA vdbe_debug=ON is short-hand for the sql_trace,
vdbe_listing, and vdbe_trace pragmas.  PRAGMA vdbe_debug enables tracing of
sqlite3VdbeAddOp() calls.  None of this is active unless compiled with
SQLITE_DEBUG.

FossilOrigin-Name: ae565ff3e0836b0cb45cc0ba7f27fa8cb2d21d77

Fix an issue with the SQLITE_TESTCTRL_EXPLAIN_STMT and compound queries with
multiple terms.

FossilOrigin-Name: a6499c2521637931661ed4d3afc4f96f91c69785

Issue an error message and quit (rather than overflowing a reference counter)
if the number of references to a table exceeds the maximum due to nested
UNION views.  Fix for ticket [d58ccbb3f1].

FossilOrigin-Name: c2462a95ed8e1e69886681400d673207d906bf1b

Cause the command-line shell to issue an error message if you give something
that does not look like a boolean value to a dot-command that wants a boolean
argument.

FossilOrigin-Name: b4d94947fc11bd63180cbc27554b3bbb60abe7ff

Add a single test case to fts4unicode.test to verify that title-case
maps to lower case.

FossilOrigin-Name: 955a9459dabad231aa8d6282676975ab7fba244e

Fix the test_spellfix.c extension so that it can be made loadable at run-time.
Add spellfix to the shell when building using the build-shell.sh script.

FossilOrigin-Name: 7813b17d8b9fe48ddc841fe1c4bb75f7747073de

Enhance the command-line shell so that adding a non-zero numeric argument
to the ".exit" command causes an immediate exit without cleaning up.  This
can be used (for example) to cause journal files to be left behind.

FossilOrigin-Name: 8ba951d1b76a0fb0ffd9bc6cec1be3ddba80538a

Add btree-page decoding logic to showwal.c.  Commands of the form:
"showwal $FILE 123bmc" show the content of the btree page in frame
123.  "b" means decode the btree.  "c" means show cell content.
"m" means give a map of the btree page.

FossilOrigin-Name: 93b159da5d2570946fdcd7da120bf7eb82b840f3

Further improvements to showwal.c:  Reset the checksum after each frame so that
only individual checksum failures are shown.  And only show failures, not
correct checksums.

FossilOrigin-Name: 4e2bf57549a8d50fc0993386c724eb4a2b35c9fe

Enhance the "showwal" utility program to show checksum failures on frames.

FossilOrigin-Name: a7f6d19816cbfc50060a9d1c0c402cdd23bd16de

Improved parsing of the arguments to the ".backup" command in the
command-line shell.

FossilOrigin-Name: f1127e87b90c7ba049404ec68cb4e99009c22185

Fix a double-free() call that can occur
when SQLITE_ENABLE_TREE_EXPLAIN is defined.

FossilOrigin-Name: 5bfb5967d70433bf41d39b57506b7ec167a1b6a0

Fix a typo in a comment in the test_regexp.c test file.

FossilOrigin-Name: 68346af70bc43baf791227a381e54f9aca802c72

The \xXX escape in the test_regexp.c must be followed by exactly two hex
digits.

FossilOrigin-Name: 82957495aa0729468a020c2a0a45ed60019b6e07

Enhance the query planner to exploit transitivity of join constraints.

FossilOrigin-Name: 38852f158ab20bb4d7b264af987ec1538052bec3

Improved error messages on the RTREE virtual table.  Make the "fs" virtual
table used for testing available on windows.

FossilOrigin-Name: c0b90d75a86b01f7fafec755cbe046c14d725341

Add the ability to disable transitive constraints using the
sqlite3_test_control(SQLITE_TESTCTRL_OPTIMIZATIONS) interface.

FossilOrigin-Name: 593d67c8b0908daf7a70b2a310ed85515d384cbf

Avoid unnecessary collating sequence and affinity restrictions on the use
of transitivity.  Add test cases to show that the restrictions are not
needed.

FossilOrigin-Name: 56549f45666b53876012df5c2bdf813474e10925

Make more aggressive use of transitivity in optimizing queries.  Add a test
case.

FossilOrigin-Name: d96762841a461e192fb2f317d684d000376350dd

Enhance RTree virtual table creation error messages that involve the getNodeSize() function.

FossilOrigin-Name: 652233d646236d3fbca629813b20d075f00f3ed6

Make the 'fs' virtual table module portable to Windows.

FossilOrigin-Name: dd473cae5b6ea02b73168b30365f0af5556ee24d

Improved comments explaining the operation of the findTerm() utility routine
in where.c.  Increase the maximum number of levels of transitivity from 4
to 11.

FossilOrigin-Name: fe152f8b048c9a18f99fa6096ff0e68dd630c318

Fix the activate_extensions pragma so that it is a no-op when the required
argument is omitted.

FossilOrigin-Name: 6195ebd83323eaad92a0aa095cce1094bf8e2ba6

Enhance the query planner to exploit transitivity of join constraints in
a multi-way join.

FossilOrigin-Name: 13171eb5dc19733276fbfd5515d75b70a9f5f5d7

Improvements to query planning for joins:  Avoid unnecessary calls to
"optimal scan" checks in cases where table reordering is not possible.
Make sure optimal scan checks are carried out for CROSS JOINs and LEFT
JOINs.

FossilOrigin-Name: d5ebb7877885839e93eee3b322624d4c4215c1c4

Fix a missing word in a comment.  Enhance the "wheretrace" debugging output
to show the estimated cost of each table option while planning the join order.

FossilOrigin-Name: ac4e119a87497f2e422ff1cb711112ed8594bfa9

Clarification to a comment in where.c.  No code changes.

FossilOrigin-Name: 04507c176330a06b09dcafa35ec0ca7498f5ace7

Add another test for the fts4 content= option.

FossilOrigin-Name: 7e6007a0002f6989bd489abeba8db52acb4a6854

Check in an extra test for the fts4 "content=" option. No code changes.

FossilOrigin-Name: 0d0e5ab8f16c890629ec1120c78168ef6be9e419

Fix an over-aggressive optimization of ORDER BY on a three-way join where the
second table is UNIQUE and the ORDER BY occurs on the third table.
Ticket [598f5f7596b0557].

FossilOrigin-Name: 5774f2175ce621dfc4b6b93f7ee13fd66f3ec2b9

Fix the date on the new orderby3.test test case.

FossilOrigin-Name: 7249bfc2ca57624d73f2be0197a9807c58463c48

Add a test case that demonstrates ticket [956e4d7f8958e7065f].

FossilOrigin-Name: 598f5f7596b0557b22f31e6643a59ff9096fd023

Do not raise an error if an unknown SQL function is found in a CHECK
constraint while parsing the schema of an existing database.

FossilOrigin-Name: cda790280a52d65f98a45bacb9123367b159ac7c

More bug fixes to the test_regexp.c module.  Bring test_regexp.c into alignment
with the regexp.c file in the Fossil sources.

FossilOrigin-Name: 7695b88fe0d73fd0a36fb7d8f95350b80615a89e

Remove superfluous text from a comment.

FossilOrigin-Name: e9ac5339603766c120c775bda8ae816d0ccb1503

Do not use umask() since it change the umask for the entire process, not just
the thread using SQLite.  Make whatever permission changes are needed using
fchmod() after the file is created, instead.

FossilOrigin-Name: 6c4c2b7dbadedac384d380efd54f12f6ccbf4ca9