rose: pick up more prefix->lookaround conversions

rose build: dedupe hasLastByteHistorySucc func

eod: move stream eod code to stream.c

eod: tidy up, rename to roseStreamEodExec

block: unify roseBlockExec and roseBlockExec_i

block: move matcher invocations into functions

rose: inline block-mode eod check

roseEnginesEod: trust the queue structure

roseSuffixesEod: trust the queue structure

eod: retire getELiteralMatcher

rose_build_bytecode: clean up

eod: tidy runtime

move eod iter program into general eod program

eod: move hwlm execution into MATCHER_EOD instr

rose_build_bytecode: tidy up addPredBlocks

eod: more suffix iteration into program

eod: remove forced sparse iter optimization

eod: don't force sparse iter for general prog

eod: consolidate eod anchor programs

eod: move engine checks into ENGINES_EOD instr

eod: stop passing both scratch and state around

Only omit frame pointers on 32bit release builds

Frame pointers are very useful for debugging and testing, and only
really make a difference to performance on IA32.

fdr: remove unused typedef 'ConfirmIndex'

fdr: use braced init syntax for pairs

teddy compile: rename loop var for readability

TeddySet: doesn't need a reference to lits

fdr_confirm_compile: clean up debugging code

teddy_compile: modernise

fdr_compile: tidy up

fdr_streaming_compile: modernise loops, etc

fdr/teddy: switch over remaining smart ptrs

setupFullMultiConfs: return smart ptr

setupFDRFloodControl: return smart ptr

fdr_confirm_compile: clean up for loops, iterators

fdr_confirm_compile: typedef -> using

fdr_confirm_compile: use smart ptrs

fdr_compile_internal: remove unused decl

getFDRConfirm() is static.

unit: make multiaccel tests deterministic

Use a PRNG, not rand().

rose: eagerly report EOD literal matches

Where possible, eagerly report a match when a literal that matches at
EOD occurs, rather than setting a state bit and waiting for EOD
processing.

ng_equivalence: reduce compile time on large cases

use edge index to avoid assoc property maps

rose: parameterise CHECK_LIT_EARLY

rose: make assignGroupsToLiterals a free function

rose: make assignGroupsToRoles a free function

rose_build_groups: move findGroupSquashers

rose_build_groups: move getGroups, getSuccGroups

rose_build_groups: move assignGroupsToRoles

rose_build_groups: move assignGroupsToLiterals

rose: elide SET_GROUPS when possible

rose: Do HWLM advisory masks as a complete pass

rose: linear scan for lookaround during build

This allows us to reuse more lookaround entries in the bytecode.

Provide access to scratch in queues

This largely reverts commit f8ecf33236b0695d9539e8e34cf0bb0467614cdf.

Prevent trying to build smallwrite engine for large cases

use the correct way to refer to void *

UE-2963: be more aggressive in using buildSufPQ_final()

exhaust: move functions to report.h

rose: dump leftfix/suffix queue indices

fix add_to_engine_blob for iterator=pointer

fix iter_wrapper for iterator=pointer

Merge branch develop into master

Bump version number for release

changelog: updates for 4.2 release

docs: more detail on option setting

doc: correct syntax for "extended" option setting

Extended syntax (ignore whitespace) is controlled with (?x) and (?-x).

rose: always push CHECK_BOUNDS onto end of program

rose: fix CHECK_NOT_HANDLED placement bug

The CHECK_NOT_HANDLED instruction was being inserted into an already
partially-flattened program, which would result in jump offsets becoming
incorrect.

This change places it as part of the normal flow of program
construction, which avoids this issue.

cmake: invoke the compiler to test arch features

We require SSSE3, and optionally support AVX2, and the best way of testing
the compiler and compile flags is to run the compiler.

We need an immediate so use intrinsic directly

debug printf: Windows path separator

vbs: the static array has C linkage

masked move: C linkage

Win32 ctz and clz

popcount: use intrinsics and restructure defines

fdr: teddy.h does not need to include hwlm.h

fdr: remove dead function decls from teddy.h

pkgconfig: Add Libs.private for static linking

cmake: fix optimise define

install .dll to bin/, not to lib/

Combine struct elements to avoid inheritance

The multiple inheritance here was slightly overkill, and it also appears to
trigger a MSVC bug when writing through the pointer to member.

fdr: ensure 16 bytes of pre-history in block mode

ucp_table: clean up make_caseless

ucp_table: don't always deref rv of lower_bound

Fixes a warning from asan.

teddy: remove python codegen, refactor code

Major cleanup of the Teddy runtime code. Removes python code generation,
splits AVX2 models into their own file, improves readability.

unit-internal: fix FDR issues reported by ASan

FDR's streaming mode now assumes that it is safe to read 16 bytes before
the end of the history buffer, and this was not reflected in the unit
tests.

scratch: don't leave in use after hs_clone_scratch

Also updated unit tests to always check hs_alloc_scratch()'s return
value.

ue2string: fix broken function type in upperString

Silences warning from ubsan.

unit: clean up getValidFdrEngines()

unit: fix bug in teddy model unit tests

Fix for multiaccel matcher unit test

Test was failing on 32-bit OS with AVX2

doc: add description of serialization, runtime lib

doc: clean up discussion of scratch space

doc: update copyright dates

fdr_streaming_runtime: include <string.h>

Required for use of memcpy().

runtime: add error for "scratch in use"

This commit adds the HS_SCRATCH_IN_USE error, which is returned when
Hyperscan detects that a scratch region is already in use on entry to an
API function.

restore ability to ignore common preds for merges

Check for common preds was broken during refactoring in b9c5d65:
    Rework literal overlap checks for merging engines

fdr: confVal load can be unaligned

remove unused parts of fdr_loadval

fdr: Remove python codegen, add safezones

add m128 byte shift functions

variable_byte_shift_m128 taken from pug-interpreter branch

fdr: don't include fdr.h if not necessary