ci: test --outdir

runner: more detail when shell check fails

smtp/rfc2231: lock min version at 7

dataset tests: use args instead of full command

All these tests were using a full command to set the --data-dir
argument. Instead just the default command be used but add an
addition --data-dir argument.

datasets-06-state-long: fix file compare

Different versions of sort will sort differently. So
sort the expected data as well before comparing it
with sorted output.

dataset-06-state-long: add test on learning dataset

Test that suricata can learn a set of 1200 DNS rrname and store
correctly the result on disk.

Adds test for SMTP with RFC2231

ie attachment filename split over multiple sections

Fixes mqtt unassgined test

There is only one occurence of mqtt.msgtype == 0
So there should be only one alert

asan: error out on memory leaks

Adds a hostname check to http-ipv6 test

Adds test with http over IPv6

and absence of anomalies

github-ci: run check-eve.py standalone

So check-eve is fully tested as well.

runner: only validate eve if jsonschema is available

We can only validate eve output if the jsonschema Python module
is available. Instead of requiring it at this time, print out a
warning and skip the test.

check-eve: print full filename being tested

With check-eve it makes more sense to print the full filename
being tested rather than just the test name.  As it is possible
that more than the expected eve.json is being tested.

github-ci: add python3-jsonschema

Required for the EVE schema tests.

run.py: integrate check-eve.py

check-eve: script to validate eve.json output

schema.json: schema to validate eve.json output

lua: adds test about ScFlowVarGet

cf redmine 2094

framework: allow to use env variables in args

such as OUTPUT_DIR for datasets

Adds test with dataset and pcrexform for unique param

tls-fingerprint: test sticky buffer variant

Add another rule and filter to test the sticky buffer variant
of a tls fingerprint match. Also shows that the 2 are more or
less equivalent.

Adds test about HTTP2 disabled

tests: fix http-urldecode-body test on openbsd

Tshark rewrite of the pcap, turning timestamps from nanosecond
to microsecond.

tests: fix fastopen test on openbsd

Just rewrote it with:

tshark -F pcap -r <old> -w <new>

This changed the md5sum, so something changed.

OpenBSD 7.0 reported caplen of 0.

tests: fix pcapng pcaps

ci: fix pcapng check on ubuntu

runner: fix tests always being run in quiet mode

Fix an early return introduced in
9839097b816d2f7e1cb00d4f4e98919565d122a1, which resulted in a quiet like
mode all the time.

tests: convert check.sh to test.yaml

Adds tests about IPv6 fragmentation

modbus: enable in configuration

smb-eicar-padding: bump min-version to 6

smb-eicar-overlap: bump min-version to 6

krb5-probing: bump min-version to 6

issue-3703: bump min-version to 6

ssh: fix alert count

github-ci: add pcre2

Use generic PCRE string for error code checking

pcrexform: test becomes obsolete in version 7

converted to a unit test failing to load the signature

tests: enable issue 4663 tests for 5 and 6

Sets minimum version 6 for ip6 invalid fragment length

Ads various tests about IPv6 denial of service

Adds test about IPv6 smurf detection

aka (spoofed) ping to multicast

Adds test about ICMPv6 kill router

Adds test about ipv6 unknown dst opts

used as way to have a covert channel

Adds test about icmpv6 type and code detection

Adds test about tcp protocol detection bailout

Add test for Bug #4503

run.py: remove support for check.sh

ci: run in quiet mode

ci: give jobs better names

ci: add lua to the ubuntu builds

ci: add almalinux build to test on RHEL-like systems

The test is done on Ubuntu, but there are some variations
between RHEL-like and Ubuntu that we should catch.

Adds http2 range test

Adds http range test over multiple flows

Adds incomplete test for http range file

lua: fix ua-scfileinfo on 5.0.x w/o NSS

filestore-stream-depth: fix test for 6.0.x

lua/fileinfo: match script and expected output

tests: add test for lua SCFileInfo

Prep for using lua's pushinteger function in SCFileInfo callbacks

tests: add test for lua's SCRuleIds function

tests: add test for SCFlowStats function

tests: add lua SCPacketTuple test

tests: add lua SCFlowTuple test

tests: add bug 4663 and 4670 tests

runner: add --quiet option

With --quiet each successful test won't be output, instead
just failed tests, the final summary and maybe some other
useful diagnostic info.

Quiet will also suppress skipped tests from being printed.

tests: fix tests for suricata <=6

Adds a test about IPv6 fragment invalid length

Adds http.header on HTTP2 traffic check

Adds http.header_names on HTTP2 traffic check

Adds http.host on HTTP2 traffic check

http2: upgrade transforms Host into :authority

Adds test about http2 deflate decompression

tests: add issue 3703 test

tests: updates after fixing issue 3703

Better checks for file deletion over SMB2

Adds test about file deletion over SMB2

requires: document per-check requires with a test conversion

runner: use same require checks in filters as main test

Re-use the requirements checking code from the test case in the
per-test filters.  This means all requirements like lt-version,
etc are available at the filter level.

runner: remove 'config' requires

This is not used, and not documented and did have a spurious
debug line.  I think it was an unfinished prototype that
never got used.

file-compare: skip file-compare tests on Windows

These should work, but it looks like there is a path issue,
so skip these tests on Windows until it can be fixed.

output-tcp-data: use file-compare in test.yaml

run: convert cmp tests to python

readme: example of file-compare check

tests: add file-compare test

tests: add test for issue 4394

decode/vntag: 6.0.3+ backport support

tests/vntag: Basic test case for VNTAG decode

mqtt: add suricata.yaml enabling MQTT for testing

threshold-config: New test for issue in 2190

This commit adds a test case for large IP address handling in the
threshold.config file.

Make HTTP2 test work on version 6

test/mqtt: add sid to mqtt-binary-message rule

mqtt-binary-message: add sid to rule in test.rules

Adds check about ssh bypass

Adds test about ftp epsv response parsing

modbus: add test cases

Add tests for modbus logging and alerting.

http2: fix for suricata 6

Adds check for http.cookie keyword on http2 traffic

Adds check for http.host.raw keyword on http2 traffic

Adds check for http.method keyword on http2 traffic

Adds check for http.server keyword on http2 traffic