Remove normalisation call from proto_radius_auth.c

As discussed. It's bad to mix internal attribute processing with protocols.

The normalisation could be applied equally well to many protocols, and rlm_pap and rlm_chap will do their own normalisation without mangling the existing attributes in the request.

Fix Auth-Type checks in rlm_pap and rlm_chap

They were looking in the wrong list, and the output should not have been an error

PAP no longer checks for input password hashes, so we need to work around that in tests that remove &control:Cleartext-Password

Password should be const in fr_radius_encode_chap_password

Provide length of the match in prefix search functions

more compiler fixes

pbkdf2 isn't always built

cleanups and use common includes

Update 'check.doc' target to save the input as parameter

The list of expected missing xlat's calls should be versioned
in scripts/checks/missing-xlat-doc.txt

move to table lookups instead of if / then / else

shut up compiler

use known array size instead of anything else

use pointers in table, instead of ints & a switch statement

Add missing config options in raddb/

It helps #2919 involving the modules:

rlm_cipher
rlm_eap
rlm_ldap
rlm_lua
rlm_mschap
rlm_passwd
rlm_radius
rlm_redis_ippool

call password_normalise()

so that we don't do all that work ourselves.

load simple things first

We can later add checks that new dictionary entries are NOT
added after some point.  Otherwise the server fails with
"unknown attribute" error, instead of "attribute definition
is too late"

new attributes MUST be define in the "bootstrap" phase

use consistent names

so `git grep` finds things

call password_normalise()

which then means we don't need to loop over the attributes ourselves

call password_normalise(), just in case

call password_normalise() instead of doing it ourselves

add server_init() and server_free()

so that src/lib/server/ can be initialized all at once.

And the callers then don't need to have a list of init/free
functions

add password_normalise() which normalises all passwords

Add missing config options in raddb/

It helps #2919 involving the modules:

rlm_attr_filter
rlm_cache
rlm_rest
rlm_sometimes

Let the PAP module normalize passwords

No, we do NOT want it to fail if there's no User-Password
in the request.  Instead, we want it to do stuff

remove warning which is now in proto_radius_auth

we don't need User-Password here.

 rlm_lua: Remove unused options (#2929)

* rlm_lua: Remove unused options

* rlm_lua: The correct should be 'fr.requests'

added documentation for the CHAP module

typo

don't be retarded.  Use a percentage.

Who was the idiot who wrote that code?

Copy "normalise password" code from rlm_pap to proto_radius_auth

Instead of having this code in multiple modules, just have it
once in proto_radius_auth.  That way it runs just before the
"authenticate" section.

And, it ALWAYS runs.  If people delete the "pap" module from
"recv Access-Request", then everything still works.

don't normalize passwords

it should be done elsewhere

rlm_lua: Clean up (#2926)

* rlm_lua: Clean up

* rlm_lua: Clean up related to 9bc7d44921

rlm_rest: Clean up (#2928)

un-break CHAP module

If there's no "known good" password, we still set Auth-Type = CHAP,
because that's the only thing which cam be done.  We issue a
warning, but we hope that a subsequent module will do the right thing

typos

add more documentation

It helps to print out "Ready to process requests"

more cleanups and rearrangement

more cleanups and split authentication into its own page

cleanups and typos

Use cf_table_parse_ctx_t structure instead of passing in the table directly Closes #2925

No enum name needed

radsqlrelay systemd watchdog (#2922)

* radsqlrelay: Clean up strict and warnings pragmas

The modules we use are clean so ensure that these pragmas apply to
includes.

* radsqlrelay: Add support for systemd watchdogs

systemd can terminate (and restart) the service if it stops providing
watchdogs for a defined interval.

* radsqlrelay: Don't get stuck processing the same broken SQL statements

If the file contains a broken SQL statement then it is continually
retried with a 1 sec delay.

Restarting the radsqlrelay will replay the entire file (which could get
stuck even earlier due to duplicate key fields).

We instead continue when we encounter a failing statement unless the
failure was the result of a database disconnect in which case it is
resumed once the connection is available.

doc: typos and small fixes

doc: install & upgrade on the intro page

cherry pick text from #2921

doc: move 'upgrading' to 'install & upgrade' section

doc: start splitting up install document

doc: update dependencies page

doc: move build dependencies to installation section

doc: move installation to new 'install & upgrade' section

Move stupid perl hack to where it should be

Not you...

Add back source files that should not have been removed

This reverts commit 4e6df7bd9827452339bd3e8f7f219f49715536f2.

rearrange, reformat, and do word smithing

many small pages is better than few large pages

these files should not have been committed

I went up the mountain, and wrote the wisdom I received

improve "how to build docs"

fix ldap config example

{cleartext} is not interpreted by OpenLDAP

more memory checks

free memory on error

allow match operator in regex, e.g. foo =~ m,bar,

which is sometimes nice to use.

move check regex flags to after we create the map

change "allow_regex" to "require_regex"

which more closely matches our use-case

and pass the correct flag to tmpl_preparse()

use correct data type

rename variables

move code to separate functions

which makes the flow of the parser easier to understand

login attempts are messages, not errors

We should quote ${...} feature expansions

Otherwise when the feature is turned off, we start with:

if (${feature} == 'no')

and end up with

if ( == 'no')

Which is bad.

The old conditional parser accepted it, which is arguably wrong.
The new one is a bit smarter, and is more picky.

make condition call tmpl_preparse()

which remove substantial amounts of code from the condition
parser

add "len" to tmpl_from_attr_substr()

so that we can call it on pre-parsed data, and so that it
doesn't do strlen()

tmpl_afrom_str() now calls tmpl_from_attr_substr

instead of tmpl_from_attr_str()

Because the tmpl_from_attr() functions don't take or respect
'inlen', which means that they parse too much.

add tmpl_preparse()

Which pre-parses a string based on various criteria.
The caller gets told what kind of string it is, and what
parameters should be passed to tmpl_afrom_str()

add a list of all data types

Remove som references to fr_pair_cursor

doc: fix link

Merge man/man5/rlm_$mod & raddb/mods-available/$mod (#2917)

* Remove man/man5/rlm_idn.5

* Remove man/man5/rlm_digest.5

* Remove man/man5/rlm_sql.5

* Merge rlm_detail.5 with raddb/mods-available/detail

The 'man/man5/rlm_detail.5' is not necessary anymore.

* Merge rlm_counter.5 with raddb/mods-available/counter

The 'man/man5/rlm_counter.5' is not necessary anymore.

* Merge rlm_expr.5 with raddb/mods-available/expr

The 'man/man5/rlm_expr.5' is not necessary anymore.

typos

link to the main page

Merge rlm_mschap.5 with raddb/mods-available/mschap

The 'man/man5/rlm_mschap.5' is not necessary anymore.

Merge rlm_passwd.5 with raddb/mods-available/passwd

The 'man/man5/rlm_passwd.5' is not necessary anymore.

Merge rlm_unix.5 with raddb/mods-available/unix

The 'man/man5/rlm_unix.5' is not necessary anymore.

Merge rlm_chap.5 with raddb/mods-available/chap

The 'man/man5/rlm_chap.5' is not necessary anymore.

MySQL queries.conf: Use expansions consistent with those of other drivers

PostgreSQL queries.conf: Fix typo in expansion

Oracle: Remove references to non-existent X-Ascend-Session-Svr-Key

MSSQL: Remove references to non-existent X-Ascend-Session-Svr-Key

SQLite queries.conf: Simplify using expansions

PostgreSQL queries.conf: Simplify using expansions

Oracle queries.conf: Simplify using expansions

MySQL queries.conf: Simplify using expansions

MSSQL queries.conf: Simplify using expansions

Cassandra queries.conf: Simplify using expansions

Cassandra queries.conf: Increase post-auth logging precision

Timestamps are stored with millisecond precision.

Oracle queries.conf: Use Event-Timestamp rather than %S

Oracle schema.conf: Special handling of empty strings

Be forgiving of fields that might contain empty strings which Oracle conflates
with NULL!

Oracle schema.conf and query.conf: Increase post-auth logging precision

Switch to microsecond precision on timestamps.