[4088fd] Moved option code range check to the parser, freeing INTEGER tokens

[master] Merge remote-tracking branch 'github/master'

Merged in change made to GitHub for ticket trac4111.

[master] Finished merge of trac4060a (Kea multi-threaded)

[master] Merged trac4060a (Kea multi-threaded)

[4095] Implemented new classes for storing client class definitions

src/lib/dhcpsrv/client_class_def.cc
src/lib/dhcpsrv/client_class_def.h
src/lib/dhcpsrv/tests/client_class_def_unittest.cc
    New files that define client class storage classes and tests

src/lib/dhcp/classify.h
    Amended commentary to reflect how these classes are now being used.

src/lib/dhcp/option.h
    Added typedefs:
        boost::shared_ptr<Option> OptionPtr;
        boost::shared_ptr<OptionCollection> OptionCollectionPtr;

src/lib/dhcpsrv/Makefile.am
    Added entries for new files

src/lib/dhcpsrv/tests/Makefile.am
    Added entries for new file

src/lib/eval/token.h b/src/lib/eval/token.h
    Added typedef:
        boost::shared_ptr<Expression> ExpressionPtr;

[3601] Addressed review comments, added ability to downgrade

Several minor cleanup items based on review comments.  Implemented
support for downgrading files from newer schema versions:

doc/guide/admin.xml
    amended text on upgrading memfile to discuss downgrading

src/lib/dhcpsrv/dhcpsrv_messages.mes
src/lib/dhcpsrv/lease_file_loader.h
    revamped log messages to accomodate downgrading

src/lib/dhcpsrv/memfile_lease_mgr.cc
src/lib/dhcpsrv/memfile_lease_mgr.h
    added commentary to MemfileLeaseMgr ctor
    automatic conversion logic accomdates both upgrading and downgrading

src/lib/dhcpsrv/tests/csv_lease_file4_unittest.cc
src/lib/dhcpsrv/tests/csv_lease_file6_unittest.cc
    replaced tooManyHeaderColumns test with downGrade test

src/lib/util/csv_file.h
src/lib/util/csv_file.cc
    added CSVRow::trim()

src/lib/util/tests/csv_file_unittest.cc
    added CSVRow.trim test

src/lib/util/tests/versioned_csv_file_unittest.cc
    added VersionedCSVFileTest.currentSchemaTest test
    replaced tooManyHeaderColumns test with downGrading test
    revamped tests to check  getInputSchemaState() and needsConversion()

src/lib/util/versioned_csv_file.h
    Updated commentary to describe downgrade support

src/lib/util/versioned_csv_file.cc
    enum InputSchemaState
    input_schema_state_
    input_header_count_
    getInputHeaderCount()
    getInputSchemaState()
    needsConversion()

    next(CSVRow& row) - now supports downgrading rows
    validateHeder() -  now throws if called when no schema has been defined,
    and supports downgrading rows

[4106] Added IPC tests for invalid number of DHCPv4 query options.

[4106] Improved IPC handler functions for DHCPv4 and DHCPv6 server.

[4106] Additional checks on packet received over the IPC in the test.

[4106] Added unit test for the DHCPv6 IPC endpoint.

[4106] Implemented test for the DHCPv4 endpoint of DHCPv4o6 IPC.

[4106] Test IPC class moved to a common library.

[4106] Throw exception from IPC for out of range port.

[4106] Represent DHCPv4o6 endpoint with enum.

[4106] Improved documentation of the base IPC class.

[4088fd] Added number unit tests

[4106] Allow for transmitting vendor option in the DHCPv4o6 message.

[3259] Changes after review

1. Updated Kea guide to note that removing the hooks-libraries
   configuration element does not always have the expected effect.
2. Moved some documentation from the dhcp_parsers.cc file to the .h file.
3. Expanded checking of the contents of the hooks-libraries configuration
   element.

[4088fd] Added more new unit tests

[4088fd] Added hexstring parsing unit tests

[4106] Added a set of tests for sending message over IPC.

[4088fd] Assume the parser produces only well typed expressions

[4088fd] Split the syntax into untyped/typed

[4088fd] Added some parser unit tests

[4088fd] Fixed error handling

[4088fd] Added substring parsing

[4088fd] Fixed most of C++ problems

[4088fd] Renamed file to file_

[4088fd] Regenerated flex/bison

[4088fd] Moved option from scanner to parser

[4088fd] Regenerated flex/bison

[4088fd] Added hexstring support

[4088fd] Regenerated flex/bison

[4088fd] Added new eval_context_decl.h include

[4088fd] [4088fd] Fixed namespace

[4088fd] [4088fd] Updated lexer.cc to flex 2.5.39

[4088] Finished merge of trac4091 from master

[master] Updated git hash

[master] Finished merge of trac4091 (hex strings)

[master] Merged trac4091 (hex strings)

[4091] Changed to require at least one hexdigit

[4088] spelling

[4088] Miscellaneous edits to the developer documentation

[4088] Trivial fix to make it compile

[4088] Some trivial fixes

[4094] Addressed comments (comments, complex test)

[4091] Addressed comments (0x prefix, deciding in constructor)

[4091] Better odd check

[4091] Missed changes

[4088] Exceptions added.

[4088] General smallish improvements in evaluation code

[4088] Unnecessary makefile rule removed.

[4088] Developer's guide written

[4088] Bison version is now detected during configure.

[trac4094] Fix some typos during the review

[4106] Throw exception of the packet sent over IPC is invalid.

[master] Updated git hash

[master] Finished merge of trac3927 (default in option-def)

[master] Merged trac3927 (default in option-def)

[4106] Added new exception Dhcp4o6IpcError.

[3927] Fixed typo in previous change

[4106] Added additional tests for opening and closing IPC.

[3259] Corrected a typo.

[3927] Addressed minor comments

[4094] Added evaluate() unit tests

[4094] Added evaluate function

[4116] Define EvalNotBoolError

[3601] Added discussion of memfile lease file upgrading to admin guide

[3601] Added unit tests for automatic LFC upgrade

src/lib/dhcpsrv/tests/memfile_lease_mgr_unittest.cc
    Added two new unit tests to verify lease file upgrade
    via automatic LFC invocation:
        TEST_F(MemfileLeaseMgrTest, leaseUpgrade4)
        TEST_F(MemfileLeaseMgrTest, leaseUpgrade6)

[3601] Memfile_LeaseMgr now runs LFC automatically if lease files need upgrading

Memfile_LeaseMgr loads the lease files during instantiation. If it detects
that any of the files loaded are out of date, it will invoke LFC directly,
whether or not LFC is enabled.

src/lib/dhcpsrv/dhcpsrv_messages.mes
    added two new log messages:
        DHCPRSV_MEMFILE_UPGRADING_LEASE_FILES
        DHCPSRV_MEMFILE_NEEDS_UPGRADING

src/lib/dhcpsrv/lease_file_loader.h
    LeaseFileLoader::load() - emits DHCPSRV_MEMFILE_NEEDS_UPGRADING log
    when an out of date file is detected

src/lib/dhcpsrv/memfile_lease_mgr.cc
    LFCSetup::setup() - added run_once_now parameter, which causes the
    method to invoke the LFC callback immediately, regardless of the value
    of LFC interval.
    Memfile_LeaseMgr::Memfile_LeaseMgr() - added logic to track if
    files loaded need upgrading and pass that into lfcSetup()

    Memfile_LeaseMgr::loadLeasesFromFiles() - change to return a boolean
    true if any of the files loaded need upgrading.

    Memfile_LeaseMgr::lfcSetup() - added upgrade_needed parameter, which
    is passed through to LFCSetup::setup() as "run_once_now"

[3601] Added methods to VersionedCSVFile for tracking when updating is needed

src/lib/util/csv_file.h
    Made recreate() virtual

src/lib/util/versioned_csv_file.h
src/lib/util/versioned_csv_file.cc
    Added several methods to VersionedCSVFile:

    getValidColumnCount() - returns number of valid columns in header

    recreate() - wraps base class method, ensuring valid column
    count gets set to number of defined columns for new files

    needsUpgrading() - returns bool true if file schema is out of date

    getInputSchemaVersion() - returns schema version found in file

    getSchemaVersion() - returns current schema version

    getVersionedColumn() - returns the column definition for a given index

src/lib/util/tests/versioned_csv_file_unittest.cc
    Added checks for new methods to existing tests

[4091] Implemented, need tests

[4091] Renamed main (cf #4114)

[4060a] Cleaned up (partially, i.e., keep ugly but working code)

Merge branch 'trac4090'  Add support for OptionSubstring to the eval code

[trac4090] Update per second set of review comments

Remove change log entry as it isn't needed

Update eval log description in user guide.

[trac4090] Add the forgotten eval_log.c and eval_log.h files

[trac4090] Setup logger for eval

[trac4090] Update per review comments.

Update per the review comments except for the logging
stuff which will be done next.

[3601] CSVLeaseFile4 and CSVLeaseFile6 now derive from  VersionedCSVFile

src/lib/dhcpsrv/csv_lease_file4.h
src/lib/dhcpsrv/csv_lease_file4.cc
    - CSVLeaseFile4 now derives from VersionedCSVFile
    - initializes schema metadata not just column names
    - uses VersionedCSVFile methods rather than CSVFile methods

src/lib/dhcpsrv/csv_lease_file6.h
src/lib/dhcpsrv/csv_lease_file6.cc
    - CSVLeaseFile6 now derives from VersionedCSVFile
    - initializes schema metadata not just column names
    - uses VersionedCSVFile methods rather than CSVFile methods

src/lib/dhcpsrv/tests/csv_lease_file4_unittest.cc
    - Added new unit tests:
    TEST_F(CSVLeaseFile4Test, mixedSchemaload)
    TEST_F(CSVLeaseFile4Test, tooFewHeaderColumns)
    TEST_F(CSVLeaseFile4Test, invalidHeaderColumn)
    TEST_F(CSVLeaseFile4Test, tooManyHeaderColumns)

src/lib/dhcpsrv/tests/csv_lease_file6_unittest.cc
    - Added new unit tests:
    TEST_F(CSVLeaseFile6Test, mixedSchemaLoad)
    TEST_F(CSVLeaseFile6Test, tooFewHeaderColumns)
    TEST_F(CSVLeaseFile6Test, invalidHeaderColumn)
    TEST_F(CSVLeaseFile6Test, tooManyHeaderColumns)

[3601] Added isc::util::VersionedCSVFile

src/lib/util/versioned_csv_file.h
src/lib/util/versioned_csv_file.cc
    New files which implement VersionedCSVFile, CSV file which can
    support mulitple schema versions

src/lib/util/tests/versioned_csv_file_unittest.h
src/lib/util/tests/versioned_csv_file_unittest.cc
    new files for Unit tests for VersionedCSVFile

src/lib/util/Makefile.am
    added new files

src/lib/util/csv_file.cc
    includes read error message if header fails to validate

src/lib/util/csv_file.h
    removed @todo for 3626, no longer applicable

src/lib/util/tests/Makefile.am
    added versioned_csv_file_unittest.cc

[master] Fixed 4o6subnetInterfaceId for not 64 bit machines (from hackathon94)

[master] Use LeaseMgrFactory::instance() rather than constructor.

This fixes issues reported by the coverity scans recently.

[4106] Cleanup in the DHCPv4o6 IPC class.

[4106] Improvements and comments to the DHCPv4o6 IPC tests.

[4106] Added unit test for the DHCP4o6 IPC.

Merge branch 'trac4111'

[4111] constify

[4111] Added an emptyOptionData unit test

[4111] Style in checkEmpty

[3927] Added a defaultSpaceOptionDefTest unit test

[3927] Fixed spurious 4 in DHCPv6 guide

[4111] added a test case for an empty Option6AddrLst.

also renamed a local variable to coform to coding guideline (don't use
the camel style for variables)

[master] AUTHORS updated after recent changes.

[master] Merge branch 'trac4105' (4o6 configuration parameters)

[4105] Grammar fixed.

[4105] config parser now uses getOptionalParam() methods.

[4105] Changes after review:

 - getters/setters implemented in Cfg4o6.
 - extra space removed.

[4106] Changed to use the private options

[4106] Ported DHCPv4-over-DHCPv6 IPC code from fd4o6 private branch