Merge branch 'dev' of github.com:facebook/zstd into dev

updated dict graphs to 2D mode

Merge pull request #685 from terrelln/squashfs-bench

[kernel] Update README with SquashFS patch

[kernel] Update README with SquashFS patch

Take patch from PR #682 by @iburinoc and update benchmarks.

updated programs/README.md, to introduce compilation variables

make it possible to enable/disable features individually

reorganized Makefile for multiple targets

added xzstd4 target

support for all formats, xz/lzma/lz4 included

fixed xzstd

--format=xz was missing a break, making the execution continue into lz4 error message

Merge branch 'dev' of github.com:facebook/zstd into dev

updated DSpeed chart to remove 3D effect (#589)

Merge pull request #684 from terrelln/btrfs-init

[btrfs] Update patch to use ZSTD_init{C,D}Stream()

[btrfs] Fix typo in pr_warn() message

[btrfs] Update patch to use ZSTD_init{C,D}Stream()

updated NEWS for v1.2.0

Merge branch 'dev' of github.com:facebook/zstd into dev

Merge pull request #683 from terrelln/odev

[CLI] Make cover the default dictionary builder

[CLI] Switch dictionary builder on CLI to cover

[cover] Make optimization faster

[cover] Optimize case where d <= 8

Fix typo in zdict.h

Fix LZ4_MSG in xzstd

minor code refactoring for clarity

fixed const in prototype, that Visual doesn't accept

sync bitstream.h from fse library

Merge branch 'dev' of github.com:facebook/zstd into dev

sync bitstream from FSE project

add assert into unsafe *_fast() variants

minor code refactoring

clearer tables

added HUF_PUBLIC_API macro to huf.h

to make it possible to control symbol visibility.
Also : better separation and comments between "public" and "static" sections

Merge pull request #680 from iburinoc/sqfs-kernel

SquashFS linux kernel patch

Merge pull request #678 from facebook/apiChange

Breaking API Change around CDict

minor release note update

Changed default level 18 (large input)

Previous -18 : 4.7 MB/s, R:3.833
New -18 : 5.1 MB/s. R:3.825

It's a better fit within -17 (6.8 MB/s) and -19 (4.0 MB/s)
The new level 18 also uses significantly less memory.
And, it makes a good transition between level 17 (mml5)
and level 19 (mml3).
Up to now, there was no level with mml4.

(note : minmatch setting can have a large impact on some (specific) datasets)

Merge branch 'dev' of github.com:facebook/zstd into dev

tests : -g is part of DEBUGFLAGS

Fix missing squashfs_finish_page's

Fix case where pages run out before end of stream

Merge pull request #679 from terrelln/dev

[kernel] Rename ZSTD_create*() to ZSTD_init*()

shortened Appveyor release tests

fuzzer supports time suffix `s` for "seconds"

Added a secondary test, checking dictID presence after setting noDictIdFLag=1

SquashFS linux kernel patch

added test for ZSTD_initCStream_usingCDict_advanced()

added test for ZSTD_compress_usingCDict_advanced()

removed C4204

fixed another VS2008 init error

fixed init error on Visual 2008

bumped version number to v1.2.0

updated NEWS

Merge pull request #677 from terrelln/pzstd-tests

[pzstd] Add logging statements to tests

added ZSTD_initCStream_usingCDict_advanced()

created ZSTD_compress_usingCDict_advanced()

[pzstd] Add logging statements to tests

fixed compilation warning : declaration-after-statement

Changed ZSTD_createCDict_advanced()

It now only uses compressionParameters as argument.
It produces many changes throughout user code,
though hopefully they tend to be simple :
just provide the cParams part from existing ZSTD_parameters.

Some programs might depend on ZSTD_createCDict_advanced() to pass frame parameters.
This change will force them to revisit this strategy and fix it,
since frame parameters are effectively silently ignored in current version.

changed ZSTD_compressBegin_usingCDict()

No longer takes `pledgedSrcSize` as argument
this is in line with similar functions ZSTD_compress_usingCDict()
and ZSTD_initCStream_usingCDict().

Merge pull request #670 from facebook/smallCCtx

Small cctx

Merge pull request #675 from iburinoc/lz4

Fix LZ4 wrapper deprecation warnings

Rename ZSTD_create*() to ZSTD_init*()

Comply with suggested comments by @terrelln

created FSE_CTABLE_SIZE() and FSE_DTABLE_SIZE()

Fix LZ4 wrapper deprecation warnings

Merge pull request #674 from niXman/dev

unchecked argv[idx] access

Merge pull request #673 from iburinoc/lz4

Add LZ4 compress/decompress support to CLI

unchecked argv[idx] access

Make lz4 compression/decompression compatible with library r123

Add LZ4 compress/decompress support to CLI

cli : add support for --threads=# command

updated documentation
add relevant test case

ignore more cmake build artefacts

Merge pull request #669 from ligfx/friendlycmake

CMake improvements when embedding in another project

transferred entropy scratch space from CCtx into workSpace

Saved 6 KB

made some room for entropy scratch space

transferred FSE tables from CCtx into workspace

Saved 5 KB from CCtx

made room in workspace for FSE tables

still need to be transferred from CCtx into workspace

CMake: don't modify global C_FLAGS and CXX_FLAGS

CMake: don't recheck compile flags every time

Doesn't cause a problem when embedded within a larger project, but is
annoying.

CMake: various configure_file fixes to use CMAKE_CURRENT_SOURCE_DIR

CMake: namespace modules and set CMAKE_MODULE_PATH

changed size evaluation of entropy tables

so that memcpy() does no longer depends on fse pointer being a static table

init entropy table pointers only once

per workSpace resize

reorganized ZSTD_resetCCtx_internal()

clearer separation between variables and buffers
clearer buffers category
kept static buffers at the beginning, favoring cache locality
(it will be easier to add FSE tables there later)

This break a few assumptions that hashTable was always at the beginning.
This is fixed.
And remaining assumptions (namely that tables stand next to each other in memory)
are now tested with assert.

CMake: Set ZSTD_SOURCE_DIR from CMAKE_CURRENT_SOURCE_DIR

Instead of CMAKE_SOURCE_DIR, which is not correct when embedding Zstd
within a larger project.

disable assert when compiling paramgrill

paramgrill is a benchmark calibration function.
Speed accuracy is critical, it cannot be altered by assert.

Merge pull request #658 from facebook/compressionFlow

Compression flow

Merge branch 'dev' into compressionFlow

minor long line reformatting

Merge pull request #668 from Majlen/cmake-improvement

Add zlib, lzma, pkg-config support to cmake build system

Change all SET_TARGET_PROPERTIES to SET_PROPERTY

SET_PROPERTY function can append to lists, whereas previously used
SET_TARGET_PROPERTIES cannot.

Test new cmake branches with Circle CI

Create and install pkg-config file with cmake

Copy files during build phase, custom targets instead of commands

Previously some files were copied only during configure phase.
Custom targets seem nicer.

Add lzma and zlib support to cmake build system

cmake 2.8.9 needed for FindLibLZMA

slightly refined README comments on lib-mt

Merge pull request #666 from iburinoc/zstdmt-default

Add MT enabled targets for libzstd

fixed ZSTDMT_initCStream_advanced()

Must use the new ZSTD_compressBegin_usingCDict_advanced()
to enforce correct frame parameters

Update README

added test for ZSTD_initCStream_advanced()

when params.fParams.contentSizeFlags = 1
and pledgedSrcSize = 0
then srcSize should be considered 0 (empty), and not "unknown"

added ZSTD_copyCCtx_internal()

which respects provided fParams.

added make list

Add MT enabled targets for libzstd

Changed ZSTD_resetCCtx_advanced() into ZSTD_resetCCtx_internal()

for naming consistency :
_advanced() can be invoked
while _internal() are strictly static

Merge pull request #665 from iburinoc/fixmsg

Fix no thread message

created ZSTD_compressBegin_usingCDict_advanced()