--no-big-tests for msan

msan tests require too much RAM for 2 GB VM

Merge branch 'advancedAPI2' of github.com:facebook/zstd into advancedAPI2

zstreamtest : disabled multi-threading tests with --newapi --no-big-tests

--no-big-tests is typically used in combination with qemu-user-static
qemu-user-static allocated 4 GB of RAM upfront.
On 2 GB VM, this can degenerate into a crash.
It's not a problem as long as memory is not used.
But with multi-threading enabled, memory fragmentation kicks in,
so the amoung of RAM effectively touched increases,
and can pass beyond the 2 GB limit of the VM.

In single-threaded mode, there is no such issue :
memory requirement is smaller, and remains well-located,
so very little fragmentation is expected.

This modification should make `qemu-arm-static zstreamtests --newapi --no-big-tests`
work fine on Travis CI.

reduced --no-big-tests even more

to pass tests on qemu-aarch64

fixed minor cast warning

reduced CLevelMax for --no-big-tests

--no-big-tests for zstreamtest

Apply --no-big-tests for tsan tests

add controls over streaming buffers

added --list command contrib by @paulcruz74

fixed : decompression of skippable frames in streaming mode

switched fileio.c to ZSTD_DEBUG trigger macro

fixed streaming buffered allocation with CDict compression

fixed dangling pointer risk, detected by @terrelln

free cdictLocal faster, suggested by @terrelln

added ZSTD_dictMode_e to control dictionary loading mode

fixed memcpy() overlap

removed one useless streaming compression stage, detected by @terrelln

fixed potential dangling pointer, detected by @terrelln

fixed comments, following suggestion by @terrelln

ensure new ZSTD_strategy starts at value 1

fixed fuzzer test

first implementation of bench.c with new API ZSTD_compress_generic()

Doesn't speed optimize this buffer-to-buffer scenario yet.
Still internally defers to streaming implementation.

Also : fixed a long standing bug in ZSTDMT streaming API.

fix attempt : fullbench VS2008 project

fixed IA64 compilation error, by @mcmilk

fix attempts : fullbench for VS2008

update new api presentation in zstd.h and manual

updated manual

minor declaration statement warning fix

new api : setting compression parameters is refused if a dictionary is already loaded

newapi fuzzer tests : random flush orders in main loop

new api fuzzer tests : frame parameters are randonly set

new api fuzzer set : dictionary is randomly set

new api fuzzer tests : compression parameters are randomly set

removed macro CLAMP from decodecorpus

never used,
and would duplicate with CLAMP from zstd_compress.c

fuzzer tests for new API

added ZSTD_clampCParams()

now ZSTD_adjustCParams() is always successful,
it always produces a valid CParams

fixed +/-1 error for pledgedSrcSizePlusOne

fix attempt 2 : Visual sign conversion warning

fixed attempt : minor Visual sign conversion warning

added ZSTD_startNewCompression()

changed frameContentSize field to pledgedSrcSizePlusOne

pledgedSrcSize is proper : it's a promise, not yet fulfilled.
It will be controlled at the end.

PlusOne is meant to have 0 (default) == unknown

fix : pledgedSrcSize correctly reset to unknown in "continue" mode

fix : correctly reset pledgedSrcSize to unknown status

when starting a new compression with an existing context

fixed : new advanced AIP : setting nbThreads to the same value > 1

fixed : calling ZSTD_compress_generic() to end-flush a stream in multiple steps

added ZSTD_CCtx_reset

protection : ZSTD_CONTENTSIZE_UNKNOWN automatically disables contentSizeFlag

added protection : MT incompatible with Static allocation

minor man update on -B# option in benchmark mode

disabled MT code path when ZSTD_MULTITHREAD is not defined

added MT support to NEWAPI

added control stage to MT mode

linked newAPI to ZSTDMT

minor fix for -Wdocumentation

fixed g++ prototype mismatch

fixed fullbench project for VS2010+

updated ZSTDMT streaming API

ZSTDMT streaming API is now similar
and has same capabilites as single-thread streaming API.
It makes it easier to blend them together.

made debug definitions common within zstd_internal.h

completed NEWS for v1.3.0

updated NEWS for v1.3.0

fixed missing initialization

significant zlib wrapper code refactoring

code indentation
variable scope and names
constify

Only coding style changes.
The logic should remain the same.

zlib_wrapper's uncompress() uses ZSTD_isFrame() for routing

more generic and safer than using own routing for magic number comparison

ensure zlibwrapper uses ZSTD_malloc() and ZSTD_free()

which is compatible with { NULL, NULL, NULL }

minor indent

added POOL_sizeof() for single-thread

added support for multithreading parameters

created ZSTDMT_sizeof_CCtx() and POOL_sizeof()

required by ZSTD_sizeofCCtx() while adding a ZSTDMT_CCtx*

protected impossible switch(){default:} with assert(0)

can be converted into assume(0) in some future

Merge branch 'advancedAPI2' of github.com:facebook/zstd into advancedAPI2

fixed visual warning

fixed visual warnings

finally converted ZSTD_compressStream_generic() to use {in,ou}Buffer

replacing the older read/write variables from ZBUFF_* era.
Mostly to help code readability.

Fixed relevant callers.

ZSTD_createCCtx_advanced() now uses ZSTD_calloc()

initially uses calloc() instead of memset().

Performance improvement is unlikely measurable,
since ZSTD_CCtx is now very small,
with all tables transferred into workSpace.

expose ZSTD_compress_generic_simpleArgs()

which is a binding towards ZSTD_compress_generic()
using only integral types for arguments.

removed defaultCustomMem

now ZSTD_customCMem is promoted as new default.

Advantages : ZSTD_customCMem = { NULL, NULL, NULL},
so it's natural default after a memset.

ZSTD_customCMem is public constant
(defaultCustomMem was private only).

Also : makes it possible to introduce ZSTD_calloc(),
which can now default to stdlib's calloc()
when it detects system default.

Fixed zlibwrapper which depended on defaultCustomMem.

removed mtctx->cstream

use the first cctx in pool when ZSTDMT is used in single-thread mode
now that cctx and cstream are the same object.

Merge branch 'dev' into advancedAPI2

Fixed conflic in zstd_decompress.c

added ZSTDMT_createCCtx_advanced()

make it possible to use custom allocators

Merge branch 'advancedAPI2' of github.com:facebook/zstd into advancedAPI2

fixed minor cast warning

mtctx->jobs allocate its own memory space

to make ZSTDMT_CCtx_s size predictable
so that it can be included in CCtx

static dctx is incompatible with legacy support

documented, and runtime tested

Merge pull request #712 from terrelln/dev

[linux-kernel] Fix formatting and Makefile

[linux-kernel] Fix duplicate symbols when built-in to kernel

fixed a few code comments : ZSTD_getFrameParams => ZSTD_getFrameHeader

Added ZSTD_initStaticCDict()

Merge pull request #711 from ldv-alt/dev

Fix typo in libzstd.a-mt make rules

Fix typo in libzstd.a-mt make rules

The macro name is ZSTD_MULTITHREAD, not ZSTD_MULTHREAD.

Fixes: ca6fae78080d ("Add MT enabled targets for libzstd")

added ZSTD_initStaticDDict()

updated ZSTD_estimate?DictSize() to pass parameter byReference

resulting ?Dict object is smaller when created byReference.
Seems better than a documentation note.

[linux-kernel] Fix clang-format edge case with goto labels

added ZSTD_initStaticDCtx()

merged DStream's inBuff and outBuff into a single buffer

Saves one malloc().
Also : makes it easier to implement static allocation

Merge pull request #710 from terrelln/dev

[linux-kernel] Minor formatting changes

[linux-kernel] Fix some up clang-format edge cases

[zstd] Fix up formatting edge cases for clang-format

fixed performance regression with ZSTD_decompress() on small files

memset() was a quick fix to initialization problems,
but initialize too much space (tables, buffers)
which show up in decompression speed of ZSTD_decompress()
since it needs to recreate DCtx at each invocation.

Fixed by only initialization relevant pointers and size fields.

Merge pull request #709 from codicodi/fix-cmake

CMake improvements

CMake improvements