cleaned up code for arguments a bit

added tests that check to ensure stdout is working

updated avg compression rate, also hiding progress bar behind a flag now

added compression rate to status bar

added data amount

fixed problem with progress bar not persisting, added time elapsed

added help menu

added really simple progress update in the corner

Update compressor and decompressor

added some basic logic for altering compression level

Add simple compress and decompress functions

added ability to congregate statistics into single print statement rather than using debug

Merge pull request #751 from ivuk/fix-typo

Fix typos in README.md

Fix typos in README.md

added ability to set initial compression level

changed to work with std out

small changes

Switch to mmapping files

fixed fullbench, part 2

fixed fullbench

fixed #718, reported by @GregSlazinski, solution suggested by @mcmilk

minor code refactoring

small changes

cli : use new advanced API by default

fixed the problem with pipeline tests by changing how jobs move through the threads

clarified status of zstdmt_compress.h API

added print statements and debuglog

added more tests, changed makefile

added filenameTable for multiple files

Initial long distance matcher commit

added tests to run.sh

added some basic parsing for args

removed references to file size computation and file size function

removed calculation of file size and replaced with limited number of available jobs

moved main logic for job creation into a separate function

free ctx fields when error occurs during creation

renamed files

fixed TODOs

removed unnecessary checks for null pointer on free

removed print statements

fixed wrong assert() condition

A single job created by ZSTDMT_compress() can be < 256KB
if data to compress is < 256 KB
(in which case it is delegated to single thread mode)

more precise estimation of amount to flush at end of stream (single thread mode)

also : can use DEBUGLEVEL variable in /tests

fixed : 0-copy in NULL is UB

Merge pull request #743 from facebook/fullbench

compress_generic() automatic optimization opportunities

working I believe

fixed some issues with segfaults

added code for waiitng for all jobs to finish

fixed an error with number of jobs

Merge pull request #747 from facebook/noExit

No exit() on decoding errors

removed unnecessary files

added print statements for debugging, fixed long memset by changing to calloc

finished main portion of code, now need to debug

refactor ZSTDMT_compress()

fixed comments

fixed wrong function name in comment

Merge pull request #745 from terrelln/libfuzzer

[fuzz] Add libFuzzer targets

minor code refactoring

continuing work on v2

version one complete, can compress a file given input and output names

fixed gz error reporting

gzip : only display inflateEnd error when there is no error before

Merge pull request #746 from terrelln/dev

[libzstd] Fix memcpy() on potential NULL source

gzip decoding does no longer exit() on invalid input

[fuzz] Move from fuzz/ to tests/fuzz/

[libzstd] Fix memcpy() on potential NULL source

* `ZSTD_decompressStream_generic()` `ip` may be `NULL` for one of the calls
  to `memcpy()`
* Assert the source is not `NULL` for calls to `memcpy()` where I believe
  the source should not be `NULL`.

decoding malformed lz4 frames does no longer exit()

fileio : decoding malformed lzma frame does no longer exit()

makes it possible to continue decoding file list

fixed legacy version init bug

blindfix : fullbench's one-time leak, detected by valgrind

added --show-leak-kind=all to valgrind tests

Merge branch 'dev' into fullbench

fix : ZSTDMT_compressStream_generic() can accept NULL input

also : converge implementations towards new version of ZSTDMT_compressStream_generic()

Merge pull request #744 from terrelln/dev

[pzstd] Remove appveyor tests

[fuzz] Add libFuzzer targets

* The regression driver serves both as a regression test, and as a binary for afl-fuzz.
* Next, we want to check in a seed corpus for each target. Then we can run the regression
  test binary on them on Travis or Circle CI.

[pzstd] Remove appveyor tests

The appveyor tests sometimes hang, and pzstd is now deprecated in favor of
zstdmt, so delete the tests.

[man] Specify that strategies start at 1

fixed : dictionary compression with new advanced API in Multi-threading mode

Optimized ZSTDMT single-pass mode speed on large sources

by ensuring job sizes remain "not too large"

implemented shortcut for zstd_compress_generic() in MT mode

added ZSTDMT_compress_advanced() API

Merge pull request #742 from stellamplau/stack-space

Reduce stack usage of HUF_readDTableX4 and HUF_readDTableX2

Fix typo

Add comment to HUF_DECOMPRESS_WORKSPACE_SIZE

Clarify typedef of rankVal_t and rankValCol_t

Rename ALIGN and ALIGN_MASK to HUF_ALIGN and HUF_ALIGN_MASK

fixed Visual compilation of fullbench-dll

made fullbench compatible with multi-threading

fullbench 61/62 measure speed of ZSTD_compress_generic with 2 threads

zstreamtest : big tests are only enabled in 64-bits mode

to avoid requesting too much memory in 32-bits mode during MT tests

Delegate HUF_decompress4X_hufOnly to workspace version

Fix bitshift error

Merge pull request #741 from facebook/promotion

ZSTD_getFrameContentSize() promoted to "stable" status

compression optimization opportunity

switch to single-pass mode directly into output buffer
when outputSize >= ZSTD_compressBound(inputSize).
Speed gains observed with fullbench (~+15% on level 1)

Fix pointer casting warning

updated fullbench to also measure ZSTD_compress_generic()

will make it possible to visualize
optimization opportunity for ZSTD_e_end

Fix alignment warnings with pointer casting

Reduce stack usage of HUF_readDTableX4 and HUF_readDTableX2

minor : fix typo

minor : specify compression level in tags

Merge pull request #738 from terrelln/lk-div

[linux-kernel] Update patches for v2

ZSTD_getFrameContentSize() is promoted to "stable" status

Merge pull request #739 from facebook/refPrefix

ZSTD_refPrefix