tests: unpack-invalid: correct and clean up a test
[debian/gzip] / NEWS
1 GNU gzip NEWS                                    -*- outline -*-
2
3 * Noteworthy changes in release ?.? (????-??-??) [?]
4
5 ** Bug fixes
6
7   gzip -d -S SUFFIX file.SUFFIX would fail for any upper-case byte in SUFFIX.
8   E.g., before, this command would fail:
9     $ :|gzip > kT && gzip -d -S T kT
10     gzip: kT: unknown suffix -- ignored
11   [bug present since the beginning]
12
13   When decompressing data in 'pack' format, gzip no longer mishandles
14   leading zeros in the end-of-block code.  [bug introduced in gzip-1.6]
15
16   When converting from system-dependent time_t format to the 32-bit
17   unsigned MTIME format used in gzip files, if a timestamp does not
18   fit gzip now substitutes zero instead of the timestamp's low-order
19   32 bits, as per Internet RFC 1952.  When converting from MTIME to
20   time_t format, if a timestamp does not fit gzip now warns and
21   substitutes the nearest in-range value instead of crashing or
22   silently substituting an implementation-defined value (typically,
23   the timestamp's low-order bits).  This affects timestamps before
24   1970 and after 2106, and timestamps after 2038 on platforms with
25   32-bit signed time_t.  [bug present since the beginning]
26
27   Support for VMS and Amiga has been removed.  It was not working anyway,
28   and it reportedly caused file name glitches on MS-Windowsish platforms.
29
30
31 * Noteworthy changes in release 1.8 (2016-04-26) [stable]
32
33 ** Bug fixes
34
35   gzip -l no longer falsely reports a write error when writing to a pipe.
36   [bug introduced in gzip-1.7]
37
38   Port to Oracle Solaris Studio 12 on x86-64.
39   [bug present since at least gzip-1.2.4]
40
41   When configuring gzip, ./configure DEFS='...-DNO_ASM...' now
42   suppresses assembler again.  [bug introduced in gzip-1.3.5]
43
44
45 * Noteworthy changes in release 1.7 (2016-03-27) [stable]
46
47 ** Changes in behavior
48
49   The GZIP environment variable is now obsolescent; gzip now warns if
50   it is used, and rejects attempts to use dangerous options or operands.
51   You can use an alias or script instead.
52
53   Installed programs like 'zgrep' now use the PATH environment variable
54   as usual to find subsidiary programs like 'gzip' and 'grep'.
55   Previously they prepended the installation directory to the PATH,
56   which sometimes caused 'make check' to test the wrong gzip executable.
57   [bug introduced in gzip-1.3.13]
58
59 ** New features
60
61   gzip now accepts the --synchronous option, which causes it to use
62   fsync and similar primitives to transfer output data to the output
63   file's storage device when the file system supports this.  Although
64   this option makes gzip safer in the presence of system crashes, it
65   can make gzip considerably slower.
66
67   gzip now accepts the --rsyncable option. This option is accepted in
68   all modes, but has effect only when compressing: it makes the resulting
69   output more amenable to efficient use of rsync.  For example, when a
70   large input file gets a small change, a gzip --rsyncable image of
71   that file will remain largely unchanged, too.  Without --rsyncable,
72   even a tiny change in the input could result in a totally different
73   gzip-compressed output file.
74
75 ** Bug fixes
76
77   gzip -k -v no longer reports that files are replaced.
78   [bug present since the beginning]
79
80   zgrep -f A B C no longer reads A more than once if A is not a regular file.
81   This better supports invocations like 'zgrep -f <(COMMAND) B C' in Bash.
82   [bug introduced in gzip-1.2]
83
84
85 * Noteworthy changes in release 1.6 (2013-06-09) [stable]
86
87 ** New features
88
89   gzip now accepts the --keep (-k) option, for consistency with tools
90   like xz, lzip and bzip2.  With this option, gzip no longer removes
91   named input files when compressing or decompressing.
92
93 ** Bug fixes
94
95   gzip -d no longer malfunctions with certain invalid data in 'pack' format.
96   [bug introduced in gzip-0.8]
97
98   When overwriting, gzip no longer acts as if you typed "y" when you type "n",
99   on some platforms when compiled with optimization.
100   [bug introduced in gzip-1.3.6]
101
102   zgrep no longer malfunctions with a multi-digit context option like -15.
103   Now, it passes that option to grep (equivalent to -C15) just as it does
104   for single-digit options. [bug introduced in gzip-1.3.12]
105
106   zmore now acts more like 'more', and is more portable to POSIXish hosts.
107
108
109 * Noteworthy changes in release 1.5 (2012-06-17) [stable]
110
111 ** Bug fixes
112
113   gzip -d now decodes and checks header CRC16 checksums as specified by
114   the FHCRC section of Internet RFC 1952.
115
116   "gzip -d -S '' precious.gz" is now rejected immediately.  Before,
117   that command would emulate "rm -i precious.gz", but with an easily-
118   misunderstood prompt.  I.e., gzip would ask if it's ok to remove the
119   existing file, "precious.gz".  If you made the mistake of saying "yes",
120   it would remove that input file before attempting to uncompress it.
121
122   gzip -cdf now properly handles input consisting of gzip'd data followed
123   by uncompressed data.  Before it would output raw compressed input, too.
124   For example, now "(printf x|gzip; echo y)|gzip -dcf" prints "xy\n",
125   while before it would print "x<compressed data>y\n".
126
127   gzip -rf no longer compresses files more than once (e.g., replacing
128   FOO with FOO.gz.gz) on file systems such as ZFS where a readdir
129   loop that unlinks and creates files can revisit output files.
130
131
132 * Noteworthy changes in release 1.4 (2010-01-20) [stable]
133
134 ** Bug fixes
135
136   gzip -d could segfault and/or clobber the stack, possibly leading to
137   arbitrary code execution.  This affects x86_64 but not 32-bit systems.
138   This fixes CVE-2010-0001.
139   For more details, see https://bugzilla.redhat.com/554418
140
141   gzip -d would fail with a CRC error for some valid inputs.
142   So far, the only valid input known to exhibit this failure was
143   compressed "from FAT filesystem (MS-DOS, OS/2, NT)".  In addition,
144   to trigger the failure, your memcpy implementation must copy in
145   the "reverse" order.
146
147
148 * Noteworthy changes in release 1.3.14 (2009-10-30) [beta]
149
150 ** Bug fixes
151
152   gzip no longer fails when there is exactly one trailing NUL byte
153   gzip has always accepted trailing NUL bytes.  Note the plural.
154
155   zdiff would exit with status 2 (indicating an error) rather than 1 to
156   indicate differences when both inputs were compressed and different.
157
158   zdiff would fail to print differences in two compressed inputs
159
160   zgrep -f - didn't work
161
162
163 * Noteworthy changes in release 1.3.13 (2009-09-30) [stable]
164
165 ** 'gzip -f foo.gz' now creates a file foo.gz.gz instead of complaining.
166
167 ** Bug fixes
168
169   gzip -d no longer fails with "-" as 2nd or subsequent argument
170
171   gzip no longer ignores a close-induced write failure, e.g., on NFS
172
173   gzip -d no longer segfaults on certain invalid inputs
174
175
176 Major changes in Gzip 1.3.12 (2007-04-13)
177
178 * znew now uses $TMPDIR (default /tmp) instead of always using /tmp.
179
180 * It is now documented that gzip ignores case when examining file name
181   extensions; for example, 'gzip test.Gz' (without -f) fails because
182   the file name ends in '.Gz'.
183
184 Major changes in Gzip 1.3.11 (2007-02-05)
185
186 * As per the GNU coding standards, the behavior of gzip and its
187   companion executables no longer depend on the name used to invoke them.
188   For example, 'gzip' and 'gunzip' are no longer hard links;
189   instead, 'gunzip' is now a small program that invokes 'gzip -d'.
190
191 * zdiff now checks for subsidiary gzip failures, and works around
192   bugs in IRIX 6 sh, Tru64 4.0F ksh, and Solaris 8 bash.
193
194 Major changes in Gzip 1.3.10 (2006-12-30)
195
196 * gzip -c and zcat now work on special files, files with special mode bits,
197   and files with multiple hard links.
198 * gzip -q now exits with status 2 (not 1) when SIGPIPE is received.
199 * zcmp and zdiff did not work in the usual case, due to a typo.
200 * zgrep has many bugs fixed with argument handling, special characters,
201   and exit status.
202 * zless no longer mishandles $%=~ in file names.
203
204 Gzip 1.3.9 (2006-12-15)
205
206 * No major changes; only porting fixes.
207
208 Major changes in Gzip 1.3.8 (2006-12-08)
209
210 * Fix some gzip problems:
211   - A security fix from Debian 1.3.5-5 was inadvertently omitted.
212   - The assembler is now invoked with --noexecstack if supported,
213     so that gzip can better resist stack-smashing attacks.
214
215 Major changes in Gzip 1.3.7 (2006-12-06)
216
217 * Fix some gzip problems:
218   - Refuse to compress setuid or setgid files, or files with the sticky bit.
219   - Fix more race conditions in setting file permissions and owner,
220     removing output files, following symbolic links, and dealing with
221     special files.
222   - Remove most of the code working around ENAMETOOLONG deficiencies.
223     Systems with those deficiencies are long-dead, and the workarounds
224     had race conditions on modern hosts.
225   - Catch CPU time and file size limit signals, too.
226   - Check for read errors when closing files.
227   - Fix a core dump caused by a stray abort mistakenly introduced in 1.3.6.
228 * Fix some gzexe problems:
229   - Improve resistance to denial-of-service attacks.
230   - Fix some quoting and escaping bugs.
231   - Do not assume /tmp is sticky (though it should be!).
232   - Do not assume the working directory can be written.
233   - Rely on PATH in the generated executable, as the man page says.
234   - Don't assume IFS is sane.
235   - Exit with signal's status, if signaled.
236
237 Major changes in Gzip 1.3.6 (2006-11-20)
238
239 * Fix some race conditions in setting file timestamps, permissions, and owner.
240 * Fix some race conditions in signal handling.
241 * When gzip exits due to a signal, it exits with the signal's status, not 1.
242 * gzip now restores file timestamps to the resolution supported by the
243   time-setting primitives of the operating system, typically 1 microsecond.
244   Formerly it restored them only to the nearest second.
245 * gzip -r no longer attempts to reset the last-access times of directories
246   it reads, as this messes up when other processes are reading the directories.
247 * The options --version and --help now work on all gzip-installed executables,
248   and now use a format similar to other GNU programs.
249 * The manual is now distributed under the terms of the GNU Free
250   Documentation License without invariant sections or cover texts.
251 * Port to current versions of Autoconf, Automake, and Gnulib.
252
253 Major changes from 1.3.4 to 1.3.5
254 * gzip now removes any output symlink before writing output file.
255 * zgrep etc. scripts now port to POSIX 1003.1-2001 hosts.
256 * zforce no longer assumes 14-byte file name length limit.
257 * zless is now implemented using less and LESSOPEN, not zmore and PAGER.
258 * assembly-language speedups reenabled; were mistakenly disabled in 1.3.
259
260 Major changes from 1.3.3 to 1.3.4
261 * Less output is lost when decompressing a truncated file.
262 * The manual is now distributed under the terms of the GNU Free
263   Documentation License.
264
265 No major changes in 1.3.2 or 1.3.3 (bug fixes only)
266
267 Major changes from 1.3 to 1.3.1
268 * zgrep now supports --, -H, -h, -L, -l, -C, -d, -m and their long equivalents.
269
270 Major changes from 1.2.4 to 1.3
271 * Add support for large files, e.g. files larger than 2 GB on Solaris 2.6.
272 * Adjust file size listing format for files larger than 10 GB.
273 * New command `zless'.
274 * `zdiff' now reports exit status like `diff' does.
275 * `zcat' is now always called `zcat', not `gzcat'.
276   Similarly for `zdiff', `zgrep', `zmore', `znew', `zforce'.
277 * Warn about a compressed file's trailing zeros only if verbose,
278   for compatibility with recent versions of GNU tar.
279 * Conform to changes to GNU makefile standards.
280 * Port to Autoconf 2.13.
281 * Convert to Automake.
282 * Fix bugs in the following areas:
283   - files larger than 4 GB
284   - security hole involving symlinks from /tmp
285   - security hole involving long file names
286   - permissions bug when compressing a symbolic link to a file
287   - core dumps
288   - concatenated compressed files on INBUFSIZ boundaries
289   - porting bugs on hosts with signed chars
290   - porting bug with upper and lower case
291   - porting bug for hosts that reserve the names `basename' or `warning'
292
293 Major changes from 1.2.3 to 1.2.4
294 * By default, do not restore file name and timestamp from those saved
295   inside the .gz file (behave as 'compress'). Added the --name option
296   to force name and timestamp restoration.
297 * Accept - as synonym for stdin.
298 * Use manlinks=so or ln to support either hard links or .so in man pages
299 * Accept foo.gz~ in zdiff.
300 * Added support for Windows NT
301 * Handle ENAMETOOLONG for strict Posix systems
302 * Use --recursive instead of --recurse to comply with Webster and
303   the GNU stdandard.
304 * Allow installation of shell scripts with a g prefix: make G=g install
305 * Install by default zcat as gzcat if gzcat already exists in path.
306 * Let zmore behave as more when invoked without parameters (give help)
307 * Let gzip --list reject files not in gzip format even with --force.
308 * Don't complain about non gzip files for options -rt or -rl.
309 * Added advice in INSTALL for several systems.
310
311 Major changes from 1.2.2 to 1.2.3
312 * Don't display the output name when decompressing except with --verbose.
313 * Remove usage of alloca in getopt.c and all makefiles.
314 * Added the zfile shell script in subdirectory sample.
315 * Moved the list of compiler bugs from README to INSTALL.
316 * Added vms/Readme.vms.
317
318 Major changes from 1.2.1 to 1.2.2
319 * Fix a compilation error on Sun with cc (worked with gcc).
320
321 Major changes from 1.2 to 1.2.1
322 * Let zmore act as more if the data is not gzipped.
323 * made gzexe more secure (don't rely on PATH).
324 * By default, display output name only when the name was actually truncated.
325
326 Major changes from 1.1.2 to 1.2
327 * Added the --list option to display the file characteristics.
328 * Added the --no-name option: do not save or restore original filename
329   Save the original name by default.
330 * Allow gunzip --suffix "" to attempt decompression on any file
331   regardless of its extension if an original name is present.
332 * Add support for the SCO compress -H format.
333 * gzip --fast now compresses faster (speed close to that of compress)
334   with degraded compression ratio (but still better than compress).
335   Default level changed to -6 (acts exactly as previous level -5) to
336   be a better indication of its placement in the speed/ratio range.
337 * Use smart name truncation: 123456789012.c -> 123456789.c.gz
338    instead of 12345678901.gz
339 * With --force, let zcat pass non gzip'ed data unchanged (zcat == cat)
340 * Added the zgrep shell script.
341 * Made sub.c useful for 16 bit sound, 24 bit images, etc..
342 * Suppress warnings about suffix for gunzip -r, except with --verbose.
343 * On MSDOS, use .gz extension when possible (files without extension)
344 * Moved the sample programs to a subdirectory sample.
345 * Added a "Special targets" section in INSTALL.
346
347 Major changes from 1.1.1 to 1.1.2.
348 * Fix serious bug for VMS (-gz not removed when decompressing).
349 * Allow suffix other than .gz in znew.
350 * Do not display compression ratio when decompressing stdin.
351 * In zmore.in, work around brain damaged stty -g (Ultrix).
352 * Display a correct compression ratio for .Z files.
353 * Added .z to .gz renaming script in INTALL.
354 * Allow setting CFLAGS in configure.
355
356 Major changes from 1.1 to 1.1.1.
357 * Fix serious bug in vms.c (affects Vax/VMS only).
358 * Added --ascii option.
359 * Add workaround in configure.in for Ultrix (quote eval argument)
360
361 Major changes from 1.0.7 to 1.1.
362 * Use .gz suffix by default, add --suffix option.
363 * Let gunzip accept a "_z" suffix (used by one 'compress' on Vax/VMS).
364 * Quit when reading garbage from stdin instead of reporting an error.
365 * Added makefile for VAX/MMS and support for wildcards on VMS.
366 * Added support for MSC under OS/2.
367 * Added support for Prime/PRIMOS.
368 * Display compression ratio also when decompressing (with --verbose).
369 * Quit after --version (GNU standard)
370 * Use --force to bypass isatty() check
371 * Continue processing other files in case of recoverable error.
372 * Added comparison of zip and gzip in the readme file.
373 * Added small sample programs (ztouch, sub, add)
374 * Use less memory when compiled with -DSMALL_MEM (for MSDOS).
375 * Remove the "off by more than one minute" timestamp kludge
376
377 Major changes from 1.0.6 to 1.0.7.
378 * Allow zmore to read from standard input (like more).
379 * Support the 68000 (Atari ST) in match.S.
380 * Retry partial writes (required on Linux when gzip is suspended in a pipe).
381 * Allow full pathnames and renamings in gzexe.
382 * Don't let gzexe compress setuid executables or gzip itself.
383 * Added vms/Makefile.gcc for gcc on the Vax.
384 * Allow installation of binaries and shell scripts in different dirs.
385 * Allows complex PAGER variable in zmore (e.g.: PAGER="col -x | more")
386 * Allow installation of zcat as gzcat.
387 * Several small changes for portability to old or weird systems.
388 * Suppress help message and send compressed data to the terminal when
389   gzip is invoked without parameters and without redirection.
390 *  Add compile option GNU_STANDARD to respect the GNU coding standards:
391    with -DGNU_STANDARD, behave as gzip even if invoked under the name gunzip.
392 (I don't like the last two changes, which were requested by the FSF.)
393
394 Major changes from 1.0.5 to 1.0.6.
395 * Let gzexe detect executables that are already gzexe'd.
396 * Keep file attributes in znew and gzexe if cpmod is available.
397 * Don't try restoring record format on VMS (1.0.5 did not work correctly)
398 * Added asm version for 68000 in amiga/match.a.
399   Use asm version for Atari TT and NeXT.
400 * For OS/2, assume HPFS by default, add flag OS2FAT if necessary.
401 * Fixed some bugs in zdiff and define zcmp as a link to zdiff.
402
403
404 Major changes from 1.0.4 to 1.0.5.
405 * For VMS, restore the file type for variable record format, otherwise
406     extract in fixed length format (not perfect, but better than
407     forcing all files to be in stream_LF format).
408 * For VMS, use "-z" default suffix and accept a version number in file names.
409 * For Unix, allow compression of files with name ending in 'z'. Use only
410   .z, .*-z, .tgz, .taz as valid gzip extensions. In the last two cases,
411   extract to .tar by default.
412 * On some versions of MSDOS, files with a 3 character extension could not
413   be compressed.
414 * Garbage collect files in /tmp created by gzexe.
415 * Fix the 'OS code' byte in the gzip header.
416 * For the Amiga, add the missing utime.h and add support for gcc.
417
418
419 Major changes from 1.0.3 to 1.0.4.
420 * Added optimized asm version for 68020.
421 * Add support for DJGPP.
422
423 * Add support for the Atari ST.
424 * Added zforce to rename gzip'ed files with truncated names.
425 * Do not install with name uncompress (some systems rely on the
426   absence of any check in the old uncompress).
427 * Added missing function (fcfree) in msdos/tailor.c
428 * Let gunzip handle .tgz files, and let gzip skip them.
429 * Added -d option (decompress) for gzexe and try preserving file permissions.
430 * Suppress all warnings with -q.
431 * Use GZIP_OPT for VMS to avoid conflict with program name.
432 * ... and many other small changes (see ChangeLog)
433
434
435 Major changes from 1.0.2 to 1.0.3
436 * Added -K option for znew to keep old .Z files if smaller
437 * Added -q option (quiet) to cancel -v in GZIP env variable.
438 * Made gzexe safer on systems with filename limitation to 14 chars.
439 * Fixed bugs in handling of GZIP env variable and incorrect free with Turbo C.
440
441
442 Major changes from 1.0.1 to 1.0.2
443 * Added env variable GZIP for default options. Example:
444    for sh:   GZIP="-8 -v"; export GZIP
445    for csh:  setenv GZIP "-8 -v"
446 * Added support for the Amiga.
447 * znew now keeps the old .Z if it is smaller than the .z file.
448   This can happen for some large and very redundant files.
449 * Do not complain about trailing garbage for record oriented IO (Vax/VMS).
450   This implies however that multi-part gzip files are not supported
451   on such systems.
452 * Added gzexe to compress rarely used executables.
453 * Reduce memory usage (required for MSDOS and useful on all systems).
454 * Preserve timestamp in znew -P (pipe option) if touch -r works.
455
456
457 Major changes from 1.0 to 1.0.1
458 * fix trivial errors in the Borland makefile (msdos/Makefile.bor)
459
460
461 Major changes from 0.8.2 to 1.0
462 * gzip now runs on Vax/VMS
463 * gzip will not not overwrite files without -f when using /bin/sh in
464   background.
465 * Support the test option -t for compressed (.Z) files.
466   Allow some data recovery for bad .Z files.
467 * Added makefiles for MSDOS (Only tested for MSC, not Borland).
468 * still more changes to configure for several systems
469
470
471 Major changes from 0.8.1 to 0.8.2:
472 * yet more changes to configure for Linux and other systems
473 * Allow zcat on a file with multiple links.
474
475
476 Major changes from 0.8 to 0.8.1:
477 * znew has now a pipe option -P to reduce the disk space requirements,
478   but this option does not preserve timestamps.
479 * Fixed some #if directives for compilation with TurboC.
480
481
482 Major changes from 0.7 to 0.8:
483 * gzip can now extract .z files created by 'pack'.
484 * configure should no longer believe that every machine is a 386
485 * Fix the entry for /etc/magic in INSTALL.
486 * Add patch for GNU tar 1.11.1 and a pointer to crypt++.el
487 * Uncompress files with multiple links only with -f.
488 * Fix for uncompress of .Z files on 16-bit machines
489 * Create a correct output name for file names of exactly N-1 chars when
490   the system has a limit of N chars.
491
492
493 Major changes from 0.6 to 0.7:
494 * Use "make check" instead of "make test".
495 * Keep timestamp and pass options to gzip in znew.
496 * Do not create .z.z files with gzip -r.
497 * Allow again gunzip .zip files (was working in 0.5)
498 * Allow again compilation with TurboC 2.0 (was working in 0.4)
499
500
501 Major changes form 0.5 to 0.6:
502 * gunzip reported an error when extracting certain .z files. The .z files
503   produced by gzip 0.5 are correct and can be read by gunzip 0.6.
504 * gunzip now supports multiple compressed members within a single .z file.
505 * Fix the check for i386 in configure.
506 * Added "make test" to check for compiler bugs. (gcc -finline-functions
507   is broken at least on the NeXT.)
508 * Use environment variable PAGER in zmore if it is defined.
509 * Accept gzcat in addition to zcat for people having /usr/bin before
510   /usr/local/bin in their path.
511
512
513 ========================================================================
514
515 Copyright (C) 1999, 2001-2002, 2006-2007, 2009-2017 Free Software Foundation,
516 Inc.
517 Copyright (C) 1992, 1993 Jean-loup Gailly
518
519 Permission is granted to copy, distribute and/or modify this document
520 under the terms of the GNU Free Documentation License, Version 1.3 or
521 any later version published by the Free Software Foundation; with no
522 Invariant Sections, with no Front-Cover Texts, and with no Back-Cover
523 Texts.  A copy of the license is included in the ``GNU Free
524 Documentation License'' file as part of this distribution.