Imported Upstream version 1.5
[debian/gzip] / doc / gzip.texi
1 \input texinfo @c -*-texinfo-*-
2 @c %**start of header
3 @setfilename gzip.info
4 @include version.texi
5 @settitle GNU Gzip
6 @finalout
7 @setchapternewpage odd
8 @c %**end of header
9 @copying
10 This manual is for GNU Gzip
11 (version @value{VERSION}, @value{UPDATED}),
12 and documents commands for compressing and decompressing data.
13
14 Copyright @copyright{} 1998-1999, 2001-2002, 2006-2007, 2009-2012 Free Software
15 Foundation, Inc.
16
17 Copyright @copyright{} 1992, 1993 Jean-loup Gailly
18
19 @quotation
20 Permission is granted to copy, distribute and/or modify this document
21 under the terms of the GNU Free Documentation License, Version 1.3 or
22 any later version published by the Free Software Foundation; with no
23 Invariant Sections, with no Front-Cover Texts, and with no Back-Cover
24 Texts.  A copy of the license is included in the section entitled ``GNU
25 Free Documentation License''.
26 @end quotation
27 @end copying
28
29 @dircategory Compression
30 @direntry
31 * Gzip: (gzip).                 General (de)compression of files (lzw).
32 @end direntry
33
34 @dircategory Individual utilities
35 @direntry
36 * gunzip: (gzip)Overview.                       Decompression.
37 * gzexe: (gzip)Overview.                        Compress executables.
38 * zcat: (gzip)Overview.                         Decompression to stdout.
39 * zdiff: (gzip)Overview.                        Compare compressed files.
40 * zforce: (gzip)Overview.                       Force .gz extension on files.
41 * zgrep: (gzip)Overview.                        Search compressed files.
42 * zmore: (gzip)Overview.                        Decompression output by pages.
43 @end direntry
44
45 @titlepage
46 @title GNU gzip
47 @subtitle The data compression program
48 @subtitle for Gzip version @value{VERSION}
49 @subtitle @value{UPDATED}
50 @author by Jean-loup Gailly
51
52 @page
53 @vskip 0pt plus 1filll
54 @insertcopying
55 @end titlepage
56
57 @contents
58
59 @ifnottex
60 @node Top
61 @top GNU Gzip: General file (de)compression
62
63 @insertcopying
64 @end ifnottex
65
66 @menu
67 * Overview::            Preliminary information.
68 * Sample::              Sample output from @command{gzip}.
69 * Invoking gzip::       How to run @command{gzip}.
70 * Advanced usage::      Concatenated files.
71 * Environment::         The @env{GZIP} environment variable
72 * Tapes::               Using @command{gzip} on tapes.
73 * Problems::            Reporting bugs.
74 * GNU Free Documentation License:: Copying and sharing this manual.
75 * Concept index::       Index of concepts.
76 @end menu
77
78 @node Overview
79 @chapter Overview
80 @cindex overview
81
82 @command{gzip} reduces the size of the named files using Lempel-Ziv coding
83 (LZ77).  Whenever possible, each file is replaced by one with the
84 extension @samp{.gz}, while keeping the same ownership modes, access and
85 modification times.  (The default extension is @samp{-gz} for @abbr{VMS},
86 @samp{z} for @abbr{MSDOS}, @abbr{OS/2} @abbr{FAT} and Atari.)
87 If no files are specified or
88 if a file name is "-", the standard input is compressed to the standard
89 output.  @command{gzip} will only attempt to compress regular files.  In
90 particular, it will ignore symbolic links.
91
92 If the new file name is too long for its file system, @command{gzip}
93 truncates it.  @command{gzip} attempts to truncate only the parts of the
94 file name longer than 3 characters.  (A part is delimited by dots.) If
95 the name consists of small parts only, the longest parts are truncated.
96 For example, if file names are limited to 14 characters, gzip.msdos.exe
97 is compressed to gzi.msd.exe.gz.  Names are not truncated on systems
98 which do not have a limit on file name length.
99
100 By default, @command{gzip} keeps the original file name and time stamp in
101 the compressed file.  These are used when decompressing the file with the
102 @option{-N} option.  This is useful when the compressed file name was
103 truncated or when the time stamp was not preserved after a file
104 transfer.  However, due to limitations in the current @command{gzip} file
105 format, fractional seconds are discarded.  Also, time stamps must fall
106 within the range 1970-01-01 00:00:00 through 2106-02-07 06:28:15
107 @abbr{UTC}, and hosts whose operating systems use 32-bit time
108 stamps are further restricted to time stamps no later than 2038-01-19
109 03:14:07 @abbr{UTC}.  The upper bounds assume the typical case
110 where leap seconds are ignored.
111
112 Compressed files can be restored to their original form using @samp{gzip -d}
113 or @command{gunzip} or @command{zcat}.  If the original name saved in the
114 compressed file is not suitable for its file system, a new name is
115 constructed from the original one to make it legal.
116
117 @command{gunzip} takes a list of files on its command line and replaces
118 each file whose name ends with @samp{.gz}, @samp{.z}
119 @samp{-gz}, @samp{-z}, or @samp{_z} (ignoring case)
120 and which begins with the correct
121 magic number with an uncompressed file without the original extension.
122 @command{gunzip} also recognizes the special extensions @samp{.tgz} and
123 @samp{.taz} as shorthands for @samp{.tar.gz} and @samp{.tar.Z}
124 respectively.  When compressing, @command{gzip} uses the @samp{.tgz}
125 extension if necessary instead of truncating a file with a @samp{.tar}
126 extension.
127
128 @command{gunzip} can currently decompress files created by @command{gzip},
129 @command{zip}, @command{compress} or @command{pack}.  The detection of the input
130 format is automatic.  When using the first two formats, @command{gunzip}
131 checks a 32 bit @abbr{CRC} (cyclic redundancy check).  For @command{pack},
132 @command{gunzip} checks the uncompressed length.  The @command{compress} format
133 was not designed to allow consistency checks.  However @command{gunzip} is
134 sometimes able to detect a bad @samp{.Z} file.  If you get an error when
135 uncompressing a @samp{.Z} file, do not assume that the @samp{.Z} file is
136 correct simply because the standard @command{uncompress} does not complain.
137 This generally means that the standard @command{uncompress} does not check
138 its input, and happily generates garbage output.  The @abbr{SCO} @samp{compress
139 -H} format (@abbr{LZH} compression method) does not include a @abbr{CRC} but
140 also allows some consistency checks.
141
142 Files created by @command{zip} can be uncompressed by @command{gzip} only if
143 they have a single member compressed with the 'deflation' method.  This
144 feature is only intended to help conversion of @file{tar.zip} files to
145 the @file{tar.gz} format.  To extract a @command{zip} file with a single
146 member, use a command like @samp{gunzip <foo.zip} or @samp{gunzip -S
147 .zip foo.zip}.  To extract @command{zip} files with several
148 members, use @command{unzip} instead of @command{gunzip}.
149
150 @command{zcat} is identical to @samp{gunzip -c}.  @command{zcat}
151 uncompresses either a list of files on the command line or its standard
152 input and writes the uncompressed data on standard output.  @command{zcat}
153 will uncompress files that have the correct magic number whether they
154 have a @samp{.gz} suffix or not.
155
156 @command{gzip} uses the Lempel-Ziv algorithm used in @command{zip} and
157 @abbr{PKZIP}@.
158 The amount of compression obtained depends on the size of the input and
159 the distribution of common substrings.  Typically, text such as source
160 code or English is reduced by 60-70%.  Compression is generally much
161 better than that achieved by @abbr{LZW} (as used in @command{compress}), Huffman
162 coding (as used in @command{pack}), or adaptive Huffman coding
163 (@command{compact}).
164
165 Compression is always performed, even if the compressed file is slightly
166 larger than the original.  The worst case expansion is a few bytes for
167 the @command{gzip} file header, plus 5 bytes every 32K block, or an expansion
168 ratio of 0.015% for large files.  Note that the actual number of used
169 disk blocks almost never increases.  @command{gzip} normally preserves the mode,
170 ownership and time stamps of files when compressing or decompressing.
171
172 The @command{gzip} file format is specified in P. Deutsch, @sc{gzip} file
173 format specification version 4.3,
174 @uref{ftp://ftp.isi.edu/in-notes/rfc1952.txt, Internet @abbr{RFC} 1952} (May
175 1996).  The @command{zip} deflation format is specified in P. Deutsch,
176 @sc{deflate} Compressed Data Format Specification version 1.3,
177 @uref{ftp://ftp.isi.edu/in-notes/rfc1951.txt, Internet @abbr{RFC} 1951} (May
178 1996).
179
180 @node Sample
181 @chapter Sample output
182 @cindex sample
183
184 Here are some realistic examples of running @command{gzip}.
185
186 This is the output of the command @samp{gzip -h}:
187
188 @example
189 Usage: gzip [OPTION]... [FILE]...
190 Compress or uncompress FILEs (by default, compress FILES in-place).
191
192 Mandatory arguments to long options are mandatory for short options too.
193
194   -c, --stdout      write on standard output, keep original files unchanged
195   -d, --decompress  decompress
196   -f, --force       force overwrite of output file and compress links
197   -h, --help        give this help
198   -l, --list        list compressed file contents
199   -L, --license     display software license
200   -n, --no-name     do not save or restore the original name and time stamp
201   -N, --name        save or restore the original name and time stamp
202   -q, --quiet       suppress all warnings
203   -r, --recursive   operate recursively on directories
204   -S, --suffix=SUF  use suffix SUF on compressed files
205   -t, --test        test compressed file integrity
206   -v, --verbose     verbose mode
207   -V, --version     display version number
208   -1, --fast        compress faster
209   -9, --best        compress better
210
211 With no FILE, or when FILE is -, read standard input.
212
213 Report bugs to <bug-gzip@@gnu.org>.
214 @end example
215
216 This is the output of the command @samp{gzip -v texinfo.tex}:
217
218 @example
219 texinfo.tex:     69.3% -- replaced with texinfo.tex.gz
220 @end example
221
222 The following command will find all regular @samp{.gz} files in the
223 current directory and subdirectories (skipping file names that contain
224 newlines), and extract them in place without destroying the original,
225 stopping on the first failure:
226
227 @example
228 find . -name '*
229 *' -prune -o -name '*.gz' -type f -print |
230   sed "
231     s/'/'\\\\''/g
232     s/^\\(.*\\)\\.gz$/gunzip <'\\1.gz' >'\\1'/
233   " |
234   sh -e
235 @end example
236
237 @node Invoking gzip
238 @chapter Invoking @command{gzip}
239 @cindex invoking
240 @cindex options
241
242 The format for running the @command{gzip} program is:
243
244 @example
245 gzip @var{option} @dots{}
246 @end example
247
248 @command{gzip} supports the following options:
249
250 @table @option
251 @item --stdout
252 @itemx --to-stdout
253 @itemx -c
254 Write output on standard output; keep original files unchanged.
255 If there are several input files, the output consists of a sequence of
256 independently compressed members.  To obtain better compression,
257 concatenate all input files before compressing them.
258
259 @item --decompress
260 @itemx --uncompress
261 @itemx -d
262 Decompress.
263
264 @item --force
265 @itemx -f
266 Force compression or decompression even if the file has multiple links
267 or the corresponding file already exists, or if the compressed data
268 is read from or written to a terminal.  If the input data is not in
269 a format recognized by @command{gzip}, and if the option @option{--stdout} is also
270 given, copy the input data without change to the standard output: let
271 @command{zcat} behave as @command{cat}.  If @option{-f} is not given, and
272 when not running in the background, @command{gzip} prompts to verify
273 whether an existing file should be overwritten.
274
275 @item --help
276 @itemx -h
277 Print an informative help message describing the options then quit.
278
279 @item --list
280 @itemx -l
281 For each compressed file, list the following fields:
282
283 @example
284 compressed size: size of the compressed file
285 uncompressed size: size of the uncompressed file
286 ratio: compression ratio (0.0% if unknown)
287 uncompressed_name: name of the uncompressed file
288 @end example
289
290 The uncompressed size is given as @minus{}1 for files not in @command{gzip}
291 format, such as compressed @samp{.Z} files.  To get the uncompressed size for
292 such a file, you can use:
293
294 @example
295 zcat file.Z | wc -c
296 @end example
297
298 In combination with the @option{--verbose} option, the following fields are also
299 displayed:
300
301 @example
302 method: compression method (deflate,compress,lzh,pack)
303 crc: the 32-bit CRC of the uncompressed data
304 date & time: time stamp for the uncompressed file
305 @end example
306
307 The @abbr{CRC} is given as ffffffff for a file not in gzip format.
308
309 With @option{--verbose}, the size totals and compression ratio for all files
310 is also displayed, unless some sizes are unknown.  With @option{--quiet},
311 the title and totals lines are not displayed.
312
313 The @command{gzip} format represents the input size modulo
314 @math{2^32}, so the uncompressed size and compression ratio are listed
315 incorrectly for uncompressed files 4 GiB and larger.  To work around
316 this problem, you can use the following command to discover a large
317 uncompressed file's true size:
318
319 @example
320 zcat file.gz | wc -c
321 @end example
322
323 @item --license
324 @itemx -L
325 Display the @command{gzip} license then quit.
326
327 @item --no-name
328 @itemx -n
329 When compressing, do not save the original file name and time stamp by
330 default.  (The original name is always saved if the name had to be
331 truncated.)  When decompressing, do not restore the original file name
332 if present (remove only the @command{gzip}
333 suffix from the compressed file name) and do not restore the original
334 time stamp if present (copy it from the compressed file).  This option
335 is the default when decompressing.
336
337 @item --name
338 @itemx -N
339 When compressing, always save the original file name and time stamp; this
340 is the default.  When decompressing, restore the original file name and
341 time stamp if present.  This option is useful on systems which have
342 a limit on file name length or when the time stamp has been lost after
343 a file transfer.
344
345 @item --quiet
346 @itemx -q
347 Suppress all warning messages.
348
349 @item --recursive
350 @itemx -r
351 Travel the directory structure recursively.  If any of the file names
352 specified on the command line are directories, @command{gzip} will descend
353 into the directory and compress all the files it finds there (or
354 decompress them in the case of @command{gunzip}).
355
356 @item --suffix @var{suf}
357 @itemx -S @var{suf}
358 Use suffix @var{suf} instead of @samp{.gz}.  Any suffix can be
359 given, but suffixes other than @samp{.z} and @samp{.gz} should be
360 avoided to avoid confusion when files are transferred to other systems.
361 A null suffix forces gunzip to try decompression on all given files
362 regardless of suffix, as in:
363
364 @example
365 gunzip -S "" *        (*.* for MSDOS)
366 @end example
367
368 Previous versions of gzip used the @samp{.z} suffix.  This was changed to
369 avoid a conflict with @command{pack}.
370
371 @item --test
372 @itemx -t
373 Test.  Check the compressed file integrity.
374
375 @item --verbose
376 @itemx -v
377 Verbose.  Display the name and percentage reduction for each file compressed.
378
379 @item --version
380 @itemx -V
381 Version.  Display the version number and compilation options, then quit.
382
383 @item --fast
384 @itemx --best
385 @itemx -@var{n}
386 Regulate the speed of compression using the specified digit @var{n},
387 where @option{-1} or @option{--fast} indicates the fastest compression
388 method (less compression) and @option{--best} or @option{-9} indicates the
389 slowest compression method (optimal compression).  The default
390 compression level is @option{-6} (that is, biased towards high compression at
391 expense of speed).
392 @end table
393
394 @node Advanced usage
395 @chapter Advanced usage
396 @cindex concatenated files
397
398 Multiple compressed files can be concatenated.  In this case,
399 @command{gunzip} will extract all members at once.  If one member is
400 damaged, other members might still be recovered after removal of the
401 damaged member.  Better compression can be usually obtained if all
402 members are decompressed and then recompressed in a single step.
403
404 This is an example of concatenating @command{gzip} files:
405
406 @example
407 gzip -c file1  > foo.gz
408 gzip -c file2 >> foo.gz
409 @end example
410
411 @noindent
412 Then
413
414 @example
415 gunzip -c foo
416 @end example
417
418 @noindent
419 is equivalent to
420
421 @example
422 cat file1 file2
423 @end example
424
425 In case of damage to one member of a @samp{.gz} file, other members can
426 still be recovered (if the damaged member is removed).  However,
427 you can get better compression by compressing all members at once:
428
429 @example
430 cat file1 file2 | gzip > foo.gz
431 @end example
432
433 @noindent
434 compresses better than
435
436 @example
437 gzip -c file1 file2 > foo.gz
438 @end example
439
440 If you want to recompress concatenated files to get better compression, do:
441
442 @example
443 zcat old.gz | gzip > new.gz
444 @end example
445
446 If a compressed file consists of several members, the uncompressed
447 size and @abbr{CRC} reported by the @option{--list} option applies to
448 the last member
449 only.  If you need the uncompressed size for all members, you can use:
450
451 @example
452 zcat file.gz | wc -c
453 @end example
454
455 If you wish to create a single archive file with multiple members so
456 that members can later be extracted independently, use an archiver such
457 as @command{tar} or @command{zip}.  @acronym{GNU} @command{tar}
458 supports the @option{-z}
459 option to invoke @command{gzip} transparently.  @command{gzip} is designed as a
460 complement to @command{tar}, not as a replacement.
461
462 @node Environment
463 @chapter Environment
464 @cindex Environment
465
466 The environment variable @env{GZIP} can hold a set of default options for
467 @command{gzip}.  These options are interpreted first and can be overwritten by
468 explicit command line parameters.  For example:
469
470 @example
471 for sh:    GZIP="-8v --name"; export GZIP
472 for csh:   setenv GZIP "-8v --name"
473 for MSDOS: set GZIP=-8v --name
474 @end example
475
476 On @abbr{VMS}, the name of the environment variable is @env{GZIP_OPT}, to
477 avoid a conflict with the symbol set for invocation of the program.
478
479 @node Tapes
480 @chapter Using @command{gzip} on tapes
481 @cindex tapes
482
483 When writing compressed data to a tape, it is generally necessary to pad
484 the output with zeroes up to a block boundary.  When the data is read and
485 the whole block is passed to @command{gunzip} for decompression,
486 @command{gunzip} detects that there is extra trailing garbage after the
487 compressed data and emits a warning by default if the garbage contains
488 nonzero bytes.  You have to use the
489 @option{--quiet} option to suppress the warning.  This option can be set in the
490 @env{GZIP} environment variable, as in:
491
492 @example
493 for sh:    GZIP="-q"  tar -xfz --block-compress /dev/rst0
494 for csh:   (setenv GZIP "-q"; tar -xfz --block-compress /dev/rst0)
495 @end example
496
497 In the above example, @command{gzip} is invoked implicitly by the @option{-z}
498 option of @acronym{GNU} @command{tar}.  Make sure that the same block
499 size (@option{-b}
500 option of @command{tar}) is used for reading and writing compressed data on
501 tapes.  (This example assumes you are using the @acronym{GNU} version of
502 @command{tar}.)
503
504 @node Problems
505 @chapter Reporting Bugs
506 @cindex bugs
507
508 If you find a bug in @command{gzip}, please send electronic mail to
509 @email{bug-gzip@@gnu.org}.  Include the version number,
510 which you can find by running @w{@samp{gzip -V}}.  Also include in your
511 message the hardware and operating system, the compiler used to compile
512 @command{gzip},
513 a description of the bug behavior, and the input to @command{gzip}
514 that triggered
515 the bug.@refill
516
517 @node GNU Free Documentation License
518 @appendix GNU Free Documentation License
519
520 @include fdl.texi
521
522 @node Concept index
523 @appendix Concept index
524
525 @printindex cp
526
527 @bye