home *** CD-ROM | disk | FTP | other *** search
/ DP Tool Club 8 / CDASC08.ISO / VRAC / GNUZIP_.ZIP / DEFLATE.C < prev    next >
C/C++ Source or Header  |  1993-03-28  |  28KB  |  729 lines
  1. /* deflate.c -- compress data using the deflation algorithm
  2.  * Copyright (C) 1992-1993 Jean-loup Gailly
  3.  * This is free software; you can redistribute it and/or modify it under the
  4.  * terms of the GNU General Public License, see the file COPYING.
  5.  */
  6.  
  7. /*
  8.  *  PURPOSE
  9.  *
  10.  *      Identify new text as repetitions of old text within a fixed-
  11.  *      length sliding window trailing behind the new text.
  12.  *
  13.  *  DISCUSSION
  14.  *
  15.  *      The "deflation" process depends on being able to identify portions
  16.  *      of the input text which are identical to earlier input (within a
  17.  *      sliding window trailing behind the input currently being processed).
  18.  *
  19.  *      The most straightforward technique turns out to be the fastest for
  20.  *      most input files: try all possible matches and select the longest.
  21.  *      The key feature of this algorithm is that insertions into the string
  22.  *      dictionary are very simple and thus fast, and deletions are avoided
  23.  *      completely. Insertions are performed at each input character, whereas
  24.  *      string matches are performed only when the previous match ends. So it
  25.  *      is preferable to spend more time in matches to allow very fast string
  26.  *      insertions and avoid deletions. The matching algorithm for small
  27.  *      strings is inspired from that of Rabin & Karp. A brute force approach
  28.  *      is used to find longer strings when a small match has been found.
  29.  *      A similar algorithm is used in comic (by Jan-Mark Wams) and freeze
  30.  *      (by Leonid Broukhis).
  31.  *         A previous version of this file used a more sophisticated algorithm
  32.  *      (by Fiala and Greene) which is guaranteed to run in linear amortized
  33.  *      time, but has a larger average cost, uses more memory and is patented.
  34.  *      However the F&G algorithm may be faster for some highly redundant
  35.  *      files if the parameter max_chain_length (described below) is too large.
  36.  *
  37.  *  ACKNOWLEDGEMENTS
  38.  *
  39.  *      The idea of lazy evaluation of matches is due to Jan-Mark Wams, and
  40.  *      I found it in 'freeze' written by Leonid Broukhis.
  41.  *      Thanks to many info-zippers for bug reports and testing.
  42.  *
  43.  *  REFERENCES
  44.  *
  45.  *      APPNOTE.TXT documentation file in PKZIP 1.93a distribution.
  46.  *
  47.  *      A description of the Rabin and Karp algorithm is given in the book
  48.  *         "Algorithms" by R. Sedgewick, Addison-Wesley, p252.
  49.  *
  50.  *      Fiala,E.R., and Greene,D.H.
  51.  *         Data Compression with Finite Windows, Comm.ACM, 32,4 (1989) 490-595
  52.  *
  53.  *  INTERFACE
  54.  *
  55.  *      void lm_init (int pack_level, ush *flags)
  56.  *          Initialize the "longest match" routines for a new file
  57.  *
  58.  *      ulg deflate (void)
  59.  *          Processes a new input file and return its compressed length. Sets
  60.  *          the compressed length, crc, deflate flags and internal file
  61.  *          attributes.
  62.  */
  63.  
  64. #include "tailor.h"
  65. #include "gzip.h"
  66. #include "lzw.h" /* just for consistency checking */
  67.  
  68. #include <stdio.h>
  69.  
  70. #ifndef lint
  71. static char rcsid[] = "$Id: deflate.c,v 0.10 1993/02/10 16:07:22 jloup Exp $";
  72. #endif
  73.  
  74. /* ===========================================================================
  75.  * Configuration parameters
  76.  */
  77.  
  78. /* Compile with MEDIUM_MEM to reduce the memory requirements or
  79.  * with SMALL_MEM to use as little memory as possible. Use BIG_MEM if the
  80.  * entire input file can be held in memory (not possible on 16 bit systems).
  81.  * Warning: defining these symbols affects HASH_BITS (see below) and thus
  82.  * affects the compression ratio. The compressed output
  83.  * is still correct, and might even be smaller in some cases.
  84.  */
  85.  
  86. #ifdef SMALL_MEM
  87. #   define HASH_BITS  13  /* Number of bits used to hash strings */
  88. #endif
  89. #ifdef MEDIUM_MEM
  90. #   define HASH_BITS  14
  91. #endif
  92. #ifndef HASH_BITS
  93. #   define HASH_BITS  15
  94.    /* For portability to 16 bit machines, do not use values above 15. */
  95. #endif
  96.  
  97. /* To save space (see unlzw.c), we overlay prev+head with tab_prefix and
  98.  * window with tab_suffix. Check that we can do this:
  99.  */
  100. #if WSIZE<<1 > 1<<BITS
  101.    error: cannot overlay window with tab_suffix and prev with tab_prefix0
  102. #endif
  103. #if HASH_BITS > BITS-1
  104.    error: cannot overlay head with tab_prefix1
  105. #endif
  106.  
  107. #define HASH_SIZE (unsigned)(1<<HASH_BITS)
  108. #define HASH_MASK (HASH_SIZE-1)
  109. #define WMASK     (WSIZE-1)
  110. /* HASH_SIZE and WSIZE must be powers of two */
  111.  
  112. #define NIL 0
  113. /* Tail of hash chains */
  114.  
  115. #define FAST 4
  116. #define SLOW 2
  117. /* speed options for the general purpose bit flag */
  118.  
  119. #ifndef TOO_FAR
  120. #  define TOO_FAR 4096
  121. #endif
  122. /* Matches of length 3 are discarded if their distance exceeds TOO_FAR */
  123.  
  124. /* ===========================================================================
  125.  * Local data used by the "longest match" routines.
  126.  */
  127.  
  128. typedef ush Pos;
  129. typedef unsigned IPos;
  130. /* A Pos is an index in the character window. We use short instead of int to
  131.  * save space in the various tables. IPos is used only for parameter passing.
  132.  */
  133.  
  134. /* DECLARE(uch, window, 2L*WSIZE); */
  135. /* Sliding window. Input bytes are read into the second half of the window,
  136.  * and move to the first half later to keep a dictionary of at least WSIZE
  137.  * bytes. With this organization, matches are limited to a distance of
  138.  * WSIZE-MAX_MATCH bytes, but this ensures that IO is always
  139.  * performed with a length multiple of the block size. Also, it limits
  140.  * the window size to 64K, which is quite useful on MSDOS.
  141.  * To do: limit the window size to WSIZE+BSZ if SMALL_MEM (the code would
  142.  * be less efficient).
  143.  */
  144.  
  145. /* DECLARE(Pos, prev, WSIZE); */
  146. /* Link to older string with same hash index. To limit the size of this
  147.  * array to 64K, this link is maintained only for the last 32K strings.
  148.  * An index in this array is thus a window index modulo 32K.
  149.  */
  150.  
  151. /* DECLARE(Pos, head, 1<<HASH_BITS); */
  152. /* Heads of the hash chains or NIL. */
  153.  
  154. ulg window_size = (ulg)2*WSIZE;
  155. /* window size, 2*WSIZE except for MMAP or BIG_MEM, where it is the
  156.  * input file length plus MIN_LOOKAHEAD.
  157.  */
  158.  
  159. long block_start;
  160. /* window position at the beginning of the current output block. Gets
  161.  * negative when the window is moved backwards.
  162.  */
  163.  
  164. local unsigned ins_h;  /* hash index of string to be inserted */
  165.  
  166. #define H_SHIFT  ((HASH_BITS+MIN_MATCH-1)/MIN_MATCH)
  167. /* Number of bits by which ins_h and del_h must be shifted at each
  168.  * input step. It must be such that after MIN_MATCH steps, the oldest
  169.  * byte no longer takes part in the hash key, that is:
  170.  *   H_SHIFT * MIN_MATCH >= HASH_BITS
  171.  */
  172.  
  173. unsigned int near prev_length;
  174. /* Length of the best match at previous step. Matches not greater than this
  175.  * are discarded. This is used in the lazy match evaluation.
  176.  */
  177.  
  178.       unsigned near strstart;      /* start of string to insert */
  179.       unsigned near match_start;   /* start of matching string */
  180. local int           eofile;        /* flag set at end of input file */
  181. local unsigned      lookahead;     /* number of valid bytes ahead in window */
  182.  
  183. unsigned near max_chain_length;
  184. /* To speed up deflation, hash chains are never searched beyond this length.
  185.  * A higher limit improves compression ratio but degrades the speed.
  186.  */
  187.  
  188. local unsigned int max_lazy_match;
  189. /* Attempt to find a better match only when the current match is strictly
  190.  * smaller than this value.
  191.  */
  192.  
  193. int near good_match;
  194. /* Use a faster search when the previous match is longer than this */
  195.  
  196.  
  197. /* Values for max_lazy_match, good_match and max_chain_length, depending on
  198.  * the desired pack level (0..9). The values given below have been tuned to
  199.  * exclude worst case performance for pathological files. Better values may be
  200.  * found for specific files.
  201.  */
  202.  
  203. typedef struct config {
  204.    ush good_length; /* reduce lazy search above this match length */
  205.    ush max_lazy;    /* do not perform lazy search above this match length */
  206.    ush nice_length; /* quit search above this match length */
  207.    ush max_chain;
  208. } config;
  209.  
  210. #ifdef  FULL_SEARCH
  211. # define nice_match MAX_MATCH
  212. #else
  213.   int near nice_match; /* Stop searching when current match exceeds this */
  214. #endif
  215.  
  216. local config configuration_table[10] = {
  217. /*      good lazy nice chain */
  218. /* 0 */ {0,    0,  0,    0},  /* store only */
  219. /* 1 */ {4,    4, 16,   16},  /* maximum speed */
  220. /* 2 */ {6,    8, 16,   16},
  221. /* 3 */ {8,   16, 32,   32},
  222. /* 4 */ {8,   16, 64,   64},
  223. /* 5 */ {8,   16, 128, 128},
  224. /* 6 */ {8,   32, 128, 256},
  225. /* 7 */ {8,   64, 128, 512},
  226. /* 8 */ {32, 128, 258, 1024},
  227. /* 9 */ {32, 258, 258, 4096}}; /* maximum compression */
  228.  
  229. /* Note: the current code requires max_lazy >= MIN_MATCH and max_chain >= 4
  230.  * but these restrictions can easily be removed at a small cost.
  231.  */
  232.  
  233. #define EQUAL 0
  234. /* result of memcmp for equal strings */
  235.  
  236. /* ===========================================================================
  237.  *  Prototypes for local functions.
  238.  */
  239. local void fill_window   OF((void));
  240.       int  longest_match OF((IPos cur_match));
  241. #ifdef ASMV
  242.       void match_init OF((void)); /* asm code initialization */
  243. #endif
  244.  
  245. #ifdef DEBUG
  246. local  void check_match OF((IPos start, IPos match, int length));
  247. #endif
  248.  
  249. /* ===========================================================================
  250.  * Update a hash value with the given input byte
  251.  * IN  assertion: all calls to to UPDATE_HASH are made with consecutive
  252.  *    input characters, so that a running hash key can be computed from the
  253.  *    previous key instead of complete recalculation each time.
  254.  */
  255. #define UPDATE_HASH(h,c) (h = (((h)<<H_SHIFT) ^ (c)) & HASH_MASK)
  256.  
  257. /* ===========================================================================
  258.  * Insert string s in the dictionary and set match_head to the previous head
  259.  * of the hash chain (the most recent string with same hash key). Return
  260.  * the previous length of the hash chain.
  261.  * IN  assertion: all calls to to INSERT_STRING are made with consecutive
  262.  *    input characters and the first MIN_MATCH bytes of s are valid
  263.  *    (except for the last MIN_MATCH-1 bytes of the input file).
  264.  */
  265. #define INSERT_STRING(s, match_head) \
  266.    (UPDATE_HASH(ins_h, window[(s) + MIN_MATCH-1]), \
  267.     prev[(s) & WMASK] = match_head = head[ins_h], \
  268.     head[ins_h] = (s))
  269.  
  270. /* ===========================================================================
  271.  * Initialize the "longest match" routines for a new file
  272.  */
  273. void lm_init (pack_level, flags)
  274.     int pack_level; /* 0: store, 1: best speed, 9: best compression */
  275.     ush *flags;     /* general purpose bit flag */
  276. {
  277.     register unsigned j;
  278.  
  279.     if (pack_level < 1 || pack_level > 9) error("bad pack level");
  280.  
  281.     /* Initialize the hash table. */
  282.     for (j = 0;  j < HASH_SIZE; j++) head[j] = NIL;
  283.     /* prev will be initialized on the fly */
  284.  
  285.     /* Set the default configuration parameters:
  286.      */
  287.     max_lazy_match   = configuration_table[pack_level].max_lazy;
  288.     good_match       = configuration_table[pack_level].good_length;
  289. #ifndef FULL_SEARCH
  290.     nice_match       = configuration_table[pack_level].nice_length;
  291. #endif
  292.     max_chain_length = configuration_table[pack_level].max_chain;
  293.     if (pack_level == 1) {
  294.        *flags |= FAST;
  295.     } else if (pack_level == 9) {
  296.        *flags |= SLOW;
  297.     }
  298.     /* ??? reduce max_chain_length for binary files */
  299.  
  300.     strstart = 0;
  301.     block_start = 0L;
  302. #ifdef ASMV
  303.     match_init(); /* initialize the asm code */
  304. #endif
  305.  
  306. #ifdef MAXSEG_64K
  307.     /* Can't read a 64K block */
  308.     lookahead = read_buf((char*)window, (unsigned)WSIZE);
  309. #else
  310.     lookahead = read_buf((char*)window, 2*WSIZE);
  311. #endif
  312.     if (lookahead == 0 || lookahead == (unsigned)EOF) {
  313.        eofile = 1, lookahead = 0;
  314.        return;
  315.     }
  316.     eofile = 0;
  317.     /* Make sure that we always have enough lookahead. This is important
  318.      * if input comes from a device such as a tty.
  319.      */
  320.     while (lookahead < MIN_LOOKAHEAD && !eofile) fill_window();
  321.  
  322.     ins_h = 0;
  323.     for (j=0; j<MIN_MATCH-1; j++) UPDATE_HASH(ins_h, window[j]);
  324.     /* If lookahead < MIN_MATCH, ins_h is garbage, but this is
  325.      * not important since only literal bytes will be emitted.
  326.      */
  327. }
  328.  
  329. /* ===========================================================================
  330.  * Set match_start to the longest match starting at the given string and
  331.  * return its length. Matches shorter or equal to prev_length are discarded,
  332.  * in which case the result is equal to prev_length and match_start is
  333.  * garbage.
  334.  * IN assertions: cur_match is the head of the hash chain for the current
  335.  *   string (strstart) and its distance is <= MAX_DIST, and prev_length >= 1
  336.  */
  337. #ifndef ASMV
  338. /* For MSDOS, OS/2 and 386 Unix, an optimized version is in match.asm or
  339.  * match.s. The code is functionally equivalent, so you can use the C version
  340.  * if desired.
  341.  */
  342. int longest_match(cur_match)
  343.     IPos cur_match;                             /* current match */
  344. {
  345.     unsigned chain_length = max_chain_length;   /* max hash chain length */
  346.     register uch *scan = window + strstart;     /* current string */
  347.     register uch *match;                        /* matched string */
  348.     register int len;                           /* length of current match */
  349.     int best_len = prev_length;                 /* best match length so far */
  350.     IPos limit = strstart > (IPos)MAX_DIST ? strstart - (IPos)MAX_DIST : NIL;
  351.     /* Stop when cur_match becomes <= limit. To simplify the code,
  352.      * we prevent matches with the string of window index 0.
  353.      */
  354.  
  355. /* The code is optimized for HASH_BITS >= 8 and MAX_MATCH-2 multiple of 16.
  356.  * It is easy to get rid of this optimization if necessary.
  357.  */
  358. #if HASH_BITS < 8 || MAX_MATCH != 258
  359.    error: Code too clever
  360. #endif
  361.  
  362. #ifdef UNALIGNED_OK
  363.     /* Compare two bytes at a time. Note: this is not always beneficial.
  364.      * Try with and without -DUNALIGNED_OK to check.
  365.      */
  366.     register uch *strend = window + strstart + MAX_MATCH - 1;
  367.     register ush scan_start = *(ush*)scan;
  368.     register ush scan_end   = *(ush*)(scan+best_len-1);
  369. #else
  370.     register uch *strend = window + strstart + MAX_MATCH;
  371.     register uch scan_end1  = scan[best_len-1];
  372.     register uch scan_end   = scan[best_len];
  373. #endif
  374.  
  375.     /* Do not waste too much time if we already have a good match: */
  376.     if (prev_length >= good_match) {
  377.         chain_length >>= 2;
  378.     }
  379.     Assert(strstart <= window_size-MIN_LOOKAHEAD, "insufficient lookahead");
  380.  
  381.     do {
  382.         Assert(cur_match < strstart, "no future");
  383.         match = window + cur_match;
  384.  
  385.         /* Skip to next match if the match length cannot increase
  386.          * or if the match length is less than 2:
  387.          */
  388. #if (defined(UNALIGNED_OK) && MAX_MATCH == 258)
  389.         /* This code assumes sizeof(unsigned short) == 2. Do not use
  390.          * UNALIGNED_OK if your compiler uses a different size.
  391.          */
  392.         if (*(ush*)(match+best_len-1) != scan_end ||
  393.             *(ush*)match != scan_start) continue;
  394.  
  395.         /* It is not necessary to compare scan[2] and match[2] since they are
  396.          * always equal when the other bytes match, given that the hash keys
  397.          * are equal and that HASH_BITS >= 8. Compare 2 bytes at a time at
  398.          * strstart+3, +5, ... up to strstart+257. We check for insufficient
  399.          * lookahead only every 4th comparison; the 128th check will be made
  400.          * at strstart+257. If MAX_MATCH-2 is not a multiple of 8, it is
  401.          * necessary to put more guard bytes at the end of the window, or
  402.          * to check more often for insufficient lookahead.
  403.          */
  404.         scan++, match++;
  405.         do {
  406.         } while (*(ush*)(scan+=2) == *(ush*)(match+=2) &&
  407.                  *(ush*)(scan+=2) == *(ush*)(match+=2) &&
  408.                  *(ush*)(scan+=2) == *(ush*)(match+=2) &&
  409.                  *(ush*)(scan+=2) == *(ush*)(match+=2) &&
  410.                  scan < strend);
  411.         /* The funny "do {}" generates better code on most compilers */
  412.  
  413.         /* Here, scan <= window+strstart+257 */
  414.         Assert(scan <= window+(unsigned)(window_size-1), "wild scan");
  415.         if (*scan == *match) scan++;
  416.  
  417.         len = scan - strend + (MAX_MATCH-1);
  418.         scan = strend - (MAX_MATCH-1);
  419.  
  420. #else /* UNALIGNED_OK */
  421.  
  422.         if (match[best_len]   != scan_end  ||
  423.             match[best_len-1] != scan_end1 ||
  424.             *match            != *scan     ||
  425.             *++match          != scan[1])      continue;
  426.  
  427.         /* The check at best_len-1 can be removed because it will be made
  428.          * again later. (This heuristic is not always a win.)
  429.          * It is not necessary to compare scan[2] and match[2] since they
  430.          * are always equal when the other bytes match, given that
  431.          * the hash keys are equal and that HASH_BITS >= 8.
  432.          */
  433.         scan += 2, match++;
  434.  
  435.         /* We check for insufficient lookahead only every 8th comparison;
  436.          * the 256th check will be made at strstart+258.
  437.          */
  438.         do {
  439.         } while (*++scan == *++match && *++scan == *++match &&
  440.                  *++scan == *++match && *++scan == *++match &&
  441.                  *++scan == *++match && *++scan == *++match &&
  442.                  *++scan == *++match && *++scan == *++match &&
  443.                  scan < strend);
  444.  
  445.         len = scan - strend + MAX_MATCH;
  446.         scan = strend - MAX_MATCH;
  447. #endif /* UNALIGNED_OK */
  448.  
  449.         if (len > best_len) {
  450.             match_start = cur_match;
  451.             best_len = len;
  452.             if (len >= nice_match) break;
  453. #ifdef UNALIGNED_OK
  454.             scan_end = *(ush*)(scan+best_len-1);
  455. #else
  456.             scan_end1  = scan[best_len-1];
  457.             scan_end   = scan[best_len];
  458. #endif
  459.         }
  460.     } while ((cur_match = prev[cur_match & WMASK]) > limit
  461.          && --chain_length != 0);
  462.  
  463.     return best_len;
  464. }
  465. #endif /* ASMV */
  466.  
  467. #ifdef DEBUG
  468. /* ===========================================================================
  469.  * Check that the match at match_start is indeed a match.
  470.  */
  471. local void check_match(start, match, length)
  472.     IPos start, match;
  473.     int length;
  474. {
  475.     /* check that the match is indeed a match */
  476.     if (memcmp((char*)window + match,
  477.                 (char*)window + start, length) != EQUAL) {
  478.         fprintf(stderr,
  479.             " start %d, match %d, length %d\n",
  480.             start, match, length);
  481.         error("invalid match");
  482.     }
  483.     if (verbose > 1) {
  484.         fprintf(stderr,"\\[%d,%d]", start-match, length);
  485.         do { putc(window[start++], stderr); } while (--length != 0);
  486.     }
  487. }
  488. #else
  489. #  define check_match(start, match, length)
  490. #endif
  491.  
  492. /* ===========================================================================
  493.  * Fill the window when the lookahead becomes insufficient.
  494.  * Updates strstart and lookahead, and sets eofile if end of input file.
  495.  * IN assertion: lookahead < MIN_LOOKAHEAD && strstart + lookahead > 0
  496.  * OUT assertions: at least one byte has been read, or eofile is set;
  497.  *    file reads are performed for at least two bytes (required for the
  498.  *    translate_eol option).
  499.  */
  500. local void fill_window()
  501. {
  502.     register unsigned n, m;
  503.     unsigned more = (unsigned)(window_size - (ulg)lookahead - (ulg)strstart);
  504.     /* Amount of free space at the end of the window. */
  505.  
  506.     /* If the window is almost full and there is insufficient lookahead,
  507.      * move the upper half to the lower one to make room in the upper half.
  508.      */
  509.     if (more == (unsigned)EOF) {
  510.         /* Very unlikely, but possible on 16 bit machine if strstart == 0
  511.          * and lookahead == 1 (input done one byte at time)
  512.          */
  513.         more--;
  514.     } else if (strstart >= WSIZE+MAX_DIST) {
  515.         /* By the IN assertion, the window is not empty so we can't confuse
  516.          * more == 0 with more == 64K on a 16 bit machine.
  517.          */
  518.         Assert(window_size == (ulg)2*WSIZE, "no sliding with BIG_MEM");
  519.  
  520.         memcpy((char*)window, (char*)window+WSIZE, (unsigned)WSIZE);
  521.         match_start -= WSIZE;
  522.         strstart    -= WSIZE; /* we now have strstart >= MAX_DIST: */
  523.  
  524.         block_start -= (long) WSIZE;
  525.  
  526.         for (n = 0; n < HASH_SIZE; n++) {
  527.             m = head[n];
  528.             head[n] = (Pos)(m >= WSIZE ? m-WSIZE : NIL);
  529.         }
  530.         for (n = 0; n < WSIZE; n++) {
  531.             m = prev[n];
  532.             prev[n] = (Pos)(m >= WSIZE ? m-WSIZE : NIL);
  533.             /* If n is not on any hash chain, prev[n] is garbage but
  534.              * its value will never be used.
  535.              */
  536.         }
  537.         more += WSIZE;
  538.     }
  539.     /* At this point, more >= 2 */
  540.     if (!eofile) {
  541.         n = read_buf((char*)window+strstart+lookahead, more);
  542.         if (n == 0 || n == (unsigned)EOF) {
  543.             eofile = 1;
  544.         } else {
  545.             lookahead += n;
  546.         }
  547.     }
  548. }
  549.  
  550. /* ===========================================================================
  551.  * Flush the current block, with given end-of-file flag.
  552.  * IN assertion: strstart is set to the end of the current match.
  553.  */
  554. #define FLUSH_BLOCK(eof) \
  555.    flush_block(block_start >= 0L ? (char*)&window[(unsigned)block_start] : \
  556.                 (char*)NULL, (long)strstart - block_start, (eof))
  557.  
  558. /* ===========================================================================
  559.  * Processes a new input file and return its compressed length.
  560.  */
  561. #ifdef NO_LAZY
  562. ulg deflate()
  563. {
  564.     IPos hash_head; /* head of the hash chain */
  565.     int flush;      /* set if current block must be flushed */
  566.     unsigned match_length = 0;  /* length of best match */
  567.  
  568.     prev_length = MIN_MATCH-1;
  569.     while (lookahead != 0) {
  570.         /* Insert the string window[strstart .. strstart+2] in the
  571.          * dictionary, and set hash_head to the head of the hash chain:
  572.          */
  573.         INSERT_STRING(strstart, hash_head);
  574.  
  575.         /* Find the longest match, discarding those <= prev_length.
  576.          * At this point we have always match_length < MIN_MATCH
  577.          */
  578.         if (hash_head != NIL && strstart - hash_head <= MAX_DIST) {
  579.             /* To simplify the code, we prevent matches with the string
  580.              * of window index 0 (in particular we have to avoid a match
  581.              * of the string with itself at the start of the input file).
  582.              */
  583.             match_length = longest_match (hash_head);
  584.             /* longest_match() sets match_start */
  585.             if (match_length > lookahead) match_length = lookahead;
  586.         }
  587.         if (match_length >= MIN_MATCH) {
  588.             check_match(strstart, match_start, match_length);
  589.  
  590.             flush = ct_tally(strstart-match_start, match_length - MIN_MATCH);
  591.  
  592.             lookahead -= match_length;
  593.             match_length--; /* string at strstart already in hash table */
  594.             do {
  595.                 strstart++;
  596.                 INSERT_STRING(strstart, hash_head);
  597.                 /* strstart never exceeds WSIZE-MAX_MATCH, so there are
  598.                  * always MIN_MATCH bytes ahead. If lookahead < MIN_MATCH
  599.                  * these bytes are garbage, but it does not matter since the
  600.                  * next lookahead bytes will always be emitted as literals.
  601.                  */
  602.             } while (--match_length != 0);
  603.         } else {
  604.             /* No match, output a literal byte */
  605.             flush = ct_tally (0, window[strstart]);
  606.             lookahead--;
  607.         }
  608.         strstart++; 
  609.         if (flush) FLUSH_BLOCK(0), block_start = strstart;
  610.  
  611.         /* Make sure that we always have enough lookahead, except
  612.          * at the end of the input file. We need MAX_MATCH bytes
  613.          * for the next match, plus MIN_MATCH bytes to insert the
  614.          * string following the next match.
  615.          */
  616.         while (lookahead < MIN_LOOKAHEAD && !eofile) fill_window();
  617.  
  618.     }
  619.     return FLUSH_BLOCK(1); /* eof */
  620. }
  621. #else /* LAZY */
  622. /* ===========================================================================
  623.  * Same as above, but achieves better compression. We use a lazy
  624.  * evaluation for matches: a match is finally adopted only if there is
  625.  * no better match at the next window position.
  626.  */
  627. ulg deflate()
  628. {
  629.     IPos hash_head;          /* head of hash chain */
  630.     IPos prev_match;         /* previous match */
  631.     int flush;               /* set if current block must be flushed */
  632.     int match_available = 0; /* set if previous match exists */
  633.     register unsigned match_length = MIN_MATCH-1; /* length of best match */
  634. #ifdef DEBUG
  635.     extern long isize;        /* byte length of input file, for debug only */
  636. #endif
  637.  
  638.     /* Process the input block. */
  639.     while (lookahead != 0) {
  640.         /* Insert the string window[strstart .. strstart+2] in the
  641.          * dictionary, and set hash_head to the head of the hash chain:
  642.          */
  643.         INSERT_STRING(strstart, hash_head);
  644.  
  645.         /* Find the longest match, discarding those <= prev_length.
  646.          */
  647.         prev_length = match_length, prev_match = match_start;
  648.         match_length = MIN_MATCH-1;
  649.  
  650.         if (hash_head != NIL && prev_length < max_lazy_match &&
  651.             strstart - hash_head <= MAX_DIST) {
  652.             /* To simplify the code, we prevent matches with the string
  653.              * of window index 0 (in particular we have to avoid a match
  654.              * of the string with itself at the start of the input file).
  655.              */
  656.             match_length = longest_match (hash_head);
  657.             /* longest_match() sets match_start */
  658.             if (match_length > lookahead) match_length = lookahead;
  659.  
  660.             /* Ignore a length 3 match if it is too distant: */
  661.             if (match_length == MIN_MATCH && strstart-match_start > TOO_FAR){
  662.                 /* If prev_match is also MIN_MATCH, match_start is garbage
  663.                  * but we will ignore the current match anyway.
  664.                  */
  665.                 match_length--;
  666.             }
  667.         }
  668.         /* If there was a match at the previous step and the current
  669.          * match is not better, output the previous match:
  670.          */
  671.         if (prev_length >= MIN_MATCH && match_length <= prev_length) {
  672.  
  673.             check_match(strstart-1, prev_match, prev_length);
  674.  
  675.             flush = ct_tally(strstart-1-prev_match, prev_length - MIN_MATCH);
  676.  
  677.             /* Insert in hash table all strings up to the end of the match.
  678.              * strstart-1 and strstart are already inserted.
  679.              */
  680.             lookahead -= prev_length-1;
  681.             prev_length -= 2;
  682.             do {
  683.                 strstart++;
  684.                 INSERT_STRING(strstart, hash_head);
  685.                 /* strstart never exceeds WSIZE-MAX_MATCH, so there are
  686.                  * always MIN_MATCH bytes ahead. If lookahead < MIN_MATCH
  687.                  * these bytes are garbage, but it does not matter since the
  688.                  * next lookahead bytes will always be emitted as literals.
  689.                  */
  690.             } while (--prev_length != 0);
  691.             match_available = 0;
  692.             match_length = MIN_MATCH-1;
  693.             strstart++;
  694.             if (flush) FLUSH_BLOCK(0), block_start = strstart;
  695.  
  696.         } else if (match_available) {
  697.             /* If there was no match at the previous position, output a
  698.              * single literal. If there was a match but the current match
  699.              * is longer, truncate the previous match to a single literal.
  700.              */
  701.             Tracevv((stderr,"%c",window[strstart-1]));
  702.             if (ct_tally (0, window[strstart-1])) {
  703.                 FLUSH_BLOCK(0), block_start = strstart;
  704.             }
  705.             strstart++;
  706.             lookahead--;
  707.         } else {
  708.             /* There is no previous match to compare with, wait for
  709.              * the next step to decide.
  710.              */
  711.             match_available = 1;
  712.             strstart++;
  713.             lookahead--;
  714.         }
  715.         Assert (strstart <= isize && lookahead <= isize, "a bit too far");
  716.  
  717.         /* Make sure that we always have enough lookahead, except
  718.          * at the end of the input file. We need MAX_MATCH bytes
  719.          * for the next match, plus MIN_MATCH bytes to insert the
  720.          * string following the next match.
  721.          */
  722.         while (lookahead < MIN_LOOKAHEAD && !eofile) fill_window();
  723.     }
  724.     if (match_available) ct_tally (0, window[strstart-1]);
  725.  
  726.     return FLUSH_BLOCK(1); /* eof */
  727. }
  728. #endif /* LAZY */
  729.