home *** CD-ROM | disk | FTP | other *** search
/ Usenet 1994 January / usenetsourcesnewsgroupsinfomagicjanuary1994.iso / sources / misc / volume27 / unproto / part02 / token.h < prev    next >
Encoding:
C/C++ Source or Header  |  1992-01-17  |  1.8 KB  |  56 lines
  1. /* @(#) token.h 1.4 92/01/15 21:53:17 */
  2.  
  3. struct token {
  4.     int     tokno;            /* token value, see below */
  5.     char   *path;            /* file name */
  6.     int     line;            /* line number at token start */
  7.     int     end_line;            /* line number at token end */
  8.     struct vstring *vstr;        /* token contents */
  9.     struct token *next;
  10.     struct token *head;
  11.     struct token *tail;
  12. };
  13.  
  14. /* Special token values */
  15.  
  16. #define    TOK_LIST    256        /* () delimited list */
  17. #define    TOK_WORD    257        /* keyword or identifier */
  18. #define    TOK_NUMBER    258        /* one or more digits */
  19. #define    TOK_WSPACE    259        /* comment, white space, not newline */
  20. #define    TOK_OTHER    260        /* other token */
  21. #define    TOK_CONTROL    261        /* flow control keyword */
  22. #define    TOK_COMPOSITE    262        /* struct or union keyword */
  23. #define    TOK_DATE    263        /* date: Mmm dd yyyy */
  24. #define    TOK_TIME    264        /* time: hh:mm:ss */
  25. #define    TOK_VOID    265        /* void keyword */
  26.  
  27. /* Input/output functions and macros */
  28.  
  29. extern struct token *tok_get();        /* read next single token */
  30. extern void tok_show();            /* display (composite) token */
  31. extern struct token *tok_class();    /* classify tokens */
  32. extern void tok_unget();        /* stuff token back into input */
  33. extern void put_nl();            /* print newline character */
  34. extern void tok_show_ch();        /* emit single-character token */
  35.  
  36. #define    tok_flush(t)    (tok_show(t), tok_free(t))
  37.  
  38. #ifdef DEBUG
  39. #define put_ch(c)    (putchar(last_ch = c),fflush(stdout))
  40. #define put_str(s)    (fputs(s,stdout),last_ch = 0,fflush(stdout))
  41. #else
  42. #define put_ch(c)    putchar(last_ch = c)
  43. #define put_str(s)    (fputs(s,stdout),last_ch = 0)
  44. #endif
  45.  
  46. /* Memory management */
  47.  
  48. struct token *tok_alloc();        /* allocate token storage */
  49. extern void tok_free();            /* re-cycle storage */
  50.  
  51. /* Context */
  52.  
  53. extern char *in_path;            /* current input path name */
  54. extern int in_line;            /* current input line number */
  55. extern int last_ch;            /* type of last output */
  56.