cab1a8cf9c63d011b3788e8a0123ba7acf19dd34
[pspp] / src / language / lexer / token.h
1 /* PSPP - a program for statistical analysis.
2    Copyright (C) 2010, 2011 Free Software Foundation, Inc.
3
4    This program is free software: you can redistribute it and/or modify
5    it under the terms of the GNU General Public License as published by
6    the Free Software Foundation, either version 3 of the License, or
7    (at your option) any later version.
8
9    This program is distributed in the hope that it will be useful,
10    but WITHOUT ANY WARRANTY; without even the implied warranty of
11    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12    GNU General Public License for more details.
13
14    You should have received a copy of the GNU General Public License
15    along with this program.  If not, see <http://www.gnu.org/licenses/>. */
16
17 #ifndef TOKEN_H
18 #define TOKEN_H 1
19
20 #include <stdio.h>
21 #include "libpspp/str.h"
22 #include "data/identifier.h"
23
24 /* A PSPP syntax token.
25
26    The 'type' member is used by the scanner (see scan.h) for SCAN_* values as
27    well, which is why it is not declared as type "enum token_type". */
28 struct token
29   {
30     int type;                   /* Usually a "enum token_type" value. */
31     double number;
32     struct substring string;
33   };
34
35 #define TOKEN_INITIALIZER(TYPE, NUMBER, STRING) \
36         { TYPE, NUMBER, SS_LITERAL_INITIALIZER (STRING) }
37
38 void token_init (struct token *);
39 void token_uninit (struct token *);
40
41 char *token_to_string (const struct token *);
42
43 void token_print (const struct token *, FILE *);
44
45 #endif /* token.h */