3c5313a0db7fc77c890bc2c929fd4cfb045a9725
[pspp-builds.git] / src / language / data-io / ChangeLog
1 Thu Nov 30 21:51:58 2006  Ben Pfaff  <blp@gnu.org>
2
3         * inpt-pgm.c (cmd_reread): Always return error code upon detecting
4         syntax error.  Fixes bug #18419.  Thanks to John Darrington for
5         reporting this bug.
6
7 Sun Nov 19 09:17:45 2006  Ben Pfaff  <blp@gnu.org>
8
9         * data-list.c (parse_free): Follow documented (but odd) rule that
10         N format is treated as F format for free-field input.
11         
12         * data-reader.c (read_file_record): Drop new-line character from
13         input text lines.  This is symmetrical with the recently changed
14         dfm_put_record semantics.
15
16 Thu Nov  2 20:56:03 2006  Ben Pfaff  <blp@gnu.org>
17
18         Implement SKIP keyword on DATA LIST.  Fixes bug #17099.
19         
20         * data-list.c: (struct data_list_pgm) Add `skip_records' members.
21         (cmd_data_list) Set skip_records based on user input.
22         (data_list_source_read) Skip records requested by user.
23
24 Tue Oct 31 20:04:06 2006  Ben Pfaff  <blp@gnu.org>
25
26         * placement-parser.c: (PRS_TYPE_T) Now that struct fmt_spec uses
27         an enum fmt_type for its type member, we can't depend on the
28         ability to put negative values into that member as out-of-band
29         values, because enum fmt_type might be an unsigned type.  So use
30         values around SCHAR_MAX instead, because we know that SCHAR_MAX
31         will fit into any type, signed or unsigned, and there aren't
32         nearly that many format types.
33         (parse_var_placements) Add for_input parameter to specify whether
34         we're parsing input or output formats.  Update all callers.
35         (fixed_parse_columns) Ditto.
36         (fixed_parse_fortran) Ditto.
37         
38 Tue Oct 31 18:21:48 2006  Ben Pfaff  <blp@gnu.org>
39
40         * print-space.c (print_space_trns_proc): Let dfm_put_record add
41         the new-line character, to match dfm_put_record change below.
42
43 Sat Oct 28 11:57:19 2006  Ben Pfaff  <blp@gnu.org>
44
45         * data-writer.c (struct dfm_writer): Removed `bounce' member, and
46         all references to it.
47         (dfm_put_record) Change semantics so that it adds formatting
48         itself, such as new-line characters, instead of putting that
49         responsibility on the caller.  Also, pad binary records with
50         spaces instead of zeros, for compatibility.
51
52         * print.c (struct prt_out_spec) New member `sysmis_as_spaces'.
53         (struct print_trns) Remove `omit_new_lines' and all references,
54         since dfm_put_record() is taking care of that.  Add
55         `include_prefix'.
56         (internal_cmd_print) Allow an empty set of data to print.  Set
57         include_prefix.
58         (parse_specs) Allow an empty set of data to print.
59         (parse_variable_argument) Only add space with PRINT command.  Set
60         sysmis_as_spaces.
61         (print_trns_proc) Indent records if include_prefix is set, for
62         compatibility.  Output SYSMIS as spaces if sysmis_as_spaces is
63         set.  Put "1" in first column if PRINT EJECT is used with an
64         external output file.
65         (flush_records) Ditto.
66
67 Sat Oct 28 16:19:57 WST 2006 John Darrington <john@darrington.wattle.id.au>
68
69         * data-reader.c: Eliminated references to extern variable getl_buf
70
71 Sat Aug  5 08:25:07 2006  Ben Pfaff  <blp@gnu.org>
72
73         Fix bug #17329 in REREAD parsing, reported by John Darrington.
74
75         * inpt-pgm.c (cmd_reread): Fix file handle parsing.
76
77 Mon Jul 31 10:32:31 2006  Ben Pfaff  <blp@gnu.org>
78
79         * print.c (parse_specs): Allow a comma between specifications.
80
81 Sun Jul 16 19:57:10 2006  Ben Pfaff  <blp@gnu.org>
82
83         * automake.mk: (src_language_data_io_libdata_io_a_SOURCE) Add
84         print-space.c, placement-parser.c, placement-parser.h.
85
86         * data-list.c: Basically rewrote the whole thing.  Broke out a lot
87         of code into placement-parser.c.  Code is much cleaner now.
88
89         * placement-parser.c: New file.
90
91         * placement-parser.h: New file.
92
93         * print.c: Basically rewrote the whole thing.  Broke out PRINT
94         SPACE into print-space.c.  Code is much cleaner now.
95
96         * print-space.c: New file.
97
98 Sat Jul  1 17:39:40 2006  Ben Pfaff  <blp@gnu.org>
99
100         Fix bug #11612, "q2c documentation does not agree with code".
101         
102         * list.q: Audit use of q2c "+" prefixes that indicate that a
103         command may appear multiple times.
104
105 Sat Jul  1 20:44:22 2006  Ben Pfaff  <blp@gnu.org>
106
107         Fix bug #15786: System File Creation crashes if directoy is
108         nonexistent.
109         
110         * get.c (parse_write_command): Check that the any_writer open
111         succeeds.
112
113 Tue Jun 27 22:44:28 2006  Ben Pfaff  <blp@gnu.org>
114
115         Fix regression in command name completion reported by John
116         Darrington.  Now completion is again state-dependent and occurs
117         only on the first line of a command.
118         
119         * inpt-pgm.c: (cmd_input_program) Reading of first token in
120         command moved into cmd_parse.
121
122 Fri Jun  9 13:56:00 2006  Ben Pfaff  <blp@gnu.org>
123
124         Reform string library.
125         
126         * matrix-data.c (context): Use dynamic string.
127         (another_token) Deal with changed dfm_get_record() interface.
128         (mget_token) Ditto.
129         (force_eol) Ditto.
130
131         * data-list.c (struct data_list_pgm) Delete delims, delim_cnt
132         members, replacing them by struct string delims.  Update all
133         references to use struct string functions.
134         (cut_field) Change interface to avoid needing "end_blank", by
135         getting the data-reader to remember that state for us.  Change
136         internals to use substring.  Update both callers.
137
138         * data-reader.c (read_file_record): Use ds_read_stream().
139         (dfm_get_record) Change interface to return substring.  Updated
140         all callers.
141         (dfm_expand_tabs) Use ds_find_char().  Now maintain position
142         relative to end-of-line.  Use ds_swap().
143         (dfm_reread_record) Don't limit position by line length.
144         (dfm_column_start) Make parameter const.
145         (dfm_columns_past_end) New function.
146         (dfm_get_column) New function.
147
148 Thu May 25 18:26:26 WST 2006 John Darrington <john@darrington.wattle.id.au>
149
150         * print.c (print_trns_free): Made the code agree with the comment, by
151         not freeing PRT.  Has the side effect that the command no longer
152         crashes on invalid syntax.
153
154 Tue May  9 20:55:46 2006  Ben Pfaff  <blp@gnu.org>
155
156         * get.c (cmd_match_files): Fix memory leak replacing default_dict.
157
158 Sat May  6 22:25:09 2006  Ben Pfaff  <blp@gnu.org>
159
160         Fix segfault.
161         
162         * list.q (write_fallback_headers): (write_fallback_headers)
163         Properly record width of leader and pass it to write_varname().
164
165 Sat May  6 19:03:13 2006  Ben Pfaff  <blp@gnu.org>
166
167         * get.c: (mtf_merge_dictionary) Fix value label memory leak.
168
169 Sat May  6 13:51:16 2006  Ben Pfaff  <blp@gnu.org>
170
171         Use a casefile, instead of a case sink, for MATCH FILES output.
172         It's more straightforward, although it has the same effect.
173         
174         * get.c: (struct mtf_proc) Replace `sink' case sink member by
175         `output' casefile member.
176         (cmd_match_files) Work with casefile instead of sink.
177         (mtf_processing) Add case to casefile instead of sink.
178
179 Sat May  6 10:43:07 2006  Ben Pfaff  <blp@gnu.org>
180
181         Continue reforming procedure execution.  In this phase, get rid of
182         the output code for SPLIT FILE groups in procedure.c, which really
183         shouldn't be doing any output.  Move it into the individual
184         procedures instead.  This also adds some flexibility.
185
186         * list.q (write_all_headers): Call output_split_file_values().
187
188 Wed May  3 23:00:17 2006  Ben Pfaff  <blp@gnu.org>
189
190         Continue reforming procedure execution.  In this phase, get rid of
191         many global variables, consolidating procedure execution in
192         procedure.c.  Encapsulate transformations in new "struct
193         trns_chain".  Also, change implementation of N OF CASES, FILTER,
194         and PROCESS IF from special cases to transformations.
195          
196         * data-list.c: (data_list_trns_proc) Return TRNS_END_FILE at end
197         of file.  (Why didn't we do this before?)
198         (cmd_match_files) Direct procedure output to null sink.
199         Use discard_variables() instead of indirect version.
200
201         * inpt-pgm.c: Use transformation chain.
202         (struct input_program_pgm) Add trns_chain member.
203         (cmd_input_program) Initialize trns_chain member and capture
204         transformations with proc_capture_transformations().
205         (input_program_source_read) Use trns_chain_execute().
206         (destroy_input_program) Destroy input chain.
207
208 Tue May  2 10:39:56 WST 2006 John Darrington <john@darrington.wattle.id.au>
209
210         * list.q Changed from using fixed length char buffers to struct 
211         string so that any length variables can be used.
212
213 Mon May  1 18:21:19 2006  Ben Pfaff  <blp@gnu.org>
214
215         Further clean up the CMD_* command result codes.
216         
217         * (enum cmd_result_extensions) New.  Add CMD_END_INPUT_PROGRAM and
218         CMD_END_CASE result codes.
219         (struct input_program_pgm) Added case_nr, write_case, wc_data
220         members for use by END CASE transformation.
221         (emit_END_CASE) New function.
222         (cmd_input_program) Interpret CMD_END_CASE by outputting an END
223         CASE transformation.  If none is output by the input program
224         itself, add one automatically at the end.  Change lack of
225         variables from warning to error.
226         (cmd_end_input_program) Return CMD_END_INPUT_PROGRAM instead of
227         CMD_END_SUBLOOP.
228         (input_program_source_read) No longer any need to special-case END
229         CASE.  Handle TRNS_DROP_CASE properly.  Initialize new members in
230         inp for use by END CASE transformation.
231         (destroy_input_program) New function.
232         (input_program_source_destroy) Just call destroy_input_program().
233         (cmd_end_case) Just return CMD_END_CASE.
234         (end_case_trns_proc) No longer a stub handled by
235         input_program_source_read().  Actually output the case and
236         increment the case number.
237
238 Mon May  1 16:06:30 2006  Ben Pfaff  <blp@gnu.org>
239
240         Remove vestiges of REPEATING DATA support.
241         
242         * data-list.c: (struct rpd_num_or_var) Removed.
243         (struct repeating_data_trns) Removed.
244         (cmd_repeating_data) Removed.
245         (find_variable_input_spec) Removed.
246         (parse_num_or_var) Removed.
247         (parse_repeating_data) Removed.
248         (realize_value) Removed.
249         (struct rpd_parse_info) Removed.
250         (rpd_parse_record) Removed.
251         (repeating_data_trns_proc) Removed.
252         (repeating_data_trns_free) Removed.
253         (repeating_data_set_write_case) Removed.
254         (rpd_msg) Removed.
255
256         * inpt-pgm.c: (input_program_source_read) Don't deal with
257         REPEATING DATA.
258
259         * data-list.h: Removed.
260
261         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Removed
262         data-list.h.
263
264 Mon May  1 15:58:28 2006  Ben Pfaff  <blp@gnu.org>
265
266         Remove vestiges of FILE TYPE support. 
267         
268         * data-list.c: (cmd_data_list) Don't check for FILE TYPE.
269         (cmd_repeating_data) Ditto.
270         
271         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Remove
272         file-type.c, file-type.h.
273
274         * file-type.c: Removed.
275         
276         * file-type.h: Removed.
277
278 Wed Apr 26 13:16:28 2006  Ben Pfaff  <blp@gnu.org>
279
280         Improve the way we handle the various parsing "states".  Until now
281         we've hard-coded the state transitions in the command definition
282         file, but that's error-prone and, worse, it's redundant--we can
283         figure out what state we're in anyhow.  We can cleanly handle
284         INPUT PROGRAM and FILE TYPE with a nested command-processing loop.
285         
286         * data-list.c: (cmd_data_list) Use in_file_type() or
287         in_input_program() in place of case_source_is_class() or
288         case_source_is_complex().
289
290         * file-type.c: NB: Not really fixed except minimally to compile,
291         because it doesn't work anyway.
292         (in_file_type) New function.
293         (cmd_record_type) No need to check that we're in FILE TYPE.
294         (cmd_end_file_type) Ditto.
295         (var file_type_source_class) Make static.
296
297         * get.c: (cmd_match_files) Check vfm_source instead of pgm_state.
298
299         * inpt-pgm.c: (in_input_program) New function.
300         (cmd_input_program) Rewrite to include nested command processing
301         loop.
302         (cmd_end_input_program) Just return CMD_END_SUBLOOP.
303         (var input_program_source_class) Make static.
304         (cmd_end_case) No need to check that we're in INPUT PROGRAM.
305         (cmd_end_file) Ditto.
306         
307         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Add
308         file-type.h, inpt-pgm.h.
309
310         * file-type.h: New file.
311
312         * inpt-pgm.h: New file.
313
314 Tue Apr 25 13:11:55 2006  Ben Pfaff  <blp@gnu.org>
315
316         * print.c: Don't special-case MS-DOS line terminators.
317         (macro LINE_END_WIDTH) Removed.
318         (alloc_line) Line ends are 1 byte.
319         (print_trns_proc) Just output \n for line end.
320
321 Sun Apr 23 22:05:58 2006  Ben Pfaff  <blp@gnu.org>
322
323         Continue reforming error message support.  In this phase, get rid
324         of message "titles" and put the message text in `struct error'.
325         Now `struct error' encapsulates a message more properly.
326         
327         * data-list.c: (macro RPD_ERR) Removed.
328         (rpd_msg) New function.  Updated all references to tmsg() to call
329         this function instead.
330
331 Sat Apr 15 19:38:13 2006  Ben Pfaff  <blp@gnu.org>
332
333         Remove last users of struct file_ext so we can get rid of it
334         entirely.
335         
336         * data-reader.c: (struct dfm_reader) Change file member from
337         struct file_ext to FILE *.  Updated all references.
338         (dfm_close_reader) Close file with fn_close() instead of
339         fn_close_ext().  Also, make a copy of the file name from the file
340         handle before closing it, because we can't extract it after we
341         close the file.
342         (dfm_open_reader) Open file with fn_open() instead of
343         fn_open_ext().
344
345         * data-writer.c: (struct dfm_writer) Change file member 
346         struct file_ext to FILE *.  Updated all references.
347         (dfm_close_writer) Close file with fn_close() instead of
348         fn_close_ext().  Also, make a copy of the file name from the file
349         handle before closing it, because we can't extract it after we
350         close the file.
351         (dfm_open_writer) Open file with fn_open() instead of
352         fn_open_ext().
353
354 Sat Apr 15 18:00:32 2006  Ben Pfaff  <blp@gnu.org>
355
356         * data-list.c: Add prototype to suppress warning for
357         cmd_repeating_data().
358         
359 Thu Mar  2 08:40:33 WST 2006 John Darrington <john@darrington.wattle.id.au>
360         
361         * Moved files from src directory