5b49843a61cbbf554a2204046490d55b2e6483d2
[pspp-builds.git] / src / language / data-io / ChangeLog
1 Sat Dec  9 18:43:34 2006  Ben Pfaff  <blp@gnu.org>
2
3         * list.q (cmd_list): Use new var_create, var_destroy functions.
4
5 Thu Nov 30 21:51:58 2006  Ben Pfaff  <blp@gnu.org>
6
7         * inpt-pgm.c (cmd_reread): Always return error code upon detecting
8         syntax error.  Fixes bug #18419.  Thanks to John Darrington for
9         reporting this bug.
10
11 Sun Nov 19 09:17:45 2006  Ben Pfaff  <blp@gnu.org>
12
13         * data-list.c (parse_free): Follow documented (but odd) rule that
14         N format is treated as F format for free-field input.
15         
16         * data-reader.c (read_file_record): Drop new-line character from
17         input text lines.  This is symmetrical with the recently changed
18         dfm_put_record semantics.
19
20 Thu Nov  2 20:56:03 2006  Ben Pfaff  <blp@gnu.org>
21
22         Implement SKIP keyword on DATA LIST.  Fixes bug #17099.
23         
24         * data-list.c: (struct data_list_pgm) Add `skip_records' members.
25         (cmd_data_list) Set skip_records based on user input.
26         (data_list_source_read) Skip records requested by user.
27
28 Tue Oct 31 20:04:06 2006  Ben Pfaff  <blp@gnu.org>
29
30         * placement-parser.c: (PRS_TYPE_T) Now that struct fmt_spec uses
31         an enum fmt_type for its type member, we can't depend on the
32         ability to put negative values into that member as out-of-band
33         values, because enum fmt_type might be an unsigned type.  So use
34         values around SCHAR_MAX instead, because we know that SCHAR_MAX
35         will fit into any type, signed or unsigned, and there aren't
36         nearly that many format types.
37         (parse_var_placements) Add for_input parameter to specify whether
38         we're parsing input or output formats.  Update all callers.
39         (fixed_parse_columns) Ditto.
40         (fixed_parse_fortran) Ditto.
41         
42 Tue Oct 31 18:21:48 2006  Ben Pfaff  <blp@gnu.org>
43
44         * print-space.c (print_space_trns_proc): Let dfm_put_record add
45         the new-line character, to match dfm_put_record change below.
46
47 Sat Oct 28 11:57:19 2006  Ben Pfaff  <blp@gnu.org>
48
49         * data-writer.c (struct dfm_writer): Removed `bounce' member, and
50         all references to it.
51         (dfm_put_record) Change semantics so that it adds formatting
52         itself, such as new-line characters, instead of putting that
53         responsibility on the caller.  Also, pad binary records with
54         spaces instead of zeros, for compatibility.
55
56         * print.c (struct prt_out_spec) New member `sysmis_as_spaces'.
57         (struct print_trns) Remove `omit_new_lines' and all references,
58         since dfm_put_record() is taking care of that.  Add
59         `include_prefix'.
60         (internal_cmd_print) Allow an empty set of data to print.  Set
61         include_prefix.
62         (parse_specs) Allow an empty set of data to print.
63         (parse_variable_argument) Only add space with PRINT command.  Set
64         sysmis_as_spaces.
65         (print_trns_proc) Indent records if include_prefix is set, for
66         compatibility.  Output SYSMIS as spaces if sysmis_as_spaces is
67         set.  Put "1" in first column if PRINT EJECT is used with an
68         external output file.
69         (flush_records) Ditto.
70
71 Sat Oct 28 16:19:57 WST 2006 John Darrington <john@darrington.wattle.id.au>
72
73         * data-reader.c: Eliminated references to extern variable getl_buf
74
75 Sat Aug  5 08:25:07 2006  Ben Pfaff  <blp@gnu.org>
76
77         Fix bug #17329 in REREAD parsing, reported by John Darrington.
78
79         * inpt-pgm.c (cmd_reread): Fix file handle parsing.
80
81 Mon Jul 31 10:32:31 2006  Ben Pfaff  <blp@gnu.org>
82
83         * print.c (parse_specs): Allow a comma between specifications.
84
85 Sun Jul 16 19:57:10 2006  Ben Pfaff  <blp@gnu.org>
86
87         * automake.mk: (src_language_data_io_libdata_io_a_SOURCE) Add
88         print-space.c, placement-parser.c, placement-parser.h.
89
90         * data-list.c: Basically rewrote the whole thing.  Broke out a lot
91         of code into placement-parser.c.  Code is much cleaner now.
92
93         * placement-parser.c: New file.
94
95         * placement-parser.h: New file.
96
97         * print.c: Basically rewrote the whole thing.  Broke out PRINT
98         SPACE into print-space.c.  Code is much cleaner now.
99
100         * print-space.c: New file.
101
102 Sat Jul  1 17:39:40 2006  Ben Pfaff  <blp@gnu.org>
103
104         Fix bug #11612, "q2c documentation does not agree with code".
105         
106         * list.q: Audit use of q2c "+" prefixes that indicate that a
107         command may appear multiple times.
108
109 Sat Jul  1 20:44:22 2006  Ben Pfaff  <blp@gnu.org>
110
111         Fix bug #15786: System File Creation crashes if directoy is
112         nonexistent.
113         
114         * get.c (parse_write_command): Check that the any_writer open
115         succeeds.
116
117 Tue Jun 27 22:44:28 2006  Ben Pfaff  <blp@gnu.org>
118
119         Fix regression in command name completion reported by John
120         Darrington.  Now completion is again state-dependent and occurs
121         only on the first line of a command.
122         
123         * inpt-pgm.c: (cmd_input_program) Reading of first token in
124         command moved into cmd_parse.
125
126 Fri Jun  9 13:56:00 2006  Ben Pfaff  <blp@gnu.org>
127
128         Reform string library.
129         
130         * matrix-data.c (context): Use dynamic string.
131         (another_token) Deal with changed dfm_get_record() interface.
132         (mget_token) Ditto.
133         (force_eol) Ditto.
134
135         * data-list.c (struct data_list_pgm) Delete delims, delim_cnt
136         members, replacing them by struct string delims.  Update all
137         references to use struct string functions.
138         (cut_field) Change interface to avoid needing "end_blank", by
139         getting the data-reader to remember that state for us.  Change
140         internals to use substring.  Update both callers.
141
142         * data-reader.c (read_file_record): Use ds_read_stream().
143         (dfm_get_record) Change interface to return substring.  Updated
144         all callers.
145         (dfm_expand_tabs) Use ds_find_char().  Now maintain position
146         relative to end-of-line.  Use ds_swap().
147         (dfm_reread_record) Don't limit position by line length.
148         (dfm_column_start) Make parameter const.
149         (dfm_columns_past_end) New function.
150         (dfm_get_column) New function.
151
152 Thu May 25 18:26:26 WST 2006 John Darrington <john@darrington.wattle.id.au>
153
154         * print.c (print_trns_free): Made the code agree with the comment, by
155         not freeing PRT.  Has the side effect that the command no longer
156         crashes on invalid syntax.
157
158 Tue May  9 20:55:46 2006  Ben Pfaff  <blp@gnu.org>
159
160         * get.c (cmd_match_files): Fix memory leak replacing default_dict.
161
162 Sat May  6 22:25:09 2006  Ben Pfaff  <blp@gnu.org>
163
164         Fix segfault.
165         
166         * list.q (write_fallback_headers): (write_fallback_headers)
167         Properly record width of leader and pass it to write_varname().
168
169 Sat May  6 19:03:13 2006  Ben Pfaff  <blp@gnu.org>
170
171         * get.c: (mtf_merge_dictionary) Fix value label memory leak.
172
173 Sat May  6 13:51:16 2006  Ben Pfaff  <blp@gnu.org>
174
175         Use a casefile, instead of a case sink, for MATCH FILES output.
176         It's more straightforward, although it has the same effect.
177         
178         * get.c: (struct mtf_proc) Replace `sink' case sink member by
179         `output' casefile member.
180         (cmd_match_files) Work with casefile instead of sink.
181         (mtf_processing) Add case to casefile instead of sink.
182
183 Sat May  6 10:43:07 2006  Ben Pfaff  <blp@gnu.org>
184
185         Continue reforming procedure execution.  In this phase, get rid of
186         the output code for SPLIT FILE groups in procedure.c, which really
187         shouldn't be doing any output.  Move it into the individual
188         procedures instead.  This also adds some flexibility.
189
190         * list.q (write_all_headers): Call output_split_file_values().
191
192 Wed May  3 23:00:17 2006  Ben Pfaff  <blp@gnu.org>
193
194         Continue reforming procedure execution.  In this phase, get rid of
195         many global variables, consolidating procedure execution in
196         procedure.c.  Encapsulate transformations in new "struct
197         trns_chain".  Also, change implementation of N OF CASES, FILTER,
198         and PROCESS IF from special cases to transformations.
199          
200         * data-list.c: (data_list_trns_proc) Return TRNS_END_FILE at end
201         of file.  (Why didn't we do this before?)
202         (cmd_match_files) Direct procedure output to null sink.
203         Use discard_variables() instead of indirect version.
204
205         * inpt-pgm.c: Use transformation chain.
206         (struct input_program_pgm) Add trns_chain member.
207         (cmd_input_program) Initialize trns_chain member and capture
208         transformations with proc_capture_transformations().
209         (input_program_source_read) Use trns_chain_execute().
210         (destroy_input_program) Destroy input chain.
211
212 Tue May  2 10:39:56 WST 2006 John Darrington <john@darrington.wattle.id.au>
213
214         * list.q Changed from using fixed length char buffers to struct 
215         string so that any length variables can be used.
216
217 Mon May  1 18:21:19 2006  Ben Pfaff  <blp@gnu.org>
218
219         Further clean up the CMD_* command result codes.
220         
221         * (enum cmd_result_extensions) New.  Add CMD_END_INPUT_PROGRAM and
222         CMD_END_CASE result codes.
223         (struct input_program_pgm) Added case_nr, write_case, wc_data
224         members for use by END CASE transformation.
225         (emit_END_CASE) New function.
226         (cmd_input_program) Interpret CMD_END_CASE by outputting an END
227         CASE transformation.  If none is output by the input program
228         itself, add one automatically at the end.  Change lack of
229         variables from warning to error.
230         (cmd_end_input_program) Return CMD_END_INPUT_PROGRAM instead of
231         CMD_END_SUBLOOP.
232         (input_program_source_read) No longer any need to special-case END
233         CASE.  Handle TRNS_DROP_CASE properly.  Initialize new members in
234         inp for use by END CASE transformation.
235         (destroy_input_program) New function.
236         (input_program_source_destroy) Just call destroy_input_program().
237         (cmd_end_case) Just return CMD_END_CASE.
238         (end_case_trns_proc) No longer a stub handled by
239         input_program_source_read().  Actually output the case and
240         increment the case number.
241
242 Mon May  1 16:06:30 2006  Ben Pfaff  <blp@gnu.org>
243
244         Remove vestiges of REPEATING DATA support.
245         
246         * data-list.c: (struct rpd_num_or_var) Removed.
247         (struct repeating_data_trns) Removed.
248         (cmd_repeating_data) Removed.
249         (find_variable_input_spec) Removed.
250         (parse_num_or_var) Removed.
251         (parse_repeating_data) Removed.
252         (realize_value) Removed.
253         (struct rpd_parse_info) Removed.
254         (rpd_parse_record) Removed.
255         (repeating_data_trns_proc) Removed.
256         (repeating_data_trns_free) Removed.
257         (repeating_data_set_write_case) Removed.
258         (rpd_msg) Removed.
259
260         * inpt-pgm.c: (input_program_source_read) Don't deal with
261         REPEATING DATA.
262
263         * data-list.h: Removed.
264
265         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Removed
266         data-list.h.
267
268 Mon May  1 15:58:28 2006  Ben Pfaff  <blp@gnu.org>
269
270         Remove vestiges of FILE TYPE support. 
271         
272         * data-list.c: (cmd_data_list) Don't check for FILE TYPE.
273         (cmd_repeating_data) Ditto.
274         
275         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Remove
276         file-type.c, file-type.h.
277
278         * file-type.c: Removed.
279         
280         * file-type.h: Removed.
281
282 Wed Apr 26 13:16:28 2006  Ben Pfaff  <blp@gnu.org>
283
284         Improve the way we handle the various parsing "states".  Until now
285         we've hard-coded the state transitions in the command definition
286         file, but that's error-prone and, worse, it's redundant--we can
287         figure out what state we're in anyhow.  We can cleanly handle
288         INPUT PROGRAM and FILE TYPE with a nested command-processing loop.
289         
290         * data-list.c: (cmd_data_list) Use in_file_type() or
291         in_input_program() in place of case_source_is_class() or
292         case_source_is_complex().
293
294         * file-type.c: NB: Not really fixed except minimally to compile,
295         because it doesn't work anyway.
296         (in_file_type) New function.
297         (cmd_record_type) No need to check that we're in FILE TYPE.
298         (cmd_end_file_type) Ditto.
299         (var file_type_source_class) Make static.
300
301         * get.c: (cmd_match_files) Check vfm_source instead of pgm_state.
302
303         * inpt-pgm.c: (in_input_program) New function.
304         (cmd_input_program) Rewrite to include nested command processing
305         loop.
306         (cmd_end_input_program) Just return CMD_END_SUBLOOP.
307         (var input_program_source_class) Make static.
308         (cmd_end_case) No need to check that we're in INPUT PROGRAM.
309         (cmd_end_file) Ditto.
310         
311         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Add
312         file-type.h, inpt-pgm.h.
313
314         * file-type.h: New file.
315
316         * inpt-pgm.h: New file.
317
318 Tue Apr 25 13:11:55 2006  Ben Pfaff  <blp@gnu.org>
319
320         * print.c: Don't special-case MS-DOS line terminators.
321         (macro LINE_END_WIDTH) Removed.
322         (alloc_line) Line ends are 1 byte.
323         (print_trns_proc) Just output \n for line end.
324
325 Sun Apr 23 22:05:58 2006  Ben Pfaff  <blp@gnu.org>
326
327         Continue reforming error message support.  In this phase, get rid
328         of message "titles" and put the message text in `struct error'.
329         Now `struct error' encapsulates a message more properly.
330         
331         * data-list.c: (macro RPD_ERR) Removed.
332         (rpd_msg) New function.  Updated all references to tmsg() to call
333         this function instead.
334
335 Sat Apr 15 19:38:13 2006  Ben Pfaff  <blp@gnu.org>
336
337         Remove last users of struct file_ext so we can get rid of it
338         entirely.
339         
340         * data-reader.c: (struct dfm_reader) Change file member from
341         struct file_ext to FILE *.  Updated all references.
342         (dfm_close_reader) Close file with fn_close() instead of
343         fn_close_ext().  Also, make a copy of the file name from the file
344         handle before closing it, because we can't extract it after we
345         close the file.
346         (dfm_open_reader) Open file with fn_open() instead of
347         fn_open_ext().
348
349         * data-writer.c: (struct dfm_writer) Change file member 
350         struct file_ext to FILE *.  Updated all references.
351         (dfm_close_writer) Close file with fn_close() instead of
352         fn_close_ext().  Also, make a copy of the file name from the file
353         handle before closing it, because we can't extract it after we
354         close the file.
355         (dfm_open_writer) Open file with fn_open() instead of
356         fn_open_ext().
357
358 Sat Apr 15 18:00:32 2006  Ben Pfaff  <blp@gnu.org>
359
360         * data-list.c: Add prototype to suppress warning for
361         cmd_repeating_data().
362         
363 Thu Mar  2 08:40:33 WST 2006 John Darrington <john@darrington.wattle.id.au>
364         
365         * Moved files from src directory