099c4c5e0717e8d77c4a7464bf8067ca5992420c
[pspp-builds.git] / src / language / data-io / ChangeLog
1 Thu Nov  2 20:56:03 2006  Ben Pfaff  <blp@gnu.org>
2
3         Implement SKIP keyword on DATA LIST.  Fixes bug #17099.
4         
5         * data-list.c: (struct data_list_pgm) Add `skip_records' members.
6         (cmd_data_list) Set skip_records based on user input.
7         (data_list_source_read) Skip records requested by user.
8
9 Tue Oct 31 20:04:06 2006  Ben Pfaff  <blp@gnu.org>
10
11         * placement-parser.c: (PRS_TYPE_T) Now that struct fmt_spec uses
12         an enum fmt_type for its type member, we can't depend on the
13         ability to put negative values into that member as out-of-band
14         values, because enum fmt_type might be an unsigned type.  So use
15         values around SCHAR_MAX instead, because we know that SCHAR_MAX
16         will fit into any type, signed or unsigned, and there aren't
17         nearly that many format types.
18         (parse_var_placements) Add for_input parameter to specify whether
19         we're parsing input or output formats.  Update all callers.
20         (fixed_parse_columns) Ditto.
21         (fixed_parse_fortran) Ditto.
22         
23 Tue Oct 31 18:21:48 2006  Ben Pfaff  <blp@gnu.org>
24
25         * print-space.c (print_space_trns_proc): Let dfm_put_record add
26         the new-line character, to match dfm_put_record change below.
27
28 Sat Oct 28 11:57:19 2006  Ben Pfaff  <blp@gnu.org>
29
30         * data-writer.c (struct dfm_writer): Removed `bounce' member, and
31         all references to it.
32         (dfm_put_record) Change semantics so that it adds formatting
33         itself, such as new-line characters, instead of putting that
34         responsibility on the caller.  Also, pad binary records with
35         spaces instead of zeros, for compatibility.
36
37         * print.c (struct prt_out_spec) New member `sysmis_as_spaces'.
38         (struct print_trns) Remove `omit_new_lines' and all references,
39         since dfm_put_record() is taking care of that.  Add
40         `include_prefix'.
41         (internal_cmd_print) Allow an empty set of data to print.  Set
42         include_prefix.
43         (parse_specs) Allow an empty set of data to print.
44         (parse_variable_argument) Only add space with PRINT command.  Set
45         sysmis_as_spaces.
46         (print_trns_proc) Indent records if include_prefix is set, for
47         compatibility.  Output SYSMIS as spaces if sysmis_as_spaces is
48         set.  Put "1" in first column if PRINT EJECT is used with an
49         external output file.
50         (flush_records) Ditto.
51
52 Sat Oct 28 16:19:57 WST 2006 John Darrington <john@darrington.wattle.id.au>
53
54         * data-reader.c: Eliminated references to extern variable getl_buf
55
56 Sat Aug  5 08:25:07 2006  Ben Pfaff  <blp@gnu.org>
57
58         Fix bug #17329 in REREAD parsing, reported by John Darrington.
59
60         * inpt-pgm.c (cmd_reread): Fix file handle parsing.
61
62 Mon Jul 31 10:32:31 2006  Ben Pfaff  <blp@gnu.org>
63
64         * print.c (parse_specs): Allow a comma between specifications.
65
66 Sun Jul 16 19:57:10 2006  Ben Pfaff  <blp@gnu.org>
67
68         * automake.mk: (src_language_data_io_libdata_io_a_SOURCE) Add
69         print-space.c, placement-parser.c, placement-parser.h.
70
71         * data-list.c: Basically rewrote the whole thing.  Broke out a lot
72         of code into placement-parser.c.  Code is much cleaner now.
73
74         * placement-parser.c: New file.
75
76         * placement-parser.h: New file.
77
78         * print.c: Basically rewrote the whole thing.  Broke out PRINT
79         SPACE into print-space.c.  Code is much cleaner now.
80
81         * print-space.c: New file.
82
83 Sat Jul  1 17:39:40 2006  Ben Pfaff  <blp@gnu.org>
84
85         Fix bug #11612, "q2c documentation does not agree with code".
86         
87         * list.q: Audit use of q2c "+" prefixes that indicate that a
88         command may appear multiple times.
89
90 Sat Jul  1 20:44:22 2006  Ben Pfaff  <blp@gnu.org>
91
92         Fix bug #15786: System File Creation crashes if directoy is
93         nonexistent.
94         
95         * get.c (parse_write_command): Check that the any_writer open
96         succeeds.
97
98 Tue Jun 27 22:44:28 2006  Ben Pfaff  <blp@gnu.org>
99
100         Fix regression in command name completion reported by John
101         Darrington.  Now completion is again state-dependent and occurs
102         only on the first line of a command.
103         
104         * inpt-pgm.c: (cmd_input_program) Reading of first token in
105         command moved into cmd_parse.
106
107 Fri Jun  9 13:56:00 2006  Ben Pfaff  <blp@gnu.org>
108
109         Reform string library.
110         
111         * matrix-data.c (context): Use dynamic string.
112         (another_token) Deal with changed dfm_get_record() interface.
113         (mget_token) Ditto.
114         (force_eol) Ditto.
115
116         * data-list.c (struct data_list_pgm) Delete delims, delim_cnt
117         members, replacing them by struct string delims.  Update all
118         references to use struct string functions.
119         (cut_field) Change interface to avoid needing "end_blank", by
120         getting the data-reader to remember that state for us.  Change
121         internals to use substring.  Update both callers.
122
123         * data-reader.c (read_file_record): Use ds_read_stream().
124         (dfm_get_record) Change interface to return substring.  Updated
125         all callers.
126         (dfm_expand_tabs) Use ds_find_char().  Now maintain position
127         relative to end-of-line.  Use ds_swap().
128         (dfm_reread_record) Don't limit position by line length.
129         (dfm_column_start) Make parameter const.
130         (dfm_columns_past_end) New function.
131         (dfm_get_column) New function.
132
133 Thu May 25 18:26:26 WST 2006 John Darrington <john@darrington.wattle.id.au>
134
135         * print.c (print_trns_free): Made the code agree with the comment, by
136         not freeing PRT.  Has the side effect that the command no longer
137         crashes on invalid syntax.
138
139 Tue May  9 20:55:46 2006  Ben Pfaff  <blp@gnu.org>
140
141         * get.c (cmd_match_files): Fix memory leak replacing default_dict.
142
143 Sat May  6 22:25:09 2006  Ben Pfaff  <blp@gnu.org>
144
145         Fix segfault.
146         
147         * list.q (write_fallback_headers): (write_fallback_headers)
148         Properly record width of leader and pass it to write_varname().
149
150 Sat May  6 19:03:13 2006  Ben Pfaff  <blp@gnu.org>
151
152         * get.c: (mtf_merge_dictionary) Fix value label memory leak.
153
154 Sat May  6 13:51:16 2006  Ben Pfaff  <blp@gnu.org>
155
156         Use a casefile, instead of a case sink, for MATCH FILES output.
157         It's more straightforward, although it has the same effect.
158         
159         * get.c: (struct mtf_proc) Replace `sink' case sink member by
160         `output' casefile member.
161         (cmd_match_files) Work with casefile instead of sink.
162         (mtf_processing) Add case to casefile instead of sink.
163
164 Sat May  6 10:43:07 2006  Ben Pfaff  <blp@gnu.org>
165
166         Continue reforming procedure execution.  In this phase, get rid of
167         the output code for SPLIT FILE groups in procedure.c, which really
168         shouldn't be doing any output.  Move it into the individual
169         procedures instead.  This also adds some flexibility.
170
171         * list.q (write_all_headers): Call output_split_file_values().
172
173 Wed May  3 23:00:17 2006  Ben Pfaff  <blp@gnu.org>
174
175         Continue reforming procedure execution.  In this phase, get rid of
176         many global variables, consolidating procedure execution in
177         procedure.c.  Encapsulate transformations in new "struct
178         trns_chain".  Also, change implementation of N OF CASES, FILTER,
179         and PROCESS IF from special cases to transformations.
180          
181         * data-list.c: (data_list_trns_proc) Return TRNS_END_FILE at end
182         of file.  (Why didn't we do this before?)
183         (cmd_match_files) Direct procedure output to null sink.
184         Use discard_variables() instead of indirect version.
185
186         * inpt-pgm.c: Use transformation chain.
187         (struct input_program_pgm) Add trns_chain member.
188         (cmd_input_program) Initialize trns_chain member and capture
189         transformations with proc_capture_transformations().
190         (input_program_source_read) Use trns_chain_execute().
191         (destroy_input_program) Destroy input chain.
192
193 Tue May  2 10:39:56 WST 2006 John Darrington <john@darrington.wattle.id.au>
194
195         * list.q Changed from using fixed length char buffers to struct 
196         string so that any length variables can be used.
197
198 Mon May  1 18:21:19 2006  Ben Pfaff  <blp@gnu.org>
199
200         Further clean up the CMD_* command result codes.
201         
202         * (enum cmd_result_extensions) New.  Add CMD_END_INPUT_PROGRAM and
203         CMD_END_CASE result codes.
204         (struct input_program_pgm) Added case_nr, write_case, wc_data
205         members for use by END CASE transformation.
206         (emit_END_CASE) New function.
207         (cmd_input_program) Interpret CMD_END_CASE by outputting an END
208         CASE transformation.  If none is output by the input program
209         itself, add one automatically at the end.  Change lack of
210         variables from warning to error.
211         (cmd_end_input_program) Return CMD_END_INPUT_PROGRAM instead of
212         CMD_END_SUBLOOP.
213         (input_program_source_read) No longer any need to special-case END
214         CASE.  Handle TRNS_DROP_CASE properly.  Initialize new members in
215         inp for use by END CASE transformation.
216         (destroy_input_program) New function.
217         (input_program_source_destroy) Just call destroy_input_program().
218         (cmd_end_case) Just return CMD_END_CASE.
219         (end_case_trns_proc) No longer a stub handled by
220         input_program_source_read().  Actually output the case and
221         increment the case number.
222
223 Mon May  1 16:06:30 2006  Ben Pfaff  <blp@gnu.org>
224
225         Remove vestiges of REPEATING DATA support.
226         
227         * data-list.c: (struct rpd_num_or_var) Removed.
228         (struct repeating_data_trns) Removed.
229         (cmd_repeating_data) Removed.
230         (find_variable_input_spec) Removed.
231         (parse_num_or_var) Removed.
232         (parse_repeating_data) Removed.
233         (realize_value) Removed.
234         (struct rpd_parse_info) Removed.
235         (rpd_parse_record) Removed.
236         (repeating_data_trns_proc) Removed.
237         (repeating_data_trns_free) Removed.
238         (repeating_data_set_write_case) Removed.
239         (rpd_msg) Removed.
240
241         * inpt-pgm.c: (input_program_source_read) Don't deal with
242         REPEATING DATA.
243
244         * data-list.h: Removed.
245
246         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Removed
247         data-list.h.
248
249 Mon May  1 15:58:28 2006  Ben Pfaff  <blp@gnu.org>
250
251         Remove vestiges of FILE TYPE support. 
252         
253         * data-list.c: (cmd_data_list) Don't check for FILE TYPE.
254         (cmd_repeating_data) Ditto.
255         
256         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Remove
257         file-type.c, file-type.h.
258
259         * file-type.c: Removed.
260         
261         * file-type.h: Removed.
262
263 Wed Apr 26 13:16:28 2006  Ben Pfaff  <blp@gnu.org>
264
265         Improve the way we handle the various parsing "states".  Until now
266         we've hard-coded the state transitions in the command definition
267         file, but that's error-prone and, worse, it's redundant--we can
268         figure out what state we're in anyhow.  We can cleanly handle
269         INPUT PROGRAM and FILE TYPE with a nested command-processing loop.
270         
271         * data-list.c: (cmd_data_list) Use in_file_type() or
272         in_input_program() in place of case_source_is_class() or
273         case_source_is_complex().
274
275         * file-type.c: NB: Not really fixed except minimally to compile,
276         because it doesn't work anyway.
277         (in_file_type) New function.
278         (cmd_record_type) No need to check that we're in FILE TYPE.
279         (cmd_end_file_type) Ditto.
280         (var file_type_source_class) Make static.
281
282         * get.c: (cmd_match_files) Check vfm_source instead of pgm_state.
283
284         * inpt-pgm.c: (in_input_program) New function.
285         (cmd_input_program) Rewrite to include nested command processing
286         loop.
287         (cmd_end_input_program) Just return CMD_END_SUBLOOP.
288         (var input_program_source_class) Make static.
289         (cmd_end_case) No need to check that we're in INPUT PROGRAM.
290         (cmd_end_file) Ditto.
291         
292         * automake.mk (src_language_data_io_libdata_io_a_SOURCES): Add
293         file-type.h, inpt-pgm.h.
294
295         * file-type.h: New file.
296
297         * inpt-pgm.h: New file.
298
299 Tue Apr 25 13:11:55 2006  Ben Pfaff  <blp@gnu.org>
300
301         * print.c: Don't special-case MS-DOS line terminators.
302         (macro LINE_END_WIDTH) Removed.
303         (alloc_line) Line ends are 1 byte.
304         (print_trns_proc) Just output \n for line end.
305
306 Sun Apr 23 22:05:58 2006  Ben Pfaff  <blp@gnu.org>
307
308         Continue reforming error message support.  In this phase, get rid
309         of message "titles" and put the message text in `struct error'.
310         Now `struct error' encapsulates a message more properly.
311         
312         * data-list.c: (macro RPD_ERR) Removed.
313         (rpd_msg) New function.  Updated all references to tmsg() to call
314         this function instead.
315
316 Sat Apr 15 19:38:13 2006  Ben Pfaff  <blp@gnu.org>
317
318         Remove last users of struct file_ext so we can get rid of it
319         entirely.
320         
321         * data-reader.c: (struct dfm_reader) Change file member from
322         struct file_ext to FILE *.  Updated all references.
323         (dfm_close_reader) Close file with fn_close() instead of
324         fn_close_ext().  Also, make a copy of the file name from the file
325         handle before closing it, because we can't extract it after we
326         close the file.
327         (dfm_open_reader) Open file with fn_open() instead of
328         fn_open_ext().
329
330         * data-writer.c: (struct dfm_writer) Change file member 
331         struct file_ext to FILE *.  Updated all references.
332         (dfm_close_writer) Close file with fn_close() instead of
333         fn_close_ext().  Also, make a copy of the file name from the file
334         handle before closing it, because we can't extract it after we
335         close the file.
336         (dfm_open_writer) Open file with fn_open() instead of
337         fn_open_ext().
338
339 Sat Apr 15 18:00:32 2006  Ben Pfaff  <blp@gnu.org>
340
341         * data-list.c: Add prototype to suppress warning for
342         cmd_repeating_data().
343         
344 Thu Mar  2 08:40:33 WST 2006 John Darrington <john@darrington.wattle.id.au>
345         
346         * Moved files from src directory