Adopt GSL random number generators, paving the way for providing the
[pspp-builds.git] / src / ChangeLog
1 Mon Nov 15 23:47:40 2004  Ben Pfaff  <blp@gnu.org>
2
3         Adopt GSL random number generators, paving the way for providing
4         the complete suite of random number generators on expressions.
5         
6         * Makefile.am: Remove random.c, random.h.
7
8         * random.c: Removed.
9
10         * random.h: Removed.
11
12         * algorithm.c: (algo_default_random) Use GSL functions.
13
14         * casefile.c: (test_casefile) Use GSL RNG functions.
15
16         * expr-evl.c: (expr_evaluate) Use GSL RNG functions for OP_NORMAL,
17         OP_UNIFORM.
18
19         * sample.c: (cmd_sample) Use GSL RNG functions.
20         (sample_trns_proc) Ditto.
21
22         * set.q: (static var set_seed) Removed.
23         (static var seed_flag) Removed.
24         (static var rng) New variable.
25         (aux_stc_custom_seed) No seed value anymore, don't print anything.
26         (stc_custom_seed) Use new seed functions.
27         (seed_is_set) Removed.
28         (get_rng) New function that composes the entire external
29         interface.
30         (set_rng) New function.
31         (random_seed) New function.
32
33 Mon Nov 15 22:08:25 2004  Ben Pfaff  <blp@gnu.org>
34
35         * expr-evl.c: (expr_evaluate) Fix XDATE.JDAY formula.  Thanks to
36         John Darrington <john@darrington.wattle.id.au> for reporting this
37         bug.
38
39 Tue Nov 16 13:19:18 WST 2004 John Darrington <john@darrington.wattle.id.au>
40
41         * permissions.c command.def Added the PERMISSIONS command
42
43 Mon Nov 15 01:33:32 2004  Ben Pfaff  <blp@gnu.org>
44
45         * q2c.c: (dump_header) Don't try to emit #includes at very top of
46         output file because that will precede #include <config.h>, which
47         is bad.
48         (main) Add needed headers to /* (header) */ code.
49
50 Mon Nov 15 01:21:36 2004  Ben Pfaff  <blp@gnu.org>
51
52         Instead of making system or portable file readers responsible for
53         dropping and reordering variables, make them read full cases and
54         let the caller take care of any changes.
55
56         * get.c: New "case map" structure to handle this.  Use for GET,
57         IMPORT, MATCH FILES.  Essentially rewrite the whole file.
58
59         * pfm-read.c: (pfm_read_case) Read into provided case.  Signature
60         changed appropriately.
61
62         * sfm-read.c: (sfm_read_case) Ditto.
63
64 Mon Nov 15 00:47:45 2004  Ben Pfaff  <blp@gnu.org>
65
66         Decided that case_serialize() and case_unserialize() were too
67         abstract.  Also we need a couple more functions to avoid excessive
68         copying for data in/out fast paths.
69
70         * case.c: (case_serial_size) Removed.
71         (case_serialize) Rename case_to_values() and make its argument
72         explicitly an array of union values.
73         (case_unserialize) Rename case_from_values() and make its argument
74         explicitly an array of union values.
75         (case_data_all) New function.
76         (case_data_all_rw) New function.
77
78         * casefile.c: (struct casefile) Change buffer from array of
79         unsigned char to array of union value for better accuracy.
80         Redefine buffer_used and buffer_size in terms of values, not
81         bytes.  Remove case_size because it is now redundant with
82         value_cnt.  Fix up all references to these members.
83
84 Mon Nov 15 00:45:46 2004  Ben Pfaff  <blp@gnu.org>
85
86         * barchart.c: (struct subcat) Make `label' member const to silence
87         GCC warning with -Wwrite-strings.
88
89         * cartesian.c: (struct dataset) Ditto.
90
91         * case.c: Don't re-define NDEBUG if already defined.
92         Add lots of comments.
93
94         * str.c: Fix includes.
95
96         * crosstabs.q: Fix includes.
97
98         * examine.q: Fix includes.  Fix GCC warning about unused
99         variables.
100         
101         * frequencies.q: (stat macro) Removed and replaced where used by
102         its expansion.
103
104         * list.q: Fix includes.
105
106         * oneway.q: Fix includes.
107
108         * piechart.c: Fix includes.  Only define M_PI if not already
109         defined.
110
111         * sfm-read.c: (bswap) New function.
112         (bswap_int32) Write in terms of bswap.
113         (bswap_flt64) Ditto.
114
115         * str.c: (ds_data) Add external definition here, needed because
116         str.h has only an `extern inline' version.
117
118         * value-labels.c: Fix includes.
119
120 Mon Nov 15 00:40:55 2004  Ben Pfaff  <blp@gnu.org>
121
122         Instead of providing a system or portable file writer with a raw
123         case in the format needed for output, provide it with a regular
124         case.  The writer takes care of any needed translation.
125
126         * aggregate.c: Adopt new scheme for AGGREGATE.
127         (struct agr_proc) sfm_agr_case member removed.
128         (write_case_to_sfm) Removed because the new interface is easier to
129         use.
130
131         * get.c: Adopt new scheme for SAVE, XSAVE, EXPORT.
132
133         * pfm-write.c: Implement new scheme.
134
135         * sfm-write.c: Ditto.
136
137 Mon Nov 15 00:32:24 2004  Ben Pfaff  <blp@gnu.org>
138
139         Instead of treating `struct file_handle' as a class to subclass
140         into data files, system files, and portable files, instead use it
141         as a helper that coordinates access.  Now it is opaque, too.
142
143         This means that most references to a struct file_handle are now
144         changed into references to one of struct dfm_reader, struct
145         dfm_writer, struct sfm_reader, struct sfm_writer, struct
146         pfm_reader, or struct pfm_writer, according to what's being read
147         or written.
148
149         Most related changes are only worth summarizing briefly.
150
151         * dictionary.c: (dict_clear) Destroy aux data in deleted
152         variables.
153         (dict_clear_aux) New function.
154         (dict_create_var) Initialize aux, aux_dtor.
155         (dict_delete_var) Destroy aux data in deleted variable.
156
157         * file-handle.h: (struct fh_ext_class) Removed.
158         (struct file_handle) Removed.
159         (fh_init_files) Removed.
160
161         * file-handle.q: Changed references to a handle's `private' member
162         to direct references.
163         (struct private_file_handle) Renamed file_handle.
164         Add next, open_cnt, type, open_mode, aux members.
165         (struct file_handle_list) Removed.
166         (extern var inline_file) Removed.
167         (static var file_handles) Changed from file_handle_list * to
168         file_handle *.
169         (create_file_handle) Initialize new members.
170         (fh_close_handle) Removed.
171         (mode_name) New function.
172         (fh_open) New function.
173         (fh_close) New function.
174         (fh_parse_file_handle) Renamed fh_parse().
175
176         * glob.c: (init_glob) Remove fh_init_files() call.
177         
178         * aggregate.c: use sfm_writer.
179         (create_sysfile) Removed because the new interface is simpler.
180         
181         * apply-dict.c: Use sfm_reader.
182
183         * data-list.c: Use dfm_reader.
184
185         * file-type.c: Use dfm_reader.
186
187         * get.c: Use sfm_reader, sfm_writer, pfm_reader, pfm_writer.
188
189         * inpt-pgm.c: Use dfm_reader.
190
191         * print.c: Use dfm_writer.
192
193         * sysfile-info: Use sfm_reader.
194
195         * dfm-read.c: Adopt new file handle infrastructure.
196
197         * dfm-write.c: Ditto.
198
199         * pfm-read.c: Ditto.
200         
201         * pfm-write.c: Ditto.
202
203         * sfm-read.c: Ditto.
204
205         * sfm-write.c: Ditto.
206         
207 Mon Nov 15 00:31:44 2004  Ben Pfaff  <blp@gnu.org>
208
209         Break dictionary functions into separate header file.
210
211         * dictionary.h: New file.
212
213         * var.h: Moved dict_*() functions to dictionary.h.
214
215 Mon Nov 15 00:30:33 2004  Ben Pfaff  <blp@gnu.org>
216
217         Get rid of procedure-specific union in struct variable, using
218         instead a void * pointer and a destructor function.
219
220         Most related changes are only worth brief summaries.
221
222         * crosstabs.q: Fix includes.  Use new struct var_range in lieu of
223         old p.crs member in struct variable.
224         
225         * frequencies.q: Fix includes.  Use new struct var_freqs in lieu
226         of old p.frq member in struct variable.
227
228         * histogram.c: (draw_histogram) Takes new freq_tab arg because
229         it's no longer possible to grab this from var->p.frq.
230
231         * piechart.c: (draw_piechart) Ditto.
232
233         * group.c: (group_proc_get) New function.
234
235         * levene.c: Use group_proc_get() in lieu of old p.grp_data member
236         in struct variable.
237
238         * oneway.q: Ditto.
239
240         * t-test.q: Ditto.
241
242         * main.c: (execute_command) Clear aux data in default_dict after
243         each command.  (It's debatable whether this should be done.)
244
245         * matrix-data.c: Use new struct mxd_var in lieu of old p.mxd
246         member in struct variable.
247
248         * means.q: Get rid of integer mode, which is not included in
249         recent SPSS and was the only code that wanted per-variable private
250         data.
251
252         * var.h: (struct crosstab_proc) Removed.
253         (struct frequencies_proc) Removed.
254         (struct list_proc) Removed.
255         (struct get_proc) Removed.
256         (struct means_proc) Removed.
257         (struct matrix_data_proc) Removed.
258         (struct match_files_proc) Removed.
259         (lots of enums) Removed.
260         (struct variable) Removed members `p', `get'.  Add member
261         `aux_dtor'.
262
263         * vars-atr.c: (var_attach_aux) New function.
264         (var_detach_aux) New function.
265         (var_clear_aux) New function.
266         (var_dtor_free) New function.
267         (discard_variables) Use NULL instead of inline_file.
268
269 Fri Nov 12 10:07:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
270
271         * value-labs.c  Fixed the implmentation of value_to_string, so 
272         that it properly handles alpha values.
273
274         * oneway.q  Changed instances where labels were being probed manually, 
275         to use the canonical {var,value}_to_string functions
276
277 Thu Nov 11 21:01:31 WST 2004 John Darrington <john@darrington.wattle.id.au>
278
279         * examine.q cartesian.c chart.[ch]   Added normal and detrended normal
280         plots.  Changed the API of the cartesian plot to be a much lower level
281         thing.
282
283 Sun Nov  7 17:25:04 WST 2004 John Darrington <john@darrington.wattle.id.au>
284
285         * examine.q Added some of the parametric calculations
286
287         * factor_stats.[ch]  Created
288         
289 Sat Nov  6 21:24:31 WST 2004 John Darrington <john@darrington.wattle.id.au>
290
291         * examine.q  Changed the definition of factors to be a composite, and
292         dealt with the consequences.
293
294 Sat Nov  6 20:40:38 WST 2004 John Darrington <john@darrington.wattle.id.au>
295
296         * examine.q Fixed problem where examine wasn't dealing properly with 
297         splits
298
299 Sat Nov  6 14:49:47 WST 2004 John Darrington <john@darrington.wattle.id.au>
300
301         * oneway.q Fixed problem where oneway wasn't dealing properly with 
302         splits
303
304 Thu Nov  4 11:09:01 WST 2004 John Darrington <john@darrington.wattle.id.au>
305
306         * q2c.c examine.q  Fixed a bug (feature?) whereby arrays in the
307         command which had settings didn't get the appropriate code
308         generated.
309
310         * val.h value-labels.[ch] var-labs.c Added v*to_string functions
311         to convert variables/values to strings.
312
313         * examine.q  Added framework for the EXAMINE command.
314
315 Mon Nov  1 12:46:17 WST 2004 John Darrington <john@darrington.wattle.id.au>
316
317         * q2c.c frequencies.q set.q t-test.q  Fixed the q2c parsing of DBL 
318         subcommand types.  Changed frequencies.q to use it rather then the 
319         custom parser.  Dealt with the consequences.  Added a test for NTILES
320         subcommand of frequencies.
321
322 Sat Oct 30 09:16:29 WST 2004 John Darrington <john@darrington.wattle.id.au>
323
324         * oneway.q   Fixed up the behaviour when given missing values
325
326         * levene.c oneway.q Fixed a buglet with the levene statistic and
327         incorporated the levene test into the oneway command.
328
329         * group.h  t-test.q  Moved the CMP_EQ and CMP_LE symbols out of 
330         global scope, since they're only relevant to T-TEST
331
332 Fri Oct 29 17:39:03 WST 2004 John Darrington <john@darrington.wattle.id.au>
333
334         * group.c group.h group_proc.h levene.c oneway.q t-test.q
335
336         Made the t-test more consistent
337         with the way it handles groups.  That is, it now uses a hash instead
338         of an array of 2.  Also, made the levene.c file independent of the 
339         implementation of the t-test.  So now levene should be fine for both
340         t-test and anova.
341
342         * Added an oneway.q file for one way anova
343
344 Wed Jun  2 22:08:02 2004  Ben Pfaff  <blp@gnu.org>
345
346         * descript.c: (cmd_descriptives) Remove harmless but bogus test in
347         STATISTICS parsing.
348
349 Mon May 31 20:45:24 2004  Ben Pfaff  <blp@gnu.org>
350
351         Fix memory leaks.
352
353         * data-list.c: (cmd_data_list) Free dls->delims on lossage.
354         (data_list_trns_free) Free dls->delims.
355
356         * t-test.q: (tts_custom_pairs) Free vars.
357         (ssbox_one_sample_init) Fix tab_vline() argument.
358         (ssbox_independent_samples_init) Ditto.
359         (trbox_paired_init) Ditto.
360         (trbox_one_sample_init) Ditto.
361
362 Mon May 31 17:19:27 2004  Ben Pfaff  <blp@gnu.org>
363
364         Generalize casefiles to the extent that we can use them for
365         sorting and other kinds of data transformations.  Change cases to
366         be copy-on-write to improve memory efficiency in common cases.
367         Every access to a member of a `struct ccase' was changed to be a
368         call to a case_*() function, especially case_data(), case_num(),
369         case_str(), or case_data_rw().  Many instances of a local variable
370         named "case_num" were changed to "case_idx" as a consequence.
371         Many `struct ccase *' were changed to actual `struct ccase'
372         because of copying semantics of cases.  In several places there
373         was a choice between updating debug code to work with the new ADTs
374         or just deleting it because it was useless; I chose to delete it.
375  
376         * Makefile.am: (pspp_SOURCES) Add case.c, case.h.
377
378         * case.c: New file.
379
380         * case.h: New file.
381
382         * aggregate.c: (struct agr_proc) Change type of `sort' to
383         sort_criteria *.  Add `break_vars', `break_var_cnt' members.
384         Rename `vars' to `agr_vars', all references updated.  Change
385         `agr_case' to type `struct ccase'.
386         (cmd_aggregate) Deal with new members.  Use case_create(),
387         sort_active_file_in_place(), sort_active_file_to_casefile().
388         (agr_destroy) Deal with new members.
389         (aggregate_single_case) Ditto.
390         (dump_aggregate_info) Ditto.
391         (initialize_aggregate_info) Ditto.
392         (agr_to_active_file) Ditto.
393         (presorted_agr_to_sysfile) Ditto.
394         (sort_agr_to_sysfile) Removed.
395
396         * alloc.c: (out_of_memory) Make non-static.
397
398         * alloc.h: Prototype out_of_memory().
399
400         * casefile.c: Switched from a linked list in-memory representation
401         to a two-level array-style representation.  The linked list was
402         appropriate when we could stick a header onto cases, but that's no
403         longer the case.  Also, the two-level array will allow for random
404         in-memory access in case that's ever wanted.  Also added the
405         concept of a `destructive casereader', one that destroys cases in
406         the underlying casefile as they are read out.
407         (macro CASES_PER_BLOCK) New macro.
408         (struct casefile) New members `value_cnt', `case_list_size',
409         `case_acct_size', `being_destroyed', `cases'.  Removed `head',
410         `tail'.
411         (struct casereader) Removed `cur'.  Added `destructive', `c'.
412         (global var casefiles) Made static.
413         (static var case_bytes) New var.
414         (casefile_create) Takes a value count, not a case size in bytes,
415         to conform to the case interface.  All callers updated.  Deal with
416         new and removed members.
417         (casefile_destroy) Deal with new and removed members.
418         (casefile_sleep) New function.
419         (casefile_get_case_size) Removed.
420         (casefile_get_value_cnt) New function.
421         (casefile_append) Rewritten to deal with new and removed members.
422         (casefile_append_xfer) New function.
423         (write_case_to_disk) Use case_serialize().
424         (call_posix_fadvise) Removed because posix_fadvise64 segfaults.
425         Couldn't figure out why.
426         (casefile_to_disk) Don't call call_posix_fadvise.  Rewritten to
427         deal with new and removed members.
428         (merge) Removed.
429         (merge_sort) Removed.
430         (casefile_sort) Removed.
431         (casefile_get_reader) Deal with new and removed members.
432         (casefile_get_destructive_reader) New function.
433         (reader_open_file) Make code more readable.  Create case for
434         reader.
435         (casereader_get_casefile) New function.
436         (casereader_read) Deal with new and removed members.  Now returns
437         a copy of the case, so that the caller is responsible for
438         destroying the returned case.
439         (casereader_read_xfer) New function.
440         (casereader_destroy) Destroy reader's case.
441         (test_casefile) Second arg is now a value count, all callers
442         updated.  Now tests destructive readers too.
443         (get_random_case) Deal with new case ADT.
444         (write_random_case) Ditto.
445         (read_and_verify_random_case) Ditto.
446
447         * crosstabs.q: Remove debug code.
448
449         * descript.q: (calc_descriptives) Deal with new case, casefile
450         ADTs.
451
452         * dfm.c: (cmd_begin_data) There's no storage_source_class anymore.
453
454         * do-if.c: Remove unneeded header inclusion.
455
456         * expr-prs.c: Remove debug code.
457
458         * exprP.h: Remove debug code.
459
460         * flip.c: (flip_file) Use fseeko() if available.
461
462         * formats.c: Remove debug code.
463
464         * get.c: Remove debug code.
465         (struct mtf_file) Change `input' from `union value *' to `struct
466         ccase', all references updated.
467
468         * levene.c: (levene) Deal with new case, casefile ADTs.
469
470         * list.q: Remove debug code.
471
472         * loop.c: Remove debug code.
473         
474         * matrix-data.c: Remove debug code.
475
476         * means.q: Remove debug code.
477
478         * mis-val.c: Remove debug code.
479
480         * pfm-read.c: Remove debug code.
481         (pfm_read_code) Change second arg from `union value *' to `struct
482         ccase *', all references updated.
483
484         * recode.c: (string_to_long) Make first arg const.
485         (convert_to_double) Ditto.
486
487         * repeat.c: Remove debug code.
488
489         * sample.c: Remove debug code.
490
491         * sfm-read.c: Remove debug code.
492         (sfm_read_case) Change second arg from `union value *' to `struct
493         ccase *'.
494
495         * sort.c: Redone in terms of casefiles.
496         (enum sort_direction) Moved here from sort.h.
497         (struct sort_criterion) New structure.
498         (struct sort_criteria) New structure.
499         (cmd_sort_cases) Rewritten.
500         (prepare_to_sort_active_file) New function.
501         (sort_active_file_in_place) New function.
502         (sort_active_file_to_casefile) New function.
503         (parse_sort) Renamed sort_parse_criteria(), rewritten & interface
504         changed, all callers updated.
505         (destroy_sort_cases_pgm) Renamed sort_destroy_criteria(),
506         rewritten & interface changed, all callers updated.
507         (sort_cases) Renamed sort_execute(), rewritten & interface
508         changed, all callers updated.
509         (struct internal_sort) Removed.
510         (do_internal_sort) Rewritten, interface changed.
511         (destroy_internal_sort) Removed.
512         (compare_case_dblptrs) Use sort_criteria instead of sort_case_pgm.
513         (struct initial_run) Removed; an initial run is now just a
514         casefile.
515         (compare_initial_runs) Rewritten.
516         (struct external_sort) Changed almost completely.
517         (do_external_sort) Rewritten, interface changed.
518         (destroy_external_sort) Rewritten.
519         [HAVE_MKDTEMP] (make_temp_dir) Removed.
520         [!HAVE_MKDTEMP] (do_mkdir) Removed.
521         [!HAVE_MKDTEMP] (make_temp_dir) Removed.
522         (init_external_sort) Removed.
523         (simulate_error) Removed.
524         (rmdir_temp_dir) Removed.
525         (get_temp_file_name) Removed.
526         (open_temp_file) Removed.
527         (close_temp_file) Removed.
528         (remove_temp_file) Removed.
529         (write_temp_file) Removed.
530         (read_temp_file) Removed.
531         (struct record_run) Change `record' from `struct case_lit *' to
532         `struct ccase'.
533         (struct initial_run_state) Remove `idx_to_fv', `free_list',
534         `file_idx', `output_file'.  Add `run', casefile'.  Change
535         `last_output' from `struct case_list *' to `struct ccase'.
536         (write_initial_runs) Change interface, rewrite.
537         (sort_sink_write) Renamed process_case(), changed interfaced,
538         rewrote.
539         (destroy_initial_run_state) Rewritten.
540         (allocate_cases) Rewritten.
541         (compare_record) Interface changed, rewritten.
542         (start_run) Rewritten.
543         (end_run) Rewritten.
544         (output_record) Rewritten.
545         (grab_case) Removed.
546         (release_case) Removed.
547         (struct merge_case) Change `cases' from double pointer to single
548         pointer.
549         (merge) Deal with new case and casefile ADTs.
550         (struct run) Removed.
551         (merge_once) Rewritten, interface changed.
552         (fill_run_buffer) Removed.
553         (sort_sink_make_source) Removed.
554         (sort_sink_class) Removed.
555         (struct sort_source_aux) Removed.
556         (sort_source_read_helper) Removed.
557         (sort_source_read) Removed.
558         (read_sort_output) Removed.
559         (read_internal_sort_output) Removed.
560         (read_external_sort_output) Removed.
561         (sort_source_destroy) Removed.
562         (sort_source_class) Removed.
563
564         * sort.h: (struct sort_cases_pgm) Removed.
565         (enum sort_direction) Moved to sort.c.
566
567         * t-test.q: (calculate) Deal with new case, casefile ADTs.
568
569         * tab.c: Remove debug code.
570
571         * var-labs.c: Remove debug code.
572
573         * var.h: (struct ccase) Removed.
574         (struct case_list) Removed.
575
576         * vars-atr.c: (discard_variables) Use free_case_source().
577
578         * vars-prs.c: (parse_vs_variable) Make arg const.
579         (parse_dict_variable) Ditto.
580         (parse_variables) Make struct dictionary * arg const.
581         (parse_var_set_vars) Make struct var_set * arg const.
582         (struct var_set) Add const to some of the function pointers' args.
583         (var_set_get_cnt) Make arg const.
584         (var_set_get_var) Make first arg const.
585         (var_set_lookup_var) Make first arg const.
586         (dict_var_set_get_cnt) Make arg const.
587         (dict_var_set_get_var) Make first arg const.
588         (dict_var_set_lookup_var) Make first arg const.
589         (var_set_create_from_dict) Make arg const.  Add cast to aux
590         assignment.
591         (struct array_var_set) Add const to var member.
592         (array_var_set_get_cnt) Make arg const.
593         (array_var_set_get_var) Make first arg const.
594         (array_var_set_lookup_var) Make first arg const.
595         (var_set_create_from_array) Make first arg const.  Insert cast.
596
597         * vfm.c: (struct write_case_data) Change trns_case, sink_case
598         members from `struct ccase *' to `struct ccase'.
599         (static var lag_queue) Change from double to single pointer.
600         (procedure) Optimize trivial case.
601         (internal_procedure) Deal with changed case, case_source ADTs.
602         (create_trns_case) Changed interface, rewrote.
603         (open_active_interface) Initialize modified lag queue.
604         (write_case) Deal with changed case ADT.
605         (lag_case) Deal with modified lag queue.
606         (close_active_file) Destroy modified lag queue.
607         Deal with changed case_source, case_sink ADTs.
608         (destroy_storage_stream_info) Make null arg into no-op.
609         (storage_sink_make_source) Set aux in created source.
610         (storage_source_read) Deal with changed case, casefile ADTs.
611         (storage_source_create) New function.
612         (lagged_case) Rewrite.
613         (free_case_source) New function.
614         (free_case_sink) Rewrite.
615         (struct split_aux_data) Changed prev_case from `struct ccase *' to
616         `struct ccase'.
617         (procedure_with_splits) Deal with changed prev_case.
618         (procedure_with_splits_callback) Ditto.
619         (multipass_split_aux_data) Changed prev_case from `struct ccase *' to
620         `struct ccase'.
621         (multipass_procedure_with_splits) Deal with changed prev_case.
622         (multipass_split_callback) Ditto.
623         
624         
625 Mon May 31 17:19:06 2004  Ben Pfaff  <blp@gnu.org>
626
627         The workspace idea didn't work out.
628
629         * Makefile.am: (pspp_SOURCES) Remove workspace.c, workspace.h.
630         
631         * workspace.c: Removed.
632
633         * workspace.h: Removed.
634
635 Sun May 30 18:35:19 2004  Ben Pfaff  <blp@gnu.org>
636
637         Fully implement arbitrary delimiters on DATA LIST, extending the
638         half implementation that was already there.
639
640         * data-list.c: (struct data_list_pgm) Remove `delim', add
641         `delims', `delim_cnt'.
642         (cmd_data_list) Initialize new members.  Parse delimiters and
643         clean up code a bit.
644         (cut_field) Extract fields with arbitrary delimiters.  Also, fix
645         handling of leading commas.
646         (read_from_data_list_fixed) Expand tabs.  Adapt to new DFM
647         interfaces.
648         (read_from_data_list_free) Adapt to new DFM interfaces.
649         (read_from_data_list_list) Ditto.
650         (repeating_data_trns_proc) Ditto.
651
652         * dfm.c: Split up reader and writer into separate code, because
653         they do different things.  Use struct string instead of explicit
654         allocation code, for clarity.
655         (enum dfm_reader_flags) New enum.
656         (struct dfm_fhuser_ext) Removed.
657         (struct dfm_reader_ext) New.
658         (get_reader) New function, used by just about all the reader
659         functions.
660         (dfm_close) Removed.
661         (close_reader) New function.
662         (dfm_open_for_reading) Rewrite initialization of dfm_fhuser_ext.
663         (dfm_open_for_writing) Ditto.
664         (macro force_line_buffer_expansion) Removed.
665         (count_tabs) Removed.
666         (tabs_to_spaces) Removed.
667         (read_record) Deal with new dfm_reader_ext.  Use struct string
668         functions.  Don't convert tabs to spaces.
669         (dfm_eof) New function.
670         (dfm_get_record) Changed interface, rewrote.
671         (dfm_expand_tabs) New function.
672         (dfm_fwd_record) Renamed dfm_forward_record(), updated to new
673         dfm_reader_ext, rewritten.
674         (dfm_bkwd_record) Renamed dfm_reread_record(), updated to new
675         dfm_reader_ext, rewritten.
676         (dfm_set_record) Removed in favor of dfm_forward_columns().
677         (dfm_forward_columns) New function.
678         (dfm_get_cur_col) Renamed dfm_column_start, updated to new
679         dfm_reader_ext, rewritten.
680         (static var dfm_r_class) Use close_reader for the destructor.
681         (struct dfm_writer_ext) New.
682         (dfm_put_record) Updated to new dfm_writer_ext, rewritten.  Uses
683         bounce buffer now instead of local allocation.
684         (close_writer) New function.
685         (static var dfm_writer_ext) Use close_writer for destructor.
686         (cmd_begin_data) Adapt to new dfm_reader_ext.
687
688         * file-handle.q: Add support for per-file tab width.
689         (struct private_file_handle) Add tab_width member.
690         (q2c specifications) Add tabwidth subcommand.
691         (cmd_file_handle) Put parsed tab width into private_file_handle.
692         (create_file_handle) Set default tab width.
693         (handle_get_tab_width) New function.
694
695         * file-type.c: (file_type_source_read) Adapt to new DFM interface.
696
697         * inpt-pgm.c: (reread_trns_proc) Ditto.
698
699         * matrix-data.c: (context) Ditto.
700         (another_token) Ditto.
701         (mget_token) Ditto.
702         (force_eol) Ditto.
703
704 Sun May 30 18:33:59 2004  Ben Pfaff  <blp@gnu.org>
705
706         * casefile.c: (casefile_destroy) Fix memory leak by freeing
707         cf->filename.
708         (casereader_destroy) Don't close file descriptor -1.
709
710         * recode.c: (cmd_recode) Fix memory leak.
711
712         * set.q: (q2c specifications) Fix typo in user message.
713
714         * str.c: (st_bare_pad_len_copy) Change memcpy to memmove to avoid
715         undefined behavior for overlapping arguments.
716
717 Sun May 30 18:31:48 2004  Ben Pfaff  <blp@gnu.org>
718
719         * casefile.c: valgrind doesn't implement posix_fadvise() yet, so
720         don't call it when we're running under valgrind.
721         (call_posix_fadvise) New function.
722         (casefile_to_disk) Use call_posix_fadvise().
723         (reader_open_file) Ditto.
724         
725 Sun May 30 18:20:12 2004  Ben Pfaff  <blp@gnu.org>
726
727         Update our string ADTs, struct string and struct len_string.  Get
728         rid of pool support, which was largely unused.  Rename lots of
729         functions to have more obvious or consistent names.
730         
731         * ascii.c: Get rid of ascii_pool.  It was only used for string
732         allocations.
733         (ascii_open_global) Don't create ascii_pool.
734         (ascii_close_driver) Don't destroy ascii_pool.
735         (ascii_postopen_driver) Don't use pool.
736         (ascii_close_driver) Destroy strings manually.
737
738         * str.c: (ds_create) Remove pool argument, all references updated.
739         (ds_init) Ditto.
740         (ds_replace) Remove pool support, make more efficient when we
741         don't need to reallocate.
742         (ds_destroy) Remove pool support.
743         (ds_rpad) New function.
744         (ds_size) Renamed ds_capacity(), all references updated.
745         (ds_value) Renamed ds_c_str(), all references updated.
746         (ds_concat) Renamed ds_puts(), all references updated.
747         (ds_concat_buffer) Renamed ds_concat(), all references updated.
748         (ds_putchar) Renamed ds_putc(), all references updated.
749         (ds_getline) Renamed ds_gets(), all references updated.
750         (ls_create) Remove pool argument, all references updated.
751         (ls_create_buffer) Ditto.
752         (ls_destroy) Removed pool support.
753         (ls_value) Renamed ls_c_str(), all references updated.
754
755         * str.h: (ls_length) [__GNUC__] Add inline version.
756         (ls_c_str) [__GNUC__] Add inline version.
757         (ls_end) [__GNUC__] Add inline version.
758         (struct string) Remove pool member.  Rename `size' to `capacity',
759         all references updated.
760
761         * tab.c: (text_format) Instead of using pool argument to
762         ls_create_buffer(), call pool_register() on allocated data.
763
764 Mon Apr 26 22:40:07 2004  Ben Pfaff  <blp@gnu.org>
765
766         We're abusing the current ASCII driver by telling it to allocate a
767         9999-line, 9999-character page in the tests.  This causes some
768         systems to curl up and die because it allocates 20 MB of
769         contiguous RAM.  This change alleviates at least part of the
770         problem.  It is mostly a stop-gap until the new output system is
771         ready.
772         
773         * ascii.c: (struct line) New structure.
774         (struct ascii_driver_ext) Remove `page', `page_size', `line_len',
775         `line_len_size', `n_output' members.  Add `lines', `lines_cap'.
776         (ascii_preopen_driver) Initialize new members, not old ones.
777         (ascii_close_driver) Destroy new members, not old ones.
778         (ascii_open_page) Allocate new members, not old ones.
779         (expand_line) Allocate room in line.
780         (draw_line) Use new members.
781         (ascii_line_horz) Ditto.
782         (ascii_line_vert) Ditto.
783         (ascii_line_intersection) Ditto.
784         (text_draw) Ditto.
785         (output_lines) Ditto.
786         (ascii_close_page) Ditto.
787
788 Sun Apr 25 23:40:15 2004  Ben Pfaff  <blp@gnu.org>
789
790         * matrix.c: Dead code.  Removed.
791
792         * matrix.h: Dead code.  Removed.
793
794 Fri Apr 16 23:59:51 2004  Ben Pfaff  <blp@gnu.org>
795
796         Contrary to what I'd always understood, there is an efficient
797         algorithm for deletion from a hash table populated via linear
798         probing.  This change implements it.
799         
800         * hash.c: (hsh_rehash) Probe in increasing order.
801         (hsh_probe) Ditto.
802         (locate_matching_entry) Ditto.
803         (hsh_delete) Use Knuth's Algorithm 6.4R for deletion.
804
805 Tue Apr 13 19:24:15 2004  Ben Pfaff  <blp@gnu.org>
806
807         * moments.c (calc_moments): Adjust calculation of kurtosis to
808         avoid subtracting huge numbers from huge numbers, on Michael
809         Kiefte's advice.
810
811 Sun Apr 11 14:22:12 2004  Ben Pfaff  <blp@gnu.org>
812
813         Rework moments routines for improved numerical stability based on
814         Michael Kiefte's advice.  Any bugs or remaining numerical problems
815         are still mine though.
816
817         There is now a struct moments1 for use with one-pass moments.  It
818         uses a provisional means algorithm as an attempt to improve
819         accuracy of higher moments.  The older struct moments now only
820         handles two-pass moments.
821         
822         * aggregate.c: Use moments1 instead moments.
823
824         * descript.c: Revert previous change, which is no longer needed
825         due to the moments revision.
826
827         * moments.c: (calc_moments) New function for calculating variance,
828         skewness, kurtosis.
829         (moments_pass_one) Only accumulate weights bigger than zero.
830         (moments_calculate) Allow calculating the mean on pass one, others
831         require pass two.  Implement in terms of calc_moments().
832         (struct moments1) New structure.
833         (init_moments1) New function.
834         (moments1_clear) Ditto.
835         (moments1_create) Ditto.
836         (moments1_add) Ditto.
837         (moments1_calculate) Ditto.
838         (moments1_destroy) Ditto.
839         (cmd_debug_moments) Deal with `struct moments' or `struct
840         moments1' as requested by user.
841
842 Sun Apr 11 14:21:55 2004  Ben Pfaff  <blp@gnu.org>
843
844         * Makefile.am (pspp_SOURCES): Remove debug.c.
845
846         * debug.c: Removed.  It was empty anyway.
847
848 Fri Apr  9 20:04:49 2004  Ben Pfaff  <blp@gnu.org>
849
850         * descript.c (calc_descriptives): Fix assert failure when only
851         MOMENT_MEAN is needed.
852
853 2004-04-09  Michael Kiefte  <mkiefte@dal.ca>
854
855         * descript.c: 
856
857         fixed problem with parsing in match_statistic() causing
858         "DESCRIPTIVE STAT=MEAN." to barf.
859
860         "MEAN" is now default if "SORT" given without specification.
861
862         Fixed infinite loop with "DESCRIPT GIBBERISH=ALL."  Parsing is
863         generally less forgiving of syntax errors: better to have it do
864         nothing and type it in again then to not know what it actually did
865         instead.  
866
867         z-score transformation now checks score for user-missing values
868         and checks std_dev for SYSMIS.
869
870 2004-04-06  Michael Kiefte  <mkiefte@dal.ca>
871
872         * aggregate.c, crosstabs.q, descript.c, dictionary.c, frequencies.q, levene.c, t-test.q, var.h: 
873         Changed dict_get_case_weight() to accept an additional int * flag
874         to complain about system-missing, user-missing, zero, or negative
875         weights and updated existing functions to pass int * to
876         dict_get_case_weight().
877
878 2004-04-05  jmd  <jmd@gnu.org>
879
880         * main.c: Fixed configuration problems with gsl
881
882         * t-test.q: Fixed some problems encountered when compiling under Cygwin
883
884 2004-04-03  blp  <blp@gnu.org>
885
886         * lexer.c, ChangeLog:
887         Fix infinite loop on comment at end of file, add test.
888
889 2004-04-03  jmd  <jmd@gnu.org>
890
891         * settings.h, var.h, ChangeLog, Makefile.am, cmdline.c, command.c, command.h, error.h, filename.c, frequencies.q, lexer.h, main.c, q2c.c, set.q:
892         Fixed the calculation of percentiles and added --syntax and --algorithm options
893
894 Sat Apr  3 11:43:37 2004  Ben Pfaff  <blp@gnu.org>
895
896         * lexer.c: (lex_skip_comment) Handle end-of-file correctly (I
897         hope).
898
899 Sat Apr  3 15:00:18 WST 2004 John Darrington <john@darrington.wattle.id.au>
900
901         * frequencies.q:  Fixed the calculation of percentiles
902
903         * Makefile.am:  Added the --ansi flag and dealt with the
904         consequences.  Added some entries to PSPP_sources so that
905         make distcheck would pass
906
907         * cmdline.c:   Added the --syntax and --algorithm options
908
909         * q2c.c:  Added an implicit /ALGORITHM subcommand to everything.
910
911 Fri Apr  2 11:25:22 WAST 2004 John Darrington <john@darrington.wattle.id.au>
912
913         * t-test.q, levene.c, levene.h  Converted t-test (incl levene) to 
914         use the new multipass_split_... mechanism.
915
916 Wed Mar 31 22:36:22 2004  Ben Pfaff  <blp@gnu.org>
917
918         * frequencies.q: (calc_stats) Use moments data structure and
919         calc_seskew(), calc_sekurt() functions.
920
921         * set.q main.c settings.h Added support for --syntax and --algorithm 
922         options
923
924 Tue Mar 30 22:04:19 2004  Ben Pfaff  <blp@gnu.org>
925
926         * vfm.c: Had to get last call to multipass_split_output() inside
927         open_active_file()/close_active_file() pairing, so introduce new
928         function.
929         (internal_procedure) Move procedure() code here, except for calls
930         to open_active_file() and close_active_file().
931         (procedure) Wrap open_active_file() and close_active_file() around
932         internal_procedure().
933         (multipass_procedure_with_splits) Wrap open_active_file() and
934         close_active_file() around internal_procedure().
935
936 Tue Mar 30 22:01:57 2004  Ben Pfaff  <blp@gnu.org>
937
938         * descript.c: (cmd_descriptives) Free `vars' to avoid memory leak.
939
940 Mon Mar 29 16:26:40 2004  Ben Pfaff  <blp@gnu.org>
941
942         * debug.c: Removed.  Moved cmd_debug_evaluate() into expr-evl.c.
943
944         * expr-evl.c: (cmd_debug_evaluate) Moved here from debug.c.
945
946 Mon Mar 29 16:03:08 2004  Ben Pfaff  <blp@gnu.org>
947
948         * algorithm.c: By default turn off some of the more expensive
949         assertions.
950         (expensive_assert) New macro which expands to assert if
951         EXTRA_CHECKS is defined, to nothing otherwise.
952         (unique) Use expensive_assert().
953         (binary_search) Ditto.
954         (push_heap) Ditto.
955         (pop_heap) Ditto.
956         (make_heap) Ditto.
957         (sort_heap) Ditto.
958
959         * command.c: (conflicting_3char_prefixes) Words that are the same
960         don't cause conflicts when they are abbreviated to the first three
961         letters.
962
963         * expr-evl.c: (CONCAT_func) Fix memory leak by incrementing struct
964         nonterm_node's n earlier.
965         (generic_str_func) Ditto.
966         
967 Mon Mar 29 15:32:17 2004  Ben Pfaff  <blp@gnu.org>
968
969         Add support for multipass procedures.  Rewrite DESCRIPTIVES to
970         test multipass support, take advantage of new moments
971         calculation, and to not be such crappy code.  Get rid of q2c
972         processing for DESCRIPTIVES.
973
974         * vfm.c: (struct multipass_split_aux_data) New structure.
975         (multipass_procedure_with_splits) New function.
976         (multipass_split_callback) New function.
977         (multipass_split_output) New function.
978         * descript.q: Removed.
979
980         * descript.c: New file.
981
982         * var.h: Removed descriptives enums.
983         (struct descriptives_proc) Removed.
984         (struct variable) Removed p.dsc.
985
986         * Makefile.am: (q_sources_c) Remove descript.c.
987         (q_sources_q) Removed descript.q.
988         
989 Mon Mar 29 15:31:55 2004  Ben Pfaff  <blp@gnu.org>
990
991         New manager for keeping track of used workspace.
992         
993         * workspace.c: New file.
994
995         * workspace.h: New file.
996
997         * Makefile.am: (pspp_SOURCES) Add workspace.c, workspace.h.
998
999         * sort.c: (do_internal_sort) Use workspace_malloc().
1000         (destroy_internal_sort) Use workspace_free().
1001
1002 Mon Mar 29 15:31:08 2004  Ben Pfaff  <blp@gnu.org>
1003
1004         New `struct casefile' for managing sets of cases.
1005
1006         * casefile.c: New file.
1007
1008         * casefile.h: New file.
1009
1010         * command.def: Add DEBUG CASEFILE command.
1011
1012         * Makefile.am: (pspp_SOURCES) Add casefile.c, casefile.h.
1013
1014         * sort.c: (sort_cases) Move logic for sending storage file to disk
1015         into do_external_sort().
1016         (struct internal_sort) Use an array of ccase pointers instead of a
1017         case_list.
1018         (do_internal_sort) Rewrite to handle casefiles.
1019         (compare_case_list) Removed.
1020         (compare_cases) New function.
1021         (compare_case_dblptrs) New function.
1022         (read_internal_sort_output) Deal with new struct internal_sort.
1023
1024         * vfm.c: (static var workspace_overflow) Removed.
1025         (struct storage_stream_info) Removed all the members.  Added
1026         struct casefile * member.
1027         (storage_sink_open) Use casefile.
1028         (open_storage_file) Removed.
1029         (write_storage_file) Removed.
1030         (storage_to_disk) Removed.
1031         (destroy_storage_stream_info) Use casefile.
1032         (storage_sink_write) Use casefile.
1033         (storage_sink_make_source) Use casefile.
1034         (storage_source_count) Use casefile.
1035         (storage_source_read) Use casefile.
1036         (storage_source_on_disk) Removed.
1037         (storage_source_get_cases) Removed.
1038         (storage_source_set_cases) Removed.
1039         (storage_source_get_casefile) New function.
1040         
1041 Mon Mar 29 15:30:09 2004  Ben Pfaff  <blp@gnu.org>
1042
1043         New `struct moments' for calculating moments.
1044
1045         * stats.c: Removed.
1046
1047         * stats.h: Removed.
1048
1049         * moments.c: New file.
1050
1051         * moments.h: New file.
1052
1053         * command.def: Add DEBUG MOMENTS command.
1054
1055         * Makefile.am: (pspp_SOURCES) Add moments.c, moments.h.  Remove
1056         stats.c, stats.h.
1057
1058         * aggregate.c: Modify AGGREGATE to use the new moments
1059         calculation, even if not in such a great way.
1060         (struct agr_var) Add `moments' member.
1061         (parse_aggregate_functions) Set `moments' member to null.
1062         (agr_destroy) Destroy `moments' member.
1063         (accumulate_aggregate_info) Use `moments' for standard deviation.
1064         (dump_aggregate_info) Ditto.
1065         (initialize_aggregate_info) Create or clear `moments'.
1066
1067         * misc.h: Add pow2(), pow3(), pow4() functions in place of sqr(),
1068         cube(), pow4() that were in stats.h.  All references updated.
1069
1070         * crosstabs.q: stats.h had chi-square significance functions.  Use
1071         GSL instead.
1072         (display_chisq) Use gsl_cdf_chisq_Q() instead of chisq_sig().
1073
1074         * expr-evl.c: (expr_evaluate) Use moments_of_values() for
1075         OP_CFVAR, OP_MEAN, OP_SD, OP_VARIANCE.
1076                 
1077 Fri Mar 26 14:21:23 2004  Ben Pfaff  <blp@gnu.org>
1078
1079         * dictionary.c: (dict_compact_values) Compacted values need to
1080         start off from 0.
1081
1082 Fri Mar 26 00:54:57 2004  Ben Pfaff  <blp@gnu.org>
1083
1084         * var-labs.c: (cmd_variable_labels) For compatibility, don't allow
1085         `/' at start.  Check return value of parse_variables() for error
1086         return.
1087
1088 Fri Mar 26 00:19:27 2004  Ben Pfaff  <blp@gnu.org>
1089
1090         Revamp expressions: make the code a little nicer, and fix bugs
1091         found in testing.
1092         
1093         * expr-evl.c: (expr_evaluate) Make expression argument const.
1094         Support OP_ADD, OP_SUB, OP_MUL, OP_DIV instead of OP_PLUS, OP_MUL.
1095         OP_POW is missing for arg 2 <= 0.  OP_LOG is natural log, not
1096         base-10 log.  Fix OP_ANY, OP_ANY_STRING, OP_RANGE, OP_RANGE_STRING
1097         off-by-ones.  Add OP_MAX_STRING, OP_MIN_STRING.  Fix OP_TIME_HMS,
1098         OP_DATE_WKYR boundary conditions.  Add OP_CTIME_DAYS,
1099         OP_CTIME_HOURS, OP_CTIME_MINUTES, OP_CTIME_DAYS, OP_CTIME_SECONDS.
1100         Support OP_INDEX_2, OP_INDEX_3, OP_RINDEX_2, OP_RINDEX_3 instead
1101         of OP_INDEX, OP_INDEX_OPT, OP_RINDEX, OP_RINDEX_OPT.  Merge
1102         OP_LPAD_OPT into OP_LPAD, OP_RPAD_OPT into OP_RPAD, OP_LTRIM_OPT
1103         into OP_LTRIM, OP_RTRIM_OPT into OP_RTRIM, OP_NUMBER_OPT into
1104         OP_NUMBER.  Fix OP_RTRIM fragility.  Support OP_SUBSTR_2,
1105         OP_SUBSTR_3 instead of OP_SUBSTR, OP_SUBSTR_OPT.  Remove OP_INV.
1106         Simplify OP_SYSMIS.  Remove OP_STR_MIS.
1107
1108         * expr-opt.c: (optimize_expression) Rewrite.
1109         (macro n0) Removed.
1110         (macro n1) Removed.
1111         (macro n2) Removed.
1112         (macro s0) Removed.
1113         (macro s0l) Removed.
1114         (macro s1) Removed.
1115         (macro s1l) Removed.
1116         (macro s2) Removed.
1117         (macro s2l) Removed.
1118         (macro s) Removed.
1119         (macro sl) Removed.
1120         (eq_num_con) New function.
1121         (optimize_tree) New function.
1122         (macro rnc) Removed.
1123         (macro frnc) Removed.
1124         (str_search) Add const to string params.
1125         (str_rsearch) Ditto.
1126         (evaluate_tree_no_missing) Renamed from evaluate_tree.  Add num[],
1127         str[], str_len[] locals to substitute for most of removed macros.
1128         Support OP_ADD, OP_SUB, OP_MUL, OP_DIV instead of OP_PLUS, OP_MUL.
1129         Removed support for missing values because we're never called with
1130         missing values.  Use set_number() or set_number_errno() instead of
1131         rnc or frnc.  Removed any stuff that caused trouble in testing.
1132         We can re-add it later if it really slows anything.  Fix some
1133         random problems.
1134         (evaluate_tree_with_missing) Not yet supported.  To be added later
1135         if it's important.
1136         (repl_num_con) Removed.
1137         (collapse_node) New function.
1138         (force_repl_num_con) Removed.
1139         (set_number) New function.
1140         (set_number_errno) New function.
1141         (repl_str_con) Removed.
1142         (set_string) New function.
1143         (yrmoda) Tighten boundary conditions.  Adopt 2030 cut-off for
1144         2-digit years.
1145         (dump_node) No special case for OP_AND, OP_OR.
1146
1147         * expr-prs.c: (expr_prs) Honor EXPR_NO_OPTIMIZE bit.  Rewrite.
1148         (expr_get_type) New function.
1149         (type_check) Rewrite.
1150         (type_coercion) New function.
1151         (struct operator) New structure.
1152         (match_operator New function.
1153         (parse_binary_operators) New function.
1154         (parse_inverting_unary_operator) New function.
1155         (parse_or) Rewritten.
1156         (parse_and) Rewritten.
1157         (parse_not) Rewritten.
1158         (parse_rel) Rewritten.
1159         (parse_add) Rewritten.
1160         (parse_mul) Rewritten.
1161         (parse_neg) Rewritten.
1162         (parse_exp) Rewritten.
1163         (parse_sysvar) Add $TRUE, $FALSE system variables.
1164         Get $LENGTH, $WIDTH from get_viewlength(), get_viewwidth().
1165         (parse_primary) Use allocate_var_node(), allocate_num_con(),
1166         allocate_str_con().
1167         (struct function) Remove desc, change `func' prototype.
1168         (unary_func) Remove special cases.
1169         (MISSING_func) Reduce to unary_func() that just returns a boolean.
1170         (SYSMIS_func) Handle SYSMIS((x)) like SYSMIS(x).
1171         (VALUE_func) Use allocate_var_node().
1172         (nary_num_func) Allow MIN and MAX for strings.
1173         Use allocate_var_node().  Properly clean up.
1174         Fix return type.
1175         (generic_str_func) Use local table instead of removed `desc'
1176         member.  Mostly rewrite.
1177         (get_num_args) Revise error message.
1178         (parse_function) Return EXPR_ERROR, not 0 on error.
1179         (macro op) Removed.
1180         (macro varies) Removed.
1181         (ops[]) Use expr.def.
1182         (free_node) Do nothing if node is null.
1183         (allocate_num_con) New function.
1184         (allocate_str_con) New function.
1185         (allocate_var_node) New function.
1186         (allocate_binary_nonterminal) New function.
1187         (append_nonterminal_arg) Removed.
1188         (static var func_tab[]) Revised.
1189         (expr_debug_print_postfix) Make parameter const.
1190         Use printf() instead of debug_printf().
1191
1192         * expr.def: New file.
1193         
1194         * expr.h: Change PXP_* to EXPR_*, all references updated.  Also
1195         use named enum instead of unnamed, all references updated.  Add
1196         EXPR_ANY, EXPR_NO_OPTIMIZE.
1197
1198         * exprP.h: Remove EX_*.  Add DEFINE_OPERATOR.  Use expr.def
1199         instead of defining OP_* directly.
1200         (macro IS_TERMINAL) New macro.
1201         (macro IS_NONTERMINAL) New macro.
1202         (enum OP_NO_FLAGS) New.
1203         
1204 Fri Mar 26 00:18:01 2004  Ben Pfaff  <blp@gnu.org>
1205
1206         * error.c: (err_assert_fail) msg variable needs to be non-const.
1207
1208 Fri Mar 26 00:17:24 2004  Ben Pfaff  <blp@gnu.org>
1209
1210         * debug.c: (cmd_debug_evaluate) Rewrite.
1211
1212 Fri Mar 26 00:15:13 2004  Ben Pfaff  <blp@gnu.org>
1213
1214         Fix some CROSSTABS bit rot stupidity.
1215
1216         * crosstabs.q: Reorder the CELLS subcommands for compatibility.
1217         (internal_cmd_crosstabs) Initializes cells[] correctly.
1218         (float_M_suffix) Rename format_cell_entry(), change prototype,
1219         rewrite.
1220         (display_crosstabulation) Fix cell formatting.
1221
1222 Fri Mar 26 00:14:09 2004  Ben Pfaff  <blp@gnu.org>
1223
1224         Make lex_rest_of_line(), lex_entire_end() not discard lines.  Have
1225         to call lex_discard_line() to do that.
1226
1227         * command.c: (run_command) Call lex_discard_line() after
1228         lex_rest_of_line().
1229
1230         * lexer.c: (lex_entire_end) Change behavior.
1231         (lex_rest_of_line) Change behavior.  Return const char *.
1232         (lex_discard_line) Don't clear getl_buf, don't emit message.
1233
1234         * main.c: (handle_error) Emit message here.
1235
1236         * repeat.c: (internal_cmd_do_repeat) Use lex_discard_line()
1237         instead of lex_entire_line().
1238
1239         * str.c: (mm_find_reverse) Make length params size_t.  Rewrite.
1240
1241         * title.c: (get_title) Call lex_discard_line() after
1242         lex_rest_of_line().
1243         (cmd_file_label) Ditto.
1244         (cmd_document) Deal with const char * return value.
1245
1246 Fri Mar 26 00:10:16 2004  Ben Pfaff  <blp@gnu.org>
1247
1248         Removed REMARK command.
1249
1250         * command.c: (extract_prefix) Removed.
1251         (output_line) Removed.
1252         (cmd_remark) Removed.
1253
1254         * command.def: Remove REMARK.
1255
1256 Fri Mar 26 00:08:38 2004  Ben Pfaff  <blp@gnu.org>
1257
1258         Added abort() after lots of assert(0) invocations to avoid some
1259         compiler warnings.  We really need a NOT_REACHED macro.
1260
1261 Tue Mar 23 08:00:42 WAST 2004 John Darrington <john@darrington.wattle.id.au>
1262
1263         * sort.c: Added missing call to temp_file_close.  Changed error 
1264         messages to warnings.
1265
1266         * set.q: Improved setting of set_view{length,width} to be more tolerant
1267         of buggy OSes.
1268
1269 Sun Mar 21 10:11:14 WST 2004 John Darrington <john@darrington.wattle.id.au>
1270
1271         * val-labs.c: Fixed a bug where PSPP would crash, if VALUE LABELS was
1272         used with incorrect syntax.
1273
1274         * error.c, error.h et al:  Overridden definition of assert for a
1275         custom one.
1276
1277         * test-q.c: Fixed a buglet where it would crash if no /VARIABLES
1278         subcommand was given when it ought to have been.
1279
1280 Sat Mar 20 22:19:08 2004  Ben Pfaff  <blp@gnu.org>
1281
1282         * tab.c: (tab_vline) Fix assertions to respect row_ofs and
1283         col_ofs.
1284         (tab_hline) Ditto.
1285         (tab_box) Ditto.
1286         (tab_joint_text) Ditto.
1287
1288 Sat Mar 20 17:57:23 2004  Ben Pfaff  <blp@gnu.org>
1289
1290         * levene.c: Add #include.
1291
1292         * set.q: (set_viewport) Add `int' argument to make its prototype
1293         correct for signal().
1294
1295 Sat Mar 20 15:35:17 2004  Ben Pfaff  <blp@gnu.org>
1296
1297         * expr-evl.c: (expr_evaluate) Assert that `c' is nonzero before
1298         using it.
1299
1300 Sat Mar 20 15:18:16 2004  Ben Pfaff  <blp@gnu.org>
1301
1302         Changed DFM from open-at-first-access to explicit-open.  Before,
1303         calling dfm_get_record() or dfm_put_record() would automatically
1304         open the file.  Now, you have to call dfm_open_for_reading() or
1305         dfm_open_for_writing() explicitly.  This makes it possible to
1306         check permissions, file existence, etc. earlier.
1307
1308         Also made struct file_handle more opaque, and clean up in general.
1309
1310         * data-list.c: (cmd_data_list) Open handle for reading.
1311
1312         * dfm.c: (struct dfm_fhuser_ext) Add `where', `saw_begin_data'
1313         members.
1314         (open_file_r) Renamed dfm_open_for_reading(), rewrote.
1315         (open_file_w) Renamed dfm_open_for_writing(), rewrote.
1316         (open_inline_file) Removed.
1317         (read_record) For inline_file, if we haven't seen BEGIN DATA, read
1318         it.  Deal with line_number in extension record instead of file
1319         handle.
1320         (dfm_get_record) Rewrote.
1321         (dfm_put_record) Rewrote.
1322         (dfm_push) Assert file is open and one of ours.  Deal with
1323         line_number in extension record instead of file handle.
1324         (dfm_pop) Assert file is open and one of ours.  Deal with
1325         line_number in extension record instead of file handle.
1326         (cmd_begin_data) Use dfm_open_for_reading().  Mark that we saw
1327         BEGIN DATA.     
1328
1329         * file-handle.h: (enum constants RH_RF_*) Removed.
1330         (enum constants FH_MD_*) Removed.
1331         (struct file_handle) Removed `name', `norm_fn', `fn', `where',
1332         `recform', `lrecl', `mode' members.  Public references to
1333         `recform' changed to use handle_get_mode(), references to `lrecl'
1334         changed to use handle_get_record_width().  Added `private' member.
1335         (enum file_handle_mode) New.
1336
1337         * file-handle.q: (struct private_file_handle) New structure.
1338         (struct file_handle_list) New structure.
1339         (static var files) New.
1340         (static var file_handles) Removed.
1341         (init_file_handle) Removed.
1342         (create_file_handle) Removed.
1343         (get_handle_with_name) New function.
1344         (get_handle_for_filename) New function.
1345         (cmd_file_handle) Rewritten.
1346         (hash_file_handle) Removed.
1347         (cmp_file_handle) Removed.
1348         (fh_init_files) Rewritten.
1349         (fh_parse_file_handle) Rewritten.  Allows identifiers as
1350         filenames.
1351         (fh_get_handle_by_name) Renamed handle_get_name(), all references
1352         updated.  Rewritten.
1353         (fh_get_handle_by_filename) Renamed handle_get_filename(), all
1354         references updated.  Rewritten.
1355         (fh_record_width) Renamed handle_get_record_width(), all
1356         references updated.  Rewritten.
1357         (handle_get_mode) New function.
1358
1359         * file-type.c: (cmd_file_type) Open handle for reading.
1360
1361         * filename.c: [unix] (struct file_identity) New structure.
1362         [unix] (fn_get_identity) New function.
1363         [unix] (fn_free_identity) New function.
1364         [unix] (fn_compare_file_identities) New function.
1365         [!unix] (struct file_identity) New structure.
1366         [!unix] (fn_get_identity) New function.
1367         [!unix] (fn_free_identity) New function.
1368         [!unix] (fn_compare_file_identities) New function.
1369
1370         * lexer.c: (static var put) Renamed put_token, all references
1371         updated.
1372         (static var put_tokstr) New.
1373         (static var put_tokval) New.
1374         (lex_init) Initialize put_tokstr().
1375         (restore_token) New function.
1376         (save_token) New function.
1377         (lex_get) Use restore_token().
1378         (lex_put_back) Use save_token().
1379         (lex_put_back_id) New function.
1380         (lex_put_forward) Removed.
1381         (lex_preprocess_line) Set put_token instead of using
1382         lex_put_forward().
1383         (lex_negative_to_dash) Use save_token(), set put_token directly.
1384         (dump_token) Use stderr instead of stdout.
1385
1386         * main.c: (main) Remove call to cmd_init().
1387         
1388         * matrix-data.c: (cmd_matrix_data) Open file for reading.
1389
1390         * pfm-read.c: Use handle_get_filename() instead of trying to use
1391         h->fn directly, all over.
1392
1393         * pfm-write.c: Ditto.
1394
1395         * print.c: (internal_cmd_print) Open handle for writing.
1396         (dump_table) Use handle_get_filename().
1397         (print_trns_proc) Use handle_get_mode().
1398         (cmd_print_space) Use fh_parse_file_handle().
1399         Open handle for writing.
1400         [0] (debug_print) Removed.
1401
1402         * sfm-read.c: Use handle_get_filename() instead of trying to use
1403         h->fn directly, all over.
1404
1405         * sfm-write.c: Ditto.
1406
1407 Sat Mar 20 14:35:48 2004  Ben Pfaff  <blp@gnu.org>
1408
1409         Fix memory leaks.
1410         
1411         * autorecode.c: (arc_free) Free arc->src_values.
1412
1413         * error.c: (msg) Free buf.
1414
1415         * val-labs.c: (do_value_labels) Always free vars.
1416
1417         * vfm.c: (close_active_file) If sink has no make_source then call
1418         its destroy function.
1419
1420 Sat Mar 20 14:00:24 2004  Ben Pfaff  <blp@gnu.org>
1421
1422         Fixed cmd_parse() so that it always skips past a full command
1423         name.  A few special commands for which this would be bad get
1424         special treatment.  This lets us drop code for skipping past the
1425         end of a command name in most cmd_*() functions.  It's not worth
1426         listing all the commands affected.
1427
1428         * command.c: (struct command) Remove `cmd' member, replace by
1429         `name' member, all references updated.  Remove `word', `next',
1430         `skip_entire_name' members.
1431         (macro DEFCMD) Deal with revised `struct command'.
1432         (macro UNIMPL) Ditto.
1433         (macro SPCCMD) New macro for commands whose last word shouldn't be
1434         skipped.
1435         (static array cmd_table[]) Make const, rename `commands', remove
1436         sentinel element.
1437         (macro COMMAND_CNT) New macro.
1438         (split_words) Removed.
1439         (cmd_init) Removed.
1440         (FILE_TYPE_okay) Make parameter const.
1441         (cmd_parse) Improve error messages.
1442         (match_strings) New function.
1443         (next_word) New function.
1444         (enum command_match) New enum.
1445         (conflicting_3char_prefixes) New function.
1446         (conflicting_3char_prefix_command) New function.
1447         (cmd_match_words) New function.
1448         (count_matching_commands) New function.
1449         (get_command_name) New function.
1450         (free_words) New function.
1451         (unknown_command_error) New function.
1452         (figure_out_command) Renamed parse_command_name(), rewritten.
1453
1454         * command.def: Removed @ command.  Marked BEGIN DATA, DOCUMENT,
1455         FILE LABEL, REMARK, SUBTITLE, TITLE as special.  Renamed EVALUATE
1456         to DEBUG EVALUATE.  Added N alias for N OF CASES, SORT alias for
1457         SORT CASES.
1458
1459         * command.h: (macro SPCCMD) New.
1460
1461         * include.c: (cmd_include_at) Removed.
1462         (cmd_include) Allow identifier to be used as filename.
1463
1464         * inpt-pgm.c: (cmd_reread) Use fh_parse_file_handle().
1465
1466         * t-test.q: (cmd_t_test) Command name is now parsed for us.
1467         
1468
1469 Sat Mar 20 13:56:00 2004  Ben Pfaff  <blp@gnu.org>
1470
1471         Start work on better test framework.
1472         
1473         * Makefile.am: (pspp_sources) Add debug.c.
1474         
1475         * debug.c: New file.
1476
1477         * compute.c: (cmd_evaluate) Moved to debug.c, renamed
1478         cmd_debug_evaluate().
1479
1480         * expr-prs.c: (expr_parse) Remove PXP_DUMP support.
1481
1482         * expr.h: (enum constant PXP_DUMP) Removed.
1483
1484 Sat Mar 20 00:05:42 WST 2004 John Darrington <john@darrington.wattle.id.au>
1485
1486         * set.q:  Implemented the SHOW command, and synced it to the existing 
1487         SET cmd.
1488
1489         Added a handler for SIGWINCH so that viewlength and viewwidth follow
1490         changes as the window size is changed.
1491
1492         Added fallback to set viewlength and viewwidth from LINES and COLUMS
1493         environment variables if other methods are not available.
1494
1495         glob.c: Removed a lot of global variables from glob.c and encapsulated 
1496         them in set.q
1497
1498         random.c: Tidied up the way the random seed is set.
1499
1500         str.c: Added a ds_vprintf function.
1501
1502         error.c: Extended dump_message so that messages are always broken at
1503         '\n' characters.
1504         
1505 Thu Mar 18 11:07:14 2004  Ben Pfaff  <blp@gnu.org>
1506
1507         * pfm-write.c: (bufwrite) Write out the correct element for string
1508         variables.  From Andreas Streichardt <streichardt@globalpark.de>.
1509
1510 Mon Mar 15 20:48:03 2004  Ben Pfaff  <blp@gnu.org>
1511
1512         Get rid of static and global (!) vars in matrix-data.c.
1513
1514         * matrix-data.c: (static var nr_data) Removed.
1515         (static var nr_factor_values) Removed.
1516         (static var max_cell_index) Removed.
1517         (static var split_values) Removed.
1518         (struct nr_aux_data) New structure.
1519         (read_matrices_without_rowtype) Use a local struct nr_aux_data in
1520         place of static vars, pass to create_case_source() and procedure()
1521         as aux data.
1522         (nr_read_data_lines) Use struct nr_aux_data * parameter instead of
1523         struct matrix_data_pgm *.
1524         (nr_read_splits) Ditto.
1525         (nr_read_factors) Ditto.
1526         (nr_output_data) Ditto.
1527         (static var wr_content) Removed.
1528         (global var wr_data) Removed.
1529         (global var wr_current) Removed.
1530         (struct wr_aux_data) New structure.
1531         (read_matrices_with_rowtype) Use a local struct wr_aux_data in
1532         place of static vars, pass to create_case_source() and procedure()
1533         as aux data.
1534         (matrix_data_read_with_rowtype) Use struct wr_aux_data * parameter
1535         instead of matrix_data_pgm *.
1536         (wr_read_splits) Ditto.
1537         (wr_output_data) Ditto.
1538         (wr_read_rowtype) Ditto.
1539         (wr_read_factors) Ditto.
1540         (wr_read_indeps) Ditto.
1541         
1542 Mon Mar 15 20:07:29 2004  Ben Pfaff  <blp@gnu.org>
1543
1544         Get rid of static vars in autorecode.c.
1545
1546         * autorecode.c: (struct autorecode_trns) Rename `arc' to `specs',
1547         `n_arc' to `spec_cnt'.  All references updated.
1548         (static var v_src) Removed.
1549         (static var v_dest) Removed.
1550         (static var h_trns) Removed.
1551         (static var nv_src) Removed.
1552         (static var descend) Removed.
1553         (static var print) Removed.
1554         (enum direction) New enum.
1555         (struct autorecode_pgm) New structure.
1556         (cmd_autorecode) Use struct autorecode_pgm instead of static vars.
1557         Move n_dest local var into struct autorecode_pgm for ease of
1558         clean-up.  Use arc_free().
1559         (arc_free) New function.
1560         (recode) Modify to take struct autorecode_pgm * parameter instead
1561         of using statics.  Let the caller clean up.
1562         (autorecode_proc_func) Use struct autorecode_pgm * auxiliary data
1563         instead of statics.  Rearrange code a little.
1564
1565 Mon Mar 15 00:25:02 2004  Ben Pfaff  <blp@gnu.org>
1566
1567         Get rid of static, global vars in recode.c.  Remove debug code.
1568
1569         * recode.c: (static var head) Removed.
1570         (global var v) Removed.
1571         (global var nv) Removed.
1572         (cmd_recode) New local variables head, v, nv.  Initialize and free
1573         v.  Don't call debug_print().
1574         [DEBUGGING] (dump_dest) Removed.
1575         [DEBUGGING] (debug_print) Removed.
1576
1577 Mon Mar 15 00:14:49 2004  Ben Pfaff  <blp@gnu.org>
1578
1579         Get rid of static vars in expr-opt.c.
1580
1581         * expr-opt.c: (static var e) Removed.
1582         (static var nop) Removed.
1583         (static var mop) Removed.
1584         (static var ndbl) Removed.
1585         (static var mdbl) Removed.
1586         (static var nstr) Removed.
1587         (static var mstr) Removed.
1588         (static var nvars) Removed.
1589         (static var mvars) Removed.
1590         (struct expr_dump_state) New structure.
1591         (dump_expression) Use new struct expr_dump_state instead of static
1592         vars and pass to functions we call.
1593         (dump_node) Use struct expr_dump_state * parameter.
1594         (emit) Ditto.
1595         (emit_num_con) Ditto.
1596         (emit_str_con) Ditto.
1597         (emit_var) Ditto.
1598         
1599 Mon Mar 15 00:03:51 2004  Ben Pfaff  <blp@gnu.org>
1600
1601         Get rid of static var in COUNT.
1602
1603         * count.c: (static var head) Move into cmd_count().
1604         (cmd_count) [DEBUGGING] Don't call debug_print.
1605         [DEBUGGING] (debug_print) Removed.
1606
1607 Sun Mar 14 23:56:09 2004  Ben Pfaff  <blp@gnu.org>
1608
1609         Get rid of static vars in VALUE LABELS, ADD VALUE LABELS.
1610
1611         * val-labs.c: (static var v) Removed.
1612         (static var nv) Removed.
1613         [DEBUGGING] (debug_print) Removed.
1614         (verify_val_labs) Add struct variable **, int parameters.
1615         (get_label) Ditto.  Improve error messages, streamline.
1616         (erase_labels) New function for erasing value labels, taking over
1617         part of verify_val_labs()'s function.
1618         (init) Removed.
1619         (done) Removed.
1620         (cmd_value_labels) No need to call init() or done() anymore.
1621         (cmd_add_value_labels) Ditto.
1622         (do_value_labels) Add vars, var_cnt local variables.  Clean up
1623         after them internally.  Call erase_labels() if we should.  Don't
1624         call debug_print().
1625
1626 Sun Mar 14 23:33:53 2004  Ben Pfaff  <blp@gnu.org>
1627
1628         Get rid of static vars in MATCH FILES.
1629         
1630         * get.c: (static var mtf_head) Removed.
1631         (static var mtf_tail) Removed.
1632         (static var mtf_by) Removed.
1633         (static var mtf_n_by) Removed.
1634         (static var mtf_master) Removed.
1635         (static var mtf_seq_num) Removed.
1636         (static var mtf_seq_nums) Removed.
1637         (static var mtf_sink) Removed.
1638         (static var mtf_case) Removed.
1639         (struct mtf_proc) New structure.
1640         (cmd_match_files) Use struct mtf_proc instead of static vars.
1641         (mtf_processing_finish) Ditto.
1642         (mtf_free) Ditto.
1643         (mtf_delete_file_in_place) Ditto.
1644         (mtf_read_nonactive_records) Ditto.
1645         (mtf_compare_BY_values) Ditto.
1646         (mtf_processing) Ditto.
1647         (mtf_merge_dictionary) Ditto.
1648
1649 Sun Mar 14 22:48:12 2004  Ben Pfaff  <blp@gnu.org>
1650
1651         * command.def: Add CASESTOVARS, VARSTOCASES unimplemented commands.
1652
1653         * dictionary.c: (dict_rename_var) Add assertion.
1654         (dict_contains_var) Check by index instead of name.
1655
1656 Sun Mar 14 22:01:02 2004  Ben Pfaff  <blp@gnu.org>
1657
1658         Get rid of compaction_necessary, compaction_nval, compaction_case.
1659         Redo VFM interface.  Replace disk_sink and memory_sink by
1660         storage_sink, disk_source and memory_source by storage_source.
1661
1662         * vfm.h: (struct case_sink) Add `dict', `idx_to_fv', `value_cnt'
1663         members.
1664
1665         * vfm.c: 
1666         (struct write_case_data) Remove `begin_func', `end_func',
1667         `func_aux' members.  Add `aux', `trns_case', `sink_case',
1668         `cases_written', `cases_analyzed' members.
1669         (global var compaction_necessary) Make static.
1670         (global var compaction_nval) Removed.
1671         (global var compaction_case) Removed.
1672         (static var case_count) Removed.
1673         (struct procedure_aux_data) Removed.
1674         (struct split_aux_data) Removed.
1675         (procedure) Remove begin_func, end_func parameters.  Rewrite.
1676         (static var not_canceled) Removed.
1677         (process_active_file) Removed.
1678         (process_active_file_write_case) Removed.
1679         (process_active_file_output_case) Removed.
1680         (prepare_for_writing) Moved into open_active_file().
1681         (arrange_compaction) Ditto.
1682         (setup_lag) Ditto.
1683         (open_active_file) Rewrote.
1684         (write_case) New function.
1685         [DEBUGGING] (index_to_varname) Removed.
1686         (execute_transformations) New function.
1687         (exclude_this_case) Renamed filter_case(), changed interface.
1688         (clear_case) Added struct ccase * parameter to interface.
1689         (close_active_file) Added struct write_case_data * parameter,
1690         rewrote.
1691         (disk_sink_create) Removed.
1692         (disk_sink_destroy) Removed.
1693         (disk_sink_make_source) Removed.
1694         (disk_sink_write) Removed.
1695         (disk_source_count) Removed.
1696         (disk_source_destroy) Removed.
1697         (disk_source_read) Removed.
1698         (global var disk_sink_class) Removed.
1699         (global var disk_source_class) Removed.
1700         (global var memory_sink_class) Removed.
1701         (global var memory_source_class) Removed.
1702         (memory_sink_create) Removed.
1703         (memory_sink_destroy) Removed.
1704         (memory_sink_make_source) Removed.
1705         (memory_sink_write) Removed.
1706         (memory_source_count) Removed.
1707         (memory_source_destroy) Removed.
1708         (memory_source_get_cases) Removed.
1709         (memory_source_read) Removed.
1710         (memory_source_set_cases) Removed.
1711         (struct disk_stream_info) Removed.
1712         (struct memory_sink_info) Removed.
1713         (struct memory_source_info) Removed.
1714         (write_active_file_to_disk) Removed.
1715         (destroy_storage_stream_info) New function.
1716         (global var null_sink_class) New var.
1717         (global var storage_sink_class) New var.
1718         (global var storage_source_class) New var.
1719         (open_storage_file) New function.
1720         (storage_sink_destroy) New function.
1721         (storage_sink_make_source) New function.
1722         (storage_sink_open) New function.
1723         (storage_sink_write) New function.
1724         (storage_source_count) New function.
1725         (storage_source_destroy) New function.
1726         (storage_source_get_cases) New function.
1727         (storage_source_on_disk) New function.
1728         (storage_source_read) New function.
1729         (storage_source_set_cases) New function.
1730         (storage_source_to_disk) New function.
1731         (storage_to_disk) New function.
1732         (struct storage_stream_info) New structure.
1733         (write_storage_file) New function.
1734         (procedure_write_case) Removed.
1735         (create_case_source) Add `struct dictionary *' parameter, all
1736         references updated.
1737         (create_case_sink) Ditto.
1738         (free_case_sink) New function.
1739         (struct split_aux_data) New structure.
1740         (procedure_with_splits) New function implementing what procedure()
1741         used to.
1742         (SPLIT_FILE_proc_func) Removed.
1743         (procedure_with_splits_callback) New function.
1744         (equal_splits) New function.
1745         
1746         * aggregate.c: Pass around a struct instead of using statics.
1747         (static var outfile) Remove.
1748         (enum type) Give it tag `missing_treatment'.
1749         (static var missing) Remove.
1750         (static var sort) Remove.
1751         (static var agr_first) Remove.
1752         (static var agr_next) Remove.
1753         (static var case_count) Remove.
1754         (static var prev_case) Remove.
1755         (static var buf64_1xx) Remove.
1756         (static var buf_1xx) Remove.
1757         (struct agr_proc) New structure incorporating the above.
1758         (cmd_aggregate) Use new struct.  Clean up error handling using
1759         agr_destroy().  Completely rewrite actual implementation of
1760         aggregation.
1761         (create_sysfile) Add struct agr_proc * parameter, modify
1762         accordingly.
1763         (parse_aggregate_functions) Ditto.
1764         (free_aggregate_functions) Ditto.  Rename agr_destroy().
1765         (aggregate_single_case) Add struct agr_proc * parameter, modify
1766         accordingly.
1767         (accumulate_aggregate_info) Ditto.
1768         (dump_aggregate_info) Ditto.
1769         (initialize_aggregate_info) Ditto.
1770         (agr_00x_trns_proc) Removed.
1771         (agr_00x_end_func) Removed.
1772         (agr_10x_trns_proc) Removed.
1773         (agr_10x_trns_free) Removed.
1774         (agr_10x_end_func) Removed.
1775         (agr_11x_read) Removed.
1776         (agr_11x_finish) Removed.
1777         [DEBUGGING] (debug_print) Removed.
1778         (write_case_to_sfm) Add struct agr_proc * parameter, modify
1779         accordingly.
1780         (agr_to_active_file) New function.
1781         (presorted_agr_to_sysfile) New function.
1782         (sort_agr_to_sysfile) New function.
1783
1784         * autorecode.c: (cmd_autorecode) Use procedure_with_splits().
1785
1786         * crosstabs.q: (internal_cmd_crosstabs) Ditto.
1787
1788         * descript.q: (cmd_descriptives) Ditto.
1789
1790         * dfm.c: (cmd_begin_data) Check for storage_source_class.  Adapt
1791         to new procedure() interface.
1792
1793         * command.c: (cmd_execute) Adapt to new procedure() interface.
1794
1795         * dictionary.c: (dict_compact_values) Also delete scratch
1796         variables.
1797         (dict_get_compacted_value_cnt) New function.
1798         (dict_get_compacted_idx_to_fv) New function.
1799
1800         * flip.c: (cmd_flip) Warn about and cancel TEMPORARY.
1801         (cmd_flip) Adapt to new procedure() interface.
1802         (flip_sink_write) Use sink->idx_to_fv.
1803
1804         * frequencies.q: (internal_cmd_frequencies) Use
1805         procedure_with_splits().
1806
1807         * get.c: (cmd_save_internal) Adapt to new procedure() interface.
1808         (static var mtf_sink) New static var.
1809         (static var mtf_case) New static var.
1810         (cmd_match_files) Warn about and cancel TEMPORARY.  Redo the way
1811         we actually implement the matching.
1812         (mtf_delete_file_in_place) Use mtf_case.
1813         (mtf_processing) Use mtf_case and mtf_sink.
1814         (cmd_export) Adapt to new procedure() interface.
1815
1816         * levene.c: (levene) Use procedure_with_splits().
1817
1818         * list.q: (cmd_list) Use procedure_with_splits().
1819
1820         * matrix-data.c: (read_matrices_without_rowtype) Adapt to new
1821         procedure() interface.
1822         (read_matrices_with_rowtype) Ditto.
1823
1824         * modify-vars.c; (cmd_modify_vars) Warn about and cancel
1825         TEMPORARY.  Adapt to new procedure() interface.
1826
1827         * rename-vars.c: Warn about and cancel TEMPORARY.
1828
1829         * sort.c: (cmd_sort_cases) Warn about TEMPORARY.
1830         (sort_cases) Use dict_get_compacted_value_cnt() instead of
1831         compaction_nval.  Adapt to new procedure() interface.  Use
1832         storage_source_to_disk().
1833         (do_internal_sort) Don't try to dump the cases to memory.
1834         (compare_case_lists) Pass null idx_to_fv.
1835         (struct initial_run_state) Add `idx_to_fv' member.  Remove
1836         `case_size' member.
1837         (write_initial_runs) Don't initialize irs->case_size.  Adapt to
1838         new procedure() interface.  Reset irs->idx_to_fv after calling
1839         procedure().
1840         (sort_sink_write) Set irs->idx_to_fv.  Use case_size from struct
1841         sort_cases_pgm.  Pass irs, not struct sort_cases_pgm to
1842         push_heap().
1843         (destroy_initial_run_state) Don't dereference irs after freeing
1844         it.
1845         (allocate_cases) Don't calculate case_size locally.
1846         (compare_record) Add idx_to_fv parameter.
1847         (compare_record_run) Change parameter from struct sort_cases_pgm *
1848         to struct initial_run_state *.  Pass irs->idx_to_fv to
1849         compare_record().
1850         (compare_record_run) Third parameter now a struct
1851         initial_run_state *.
1852         (output_record) No need for out_case anymore.  Pass irs, not
1853         struct sort_cases_pgm to pop_heap().  Use case_size from struct
1854         sort_cases_pgm.
1855         (merge) Use case_size from struct sort_cases_pgm.
1856         (merge_once) Use case_size from struct sort_cases_pgm.
1857         Pass null pointer to compare_record() as idx_to_fv.
1858         (global var sort_sink_class) Make static.
1859
1860         * t-test.q: (cmd_t_test) Use procedure_with_splits().
1861
1862         * temporary.c: Remove debugging crap.
1863
1864 Sat Mar 13 14:19:52 WST 2004 John Darrington <john@darrington.wattle.id.au>
1865
1866         * t-test.q, levene.c: Fixed up the handling of MISSING values
1867         int the T-TEST
1868
1869 Fri Mar 12 16:23:35 WST 2004 John Darrington <john@darrington.wattle.id.au>
1870
1871         * t-test.q, levene.c: Added support for T-TEST /GROUP where only 
1872         one value is given.
1873
1874 Wed Mar 10 23:25:13 2004  Ben Pfaff  <blp@gnu.org>
1875
1876         Change explicit variable name checks into use of
1877         dict_class_from_id().
1878
1879         * dictionary.c: (dict_create_var)  Change explicit variable name
1880         check into use of dict_class_from_id().
1881
1882         * get.c: (trim_dictionary) Ditto.
1883
1884         * sel-if.c: (cmd_filter) Ditto.
1885
1886         * sysfile-info.c: (cmd_display) Ditto.
1887
1888         * vars-prs.c: (parse_DATA_LIST_vars) Ditto.
1889
1890         * vfm.c: (arrange_compaction) Ditto.
1891
1892         * weight.c: (cmd_weight) Ditto.
1893
1894 Wed Mar 10 21:16:34 2004  Ben Pfaff  <blp@gnu.org>
1895
1896         * temporary.c: (cmd_temporary) When TEMPORARY was the first
1897         transformation following the input program, if any, for some
1898         reason we special-cased f_trns.  That's just wrong.  It should
1899         always be set to n_trns.
1900
1901 Tue Mar  9 23:44:40 2004  Ben Pfaff  <blp@gnu.org>
1902
1903         * format.c: (parse_format_specifier_name) Fix brown-bag bug
1904         introduced in last check-in.
1905
1906 Tue Mar  9 23:10:41 2004  Ben Pfaff  <blp@gnu.org>
1907
1908         * format.c: (global array translate_fmt[]) Removed.
1909         (translate_fmt) New function as replacement.
1910         (parse_format_specifier_name) Rewrite.
1911
1912         * pfm-read.c: (convert_format) Use translate_fmt() instead of
1913         translate_fmt[].
1914
1915         * sfm-read.c: (parse_format_spec) Ditto.
1916
1917         * postscript.c: (text) Fix handling of fonts with missing
1918         ligatures.
1919
1920         * sort.c: (struct external_sort) Add temp_name member.
1921         (destroy_external_sort) Free temp_dir, temp_name members.
1922         (init_external_sort) Allocate temp_name.
1923         (get_temp_file_name) Change prototype.
1924         (open_temp_file) Deal with change to get_temp_file_name().
1925         (close_temp_file) Ditto.
1926         (remove_temp_file) Ditto.
1927         (write_temp_file) Ditto.
1928         (read_temp_file) Ditto.
1929         (sort_sink_destroy) Removed.
1930         (sort_sink_class) Change destroy member to null.
1931
1932 Tue Mar  9 22:36:34 2004  Ben Pfaff  <blp@gnu.org>
1933
1934         Eliminate temp_case.
1935
1936         * aggregate.c: (cmd_aggregate) No need to save/restore temp_case
1937         anymore.  Use agr_11x_finish().
1938         (aggregate_single_case) Make first param const.
1939         (accumulate_aggregate_info) Ditto.
1940         (agr_00x_end_func) Use compaction_case, not temp_case.
1941         (agr_11x_func) Break into agr_11x_read(), agr_11x_finish().
1942
1943         * data-list.c: (struct data_list_pgm) Add `case_size' member.
1944         (cmd_data_list) Initialize case_size.
1945         (read_from_data_list_fixed) Add struct ccase * param, use instead
1946         of temp_case.
1947         (read_from_data_list_free) Ditto.
1948         (read_from_data_list_list) Ditto.
1949         (read_one_case) Rename data_list_trns_proc(), all references
1950         updated.  Add argument in calling above functions.  Use c
1951         argument instead of temp_case.
1952         (destroy_dls) Rename data_list_trns_free(), all references
1953         updated.
1954
1955         * expr-evl.c: (expr_evaluate) Make second parameter const.
1956
1957         * file-type.c: (struct file_type_pgm) Add `case_size' member.
1958         (cmd_end_file_type) Initialize `case_size'.
1959         (file_type_source_read) Add struct ccase * parameter.  Use instead
1960         of temp_case.
1961
1962         * flip.c: Rewritten.
1963
1964         * get.c: (struct get_pgm) New structure to keep track of
1965         case_size.
1966         (cmd_get) Initialize case_size.
1967         (cmd_import) Ditto.
1968         (get_source) Deal with struct get_pgm.
1969         (get_source_read) Add struct ccase * parameter, use instead of
1970         temp_case.
1971         (import_source_read) Ditto.
1972
1973         * get.c: Use a null pointer instead of temp_case to represent the
1974         "current case" in a struct mtf_file's input member.
1975         (mtf_processing_finish) Pass null to mtf_processing(), not
1976         temp_case.
1977         (mtf_read_nonactive_records) Don't set iter->input to temp_case.
1978         (mtf_compare_BY_values) Add extra arg, use instead of null input
1979         members.
1980         (mtf_processing) Use c parameter instead of temp_case.  Pass
1981         compaction_case to process_active_file_output_case().
1982         
1983         * glob.c: (global variable temp_case) Removed.
1984
1985         * inpt-pgm.c: (struct input_program_pgm) Add `case_size' member.
1986         (cmd_input_program) Initialize case_size.  Set
1987         vfm_source->value_cnt.
1988         (init_case) Add struct ccase * parameter, use instead of
1989         temp_case.
1990         (clear_case) Ditto.
1991         (input_program_source_read) Ditto.
1992
1993         * matrix-data.c: (matrix_data_read_without_rowtype) Ditto.
1994         (dump_cell_content) Ditto.
1995         (nr_output_data) Ditto.
1996         (read_matrices_without_rowtype) Ditto.
1997         (matrix_data_read_with_rowtype) Ditto.
1998         (wr_read_splits) Ditto.
1999         (wr_output_data) Ditto.
2000
2001         * sort.h: (struct sort_cases_pgm) New member `case_size'.
2002         
2003         * sort.c: (sort_cases) Initialize scp->case_size.
2004         (struct external_sort) Remove `case_size' member.
2005         (write_initial_runs) Only call vfm_sink->class_destroy if
2006         non-null.
2007         (struct sort_source_aux) New structure.
2008         (sort_source_read_helper) New function.
2009         (sort_source_read) Use sort_source_read_helper().
2010         (read_sort_output) Change interface to be more reasonable.
2011         (read_internal_sort_output) Ditto.
2012         (read_external_sort_output) Ditto.
2013
2014         * vars-prs.c: (dict_class_to_name) Pass return value through
2015         gettext.
2016
2017         * vfm.c: (struct procedure_aux_data) Add `trns_case' member.
2018         (procedure) Initialize trns_case.
2019         (procedure) Pass trns_case to vfm_source->class->read().
2020         Free trns_case.
2021         (process_active_file) Start using struct procedure_aux_data.
2022         (process_active_file_write_case) Pass trns_case to
2023         transformations, lag_case(), clear_case().
2024         (process_active_file_output_case) Add struct ccase * parameter.
2025         (create_trns_case) New function.
2026         (make_temp_case) Removed.
2027         (vector_initialization) Removed.
2028         (close_active_file) Only call make_source if non-null, otherwise
2029         set vfm_source to null pointer.  Don't free temp_case.
2030         (disk_source_read) Add struct ccase * parameter, use instead of
2031         temp_case.
2032         (memory_source_read) Ditto.
2033         (lag_case) Add const struct ccase * member.
2034         (procedure_write_case) Use trns_case instead of temp_case.
2035         (clear_case) Add struct ccase * member, use instead of temp_case.
2036         (exclude_this_case) Ditto.
2037         (create_case_source) Add struct dictionary * parameter, use to
2038         initialize source->value_cnt.
2039
2040         * vfm.h: (struct case_source) Add `value_cnt' member.
2041         (struct case_source_class) Add struct ccase * parameter to `read'
2042         member function pointer.
2043         (struct case_sink_class) Make struct ccase * parameter const in
2044         `write' member function pointer.
2045         
2046 Wed Mar  3 20:44:37 2004  Ben Pfaff  <blp@gnu.org>
2047
2048         Fix a lot of "possibly uninitialized variable" warnings.  Some of
2049         them are even real bugs.  A few of them make me wonder how the
2050         code ever worked.
2051
2052         * aggregate.c: (parse_aggregate_functions) Initialize `function.
2053
2054         * ascii.c: (output_lines) Add default case to switch.
2055
2056         * crosstabs.q: Remove static variable `expected' and all
2057         references to it.
2058         (display_crosstabulation) Always calculate expected value.
2059         (calc_chisq) Ditto.
2060         (output_pivot_table) Initialize `cmp'.
2061         (display_crosstabulation) New variable `last_row', which is
2062         initialized.
2063
2064         * data-in.c: (parse_numeric) Always initialize sign.  How did this
2065         work at all?!
2066
2067         * data-list.c: (repeating_data_trns_proc) Always initialize code.
2068         Always set info.ofs.  (How did this work?!)
2069
2070         * expr-opt.c: (optimize_tree) Always initialize `m'.
2071         (evaluate_tree) Always initialize `c'.  (How did this work?)
2072
2073         * frequencies.q: (frq_custom_variables) Always initialize min,
2074         max.
2075         (frq_custom_grouped) Always initialize `dl'.
2076
2077         * groff-font.c: (groff_read_font) Always initialize char_set.
2078
2079         * matrix-data.c: (nr_output_data) Initialize `split'.
2080         (wr_read_splits) Remove shadowing split_cnt declaration.
2081         (wr_output_data) Initialize `split'.
2082
2083         * output.c: (tokener) Skip add character on syntax error.
2084
2085         * pool.c: (pool_strndup) Always set `copy'.  (How did this work?!)
2086
2087         * postscript.c: (read_ps_encodings) Use line.string instead of
2088         uninitialized `bp'.
2089         (write_text) Add default case to switch.
2090         (text) Always initialize multiple variables.  Fix bug with
2091         ligatures.
2092
2093         * print.c: (fixed_parse_fortran) Initialize head.
2094         (alloc_line) Add default case to switch.
2095
2096         * recode.c: (parse_dest_spec) Handle case where nothing matches.
2097         (recode_trns_proc) Move variable declaration inward.  Add default
2098         case to switch.
2099
2100         * sfm-read.c: (read_header) Initialize skip_amt.
2101
2102         * sysfile-info.c: (display_variables) Always initialize pc.
2103
2104         * vars-prs.c: Initialized `included'.
2105
2106 Wed Mar  3 09:30:09 2004  Ben Pfaff  <blp@gnu.org>
2107
2108         * main.c: (main) sigaction()'s sa_flags member was uninitialized.
2109         Just use signal() instead.
2110
2111 Wed Mar  3 09:26:30 2004  Ben Pfaff  <blp@gnu.org>
2112
2113         Get rid of vfm_sink_info and vfm_source_info.
2114         
2115         * aggregate.c: (agr_00x_end_func) Don't increment
2116         sfm_sink_info.ncases.
2117
2118         * sort.c: (do_internal_sort) Get case count from
2119         vfm_source->class->count().
2120         (struct external_sort) Add `case_size' member.
2121         (do_external_sort) Initialize case_size.
2122         (struct initial_run_state) Add `case_size' member.
2123         (write_initial_runs) Initialize case_size.
2124         (sort_sink_write) Use case_size.
2125         (read_external_sort_output) Use case_size.  Get case_cnt from
2126         initial_runs.
2127
2128         * vfm.c: (struct write_case_data) Add underscores to existing arg
2129         names, all references updated.  Renamed `aux' as `func_aux', all
2130         references updated.  Added new `aux' member.
2131         (global var vfm_source_info) Removed.
2132         (global var vfm_sink_info) Removed.
2133         (struct procedure_aux_data) New.
2134         (struct split_aux_data) New.
2135         (procedure) Use `aux' fields for procedure_aux_data,
2136         split_aux_data.
2137         (process_active_file_write_case) Pass case_count + 1 to
2138         transformation procedures, exclude_this_case().
2139         (process_active_file_output_case) Don't increment
2140         vfm_sink_info.ncases.
2141         (prepare_for_writing) Don't initialize vfm_sink_info.  Don't try
2142         to send data to disk early.
2143         (make_temp_case) Don't use vfm_sink_info.case_size.
2144         (close_active_file) Don't initialize vfm_source_info.
2145         (struct disk_stream_info) New, to allow for case_cnt and case_size fields.
2146         (disk_sink_create) Initialize and/or update disk_stream_info.
2147         (disk_sink_write) Ditto.
2148         (disk_sink_destroy) Ditto.
2149         (disk_sink_make_source) Ditto.
2150         (disk_source_read) Ditto.
2151         (disk_source_destroy) Ditto.
2152         (global var disk_source_class) Add disk_source_count().
2153         (disk_source_count) New function.
2154         (struct memory_sink_info) Add `case_cnt', `case_size' members.
2155         (struct memory_source_info) Ditto.
2156         (memory_sink_create) Deal with case_cnt, case_size.
2157         (memory_sink_write) Ditto.
2158         (memory_sink_make_source) Ditto.
2159         (memory_source_read) Ditto.
2160         (memory_source_count) New function.
2161         (memory_source_class) Add memory_source_count().
2162         (procedure_write_case) Don't use vfm_sink_info.ncases.  Do use
2163         proc_aux->cases_written, and pass it to transformation procedures
2164         and exclude_this_case ().
2165         (exclude_this_case) Add case_num parameter.  Pass it to
2166         expr_evaluate().
2167         (SPLIT_FILE_procfunc) Use split_aux->prev_case instead of static
2168         variable.
2169
2170         * vfm.h: (struct case_source_class) Add `count' member.
2171
2172         * vfmP.h: (struct stream_info) Removed.
2173         (global variable vfm_source_info) Removed.
2174         (global variable vfm_sink_info) Removed.
2175         
2176 Tue Mar  2 23:38:17 2004  Ben Pfaff  <blp@gnu.org>
2177
2178         * var.h: (typedef trns_proc_func) New typedef.
2179         (trns_free_func) New typedef.
2180         (struct trns_header) Change `proc' to type trns_proc_func, `free'
2181         to type trns_free_func.  This only changes the actual type of
2182         trns_proc_func, adding a `case_num' parameter.  Updated all
2183         implementations to use the typedefs instead.
2184
2185         * compute.c: (compute_num) Pass case_num to expr_evaluate().
2186         (compute_num_vec) Ditto.
2187         (compute_str) Ditto.
2188         (compute_str_vec) Ditto.
2189
2190         * do-if.c: (do_if_trns_proc) Ditto.
2191
2192         * expr-evl.c: (expr_evaluate) Add new case_num parameter, use for
2193         OP_CASENUM.
2194
2195         * inpt-pgm.c: (input_program_source_read) Maintain case count,
2196         pass to transformation functions.
2197         (reread_trns_proc) Pass case_num arg to expr_evaluate().
2198
2199         * loop.c: (loop_1_trns_proc) Ditto.
2200         (loop_2_trns_proc) Ditto.
2201         (loop_3_trns_proc) Ditto.
2202
2203         * print.c: (print_space_trns_proc) Ditto.
2204
2205         * sel-if.c: (select_if_proc) Ditto.
2206
2207 Tue Mar  2 11:36:52 2004  Ben Pfaff  <blp@gnu.org>
2208
2209         * frequencies.q: (cleanup_freq_tab) Avoid memory leak by
2210         destroying hash table.
2211
2212         * glob.c: (read_active_file) Variable not referenced, removed.
2213         (cancel_input_pgm) Ditto.
2214
2215         * levene.c: Add #include <stdlib.h> needed to call free().
2216
2217         * aggregate.c: (parse_aggregate_functions) Make `function'
2218         variable const.
2219
2220 Tue Mar  2 11:30:56 2004  Ben Pfaff  <blp@gnu.org>
2221
2222         Start working to eliminate VFM dependence on static variables.
2223
2224         * command.c: (cmd_parse) Use case_source_is_class().
2225
2226         * data-list.c: Rewrite to eliminate use of static variables.
2227
2228         * dfm.c: (cmd_begin_data) Use case_source_is_class().
2229
2230         * file-handle.q: (fh_handle_name) Make parameter const.
2231
2232         * file-type.c: Rewrite to eliminate use of static variables.
2233
2234         * flip.c: Rewrite to eliminate use of static variables.
2235
2236         * format.c: (get_format_var_width) New function.
2237
2238         * get.c: Eliminate use of static variables.
2239
2240         * inpt-pgm.c: Eliminate use of static variables.
2241
2242         * matrix-data.c: Eliminate use of static variables.
2243
2244         * set.q: (set_max_workspace) New variable.
2245         (cmd_set) Use SET WORKSPACE to modify set_max_workspace.
2246
2247         * var.h: (struct case_list) Move here from vfmP.h.
2248
2249         * vars-atr.c: (discard_variables) Handle new vfm_source type.
2250
2251         * vfm.c: (vfm_source) Change type from struct case_stream to
2252         struct case_source.
2253         (vfm_sink) Change type from struct case_stream to struct
2254         case_sink.
2255         (static var paging) Rename workspace_overflow, all references
2256         updated.
2257         (procedure) Use new class structures.
2258         (process_active_file) Ditto.
2259         (process_active_file_write_case) Ditto.
2260         (prepare_for_writing) Use set_max_workspace.  Use new class
2261         structures.
2262         (close_active_file) Use new class structures.  Free old sink.
2263         (global var disk_source_file) Removed.
2264         (global var disk_sink_file) Removed.
2265         (disk_stream_init) Removed.
2266         (disk_stream_read) Removed.
2267         (disk_stream_write) Removed.
2268         (disk_stream_mode) Removed.
2269         (disk_stream_destroy_source) Removed.
2270         (disk_stream_destroy_sink) Removed.
2271         (global var vfm_disk_stream) Removed.
2272         (disk_sink_create) New function.
2273         (disk_sink_write) New function.
2274         (disk_sink_destroy) New function.
2275         (disk_sink_make_source) New function.
2276         (disk_sink_class) New static var.
2277         (disk_source_read) New function.
2278         (disk_source_destroy) New function.
2279         (global var vfm_source_class) New var.
2280         (global var memory_source_cases) Removed.
2281         (global var memory_sink_cases) Removed.
2282         (global var memory_sink_max_cases) Removed.
2283         (struct memory_sink_info) New struct.
2284         (memory_stream_init) Removed.
2285         (memory_stream_read) Removed.
2286         (memory_stream_write) Removed.
2287         (memory_stream_mode) Removed.
2288         (memory_stream_destroy_source) Removed.
2289         (memory_stream_destroy_sink) Removed.
2290         (global var vfm_memory_stream) Removed.
2291         (page_to_disk) Renamed write_active_file_to_disk().
2292         (memory_sink_create) New function.
2293         (memory_sink_write) New function.
2294         (memory_sink_destroy) New function.
2295         (memory_sink_make_source) New function.
2296         (memory_sink_class) New static var.
2297         (memory_source_read) New function.
2298         (memory_source_destroy) New function.
2299         (memory_source_get_cases) New function.
2300         (memory_source_set_cases) New function.
2301         (global var vfm_source_class) New var.
2302         (procedure_write_case) Use new class structures.
2303         (create_case_source) New function.
2304         (case_source_is_complex) New function.
2305         (case_source_is_class) New function.
2306         (create_case_sink) New function.
2307
2308         * vfm.h: (global variable reinit_sysmis) Not used, removed.
2309         (global variable reinit_blanks) Not used, removed.
2310         (global variable init_zero) Not used, removed.
2311         (global variable init_blanks) Not used, removed.
2312         (struct case_source) New struct.
2313         (struct case_source_class) New struct.
2314         (struct case_sink) New struct.
2315         (struct case_sink_class) New struct.
2316         (struct case_stream) Removed.
2317
2318         * vfmP.h: (struct case_list) Moved to var.h.
2319
2320 Tue Mar  2 11:28:30 2004  Ben Pfaff  <blp@gnu.org>
2321
2322         * algorithm.c: (count_equal) New function.
2323         (count_if) New function.
2324         (unique) Add assertions.
2325         (partition) Add assertions.
2326         (is_partitioned) New function.
2327         (copy_if) Add assertions.
2328         (remove_equal) Add assertions.
2329         (lexicographical_compare) Rename lexicographical_compare_3way.
2330         (sort) Add assertions.  Rephrase some code.
2331         (is_sorted) New function.
2332
2333 Sun Feb 29 23:24:57 2004  Ben Pfaff  <blp@gnu.org>
2334
2335         Rewrite SORT CASES.
2336
2337         * sort.c: Completely rewrite.
2338
2339         * sort.h: Expose interface via struct sort_cases_pgm, not via
2340         global variables.
2341
2342         * aggregate.c: (sort) New static var.
2343         (cmd_aggregate) Use sort.
2344         (create_sysfile) Ditto.
2345         (aggregate_single_case) Ditto.
2346         (dump_aggregate_info) Ditto.
2347         (agr_00x_end_func) Ditto.
2348         (debug_print) Ditto.
2349
2350         * var.h: (enum SRT_ASCEND) Removed.
2351         (enum SRT_DESCEND) Removed.
2352         (struct sort_cases_proc) Removed.
2353         (struct variable) Remove p.srt member.
2354
2355 Sun Feb 29 23:22:45 2004  Ben Pfaff  <blp@gnu.org>
2356
2357         Get rid of the old, crappy heap structure and replace it by a new,
2358         shiny, C++ STL-like heap structure.
2359         
2360         * Makefile.am: (pspp_SOURCES) Remove heap.c, heap.h.
2361
2362         * algorithm.c: (push_heap) New function.
2363         (heapify) Ditto.
2364         (pop_heap) Ditto.
2365         (make_heap) Ditto.
2366         (sort_heap) Ditto.
2367         (is_heap) Ditto.
2368         
2369         * heap.c: Removed.
2370
2371         * heap.h: Removed.
2372
2373 Sun Feb 29 23:21:53 2004  Ben Pfaff  <blp@gnu.org>
2374
2375         Increase warning level.
2376         
2377         * Makefile.am: (AM_CFLAGS) Remove -Wnouninitialized.
2378
2379 Sat Feb 21 17:38:58 WST 2004 John Darrington <john@darrington.wattle.id.au>
2380
2381         * main.c: Added a signal handler for SIGSEGV requesting a bug report.
2382          
2383 Fri Feb 20 23:22:14 2004  Ben Pfaff  <blp@gnu.org>
2384
2385         * dictionary.c: (dict_create_var) Fix root cause of bug worked
2386         around by previous change log entry.
2387         
2388         * compute.c: (lvalue_finalize) Remove workaround from previous
2389         change log entry.
2390
2391 Fri Feb 20 14:37:41 WAST 2004 John Darrington <john@darrington.wattle.id.au>
2392
2393         * compute.c: Fixed a bug where the Format was not getting set for 
2394           computed variables (thus causing a crash when SAVEing).
2395
2396         * Added a test to stop this bug ever coming back
2397
2398 Wed Feb 18 22:21:35 2004  Ben Pfaff  <blp@gnu.org>
2399
2400         Got rid of approx.h.  In general, replaced all references to
2401         approx_eq() by ==, approx_lt() by <, etc.  Other types of changes
2402         noted below.
2403
2404         * Makefile.am: (pspp_SOURCES) Removed approx.h.
2405
2406         * data-out.c: (try_F) Replaced test for approx_eq(number, 0.0) by
2407         test for mag < EPSILON.
2408
2409         * misc.h: Add definition of EPSILON.
2410
2411 Wed Feb 18 21:32:44 2004  Ben Pfaff  <blp@gnu.org>
2412
2413         * vfm.c: (procedure) Add check to prevent recursive call.
2414
2415 Wed Feb 18 21:48:54 WST 2004 John Darrington <john@darrington.wattle.id.au>
2416
2417         * Moved the declarations relating to values to their own header file
2418           (val.h)
2419
2420         * Added levene.c and levene.h
2421
2422         * vars-atr.c: Changed the signature of compare_values to 
2423         take const * arguments.
2424                 
2425         * t-test.q: Changed the structure of struct t_test_proc 
2426        variables now contain their own group statistics information.
2427        Eventually, t_test_proc might get renamed, because it'd be 
2428        applicable to other commands too.
2429
2430 Mon Feb 16 23:15:51 2004  Ben Pfaff  <blp@gnu.org>
2431
2432         * data-out.c: Clean up.  Changed interface of convert_*() to take
2433         either a `double' or a `const char *' instead of a `const union
2434         value *'.  Update all implementations of those interfaces.
2435         (data_out) Use switch statements instead of a table.
2436         (convert_AHEX) Rewrite.
2437
2438         * format.h: Update comment.
2439
2440 Mon Feb 16 22:14:36 2004  Ben Pfaff  <blp@gnu.org>
2441
2442         * q2c.c: (dump_header) Add an Emacs header line to output files
2443         that makes generated .c files read-only by default, to make it
2444         difficult to accidentally change generated files.
2445
2446 Mon Feb 16 22:12:07 2004  Ben Pfaff  <blp@gnu.org>
2447
2448         * frequencies.q: (compare_freq_numeric_a) Compare by frequency,
2449         not bogus a->v.c <=> b->v.c pointer compare.
2450         (compare_freq_alpha_a) Ditto.
2451         (compare_freq_numeric_d) Ditto.
2452         (compare_freq_alpha_d) Ditto.
2453         
2454 Mon Feb 16 22:00:53 2004  Ben Pfaff  <blp@gnu.org>
2455
2456         Changed data_out() to store string data directly into a `union
2457         value''s s member, not indirectly into c.
2458
2459         * crosstabs.q: (output_pivot_table) Use format_short() instead of
2460         data_out().
2461         (table_value_missing) Ditto.
2462         (float_M_suffix) Ditto.
2463         (format_short) New function.
2464
2465         * data-in.h: (data_in_finite_line) Remove inline definition.
2466
2467         * data-list.c: (destroy_dls_var_spec) New function.
2468         (destroy_dls) Rewrite in terms of destroy_dls_var_spec().
2469         (data_list_source_destroy_source) Avoid cast.
2470         (struct repeating_data_trns) New field `id_value'.  Update
2471         comments.
2472         (cmd_repeating_data) Initialize id_value.  Use new
2473         repeating_data_trns_free() for freeing REPEATING DATA
2474         transformations.
2475         (rpd_parse_record) Rewrite support for record ID to be less bogus.
2476         (repeating_data_trns_free) New function.
2477
2478         * data-out.c: (data_out) Change return type to `void' by replacing
2479         error returns by writing a message into the output buffer.
2480         (convert_A) Read from v->s instead of v->c.
2481         (convert_AHEX) Ditto.
2482
2483         * expr-evl.c: Update comment.
2484         (expr_evaluate) Add assertion in OP_STRING case.
2485
2486         * format.h: (macro MAX_FORMATTED_LEN) New macro.
2487
2488         * list.q: (list_cases) Update for new data_out() semantics.
2489
2490         * print.c: (print_trns_proc) Ditto.
2491
2492         * tab.c: (tab_value) Ditto.
2493         (tab_float) Avoid stupid cast.
2494
2495         * var.h: Update comments.
2496         (macro MAX_STRING) New macro.
2497         (macro MAX_ELEMS_PER_VALUE) New macro.
2498
2499         * vars-atr.c: (compare_values) New function.
2500
2501         * vfm.c: (dump_splits) Update for new data_out() semantics.
2502
2503 Mon Feb 16 21:45:47 2004  Ben Pfaff  <blp@gnu.org>
2504
2505         * crosstabs.q: (struct table_entry) Rename v[] to values[].  All
2506         references updated.
2507         (struct crosstab) Rename v[] to vars[].  All references updated.
2508         (hash_table_entry) Replace the hash algorithm and fix a bug at the
2509         same time, which caused the hash value to depend only on a single
2510         value, not all of the variables' values.
2511         
2512 Mon Feb 16 12:49:53 2004  Ben Pfaff  <blp@gnu.org>
2513
2514         Clean up struct dictionary's value_cnt usage.
2515
2516         * dictionary.c: Add a function comment to each function.
2517         (struct dictionary) Rename value_cnt to next_value_idx, which more
2518         accurately reflects its meaning.  All references updated.
2519         (dict_rename_vars) Add assertion.
2520         (dict_get_value_cnt) Rename dict_get_next_value_idx().  All
2521         references updated.
2522         (dict_get_case_size) New function.
2523
2524         * aggregate.c: (create_sysfile) Use dict_get_case_size().
2525
2526         * get.c: (mtf_read_nonactive_records) Ditto.
2527
2528         * sort.c: (allocate_cases) Ditto.
2529         (write_initial_runs) Ditto.
2530         (merge) Ditto.
2531         (merge_once) Ditto.
2532
2533         * vfm.c: (prepare_for_writing) Ditto.
2534         (setup_lag) Ditto.
2535         (lag_case) Ditto.
2536
2537 Mon Feb 16 00:17:55 2004  Ben Pfaff  <blp@gnu.org>
2538
2539         Make vfm.c slightly less grotesque.
2540
2541         * vfm.c: (filter_var) Removed.
2542         (filter_index) Removed.
2543         (FILTERED macro) Removed.
2544         (exclude_this_case) New function.
2545         (process_active_file_write_case) Use exclude_this_case() instead
2546         of FILTERED and inline tests.
2547         (procedure_write_case) Ditto.
2548         (setup_filter) Removed.
2549         (open_active_file) Don't call setup_filter().
2550         (close_active_file) Call dict_get_filter() instead of checking
2551         filter_var.
2552
2553 Mon Feb 16 00:01:53 2004  Ben Pfaff  <blp@gnu.org>
2554
2555         * var.h: (struct variable) Update comments.
2556
2557 Sun Feb 15 23:14:59 2004  Ben Pfaff  <blp@gnu.org>
2558
2559         New functions dict_create_var_assert(), dict_lookup_var_assert().
2560         Converted several dict_*_var()/assert pairs into a single
2561         dict_*_var_assert().
2562
2563         * dictionary.c: (dict_create_var_assert) New function.
2564         (dict_lookup_var_assert) New function.
2565
2566 Sun Feb 15 23:06:08 2004  Ben Pfaff  <blp@gnu.org>
2567
2568         Got rid of "struct long_vec", envector(), devector(), etc.  Added
2569         two members `init', `reinit' to struct variable as a substitute.
2570         
2571         * Makefile.am: (pspp_SOURCES) Removed cases.c, cases.h.
2572         
2573         * cases.c: Removed.
2574
2575         * cases.h: Removed.
2576
2577         * aggregate.c: (parse_aggregate_functions) destvar doesn't need
2578         init.
2579
2580         * autorecode.c: (cmd_autorecode) destvars don't need init.
2581
2582         * compute.c: (lvalue_finalize) Set reinit.
2583
2584         * data-list.c: (fixed_parse_compatible) Don't need init usually.
2585         (dump_fmt_list) Ditto.
2586         (parse_free) Ditto.
2587
2588         * descript.q: (run_z_pass) Don't need init for z-scores.
2589
2590         * dictionary.c: (dict_create_var) Initialize `init', `reinit'
2591         members.
2592         (dict_clone_var) Copy `reinit' member, initialize `init' member.
2593
2594         * glob.c: (init_glob) Remove vec_init() calls.
2595
2596         * inpt-pgm.c: (cmd_end_input_program) Use `reinit', not `left'.
2597         
2598         * loop.c: (internal_cmd_loop) Don't need to call envector().
2599
2600         * numeric.c: (cmd_numeric) Ditto.
2601         (cmd_string) Ditto.
2602         (cmd_leave) Ditto.  Set `init', `reinit' members.
2603
2604         * recode.c: (cmd_recode) Don't need to call envector().
2605
2606         * repeat.c: (internal_cmd_do_repeat) Ditto.
2607
2608         * var.h: (struct variable) Remove `left'.  Add `init', `reinit'.
2609         (force_create_variable) Removed prototype.
2610         (force_dup_variable) Ditto.
2611
2612         * vector.c: (cmd_vector) Don't need to call envector().
2613
2614         * vfm.c: (reinit_sysmis) Removed.
2615         (reinit_blanks) Removed.
2616         (init_zero) Removed.
2617         (init_blanks) Removed.
2618         (process_active_file_write_case) No need to deal with vectors.
2619         Call clear_temp_case().
2620         (vector_initialization) Rewrite to use `init', `reinit'.
2621         (close_active_file) No need to call vec_clear().
2622         (procedure_write_case) Call clear_temp_case().
2623         (clear_temp_case) New function.
2624
2625 Sun Feb 15 20:50:36 2004  Ben Pfaff  <blp@gnu.org>
2626
2627         * pfm-write.c: (bufwrite) Get rid of nasty cast that also invoked
2628         undefined behavior.
2629
2630 Thu Feb 12 23:35:15 2004  Ben Pfaff  <blp@gnu.org>
2631
2632         Add auxiliary argument to procedure() interface.  Associated small
2633         clean-ups of vfm interface.
2634         
2635         * Updated every caller of procedure() and process_active_file() to
2636         reflect modified interface.  Simple, ordinary changes not listed
2637         otherwise below.
2638
2639         * Updated every function that implements struct case_stream's
2640         `read' function to take a write_case_func and a write_case_data.
2641         Also updated every caller of write_case() to instead call them
2642         through these arguments.  In some cases this meant that the extra
2643         args had to be threaded through a couple of extra levels.  This
2644         wasn't difficult or interesting so the details won't be given.
2645
2646         * data-list.c: (struct repeating_data_trns) Add members
2647         `write_case', `wc_data' as kluge.
2648         (read_one_set_of_repetitions) Rename repeating_data_trns_proc and
2649         make non-static.
2650         (repeating_data_set_write_case) New function.
2651
2652         * data-list.h: New file to declare repeating_data_trns_proc() and
2653         repeating_data_set_write_case().
2654
2655         * inpt-pgm.c: (input_program_source_read) Call
2656         repeating_data_set_write_case() for all the REPEATING DATA
2657         transformations, so that they know where to send their cases.
2658         It's a big kluge.  Also kluge in END CASE.
2659         (end_case_trns_proc) Never called anymore, but we still need it,
2660         so just assert(0).
2661
2662         * sort.c: (read_sort_output) Update to match struct case_stream
2663         `read' member.
2664
2665         * vfm.c: (struct write_case_data) New structure.
2666         (proc_func) Removed.
2667         (virt_proc_func) Removed.
2668         (begin_func) Removed.
2669         (virt_begin_func) Removed.
2670         (end_func) Removed.
2671         (write_case) Removed.
2672         (procedure) Added an auxiliary parameter to each function pointer
2673         argument's prototype.  Added an auxiliary data parameter.
2674         Rewrote.
2675         (process_active_file) Ditto.
2676         (process_active_file_write_case) Pass aux data along.
2677         (close_active_file) Ditto.
2678         (procedure_write_case) Ditto.
2679         (SPLIT_FILE_procfunc) Ditto.
2680
2681         * vfm.h: (typedef write_case_data) New.
2682         (typedef write_case_func) New.
2683         (struct case_stream) Add parameters to `read' member prototype.
2684         
2685 Thu Feb 12 19:24:53 WST 2004 John Darrington <john@darrington.wattle.id.au>
2686
2687         * t-test.q:  Added calculations for independent samples. (But no Levene
2688         test yet!)
2689
2690         * Makefile.am: Moved q_sources_c into own variable 
2691
2692 Wed Feb 11 23:56:51 2004  Ben Pfaff  <blp@gnu.org>
2693
2694         Miscellaneous cleanups.
2695         
2696         * Change unused to UNUSED in many source files to reflect modified
2697         pref.h.  Change use of __WIN32__, __MSDOS, __DJGPP__,
2698         __CYGWIN32__, __unix__, and unix not to assume that they're
2699         defined to a nonzero value.  Change use of __attribute__ to use
2700         NO_RETURN or PRINTF_FORMAT instead.
2701         
2702         * alloc.h: Move definitions for local_alloc(), local_free() here
2703         from ../pref.h.orig and simplify.
2704
2705         * expr-evl.c: Instead of working differently based on PAGED_STACK,
2706         use a pool allocator unconditionally.
2707         (CHECK_STRING_SPACE) Removed.
2708         (ALLOC_STRING_SPACE) Removed.
2709         (expr_evaluate) Use e->pool instead of CHECK_STRING_SPACE and
2710         ALLOC_STRING_SPACE.
2711
2712         * expr-opt.c: (dump_expression) Allocate string pool.
2713
2714         * expr-prs.c: (expr_free) Free string pool.
2715
2716         * pool.c: (pool_destroy) This pool must be removed from its
2717         parent's list of gizmos, not from its own.  Use free_all_gizmos().
2718         (pool_clear) New function.
2719         (free_all_gizmos) New function.
2720         (pool_alloc) Use space in empty block after this one if any.
2721         (pool_release) Only empty out blocks, don't actually free() them.
2722
2723         * print.c: Get rid of PAGED_STACK special case by always
2724         dynamically allocating line buffers.
2725         (struct print_trns) Always include the `line' member.
2726         (internal_cmd_print) Always initialize the `line' member.
2727         (alloc_line) Always allocate memory for `line'.
2728         (print_trns_proc) Always initialize buf from `line' member.
2729         (print_trns_free) Always free `line' memory.
2730
2731         * sort.c: (allocate_file_handles) Special-case MS-DOS for mkdir()
2732         call.
2733         
2734 Wed Feb 11 20:33:18 2004  Ben Pfaff  <blp@gnu.org>
2735
2736         * flip.c: Fixed crash from FLIP when a numeric variable is
2737           specified on NEWNAMES and a large value is used, and a couple of
2738           other minor bugs besides.
2739           (struct varname) Make name a 9-character fixed-size array
2740           instead of a 1-character variable size array.
2741           (make_new_var) Allow digits in variable names.
2742           (flip_stream_write) Limit numeric values to 8 characters and
2743           format system missing and very large and small values more
2744           appropriately.
2745
2746 Thu Feb  5 13:19:06 WAST 2004 John Darrington <john@darrington.wattle.id.au>
2747
2748         * command.c: Fixed test on command return status for the correct 
2749           value,  which had been causing a crash under certain invalid input.
2750
2751 Wed Feb  4 15:34:11 WST 2004 John Darrington <john@darrington.wattle.id.au>
2752
2753         * t-test.q: Added calculations for the one sample variant of the T-TEST
2754
2755 Tue Feb  3 20:09:54 2004  Ben Pfaff  <blp@gnu.org>
2756
2757         * tab.c: (render_strip) Fix bug that sometimes caused joined text
2758           in joined cells to be rendered outside box boundaries.
2759
2760 Tue Feb  3 18:56:45 WST 2004 John Darrington <john@darrington.wattle.id.au>
2761
2762         * random.c (rng_create): Fixed seeding so that it gets reseeded after
2763         SET seed=xx has been called.
2764
2765 Mon Jan 19 14:08:09 2004  Ben Pfaff  <blp@gnu.org> 
2766
2767         * random.c (rng_get_double): Fix always-returning-zero bug in my
2768         preferred way, and at the same time make sure rounding doesn't
2769         bite us.
2770
2771 Thu Jan  1 23:16:41 2004  Ben Pfaff  <blp@gnu.org>
2772
2773         * html.c: (change_attributes) Dead code, removed.
2774         (escape_string) Eliminate code to call change_attributes() that
2775         never actually called it.
2776         (output_tab_table) Get rid of dependence on tab_hit
2777         and struct tab_joined_cell's hit member, which are abominations.
2778
2779         * tab.c: (tab_output_text) Don't call
2780         d->class->text_set_font_by_name if it's a null pointer.
2781         (macro UNROLL_LOOP) Eliminate.
2782         (macro UNROLL_3_LOOPS) Eliminate.
2783         (tabi_render) Rewrite not to use the above macros.
2784
2785 Thu Jan  1 23:09:07 2004  Ben Pfaff  <blp@gnu.org>
2786
2787         Start working on a new output driver system, one that doesn't suck
2788         so much, by adding a "device-independent" output driver.  The idea
2789         is to write out only a single output stream, then use separate
2790         processes to translate them into whatever formats we want.  This
2791         is similar to how "groff" works with its various output drivers
2792         (grops, grotty, grodvi, ...).
2793         
2794         * Makefile.am: (pspp_SOURCES) Add devind.c, devind.h.
2795
2796         * list.q: (write_all_headers) Stub out devind class.
2797         (clean_up) Ditto.
2798         (determine_layout) Ditto.
2799         (list_cases) Ditto.
2800
2801         * output.c: (outp_init) Add devind class.
2802
2803         * devind.c: New file.
2804
2805         * devind.h: New file.
2806
2807 Thu Jan  1 23:08:14 2004  Ben Pfaff  <blp@gnu.org>
2808
2809         * frequencies.q: (hash_value_alpha) Fixed up the previous change
2810         to use the proper string length.
2811
2812 Wed Dec 31 16:27:33 WAST 2003 John Darrington <john@darrington.wattle.id.au>
2813
2814         * Fixed bug where FREQ would crash on alpha values
2815
2816 Tue Dec 30 22:42:57 2003  Ben Pfaff  <blp@gnu.org>
2817
2818         * Removed bletcherous alloca() workarounds for AIX from top of
2819         many files.  AIX can use the alternative alloca() implementation
2820         instead.
2821
2822 Tue Dec 30 22:35:16 2003  Ben Pfaff  <blp@gnu.org>
2823
2824         * ascii.c: (ascii_option) Fix implementation of headers option.
2825
2826 Tue Dec 30 22:32:53 2003  Ben Pfaff  <blp@gnu.org>
2827
2828         * ascii.c: Add a "squeeze" option to the ASCII driver to squeeze
2829         multiple blank lines into one.
2830         (struct ascii_driver_ext) Add squeeze_blank_lines option.
2831         (ascii_preopen_driver) Initialize squeeze_blank_lines.
2832         (static var option_tab) Add squeeze entry.
2833         (ascii_option) Set squeeze_blank_lines.
2834         (output_lines) Implement squeezing blank lines.
2835
2836 Wed Dec 31 07:19:46 WST 2003 John Darrington <john@darrington.wattle.id.au>
2837
2838         * Removed redundant code from output.h
2839
2840 Sat Dec 27 22:17:52 2003  Ben Pfaff  <blp@gnu.org>
2841
2842         Dictionary classes: each variable is "ordinary", "system", or
2843         "scratch".
2844
2845         * var.h: (enum dict_class) New enum.
2846
2847         * vars-prs.c: (dict_class_from_id) New function.
2848         (dict_class_to_name) New function.
2849
2850 Sat Dec 27 22:16:06 2003  Ben Pfaff  <blp@gnu.org>
2851
2852         * var.h: (struct freq_tab_set) Removed (not used).
2853
2854 Sat Dec 27 22:15:21 2003  Ben Pfaff  <blp@gnu.org>
2855
2856         * value-labels.c: (val_labs_destroy) vls needs to be freed too.
2857
2858 Sat Dec 27 22:10:49 2003  Ben Pfaff  <blp@gnu.org>
2859
2860         * stats.c: (hypercube) Rename pow4().  All references updated.
2861
2862 Sat Dec 27 22:05:49 2003  Ben Pfaff  <blp@gnu.org>
2863
2864         * rename-vars.c: (cmd_rename_variables) Rewritten.
2865         (compare_name) Removed.
2866
2867 Sat Dec 27 22:03:51 2003  Ben Pfaff  <blp@gnu.org>
2868
2869         var_set feature, and code taking advantage of it.
2870         
2871         * crosstabs.q: (static var var_dict) Removed.
2872         (static var variables) New variable.
2873         (static var variables_cnt) New variable.
2874         (cmd_crosstabs) Free variables instead of var_dict.
2875         (internal_cmd_crosstabs) Initialize and use variables,
2876         variables_cnt instead of var_dict.
2877         (free_var_dict) Removed.
2878         (crs_custom_tables) Use var_set instead of a copied dictionary.
2879         (crs_custom_variables) Set up variables, variables_cnt instead of
2880         var_dict.
2881         [DEBUGGING] (debug_print) Ditto.
2882
2883         * means.q: (mns_custom_tables) Use var_set instead of a copied
2884         dictionary.
2885
2886         * vars-prs.c: (parse_vs_variable) New function.
2887         (parse_dict_variable) Rewritten.
2888         (parse_variable) Rewritten.
2889         (parse_variables) Renamed parse_var_set_vars(), rewritten.
2890         (parse_variables) New function in terms of parse_var_set_vars().
2891         Now requires its first argument to be non-null.  All references
2892         that passed a null pointer updated to pass default_dict instead.
2893         (macro id_dict) Removed.
2894         (parse_DATA_LIST_vars) Add assertions.
2895         (parse_mixed_vars) Ditto.
2896         (struct var_set) New structure.
2897         (var_set_get_cnt) New function.
2898         (var_set_get_var) New function.
2899         (var_set_lookup_var) New function.
2900         (var_set_destroy) New function.
2901         (dict_var_set_get_cnt) New function.
2902         (dict_var_set_get_var) New function.
2903         (dict_var_set_lookup_var) New function.
2904         (dict_var_set_destroy) New function.
2905         (var_set_create_from_dict) New function.
2906         (struct array_var_set) New structure.
2907         (array_var_set_get_cnt) New function.
2908         (array_var_set_get_var) New function.
2909         (array_var_set_lookup_var) New function.
2910         (array_var_set_destroy) New function.
2911         (var_set_create_from_array) New function.
2912
2913         * q2c.c: (dump_parser) Use parse_variables(default_dict, ...)
2914         instead of parse_variables(NULL, ...) in output code.
2915
2916 Sat Dec 27 21:38:53 2003  Ben Pfaff  <blp@gnu.org>
2917
2918         Change inp_init from a 2-bit vector to an ordinary array.
2919         Initialize it all in cmd_end_input_program() instead of in
2920         create_variable().
2921
2922         * inpt-pgm.c: (enum value_init_type) New enum.
2923         (global var inp_init) Change to `enum value_init_type *', make
2924         static.
2925         (inp_init_size) Removed.
2926         (inp_nval) Change to `size_t', make static.
2927         (cmd_input_program) Don't initialize inp_init or inp_init_size.
2928         (cmd_end_input_program) Initialize inp_init, inp_nval.
2929         (init_case) Rewrite.
2930         (clear_case) Rewrite.
2931
2932         * inpt-pgm.h: Removed.
2933
2934 Sat Dec 27 21:36:38 2003  Ben Pfaff  <blp@gnu.org>
2935
2936         * hash.c: (hsh_hash_bytes) Use Fowler-Noll-Vo hash instead of
2937         Colin Plumb hash.  It is simpler and should better resist
2938         collisions.
2939         (hsh_hash_string) Ditto.
2940
2941 Sat Dec 27 21:34:57 2003  Ben Pfaff  <blp@gnu.org>
2942
2943         * get.c: (export_write_case_func) Remove debug printing code.
2944
2945 Sat Dec 27 21:11:09 2003  Ben Pfaff  <blp@gnu.org>
2946
2947         * get.c: (cmd_save_internal) Rename parameter.  Use &t->h instead
2948         of cast.
2949         (save_write_case_func) Use &trns->h instead of cast.
2950         (cmd_export) Use &t->h instead of cast.
2951
2952 Sat Dec 27 20:57:42 2003  Ben Pfaff  <blp@gnu.org>
2953
2954         Moved vectors into the dictionary.
2955
2956         * var.h: (struct vector) Moved here from vector.h.  `index' member
2957         renamed `idx', `v' renamed `var', `nv' renamed `cnt'.  All
2958         references updated.
2959         
2960         * vector.h: Removed.
2961
2962         * vector.c: (global var vec) Removed.
2963         (global var nvec) Removed.
2964         (cmd_vector) Rewritten.
2965         (find_vector) Removed.
2966
2967         * dictionary.c: (dict_create_vector) New function.
2968         (dict_get_vector) New function, replaces reading global vec[]
2969         array.
2970         (dict_get_vector_cnt) New function, replaces reading global nvec
2971         variable.
2972         (dict_lookup_vector) New function, replaces find_vector().
2973         (dict_clear_vectors) New function.
2974
2975 Sat Dec 27 20:54:01 2003  Ben Pfaff  <blp@gnu.org>
2976
2977         Start to move away from `struct variable' p `union' member to void
2978         * aux member.
2979
2980         * var.h: (struct variable) Add `aux' member.
2981
2982 Sat Dec 27 20:36:25 2003  Ben Pfaff  <blp@gnu.org>
2983
2984         Get rid of struct variable `foo' member.
2985
2986         * frequencies.q: (internal_cmd_frequencies) Use p.frq.used instead
2987         of foo.
2988         (frq_custom_variables) Ditto.
2989         (frq_custom_grouped) Ditto.
2990
2991         * get.c: (struct save_trns) Change `var' member from `int *' to
2992         `struct variable **'.
2993         (cmd_save_internal) Use aux instead of foo.
2994         (save_trns_proc) Use revised `var' member.
2995         (static var mtf_seq_no) Renamed mtf_seq_num.
2996         (static var mtf_seq_nums) New static var.
2997         (cmd_match_files) Initialize mtf_seq_nums.
2998         (mtf_free) Free mtf_seq_nums.
2999         (mtf_processing) Use mtf_seq_nums instead of foo.
3000         (mtf_merge_dictionary) No need to initialize mv->foo.
3001         (cmd_export) Use aux instead of foo.  Use revised `var' member.
3002         (mns_custom_tables) Don't use foo to check for duplicates, that's
3003         what PV_NO_DUPLICATE is for.
3004
3005         * var.h: (struct variable) Remove `foo' member.
3006         (struct frequencies_proc) New member.
3007         
3008 Sat Dec 27 19:46:13 2003  Ben Pfaff  <blp@gnu.org>
3009
3010         Clean up COMPUTE and IF.
3011
3012         * compute.c: More or less rewrite the darn thing.
3013         (struct compute_trns) Rename and reorder and add and delete
3014         members.
3015         (cmd_compute) Rewrite.
3016         (compute_num) Make conditional on test expression.  Now used for
3017         both COMPUTE and IF.
3018         (compute_num_vec) Ditto.
3019         (compute_str) Ditto.
3020         (compute_str_vec) Ditto.
3021         (cmd_if) Rewrite.
3022         (if_num) Removed.
3023         (if_num_vec) Removed.
3024         (if_str) Removed.
3025         (if_str_vec) Removed.
3026         (parse_target_expression) Renamed parse_rvalue_expression(),
3027         rewritten.
3028         (new_trns) Renamed compute_trns_create(), rewritten.
3029         (delete_trns) Removed.
3030         (free_trns) Renamed compute_trns_free(), rewritten.
3031         (struct lvalue) New structure.
3032         (parse_var_or_vec) Renamed lvalue_parse(), rewritten.
3033         (lvalue_get_type) New function.
3034         (lvalue_is_vector) New function.
3035         (lvalue_finalize) New function.
3036         (lvalue_destroy) New function.
3037         
3038 Sat Dec 27 19:44:14 2003  Ben Pfaff  <blp@gnu.org>
3039
3040         * command.def: Disallow MODIFY VARS in input mode, so that
3041         variables can't get dropped and confuse cmd_end_input_program()'s
3042         attempt to fill inp_init[].
3043         
3044         * modify-vars.c: (static var forward_positional_ordering) New
3045         variable.
3046         (struct var_modification) Entirely changed.
3047         (rearrange_dict) Interface changed, rewritten.
3048         (cmd_modify_vars) Deal with modified struct var_modification, much
3049         rewritten.
3050         (struct var_renaming) New structure.
3051         (compare_var_renaming_by_new_name) New function.
3052         (validate_var_modification) New function.
3053
3054         * var.h: (struct modify_vars_proc) Removed.
3055         (struct variable) Removed member p.mfv.
3056
3057 Sat Dec 27 19:40:26 2003  Ben Pfaff  <blp@gnu.org>
3058
3059         Make EVALUATE a valid command whether we're debugging or not, so
3060         that `make check' can succeed regardless of whether debugging is
3061         turned on.
3062         
3063         * command.def: [GLOBAL_DEBUGGING] Drop the #if.
3064
3065         * compute.c: [GLOBAL_DEBUGGING] (cmd_evaluate) Drop the #if.
3066
3067 Sat Dec 27 19:34:40 2003  Ben Pfaff  <blp@gnu.org>
3068
3069         * apply-dict.c: (cmd_apply_dictionary) Replace a ghastly switch
3070         statement by a simple if test.
3071
3072         * dfm.c: (dfm_get_record) Add assertion.
3073
3074 Sat Dec 27 17:51:26 2003  Ben Pfaff  <blp@gnu.org>
3075
3076         For each file x.c, move #include "x.h" to the very top of the
3077         include list, to catch x.h failing to include the proper headers.
3078
3079 Sat Dec 27 17:50:19 2003  Ben Pfaff  <blp@gnu.org>
3080
3081         * algorithm.c: (find) New function.
3082         (remove_equal) New function.
3083         (set_difference) New function.
3084         (adjacent_find_equal) New function.
3085         [TEST_UNIQUE] Removed test case.
3086         (copy_if) Find end test.
3087
3088 Sat Dec 27 17:42:45 2003  Ben Pfaff  <blp@gnu.org>
3089
3090         * dictionary.c: (dict_get_case_weight) New convenience function.
3091
3092         * aggregate.c: (accumulate_aggregate_info) Use
3093         dict_get_case_weight().
3094
3095         * frequencies.q: (calc_general) Ditto.
3096         (calc_integer) Ditto.
3097         (calc) Ditto.
3098
3099         * t-test.q: (groups_calc) Ditto.
3100         (z_calc) Ditto.
3101
3102 Sat Dec 27 17:29:45 2003  Ben Pfaff  <blp@gnu.org>
3103
3104         * glob.c: (global var default_dict) Change from `struct
3105         dictionary' to `struct dictionary *'.  All references changed.
3106         (init_glob) Initialize default_dict with dict_create().
3107
3108 Sat Dec 27 17:06:06 2003  Ben Pfaff  <blp@gnu.org>
3109
3110         struct dictionary now made opaque.  All related functions:
3111
3112         * get.c: (rename_variables) Removed.
3113         (dict_delete_run) Removed.
3114         
3115         * temporary.c: (copy_variable) Removed.
3116         (new_dictionary) Removed.
3117         (save_dictionary) Removed.
3118         (restore_dictionary) Removed.
3119         (free_dictionary) Removed.
3120
3121         * vars-atr.c: (clear_default_dict) Removed.
3122         (find_variable) Removed.
3123         (find_dict_variable) Removed.
3124         (create_variable) Removed.
3125         (delete_variable) Removed.
3126         (common_init_stuff) Removed.
3127         (init_variable) Removed.  Updating of inp_init moved into
3128         cmd_end_input_program().
3129         (replace_variable) Removed.
3130         (rename_variable) Removed.
3131         (clear_variable) Removed.
3132         (dup_variable) Removed.
3133
3134         * vars-prs.c: (is_varname) Removed.
3135         (is_dict_varname) Removed.
3136         (fill_all_vars) Removed.
3137
3138         * vector.c: (find_vector) Removed.
3139
3140         * weight.c: (stop_weighting) Removed.
3141
3142         * dictionary.c: New file.
3143         (dict_create) New, replaces new_dictionary().
3144         (dict_clone) New, replaces save_dictionary() and
3145         restore_dictionary().
3146         (dict_clear) New, replaces clear_default_dict().
3147         (dict_destroy) New, replaces free_dictionary().
3148         (dict_get_var_cnt) New function, replaces references to
3149         dict->nvar.
3150         (dict_get_var) New function, replaces references to dict->var[i].
3151         (dict_get_vars) New function, replaces fill_all_vars().
3152         (dict_create_var) New, replaces create_variable().  Interface
3153         drops `type' parameter, using a zero `width' to designate numeric.
3154         (dict_clone_var) New, replaces dup_variable().
3155         (dict_rename_var) New, replaces rename_variable().
3156         (dict_lookup_var) New, replaces find_variable(),
3157         find_dict_variable(), is_varname().
3158         (dict_contains_var) New function.
3159         (compare_variable_dblptrs) New function.
3160         (dict_delete_var) New function, replaces clear_variable().
3161         (dict_delete_vars) New function, replaces dict_delete_run().
3162         (dict_reorder_vars) New function.
3163         (dict_rename_vars) New function, replaces rename_variables().
3164         (dict_get_weight) New function, replaces reading dict->weight_var.
3165         (dict_set_weight) New function, replaces writing dict->weight_var
3166         or calling stop_weight(dict).
3167         (dict_get_filter) New function, replaces reading dict->filter_var.
3168         (dict_set_filter) New function, replaces writing dict->filter_var.
3169         (dict_get_case_limit) New function, replaces reading dict->N.
3170         (dict_set_case_limit) New function, replaces writing dict->N.
3171         (dict_get_value_cnt) New function, replaces reading dict->nval.
3172         (dict_compact_values) New function, replaces a loop that was
3173         replicated in several places.
3174         (dict_get_split_vars) New function, replaces reading dict->splits.
3175         (dict_get_split_cnt) New function, replaces reading
3176         dict->n_splits.
3177         (dict_set_split_vars) New function, replaces writing dict->splits.
3178         (dict_get_label) New function, replaces reading dict->label.
3179         (dict_set_label) New function, replaces writing dict->label.
3180         (dict_get_documents) New function, replaces reading
3181         dict->documents.
3182         (dict_set_documents) New function, replaces writing
3183         dict->documents.
3184         
3185         All references to above functions updated.
3186         
3187         * aggregate.c: (cmd_aggregate) Copy file label and documents from
3188         old dictionary to new by hand, because dict_create() can't do it
3189         itself.  Use dict_set_documents(), dict_set_split_vars().
3190
3191         * temporary.c: (cancel_temporary) Also set temp_dict to NULL after
3192         calling dict_destroy().
3193
3194         * data-list.c: (dls_var_spec) Remove `type' member, replace by
3195         `width'.
3196         (fixed_parse_compatible) Some slightly nontrivial changes for
3197         dict_create_var().
3198         (dump_fmt_list) Ditto.
3199         (parse_free) Ditto.
3200
3201         * file-type.c: (create_col_var) Ditto.
3202
3203         * get.c: (cmd_get) Use dict_compact_values() instead of a loop.
3204         (trim_dictionary) Use dict_delete_vars(), dict_reorder_vars().
3205         (rename_variables) Use dict_rename_vars().
3206         (mtf_merge_dictionary) Use dict_get_documents(),
3207         dict_set_documents(), dict_compact_values().
3208
3209         * pfm-read.c: (read_variables) Deal with changes to weighting.
3210
3211         * q2c.c: (dump_parser) Use dict_lookup_var() instead of
3212         is_varname() in output code.
3213
3214         * sfm-read.c: (read_header) Use dict_create(), dict_set_label(),
3215         other dictionary functions.
3216
3217         * title.c: (add_document_line) Use dict_get_documents(),
3218         dict_set_documents().
3219
3220         * vars-atr.c: (discard_variables) Use dict_clear(default_dict),
3221         reset default_handle by hand.  dict_clear() will clear vectors so
3222         there's no need for that by hand.
3223
3224         * vfm.c: (close_active_file) Move call to finish_compaction()
3225         earlier, so that we can do the compaction as a single step using
3226         dict_compact_values().  Use dict_clear_vectors().
3227         (finish_compaction) Use dict_delete_var(), dict_compact_values().
3228                 
3229         Some functions don't have replacements:
3230
3231         * vars-atr.c: (force_create_variable) Removed.  All references
3232         updated to dict_create_var() followed by an assertion.
3233         (force_dup_variable) Removed.  All references updated to
3234         dict_clone_var() followed by an assertion.
3235         
3236         * weight.c: (update_weighting) Removed.  No longer necessary, so
3237         all references removed.
3238
3239 Sat Dec 27 16:43:01 2003  Ben Pfaff  <blp@gnu.org>
3240
3241         Clean up AGGREGATE.
3242         
3243         * aggregate.c: Eliminate separation of weighted and unweighted
3244         case.  It made the code too obscure and I doubt it was actually
3245         faster.  Instead, all code uses the "weighted" code, because
3246         that's a generalization of the "unweighted" code.
3247         (FWEIGHT) Removed.
3248         (FOPTIONS) Ditto.
3249         (parse_aggregate_functions) No need to set FWEIGHT.
3250         (accumulate_aggregate_info) Get rid of FWEIGHT cases.
3251         (dump_aggregate_info) Ditto.
3252         (initialize_aggregate_info) No need for special plain_function
3253         that gets rid of FWEIGHT option.
3254
3255         * aggregate.c: Get rid of approximations.
3256         (accumulate_aggregate_info) Don't use approx_gt(), approx_lt(),
3257         approx_in_range().
3258         (aggregate_single_case) Don't use approx_ne().
3259
3260 Sat Dec 27 16:19:36 2003  Ben Pfaff  <blp@gnu.org>
3261
3262         * ascii.c (ascii_line_width): Dead code, removed.
3263
3264         * postscript.c (ps_line_width): Ditto.
3265
3266         * q2c.c (xrealloc): Ditto.
3267
3268         * count.c (internal_cmd_count): Ditto.
3269
3270         * means.q (validate_dependent_endpoint): Ditto.
3271
3272         * set.q: (cmd_gset) Ditto.
3273
3274         * weight.c: [0] (weight_trns_proc) Ditto.
3275
3276 Sat Dec 27 16:18:16 2003  Ben Pfaff  <blp@gnu.org>
3277
3278         Make the code -Wmissing-prototypes clean.
3279
3280         * Makefile.am (version.c): Add #include "version.h".
3281         
3282         * ascii.c: (ascii_open_global) Make static.
3283         (ascii_close_page) Ditto.
3284         (ascii_font_sizes) Ditto.
3285         (ascii_postopen_driver) Ditto.
3286         (ascii_close_driver) Ditto.
3287         (ascii_option) Ditto.
3288         (ascii_open_page) Ditto.
3289         (ascii_line_horz) Ditto.
3290         (ascii_line_vert) Ditto.
3291         (ascii_line_intersection) Ditto.
3292         (ascii_box) Ditto.
3293         (ascii_polyline_begin) Ditto.
3294         (ascii_polyline_point) Ditto.
3295         (ascii_polyline_end) Ditto.
3296         (ascii_text_set_font_by_name) Ditto.
3297         (ascii_text_set_font_by_position) Ditto.
3298         (ascii_text_set_font_by_family) Ditto.
3299         (ascii_text_get_font_name) Ditto.
3300         (ascii_text_get_font_family) Ditto.
3301         (ascii_text_set_size) Ditto.
3302         (ascii_text_get_size) Ditto.
3303         (ascii_text_metrics) Ditto.
3304         (ascii_text_draw) Ditto.
3305         (ascii_close_page) Ditto.
3306
3307         * cmdline.h: New header for parse_command_line().  Used where
3308         needed.
3309
3310         * command.c: Move prototypes for cmd_*() functions to command.h.
3311
3312         * command.h: Prototypes for cmd_*() functions moved here from
3313         command.c.
3314
3315         * crosstabs.q: (gamma_int) Ditto.
3316
3317         * file-handle.h: Add fh_init_files() prototype.
3318         
3319         * getline.c: (welcome) Ditto.
3320
3321         * glob.h: New header for init_glob().  Used where appropriate.
3322
3323         * hash.c: (comparison_helper) Ditto.
3324
3325         * html.c: (html_open_global) Ditto.
3326         (html_close_global) Ditto.
3327         (html_preopen_driver) Ditto.
3328         (html_postopen_driver) Ditto.
3329         (html_close_driver) Ditto.
3330         (html_option) Ditto.
3331         (html_open_page) Ditto.
3332         (html_close_page) Ditto.
3333         (html_submit) Ditto.
3334
3335         * inpt-pgm.c: (input_program_source_read) Ditto.
3336
3337         * output.c: (find_defn_value) Ditto.
3338         (destroy_list) Ditto.
3339
3340         * pfm-read.c: (read_int) Ditto.
3341
3342         * postscript.c: (ps_open_global) Ditto.
3343         (ps_close_global) Ditto.
3344         (ps_font_sizes) Ditto.
3345         (ps_preopen_driver) Ditto.
3346         (ps_postopen_driver) Ditto.
3347         (ps_close_driver) Ditto.
3348         (ps_option) Ditto.
3349         (ps_open_page) Ditto.
3350         (ps_close_page) Ditto.
3351         (ps_line_horz) Ditto.
3352         (ps_line_vert) Ditto.
3353         (ps_line_intersection) Ditto.
3354         (ps_box) Ditto.
3355         (ps_polyline_begin) Ditto.
3356         (ps_polyline_point) Ditto.
3357         (ps_polyline_end) Ditto.
3358         (ps_text_set_font_by_name) Ditto.
3359         (ps_text_set_font_by_position) Ditto.
3360         (ps_text_set_font_family) Ditto.
3361         (ps_text_get_font_name) Ditto.
3362         (ps_text_get_font_family) Ditto.
3363         (ps_text_set_size) Ditto.
3364         (ps_text_get_size) Ditto.
3365         (ps_text_metrics) Ditto.
3366         (ps_text_draw) Ditto.
3367
3368         * q2c.c: (finish_up) Ditto.
3369         (xmalloc) Ditto.
3370         (xstrdup) Ditto.
3371         (get_buffer) Ditto.
3372         (st_lower) Ditto.
3373         (st_upper) Ditto.
3374         (skip_ws) Ditto.
3375         (get_line) Ditto.
3376         (add_symbol) Ditto.
3377         (find_symbol) Ditto.
3378         (lex_get) Ditto.
3379         (force_id) Ditto.
3380         (force_string) Ditto.
3381         (match_id) Ditto.
3382         (match_token) Ditto.
3383         (skip_token) Ditto.
3384         (parse) Ditto.
3385         (parse_setting) Ditto.
3386         (parse_specifier) Ditto.
3387         (parse_specifiers) Ditto.
3388         (parse_subcommand) Ditto.
3389         (dump_specifier_vars) Ditto.
3390         (is_keyword) Ditto.
3391         (make_identifier) Ditto.
3392         (dump_declarations) Ditto.
3393         (dump_specifier_init) Ditto.
3394         (dump_vars_init) Ditto.
3395         (make_match) Ditto.
3396         (dump_specifier_parse) Ditto.
3397         (dump_subcommand) Ditto.
3398         (dump_parser) Ditto.
3399         (dump_header) Ditto.
3400         (dump_free) Ditto.
3401         (recognize_directive) Ditto.
3402
3403         * recode.c: (string_to_long) Ditto.
3404
3405         * repeat.c: (find_DO_REPEAT_substitution) Ditto.
3406
3407         * repeat.h: New header for perform_DO_REPEAT_substitutions, used
3408         where appropriate.
3409
3410         * sort.c: (sort_stream_read) Ditto.
3411         (sort_stream_mode) Ditto.
3412         
3413 Fri Dec 19 23:35:04 2003  Ben Pfaff  <blp@gnu.org>
3414
3415         * algorithm.c (binary_search): Fix comparison.
3416
3417 Fri Dec 19 23:27:45 2003  Ben Pfaff  <blp@gnu.org>
3418
3419         * algorithm.c: (binary_search) Fix assertion.
3420
3421 Fri Dec 19 21:31:48 2003  Ben Pfaff  <blp@gnu.org>
3422
3423         * sysfile-info.c: (compare_vectors_by_name) Rewrite.
3424
3425 Fri Dec 19 21:30:24 2003  Ben Pfaff  <blp@gnu.org>
3426
3427         * sort.c: (compare_case_lists) Rewrite.
3428
3429 Fri Dec 19 16:44:22 2003  Ben Pfaff  <blp@gnu.org>
3430
3431         * quicksort.c: Removed (not used).
3432
3433         * quicksort.h: Removed (not used).
3434
3435         * sort.c: Removed blp_quicksort() prototype.
3436
3437 Fri Dec 19 16:42:13 2003  Ben Pfaff  <blp@gnu.org>
3438
3439         * postscript.c: (int_2_compare) Rewrite.
3440         (compare_line) Rewrite.
3441
3442 Fri Dec 19 16:38:35 2003  Ben Pfaff  <blp@gnu.org>
3443
3444         * matrix-data.c (compare_factors) Use lexicographical_compare()
3445         algorithm.
3446         (compare_doubles) New function.
3447         
3448         * algorithm.c: (lexicographical_compare) New algorithm.
3449
3450 Fri Dec 19 16:23:45 2003  Ben Pfaff  <blp@gnu.org>
3451
3452         * matrix-data.c (compare_variables_by_mxd_vartype): Rewrite.
3453
3454 Fri Dec 19 15:54:45 2003  Ben Pfaff  <blp@gnu.org>
3455
3456         * expr-prs.c: (cmp_func) Removed.
3457         (parse_function) Use binary_search() algorithm.
3458         (compare_functions) New function.
3459         (init_func_tab) Use sort() algorithm.
3460
3461         * algorithm.c: (binary_search) New algorithm.
3462
3463 Fri Dec 19 15:50:45 2003  Ben Pfaff  <blp@gnu.org>
3464
3465         * descript.q: (display) Use sort() algorithm instead of qsort().
3466         (compare_func) Removed.
3467         (descriptives_compare_variables) New function.
3468
3469 Fri Dec 19 15:08:38 2003  Ben Pfaff  <blp@gnu.org>
3470
3471         Get rid of AVL trees.  Hashes are more appropriate for everything
3472         PSPP does.
3473
3474         * Makefile.am: (pspp_SOURCES) Remove avl.c, avl.h.
3475         
3476         * avl.c: Removed.
3477
3478         * avl.h: Removed.
3479
3480 Fri Dec 19 14:33:31 2003  Ben Pfaff  <blp@gnu.org>
3481
3482         Much code can be clarified by using C++ STL-like algorithms.  Not
3483         all uses of these algorithms are listed below, only the ones where
3484         the change to an algorithm was the only change of interest.
3485         
3486         * Makefile.am: (pspp_SOURCES) Add algorithm.c, algorithm.h.
3487         
3488         * algorithm.c: New file.
3489
3490         * algorithm.h: New file.
3491
3492         * modify-vars.c: (static var forward) Removed.
3493         (static var positional) Removed.
3494         (compare_variables) Removed.
3495         (struct ordering) New.
3496         (cmd_modify_vars) Use sort() algorithm.
3497         (compare_variables_given_ordering) New function.
3498         (rearrange_dict) Use sort() algorithm.
3499
3500         * sysfile-info.c: (cmd_display) Use sort() algorithm.
3501         (cmp_var_by_name) Removed.
3502
3503 Fri Dec 19 14:26:17 2003  Ben Pfaff  <blp@gnu.org>
3504
3505         Make file handles use a hash table.
3506         
3507         * file-handle.q: (files) Change to hash table, make static.
3508         (cmd_file_handle) Use hash table functions.
3509         (fh_get_handle_by_filename) Ditto.
3510         (fh_get_handle_by_name) Ditto.
3511         (hash_file_handle) New function.
3512         (cmp_file_handle) Rewrite.
3513         (fh_init_files) Use hash table functions.
3514
3515 Fri Dec 19 14:24:38 2003  Ben Pfaff  <blp@gnu.org>
3516
3517         Clean up FREQUENCIES.
3518         
3519         * Makefile.am: (pspp_SOURCES) Remove frequencies.g.
3520
3521         * frequencies.q: Remove a lot of old #if'd out code at the end.
3522         (internal_cmd_frequencies) Use calc() instead of calc_no_weight()
3523         or calc_weight().  Initialize percentile_values.
3524         (calc) New function based on calc_weight() from frequencies.g.
3525         (precalc) Use hash functions.
3526         (static var comparison_func) Removed.
3527         (static var comparison_param) Removed.
3528         (comparison_helper) Removed.
3529         (get_freq_comparator) New function.
3530         (not_missing) New function.
3531         (add_freq) Removed.
3532         (postprocess_freq_tab) Use hash table functions, algorithms,
3533         get_freq_comparator().  Rewrite.
3534         (cleanup_freq_tab) Rephrase.
3535         (add_percentile) Clean up spacing.
3536         (hash_value_numeric) New function.
3537         (hash_value_alpha) New function.
3538         (compare_value_numeric_a) Rewrite.
3539         (compare_value_alpha_a) Rewrite.
3540         (compare_value_numeric_d) Rewrite.
3541         (compare_value_alpha_d) Rewrite.
3542         (compare_freq_numeric_a) Rewrite.
3543         (compare_freq_alpha_a) Rewrite.
3544         (compare_freq_numeric_d) Rewrite.
3545         (compare_freq_alpha_d) Rewrite.
3546         (calc_stats) Clean up mode, percentiles, max.
3547         (dump_statistics) Clean up spacing.
3548         
3549         * frequencies.g: Removed.
3550
3551         * var.h: (struct freq_tab) Change `data' to hash table.
3552
3553 Fri Dec 19 14:15:46 2003  Ben Pfaff  <blp@gnu.org>
3554
3555         * file-handle.h: Remove declaration of global variable `files',
3556         which wasn't used anywhere.
3557
3558         * postscript.c: (add_encoding) Remove superfluous cast.
3559         (line) Ditto.
3560
3561         * sfm-read.c: [linux] (bswap_int32) Drop ntohl() non-portable
3562         version.
3563
3564         * temporary.c: [0] (display_tree) Removed.
3565
3566 Fri Dec 19 14:13:04 2003  Ben Pfaff  <blp@gnu.org>
3567
3568         Implement a new random number generator based on the alleged RC4
3569         algorithm.
3570
3571         * expr-evl.c: (expr_evaluate) Use rng_get_double_normal() instead
3572         of rand_normal().
3573
3574         * random.c: [!HAVE_GOOD_RANDOM] (real_rand) Removed.
3575         [!HAVE_GOOD_RANDOM] (real_srand) Removed.
3576         (macro k) Removed.
3577         (static var V[]) Removed.
3578         (static var Y) Removed.
3579         (static var X2) Removed.
3580         (setup_randomize) Removed.
3581         (shuffle) Removed.
3582         (rand_uniform) Removed.
3583         (rand_normal) Removed.
3584         (struct rng) New structure.
3585         (rng_create) New function.
3586         (rng_destroy) New function.
3587         (swap_byte) New static function.
3588         (rng_seed) New function.
3589         (rng_get_bytes) New function.
3590         (rng_get_int) New function.
3591         (rng_get_unsigned) New function.
3592         (rng_get_double) New function.
3593         (rng_get_double_normal) New function.
3594         (pspp_rng) New function.
3595
3596         * random.h: Sync up to random.c.
3597
3598         * sample.c: (struct sample_trns) Make `frac' unsigned and a
3599         fraction of UINT_MAX, not 65536.
3600         (cmd_sample) Use rng_get_unsigned(), rng_get_double(), UINT_MAX
3601         fraction.
3602
3603         * vfm.c: (open_active_file) No need to call setup_randomize() any
3604         longer.
3605
3606 Fri Dec 19 12:05:56 2003  Ben Pfaff  <blp@gnu.org>
3607
3608         Change dictionary name indexes to use hash tables instead of AVL
3609         trees.
3610
3611         * crosstabs.q: (free_var_dict) Use hash tables.
3612         (crs_custom_tables) Ditto.
3613         (calc_general) Ditto.
3614         (compare_table_entry) Rewrite.
3615         (enum_var_values) Reorder parameters.  All references updated.
3616         Rewrite.
3617
3618         * get.c: (rename_variable) Use hash tables.
3619         (mtf_merge_dictionary) Ditto.
3620
3621         * glob.c: (init_glob) Use hash tables.
3622         (cmp_variable) Removed.
3623
3624         * means.q: (mns_custom_tables) Use hash tables.
3625
3626         * modify-vars.c: (rearrange_dict) Use hash tables.
3627
3628         * rename-vars.c: (cmd_rename_variables) Use hash tables.
3629
3630         * sfm-read.c: (read_header) Use hash tables.
3631         (read_variables) Ditto.
3632
3633         * temporary.c: (new_dictionary) Use hash tables.
3634         (save_dictionary) Ditto.
3635         (restore_dictionary) Ditto.
3636
3637         * var.h: (struct dictionary) Change AVL tree `var_by_name' into
3638         hash table `name_tab'.
3639
3640         * vars-atr.c: [DEBUGGING] (dump_one_var_node) Removed.
3641         [DEBUGGING] (dump_var_tree) Removed.
3642         (find_variable) Use hash tables.
3643         (find_dict_variable) Ditto.
3644         (common_init_stuff) Ditto.
3645         (rename_variable) Ditto.
3646         (clear_variable) Ditto.  Also, remove debug code.
3647         (dup_variable) Use hash tables.
3648
3649         * vars-prs.c: (fill_all_vars) Use hash tables.
3650         (is_dict_varname) Ditto.
3651         (parse_dict_variable) Ditto.
3652         
3653 Fri Dec 19 11:46:23 2003  Ben Pfaff  <blp@gnu.org>
3654
3655         Change value labels to use hash tables instead of AVL trees, and
3656         change value labels into an ADT.
3657
3658         * Makefile.am: (pspp_SOURCES) Add value-labels.c, value-labels.h.
3659         
3660         * value-labels.c: New file.
3661
3662         * value-labels.h: New file.
3663
3664         * apply-dict.c: (cmd_apply_dictionary) Use value label ADT.
3665         Get rid of a stupid use of goto.
3666
3667         * autorecode.c: (compare_alpha_value) Rewrite.
3668         (hash_alpha_value) Ditto.
3669         (compare_numeric_value) Rewrite.
3670         (hash_numeric_value) Ditto.
3671
3672         * frequencies.q: (dump_full) Use value label ADT.
3673
3674         * pfm-read.c: (read_value_label) Use value label ADT.
3675
3676         * pfm-write.c: (write_value_labels) Use value label ADT.
3677
3678         * sfm-read.c: (read_variables) Use value label ADT.
3679         (read_value_labels) Rewrite.
3680
3681         * sfm-write.c: (write_value_labels) Rewrite.
3682
3683         * sysfile-info.c: (cmd_sysfile_info) Use value label ADT.
3684         (display_variables) Ditto.
3685         (describe_variable) Ditto.
3686
3687         * t-test.q: (print_t_groups) Use value label ADT.
3688
3689         * temporary.c: (copy_variable) Use value label ADT.
3690         (free_dictionary) Ditto.
3691
3692         * val-labs.c: (verify_val_labs) Use value label ADT.
3693         (get_label) Ditto.
3694         (debug_print) Ditto.
3695         (val_lab_cmp) Removed.
3696         (inc_ref_count) Removed.
3697         (copy_value_labels) Removed.
3698
3699         * var.h: (struct value_label) Removed.
3700         (struct variable) Change AVL tree `val_lab' into hash table
3701         `val_labs'.
3702
3703         * vars-atr.c: (init_variable) Use value label ADT.
3704         (clear_variable) Ditto.
3705         (free_value_label) Removed.
3706         (free_val_lab) Removed.
3707         (get_val_lab) Removed.
3708         (compare_variables) New function.
3709         (hash_variable) New function.
3710
3711         * vfm.c: (dump_splits) Use value label ADT.
3712
3713 Fri Dec 19 11:18:11 2003  Ben Pfaff  <blp@gnu.org>
3714
3715         Add to the hash table interface.
3716
3717         * hash.c: (hsh_hash_bytes) Add assertion.
3718         (hsh_hash_string) Ditto.
3719         (hsh_clear) Ditto.
3720         (hsh_rehash) Ditto.
3721         (hsh_probe) Ditto.
3722         (hsh_create) Ditto.  Also make minimum `size'.
3723         (hsh_destroy) Rephrase.
3724         (sort_nulls_last) Removed.
3725         (not_null) New function.
3726         (hsh_data) Ditto.
3727         (comparison_helper) Ditto.
3728         (hsh_sort) Rewritten.
3729         (hsh_data_copy) New function.
3730         (hsh_sort_copy) Ditto.
3731         (hsh_insert) Ditto.
3732         (hsh_replace) Ditto.
3733         (hsh_hash_double) Ditto.
3734         (hsh_delete) Fix stupid bug.
3735         
3736 Thu Dec 18 12:27:03 WAST 2003 John Darrington <john@darrington.wattle.id.au>
3737         * added a calculation of the mode to FREQUENCIES
3738
3739 Wed Dec 17 12:53:01 WAST 2003 John Darrington <john@darrington.wattle.id.au>
3740
3741         * moved (un)defs of DEBUGGING to config.h
3742
3743 Mon Dec 15 21:35:59 2003  Ben Pfaff  <blp@gnu.org>
3744
3745         * groff-font.c: (add_kern) Fix indentation.
3746         (add_kern) Use & instead of % to take power-of-2 modulus.
3747         (font_get_kern_adjust) Likewise.
3748
3749 Fri Dec 12 23:54:37 2003  Ben Pfaff  <blp@gnu.org>
3750
3751         * autorecode.c: (recode) Replace stupid use of memcpy() by
3752         memberwise copy.
3753         (hash_alpha_value) Use hsh_hash_bytes().  Get rid of nasty casts.
3754         (hash_numeric_value) Ditto.
3755         (autorecode_proc_func) pool_strdup() was wrong here because the
3756         source string was not null-terminated.  Use new pool_strndup()
3757         instead.
3758
3759         * crosstabs.q: (enum_var_values) Remove superfluous and bizarre
3760         use of hsh_iterator_init().
3761
3762         * data-in.c: (parse_N) Initialize i->v->f.
3763
3764         * flip.c: (cmd_flip) Use memmove(), not memcpy(), to copy
3765         overlapping arrays.
3766
3767         * groff-font.c: Use power-of-2 hash table sizes, not prime.
3768         (groff_read_font) Don't call hsh_next_prime().  Don't call
3769         fclose(NULL).
3770         (static var hash) Remove `size_p', `max_used' members.
3771         (font_char_name_to_index) Don't call hsh_next_prime().  Use
3772         hsh_hash_string() instead of hashpjw(), & instead of %.
3773         (default_font) Don't call hsh_next_prime().
3774
3775         * pool.c: (pool_strndup) New function.
3776         (pool_strdup) Reimplement in terms of pool_strndup.
3777
3778         * postscript.c: (hash_font_entry) Use hsh_hash_string().  Get rid
3779         of nasty casts.
3780         (hash_ps_encoding) Use hsh_hash_string().
3781         (hash_ps_combo) Use hsh_hash_string(), hsh_hash_int().
3782         (hash_filename2font) Use hsh_hash_string().
3783
3784         * som.c: Add #include <stdlib.h>.
3785
3786         * tab.c: (tab_destroy) Don't set t->container after freeing `t'
3787         (by destroying its pool).
3788         
3789 Fri Dec 12 23:18:59 2003  Ben Pfaff  <blp@gnu.org>
3790
3791         Miscellaneous hash table code cleanup:
3792         
3793         * hash.h: (struct hsh_table) Moved into hash.c.
3794         (hsh_count) Ditto, and transformed into function.
3795         (hsh_compare_func) New typedef, used for defining otherwise-long
3796         function types here and in hash.c
3797         (hsh_hash_func) Ditto.
3798         (hsh_free_func) Ditto.
3799         
3800         * hash.c: (struct hsh_table) Renamed `n' to `used', `m' to `size',
3801         `table' to `entries'.  Removed `mp'.  All references updated.
3802         (hsh_clear) Don't shrink entries array; if the hash was this big
3803         once, it probably will be again.
3804         (hsh_rehash) Made static.
3805         (force_hsh_insert) Renamed hsh_force_insert.
3806         (force_hsh_find) Renamed hsh_force_find.
3807
3808         Made hash table sizes powers of 2, because that's fine with any
3809         reasonable hash function and because taking a power-of-2 modulus
3810         is faster than any other:
3811         
3812         (hsh_prime_tab) Removed;
3813         (hsh_next_prime) Ditto.
3814         (next_power_of_2) New function.
3815         (hsh_create) Use next_power_of_2.
3816         (hsh_rehash) Use & instead of %.
3817
3818         Cleaned up hsh_sort:
3819         
3820         (internal_comparison_fn) Removed.
3821         (sort_nulls_last) New function.
3822         (hsh_sort) Removed second parameter, switched to using the new
3823         quicksort() function from quicksort.h to avoid using nasty need
3824         for static variables with qsort().  All references updated.
3825
3826         Changed the hash functions offered, because there are better hash
3827         functions than the ones we had, and cleaned up the names to boot:
3828         
3829         * hash.c: (hashpjw_d) Removed.
3830         (hashpjw) Ditto.
3831         (hsh_hash_bytes) New function.
3832         (hsh_hash_string) New function.
3833         (hsh_hash_int) New function.
3834
3835         Improved the hash table iteration interface:
3836         
3837         * hash.h: (hsh_iterator_init) Removed.
3838         (struct hsh_iterator) Removed `init' member, change `next' to
3839         size_t.
3840
3841         * hash.c: (hsh_foreach) Removed.  All references updated to use
3842         hsh_first/hsh_next instead.
3843         (hsh_first) New function.  Notably, unlike hsh_foreach() it does
3844         not treat a null pointer as an empty hash table.
3845         (hsh_next) New function.
3846
3847         Made deletion possible, though slow:
3848
3849         * hash.c: (locate_matching_entry) New function.
3850         (hsh_find) Use locate_matching_entry().
3851         (hsh_delete) New function also using locate_matching_entry().
3852         (hsh_force_delete) New function.
3853
3854 Fri Dec 12 23:16:10 2003  Ben Pfaff  <blp@gnu.org>
3855
3856         * quicksort.c: New file implementing a sort routine with a
3857         interface better than qsort() because it passes a user-provided
3858         parameter to the sort routine.
3859
3860         * Makefile.am: Add quicksort.c, quicksort.h.
3861
3862 Fri Dec 12 13:31:58 2003  Ben Pfaff  <blp@gnu.org>
3863
3864         * All source files: Get rid of nasty special cases for Checker,
3865         which is pretty obsolete now.
3866
3867 Thu Dec 11 21:38:24 WST 2003 John Darrington <john@darrington.wattle.id.au>
3868
3869         * Fixed a bug apparent when using the FREQUENCIES command with the
3870         html driver.  The html driver was incorrectly trying to display 
3871         empty cells.
3872
3873 Sun Jan  2 21:40:13 2000  Ben Pfaff  <blp@gnu.org>
3874
3875         * Makefile.am: Reorganized.  Put locale dir in version.c instead
3876         of passing it to each compile command.  Only put local gmp libs in
3877         LD_ADD if not installed on system.  Remove `boast' target.
3878
3879         * All source files: struct and union typedefs eliminated.
3880         `sizeof type' replaced by `sizeof object' where practical.  Moved
3881         `unused' qualifiers from start to end of declarations for gcc
3882         2.7.2 compatibility.  Change `while (1)' to `for (;;)'.  Made
3883         assertions on pointers strictly compliant.  Removed _ prefixes on
3884         some function parameter names.
3885
3886         * alloc.c: New source file, containing these external linkage
3887         functions removed from common.c: xmalloc, xcalloc, xrealloc,
3888         xstrdup.
3889
3890         * arena.c: Removed.
3891         
3892         * arena.h: Removed.
3893
3894         * ascii.c: Migrated from arenas to pools.
3895         (struct ascii_driver_ext) ops[], box[], fonts[] changed from
3896         c_string to len_string.  All references changed.
3897         (ascii_option) Signature changed to comply to new output.c
3898         interface.
3899         (count_fancy_chars) Removed.
3900         (delineate) Removed support for rich text.
3901         (ascii_text_metrics) Ditto.
3902         (text_draw) Ditto.
3903         (output_shorts) Change `box', `off', `on' from c_string to
3904         len_string.  Change `remaining' from int to size_t.
3905         (ascii_close_page) Make page numbering less haphazard.
3906
3907         * autorecode.c: Migrate from arenas to pools.
3908
3909         * avl.c: Migrate from arenas to pools.  Synch from libavl 1.4.0.
3910
3911         * bitvector.h: New file containing these macros from misc.h:
3912         SET_BIT, CLEAR_BIT, SET_BIT_TO, TEST_BIT, BIT_INDEX.
3913
3914         * command.c: (struct command) cmd1, cmd2, cmd3 members changed to
3915         word[3].  ncmd removed.
3916         (var empty_string) Removed.
3917         (var cmd_table) Declaration updated.
3918         (var cmdtab) Removed.
3919         (cmp_command) Removed.
3920         (split_words) Rewritten to use strtok_r().
3921         (init_cmd_parser) Renamed cmd_init().  Rewritten.
3922         (find_command) Removed.
3923         (FILE_TYPE_okay) Rewritten.
3924         (cmd_parse) Rewritten.  Semantics of the return value of command
3925         handlers has changed: they must now return one of the new CMD_*
3926         enumerals, rather than a magic value.  This meant that all
3927         commands had to be modified, and they were.
3928         (figure_out_command) New function.
3929
3930         * command.def: Add CORRELATIONS, PEARSON CORRELATIONS.  Add
3931         #defines for INIT, INPU, etc.
3932
3933         * command.h: New CMD_* enum series.
3934         (cur_proc) Make const char *, not char *.
3935         (cmd_init) Prototype.
3936         (cmd_parse) Ditto.
3937
3938         * common.c: Removed.
3939
3940         * common.h: Removed.
3941
3942         * correlations.q: New file.
3943
3944         * crosstabs.q: Migrate from arenas to pools.  Migrate to new-style
3945         q2c.
3946         (custom_tables) Renamed crs_custom_tables().
3947         (custom_variables) Renamed crs_custom_variables().
3948         (calc_integer) Add in some `const' qualifiers.
3949         (table_value_missing) Change from a_string to len_string.
3950         (float_M_suffix) Change from a_string to len_string.
3951
3952         * data-in.c: Rewritten.  All references to
3953         parse_string_as_format() changed to data_in().
3954
3955         * data-in.h: New file.
3956
3957         * data-list.c: Change DLS_* from #define's to enums.  Move from
3958         rpd_msg() to tmsg().
3959         (RPD_ERR) New #define.
3960         (do_reading) Change dfm_push_cust() to dfm_push(), pop_cust() to
3961         dfm_pop().
3962         (read_from_data_list_fixed) Change from old
3963         parse_string_as_format() to new data_in().
3964         (read_from_data_list_free) Ditto.
3965         (read_from_data_list_list) Ditto.
3966         (cmd_repeating_data) Modify approach to checking for end of
3967         command.
3968         (rpd_msg) Removed.
3969         (rpd_parse_record) Change from old parse_string_as_format() to new
3970         data_in().  Change from old convert_format_to_string() to new
3971         data_out().
3972         (read_one_set_of_repetitions) Change dfm_push_cust() to
3973         dfm_push(), pop_cust() to dfm_pop().
3974
3975         * data-out.c: Rewritten.  All references to
3976         convert_format_to_string() changed to data_out().
3977
3978         * descript.q: Migrate to new q2c.
3979         (cmd_descriptives) Removed.
3980         (internal_cmd_descriptives) Renamed cmd_descriptives ().
3981         (custom_variables) Renamed dsc_custom_variables().
3982
3983         * dfm.c: (struct dfm_fhuser_ext) `ln' removed.  All references
3984         removed.
3985         (open_file_r) Initialize h->where.line_number.  Migrate to new
3986         struct string.
3987         (open_file_w) Initialize h->where.line_number.
3988         (read_record) Change from ext->ln to h->where.line_number.
3989         Migrate to struct string.
3990         (dfm_put_record) Rephrased.
3991         (dfm_push_cust) Renamed dfm_push(), rewritten.
3992         (dfm_pop) New function.
3993
3994         * error.c: All references updated.
3995         (glob var error_count) Renamed err_err_count.
3996         (glob var warning_count) Renamed err_warning_count.
3997         (glob var error_already_flagged) Renamed err_already_flagged.
3998         (glob var verbosity) Renamed err_verbosity.
3999         (glob var cust_fn) Removed.
4000         (glob var cust_ln) Removed.
4001         (static var file_loc) New.
4002         (static var nfile_loc) New.
4003         (static var mfile_loc) New.
4004         (tmsg) New function.
4005         (push_cust) Removed.
4006         (pop_cust) Removed.
4007         (msg) Rewritten.
4008         (static var terminating) Removed.
4009         (failure) Renamed err_failure().
4010         (hcf) Renamed err_hcf().
4011         (err_push_file_locator) New function.
4012         (err_pop_file_locator) New function.
4013         (err_location) New function.
4014         (check_error_count) Renamed err_check_count().
4015         (vmsg) Renamed err_vmsg().  Interface changed.
4016         (verbose_msg) Removed.
4017         (err_cond_fail) New function.
4018         (error_break) Renamed err_break().
4019
4020         * error.h: All references updated.
4021         (enum MSG_CLASS_COUNT) Renamed ERR_CLASS_COUNT.
4022         (enum ERR_CLASS_MASK, ERR_VERBOSITY_SHIFT, ERR_VERBOSITY_MASK)
4023         New.
4024         (struct file_locator) New.
4025         (struct error) New.
4026         (macro verbose_msg) Removed.
4027         (macro cond_fail) Removed.
4028
4029         * expr-opt.c: (evaluate_tree) sizeof(char) == 1.
4030
4031         * expr-prs.c: Reorganized.  All references updated.
4032         (exprtypename) Renamed expr_type_name().
4033         (typename) Renamed type_name().
4034         (free_expression) Renamed expr_free().
4035         (parse_expression) Renamed expr_parse().  Uses new type_check()
4036         function.
4037         (init_functab) Renamed init_func_tab().
4038         (type_check) New function.
4039         (parse_or) Rewritten to use new allocate_nonterminal() and
4040         append_nonterminal_arg() functions.
4041         (parse_and) Ditto.
4042         (parse_not) Ditto.
4043         (parse_rel) Ditto.  Also simplified logic.
4044         (parse_add) Ditto.
4045         (parse_mul) Ditto.
4046         (parse_neg) Ditto.
4047         (parse_exp) Ditto.
4048         (SYSMIS_func) Ditto.
4049         (VALUE_func) Rephrased.
4050         (CONCAT_func) Fix memory leak by replacing free by free_node on
4051         lossage.
4052         (generic_str_func) Ditto.
4053         (parse_function) Ditto.  Also rephrasings.  Uses bsearch() to find
4054         function.
4055         (allocate_nonterminal) New function.
4056         (append_nonterminal_arg) New function.
4057         (static func_tab[]) Now at file level.
4058         (cmp_func) Moved.
4059         (init_func_tab) Moved.  Now just uses qsort() to sort func_tab[].
4060
4061         * expr.h: (enum series OP_*) Moved to exprP.h.
4062         (OP_* defines) Ditto.
4063         (struct op_desc) Ditto.
4064         (global ops[]) Ditto.
4065         (struct num_con_node) Ditto.
4066         (struct str_con_node) Ditto.
4067         (struct var_node) Ditto.
4068         (struct lag_node) Ditto.
4069         (struct casenum_node) Ditto.
4070         (struct nonterm_node) Ditto.
4071         (union any_node) Members renamed.
4072         (struct sys_node) Removed.
4073         (struct val_node) Removed.
4074         (operator typedef) Removed.
4075         (typedef exprtype) Removed.
4076         (enum series EX_*) Moved to exprP.h.
4077         (struct expression) Ditto.  Also renamed a lot of the members.
4078         (PXP_* defines) Changed to enums.
4079         (free_node prototype) Moved to exprP.h.
4080
4081         * file-handle.h: (struct file_handle) New member `where'.
4082
4083         * file-handle.q: Migrated to new q2c format.
4084         (prepend_current_directory) Removed (dead code).
4085         (cmd_file_handle) Incorporated all of internal_cmd_file_handle().
4086         (fh_get_handle_by_filename) Removed dead code.
4087         Set new `where' member.
4088
4089         * file-type.c: (file_type_source_read) References to
4090         parse_string_as_format() changed to data_in().
4091         dfm_push_cust()/pop_cust() changed to dfm_push()/dfm_pop().
4092
4093         * filename.c: All references updated.
4094         (init_filename) Renamed fn_init().
4095         (expand_line) Removed.
4096         (macro EXPAND_LINE) Removed.
4097         (interp_vars) Renamed fn_interp_vars().  Now uses st_*() instead
4098         of custom functions.
4099         (gnu_getcwd) Renamed fn_get_cwd(), rewritten.
4100         (tilde_expand) Renamed fn_tilde_expand(), uses ds_*().
4101         (normalize_filename) Renamed fn_normalize().
4102         (search_path) Renamed fn_search_path(), rewritten.
4103         (prepend_dir) Renamed fn_prepend_dir().
4104         (blp_getenv) Renamed fn_getenv().
4105         (blp_dirname) Renamed fn_dirname().
4106         (fn_basename) New function, not used.
4107         (absolute_filename_p) Renamed fn_absolute_p().
4108         (is_special_filename) Renamed fn_special_p().
4109         (file_exists) Renamed fn_exists_p().
4110         (readlink_malloc) Renamed fn_readlink().
4111         (getenv_default) Renamed fn_getenv_default().
4112         (open_file) Renamed fn_open().
4113         (close_file) Renamed fn_close().
4114         (open_file_ext) Renamed fn_open_ext().
4115         (close_file_ext) Renamed fn_close_ext().
4116
4117         * font.h: Migrate from arenas to pools.
4118
4119         * format.c: (parse_format_specifier_name) Deal with ds_* strings.
4120
4121         * frequencies.g: Migrate from arenas to pools.
4122
4123         * frequencies.q: Migrate to new q2c version.  Migrate from arenas
4124         to pools.
4125
4126         * getline.c: All references updated.
4127         (global getl_buf) Changed from char * to struct string.
4128         (static getl_include_path) Ditto.
4129         (global getl_buf_len) Removed.
4130         (global getl_buf_size) Removed.
4131         (getl_include_path) Deal with new getl_buf, getl_include_path.
4132         (getl_uninitialize) New function.
4133         (getl_get_current_directory) Rewritten.
4134         (getl_clear_include_path) Rewritten.
4135         (getl_add_include_dir) Rewritten.
4136         (getl_add_file) Assertion fixed.
4137         (getl_add_virtual_file) Change initial value of `remaining_loops'
4138         from 2 to 1.
4139         (welcome) Rewritten.
4140         (handle_line_buffer) Make static.  Change logic to make
4141         getl_add_virtual_file() change sensible.  Use ds_*() strings.
4142         (getl_read_line) Use ds_*() strings.  Implement SET ECHO.
4143         (getl_close_file) Moved.
4144         (getl_location) New function.
4145
4146         * getline.h: All references updated.
4147         (macro curln) Removed.
4148         (macro curfn) Removed.
4149         (macro am_interactive) Renamed getl_am_interactive.
4150         (macro am_reading_script) Renamed getl_reading_script.
4151
4152         * glob.c: (global fmt_parse_ignore_error) Removed.
4153         (init_glob) Use locale_dir not LOCALEDIR.  Use feholdexcept() on
4154         systems that support it (C99).  Turn off SET ECHO by default.  No
4155         necessary julcal initialization anymore.
4156
4157         * groff-font.c: Migrate from arenas to pools.
4158         (groff_read_font) Use err_push_file_locator().
4159         (groff_read_DESC) Ditto.
4160         (font_msg) Use tmsg().
4161
4162         * hash.c: (hsh_sort) Fix debug code.
4163         [GLOBAL_DEBUGGING] Include stdio.h.
4164
4165         * hash.h: (macro force_hsh_insert) Rephrase.
4166
4167         * heap.c: Rewritten.
4168         
4169         * heap.h: Rewritten.
4170
4171         * html.c: (html_option) Change from outp_value to struct string.
4172         (postopen) Change from curfn to getl_location().
4173         (escape_string) Remove rich-text code.  Signature changed.
4174         (output_tab_table) Switch from a_string to struct len_string.
4175         Remove rich text support.
4176
4177         * lexer.c: All references updated.  Largely rewritten.  Major
4178         changes listed below.  Removed tagged quote support.  Adapted to
4179         struct string tokstr.
4180         (global tokstr) Changed to struct string.
4181         (global tokstr_size) Removed.
4182         (global tokstr_len) Removed.
4183         (global tokid) New.
4184         (global tokint) Removed.
4185         (global toklongstr) Removed.
4186         (C* defines) Removed.
4187         (static tbl[]) Removed.
4188         (static id[]) Removed.
4189         (static une[]) Removed.
4190         (discard_line) Renamed lex_discard_line().
4191         (get_entire_line) Renamed lex_entire_line().
4192         (get_rest_of_line) Renamed lex_rest_of_line().
4193         (get_dotted_rest_of_line) Merged into lex_rest_of_line().
4194         (make_hexit) Removed.
4195         (syntax_error) Renamed lex_error().  Return value removed.
4196         (get_token_representation) Renamed lex_token_representation().
4197         (putback) Renamed lex_put_back().
4198         (putfwd) Renamed lex_put_forward().
4199         (convert_negative_to_dash) Renamed lex_negative_to_dash().
4200         (set_prog) Renamed lex_set_prog().
4201         (init_lex) Renamed lex_init().
4202         (reset_eof) Renamed lex_reset_eof().
4203         (lookahead) Renamed lex_look_ahead().
4204         (check_id) Rewritten.
4205         (yylex) Renamed lex_get(), rewritten.
4206         (lex_end_of_command) New function.  Many commands were rephrased
4207         using this.
4208         (lex_integer_p) New function.  Replaces compare of tokint against
4209         NOT_LONG.
4210         (lex_integer) New function.  Replaces tokint.
4211         (match_tok) Renamed lex_match().
4212         (match_id) Renamed lex_match_id().
4213         (match_int) Renamed lex_match_int().
4214         (force_match_id) Renamed lex_force_match_id(), added return value.
4215         (force_match) Renamed lex_force_match(), added return value.
4216         (force_string) Renamed lex_force_string(), added return value.
4217         (force_int) Renamed lex_force_int(), added return value.
4218         (lex_id_match_len) New function.
4219         (id_match) Renamed lex_id_match(), rewritten.
4220         (get_line) Renamed lex_get_line().
4221         (preprocess_line) Renamed lex_preprocess_line().
4222         (tokname) Renamed lex_token_name().
4223         (bin_value_func) Removed.
4224         (oct_value_func) Removed.
4225         (hex_value_func) Removed.
4226         (unexpected_eof) New function.
4227         (convert_numeric_string_to_char_string) New function.
4228         (parse_string) Rewritten, signature changed.
4229         (add_tokstr_char) Removed.
4230         (add_tokstr_unsigned) Removed.
4231         (add_tokstr_string) Removed.
4232         (parse_tagged_quote) Removed.
4233         (skip_comment) Renamed lex_skip_comment().
4234
4235         * lexer.h: All references updated.
4236         (macro is_id1) Renamed CHAR_IS_ID1.
4237         (macro is_idn) Renamed CHAR_IS_IDN.
4238         (token names ID, NUM, STRING, STOP, ... WITH, EXP) Renamed with
4239         prefix T_: T_ID, T_NUM, T_STRING, T_STOP, ... T_WITH, T_EXP.
4240         (macro get_token) Removed.
4241         (macro id_match) Removed.
4242         (macro force_match_id) Removed.
4243         (macro force_match) Removed.
4244         (macro force_string) Removed.
4245         (macro force_int) Removed.
4246         (macro force_num) Removed.
4247         (macro force_id) Removed.
4248
4249         * lexerP.h: Removed.
4250
4251         * list.q: Migrated to new q2c format.
4252         (write_line) Deal with struct len_string.
4253         (write_varname) Ditto.
4254         (write_fallback_headers) Ditto.
4255
4256         * magic.c: New file, incorporating the following global variables
4257         previously in other files: endian, second_lowest_value.  And both
4258         of those are conditional on #define's.
4259
4260         * magic.h: New file, incorporating the following global variable
4261         declarations: endian, second_lowest_value, and the following macro
4262         declarations: NOT_DOUBLE, NOT_LONG, NOT_INT.
4263
4264         * main.c: Added declarations of pgmname, finished, curdate,
4265         start_interactive.
4266         (main) Call new parse_script() function.
4267         (parse_script) New function.
4268         (execute_command) New function.
4269         (dump_token) Removed.
4270         (handle_error) New function.
4271
4272         * matrix.c: New file.
4273
4274         * matrix.h: New file.
4275
4276         * matrix-data.c: Migrated from arenas to pools.
4277         (mget_token) Change from parse_string_as_format() to data_in().
4278
4279         * means.q: Migrate to new q2c.
4280         (custom_tables) Renamed mns_custom_tables().
4281         (custom_crossbreak) Renamed mns_custom_crossbreak().
4282         (custom_variables) Renamed mns_custom_variables().
4283
4284         * mis-val.c: (static var width) Changed from `int' to `size_t'.
4285         (parse_varnames) Prototype.
4286         (parse_numeric) Rephrasings.
4287         (parse_alpha) Adapt to new struct string tokstr.
4288
4289         * misc.c: (intlog10) Rewritten.
4290         (spacing) Removed.
4291         (ansi_rand) Renamed real_rand(), moved into random.c.
4292         (ansi_srand) Renamed real_srand(), moved into random.c.
4293         (setup_randomize) Moved to random.c.
4294         (rand_uniform) Ditto.
4295         (rand_normal) Ditto.
4296         (rand_simple) Ditto.
4297         (get_config_line) Removed.
4298         (reverse) Removed (dead code).
4299
4300         * misc.h: (macro SET_BIT) Moved to bitvector.h.
4301         (macro CLEAR_BIT) Ditto.
4302         (macro TEST_BIT) Ditto.
4303         (macro SET_BIT_TO) Ditto.
4304         (macro BIT_INDEX) Ditto.
4305
4306         * output.c: (outp_read_devices) Move to err_push_file_locator()
4307         from push_cust().  Use struct string.
4308         (expand_op_tokstr) Removed.
4309         (static var op_tokstr) Changed to struct string.
4310         (static var op_tokstr_size) Removed.
4311         (tokener) Rephrasings.  Use struct string.
4312         (parse_options) Use struct string.
4313         (destroy_driver) Fix assertion.
4314         (outp_get_paper_size) Move to err_push_file_locator().
4315         [0] Removed dead code.
4316         (outp_string_width) Move to len_string.
4317
4318         * output.h: Comment fixes.
4319         (TAG_* enum series) Removed.
4320         (struct outp_value) Removed.
4321         (enum OUTP_T_FANCY) Removed.
4322         (struct outp_text) `s' changed from a_string to len_string.
4323         (struct outp_class) `option' change arg 3 from outp_value to
4324         struct string.
4325
4326         * pfm-read.c: (corrupt_msg) Rewritten.
4327
4328         * pfm-write.c: (bufwrite) Fix assertion.
4329
4330         * pool.c: New file, reference version.
4331
4332         * pool.h: New file, reference version.
4333
4334         * postscript.c: (ps_font_sizes) Fix assertion.
4335         (ps_option) Change arg 3 from outp_value to struct string.
4336         Adapt to struct string.
4337         (macro output_line) Removed.
4338         (macro add_string) Removed.
4339         (output_encodings) Adapted to struct string.  Moved to
4340         err_push_file_locator().
4341         (find_encoding_file) Fix assertion.
4342         (read_ps_encodings) Move to err_push_file_locator().
4343         (postopen) Use getl_location() instead of curfn.
4344         (out_text_plain) Move to len_string.
4345         (text) Ditto.  Remove rich text support.
4346
4347         * print.c: (cmd_print) Remove now-unneeded resource cleanup code.
4348         (cmd_print_eject) Ditto.
4349         (cmd_write) Ditto.
4350         (internal_cmd_print) Now cleans up after itself.  Uses
4351         fh_parse_file_handle() now.
4352         (cmd_print_space) Use PXP_NUMERIC to type-check.
4353
4354         * q2c.c: Overhauled.  Removed _("") i18n support.  All references
4355         updated.  All output functions updated to handle structures rather
4356         than local or static variables.  Adapt to new PSPP lex_*()
4357         functions.
4358         (macro _) Removed.
4359         (macro N_) Removed.
4360         (macro MAX_N_SBC) Removed.
4361         (global bare) Removed.
4362         (enum STRING) Renamed T_STRING.
4363         (enum ID) Renamed T_ID.
4364         (get_buffer) Buffer size increased.
4365         (strlower) Renamed st_lower(), rephrased.
4366         (strupper) Renamed st_upper(), rephrased.
4367         (skip_ws) New function.
4368         (get_line) Don't special-case any types of lines (like those
4369         beginning with ! or $, for instance).
4370         (get_token) Renamed lex_get().  Rephrased.
4371         (static var `prefix') New.
4372         (parse) New function.
4373         (parse_setting) Minor rephrasing.
4374         (dump_specifier_vars) Ditto.
4375         (make_identifier) Put null terminator on identifier, duh.
4376         (dump_vars) Renamed dump_declarations().  Never indent.  Never
4377         static.  Output changed entirely.
4378         (dump_specifier_init) Rephrase.
4379         (dump_vars_init) No index variable needed.  Other modifications.
4380         (dump_parser) Don't parse command name.  Do dump functions instead
4381         of just code fragments.
4382         (dump_free) Dump function instead of code fragment.
4383         (recognize_directive) New function.
4384         (main) Use recognize_directive().  Don't rely on magic $ line
4385         beginning: instead, parse comments.  Update list of headers.
4386
4387         * random.c: New file, containing the following functions:
4388         real_rand(), real_srand(), setup_randomize, shuffle, rand_uniform,
4389         rand_normal, rand_simple.
4390
4391         * random.h: New file.
4392
4393         * recode.c: (cmd_recode) Merge internal_cmd_recode() into this
4394         function.  `max_src_width', `max_dst_width' changed to size_t.
4395         (internal_cmd_recode) Removed.
4396         (parse_dest_spec) Merge similar cases.
4397         (parse_src_spec) Add assertion.
4398
4399         * repeat.c: (recognize_keyword) New function.
4400         (internal_cmd_do_repeat) Parse and handle PRINT keyword on END
4401         REPEAT.  Improve recognition of END REPEAT (use
4402         recognize_keyword()).  Move from curfn to getl_location().  Use
4403         struct string.
4404                 
4405         (perform_DO_REPEAT_substitutions) Adapt to struct string.
4406
4407         * set.q: Adapt to new q2c.
4408         (cmd_set) Range-check some values better.
4409         (custom_blanks) Renamed stc_custom_blanks().
4410         (custom_length) Renamed stc_custom_length().
4411         (custom_results) Renamed stc_custom_results().
4412         (custom_seed) Renamed stc_custom_seed().
4413         (custom_width) Renamed stc_custom_width().
4414         (custom_format) Renamed stc_custom_format().
4415         (custom_journal) Renamed stc_custom_journal().
4416         (custom_color) Renamed stc_custom_color().
4417         (custom_listing) Renamed stc_custom_listing().
4418         (custom_disk) Renamed stc_custom_disk().
4419         (custom_log) Renamed stc_custom_log().
4420         (custom_rcolor) Renamed stc_custom_rcolor().
4421         (custom_viewlength) Renamed stc_custom_viewlength().
4422         (custom_workdev) Renamed stc_custom_workdev().
4423
4424         * settings.h: Not necessary to include format.h any longer.
4425
4426         * sfm-read.h: (macro bswap_int32) Moved here from sfmP.h.
4427         (corrupt_msg) Rewritten.
4428
4429         * sort.c: Adapt to rewritten heap ADT.
4430
4431         * str.c: (aa_strcpy) Removed.
4432         (ab_strcpy) Removed.
4433         (ac_strcpy) Removed.
4434         (ba_strcpy) Removed.
4435         (bb_strcpy) Removed.
4436         (ca_strcpy) Removed.
4437         (aa_strdup) Removed.
4438         (aa_strdupcpy) Removed.
4439         (ba_strdup) Removed.
4440         (sa_strdup) Removed.
4441         (memrev) Renamed mm_reverse().
4442         (memrmem) Renamed mm_find_reverse().
4443         (cmp_str) Renamed st_compare_pad().
4444         (strmaxcpy) Removed.
4445         (strbarepadcpy) Renamed st_bare_pad_copy(), signature changed.
4446         (strbarepadlencpy) Renamed st_bare_pad_len_copy(), signature
4447         changed.
4448         (strpadcpy) Renamed st_pad_copy(), signature changed.
4449         (blpstrset) Removed.
4450         (ds_create) New function.
4451         (ds_init) New function.
4452         (ds_replace) New function.
4453         (ds_destroy) New function.
4454         (ds_clear) New function.
4455         (ds_extend) New function.
4456         (ds_shrink) New function.
4457         (ds_truncate) New function.
4458         (ds_length) New function.
4459         (ds_size) New function.
4460         (ds_value) New function.
4461         (ds_end) New function.
4462         (ds_concat) New function.
4463         (ds_concat_buffer) New function.
4464         (ds_printf) New function.
4465         (ds_putchar) New function.
4466         (ds_getline) New function.
4467         (ds_get_config_line) New function derived from the old
4468         misc.c:get_config_line().
4469         (ls_create) New function.
4470         (ls_create_buffer) New function.
4471         (ls_init) New function.
4472         (ls_shallow_copy) New function.
4473         (ls_destroy) New function.
4474         (ls_null) New function.
4475         (ls_null_p) New function.
4476         (ls_empty_p) New function.
4477         (ls_length) New function.
4478         (ls_value) New function.
4479         (ls_end) New function.
4480
4481         * str.h: Reformatted.
4482         (struct a_string) Removed.
4483         (struct b_string) Removed.
4484         (struct c_string) Removed.
4485         (struct len_string) New.
4486         (struct string) New.
4487         (macro as_streq) Removed.
4488         (macro bs_streq) Removed.
4489         (macro cs_streq) Removed.
4490         (macro sa_streq) Removed.
4491         (macro sb_streq) Removed.
4492         [__GNUC__] (inline function ds_putchar) New function.
4493         [__GNUC__] (inline function ds_length) New function.
4494         [__GNUC__] (inline function ds_value) New function.
4495         [__GNUC__] (inline function ds_end) New function.
4496
4497         * sysfile-info.c: (cmd_sysfile_info) Rephrased.
4498         (display_vectors) Fix missing i18n.
4499
4500         * t-test.q: Migrate to new q2c.
4501
4502         * tab.c: Migrate from arenas to pools.
4503         (tab_create) Use struct len_string.
4504         (tab_realloc) Ditto.
4505         (text_format) Ditto.
4506         (tab_joint_text) Ditto.
4507         (tab_natural_width) Remove rich text support.
4508         (tab_natural_height) Ditto.
4509         (tab_output_text) Handle TAT_FIX.
4510         (tab_raw) Change arg from a_string to len_string.
4511         (tabi_driver) Fix assertion.  Use struct len_string.
4512         (render_strip) Use struct len_string.  Remove rich text support.
4513         Add `const' qualifiers.
4514
4515         * tab.h: (enum TAB_RICH) Remove.
4516         (enums TAB_COL_NONE, TAB_COL_DONE) New.  Where appropriate,
4517         SOM_COL_* updated to read TAB_COL_*.
4518         (struct tab_table) Change arena to pool.  Change a_string to
4519         len_string.
4520
4521         * temporary.c: (restore_dictionary) Rewrite Checker code.
4522
4523         * var.h: (macros MAX_SHORT_STRING, MIN_LONG_STRING, SYSMIS,
4524         LOWEST, HIGHEST) Moved here from common.h.
4525         (typedef any_trns) Removed.  All references changed to `struct
4526         trns_header'.
4527
4528         * vars-atr.c: (force_create_variable) Fix assertion.
4529         (force_dup_variable) Fix assertion.
4530         
4531 Thu Jun  3 18:40:42 1999  Ben Pfaff  <blp@gnu.org>
4532
4533         Using alphanumeric variables in functions under AGGREGATE
4534         segfaulted.  Fixed.  Thanks to Dr. Dirk Melcher
4535         <BZN-mdksh@t-online.de> for reporting this bug.
4536         
4537         * aggregate.c: (parse_aggregate_functions) When setting the
4538         FSTRING bit, also allocate memory for the `string' member of
4539         agr_next.
4540         (free_aggregate_functions) Free iter->string.  Don't use the
4541         non-function bits when indexing the array of functions.
4542         [DEBUGGING] (debug_print) Don't use the non-function bits when
4543         indexing the array of functions.        
4544
4545 Sun May 30 00:00:54 1999  Ben Pfaff  <blp@gnu.org>
4546
4547         Under certain circumstances, the final case would be omitted from
4548         the results of an AGGREGATE operation.  Fixed.  Thanks to Dr. Dirk
4549         Melcher <BZN-mdksh@t-online.de> for reporting this bug.
4550         
4551         * aggregate.c (agr_00x_end_func): Increment number of cases in
4552         sink before writing case.  For streams that keep track of how many
4553         cases there are based on this value, this means that the last case
4554         will be read in on the next stream read.
4555
4556 Sat May 29 22:03:31 1999  Ben Pfaff  <blp@gnu.org>
4557
4558         Undefined behavior was invoked by referencing a freed pointer.
4559         
4560         * vfm.c (memory_stream_write): Free pointer *after* checking for
4561         non-null status.
4562
4563 Sat May 29 22:02:22 1999  Ben Pfaff  <blp@gnu.org>
4564
4565         A wrong record size was displayed when paging the active file to
4566         disk.
4567         
4568         * vfm.c: (memory_stream_write) Fix off-by-one error.
4569
4570 Sat May 29 21:50:26 1999  Ben Pfaff  <blp@gnu.org>
4571
4572         Not having enough temporary space for sorting caused a core dump.
4573         Fixed.
4574         
4575         * sort.c: (allocate_cases) Initialize i.
4576
4577 Sat May 29 21:40:54 1999  Ben Pfaff  <blp@gnu.org>
4578
4579         Syntax errors in function descriptions on AGGREGATE caused core
4580         dumps.  Fixed.
4581         
4582         * aggregate.c (cmd_aggregate): Don't free agr_dict after calling
4583         free_aggregate_functions(), since that function already frees
4584         agr_dict.
4585         
4586 Sat May 29 21:06:10 1999  Ben Pfaff  <blp@gnu.org>
4587
4588         A null pointer was dereferenced, causing a core dump, when
4589         PERCENTILES was specified on FREQUENCIES.  This fixes the problem,
4590         but PSPP still doesn't calculate percentiles.  Thanks to Regnor
4591         Jernsletten <rjernsle@eunet.no> for reporting this problem.
4592         
4593         * arena.c: (arena_malloc) If the arena hasn't been initialized
4594         already, initialize it.
4595
4596 Sat May 29 20:47:29 1999  Ben Pfaff  <blp@gnu.org>
4597
4598         * Makefile.cygwin: New file supplied by Hankin <hankin@dunno.com>
4599         for compilation with Cygnus Windows B20.  Not used by other
4600         systems.
4601
4602 Sat May 29 20:36:04 1999  Ben Pfaff  <blp@gnu.org>
4603
4604         SORT always sorted in ascending order.  Fixed.  Thanks to Dr. Dirk
4605         Melcher <BZN-mdksh@t-online.de> for reporting this bug.
4606
4607         * sort.c: (compare_case_lists) Reverse sense of comparison if
4608         sorting in descending order.
4609         (compare_record) Ditto.
4610
4611 Tue Mar  9 13:18:54 1999  Ben Pfaff  <blp@gnu.org>
4612
4613         SPLIT FILE with a string variable caused a core dump.  Fixed.
4614
4615         * vfm.c: If the variable is a string then make a temporary value
4616         struct pointing to it.  The underlying problem is a lot bigger
4617         than this (see TODO) but this is a stopgap for the simple case at
4618         least.
4619         
4620 Tue Mar  9 13:15:53 1999  Ben Pfaff  <blp@gnu.org>
4621
4622         Nested INCLUDEs didn't work.  Fixed.
4623
4624         * getline.c: (getl_include) Set first_line to NULL in allocated
4625         structure.
4626
4627 Tue Mar  9 13:13:46 1999  Ben Pfaff  <blp@gnu.org>
4628
4629         The MATCH FILES procedure set the values of variables not present
4630         to 0.  It should have been SYSMIS.  This is now fixed.
4631
4632         * get.c: (mtf_delete_file_in_place) Replace 0.0 by SYSMIS.
4633
4634 Tue Mar  9 12:52:23 1999  Ben Pfaff  <blp@gnu.org>
4635
4636         The REMARK command was too aggressive about skipping lines.  It
4637         didn't like being the last command in a file.
4638
4639         * command.c: (cmd_remark) Call get_entire_line() instead of
4640         get_line().
4641
4642 Tue Mar  9 12:48:05 1999  Ben Pfaff  <blp@gnu.org>
4643
4644         Comment parsing wasn't consistent with the rest of the code in its
4645         idea of where one command ends and another starts.  This meant
4646         that sometimes commands would be mysteriously ignored.  Thanks to
4647         Dr. Dirk Melcher <BZN-mdksh@t-online.de> for reporting this bug.
4648          
4649         * command.c: (parse_cmd) Hand off comment parsing to new function
4650         skip_comment() in lexer.c.
4651         * lexer.c: (skip_comment) New function.
4652
4653 Wed Jan 20 20:22:07 1999  Ben Pfaff  <blp@gnu.org>
4654
4655         The TABLE subcommand on MATCH FILES worked only erratically at
4656         best.  This fixes it.  Thanks to Dr. Dirk Melcher
4657         <BZN-mdksh@t-online.de> for reporting this bug.
4658
4659         * get.c: (mtf_compare_BY_values) When comparing string values, a
4660         difference of 1 is still a difference :-)
4661         (mtf_processing) Inverted TABLE reading logic fixed.  Also don't
4662         advance TABLE files automatically when matched.  Comment fixes.
4663
4664 Tue Jan 19 22:32:31 1999  Ben Pfaff  <blp@gnu.org>
4665
4666         VARIABLE LABELS rejected a slash before the first variable
4667         specification, contradicting the documentation.  Thanks to Walter
4668         M. Gray <graywm@northernc.on.ca> for reporting this bug.
4669
4670         * var-labs.c: (cmd_variable_labels) Ignore a leading slash in
4671         command specification.
4672
4673 Tue Jan 19 22:29:54 1999  Ben Pfaff  <blp@gnu.org>
4674
4675         Because of an incorrect optimization in memory allocation,
4676         CROSSTABS sometimes segfaulted when asked to output multiple
4677         tables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
4678         reporting this bug.
4679
4680         * crosstabs.q: (postcalc) New variables maxcols, maxcells, which
4681         are passed to output_pivot_table() for its use.
4682         (output_pivot_table) Instead of assuming the number of columns is
4683         constant, keep track with maxcols.  In general mode, use maxcells
4684         to determine whether more matrix cells need to be allocated.    
4685
4686 Tue Jan 19 22:27:46 1999  Ben Pfaff  <blp@gnu.org>
4687
4688         CROSSTABS didn't display value labels for column and row
4689         variables.  Thanks to Walter M. Gray <graywm@northernc.on.ca> for
4690         reporting this bug.
4691
4692         * crosstabs.q: (table_value_missing) If the specified value has a
4693         value label for this variable, then show it instead of the raw
4694         value.
4695         (display_dimensions) Delegate display of value_labels to
4696         table_value_missing.
4697
4698 Mon Jan 18 20:04:06 1999  Ben Pfaff  <blp@gnu.org>
4699
4700         WRITE didn't write line ends.  Fixed.  Thanks to Dr. Dirk Melcher
4701         <BZN-mdksh@t-online.de> for reporting this bug.
4702
4703         * print.c: (print_trns_proc) Write (CR/)LF if PRINT is used _or_
4704         if the file isn't declared as binary.
4705
4706 Mon Jan 18 19:56:45 1999  Ben Pfaff  <blp@gnu.org>
4707
4708         MATCH FILES corrupted memory and dumped core on some syntax
4709         errors.  Fixed.
4710
4711         * get.c: (cmd_match_files) Set file->handle to NULL before
4712         jumping to lossage.
4713         (mtf_free_file) Don't free a null dictionary.   
4714
4715 Mon Jan 18 19:27:57 1999  Ben Pfaff  <blp@gnu.org>
4716
4717         MATCH FILES should set numeric values not available to the
4718         system-missing value, not to 0.  Thanks to Dr. Dirk Melcher
4719         <BZN-mdksh@t-online.de> for reporting this bug.
4720
4721         * get.c: (mtf_processing) Set unused records to system-missing,
4722         not 0.
4723
4724 Mon Jan 18 15:06:46 1999  Ben Pfaff  <blp@gnu.org>
4725
4726         KEEP didn't work properly on the SAVE procedure.  Fixed.  Thanks
4727         to Ralf Geschke <ralf@kuerbis.org> for reporting this bug.
4728
4729         * temporary.c: (save_dictionary) Initialize var_by_name AVL tree
4730         in newly created dictionary, and add each copied variable to the
4731         tree.
4732  
4733 Mon Jan 18 15:04:48 1999  Ben Pfaff  <blp@gnu.org>
4734
4735         Memory leak fix.
4736         
4737         * get.c: (trim_dictionary) Free variable list for KEEP after
4738         finishing with it.
4739
4740 Mon Jan 18 12:57:36 1999  Ben Pfaff  <blp@gnu.org>
4741
4742         Some systems didn't like the way open_file was coded.  Thanks to
4743         Hankin <hankin@rogue.consultco.com> for pointing this out.
4744
4745         * filename.c: (open_file) Don't try to store stdin, stdout,
4746         stderr as part of an array, because that doesn't always work.
4747
4748 Mon Jan 18 12:53:27 1999  Ben Pfaff  <blp@gnu.org>
4749
4750         The SAVE procedure didn't save long string variables properly.
4751         Fixed by this patch.  Thanks to Hankin
4752         <hankin@rogue.consultco.com> for this patch.
4753         
4754         * sfm-write.c: (write_variable) Fix off-by-one error in writing
4755         out variable pad records.
4756
4757 Tue Jan  5 14:29:27 1999  Ben Pfaff  <blp@gnu.org>
4758
4759         Previously, if PRINT SPACE were given a negative argument, it
4760         would report an error, then spin in an (almost) infinite loop.
4761         This fixes that behavior.
4762
4763         * print.c: (print_space_trns_proc) After reporting a negative
4764         argument, set number of lines to print to 1.
4765
4766 Tue Jan  5 13:59:55 1999  Ben Pfaff  <blp@gnu.org>
4767
4768         SPSS 8.0 outputs some new record types in its system files, and it
4769         allows longer value labels.  Accept these system files.
4770
4771         * sfm-read.c: (sfm_read_dictionary) Ignore record type 7 subtype
4772         11 emitted by SPSS 8.0.
4773         
4774 Tue Jan  5 13:55:50 1999  Ben Pfaff  <blp@gnu.org>
4775
4776         The LIST procedure was too conservative in allocating space for
4777         buffers, which caused a bug that only showed up with very long
4778         output variables.  Thanks to Hankin <hankin@dunno.com> for this
4779         bug report.
4780
4781         * list.q: (determine_layout) Allocate 1022 bytes instead of 256.
4782
4783 Tue Jan  5 13:34:34 1999  Ben Pfaff  <blp@gnu.org>
4784
4785         Typo meant string format specifiers weren't checked properly.  I
4786         think that Hankin <hankin@dunno.com> sent me this report, but I'm
4787         willing to be corrected on this point.
4788  
4789         * format.c: (check_string_specifier) Fix obvious typo.  
4790
4791 Tue Jan  5 12:50:42 1999  Ben Pfaff  <blp@gnu.org>
4792
4793         Using $CASENUM in an expression didn't work.  Here's a fix.
4794         Thanks to Dirk Melcher <BZN-mdksh@t-online.de> for reporting this
4795         bug.
4796          
4797         * expr-evl.c: (evaluate_expression) Add OP_CASENUM case.
4798
4799         * expr-opt.c: (dump_node) OP_CASENUM is acceptable.
4800
4801 Tue Jan  5 12:47:48 1999  Ben Pfaff  <blp@gnu.org>
4802
4803         The changes in 0.2.1 to fix DATA LIST FREE parsing broke some
4804         other behavior, *sigh*.  This patch hopefully fixes that.  This
4805         time I've actually tested it.
4806
4807         Thanks to Hankin <hankin@dunno.com> for reporting this bug.
4808
4809         * data-list.c: (read_from_data_list_free,
4810         read_from_data_list_list) Call parse_string_as_format() directly
4811         without mucking around with the field width.
4812
4813 Tue Jan  5 12:31:19 1999  Ben Pfaff  <blp@gnu.org>
4814
4815         Occasionally, you may encounter a script that wants to be
4816         interpreted in interactive mode.  Make -i emulate this behavior to
4817         allow such scripts to be executed with PSPP.
4818
4819         Thanks to Hankin <hankin@dunno.com> for reporting this behavior.
4820
4821         * cmdline.c: (pre_syntax_message[]) Update -i description.
4822
4823         * lexer.c: (preprocess_line) When getl_interactive is 2 (i.e.,
4824         when -i is given on the command line) don't treat unindented lines
4825         as starting a new command.
4826
4827 Tue Jan  5 12:30:10 1999  Ben Pfaff  <blp@gnu.org>
4828
4829         In conjunction with egcs 1.1.1, Checker emits some bogus warnings,
4830         mostly caused by local initialized aggregates.  After egcs is
4831         fixed upstream these can be removed, but for now they're not a big
4832         deal.
4833         
4834         * ascii.c: (ascii_postopen_driver) Checker chokes on local
4835         initialized arrays.  Avoid this.
4836
4837         * sfm-write.c: (sfm_write_dictionary) Don't use a local
4838         initialized struct.
4839
4840 Tue Jan  5 12:07:24 1999  Ben Pfaff  <blp@gnu.org>
4841
4842         egcs 1.1.1 has some new warnings relative to gcc 2.8.1, which the
4843         following changes avoid.  Currently I compile sources with egcs
4844         1.1.1 and gcc 2.7.2.3 before sending them out.
4845
4846         * apply-dict.c: (apply_dict) Use new avl_traverser_init() macro.
4847         
4848         * ascii.c: (option_tab[]) Initialize all struct members.
4849
4850         * avl.h: (avl_traverser_init) New macro.
4851         
4852         * command.c: (DEFCMD, UNIMPL macros, cmd_table[]) Initialize all
4853         struct members.
4854
4855         * crosstabs.q: (enum_var_values) Use new hsh_iterator_init()
4856         macro.
4857
4858         * hash.c: Comment fix.
4859
4860         * hash.h: (hsh_iterator_init) New macro.
4861
4862         * html.c: (option_tab[]) Initialize all struct members.
4863
4864         * pfm-write.c: (write_value_labels) Use new avl_traverser_init()
4865         macro.
4866
4867         * postscript.c: (option_tab[]) Initialize all struct members.
4868         (output_encodings, preclose, dump_lines) Use new
4869         hsh_iterator_init() macro.
4870
4871         * sfm-write.c: (write_value_labels) Use new avl_traverser_init()
4872         macro.
4873
4874         * sysfile-info.c: (describe_variable) Use new avl_traverser_init()
4875         macro.
4876
4877 Thu Nov 19 12:32:45 1998  Ben Pfaff  <blp@gnu.org>
4878
4879         * data-in.c: Examined each of the parsing functions to make sure
4880         that they wouldn't dump core if they were passed a string of the
4881         wrong length, since now the DATA LIST FREE/LIST routines don't
4882         check for field width before passing it to the data parser.
4883         (parse_RBHEX, parse_AHEX) Reject odd length input.
4884         (parse_string_as_format) Reject input that's too short or too
4885         long.
4886
4887         * data-list.c: Before, the DATA LIST FREE/LIST routines would pad
4888         a field to its entire declared output width then pass it to the
4889         data-in parsing routines.  This contradicted the documented
4890         behavior.  This is fixed in these changes.  Thanks to Mark H. Wood
4891         <mwood@IUPUI.Edu>.  In addition, this fixes a few more details of
4892         free-format parsing that differed from SPSS.
4893         (cut_field) Commas and spaces are treated identically.  Returns
4894         the proper column instead of a fixed 1 value.
4895         (parse_field) Removed.
4896         (read_from_data_list_free, read_from_data_list_list) Call
4897         parse_string_as_format directly instead of parse_field.
4898
4899         * heap.c: (heap_delete) Stylistic fixes.
4900
4901 Sun Aug  9 11:12:13 1998  Ben Pfaff  <blp@gnu.org>
4902
4903         * loop.c: (loop_2_trns_proc) Formatting fix.
4904
4905         * sel-if.c: (cmd_filter) Set FILTER_before_TEMPORARY.
4906
4907         * var.h: (glob var FILTER_before_TEMPORARY) New global var.
4908
4909         * vfm.c: (macro FILTERED) New.
4910         (static var filter_var) New.
4911         (process_active_file_write_case) Use FILTERED.
4912         (setup_filter) Set filter_var.
4913         (close_active_file) Delete the filter if not
4914         FILTER_before_TEMPORARY.
4915         (procedure_write_case) Use FILTERED.
4916
4917 Sat Aug  8 00:20:14 1998  Ben Pfaff  <blp@gnu.org>
4918
4919         * crosstabs.q: Changed /PIVOT={ON,OFF} to /FORMAT={PIVOT,NOPIVOT}.
4920
4921         * data-in.c: (parse_day_count) Message fix.
4922         (parse_month) Style fix.
4923
4924         * data-list.c: (struct data_list_pgm) New member eof.
4925         (cmd_data_list) Init eof to 0.
4926         (do_reading) Implement the /END subcommand and read-past-eof
4927         checking.
4928
4929         * do-if.c: Include stdio.h when debugging.
4930         (cmd_else_if) Make sure the command is .-terminated.
4931
4932         * glob.c: (init_glob) Capitalize the command prompt.
4933
4934         * inpt-pgm.c: (end_case_trns_proc) Debugging message.
4935         (end_file_trns_proc) Debugging message.
4936
4937         * loop.c: (internal_cmd_loop) Make it work when there's no loop
4938         index!
4939         (loop_2_trns_proc) Enable MXLOOPS (why was this disabled?)
4940
4941         * main.c: (dump_token) Make kwtab[] const.
4942
4943         * set.q: Spelling, comment fixes.
4944
4945         * sysfile-info.c: (cmd_display) DISPLAY VECTORS not DISPLAY
4946         VECTOR.
4947
4948         * vars-prs.c: (fill_all_vars) Style fix.
4949
4950         * vfm.c: (index_to_varname) Return const.
4951
4952 Tue Aug  4 23:49:23 1998  Ben Pfaff  <blp@gnu.org>
4953
4954         * Changes in many source files for partial -ansi -pedantic and
4955         no-debugging compliance: Remove trailing common in enum
4956         declarations; add `unused' attributes; insert some appropriate
4957         casts.
4958
4959         * cmdline.c: (parse_command_line) Add new --testing-mode flag.
4960
4961         * command.c: (shell) Make static.
4962         (run_command) Make static.
4963
4964         * data-list.c: (dump_fixed_table) Remove use of local_strdup().
4965
4966         * dfm.c: (cmd_begin_data) I18n fix.
4967
4968         * error.c: (verbose_msg) Define if __STRICT_ANSI__.
4969
4970         * error.h: (macro verbose_msg) Define if __STRICT_ANSI__.
4971
4972         * expr-opt.c: (evaluate_tree) Don't initialize local arrays if
4973         __STRICT_ANSI__.
4974
4975         * file-handle.q: Don't prepend the source file directory name to
4976         the data file name.  (Ongoing issue.)
4977         (prepend_current_directory) Comment out.
4978         (internal_cmd_file_handle) Don't call prepend_current_directory().
4979         (fh_get_handle_by_filename) Ditto.
4980
4981         * filename.c: Append zero byte to readlink() return value.
4982
4983         * getline.c: (getl_read_line) I18n fix.
4984
4985         * lexer.h: Don't use gcc features if __STRICT_ANSI__.
4986
4987         * misc.h: Don't use gcc features if __STRICT_ANSI__.
4988
4989         * pfm-write.c: (bufwrite) Don't try to increment a void * pointer
4990         directly.
4991
4992         * postscript.c: (output_encodings) Don't use local_strdup().
4993         (postopen) Ditto.
4994
4995         * print.c: Don't use gcc features if __STRICT_ANSI__.
4996
4997         * q2c.c: (dump_vars) Don't put a , at the end of the last enum.
4998
4999         * recode.c: (parse_src_spec) Fully brace nested if's.
5000
5001         * set.q: (global var set_testing_mode) New var.
5002
5003 Wed Jul 29 22:01:44 1998  Ben Pfaff  <blp@gnu.org>
5004
5005         * ascii.c: Add some more `unused' attributes that only come into
5006         play when NDEBUG is defined.
5007         (ascii_close_page) Set s_len when reallocating s.
5008         
5009         * crosstabs.q: (delete_missing) New function.
5010         (output_pivot_table) Call delete_missing() if /MISSING=REPORT.
5011         (make_summary_table) Create summary table reallocable.
5012
5013         * postscript.c: Add more `unused' attributes as above.
5014
5015         * tab.c: (tab_create) [GLOBAL_DEBUGGING] Set reallocable member.
5016         (tab_realloc) [GLOBAL_DEBUGGING] Assert that table is reallocable.
5017          
5018         * tab.h: (struct tab_table) [GLOBAL_DEBUGGING] New `reallocable'
5019         member.
5020
5021         * var.h: (macro force_dup_variable) [!GLOBAL_DEBUGGING] Remove
5022         gratuitous space between parameter definition.
5023
5024         * vars-atr.c: Changed some assert(0)'s to abort()'s to prevent
5025         complaints about running off the end of functions with NDEBUG
5026         enabled.
5027
5028 Sun Jul  5 00:17:25 1998  Ben Pfaff  <blp@gnu.org>
5029
5030         * Several source files: Removed some PORTME notes when reflection
5031         revealed that ANSI forbids that sort of breakage.  Also, added
5032         lots of `unused' qualifiers here and there.
5033
5034         * aggregate.c: (accumulate_aggregate_info) Remove local var
5035         weighting that turned out not to be used.
5036
5037         * avl.c: Update to version 1.1.0.  Add unused specifier.
5038         (avl_destroy) Initialize ab to 0.  Comment fixes.  Cast return
5039         value to void *.
5040         (avl_probe) Replace some instances of 1 with +1 where appropriate.
5041         (avl_find) Cast return value to void *.
5042         (avl_delete) q doesn't need to be initialized at the beginning of
5043         the function.  Replace some instances of 1 with +1.
5044         (force_avl_delete) Renamed avl_force_delete, all references changed.
5045         (compare_ints) `param' marked unused.
5046         (print_int) `param' marked unused.
5047         (recurse_tree) Replace some instances of 1 with +1.
5048
5049         * avl.h: Update to version 1.1.0.  Only declares avl function
5050         types if not already declared.
5051         (AVL_MAX_HEIGHT) Only define if not already defined.
5052         (struct avl_node) New unused member char pad[2].
5053         [GLOBAL_DEBUGGING] Change conditionalization to NDEBUG instead.
5054         (force_avl_insert) Renamed avl_force_insert.
5055         (force_avl_delete) Renamed avl_force_delete.
5056
5057         * crosstabs.q: (struct table_entry) Put `freq' into a union with
5058         new member `data'.
5059         (struct crosstab) Add new member `ofs'.
5060         (glob var int_tab) Removed.
5061         (custom_tables) In integer mode, assign v[i] properly through the
5062         indirect var_dict.
5063         (custom_variables) Now p.crs.max == max + 1.
5064         [DEBUGGING] (debug_print) p.crs.min and p.crs.max are now ints.
5065         (precalc) Implement integer mode.
5066         (calc_integer) Implement integer mode.
5067         (compare_table_entry) Remove unused local variable `comparing'.
5068         (make_summary_table) Implement integer mode.
5069         (macro ns_rows) Implemented as static variable now.
5070         (several variables) Made static, from global.
5071         (output_pivot_table) Use table_value_missing() for column heads.
5072         Remove several unused local variables.  Implement integer mode
5073         table summing.  Count up ns_rows.
5074         (crosstabs_dim) Make columns wider when /MISSING=REPORT requested.
5075         (find_pivot_extent) Moved into find_pivot_extent_general; now just
5076         calls that function or find_pivot_extent_integer.
5077         (find_pivot_extent_integer) New function.
5078         (enum_var_values) Implemented for integer mode.
5079         (table_value_missing) New function.
5080         (display_dimensions) Call table_value_missing() for heads.
5081         (float_M_suffix) New function.
5082         (display_crosstabulation) Call table_value_missing() for row
5083         heads.  Handle missing values in /MISSING=REPORT mode.
5084         (calc_fisher) Remove unused var N.
5085         (calc_r) Remove unused var fact.
5086
5087         * data-list.c: (dump_fixed_table) Fix table dimensioning.
5088         (read_one_set_of_repetitions) Remove unused vars var_spec, column.
5089
5090         * data-out.c: (insert_commas) Remove unused var cp.
5091         (convert_CCx) Remove unused vars save_set_decimal,
5092         save_set_grouping.
5093
5094         * descript.q: (dump_z_table) Fix table dimensioning.
5095         (pre_calc) Remove unused var j.
5096         (display) Remove unused vars title, s.  Fix table dimensioning.
5097
5098         * expr-evl.c: Comment fixes.
5099
5100         * frequencies.q: (full_dim) New function.
5101         (dump_full) Fix table dimensioning.
5102         (condensed_dim) New function.
5103         (dump_condensed) Fix table dimensioning.
5104
5105         * get.c: (cmd_match_files) Remove unused var n_val.  Remove unused
5106         label winnage.
5107
5108         * html.c: (html_close_drive) Remove unused var i.
5109         (postopen) Remove unused vars title, curfn_len, cp.
5110         (preclose) Remove unused vars this, x.
5111
5112         * lexer.c: Comment fixes.
5113
5114         * matrix-data.c: (cmd_matrix_data) Remove unused var index.
5115
5116         * means.q: (custom_tables) Remove unused var m_dim.
5117
5118         * mis-val.c: Format fix.
5119
5120         * modify-vars.c: (cmd_modify_vars) Remove unused var new_dict.
5121
5122         * output.c: (outp_get_paper_size) Remove unused var cp.
5123
5124         * pfm-read.c: (read_float) Remove unused var save, unused label
5125         underflow.
5126         (read_variables) Remove unused vars cp, j.
5127         (read_value_label) Remove unused var j.
5128
5129         * pfm-write.c: (bufwrite) Remove unused var i.
5130
5131         * postscript.c: (ps_postopen_drive) Remove unused vars dev_info,
5132         fn.
5133         (output_encodings) Remove unused vars char_cp, n_output.
5134         (read_ps_encodings) Remove unused var ep.
5135         (postopen) Remove unused var title.
5136         (preclose) Remove unused var fp.
5137         (ps_open_page) Remove unused vars true, false, orientation,
5138         mirror_horz, mirror_vert, width, length.
5139         (ps_text_metrics) Remove unused var x.
5140
5141         * q2c.c: (find_symbol) Remove unused var y.
5142         (parse_setting) Remove unused parameter sbc, all references
5143         changed.
5144         (dump_parser) Remove unused var cp.
5145         (dump_free) Remove unused var i.
5146
5147         * set.q: (static vars args, n) Removed.
5148         (internal_cmd_gset) Removed.
5149
5150         * sfm-read.c: (sfm_read_dictionary) Removed unused var i.
5151         (read_machine_flt64_info) Removed unused var file_endian.
5152         (read_documents) Removed unused var i.
5153         (read_compressed_data) Removed unused parameter dict, all
5154         references changed.
5155
5156         * sfm-write.c: (bufwrite) Removed unused var i.
5157         (sfm_write_case) Removed unused var i.
5158
5159         * sort.c: (merge_once) Remove unused var t.
5160         (write_separate) #if 0 out as dead code.
5161
5162         * split-file.c: (cmd_split_file) Remove unused var i.
5163
5164         * sysfile-info.c: (sysfile_info_dim) New function.
5165         (cmd_sysfile_info) Fix table dimensioning.
5166         (variables_dim) New function.
5167         (display_variables) Fix table dimensioning.
5168         (describe_variable) Remove unused var prev_r.
5169
5170         * t-test.q: (z_postcalc) Removed.
5171         (pairs_calc) Remove unused var bad_weight.
5172         (postcalc) Remove unused vars dfn, dfd.
5173
5174         * tab.c: (tab_create) Set t->dim to NULL.
5175         (tab_dim) Make sure t->dim is NULL first.
5176         (tab_natural_width) Remove parameter `clamp'.
5177         (tab_value) Remove duplicate assertion for table.
5178         (tab_raw) New function.
5179         (nowrap_dim) New function.
5180         (wrap_dim) New function.
5181         (tab_output_text) Fix table dimensioning.
5182
5183         * tab.h: (tab_raw) New macro.
5184
5185         * val-labs.c: (get_label) Remove unused var type.
5186         (copy_value_labels) Remove unused var trav.
5187
5188         * var.h: (struct crosstab_proc) Completely changed.
5189
5190         * vars-prs.c: (parse_dict_variable) Remove unused var v.
5191
5192         * vfm.c: (open_active_file) Remove unused vars i, lp.
5193
5194         * weight.c: (weight_trns_proc) #if 0 out as dead code.
5195         
5196 Tue Jun  2 23:37:21 1998  Ben Pfaff  <blp@gnu.org>
5197
5198         * Makefile.am: Add apply-dict.c, flip.c.
5199
5200         * apply-dict.c: New file.
5201         
5202         * command.c: (struct command) Make cmd[] larger for CLEAR
5203         TRANSFORMATIONS command name.
5204         (parse_cmd) Make sure we're in a valid state before using it as an
5205         index.  Discard variables and reset state on invalid transitions.
5206         (cmd_clear_transformations) New function.
5207
5208         * command.def: Add APPLY DICTIONARY, CLEAR TRANSFORMATIONS, FLIP.
5209         Add unimplemented PRESERVE, RESTORE.
5210
5211         * file-handle.h: Include stddef.h.
5212
5213         * flip.c: New file.
5214         
5215         * pfm-read.c: (parse_value) Pad value label values with spaces,
5216         not nulls.
5217
5218         * sfm-read.c: (struct sfm_fhuser_ext) Add reference count.
5219         (sfm_close) Decrement reference count, make sure it's zero.
5220         (sfm_maybe_close) New function.
5221         (sfm_read_dictionary) Handle reference counts.
5222
5223         * vars-atr.c: (clear_default_dict) New function.
5224         (discard_variables) Use clear_default_dict().
5225
5226 Sun May 31 00:58:05 1998  Ben Pfaff  <blp@gnu.org>
5227
5228         * Makefile.am: Add pfm-write.c.
5229         (LDADD) Add the libgmp2 libraries.
5230
5231         * command.def: Define EXPORT.
5232
5233         * get.c: (cmd_export) New function.
5234         (export_write_case_func) New function.
5235
5236         * pfm-read.c: (static spss2ascii[]) Make it const.
5237
5238         * pfm-write.c: New file.
5239
5240         * sfm-write.c: Formatting, comment fixes.
5241
5242         * var.h: Comment fix.
5243
5244 Fri May 29 21:44:12 1998  Ben Pfaff  <blp@gnu.org>
5245
5246         * Makefile.am: Add pfm.h, pfm-read.c.
5247
5248         * command.def: IMPORT is now implemented.
5249
5250         * format.c: (glob var translate_fmt[]) New var.
5251
5252         * get.c: (enum GTSV_NONE) Renamed GTSV_OPT_NONE.
5253         (cmd_import) New function.
5254         (import_source_read) New function.
5255         (glob var import_source) New var.
5256
5257         * pfm-read.c: New file.
5258
5259         * pfm.h: New file.
5260         
5261         * sfm-read.c: (parse_format_spec) Local variable translate_fmt[]
5262         moved in format.c.
5263         (dump_dictionary) Disabled printing a couple of items.
5264
5265 Mon May 25 12:42:37 1998  Ben Pfaff  <blp@gnu.org>
5266
5267         * crosstabs.q: (postcalc) Call make_summary_table().
5268         (make_summary_table) New function.
5269         (insert_summary) New function.
5270         (display_dimensions) Remove some unnecessary arguments, all
5271         references changed.
5272         (output_pivot_table) Fix lots of problems with the risk table
5273         setup.
5274         (submit) Don't display an empty table.
5275         (display_risk) Fix order of arguments to calc_risk().
5276
5277         * glob.c: Always include assert.h and stdlib.h.
5278
5279         * output.h: (enum OUTP_T_JUST_FULL) Removed, all references
5280         removed.
5281
5282         * tab.c: (tab_create) Cosmetic changes.
5283
5284         * tab.h: (enum TAB_JUSTIFY) Removed, all references removed.
5285
5286 Sun May 24 22:39:23 1998  Ben Pfaff  <blp@gnu.org>
5287
5288         * tab.def: Removed.
5289
5290         * crosstabs.q: (output_pivot_table) Headers drawing and submission
5291         code simplified, moved into new function submit().
5292         (submit) New function.
5293         (crosstabs_dim) New function.
5294         (display_directional) Substitute variable names for %s where
5295         appropriate.
5296         (somers_d_v[], somers_d_ase[], somers_d_t[]) New static vars.
5297         (calc_symmetric) Initialize parameters only if non-NULL.
5298         Calculate Somers' d.
5299         (calc_directional) Calculate Somers' d (or copy it, really).
5300         Calculate eta.
5301
5302         * output.c: (outp_string_width) New function.
5303
5304         * postscript.c: (postopen) Calculate font widths based on the
5305         width of the zero '0' character, not the width of the space
5306         character.  Set paper-width and paper-length based on points, not
5307         device units.
5308         (ps_open_page) Fix page setup string for landscape mode.
5309
5310         * som.h: (struct som_dimension) Removed.
5311         (struct som_table_class) height, width members take int * not
5312         som_dimesion * now.
5313
5314         * tab.c: Many functions now have added parameter validation.
5315         (tab_height, tab_width) These functions were removed and merged
5316         into a single function tab_resize(), and all references changed.
5317         (tab_dim) Rewritten since the interface changed; reduced from
5318         hundreds of lines to two.  All callers were changed.  Currently
5319         most of them just use tab_natural_dimensions as their callback and
5320         await detailed translation of functionality.
5321         (tab_natural_width) New function.
5322         (tab_natural_height) New function.
5323         (tab_natural_dimensions) New function.  This is a callback
5324         function, not something that you'd want to call directly.
5325         (tab_nat_dim) Removed.
5326         (tabi_table) Allocates t->w and t->h.
5327         (tabi_driver) Inlined sum_columns()'s functionality.  Calls the
5328         dimensions callback.
5329         (evaluate_dimensions) Removed.
5330         (sum_columns) Removed.
5331
5332         * tab.h: (enum TAL_1THIN) Removed.
5333         (enum series t_*) Removed.
5334         (struct tab_table) Members trh, trv changed to unsigned char *
5335         from int *.  Member dim changed to a function pointer from a
5336         unsigned char *.  Member max_stack_height removed.  New members
5337         hr_tot, vr_tot.
5338         (macros tab_l, tab_r, tab_t, tab_b) New.
5339
5340 Sat May 23 23:22:13 1998  Ben Pfaff  <blp@gnu.org>
5341
5342         * ascii.c: (delineate) Assign last_space_nchars before skipping
5343         spaces, to fix right justification.
5344
5345         * crosstabs.q: (static vars risk, direct) New vars.
5346         (static var pearson_r) Removed.
5347         (glob var chisq_fisher) Made static.
5348         (static vars row_tot[], col_tot[]) Don't include grand total
5349         anymore.
5350         (static var grand_total) Renamed W, all references changed.
5351         (output_pivot_table) Only make `table' if num_cells != 0.  Make
5352         risk and directional tables.  Deal with grand total no longer part
5353         of col_tot[].  Free rows and cols after we're done with them.
5354         (display_risk) New function.
5355         (display_directional) New function.
5356         (clac_r) Rewritten so that it stores all its results into its
5357         arguments, so it can be used for Spearman's correlation too.
5358         (calc_symmetric) Added a t[] argument, all references changed.
5359         Calculates ASEs for tau-b, tau-c, gamma.  Calculates Spearman's r,
5360         Pearson's r, Cohen's kappa.
5361         (calc_risk) New function.
5362         (calc_directional) New function.
5363
5364         * som.c: (som_submit) Improved debugging code.
5365
5366         * stats.c: (hypercube) New function.
5367         (cube) New function.
5368         (sqr) New function.
5369         (normal_sig) Went back to old implementation, which actually
5370         worked.
5371
5372         * stats.h: (macros square, cube, hypercube) Removed.  The
5373         equivalent functions in stats.c are inlined here; all references
5374         to square changed to sqr.
5375
5376 Fri May 22 00:03:41 1998  Ben Pfaff  <blp@gnu.org>
5377
5378         * crosstabs.q: (N_SYMMETRIC) New define.
5379         (postcalc) Disable debug printing.
5380         (static vars chisq_fisher, pearson_r) New.
5381         (output_pivot_table) Add support for symmetric measures.  Add
5382         chi-square output of exact sigs.
5383         (display_chisq) Rewritten.
5384         (display_symmetric) New function.
5385         (gamma_int) New function.
5386         (Pr) New function.
5387         (swap) New function.
5388         (calc_fisher) New function.
5389         (calc_chisq) Check boundary conditions better. Calculate Yates,
5390         Fisher, Mantel-Haenszel tests.
5391         (calc_r) New function.
5392         (calc_symmetric) New function.
5393
5394         * stats.c: (normal_sig) Rewritten with new algorithm.  Renamed
5395         from calc_normal.
5396         (chisq_sig) Better boundary conditions.  Renamed from
5397         calc_significance.
5398
5399         * tab.h: (struct tab_table) New member cf.
5400
5401         * tab.c: (tab_create) Set cf.
5402         (tab_width) New function.
5403         (tab_realloc) Handle cf.
5404         (tab_vline) Handle cf.
5405         (tab_hline) Handle cf.
5406         (tab_box) Handle cf.
5407         (tab_value) Handle cf.
5408         (tab_float) Handle cf.
5409         (tab_text) Handle cf.
5410         (tab_joint_text) Handle cf.
5411         (tab_offset) Handle cf.
5412         (tab_next_row) Handle cf.
5413         (evaluate_dimensions) Handle cf.
5414         (render_strip) Handle cf.
5415
5416 Wed May 20 00:03:59 1998  Ben Pfaff  <blp@gnu.org>
5417
5418         * crosstabs.q: (postcalc) New vars row_tot, col_tot, pass them to
5419         output_pivot_table().
5420         (output_pivot_table) Moved lots of local variables outside and
5421         made them static.  Add beginnings of chi-square statistic
5422         support.  Now column and row totals aren't in the main matrix.
5423         Always zero out any leftover rows & columns after we're done with
5424         the table entries.  Move all output stuff into
5425         display_dimensions(), display_crosstabs(), display_chisq().
5426         (display_dimensions) New function.
5427         (display_crosstabulation) New function.
5428         (display_chisq) New function.
5429         (calc_chisq) Implemented Pearson and likelihood-ratio chisquares.
5430
5431         * frequencies.q: (dump_full, dump_condensed) Remove tab_null()
5432         references, simplify logic.
5433
5434         * postscript.c: Remove scale, translate-x, translate-y,
5435         mirror-horz, mirror-vert, rotate-180 options.
5436         (struct ps_driver_ext) Remove scale, translate_x, translate_y.
5437         All references deleted.
5438         (macro YT) New macro.
5439         (array option_tab[]) Removed options.
5440         (ps_option) Removed options.
5441         (ps_open_page) Write page setup explicitly to output file, without
5442         using now-deleted BP function.
5443         (macro dump_line) Use YT().
5444         (macro dump_thick_line) Use YT().
5445         (draw_headers) Use YT().
5446         (switch_font) Reorder arguments to SF function.
5447         (write_text) Use YT().
5448
5449         * sfm-read.c: (sfm_read_case) Don't attempt to read variables that
5450         have get.fv == -1.
5451
5452         * sysfile-info.c: (describe_variables) Don't use tab_nulls().
5453
5454         * tab.c: (tab_create) Initialize t->ct to zeros.  Remove
5455         null-debugging code.
5456         (tab_realloc) Remove null-debugging code.  Initialize new regions
5457         of t->ct to zeros.
5458         (tab_vline) Support offsets.
5459         (tab_hline) Support offsets.
5460         (tab_box) Support offsets.
5461         (tab_null) Removed.
5462         (tab_nulls) Removed.
5463         (tab_row) Removed.
5464         (tab_col) Removed.
5465         (evaluate_dimensions) Remove null-debugging code.  Understand
5466         TAB_EMPTY attribute.  Assert that text.s.s is always non-NULL if
5467         TAB_EMPTY not present.
5468
5469         * tab.h: New cell attribute TAB_EMPTY.
5470         (macros tab_nr, tab_nc, tab_row, tab_col) New.
5471
5472         * vars-atr.c: (init_variable) Set get.fv to -1 so that GET doesn't
5473         try to read them from system files.
5474
5475         * vfm.c: (dump_splits) Don't call tab_null().   
5476
5477 Sat May 16 19:36:55 1998  Ben Pfaff  <blp@gnu.org>
5478
5479         * crosstabs.q: (struct crosstab) Added `missing' member.
5480         (custom_tables) Init missing.
5481         (calc_general) Handle missing values.
5482         (calc_chisq) New function.
5483         (output_pivot_table) Start work on chi-square output.  Update for
5484         new tab offset support functions.  Shorten statistic names.
5485
5486         * Several files: add in more `const's to placate gcc's warnings.
5487
5488         * tab.h: (struct tab_table) Add col_ofs, row_ofs members.  Comment
5489         fixes.
5490
5491         * tab.c: (tab_height, tab_realloc, tab_vline, tab_hline, tab_box,
5492         tab_null, tab_nulls, tab_value, tab_float, tab_text,
5493         tab_joint_text) Add col_ofs and row_ofs support.
5494         (tab_offset) New function.
5495         (tab_next_row) New function.
5496         (tab_row) New function.
5497         (tab_col) New function.
5498         (tabi_table) Add col_ofs and row_ofs support.
5499
5500         * vars-atr.c: (is_system_missing) New function.
5501
5502 Tue May 12 16:14:30 1998  Ben Pfaff  <blp@gnu.org>
5503
5504         * crosstabs.q: Expanded subcommand names RESID --> RESIDUAL, etc.
5505         (static var no_cells) Removed.
5506         (static var num_cells) New.
5507         (static var expected) New.
5508         (static var cells[]) New.
5509         (internal_cmd_crosstabs) Deal with new variables.
5510         (postcalc) Removed most of the meat and put it in new function
5511         output_pivot_table().
5512         (output_pivot_table) Calculates and outputs an entire pivot table.
5513
5514         * postscript.c: (postopen) Fix problems with free()ing addresses
5515         not obtained from malloc().
5516
5517         * som.c: (som_submit) Add assertion.
5518
5519         * sysfile-info.c: (describe_variable) Use new tab_nulls()
5520         function.
5521
5522         * tab.c: (static var tab_names[]) New.
5523         (tab_realloc) -1 for nc or nr indicates no change.
5524         (tab_nulls) New function.
5525         (tab_dim) Use tab_names[].
5526         (tabi_cumulate) Don't include bottom or right headers.  Furrfu.
5527         (evaluate_dimensions) Don't terminate on uninited cells, just put
5528         an X in them and emit a notice.  Use tab_names[].
5529
5530         * tab.h: Move bits into tab.def.
5531
5532         * tab.def: New.  Don't try to declare tab_table_class because then
5533         som.h has to be included.       
5534         
5535 Thu May  7 22:55:04 1998  Ben Pfaff  <blp@gnu.org>
5536
5537         * command.def: New file, contains all the command definitions
5538         previously included bodily in command.c.
5539
5540         * format.def: New file, contains all of the format definitions
5541         previously split across format.h, format.c, and sfm-write.c.
5542
5543         * lexer.h: Renamed from tokens.h in order to match corresponding
5544         .c file name.
5545
5546         * lexerP.h: Moved some rarely used functions exported by lexer.c
5547         into here.
5548
5549         * Makefile.am: Commemorate renamed files.
5550         (EXTRA_DIST) Add command.def, format.def.
5551
5552         * command.c: [0] (walk_cmdtable_func) Removed.
5553
5554         * crosstabs.q: (postcalc) Made it work and print out matrices
5555         proving it.
5556         (enum_column_values) Renamed enum_var_values, generalized for any
5557         variable.
5558
5559         * format.h: (struct fmt_desc) New member `spss'.
5560
5561         * q2c.c: (main) Generated code includes lexer.h instead of
5562         tokens.h.
5563
5564         * sfm-write.c: (write_format_spec) Use new spss member of fmt_spec
5565         instead of an independent translation table.
5566
5567 Tue May  5 13:19:03 1998  Ben Pfaff  <blp@gnu.org>
5568
5569         * Lots of source files: Added const to declarations.
5570
5571         * aggregate.c: (parse_aggregate_function) Rename inner i to j.
5572         
5573         * arena.c: (arena_clear) Set prev pointer to null when done.
5574
5575         * ascii.c: (ascii_option) Rename index as indx.
5576
5577         * avl.c: This is now a separate library called libavl.
5578         (xmalloc) Make static.
5579         (avl_probe) Step A7 can use the cache instead of an explicit
5580         compare.
5581         (avl_delete) Don't maintain a q pointer because it's always
5582         available in the pointer stack.  Comment fix.
5583
5584         * avl.h: This is now a separate library called libavl.
5585
5586         * command.c: (cmd_table[]) Remove spurious trailing "".
5587
5588         * common.h: Only include random() fix if this system needs it.
5589
5590         * crosstabs.q: Include alloca headers.
5591         (n_sorted_tab) New global var.
5592         (postcalc) Mostly rewritten.
5593         (find_pivot_extent) Rewritten.
5594         (enum_column_values) Rewritten.
5595
5596         * data-out.c: (convert_F) Rename inner n as n_spaces.
5597
5598         * error.c: (dump_message) Don't have an outer var i.
5599
5600         * file-handle.q: (static var f) Removed.  All references removed.
5601         (internal_cmd_file_handle) Uses a local variable instead of f.
5602
5603         * get.c: (trim_dictionary) Change scope of i, i1, i2.
5604         (cmd_match_files) Don't strcpy tokstr into sbc (why was this ever
5605         done?)
5606
5607         * getline.h: Declare getl_history as extern.  Reported by
5608         palme@uni-wuppertal.de (Hubert Palme).
5609
5610         * postscript.c: (postopen) Some large mods for constness.
5611
5612         * recode.c: Remove spurious copyrights since PSPP is owned by FSF
5613         anyway.
5614
5615 Fri Apr 24 12:52:47 1998  Ben Pfaff  <blp@gnu.org>
5616
5617         * Makefile.am: Rename BUILT_SOURCES to q_sources, all references
5618         changed.  Add avl.c, avl.h to pspp_SOURCES.  Remove avllib from
5619         LDADD.
5620
5621         * avl.c, avl.h: New files.  These form a clean-room
5622         reimplementation of avllib.  Iterative algorithms are used in
5623         place of recursive ones, so there is no resemblance in the code.
5624
5625         * Lots of headers: Don't include other headers by default.
5626
5627         * Lots of source files: Explicitly include all needed headers.
5628
5629         * arena.c: (arena_clear) New function.
5630
5631         * crosstabs.q: (ROW_VAR, COL_VAR) New enums.
5632         (static var ar) Removed.
5633         (staitc vars ar_tc, ar_col) New.
5634         (cmd_crosstabs) Destroy the arenas.
5635         (internal_cmd_crosstabs) Create the arenas.
5636         (precalc) Don't need a free function for the hash.
5637         (calc_general) Make sure to zero out the trailer on the key data
5638         before inserting.
5639         (print_table_entries) Updated.
5640         (postcalc) Worked on actually implementing.
5641         (find_pivot_extent) New function.
5642         (compare_value) New function.
5643         (enum_column_values) New function.
5644
5645         * data-in.c: (parse_month) Make local array `static const'.
5646         
5647         * data-out.c: (convert_date) Make local array `static const'.
5648         (convert_WKDAY) Same.
5649         (convert_MONTH) Same.
5650
5651         * frequencies.q: (postprocess_freq_tab) avl_walk_inorder() has
5652         been renamed to avl_walk().
5653         
5654         * hash.c: Rewritten more efficiently.
5655
5656         * hash.h: Add attribute const to hsh_next_prime declaration.
5657
5658         * lexer.c: (id_match) Make arguments const.
5659
5660         * postscript.c: (ps_postopen_driver) Make default fonts the
5661         Helvetica family.
5662
5663         * q2c.c: (main) Generated code needs stdlib.h.
5664
5665         * sfm-write.c: (write_value_labels) An avl_traverser needs to be
5666         initialized to 0 now, not to NULL.  All other references to
5667         avl_traverser were updated in the same way.
5668
5669         * tokens.h: Macro version of id_match updated to use const
5670         properly.
5671
5672         * val-labs.c: (inc_ref_count) New function.
5673         (copy_value_labels) Simply through use of new avl_copy() function.
5674
5675 Wed Apr 15 13:01:58 1998  Ben Pfaff  <blp@gnu.org>
5676
5677         * crosstabs.q: Probably doesn't compile.  New PIVOT subcommand.
5678         (postcalc) Worked on this.
5679
5680         * postscript.c: (OPO_DOUBLE_LINE) New enum.
5681         (struct ps_driver_ext) New line_width_thick member.
5682         (ps_preopen_drive) Init line_width_thick.
5683         (option_tab[]) Add line-* options.
5684         (ps_option) Parse line-* options.
5685         (postopen) Add line_width_thick support.  Strip leading spaces on
5686         prologue output lines.
5687         (ps_open_page) Include line_width_thick in output.
5688         (macro dump_thick_line) New.
5689         (dump_fancy_line) Support thick lines as well as double lines.
5690
5691 Tue Apr 14 00:50:08 1998  Ben Pfaff  <blp@gnu.org>
5692
5693         * Makefile.am: Add crosstabs.c to BUILT_SOURCES.  Add crosstabs.q
5694         to pspp_SOURCES.  Add crosstabs.q to EXTRA_DIST.
5695
5696         * Many source files: Rename `options' to `pv_opts' as appropriate.
5697
5698         * command.c: (static var cmd_table[]) Add CROSSTABS command.
5699
5700         * common.c: (xcalloc) New function.
5701
5702         * crosstabs.q: New file.  Not finished yet, though.
5703                 
5704         * data-list.c: Comment fix.
5705
5706         * error.c: Remove some old Checker cruft.
5707
5708         * frequencies.q: (dump_full) Cumulate valid percent instead of
5709         regular percent.
5710
5711         * getline.c: Comment fix.
5712
5713         * hash.c: Comment fixes.
5714
5715         * hash.h: (struct hsh_table) Make hash functions return unsigned
5716         instead of int to avoid problems with taking the modulo of
5717         negative return values.  All references changed.
5718
5719         * misc.c: (intlog10) Make its table static const instead of auto.
5720
5721         * sfm-read.c: (read_header) Make `prefix' static const instead of
5722         auto.
5723
5724         * var.h: (union value) Add member `hash'.
5725         (struct variable) Rename prv_index as `foo'--all references
5726         changed.  Reorder.
5727         (typedef pv_opts) Removed.  All references changed.
5728
5729         * vars-prs.c: (parse_variables) Message fixes.
5730         
5731 Mon Mar  9 15:35:08 1998  Ben Pfaff  <blp@gnu.org>
5732
5733         * get.c: (cmd_match_files) Don't reverse the order of FILEs as
5734         they are being inserted.  Don't check for BY variables of
5735         different types.  Discard variables if the active file isn't
5736         included in the merge.
5737         (mtf_processing) Essentially rewritten.
5738         (mtf_merge_dictionary) Check for master/slave variables of
5739         different types/widths.
5740
5741         * vfm.c: (static var not_canceled) New var.
5742         (process_active_file) Don't call vfm_source->read() if
5743         there's no vfm-source.  Initialize not_canceled.
5744         (process_active_file_write_case) Honor and update not_canceled.
5745         (prepare_for_writing) Rollback changes from yesterday, they were
5746         wrong.
5747         (close_active_file) Don't destroy vfm_source unless it exists.
5748         
5749 Mon Mar  9 00:56:16 1998  Ben Pfaff  <blp@gnu.org>
5750
5751         * Lots of source files: Added { } around nested if/else constructs
5752         to avoid new gcc 2.8 warnings.
5753
5754         * data-in.c: (parse_Z) Declare `int' type explicitly.
5755         (convert_Z) Ditto.
5756
5757         * get.c: (struct mtf_file) Add prev, next_min, by, input members.
5758         (cmd_match_files) Initialize mtf_by_values.  Manage by, input,
5759         prev members.  Put TABLEs at the end of the chain and FILEs at the
5760         beginning.  Don't allow the active file in STATE_INIT.  Use proper
5761         `seen' value for the active file.  Fill out the by members and
5762         make sure they're of consistent type.  Do the actual merge
5763         operation.
5764         (mtf_processing_finish) New function.
5765         (var_type_description) New function.
5766         (mtf_free_file) New function.
5767         (mtf_free) Rewritten.
5768         (mtf_delete_file_in_place) New function.
5769         (mtf_read_nonactive_records) New function.
5770         (mtf_compare_BY_values) New function.
5771         (static var mtf_seq_no) New var.
5772         (mtf_processing) New function.
5773         (mtf_merge_dictionary) Assign nval members for the system file
5774         dictionary.  Assign fv values for its variables.  Point each slave
5775         variable to the corresponding master variable.
5776
5777         * hash.c: Include str.h.
5778
5779         * mis-val.c: (copy_missing_values) src arg is const.
5780
5781         * misc.c: (spacing) Make `max' var explicitly int.
5782
5783         * sfm-read.c: (dump_dictionary) Message reformatting.
5784         (sfm_read_case) Add assertion.
5785
5786         * sort.c: Esthetic fixes.
5787
5788         * var.h: (struct match_files_proc) New struct.
5789         (struct variable) Add private data match_files_proc.
5790
5791         * vars-atr.c: (delete_variable) Implement.  Add argument for the
5792         dictionary that owning the variable.
5793         (dup_variable) Add assertion.
5794
5795         * vfm.c: Comment fixes, hopefully the comments are correct now.
5796         (process_active_file) New function.
5797         (process_active_file_write_case) New function.
5798         (process_active_file_output_case) New function.
5799         (prepare_for_writing) Use temp_dict->nval for vfm_info, not
5800         default_dict.nval.
5801         (write_case) Renamed procedure_write_case().  Now write_case is a
5802         pointer to a function.  Style fixes.
5803         
5804 1998-03-05  Ben Pfaff  <blp@gnu.org>
5805
5806         * Makefile.am: (q2c) Link with libmisc.
5807         (version.c) Define default_config_path, include_path,
5808         groff_font_path.
5809
5810         * ascii.c: (ascii_postopen_driver) When the default newline string
5811         is requested, open file in text mode.  Suggested by
5812         palme@uni-wuppertal.de (Hubert Palme).
5813         (static vars line_buf, line_p) Change from char * to unsigned char
5814         *.
5815         (ascii_close_page) char * to unsigned char *.
5816
5817         * cmdline.c: (parse_command_line) Implement -r option by
5818         prepending ~/.pspp/rc to the list of files to process.
5819
5820         * command.c: (cmd_remark) Reset getl_prompt to the standard prompt
5821         before pulling in a final line.
5822         (null_func, null_int_func) Removed (dead code).
5823
5824         * descript.q: (display) Calculate width of variable name column
5825         properly.  Calculate number of valid cases properly.  Reported by
5826         palme@uni-wuppertal.de (Hubert Palme).
5827
5828         * filename.c: (init_filename) Use default_config_path instead of
5829         now obsolete CONFIG_PATH.
5830
5831         * getline.c: (getl_initialize) Use include_path instead of now
5832         obsolete INCLUDE_PATH.
5833         (getl_add_file) New argument `where'.  All references changed.
5834
5835         * groff.c: (find_font_file) Use groff_font_path instead of now
5836         obsolete GROFF_FONT_PATH.
5837         
5838         * postscript.c: (find_ps_file) Use groff_font_path instead of now
5839         obsolete GROFF_FONT_PATH.  Copy through temporary variable to
5840         avoid problems with constness.
5841
5842         * str.h: (macro cs_streq) New macro.
5843
5844         * version.h: (glob var default_config_path, include_path,
5845         groff_font_path) New vars.
5846         
5847 1998-02-23  Ben Pfaff  <blp@gnu.org>
5848
5849         * Many source files: Change verbose_msg() priority levels and
5850         messages.
5851
5852         * aggregate.c: Include debug-print.h.
5853
5854         * cmdline.c: (parse_command_line) Add --safer/-s and --command/-c
5855         options.
5856         (static var pre_syntax_message) Document --safer/-s and
5857         --command/-c.
5858
5859         * command.c: (cmd_erase, cmd_host) Disable if set_safer is set.
5860
5861         * dfm.c: (open_inline_file) [__CHECKER__] Zero out ext->file,
5862         because it's not used but it's still copied.
5863         (open_file_r) Remove gratuitous debug message.
5864
5865         * filename.c: (safety_violation) New function.
5866         (open_file) Remove gratuitous debug messages.  Don't allow pipe
5867         files if set_safer is set.
5868
5869         * get.c: Turn off debugging.
5870
5871         * getline.c: (getl_add_virtual_file) New function.
5872         (getl_read_line) Add verbose_msg() call for opening new syntax
5873         file.
5874         (getl_perform_delayed_reset) Add a return value describing whether
5875         any action was taken.  Call reset_eof().
5876
5877         * getline.h: Comment fix.
5878
5879         * groff-font.c: (groff_read_font) Use `goto next_iteration' in
5880         place of incorrect `continue'.  Use strtok_r() instead of
5881         strtok().  Always check strtok_r() return value.
5882         (groff_read_DESC) Use strtok_r() instead of strtok().
5883
5884         * lexer.c: (reset_eof) New function.
5885
5886         * main.c: (parse) Get a token after performing a delayed reset
5887         action; allow empty syntax files.
5888
5889         * postscript.c: (output_encodings) Use strtok_r() instead of
5890         strtok().
5891
5892         * q2c.c: (dump_parser) Use strtok_r() instead of strtok().
5893
5894         * set.q: Comment fixes.
5895         (glob var set_safer) New var.
5896         (internal_cmd_set) Support SAFER.
5897
5898         * str.h: [!HAVE_STRTOK_R] Declare strtok_r() prototype.
5899
5900         * temporary.c: (free_dictionary) Set d->splits to NULL after
5901         freeing.
5902
5903         * vars-atr.c: (clear_variable) Decrement dict->n_splits if
5904         variable deleted, not if it *isn't* deleted.
5905
5906 1998-02-16  Ben Pfaff  <blp@gnu.org>
5907
5908         * command.c: (array cmd_table[]) Add MATCH FILES.
5909
5910         * common.c: Comment fixes.
5911
5912         * data-list.c, dfm.c, error.c, filename.c, list.q, matrix-data.c,
5913         modify-vars.c, postscript.c, sfm-read.c, sfm-write.c, tab.c:
5914         Include alloca.h.  Problem reported by palme@uni-wuppertal.de
5915         (Hubert Palme).
5916
5917         * expr-opt.c: Include str.h.  Problem reported by
5918         palme@uni-wuppertal.de (Hubert Palme).
5919
5920         * get.c: (cmd_get) [DEBUGGING] Update v->p.get to v->get.
5921         (static var mtf_by) Change from char ** to variable **.
5922         (static var mtf_master) New var.
5923         (mtf_merge_dictionary) New function.
5924         (cmd_match_files) Init mtf_master.  Parse mtf_by according to new
5925         var type.  Reorder tests properly.  Initialize file->dict.  Detect
5926         TABLE= without BY=.  Read file dictionaries and merge them.  Give
5927         subcommand name with IN, LAST, FIRST error messages.  Create IN,
5928         LAST, FIRST variables.  Comment fixes.
5929         (mtf_free) Don't free default_dict.  Free mtf_master.
5930
5931         * getline.c: Define getl_mode.  Change getl_buf_size to size_t
5932         from int.
5933         (handle_line_buffer) Cast int to size_t in comparison to avoid
5934         warning.
5935
5936         * getline.h: Declare getl_mode extern.
5937
5938         * groff-font.c: (groff_read_font) Type-fix calls to getline.
5939         (groff_read_DESC) Make line_size a size_t.
5940         (match_tok) Parenthesize name to avoid macro expansion.
5941
5942         * mis-val.c: (copy_missing_values) New function.
5943
5944         * postscript.c: (postopen) Make buf_size a size_t.
5945
5946         * sfm-read.c: (dump_dictionary) Make global from static.  Print
5947         variable info in parts for easier debugging with Checker.
5948
5949         * temporary.c: (copy_variable) Use copy_value_labels().
5950         (new_dictionary) New arg: whether to copy file label, documents.
5951
5952         * val-labs.c: (copy_value_labels) New function.
5953
5954         * var.h: (enums MISSING_*) Add MISSING_COUNT.
5955
5956         * vars-atr.c: [GLOBAL_DEBUGGING] (force_dup_variable) New
5957         function.
5958         (dup_variable) Set prv_index, get.fv, get.nv.
5959
5960 Fri Feb 13 15:38:36 1998  Ben Pfaff  <blp@gnu.org>
5961
5962         * Makefile.am: (pspp_SOURCE) Add htmlP.h.
5963
5964         * Many source files: For ANSI-compliance, add empty statement
5965         after label.  Reported by palme@uni-wuppertal.de (Hubert Palme)
5966         and Micah Altman <maltman@www-vdc.fas.harvard.edu>.
5967
5968         * data-in.c: (parse_numeric) Some header files break on
5969         -DBL_MIN_10_EXP because they get a --; add () for safety.
5970         Reported by palme@uni-wuppertal.de (Hubert Palme).
5971
5972         * dfm.c: Idea by Dr Eberhard W Lisse <el@linux.lisse.na>.
5973         (struct dfm_fhuser_ext) Change `file' from FILE * to file_ext.
5974         (dfm_close) Use close_file_ext.
5975         (open_inline_file) Set file.file to NULL, not file.
5976         (open_file_r, open_file_w) Initialize file.file; fill in file_ext
5977         struct and use open_file_ext().
5978         (read_record) Use file.file.
5979
5980         * file-handle.q: (prepend_current_directory) Pass through special
5981         filenames.
5982
5983         * filename.c: Only include unistd.h if HAVE_UNISTD_H.
5984         (normalize_filename) Pass through special filenames.
5985         (open_file, close_file) Accept pipe| and |pipe syntaxes as
5986         equivalent.
5987         (dirname) Rename blp_dirname() because of name conflict on some
5988         OS.  All references changed.  Reported by palme@uni-wuppertal.de
5989         (Hubert Palme).
5990         (is_special_filename) New function.
5991
5992         * get.c: (GTSV_OPT*) Add GTSV_OPT_MATCH_FILES.
5993         (trim_dictionary) Conditionalize some of the options on whether
5994         GTSV_OPT_MATCH_FILES is in *options.
5995         (rename_variables) Don't allow variables to be renamed as scratch
5996         variables.
5997         (MTF_*) New enum series.
5998         (struct mtf_file) New struct.
5999         (static vars mtf_head, mtf_tail, mtf_by, mtf_n_by, mtf_free) New
6000         vars.
6001         (cmd_match_files, mtf_free) New functions.
6002
6003         * lexer.c: (match_int) Needed parentheses around name to escape
6004         macro expansion.  Reported by Micah Altman
6005         <maltman@www-vdc.fas.harvard.edu>.
6006
6007         * print.c: Needed to include alloca.h.  Reported by Micah Altman
6008         <maltman@www-vdc.fas.harvard.edu>.
6009
6010         * recode.c: (convert_to_double) Parenthesize -DBL_MIN_10_EXP to
6011         -(DBL_MIN_10_EXP).  Reported by palme@uni-wuppertal.de (Hubert
6012         Palme).
6013         
6014         * str.h: Include stdarg.h.  Reported by palme@uni-wuppertal.de
6015         (Hubert Palme) and Micah Altman <maltman@www-vdc.fas.harvard.edu>.
6016
6017 Thu Feb  5 00:18:21 1998  Ben Pfaff  <blp@gnu.org>
6018
6019         * html.c: (struct html_driver_ext) Move into htmlP.h.
6020         (html_preopen_driver) Initialize cp_x, cp_y.
6021         (html_submit) Implement as call to output_tab_table().
6022         (change_attributes) New function.
6023         (escape_string) New function.
6024         (output_tab_table) New function.
6025
6026         * list.q: (write_all_headers) Add code for writing headers for the
6027         html driver.
6028         (clean_up) Write out the html close-table tag.
6029         (determine_layout) Ignore html driver.
6030         (list_cases) Write html data.
6031
6032         * som.c: (som_submit) Move more of the code into output_table().
6033
6034         * tab.c: (static var hit) Make a global var and rename tab_hit.
6035         (static var tab_table_class) Make a global var.
6036
6037         * htmlP.h: New file.
6038
6039 Tue Feb  3 16:12:18 1998  Ben Pfaff  <blp@gnu.org>
6040
6041         * dump-sysfile.c: Removed.
6042
6043         * html.c: (preclose) Change comment in emitted code.
6044
6045         * matrix-data.c: Debugging off by default.  Comment fixes.
6046         (static var container) New var.
6047         (cmd_matrix_data) Create and destroy container.  Initialize
6048         is_per_factor[] to 0s.  Move code into new function
6049         string_to_content_type().  Require split values to be present in
6050         the data when ROWTYPE_ is explicit.  Call specific function, not
6051         general read_matrices().
6052         (string_to_content_type) New function.
6053         (context) Exclude all whitespace, not just spaces.
6054         (mget_token) A dot is a number.  Add assertion.
6055         (static var data) Renamed nr_data.
6056         (static var factor_values) Renamed nr_factor_values.
6057         (read_matrices) Renamed read_matrices_without_rowtype().  Handle
6058         only specific case.  Close data_file before exit.
6059         (fill_matrix) New function.
6060         (read_data_lines) Renamed nr_read_data_lines().  Remove debug
6061         printing.  Style fixes.  Message fixes.  Move code into
6062         fill_matrix().
6063         (read_matrices_without_rowtype) Rename
6064         matrix_data_read_without_rowtype().  Fix off-by-one error on
6065         loops.  Allocate nr_data[] memory from arena.
6066         (read_matrices_with_rowtype) Removed.
6067         (read_splits) Renamed nr_read_splits().  Style fixes.
6068         (read_factors) Renamed nr_read_factors().
6069         (dump_cell_content) Comment fixes.  Arguments changed.  Change
6070         debug printing.  All references changed.
6071         (output_data) Renamed nr_output_data().
6072         (static var wr_content) New var.
6073         (struct factor_data) New struct.
6074         (static var wr_data) New var.
6075         (static var wr_current) New var.
6076         (matrix_data_source_destroy_source) Removed.
6077         (read_matrices_with_rowtype) New function.
6078         (matrix_data_read_with_rowtype) New function.
6079         (wr_read_splits) New function.
6080         (compare_factors) New function.
6081         (wr_output_data) New function.
6082         (wr_read_rowtype) New function.
6083         (wr_read_factors) New function.
6084         (wr_read_indeps) New function.
6085         (glob var matrix_data_source) Make destroy_source member NULL as
6086         well.
6087
6088 Fri Jan 23 00:09:08 1998  Ben Pfaff  <blp@gnu.org>
6089
6090         * lexer.c: (syntax_error) Give better error message when at end of
6091         file.
6092
6093         * matrix-data.c: (var content_names[]) Fix PROX spelling.  Change
6094         N_SCALAR to output as plain N.
6095         (mdump_token) Change output format.
6096         (context) Fix message output interaction with spaces in input.
6097         (another_token) New function.
6098         (force_eol) Improved error message.
6099         (static var max_cell_index) New var.
6100         (read_matrices) Init `cells'.  factor_values is now per-cell.
6101         Init max_cell_index.
6102         (read_data_lines) Replace `compare' local with new `compare' arg.
6103         Debugging messages changed.  Only read factors if per_factor.
6104         Propagate error return from read_factors(), force_eol().
6105         Copy N_SCALAR values across the N vector.
6106         (read_matrices_without_rowtype) Don't init `cells'.  Don't need to
6107         check parentheses manually since we now have is_per_factor[].
6108         Call read_data_lines() with new args.  Check for end of data after
6109         looping, using another_token().
6110         (read_factors) Arguments changed.  Use max_cell_index to determine
6111         whether to read or compare factors.  Message fixes.
6112         (dump_cell_content) New function.
6113         (output_data) Completely rewritten because content types were
6114         supported to be nested inside factor values, not vice versa.
6115         
6116 Thu Jan 22 00:26:38 1998  Ben Pfaff  <blp@gnu.org>
6117
6118         * lexer.c: (syntax_error) Support formatted varargs messages.
6119
6120         * matrix-data.c: Turn debugging on by default.
6121         (static content_type[]) New array.
6122         (static content_names[]) New array.
6123         (static rowtype_, varname_) New vars.
6124         (static is_per_factor[]) New array.
6125         (static split_values) Moved declaration.
6126         (static n_continuous, first_continuous) New var.
6127         (cmd_matrix_data) Don't init split_values.  Assign ROWTYPE_ to
6128         rowtype_.  Simplify SPLIT code.  Init is_per_factor[].  Assign
6129         VARNAME_ to varname_.  Initialize first_continuous, n_continuous.
6130         Check for continuous variables.
6131         [DEBUGGING] (debug_print) Remove content_names[].
6132         (mdump_token) New macro.
6133         (mget_token_dump) New function.
6134         (mdump_token) New function.
6135         (context) New function.
6136         (mget_token) Fix messages.
6137         (static var data, split_values, factor_values) New vars.
6138         (read_matrices) Manage split_values, factor_values.
6139         (read_data_lines) New function.
6140         (read_matrices_without_rowtype) Implemented.
6141         (read_splits) Message fixes.  Uses `just_read'.
6142         (read_factors) New function.
6143         (output_data) New function.
6144         (matrix_data_source_destroy_source) Close the file handle.
6145         (glob var matrix_source) Change name from "DATA LIST" to "MATRIX
6146         DATA".
6147
6148         * str.c: (strpadcmp) Removed.
6149
6150         * vfm.c: (dump_splits) Initialize i; fix test for end of splits.
6151
6152 Sun Jan 18 00:30:59 1998  Ben Pfaff  <blp@gnu.org>
6153
6154         * Lots of source files: Add cast to unsigned character to calls to
6155         tolower() and toupper().
6156
6157         * aggregate.c: Set default_dict.splits to NULL.
6158
6159         * command.c: (static variable tab[]) Add MATRIX DATA.
6160
6161         * data-in.c: Add debugging defines.  Formatting fixes.
6162
6163         * expr-opt.c: Formatting fixes.
6164
6165         * lexer.c: (syntax_error) Message fixes.
6166
6167         * matrix-data.c: New enum series.
6168         (static vars fmt, section, diag, explicit_rowtype, signle_split,
6169         split_values, n_factors, factors, cells, pop_n, contents,
6170         n_contents) New vars.
6171         (cmd_matrix_data) Finished implementation.
6172         (compare_variables_by_mxd_vartype) New function.
6173         [DEBUGGING] (debug_print) New function.
6174         (static vars mtoken, mtokstr, mtoklen, mtokval) New vars.
6175         (read_matrices) New function.
6176         (read_matrices_without_rowtype) New function.
6177         (read_matrices_with_rowtype) New function.
6178         (read_splits) New function.
6179         (mget_token) New function.
6180         (force_eol) New function.
6181         [0] (test_tokenizer) New function.
6182         (matrix_data_source_destroy_source) New function.
6183         (glob var matrix_data_source) New var.
6184
6185         * misc.h: Include ieeefp.h if present.
6186
6187         * split-file.h: (cmd_split_file) Changes corresponding to struct
6188         dictionary changes.
6189
6190         * str.h: Fix memmem prototype.
6191
6192         * temporary.c: (save_dictionary, restore_dictionary,
6193         free_dictionary) Changes corresponding to struct dictionary
6194         changes.
6195
6196         * var.h: (MXD_* enums) New enum series.
6197         (struct matrix_data_proc) New struct.
6198         (struct split) Removed.
6199         (struct dictionary) Changed `splits' member from `split *' to
6200         `variable **'.
6201         (macro force_create_variable) New macro.  Replaced lots of
6202         create_variable()/assert() calls with calls to this macro.
6203
6204         * vars-atr.c: (discard_variables) Changed assertion.
6205         [GLOBAL_DEBUGGING] (force_create_variable) New function
6206         called by the macro of the same name.
6207         (clear_variable) Changes to delete splits from the dictionary
6208         corresponding to struct dictionary changes.
6209
6210         * vars-prs.c: (parse_variables) [GLOBAL_DEBUGGING] Check for
6211         corrupted variable `index' values in the dictionary passed in
6212         every time this function is called.
6213
6214         * vfm.c: (dump_splits, SPLIT_FILE_procfunc) Changes corresponding
6215         to struct dictionary changes.
6216
6217 Tue Jan 13 23:45:02 1998  Ben Pfaff  <blp@gnu.org>
6218
6219         * Makefile.am: (pspp_SOURCES) Add matrix-data.c.
6220
6221         * command.c: New includes.
6222         (static array cmd_table[]) Add ERASE, HOST, NEW FILE.
6223         (cmd_erase) New function.
6224         [unix] (shell) New function.
6225         (run_command) New function.
6226         (cmd_host) New function.
6227         (cmd_new_file) New function.
6228
6229         * expr-prs.c: (parse_primary) Message fix.
6230
6231         * inpt-pgm.c: Formatting fix.
6232         (cmd_reread) Implement the FILE subcommand.
6233
6234         * matrix-data.c: New file.
6235
6236         * q2c.c: (dump_header) Change output commenting style.
6237
6238         * weight.c: Comment fix.
6239
6240 Tue Jan 13 00:53:39 1998  Ben Pfaff  <blp@gnu.org>
6241
6242         * aggregate.c: (buf64_10x) Renamed buf64_1xx, all references
6243         changed.
6244         (buf_10x) Renamed buf_1xx, all references changed.
6245         (cmd_aggregate) Implemented cases 010, 011, 110, and 111 (all
6246         cases now implemented).
6247         (create_sysfile) New function.
6248         (agr_11x_func) New function.
6249
6250         * data-in.c: (parse_numeric) Work properly if there's an
6251         explicitly coded decimal point in the data and decimal places are
6252         specified on DATA LIST.  Bug reported by Dr Eberhard W Lisse
6253         <el@linux.lisse.na>.
6254
6255         * get.c: (cmd_get, cmd_save_internal) Allow extraneous slash
6256         before file specification on GET, SAVE, XSAVE.  Bug reported by Dr
6257         Eberhard W Lisse <el@linux.lisse.na>.
6258
6259         * q2c.c: [!HAVE_STRERROR] Include misc/strerror.c, not
6260         strerror.c.  Bug reported by Alexandre Oliva
6261         <oliva@dcc.unicamp.br>.
6262
6263         * sort.c: Include sort.h.  Comment fixes.  A few esthetic fixes.
6264         (static var separate_case_tab) New var.
6265         (cmd_sort_cases) Cancel temporary transformations here.  Free
6266         v_sort before return.
6267         (sort_cases) Run an EXECUTE procedure if SEPARATE is nonzero and
6268         we're reading from a sort stream.  Don't cancel temporary
6269         transformations.  Offload internal sorting to do_internal_sort().
6270         (do_internal_sort) New function.  Handles internal sorting even
6271         when SEPARATE is nonzero.  Doesn't free v_sort.
6272         (do_external_sort) Take new arg SEPARATE.  Only destroy `x' if
6273         it's non-NULL.
6274         (write_initial_runs) Take new arg SEPARATE.  Only destroy the old
6275         sink if SEPARATE is zero.
6276         (read_output_cases) Renamed read_sort_output(), all references
6277         changed.  Now uses separate_case_tab when it exists.
6278         (write_separate) New function.
6279
6280         * vfm.c: (page_to_disk) Destroy memory_source_cases, not
6281         memory_sink_cases.  Don't redundantly call
6282         vfm_source->destroy_source().
6283         (memory_stream_mode) After switching over, set memory_sink_cases
6284         to NULL.
6285
6286 Sat Jan 10 23:35:51 1998  Ben Pfaff  <blp@gnu.org>
6287
6288         * aggregate.c: (struct agr_var) Expand dbl[] array from 2 to 3
6289         elements.
6290         (static var prev_case) New, moved out of aggregate_single_case()
6291         local scope.
6292         (static var buf64_10x, buf_10x) New.
6293         (cmd_aggregate) Initialize prev_case.  Comment fixes.  Implement
6294         the 000, 001, 100, and 101 cases.  Free prev_case.
6295         (parse_aggregate_functions) Disallow scratch variables.
6296         (free_aggregate_functions) Only free agr_dict if non-null.  Use
6297         iter->function to determine numeric/string type, not
6298         iter->src->type.
6299         (aggregate_single_case) Don't manage prev_case.  Initialize
6300         aggregate info after dumping it.
6301         (accumulate_aggregate_info) Fix sum, weighted sum, mean, weighted
6302         mean, stddev, weighted stddev definitions.
6303         (dump_aggregate_info) Implemented.
6304         (initialize_aggregate_info) Renamed from
6305         initialize_aggregate_functions().  Initializes dbl[2].
6306         (agr_00x_trns_proc, agr_00x_end_func, write_case_to_sfm,
6307         agr_10x_trns_proc, agr_10x_trns_free, agr_10x_end_func) New.
6308
6309         * cases.c: (alloc_val) Removed.
6310
6311         * get.c: (cmd_save_internal) Initialize new `dict' member.
6312
6313         * sfm-write.c: (sfm_write_dictionary, write_header,
6314         write_variable, write_value_labels, write_documents) Reorganize,
6315         simplify for new parameter structure.
6316         (write_variable) Only one variable * argument now.
6317
6318         * sfm.h: (struct sfm_write_info) Removed `pri', `sec', and
6319         replaced by new `dict' member.
6320
6321         * temporary.c: (new_dictionary) Initialize n_documents.
6322
6323         * vars-atr.c: (dup_variable) Allocate `value's from dict into
6324         v->fv manually.
6325         (init_variable, replace_variable) Eliminate usage of alloc_val().
6326
6327         * vars-prs.c: (parse_DATA_LIST_vars) Accept PV_NO_SCRATCH option.
6328
6329         * vfm.c: (arrange_compaction) Allow `temporary' value of 2 to
6330         signal that AGGREGATE is to be used for forming final cases.
6331         (close_active_file) Call end_func before stopping lagging.  Cancel
6332         temporary after finishing compaction.
6333         (write_case) Comment fixes.  Cleaned up.
6334         (compact_case) Let AGGREGATE handle compaction when `temporary' is
6335         2.
6336
6337 Sat Jan 10 02:10:47 1998  Ben Pfaff  <blp@gnu.org>
6338
6339         * Makefile.am: (BUILT_SOURCES) Add means.c.
6340         (pspp_SOURCES) Add means.c.
6341         (EXTRA_DIST) Add means.q.
6342
6343         * command.c: (array cmd_table[]) Add MEANS.
6344
6345         * common.h: Esthetic fixes.  Comment fixes.  Test for
6346         MAX_SHORT_STRING greater than 8.
6347         (macros LOWEST, HIGHEST) New.
6348
6349         * data-in.c, data-list.c, recode.c: Comment fixes.
6350
6351         * means.q: New file, base version.
6352
6353         * mis-val.c: (parse_num_or_range, parse_numeric) Replace -DBL_MAX
6354         with LOWEST, DBL_MAX with HIGHEST.
6355
6356         * q2c.c: (dump_vars) Add an enum to array types giving the number
6357         of values for the enum.
6358
6359         * sfm-read.c: (sfm_read_dictionary, read_machine_flt64_info)
6360         Replace second_lowest_value with second_lowest_flt64.
6361
6362         * sfm-write.c: (write_variable, write_rec_7_34) Replace
6363         second_lowest_value with second_lowest_flt64.
6364
6365         * t-test.q: Comment fix.
6366
6367         * temporary.c: (restore_dictionary) Esthetic fix.
6368
6369         * tokens.h: (force_match_id, force_match, force_string, force_int,
6370         force_num, force_id) Replace msg() with syntax_error().
6371
6372         * var.h: (struct means_proc) New.
6373         (struct variable) Add mns member to `p' union.
6374
6375         * vars-prs.c: (parse_variable, parse_dict_variable,
6376         parse_variables, parse_DATA_LIST_vars) Replace msg() with
6377         syntax_error().
6378
6379 Thu Jan  8 22:28:41 1998  Ben Pfaff  <blp@gnu.org>
6380
6381         * Makefile.am: (pspp_SOURCES) Add tab.h.
6382
6383         * Most source files: Added a cast to unsigned char in usages of
6384         the ctype is*() functions.  Replaced `end of command expected'
6385         calls to msg() with calls to syntax_error().
6386
6387         * frequencies.q: (dump_condensed) Fix tab_dim() column reference.
6388
6389         * lexer.c: (hex_val) Removed (was dead code).
6390         (idmatch) Parenthesize function name to avoid macro expansion.
6391
6392         * postscript.c: Comment fixes.
6393         (ps_preopen_driver) Change default font size to 10pt.
6394
6395         * sfm-read.c: (read_variables) Byteswap sv.print, sv.write as
6396         int32s.
6397         (parse_format_spec) Change system-file format spec argument type
6398         to int32.  Parse the format spec with bitwise operators.
6399
6400         * sfmP.h: (struct sysfile_format) Removed.
6401         (struct sysfile_variable) Changed print, write members from
6402         sysfile_format to int32.
6403
6404         * tokens.h: Esthetic fixes.
6405         [__GNUC__] (macro id_match) New macro to hopefully speed up
6406         identifier matching.
6407         (macros match_id, match_tok, match_int) Implemented in
6408         compiler-independent manner; no longer GNU C only.
6409
6410         * vfm.h: Include time.h.
6411
6412 Mon Jan  5 11:06:15 1998  Ben Pfaff  <blp@gnu.org>
6413
6414         * data-list.c: (dump_fixed_table) Change tab_dim().
6415
6416         * dump-sysfile.c: (open_sysfile) Fix mmap() call.
6417
6418         * error.c: Include command.h.
6419
6420         * frequencies.g: Formatting fixes.
6421
6422         * frequencies.q: Add tab_dim() calls.  Make the total cell a
6423         joined cell.
6424
6425         * glob.c: Include command.h.
6426
6427         * sfm-read.c: (struct sfm_fhuser_ext) New members sysmis, highest,
6428         lowest.
6429         (sfm_read_dictionary) Initialize sysmis, highest, lowest.
6430         (sfm_read_machine_flt64_info) Update sysmis, highest, lowest.
6431         (read_variables) Byteswap sv.type; byteswap sv.print, sv.write as
6432         the other elements (is this right?).
6433         (read_variables) Use lowest, highest members.
6434         (parse_format_spec) New arg `vv' for more stringent checking.
6435         (dump_dictionary) Byteswaps nonexplicit data.
6436         (sfm_read_case) Byteswap numeric data.
6437
6438         * som.c: Initialize table_num to 1.
6439         (render_segments) Remember to increment y_index after each table
6440         segment.
6441
6442         * sysfile-info.c: (cmd_sysfile_info) Change tab_dim().  Don't call
6443         avl_count() on a NULL tree.  No title for the second table.
6444         (cmd_display) Handle DISPLAY VECTORS by calling display_vectors().
6445         Handle AS_SCRATCH as AS_NAMES.  Warn if no variables.  Re-enable;
6446         fix call to display_variables().
6447         (display_variables) Default to 4 columns, not 3.  Set up headers.
6448         Column title is Variable, not Name.  Fix index column.
6449         Add joint text.  Add tab_dim().  Handle value labels properly.
6450         Handle DISPLAY LABELS properly.  Draw boxes correctly.
6451         (describe_variable) Value labels don't need titles.  Don't clear
6452         nonexistent index column.
6453         (compare_vectors_by_name) New function.
6454         (display_vectors) New function.
6455
6456         * tab.c: (tab_height) Add assertion.
6457         (tab_null) Add debug code.
6458         (evaluate_dimensions) Add debug code.
6459
6460         * var.h: (struct variable) get_proc data is sometimes used
6461         simultaneously with other per-procedure info, therefore it was
6462         removed from the union.  All references changed.        
6463
6464 Sun Jan  4 18:13:33 1998  Ben Pfaff  <blp@gnu.org>
6465
6466         * ascii.c: (ascii_close_page) Put title on second line of headers
6467         if there is no subtitle.
6468
6469         * command.c: (glob var cur_proc) Move definition here, from
6470         common.c.
6471         (cmd_remark) Emit blank line before remarks.
6472
6473         * command.h: (glob var cur_proc) Move declaration here, from
6474         common.h.
6475
6476         * data-list.c: (dump_fixed_table) Fix messages.
6477         (dump_free_table) Call tab_nat_dim().
6478
6479         * descript.q: (dump_z_table) Modify tab_dim() call.
6480
6481         * frequencies.q: (dump_condensed, dump_statistics) Add tab_dim()
6482         call.
6483         (dump_statistics) Don't output header.
6484
6485         * groff-font.c: Minor format fix.
6486
6487         * html.c: Comment fix.
6488
6489         * list.q: (write_varname) Indent after advancing page.
6490
6491         * output.h: Minor reordering.
6492
6493         * postscript.c: Comment fixes.  Many places, '\n' was replaced by
6494         a reference to eol[].
6495         (struct ps_driver_ext) New member eol[].
6496         (ps_preopen_driver) Initialize eol[].
6497         (ps_postopen_driver) Fix sense of text for text_opt, line_opt
6498         defaults.  Handle headers.  Fix test for minimum page length.
6499         (static var option_tab[]) Add `line-ends'.
6500         (ps_option) Handle line-ends to change eol[].
6501         (postopen) Scale prop_em_width and fixed_width properly.  Set the
6502         prologue title to outp_title if applicable.  Replace the prologue
6503         line ends with eol[].  Call draw_headers() if headers are enabled.
6504         (text_width) New function.
6505         (out_text_plain) New function.
6506         (draw_headers) New function.
6507
6508         * print.c: (dump_table) Call tab_nat_dim().
6509
6510         * som.c: (som_blank_line) Only advance a line if not at the top of
6511         a page.
6512         (som_submit) Move several informational table calls here.
6513         Increment subtable_num if SOMF_NO_TITLE not set.
6514         (output_table) Advance a line if SOMF_NO_SPACING not set.
6515         (render_columns, render_segments, render_simple) Handle spacing
6516         between tables.  Handle table titles.  Remove debug output.
6517
6518         * som.h: (SOMF_*) New enum series.
6519         (struct som_table_class) New member `flags'.
6520
6521         * sysfile-info.c: (cmd_sysfile_info) Calls tab_nat_dim().  No
6522         headers or spacing.
6523         (display_variables) Calls tab_nat_dim().
6524         (describe_variable) Remove restriction on number of value labels.
6525         Make value labels separated by thin lines.
6526
6527         * tab.c: (tab_create) Default `flags' to none.
6528         (tab_float) New arg `w'.  All references changed.
6529         (tab_nat_dim) New function.
6530         (tab_output_text) No title or spacing.
6531         (tab_flags) New function.
6532         (tabi_flags) New function.
6533         (tabi_title) New function.
6534         (strip_height) Removed.
6535         (tabi_render) Skip title when necessary.
6536         (static var tab_tab_class) Add tabi_flags, tabi_title.
6537         (evaluate_dimensions) Disable display of column, row size.
6538         (sum_columns) Add title height to top header.
6539         (render_strip) Moved within file.
6540
6541         * tab.h: (struct tab_table) New member `flags'.
6542
6543         * vfm.c: (dump_splits) Calls tab_nat_dim().  No title.
6544
6545 Sat Jan  3 16:55:44 1998  Ben Pfaff  <blp@gnu.org>
6546
6547         * Most source files: Add `const' attribute in all appropriate
6548         places.
6549         
6550         * sysfile-info.c: (cmd_sysfile_info) Add tab_dim() call, add a
6551         column to the variables table for use by describe_variable().
6552         (cmd_display) Disable for the present.
6553         (display_documents) Don't wrap documents.
6554         (display_variables) Table has four columns now.
6555         (describe_variable) Table has four columns now.  Don't use a
6556         subtable, use joined cells instead.
6557
6558         * tab.c: (tab_create) Don't set `join'.
6559         (tab_realloc) ct array is not made up of a_string's.
6560         Reallocate trh, hrh, h arrays, initialize trh array.  Initialize
6561         cell contents on GLOBAL_DEBUGGING, not DEBUGGING.
6562         (text_format) New function.
6563         (tab_title) Rewritten, uses text_format().
6564         (tab_text) Rewritten, uses text_format().
6565         (tab_joint_text) New function.
6566         (tab_join) Removed.
6567         (static var hit) New variable.
6568         (render_strip) New args r1, r2.  Implement joined cells that fit
6569         on a single page.
6570         (tabi_render) Increment hit.  Pass new args to render_strip().
6571         (evaluate_dimensions) [GLOBAL_DEBUGGING] Check for uninitialized
6572         cells.  For t_naw and t_nah, ignore joined cells and null cells in
6573         calculations.
6574         
6575         * tab.h: (struct tab_join_rect) Removed.
6576         (struct tab_table) Removed `join'.
6577         (TAB_JOIN_MAIN) Removed.
6578         (struct tab_joined_cell) New struct.
6579         (TAT_NOWRAP) New enum.
6580
6581 Fri Jan  2 01:39:58 1998  Ben Pfaff  <blp@gnu.org>
6582
6583         * ascii.c: (ascii_postopen) Replace ASCII_* macros with their
6584         expansions.
6585         (ascii_postopen_driver) Fix initialization of *_spacing so that
6586         the TAL_0 bit doesn't count.
6587
6588         * data-list.c: (dump_fixed_table) Use natural width for Format
6589         column.
6590
6591         * glob.c: (rerange) Removed.
6592         (get_date) Formatting fixes.  Internationalization fix.
6593
6594         * html.c: (html_postopen_driver) Replace HTML_DEFAULT_OUTPUT_FILE
6595         with "pspp.html".
6596
6597         * postscript.c: (ps_postopen_driver) Replace
6598         PS_DEFAULT_OUTPUT_FILE with "pspp.ps".
6599
6600         * som.c: (som_submit) Don't eject page before every table.
6601         (output_table) Fix order of arguments on call to area().
6602         (render_columns) Fix calculation of max_len.
6603         
6604         * tab.c: (tabi_cumulate) Minor change to increase elegance.
6605         (render_strip) New function.
6606         (strip_height) New function.
6607         (tabi_render) Rewrite as calls to render_strip().
6608
6609         * tab.h: (TAT_* enums) Removed TAT_RICH, all references removed.
6610         Renumbered TAT_PRINTF, TAT_TITLE, TAT_FIX to correspond better
6611         with the TAB_* and OUTP_T_* constants.
6612         
6613 Thu Jan  1 11:53:52 1998  Ben Pfaff  <blp@gnu.org>
6614
6615         * Makefile.am: Formatting fixes.
6616
6617         * ascii.c: (ascii_postopen_driver) Initialize *_line_spacing[],
6618         *_line_width[].
6619
6620         * data-list.c: (dump_fixed_table) Add tab_dim() call.
6621
6622         * descript.q: (dump_z_table, display) Add tab_dim() calls.
6623
6624         * dump-sysfile.c: (glob var length) Make type off_t.
6625         (usage) Fix arguments.
6626         (main) Return 0.
6627
6628         * output.h: (OUTP_T_*) Change constants' value to match tab.h.
6629         Now right-justification is the default so many references had to
6630         change.
6631         (struct outp_class) Removed line_width, all references changed.
6632         (OUTP_DEV_*) Add OUTP_DEV_DISABLED.
6633         (struct outp_driver) Add elements horiz_line_width,
6634         vert_line_width, horiz_line_spacing, vert_line_spacing.  Remove
6635         som element.
6636
6637         * postscript.c: (outp_encodings) Formatting fixes.  Fix garbage
6638         collection.
6639         (postopen) Initialize all the informational members of
6640         outp_driver.
6641
6642         * som.c: (som_blank_line) New function, renamed from blank_line(),
6643         all references changed.
6644         (som_submit) Disables drivers whose pages can't be opened.
6645         (render_columns, render_simple, render_segments) Add debug output.
6646         (render_columns) Fix loop range.
6647         (render_simple) Don't try to render the headers, they're taken
6648         care of automatically.  Advance cp_y past the table when done.
6649         (render_segments) Fix loop ranges.
6650
6651         * tab.c: Initialize new members of tab_table.
6652         (tab_vline) Handle trv[]; don't set style for spacing-only lines.
6653         (tab_hline) Handle trh[]; don't set style for spacing-only lines.
6654         (tab_box) Handle trh[], trv[]; don't set style for spacing-only
6655         lines.
6656         (set_expr) Removed.
6657         (tab_dim) New function.
6658         (tab_col_width) Removed.
6659         (tab_row_height) Removed.
6660         (tab_output_text) Call tab_dim().
6661         (tabi_driver) Call evaluate_dimensions(), sum_columns().
6662         (tabi_area) Implemented.
6663         (tabi_cumulate) Implemented.
6664         (tabi_render) Partially implemented, but broken.
6665         (var tab_table_class) Made static.
6666         (evaluate_dimensions) New function.
6667         (sum_columns) New function.
6668
6669         * tab.h: (enum t_*) Now start at t_end.  New: t_ptw, t_nr, t_nc,
6670         t_nah, t_naw, t_neg, t_xch, t_dup, t_lbl, t_jnz, t_sac, t_sar,
6671         t_scr, t_srr, t_sentinel.  Removed: t_nat.
6672         (struct tab_table) New: wl, wr, ht, hb, trh, hrh, trv, wrv, dim,
6673         max_stack_height, w, h.  Removed: ce, re.
6674         (macro blank_line) Removed.
6675         (glob var zero_length) Removed.
6676
6677 Fri Dec 26 15:44:31 1997  Ben Pfaff  <blp@gnu.org>
6678
6679         * Most source files: include some of the new include files broken
6680         out of var.h.
6681         
6682         * Makefile.am: (pspp_SOURCES) Add all the new source files to the
6683         list.
6684
6685         * aggregate.c: (glob var outfile) Make static.
6686
6687         * command.c: (glob var pgm_state) Move here.
6688
6689         * common.c: (glob vars endian, second_lowest_value, pgmname,
6690         finished, curdate, cur_proc, start_interactive, history_file) Move
6691         here.
6692
6693         * descript.q: (structs dsc_z_score, descriptives_trns) Move here.
6694
6695         * file-handle.q: (glob vars files, inline_file) Move here.
6696
6697         * glob.c: Lost lots of glob vars, detailed in individual file
6698         entries.
6699         (init_glob) set_printer, set_screen were obsolete, deleted.
6700         set_cprompt has fewer spaces because pspp has fewer letters than
6701         fiasco.
6702
6703         * inpt-pgm.c: (glob vars inp_init, inp_init_size) Move here.
6704         (inp_nval) Made static.
6705
6706         * lexer.c: (glob vars token, tokval, tokstr, tokstr_size,
6707         tokstr_len, toklongstr, tokint) Move here.
6708
6709         * misc.c: Lost several vars and functions.
6710
6711         * set.q: (all the set_* variables) Move here.
6712
6713         * str.c: (strmaxcpy, strbarepadcpy, strbarepadlencpy, strpadcpy,
6714         blpstrset, strpadcmp, memrev, memrmem, cmp_str) Move here from
6715         misc.c.
6716
6717         * tab.c: (set_expr, tab_col_width, tab_row_height) New functions.
6718
6719         * tab.h: (enum series t_*) New enums.
6720         (struct tab_table) Use arena struct tag.  New members ce, re.
6721
6722         * tokens.h: Comment fixes.
6723
6724         * var.h: Move lots of enums and variables and functions and
6725         structures to other files.  Use and declare a lot more union and
6726         struct tags.  Comment fixes.  
6727
6728         * vector.c: (glob vars vec, nvec) Move here.
6729
6730         * vfm.c: (glob vars reinit_sysmis, reinit_blanks, init_zero,
6731         init_blanks, last_vfm_invocation) Move here.
6732
6733         * cases.h: New file.
6734         (struct long_vec) Move here.
6735         (vec_init, vec_clear, vec_insert, vec_delete, devector, envector)
6736         Move here.
6737
6738         * command.h: New file.
6739         (STATE_* enums) Move here.
6740         (glob var pgm_state) Move here.
6741
6742         * format.c: New file.
6743         (glob var formats) Move here.
6744         (parse_format_specifier_name, fmt_to_string,
6745         check_input_specifier, check_output_specifier,
6746         check_string_specifier, convert_fmt_ItoO, parse_format_specifier)
6747         Move here.
6748
6749         * format.h: New file.  Move functions now in format.c here.
6750         (FMT_* enums) Move here.
6751         (struct fmt_desc) Move here.
6752         (FCAT_* enums) Move here.
6753         (struct fmt_spec) Move here.
6754         (glob vars formats, fmt_parse_ignore_error) Move here.
6755
6756         * inpt-pgm.h: New file.
6757         (INP_* enums) Move here, make #defines into enums.
6758         (glob vars inp_init, inp_init_size) Move here.
6759
6760         * sort.h: New file.
6761         (glob vars v_sort, nv_sort) Move here.
6762         (sort_cases, read_sort_output) Move here.
6763
6764         * vector.h: New file.
6765         (struct vector) Move here, add struct tag.
6766         (glob vars vec, nvec) Move here.
6767         (find_vector) Move here.
6768
6769         * New file.
6770         (glob vars last_vfm_invocation, temp_case, reinit_sysmis,
6771         reinit_blanks, init_zero, init_blanks) Move here.
6772         (struct case_stream) Move here.
6773         (glob vars vfm_source, vfm_sink, vfm_memory_stream,
6774         vfm_disk_stream, sort_stream, data_list_source,
6775         input_program_source, file_type_source, get_source, n_lag) Move
6776         here.
6777         (procedure, write_case, lagged_case, compact_case, page_to_disk)
6778         Move here.
6779                 
6780 Wed Dec 24 22:40:42 1997  Ben Pfaff  <blp@gnu.org>
6781
6782         * Makefile.am: (pspp_SOURCES) Added html.c, som.c, som.h.
6783         (LDADD) Add libdcdflib.
6784
6785         * ascii.c: Comment and formatting fixes.  Almost every external
6786         function had an assert added, checking driver_open and page_open.
6787         (ascii_init_driver) Broken into ascii_preopen_driver,
6788         ascii_postopen_driver, ascii_close_driver.  Manages driver_open.
6789         (ascii_open_page) Sets page_open.
6790         (ascii_close_page) Clears page_open.
6791
6792         * html.c: Comment and formatting fixes.  Almost every external
6793         function had an assert added, checking driver_open and page_open.
6794         (html_init_driver) Broken into html_preopen_driver,
6795         html_postopen_driver, html_close_driver.  Manages driver_open.
6796         (html_open_page) Sets page_open.
6797         (html_close_page) Clears page_open.
6798         (html_submit) Disabled.
6799
6800         * lexer.c: (parse_string) Remove debugging printf.
6801
6802         * list.q: (determine_layout) Open a page if one is not yet open.
6803
6804         * output.c: Comment fixes.
6805         (add_class) Set the class member of the new list element.
6806         (parse_options) Don't handle device type.
6807         (colon_tokenize) New function.
6808         (configure_driver) New four-field format with a field for device
6809         type.  Now initialize driver_open, page_open, next, and prev
6810         fields.  Use new colon_tokenize() function.  Don't do a memory
6811         copy to replace a driver, it doesn't work; instead delete the old
6812         driver and insert a new one.
6813         (destroy_driver) Don't call som_destroy_driver().  Close the page
6814         if it's open.  Find the class in the list of classes and decrement
6815         that reference count.  Remove the driver from the global driver
6816         list.
6817         (outp_iterate_enabled_drivers) Renamed outp_drivers().  All
6818         references changed.  Rewritten.  Don't return a driver that's not
6819         enabled.
6820         (outp_eject_page) All references to som_internal_eject_page()
6821         changed to use this.  Sets cp_x to 0 as well as cp_y.
6822
6823         * output.h: (OUTP_I_* enums) Removed.
6824         (struct som_submission_form) Removed.
6825         (struct outp_class) init_driver broken into preopen_driver,
6826         postopen_driver, and close_driver.  submit changed to take a
6827         som_table argument.
6828
6829         * postscript.c: Comment and formatting fixes.  Almost every
6830         external function had an assert added, checking driver_open and
6831         page_open.
6832         (ps_init_driver) Broken into ps_preopen_driver,
6833         ps_postopen_driver, ps_close_driver.  Manages driver_open.
6834         (ps_open_page) Sets page_open.
6835         (ps_close_page) Clears page_open.
6836
6837         * som.c: New file, base implementation.
6838         
6839         * som.h: (struct som_table) Add struct tag.
6840         (enum SOM_COL_ACROSS) Removed.
6841         (SOM_ROWS, SOM_COLUMNS) New enums.
6842         (struct som_table_class) Add member `cumulate'.  Remove `segment';
6843         change `render' arguments.
6844         (struct som_point, struct som_rect) Removed.
6845         (som_submit_table) Fixed typo, should have been som_submit.
6846
6847         * sysfile-info: (describe_variable) Don't try to insert a
6848         subtable; just destroy it for now.
6849
6850         * t-test.q: Include dcdflib/cdflib.h instead of cdflib.h.  Fix
6851         references to value labels.
6852
6853         * tab.c: (tab_destroy) New function.
6854         (tab_columns) Change argument.
6855         [0] (tab_submit) Remove dead code.
6856         (tab_title) Allocate string from the table's arena.
6857         (tab_output_text) Only free the buffer if we allocated it.
6858         (tab_submit) New function.
6859         (static vars t, d) New static vars.
6860         (tabi_table, tabi_driver, tabi_count, tabi_area, tabi_columns,
6861         tabi_headers, tabi_cumulate, tabi_render) New functions.
6862         (glob var tab_table_class) New global var.
6863
6864         * tab.h: (struct tab_join_rect) Don't use a som_rect; directly
6865         encapsulate the rectangle.  All references changed.
6866         
6867 Sun Dec 21 16:18:58 1997  Ben Pfaff  <blp@gnu.org>
6868
6869         * All header files updated to use struct tags in addition to
6870         typedefs for all structures.  Don't use word `struct' in struct
6871         tags.
6872         
6873         * Makefile.am: (pspp_SOURCES) Remove html.c.
6874         (INCLUDES) Replace the lib/* includes with a single lib/ include;
6875         all references updated.
6876
6877         * command.c: (parse_cmd) Remove call to som_check_workspace.
6878         (output_line) Update to new som.
6879
6880         * data-in.c: (parse_numeric) A single dot is not an error; it is
6881         the system-missing value.
6882
6883         * data-list.c: (dump_fixed_table, dump_free_table) Update to new
6884         som.
6885
6886         * data-out.c: Added `const' as appropriate to many prototypes.
6887         (convert_E, convert_F, convert_CCx) Take double argument instead
6888         of value * argument.
6889         (convert_format_to_string) Call changed functions appropriately.
6890         Instead of modifying the caller's value for FCAT_SHIFT_DECIMAL,
6891         make a local copy of the value.
6892
6893         * descript.q: Remove custom_variables() prototype now provided by
6894         q2c.  
6895         (custom_variables) Don't increment sbc_variables, the caller does
6896         this.
6897         (dump_z_table, display) Update to new som.
6898
6899         * error.c: (vmsg) Add const to prototype.  Remove code to handle
6900         `too many errors' condition.
6901         (check_error_count) New function.
6902         (msg) Add const to prototype.
6903
6904         * filename.c: (open_file) Rewrite for elegance.
6905
6906         * frequencies.q: Remove custom_*() prototypes now provided by q2c.
6907         (dump_full, dump_condensed, dump_statistics) Update for new som.
6908
6909         * list.q: Don't include somP.h.  Change all references to
6910         som_driver_ext to refer to the new members of som_driver.  Change
6911         som_internal_eject_page() references to outp_eject_page().
6912
6913         * main.c: (parse) Rewrite for elegance.  Add call to
6914         check_error_count().
6915
6916         * output.c: (add_class, outp_list_classes, outp_configure_driver)
6917         Rewrite or revise for new outp_driver_class_list structure.
6918         (outp_iterate_enabled_drivers) Fix comparison between disabled
6919         devices and current device type.
6920         (outp_eject_page) New function.
6921
6922         * output.h: Comment fixes.
6923         (struct outp_driver) New members driver_open, page_open, cp_x,
6924         cp_y, font_height, prop_em_width, fixed_width.  Deleted members
6925         ref_count, next.
6926         (struct outp_driver_class_list) New struct.
6927         (outp_class_list) Changed to type outp_driver_class_list; all
6928         references updated.
6929
6930         * print.c: (dump_table, print_trns_proc) Updated for new som.
6931
6932         * q2c.c: (dump_vars) Simplify array subcommand code.  Declare
6933         prototypes for custom subcommands.
6934         (dump_subcommand) Always include the `else'.
6935         (dump_parser) Fix comments in output code.
6936
6937         * set.q: Reordered functions.
6938
6939         * som-frnt.c, som-high.c, som-low.c, somP.h: Removed.
6940         
6941         * som.h: Rewritten from scratch.
6942
6943         * str.h: Remove dead code.
6944
6945         * tab.c, tab.h: New files, base implementation.
6946
6947         * sysfile-info.c: (cmd_sysfile_info, describe_variable) Update to
6948         new som.
6949
6950         * t-test.q: New code from John Williams
6951         <johnr.williams@stonebow.otago.ac.nz>.  Include math.h, cdflib.h.
6952         Many many new static vars and defines.
6953         (precalc, postcalc, g_postcalc, z_postcalc, t_pairs, t_groups,
6954         groups_calc, pairs_calc, z_dev_calc, z_calc) New functions.
6955         (struct value_list) New struct.
6956         (variance, covariance, pooled_variance, oneway, pearson_r, f_sig,
6957         t_crt, t_sig, print_t_groups) New functions.
6958         (cmd_t_test) Implemented.
6959
6960         * temporary.c: (cancel_temporary) Only free the temp_dict if it's
6961         non-NULL.
6962
6963         * vfm.c: (dump_splits) Update to new som.
6964
6965 Thu Dec  4 23:02:22 1997  Ben Pfaff  <blp@gnu.org>
6966
6967         * Makefile.am: (fiasco_SOURCES) Add html.c.
6968
6969         * aggregate.c: Base source.
6970
6971         * ascii.c: (postopen, preclose) Reformat.
6972
6973         * data-out.c, expr-evl.c: Comment fixes.
6974         
6975         * filename.c: (open_file) When opening a file for writing, use
6976         line buffering instead of full buffering for better interactive
6977         performance.  Suggested by Valerio Aimale
6978         <valerio@svpop.com.dist.unige.it>.  Also, recognize special file
6979         names `stdin', `stdout', `stderr'.
6980
6981         * groff-font.c: Comment fixes.
6982
6983         * html.c: New file; base version.
6984
6985         * list.q: (write_all_headers, clean_up, determine_layout,
6986         list_cases) Ignore `special' devices for now.  Needs to be fixed
6987         later.
6988
6989         * output.c: (outp_init) Add html driver to list; reverse list
6990         order.
6991
6992         * output.h: (struct outp_class_struct) New members `special',
6993         `submit'; comment fixes.  All references changed.
6994
6995         * postscript.c: (ps_init_driver) Make defaults for text_opt,
6996         line_opt depend on whether the OUTP_DEV_SCREEN bit is set on the
6997         device.
6998         (postopen) Comment fix.
6999         (preclose) Comment fixes, formatting fixes.  Change x->file.file
7000         references to more proper f->file.
7001
7002         * som-high.c: (som_submit_table) Special classes use their own
7003         renderers.
7004
7005         * som.h: Comment fixes.
7006
7007         * temporary.c: (new_dictionary) Don't try to xstrdup() a NULL
7008         string.
7009         
7010 Tue Dec  2 14:36:07 1997  Ben Pfaff  <blp@gnu.org>
7011
7012         * Makefile.am: (fiasco_SOURCES) Add aggregate.c back in.
7013
7014         * aggregate.c: Still working on this.
7015
7016         * command.c: (cmd_table[]) Add AGGREGATE back in.
7017         (split_words) Make '-' a legal word separator as well as ' '.
7018
7019         * main.c: Comment fixes.
7020
7021         * q2c.c: (dump_parser) Don't require the procedure's full name to
7022         be present, in the generated source.
7023
7024         * t-test.q: Change name to `t-test' from `t test'.  Let PAIRS be
7025         multiply specified and let it be default; let MISSING, CRITERIA,
7026         FORMAT be multiply specified.
7027         (cmd_t_test) Parse command name.  [DEBUGGING] Call debug_print().
7028         (custom_groups) Fix defaults.
7029         (custom_pairs) Check whether this is a PAIRS subcommand before
7030         attempting to parse.  Better garbage collection.  Proper storage
7031         allocation.
7032         [DEBUGGING] (debug_print) New function.
7033
7034         * temporary.c: Comment fixes.
7035         (copy_variable) Don't copy variable name and index.
7036         (save_dictionary) Copy variable name and index by hand.
7037
7038         * vars-atr.c: Comment fixes.
7039         (create_variable) New dictionary argument.  All references
7040         changed.
7041         (common_init_stuff) New dictionary argument.  All references
7042         changed.
7043         (init_variable) New dictionary argument.  All references changed.
7044         (dup_variable) New function.
7045
7046         * vars-prs.c: (parse_variables) If there are any errors, we always
7047         return 0.  Previously, it was possible for some types of errors to
7048         be ignored.
7049         
7050 Sat Nov 22 01:20:59 1997  Ben Pfaff  <blp@gnu.org>
7051
7052         * Makefile.am: (fiasco_SOURCES) For 0.1.5 release, remove
7053         aggregate.c.
7054
7055         * command.c: (cmd_table[]) Comment out AGGREGATE; add T TEST.
7056
7057         * list.q, t-test.q: Remove ALL option from VARLIST declaration in
7058         grammar rules.
7059
7060         * q2c.c: Comment fixes.
7061         (SBC_* enums) Remove SBC_VARLIST_ALL; all references removed.
7062         
7063         * t-test.q: (cmd_list) Rename cmd_t_test.
7064
7065         * temporary.c: (new_dictionary) Don't declare as static.
7066         
7067 Fri Nov 21 00:03:06 1997  Ben Pfaff  <blp@gnu.org>
7068
7069         * aggregate.c: Changes, still not finished.
7070
7071         * file-handle.q, frequencies.q, list.q, set.q: Comment fixes.
7072
7073         * q2c.c: Comment fixes.  Now its output is internationalized.
7074         (get_token) Fix parsing of escapes within literal strings.
7075         (main) Fix bad #line directives in output.
7076
7077         * t-test.q: Base implementation.
7078
7079         * temporary.c: (new_dictionary) New function.
7080         (restore_dictionary) [__CHECKER__] Change fill character to *
7081         (from @).
7082         
7083 Sun Nov 16 01:29:57 1997  Ben Pfaff  <blp@gnu.org>
7084
7085         * Makefile.am: (BUILT_SOURCES, fiasco_SOURCES) Add t-test.c
7086
7087         * aggregate.c: Changes, still not finished.
7088
7089         * descript.q, list.q: Comment fixes.
7090
7091         * q2c.c: Almost completely rewritten.
7092
7093         * t-test.q: New file, not complete.
7094
7095 Fri Nov 14 00:14:48 1997  Ben Pfaff  <blp@gnu.org>
7096
7097         * aggregate.c: Changes, still not finished.
7098
7099         * sort.c: (sort_cases) Call cancel_temporary() instead of doing it
7100         by hand.
7101
7102         * temporary.c: (cancel_temporary) New function.
7103
7104         * vars-atr.c: (discard_variables) Call cancel_temporary() instead
7105         of doing it by hand.
7106
7107         * vfm.c: (close_active_file) After restoring a TEMPORARY
7108         dictionary, set temp_dict to NULL.  Cancel TEMPORARY through
7109         cancel_temporary().
7110         (SPLIT_FILE_procfunc) Comment fix.
7111
7112 Tue Oct 28 16:08:45 1997  Ben Pfaff  <blp@gnu.org>
7113
7114         * Makefile.am: (fiasco_SOURCES) Add aggregate.c.
7115
7116         * aggregate.c: New file, not finished yet.
7117
7118         * command.c: (cmd_table) Add AGGREGATE.
7119
7120         * common.h: (pgm_state) Move declaration to var.h.
7121
7122         * lexer.c: (bin_value_func, oct_value_func, hex_value_func) i18n
7123         fixes.
7124         (parse_string) Message fix.
7125
7126         * recode.c: Comment fix.
7127
7128         * sfm-read.c: (read_variables) Code esthetic fixes.
7129         (write_header) Default date is `Jan', not `JAN'.
7130
7131         * sfmP.h: (bswap_int32) [!__linux__] Fix off-by-one errors.
7132
7133         * sort.c: (cmd_sort_cases) Farm the work out to new function
7134         parse_sort_variables().
7135         (parse_sort_variables) New function.
7136         (sort_cases) New function.  Cancels temporary transformations,
7137         which sorting didn't do previously.
7138         (cmd_sort_cases) Better garbage collection on error.  Uses
7139         do_external_sort().
7140         (write_initial_runs, merge_once) Improved code esthetics.
7141         (sort_stream_read) Reduced to one call to read_output_cases().
7142         (read_output_cases) New function.
7143
7144         * var-labs.c: (cmd_variable_labels) Re-enabled truncation of
7145         variable labels to 120 characters.
7146
7147         * var.h: Comment fixes.
7148         (glob var pgm_state) From common.h.
7149
7150         * vars-atr.c: (discard_variables) Set pgm_state to STATE_INIT.
7151
7152         * vars-prs.c: (parse_DATA_LIST_vars) Support PV_SINGLE in
7153         options.  Set *names to NULL on error.
7154
7155         * vfm.c: (memory_stream_init) Assert compaction_nval != 0.
7156
7157 Thu Oct  9 09:59:49 1997  Ben Pfaff  <blp@gnu.org>
7158
7159         * sfm-write.c, vfm.c: [HAVE_UNISTD] #include <unistd.h>, needed by
7160         SunOS4.  From Alexandre Oliva <oliva@dcc.unicamp.br>.
7161
7162 Wed Oct  8 18:55:24 1997  Ben Pfaff  <blp@gnu.org>
7163
7164         * vfm.c: (page_to_disk) Added missing local variables.
7165
7166 Tue Oct  7 20:23:17 1997  Ben Pfaff  <blp@gnu.org>
7167
7168         * get.c: Comment fix.
7169
7170         * sort.c: (cmd_sort_cases) Attempt to perform internal sort if the
7171         source is anything other than a disk stream, not just if it's in a
7172         memory stream.  Call page_to_disk() before external sort.
7173         (allocate_cases) Message fix.
7174
7175         * vfm.c: (prepare_for_writing) Warn user when paging workspace to
7176         disk.
7177         (page_to_disk) New function.
7178
7179 Sun Oct  5 15:56:14 1997  Ben Pfaff  <blp@gnu.org>
7180
7181         * Makefile.am: (INCLUDES) Include .. instead of $(top_srcdir).
7182
7183         * common.h: (macro strerror) Remove.  From Alexandre Oliva
7184         <oliva@dcc.unicamp.br>.
7185
7186         * get.c: (dict_delete_run) The number of variables to delete is
7187         not necessarily the number of variables that need to be shifted
7188         up.
7189         (trim_dictionary) Don't set *options to 0.  Fix bug that caused
7190         too many variables to be deleted.
7191
7192         * postscript.c: Comment fix.
7193
7194         * q2c.c: Include strerror.c.  From Alexandre Oliva
7195         <oliva@dcc.unicamp.br>.
7196
7197         * set.q: #undef ON and OFF.  From Alexandre Oliva
7198         <oliva@dcc.unicamp.br>.
7199
7200         * sfm-read.c: (sfm_read_dictionary) Don't set the file class too
7201         early, otherwise errors cause a bad free().
7202
7203         * str.h: (macro nvsprintf) s/FORMATS/FORMAT/ typo.  From Alexandre
7204         Oliva <oliva@dcc.unicamp.br>.
7205
7206         * temporary.c: (save_dictionary) Don't allocate memory if
7207         n_documents is 0.
7208
7209         * vfm.c: (memory_stream_write) Message fix.
7210
7211 Sat Oct  4 16:20:43 1997  Ben Pfaff  <blp@gnu.org>
7212
7213         * command.c: (static var cmd_table[]) Define REPEATING DATA
7214         command.
7215
7216         * common.h: Added support for broken systems that are missing
7217         EXIT_SUCCESS, EXIT_FAILURE, RAND_MAX, and/or strerror().
7218
7219         * Many source files: Replace syntax error messages via msg() with
7220         call to syntax_error().
7221
7222         * data-list.c: (dump_fixed_table) Add support for dumping table
7223         for REPEATING DATA as well as DATA LIST FIXED.
7224         (cmd_repeating_data) Allows and requires `/' between subcommands.
7225         Does proper thing with allowing rpd.starts_end to stay 0.  Allows
7226         CONTINUED specifications to be omitted.  Forces CONTINUED to be
7227         specified if ID is.  Calculates starts_end, cont_end from logical
7228         record length as reported by fhp.  Calls dump_fixed_table() if
7229         requested.  Fixed length of record copied by memcpy.
7230         (parse_num_or_var) Sets `num' to 0, not NOT_INT, for variables.
7231         Message fix.
7232         (realize_value) Returns sensible value for out-of-range variable
7233         values.
7234         (rpd_parse_record) New argument `ofs'.  Fixed confusion between
7235         length of occurrences and length of line.  Added warning for
7236         fields that exceed the line length.  Fixed infinite loop.
7237         (read_one_set_of_repetitions) Numerous minor changes for more
7238         complete SPSS compliance.  Message fixes.
7239
7240         * dfm.c: (dfm_close) If the file being closed is the inline file,
7241         read all the remaining data before closing it.
7242         (dfm_get_record) Don't close the file on lossage, as either it
7243         has been closed already or it doesn't belong to us.
7244
7245         * error.c: (puts_stdout) New function.
7246         (vmsg) Use puts_stdout instead of puts.
7247
7248         * file-handle.q: (fh_record_width) New function.
7249
7250         * inpt-pgm.c: (init_case) Fixed buffer overrun when inp_nval % 4
7251         == 0.
7252         (clear_case) Ditto.
7253         (input_program_source_read) Made an old kluge an approved method.
7254
7255         * lexer.c: (syntax_error) New function.
7256
7257         * misc.c: [BROKEN_RAND] (ansi_rand, ansi_srand; static var next)
7258         New.
7259
7260         * output.c: (oupt_get_paper_size) Message fix.
7261
7262         * q2c.c: Numerous fixes to formatting of generated code made to
7263         conform to GNU coding standards.  Uses syntax_error() in generated
7264         code.  Other miscellaneous generated message fixes.  Added support
7265         for broken systems that are missing EXIT_SUCCESS, EXIT_FAILURE,
7266         RAND_MAX, and/or strerror().
7267
7268 Sat Oct  4 02:09:56 1997  Ben Pfaff  <blp@gnu.org>
7269
7270         * data-in.c: Comment fixes.
7271
7272         * data-list.c: (struct repeating_data_trns) New member `id_spec'.
7273         (find_variable_input_spec) New function.
7274         (cmd_repeating_data) Initializes id_spec.
7275         (rpd_parse_record) Implemented.
7276         (read_one_set_of_repetitions) Returns -3 by default in order to
7277         kluge out some potential bugs.
7278
7279         * data-out.c: Comment fixes.
7280
7281         * file-type.c: (internal_cmd_record_type) Message fix.
7282
7283         * inpt-pgm.c: (input_program_source_read) Special temporary kluge
7284         for handling -3 return value.
7285
7286 Sat Sep 20 23:58:15 1997  Ben Pfaff  <blp@gnu.org>
7287
7288         * data-list.c: Comment fixes.
7289         (struct dls_var_spec) Reordered members.
7290         (read_from_data_list_fixed) Restructured.
7291         (struct repeating_data_trns) Reordered members.  Renamed `starts'
7292         as `starts_beg', `ends' as `starts_end'.
7293         (cmd_repeating_data) Calculates length of repeated data if
7294         necessary and possible.
7295         (parse_num_or_var) Don't allow string variables.
7296         (realize_value) New function.
7297         (rpd_msg) New function.
7298         (rpd_parse_record) New function.  Currently stubbed out.
7299         (read_one_set_of_repetitions) Implemented.
7300
7301         * inpt-pgm.c: (input_program_source_read) Comment fix.
7302
7303 Thu Sep 18 21:34:57 1997  Ben Pfaff  <blp@gnu.org>
7304
7305         * command.c: (cmd_end_repeat_p) Removed.
7306         (init_cmd_parser) Doesn't set cmd_end_repeat_p.
7307         (parse_cmd_name) Removed.
7308
7309         * data-list.c: Comment fixes.
7310         (data_list_pgm) Removed `eof' member.
7311         (static var first) New var.
7312         (cmd_data_list) Sets `first'.  Ensures that DATA LIST uses the
7313         FILE TYPE file inside FILE TYPE structures.
7314         (append_var_spec) Appends to *first, not dls.spec.
7315         (parse_fixed) Message fixes.
7316         (struct rpd_num_or_var) New.
7317         (struct repeating_data_trns) New.
7318         (static var rpd) New.
7319         (cmd_repeating_data) New function.
7320         (parse_num_or_var) New function.
7321         (parse_repeating_data) New function.
7322         (read_one_set_of_repetitions) New function.
7323
7324         * file-type.c: (cmd_file_type) Message fixes.  Always
7325         default_handle to FILE TYPE file handle.
7326         (internal_cmd_record_type) Message fixes.
7327
7328 Wed Aug 20 14:22:03 1997  Ben Pfaff  <blp@gnu.org>
7329
7330         * repeat.c: Comment fix.  Disable debugging.
7331
7332         * temporary.c: (restore_dictionary) Sets splits to NULL and
7333         n_splits to 0 before destroying the variables because now doing
7334         this tries to remove split variables.
7335
7336         * vars-atr.c: (discard_variables) Asserts that n_splits is 0 after
7337         destroying the dictionary.
7338         (clear_variable) Removes a variable from splits after destroying
7339         it.
7340
7341 Mon Aug 18 18:06:55 1997  Ben Pfaff  <blp@gnu.org>
7342
7343         * cmdline.c: (set_compat) Removed.
7344         (pick_compat) Removed.
7345         (parse_command_line) Removed -c option.
7346         (pre_syntax_message) Removed -c option.
7347         (usage) Remove compatibility code.
7348
7349         * common.h: (macros VER_PC, VER_WND, VER_X) Removed.
7350         (glob var compat) Removed.
7351
7352         * compute.c: (type_check) Fixed messages about type mismatches.
7353
7354         * data-list.c: (cmd_data_list) Removed compatibility code.
7355         (fixed_parse_compatible) Calls convert_negative_to_dash().
7356         Fixed bug where it only set the variable in fx.spec if it created
7357         the variable itself.
7358         (dump_fmt_list) Spelling fix.
7359         (cut_field) Removed compatibility code.
7360
7361         * dfm.c: (cmd_begin_data) Don't require a command terminator on
7362         BEGIN DATA command.
7363
7364         * expr-evl.c: (evaluate_expression) Implement LAG.
7365
7366         * expr-prs.c: (parse_add) Calls convert_negative_to_dash().
7367         (parse_neg) Calls convert_negative_to_dash().
7368         (LAG_func) Increases n_lag to the lag requested.  Fixed assignment
7369         bug.
7370
7371         * expr.h: (struct expression_struct) Removed member max_lag.
7372
7373         * file-type.c: (parse_col_spec) Calls convert_negative_to_dash().
7374         (internal_cmd_record_type) Removed special handling to produce
7375         negative numbers from dash tokens.
7376
7377         * getline.c: (static var DO_REPEAT_level) New var.
7378         (getl_add_DO_REPEAT_file) Increments DO_REPEAT_level.
7379         (handle_line_buffer) Copies the line into getl_buf; doesn't call
7380         copy_with_DO_REPEAT_substitutions().
7381         (getl_read_line) Maintains value of getl_mode.  Calls
7382         perform_DO_REPEAT_substitutions() whenever DO_REPEAT_level is
7383         positive.
7384         (getl_close_file) Decrements DO_REPEAT_level when appropriate.
7385
7386         * getline.h: (getl_mode) New glob var.
7387
7388         * glob.c: Comment fixes.
7389         (init_glob) Restructured.  Sets set_seed.
7390         (init_compat_dependent) Removed.  All references removed.
7391         (get_date) Format changed from MM/DD/YY to DD MMM YYYY.
7392         (__htonl, __htons) Removed.  (What were these for?)
7393
7394         * lexer.c: (static var tbl) Dash set to class CNUM.
7395         (make_hexit) New function from data-out.c.
7396         (get_token_representation) Rewritten.
7397         (convert_negative_to_dash) New function.
7398         (lex_init_compat_dependent) Removed.
7399         (yylex) A dash is parsed as part of a number if it is followed by
7400         a digit.  The ASCII representation of a number is copied to
7401         tokstr.  String parsing farmed out to parse_string().  Comment
7402         fixes.
7403         (bin_value_func, oct_value_func, hex_value_func, parse_string) New
7404         functions.
7405         (preprocess_line) Line processing depends on interactive/batch
7406         mode, not on compatibility mode.  Removed PC+ compatibility code.
7407
7408         * loop.c: (loop_3_trns_proc) Comment fix.
7409
7410         * main.c: Remove dead code.
7411         (main) Remove call to init_compat_dependent().
7412
7413         * misc.c: (convert_fmt_ItoO) Make E format conversion more
7414         conformant.
7415
7416         * print.c: (parse_string_argument) Calls
7417         convert_negative_to_dash().
7418         (fixed_parse_compatible) Calls convert_negative_to_dash().
7419
7420         * repeat.c: (RPT_* defines) Removed.
7421         (struct rpt_numeric) Removed.
7422         (struct repeat_entry) New member type, changed `replacement' from
7423         char * to char **.
7424         (clean_up) Deallocation adapted to new repeat_entry.
7425         (internal_cmd_do_repeat) `type' defaults to 0.  Remove lookahead()
7426         usage.  Creates vars for `type' of 1.
7427         (parse_ids) Sets type of 1.  Adapted to new repeat_entry.
7428         (store_numeric) Rewritten, new interface.
7429         (parse_numbers) Rewritten.
7430         (parse_strings) Rewritten.
7431         (find_DO_REPEAT_substitution) New function.
7432         (perform_DO_REPEAT_substitutions) New function.
7433         (copy_with_DO_REPEAT_substitutions) Removed.
7434         (debug_print) Rewritten.
7435
7436         * set.q: Comment fix.
7437         (custom_results) Removed compatibility code.
7438         (internal_cmd_set) Removed SET EMULATION subcommand.  Removed
7439         compatibility code.
7440
7441         * sysfile-info.c: (cmd_display) Removed compatibility code.
7442
7443         * tokens.h: Comment fixes.
7444         (token types enum) Removed `toktype' typedef name for this int
7445         type.  Removed SUBST.  Restructured.
7446
7447         * vars-atr.c: (discard_variables) Sets n_lag to 0.
7448
7449         * vars-prs.c: Comment fix.
7450
7451         * vfm.c: Comment fixes.
7452         (glob var n_lag) New var.
7453         (static vars lag_count, lag_head, lag_queue) New vars.
7454         (procedure) Removed argument nlag.
7455         (setup_lag) New function.
7456         (close_active_file) Discards lagging state.
7457         (lag_case) New function.
7458         (lagged_case) New function.
7459         (write_case) Lags a case if lagging.
7460
7461         * weight.c: (cmd_weight) Removed compatibility code.
7462         
7463 Sun Aug 17 22:34:40 1997  Ben Pfaff  <blp@gnu.org>
7464
7465         * getline.h: (struct getl_script) New members loop_index, macros.
7466
7467         * getline.c: (getl_add_file) Sets first_line field to NULL.
7468         (getl_add_DO_REPEAT_file) New function.
7469         (handle_line_buffer) When the current line's length is negative,
7470         set the filename and line number.  Increment line number after
7471         reading line.  Pass the line to
7472         copy_with_DO_REPEAT_substitutions() for processing.
7473         (getl_close_file) Free DO REPEAT lines before freeing the
7474         filename, and just set the filename to NULL when doing this,
7475         because otherwise the filename gets freed twice.
7476
7477         * glob.c: (glob var queuing) Removed.  All references removed.
7478
7479         * lexer.c: Comment fixes.
7480         (get_token_representation) New function.
7481
7482         * repeat.c: Comment fixes.
7483         (struct repeat_entry) Replaced type and v union members with a
7484         simple string.
7485         (append_record) New function.
7486         (internal_cmd_do_repeat) Started reforming it for the new
7487         repeat_entry struct.  Properly records filename changes in the
7488         getl_line_buf.  Fixed improper use of = for ==.  Fixed sense of
7489         strncasecmp() result usage.  Uses append_record() to simplify.
7490         Properly discards END REPEAT line.  Calls getl_add_DO_REPEAT_file
7491         to add in the file.
7492
7493         (copy_with_DO_REPEAT_substitutions) Started coding.
7494
7495         [DEBUGGING] (debug_print_lines) New function.
7496
7497         * set.q: (custom_results, internal_cmd_set) s/VER_PCP40/VER_PC/;
7498
7499         * tokens.h: (macro is_id1, is_idn) New macros.
7500
7501 Sat Aug 16 10:57:41 1997  Ben Pfaff  <blp@gnu.org>
7502
7503         * cmdline.c: (static var pre_syntax_message) Changed `win'
7504         compatibility mode to `wnd'.
7505
7506         * data-list.c: (fixed_parse_spss) Renamed
7507         fixed_parse_compatible().
7508
7509         * glob.c: (init_glob) Excise unused code for
7510         program_invocation_short_name.
7511
7512         * lexer.c: (preprocess_line) Leading indentors are ignored in Wnd
7513         as well as in X.
7514
7515         * print.c: (fixed_parse_spss) Renamed fixed_parse_compatible().
7516
7517         * set.q: `win' compatibility renamed `wnd'.
7518
7519 Thu Aug 14 22:11:12 1997  Ben Pfaff  <blp@gnu.org>
7520
7521         * filename.c: [__WIN32__] Change the included Windows header files
7522         (again).
7523         (absolute_filename_p) [__MSDOS__] A filename with a colon as the
7524         second character is absolute.
7525         (dirname) Fix logic error.  Don't printf() the results.
7526         (prepend_dir) Don't printf() the results.
7527
7528         * getline.c: (handle_line_buffer) New function.
7529         (getl_read_line) Reads line with handle_line_buffer() when
7530         appropriate.
7531         (getl_close_file) Discard line buffer data.
7532
7533         * getline.h: Comment fixes.
7534         (struct getl_line_list) New struct.
7535         (getl_script_struct) Added line buffer members.  These are hooks
7536         for use by DO REPEAT to allow it to insert virtual source code
7537         into the program.
7538
7539         * glob.c: (init_glob) [__DJGPP__ || (__WIN32__ && __BORLANDC__)]
7540         Override Borland C++ stupidity that claims Windows has a console
7541         window size of 0x3.
7542
7543         * repeat.c: This is in the process of being restructured from
7544         using a token-buffering approach to the DO REPEAT facility to
7545         using the more flexible approach of a line-buffering approach in
7546         conjunction with the getline module.  Comment fixes.
7547         (struct tok_struct) Removed.
7548         (static vars queue_index, queue_head, queue) Removed.
7549         (static vars line_buf_head, line_buf_tail) New vars.
7550         (internal_cmd_do_repeat) Instead of queuing tokens, queue lines.
7551         Not complete.
7552         (pull_queue, destroy_queue) Removed.
7553         [DEBUGGING] (debug_print_tokens) Removed.
7554
7555 Tue Aug  5 13:57:58 1997  Ben Pfaff  <blp@gnu.org>
7556
7557         * file-handle.q: (prepend_current_directory) New function.
7558         (internal_cmd_file_handle, fh_get_handle_by_filename) Prepends
7559         current directory before normalizing filename.
7560
7561         * filename.c: (gnu_getcwd) New function.
7562         (absolute_filename_p) New function.
7563         (search_path) New argument, PREPEND.  All references changed to
7564         pass NULL except those explicitly mentioned.  Uses
7565         absolute_filename_p().  Prepends PREPEND before trying the
7566         filename.
7567         (dirname, prepend_dir) New functions.
7568
7569         * getline.c: (getl_get_current_directory) New function.
7570         (getl_include) Passes getl_get_current_directory() as PREPEND arg
7571         to search_path().
7572                 
7573 Sun Aug  3 11:42:36 1997  Ben Pfaff  <blp@gnu.org>
7574
7575         * In several source files, the term `script' was replaced with
7576         `syntax file' inside error messages.  Usage of the term `script'
7577         in the sense of a syntax file is now deprecated.
7578
7579         * cmdline.c: (static vars pre_syntax_message, post_syntax_message)
7580         Updated messages.
7581
7582         * dump-sysfile.c: (usage) Update message.
7583
7584         * getline.c: (getl_read_line) Ignore lines beginning with `#!'.
7585
7586         * getline.h: (glob var getl_include_path) Declare extern.
7587
7588         * list.q: Define EXTERN as extern before #including somP.h.
7589
7590         * var.h: Remove declaration of `disptype' variable.
7591
7592         * vfm.c: (close_active_file) After switching the data sink to a
7593         data source, set vfm_sink to NULL, because it doesn't exist any
7594         more.
7595
7596 Thu Jul 17 21:41:44 1997  Ben Pfaff  <blp@gnu.org>
7597
7598         * glob.c: [__BORLANDC__] Include math.h.  Define _matherr() and
7599         _matherrl() to ignore all math errors.
7600
7601         * sfm-read.c: (read_value_labels) When reading the labels from
7602         disk, read the little parts separately instead of as a struct;
7603         this avoids alignment problems.
7604
7605         * sfm-write.c: (struct sfm_fhuser_ext) New member `elem_type'.
7606         (sfm_write_dictionary) Sets elem_type and frees it on lossage.
7607         (write_header) Allocates and initializes elem_type.
7608         (sfm_write_case) Uses elem_type to determine how to handle each
7609         flt64 element.
7610         (sfm_close) Frees elem_type.
7611
7612         * sfmP.h: Comment fix.
7613         [__BORLANDC__] Uses #pragma -a to adjust structure member
7614         alignment.
7615         
7616 Thu Jul 17 01:55:12 1997  Ben Pfaff  <blp@gnu.org>
7617
7618         * Makefile.am: (fiasco_SOURCES) Remove display.c.
7619
7620         * common.c: Fix typo.
7621
7622         * dfm.c: (read_record) Remove strncasecmp() emulation and fix the
7623         sense of the condition.
7624
7625         * expr-evl.c: (macro ALLOC_STRING_SPACE) [!PAGED_STACK] Add
7626         line-continuation backslash.
7627
7628         * filename.c: [__WIN32__] Include <windef.h> before <winbase.h>.
7629
7630         * frequencies.q: (custom_grouped, add_percentile) Don't use a
7631         non-constant expression as an argument to sizeof.
7632
7633         * glob.c: [__WIN32__ && __BORLANDC__] When including <conio.h>,
7634         undefine gettext macro because that's a conio function.
7635
7636         * hash.h: (hsh_prime_tab declaration) Remove.
7637
7638         * list.q: (write_fallback_headers) Move `leader' allocation out of
7639         main loop.  Change to local_alloc() allocation.
7640
7641         * output.h: Formatting fixes.  Put __attribute__ in right place on
7642         function prototypes.
7643
7644         * sfm-read.c: (read_machine_flt64_info, read_variables) Change
7645         incorrect `SECOND_LOWEST_VALUE' references to proper
7646         `second_lowest_value'.
7647
7648         * som-frnt.c: (EXTERN macro) Define as `extern' instead of null
7649         value.  This way 2 out of 3 of the som files define the vars
7650         extern, the correct way, that actually works under BC++.
7651         (som_set_float) Don't use nonconstant initializers for a struct.
7652
7653         * som-high.c: Add the standard alloca() header.
7654         (replicate_table) Add prototype.
7655
7656         Merged DISPLAY routine.
7657         * sysfile-info.c: (AS_*) New enum series.
7658         (cmd_sysfile_info) Gutted.  Calls describe_variable() to do the
7659         dirty work.
7660         (cmd_display, display_macros, display_documents,
7661         display_variables) Stolen from defunct display.c.
7662         (describe_variable) New function.
7663
7664         * temporary.c: [0] (display_tree) New debug function.
7665         (copy_variable) Performs shallow copy of value labels instead of
7666         deep copy; i.e., just copys the AVL tree and increments the
7667         reference counts.
7668
7669         * val-labs.c: Comment fixes.
7670         (do_value_labels) Optionally skip leading forward slash.
7671         (get_label) Creates only a single value label instead of many
7672         copies of one, and sets the reference count.
7673
7674         * display.c: Removed.
7675
7676         * dump-sysfile.c: New file, not yet complete.
7677
7678 Fri Jul 11 23:02:18 1997  Ben Pfaff  <blp@gnu.org>
7679
7680         For lots of source files I added more verbose_msg's.  These aren't
7681         listed below as they have tested as being benign.  In some cases
7682         these replaced debug_printf() calls.
7683
7684         * output.c: (outp_read_devices) Message fix.
7685
7686         * postscript.c: (output_encodings) Message fix.  Reports errors on
7687         fclose().
7688         (postopen) Message fix.
7689         
7690 Fri Jul 11 14:09:40 1997  Ben Pfaff  <blp@gnu.org>
7691
7692         * dfm.c: (dfm_close) Don't call fclose() for a NULL FILE.
7693
7694         * filename.c: (close_file_ext) Set f->file to NULL *after* closing
7695         it.
7696
7697         * main.c: Remove <malloc.h> #include.
7698
7699         * mis-val.c: (parse_numeric) Set .f member for each missing[]
7700         instead of trying to just set the missing[] itself, which is a
7701         gcc-specific idiom.
7702
7703         * sfm-read.c: (read_variables) Same.
7704
7705         * str.h: Add memmem() prototype.
7706
7707         * val-labs.c, var-labs.c: Replace <malloc.h> with <stdlib.h>.
7708
7709 Thu Jul 10 22:13:53 1997  Ben Pfaff  <blp@gnu.org>
7710
7711         * Makefile.am: (q2c) Don't include any libraries in the link.
7712
7713         * dfm.c: (force_line_buffer_extension) New macro.
7714         (count_tabs) New function.
7715         (tabs_To_spaces) New function.
7716         (read_record) Calls tabs_to_spaces() on the line being processed.
7717
7718         * q2c.c: Disabled i18n for this proglet so that libintl.a doesn't
7719         have to be compiled twice (once for CC, once for LOCAL_CC).
7720  
7721 Sun Jul  6 19:14:33 1997  Ben Pfaff  <blp@gnu.org>
7722
7723         * Makefile.am: (INCLUDES) Add intl directory; fix directories.
7724         (LDADD) Add @INTLLIBS@.
7725         (q2c) Add LIBS, @INTLLIBS@ to link step.
7726
7727         * inpt-pgm.c: Turn off debugging.
7728
7729         * postscript.c: (postopen) Format fix.  local_free() blocks
7730         returned by local_alloc(); don't free() them.
7731
7732 Sat Jul  5 23:44:51 1997  Ben Pfaff  <blp@gnu.org>
7733
7734         * data-in.c: (parse_string_as_format) Comment fix.  Fix check for
7735         string length.
7736
7737         * data-list.c: (read_from_data_list_fixed) Pass proper value for
7738         LEN arg, not simply the full string length.
7739
7740         * sort.c: (allocate_file_handles) Check SPSS compatible temp file
7741         directories before generic temp file directories.
7742
7743         * vfm.c: Disable debugging.
7744
7745 Fri Jul  4 13:26:41 1997  Ben Pfaff  <blp@gnu.org>
7746
7747         * get.c: Comment fix.
7748         (cmd_save_internal) Always passes GTSV_OPT_SAVE option.
7749
7750 Wed Jun 25 22:52:28 1997  Ben Pfaff  <blp@gnu.org>
7751
7752         * expr-prs.c: (debug_print_postfix) Conditionally included on
7753         GLOBAL_DEBUGGING.  Removed out_header() reference.
7754
7755         * exprP.h: Removed #undef GLOBAL_DEBUGGING.
7756
7757 Sun Jun 22 22:00:28 1997  Ben Pfaff  <blp@gnu.org>
7758
7759         * ascii.c: Removed obsolete ascii_close_page() prototype.
7760
7761         * command.c: (output_line) Comment fix.
7762
7763         * data-in.c: Formatting fix.
7764         (parse_string_as_format) Now the `fc' argument is used only for
7765         the purpose of error messages; it is not an index into the string
7766         passed.  All references changed.
7767
7768         * data-list.c: Comment fix.
7769         (cut_field) Comment fix.  Now returns the column number of the
7770         position of the field cut out on success.
7771         (parse_field) Added `column' argument.  Puts the column numbers in
7772         the error message.
7773         (read_from_data_list_free, read_from_data_list_list) Record the
7774         column number returned by cut_field(), pass it to parse_field().
7775
7776         * dfm.c: Comment fix.
7777
7778         * do-ifP.h: Comment fix.
7779
7780         * expr-prs.c: (SYSMIS_func) Implemented string-type arguments for
7781         the SYSMIS function.
7782
7783         * expr.h, exprP.h: Comment fix.
7784
7785         * glob.c: (init_glob) Only calls setlocale() and family if
7786         ENABLE_NLS set.
7787
7788         * hash.h: Comment fix.
7789
7790         * include.c: Comment fix.
7791
7792         * output.c: Comment fix.
7793
7794         * postscript.c: (ps_line_intersection) Simplified assertion.
7795
7796         * repeat.c: Comment fix.
7797
7798         * vars-atr.c: Comment fix.
7799
7800         * vars-prs.c: Comment fix.
7801
7802         * vfm.c: (vector_initialization) [DEBUGGING] Fixed undefined
7803         behavior with usage of postincrement.
7804         (memory_stream_read) Discards cases as it goes. 
7805
7806 Sun Jun 15 16:45:17 1997  Ben Pfaff  <blp@gnu.org>
7807
7808         * Makefile.am: Cleans q2c, not just distcleans it.  Distcleans
7809         foo.
7810
7811         * Most source files: Includes debug-print.h, related comment
7812         fixes.
7813
7814         * cases.c: (alloc_val) Removed complex allocation code.  Merely
7815         increments default_dict.nval and returns the former value.
7816         (envector, devector) Removed references to lv member of struct
7817         variable.
7818
7819         * common.h: (macro VME) Replaced complex definition with simple
7820         one.
7821
7822         * data-list.c: (cmd_data_list) Sets vfm_source instead of
7823         read_active_file and cancel_input_pgm.
7824         (read_from_data_list, cancel_data_list) Removed.
7825         (data_list_source_read, data_list_source_destroy_source) New
7826         functions.
7827         (glob var data_list_source) New var.
7828
7829         * dfm.c: (open_file_r, open_file_w) Simplified debug output.
7830         (cmd_begin_data) Improved criteria for an input program accessing
7831         the inline file.  Still not perfect.
7832
7833         * do-if.c: (do_if_trns_proc) Simplified debug output.
7834
7835         * expr-prs.c: Comment fixes.
7836         [DEBUGGING] (debug_print_postfix) Simplified debug output.
7837
7838         * file-handle.q: (fh_close_handle) Simplified debug output.
7839
7840         * file-type.c: Comment fixes.
7841         (cmd_file_type) Sets vfm_source instead of read_active_file and
7842         cancel_input_pgm.
7843         (cmd_end_file_type) On failure, discards variables in place of
7844         just canceling the input program.
7845         (read_from_file_type) Renamed file_type_source_read.
7846         (cancel_file_type) Renamed file_type_source_destroy_source.
7847         (glob var file_type_source) New var.
7848
7849         * get.c: (GTSV_* enum series) New enums GTSV_OPT_SAVE, GTSV_NONE.
7850         (cmd_get) Initializes options to GTSV_NONE before passing to
7851         trim_dictionary().  Removed `lv' reference.  Sets vfm_source
7852         instead of read_active_file and cancel_input_pgm.
7853         (cmd_save_internal) Initializes options before passing to
7854         trim_dictionary().  Local var `nval' removed.
7855         (dict_delete_run) Comment fixes.
7856         (trim_dictionary) Comment fixes.  Disallows scratch variables if
7857         GTSV_OPT_SAVE set in options.
7858         (read_from_get) Renamed get_source_read.
7859         (cancel_get) Renamed get_source_destroy_source.
7860         (glob var get_source) New var.
7861
7862         * inpt-pgm.c: (cmd_input_program) Sets vfm_source instead of
7863         read_active_file and cancel_input_pgm.
7864         (read_from_input_program) Renamed input_program_source_read.
7865         Simplified debug output.
7866         (cancel_input_program) Renamed
7867         input_program_source_destroy_source.
7868         (glob var input_program_source) New var.
7869
7870         * loop.c: (loop_1_trns_proc) Simplified debug output.
7871
7872         * main.c: (dump_token) Made eof output more explicit.
7873
7874         * sfm-read.c: (read_variables, dump_dictionary) Removed `lv'
7875         references.
7876
7877         * sort.c: (cmd_sort_cases) Disallows scratch variables.  Removed
7878         code for always-memory or always-disk cases.  malloc's case-list
7879         based on vfm_source_info.ncases.  Explicit support for
7880         memory_stream via memory_source_cases.
7881         (do_external_sort) Sets vfm_source instead of read_active_file and
7882         cancel_input_pgm.
7883         (allocate_file_handles) The temporary directory permissions are
7884         set to 0700 instead of 0777.
7885         (allocate_cases) Formatting fixes.  Simplified debug output.
7886         (output_record) Compacts the case if necessary before writing it
7887         out.
7888         (close_handle, open_handle_w) Simplified debug output.
7889         (write_initial_runs) Destroys vfm_sink, then sets it to
7890         sort_stream.  Writes records to memory based on
7891         vfm_sink_info.case_size.
7892         (write_to_sort_cases) Renamed sort_stream_write().
7893         (merge) Simplified error handling.  Simplified debug output.
7894         Formatting fixes.
7895         (read_from_external_sort) Renamed sort_stream_read().
7896         Reads records based on vfm_source_info.case_size.
7897         (sort_stream_write) Writes records to memory based on
7898         vfm_sink_info.case_size.
7899         (sort_stream_mode) New function.
7900         (glob var sort_stream) New variable.
7901
7902         * temporary.c: (cmd_temporary) Simplified debug output.
7903         (copy_variable) Removed references to `lv'.
7904
7905         * title.c: (get_title) Simplified debug output.
7906
7907         * var.h: Comment fixes.
7908         (struct get_proc) Removed member `lv'.
7909         (struct variable) Removed member `lv'.  Comment fixes.
7910         (glob vars read_active_file, write_active_file, cancel_input_pgm)
7911         Removed.
7912         (struct case_stream) New.
7913
7914         * vars-atr.c: (discard_variables) Changed cancel_input_pgm,
7915         read_active_file references to use vfm_source.
7916         (init_variable, replace_variable) Removed references to `lv'.
7917
7918         * vfm.c: Comment fixes.
7919         (glob var vfm_source, vfm_sink, vfm_source_info, vfm_sink_info)
7920         New variables.
7921         (static var queue, qh, qt, n_lag) Removed.  All references
7922         removed.
7923         (glob var compaction_necessary, compaction_nval, compaction_case,
7924         paging) New variables.
7925         (record_case) Removed.
7926         (procedure) Comment fixes.  Calls vfm_source->read() instead of
7927         read_active_file().
7928         (lag) Removed.
7929         (prepare_for_writing, arrange_compaction, make_temp_case,
7930         vector_initialization, setup_filter) New function.
7931         (open_active_file) Most of the code moved into the abovementioned
7932         new functions.  Now sets temp_dict to &default_dict if there is no
7933         temporary dictionary, for convenience.  New debug output.
7934         (close_active_file) Deals with changing the sink to the source.
7935         Calls finish_compaction().  Frees compaction_case.  Mostly
7936         rewritten.
7937         (glob vars disk_source_file, disk_sink_file) New vars.
7938         (destroy_active_file, read_from_memory) Removed.
7939         (disk_stream_init, disk_stream_read, disk_stream_write,
7940         disk_stream_mode, disk_stream_destroy_source,
7941         disk_stream_destroy_sink) New functions.
7942         (glob var vfm_disk_stream) New var.
7943         (glob vars memory_source_cases, memory_sink_cases,
7944         memory_sink_iter, memory_sink_max_cases) New vars.
7945         (memory_stream_init, memory_stream_read, memory_stream_write,
7946         memory_stream_mode, memory_stream_destroy_source,
7947         memory_stream_destroy_sink) New functions.
7948         (glob var vfm_memory_stream) New var.
7949         (write_case) Local var `i' renamed `cur_trns'; local var `retval'
7950         named `more_cases'.  Simplified debug output.  Otherwise mostly
7951         rewritten.
7952         (record_case) Moved into the stream drivers.  Removed.
7953         (transform) Removed (was dead code).
7954         (SPLIT_FILE_procfunc) s/vfm_replacement/vfm_sink_info/.  In the
7955         common case that the splits don't change, we don't need to copy
7956         the case into prev_case again--pointless.
7957         (compact_case) New function.
7958         (finish_compaction) New function.
7959
7960         * vfmP.h: Comment fixes.
7961         (DEV_* enum series) Removed. 
7962         (struct storage) Renamed `stream_info'.  Removed variant record.
7963         Removed `device' member.
7964
7965         * debug-print.h: New file.
7966         
7967 Sun Jun  8 01:12:38 1997  Ben Pfaff  <blp@gnu.org>
7968
7969         * autorecode.c: Turned off debugging.
7970
7971         * data-list.c: (destroy_dls) Closes the associated file handle.
7972
7973         * descript.q: (custom_variables) Added PV_NO_SCRATCH to
7974         parse_variables() options.
7975
7976         * dfm.c: (open_file_r) Removed gratuituous argument to msg() call.
7977
7978         * display.c: (display_variables) Really fixed null cell bug.
7979
7980         * file-handle.q: (fh_close_handle) Changed debugging message.
7981
7982         * frequencies.q: (custom_variables) Added PV_NO_SCRATCH to
7983         parse_variables() options.
7984
7985         * list.q: Added PV_NO_SCRATCH in q2c varlist options.
7986         (cmd_list) Fails if no variables specified.
7987         (determine_layout) Writes blank lines manually.
7988
7989         * loop.c: (loop_1_trns_proc) Made debugging code only print
7990         messages if debugging.
7991
7992         * q2c.c: (dump_subcommand) Appends sbc->message to SBC_VARLIST
7993         parse_variables() arguments.
7994         (main) Parses optional parenthesized options to varlist
7995         subcommands into sbc->message.
7996
7997         * sfm-read.c: Format fix.
7998
7999         * var.h: (FV_*) New enum series.
8000         (PV_*) New enum PV_NO_SCRATCH.
8001
8002         * vars-prs.c: (find_var) Removed.
8003         (fill_all_vars) Takes FV_* enum instead of boolean third
8004         argument.  Rewritten to deal with scratch as well as system
8005         variables.
8006         (parse_variables) Error message on scratch variable if
8007         PV_NO_SCRATCH set.
8008
8009         * vfm.c: (static var virt_begin_func) New var.
8010         (procedure) Sets up virt_begin_func.
8011         (SPLIT_FILE_procfunc) For the first case, calls virt_begin_func()
8012         after dump_splits().  For succeeding groups changes, calls
8013         virt_begin_func() instead of begin_func().      
8014
8015 Fri Jun  6 22:42:23 1997  Ben Pfaff  <blp@gnu.org>
8016
8017         * count.c, data-out.c, file-handle.q, list.q, loop.c: Turned off
8018         debugging.
8019
8020         * dfm.c: Added some debugging messages, disabled by default.
8021         (open_file_r) Fixed error message.
8022         (read_record) On eof on inline_file, instead of calling
8023         fh_close_handle(), simply jump to eof label like a normal file.
8024         Message fixes.
8025
8026         * display.c: Thin lines between rows for certain kinds of
8027         listing.  Fixed `null cell' bug.
8028
8029         * error.c: (failure) Flush stdout, stderr before failing.
8030
8031         * file-handle.q: (fh_close_handle) Added debugging message.
8032
8033         * frequencies.q: (dump_full) Bottom line extends across entire
8034         table width.  Changed title formatting.
8035         (dump_condensed) Changed title formatting.
8036         (dump_statistics) Fixed title formatting.
8037
8038         * glob.c: (init_glob) Moved initialization of cur_proc out of #if.
8039         Sets default value of set_format.
8040
8041         * list.q: (cmd_list) Calls blank_line() before determine_layout().
8042         Passes write_all_headers() to procedure() as pre-group func.
8043         (write_all_headers) New function.
8044         (determine_layout) Removed calls to write_header().
8045         Calls blank_line() before and after write_fallback_headers().
8046
8047         * recode.c: (recode_trns_free) Only attempts to free head->map if
8048         non-NULL.
8049
8050         * sfm-read.c: (read_variables) Allows `#' at beginning of system
8051         file variable names but gives a warning.  Sets `left' based on
8052         first character being/not being `#'.  On lossage frees dict->var.
8053
8054         * som-high.c: (som_draw_title) Simplified title formatting.
8055
8056         * vfm.c: (dump_splits) Fixed and changed splits formatting.
8057
8058 Thu Jun  5 22:51:15 1997  Ben Pfaff  <blp@gnu.org>
8059
8060         * autorecode.c: (cmd_autorecode) Sets h_trans to NULL at
8061         beginning.  Frees v_src, v_dest on successful exit.  Frees
8062         h_trans[*], h_trans on lossage.
8063         (recode) Frees h_trans[*], h_trans.
8064
8065         * dfm.c: (dfm_close) Formatting change.
8066         (open_inline_file) Now passed a dfm_fhuser_ext to initialize; no
8067         longer allocates its own in inline_file.
8068         (open_file_r) Passes the local dfm_fhuser_ext to
8069         open_inline_file().
8070         (open_file_w) Message fix. 
8071         (read_record) Buffer reallocation strategy changed.  Frees
8072         ext->line even in inline_file to prevent leaks.
8073         (dfm_put_record) Fixed bug where `ext' was cached before the file
8074         was opened and thus it would be NULL when the file really was
8075         open.
8076         (cmd_begin_data) Sets up inline_file basics itself, then calls
8077         open_inline_file() for the dfm_fhuser_ext.  Formatting fix.
8078
8079         * list.q: (write_line) Formatting fix.
8080         (clean_up) Minor strategy change.  Sets proportional font after
8081         finishing cleanup.
8082         (determine_layout) Sets fixed font before writing regular headers,
8083         or after writing fallback headers.
8084
8085         * modify-vars.c: (cmd_modify_vars) Frees variable lists for DROP
8086         and KEEP vars after using them.
8087
8088         * postscript.c: (ps_init_driver) Frees x->family.
8089         (postopen) When loading fonts, free the temporary font name buffer
8090         after using it.
8091         (ps_text_set_font_by_position) Free temporary font name buffer
8092         after using it.
8093         (text) Fixed code that calculated `lig' so that `lig' always gets
8094         initialized.  Formatting fix.
8095
8096         * som-low.c: (get_cell_size, som_get_table_size) `prop_height' ->
8097         `font_height'.
8098         [GLOBAL_DEBUGGIGN] (check_table) Use arena_alloc() to allocate
8099         cells, not xmalloc(), so that the cells will get destroyed
8100         automatically.
8101
8102         * sysfile-info.c: (cmd_sysfile_info) Frees the dictionary after
8103         using it.
8104
8105 Tue Jun  3 23:33:22 1997  Ben Pfaff  <blp@gnu.org>
8106
8107         * ascii.c: (ascii_text_draw) Always sets metrics for strings that
8108         are drawn.
8109
8110         * dfm.c: Comment fix.
8111
8112         * list.q: Comment fixes.  Include somP.h.  Removed static vars
8113         table, n_columns, n_rows, part.  New struct list_ext.  New static
8114         var line_buf.
8115         (n_lines_remaining, n_chars_width, write_line) New functions.
8116         (cmd_list, list_cases) Rewritten.
8117         (begin_row, end_row, flush_table) Removed.
8118         (write_header, clean_up, write_varname, write_fallback_headers,
8119         determine_layout) New functions.
8120
8121         * output.c: (outp_iterate_enabled_drivers) Minor reformat.
8122
8123         * output.h: Comment fix.
8124
8125         * postscript.c: Comment fix.
8126         (struct ps_driver_ext) Removed prop_size, fixed_size members;
8127         added font_size.  All references changed.
8128         (ps_init_driver) Initializes font_size.  Simplified space checking
8129         code.
8130         (static var option_tab[]) Removed prop-size, fixed-size; added
8131         font-size.
8132         (ps_option) Handles font_size.
8133
8134         * som-high.c: Moved prototypes into somP.h.
8135         (som_init_driver) New function.
8136         (som_submit_table) Moved some code into new function
8137         som_init_driver().
8138         (build_target) Moved some code into new function
8139         som_internal_eject_page().
8140         (som_eject_page) Uses som_internal_eject_page().
8141         (som_internal_eject_page) New function.
8142
8143         * som-low.c: Moved prototypes into somP.h.
8144
8145         * som.h: Formatting fixes.
8146
8147         * somP.h: (struct som_driver_ext) Removed em_width;
8148         added prop_em_width, fixed_width.
8149
8150 Mon Jun  2 14:25:25 1997  Ben Pfaff  <blp@gnu.org>
8151
8152         * Makefile.am: Added `localedir' definition.  Added
8153         -DLOCALEDIR="..." to DEFS.  Added -I. to INCLUDES.
8154
8155         * ascii.c: (macro draw_line) Fixed capitalization.
8156
8157         * ascii.c, autorecode.c, cases.c, cmdline.c, command.c, common.c,
8158         compute.c, count.c, data-in.c, data-list.c, data-out.c,
8159         descript.q, dfm.c, display.c, do-if.c, error.c, expr-evl.c,
8160         expr-opt.c, expr-prs.c, file-handle.q, file-type.c, filename.c,
8161         formats.c, frequencies.q, get.c, getline.c, glob.c, groff-font.c,
8162         hash.c, heap.c, include.c, inpt-pgm.c, lexer.c, list.q, loop.c,
8163         main.c, mis-val.c, misc.c, modify-vars.c, numeric.c, output.c,
8164         postscript.c, print.c, q2c.c, recode.c, rename-vars.c, repeat.c,
8165         sample.c, sel-if.c, sfm-read.c, sfm-write.c, sfmP.h, som-frnt.c,
8166         som-high.c, som-low.c, sort.c, split-file.c, sysfile-info.c,
8167         temporary.c, title.c, tokens.h, val-labs.c, var-labs.c,
8168         vars-atr.c, vars-prs.c, vector.c, vfm.c, weight.c: Marked strings
8169         for internationlization.
8170
8171         * glob.c: [HAVE_LOCALE_H] Includes locale.h.
8172
8173 Sun Jun  1 23:31:18 1997  Ben Pfaff  <blp@gnu.org>
8174
8175         * do-if.c, sort.c, val-labs.c: Comment fixes.
8176
8177         * glob.c: (init_glob) Uncommented, updated i18n support.
8178         
8179         * arena.c, ascii.c, data-in.c, descript.q, error.c, expr-evl.c,
8180         expr-opt.c, expr-prs.c, filename.c, frequencies.q, groff-font.c,
8181         output.c, postscript.c, sfm-read.c, som-high.c, vars-prs.c: Made
8182         the declarations of macros taking arguments a lot nicer.
8183
8184 Sun Jun  1 17:22:04 1997  Ben Pfaff  <blp@gnu.org>
8185
8186         * error.h: Removed CE, CW aliases for SE, SW.
8187
8188         * q2c.c: Removed explicit streq() definition since it's duplicated
8189         in str.h.
8190         
8191         * approx.h, error.h, font.h, hash.h, misc.h, output.h, somP.h,
8192         stats.h, str.h, tokens.h: Made the declarations of macros taking
8193         arguments a lot nicer-looking of <pinard@iro.umontreal.ca>.
8194         Comment fixes.
8195
8196 Sun Jun  1 12:02:06 1997  Ben Pfaff  <blp@gnu.org>
8197
8198         * cmdline.c: Comment fixes.
8199         (pick_compat) Changed return type to int.  Now, instead of setting
8200         glob var `compat' to the emulation, returns the emulation.  All
8201         references changed.
8202         (parse_command_line) Added terminating null to end of
8203         `long_options' array definition.
8204         (pre_syntax_message) Fixes.
8205         (usage) Shows the default emulation in the syntax message by
8206         calling pick_compat().
8207
8208         * getline.c: (getl_add_include_dir) Separates paths with
8209         PATH_DELIMITER, not DIR_SEPARATOR.
8210
8211         * glob.c: (init_glob) Fixed references to DEFAULT_VER_PCP40,
8212         DEFAULT_VER_WIN61, DEFAULT_VER_X40.
8213
8214         * output.c: (outp_configure_macro) Make earlier definitions for a
8215         particular key override later ones for the same key.
8216         
8217 Fri May 30 19:40:49 1997  Ben Pfaff  <blp@gnu.org>
8218
8219         * ascii.c: Comment fixes.
8220
8221         * output.c: (outp_get_paper_size)
8222         s/STAT_OUTPUT_INIT_FILE/STAT_OUTPUT_PAPERSIZE_FILE/.
8223         
8224 Sun May 25 22:34:07 1997  Ben Pfaff  <blp@gnu.org>
8225
8226         * ascii.c, postscript.c, sfm-read.c, sfm-write.c, sort.c: Include
8227         <errno.h>.  GNU libc 2 enforces this!
8228
8229         * command.c: (parse_cmd) Fixed problem with `else' clause being
8230         paired with wrong `if'.  Comment fix.
8231
8232 Fri May  9 16:53:52 1997  Ben Pfaff  <blp@gnu.org>
8233
8234         * getline.c: [!HAVE_LIBREADLINE] (read_console) Changed
8235         blp_getline() to getline().
8236
8237         * output.c: (outp_eval_dimension) Changed the fix from last time;
8238         there was no variable `a'.
8239
8240         * q2c.c: (get_line) Fixed boundary condition overrun bug.
8241
8242 Mon May  5 21:58:22 1997  Ben Pfaff  <blp@gnu.org>
8243
8244         * output.c: (outp_evaluate_dimension) Fixed handling of negative
8245         numbers having fractional parts.  Added case of a fraction without
8246         a whole-number part.
8247
8248 Fri May  2 22:08:05 1997  Ben Pfaff  <blp@gnu.org>
8249
8250         * ascii.c: (ascii_text_get_font_position) Removed.
8251
8252         * expr.h, exprP.h: Disabled debugging.
8253
8254         * groff-font.c, postscript.c: Changed `groff' to `Groff' in
8255         several places.
8256
8257         * output.h: (struct outp_class_struct) Removed
8258         text_get_font_position method.  All references deleted.
8259
8260         * postscript.c: Big change here.  Fontmaps were completely
8261         eliminated because of a change in philosophy.  Comment fixes.
8262         (struct ps_fontmap, ps2dit_map, font_family, dit2family_map)
8263         Removed.
8264         (struct ps_driver_ext) `position', `fontmap', `prop_name',
8265         `fixed_name' members removed.  New members `prop_family',
8266         `fixed_family'.  `family' member changed to type char *.
8267         (static var ps_fontmaps) Removed.
8268         () Removed.
8269         (ps_init_driver) Removed obsolete references, updated.
8270         Initializes `translate_x', `translate_y', `scale'.  Doesn't read
8271         fontmap, of course.  Refers to font names through internal_name
8272         rather than subversive means.  Frees proper items.
8273         (static var option_tab[]) Removed `fontmap-file' option; renamed
8274         `fixed-font', `prop-font'.
8275         (ps_option) Corresponds to option_tab[].
8276         (read_fontmap, release_fontmap, ps_to_dit, compare_ps2dit,
8277         hash_ps2dit, compare_dit2family, hash_dit2family, compare_family,
8278         hash_family) Removed.
8279         (postopen) Generates font names from family names.  Gets
8280         PostScript font name properly.  New prologue file comment `!!!'
8281         style.
8282         (ps_open_page) Adds translate_x, translate_y to BP prologue
8283         function; gives SF argument floating-point format.
8284         (ps_text_set_font_by_name) Doesn't try to map PostScript->Groff
8285         font name.  Doesn't change font family.
8286         (ps_text_set_font_by_position) Generates Groff font name from font
8287         family name instead of through table lookup.
8288         (ps_text_set_font_by_family) Renamed `ps_text_set_font_family',
8289         all references changed.  Reduced to simple string assignment.
8290         (ps_get_font_name) Removed.
8291         (ps_get_font_family) Reduced to string return.
8292         (text) Doesn't save `position' since it no longer exists.  Ugly
8293         kluge to save font family--fix soon?
8294         (load_font) Removed PostScript name argument.
8295         
8296 Thu May  1 14:58:59 1997  Ben Pfaff  <blp@gnu.org>
8297
8298         * postscript.c: Comment fix.
8299         (ps_open_page) Puts scale factor in PostScript output.
8300         
8301 Sat Apr 26 11:49:32 1997  Ben Pfaff  <blp@gnu.org>
8302
8303         * Makefile.am: Distcleans q2c.
8304
8305 Wed Apr 23 21:33:48 1997  Ben Pfaff  <blp@gnu.org>
8306
8307         * ascii.c: (delineate) Sets text size even if width is zero.
8308
8309         * command.c: Comment fix.
8310         (static var cmd_table[]) Re-enabled EVALUATE command.
8311         (parse_cmd) Lotsa comment fixes.  Fixed infinite loop in parsing
8312         of comments in script files.  Now more liberal on criteria for
8313         performing a state transition--if *anything* happened correctly,
8314         not just if *everything* happened correctly.
8315
8316         * data-out.c: (convert_F) Comment fix.  Why in the fsck does
8317         Checker segfault on formatting large numbers and why in the fsck
8318         hadn't I noticed this before?
8319
8320         * expr.h, exprP.h: No longer turn off GLOBAL_DEBUGGING.
8321
8322         * list.q: (cmd_list) Commented out the actual output routine
8323         because of various problems.  Probably will abandon the idea of
8324         using the general `crushed tables' for the LIST procedure.
8325
8326         * temporary.c: (restore_dictionary) Sets var_by_name to NULL after
8327         clearing it.  Allocates a new var_by_name dictionary before trying
8328         to add members to it.
8329
8330         * vars-atr.c: [DEBUGGING] (dump_one_var_node) Removed argument
8331         `sib'.  Changed type of `node' argument.
8332         [DEBUGGING] (dump_var_tree) Replaced avlwalk() with
8333         avl_walk_inorder().
8334         (clear_variable) Only dumps the var tree if var_by_name non-NULL.
8335         [DEBUGGING] Only deletes the variable from var_by_name if that var
8336         non-NULL.
8337
8338 Fri Apr 18 16:48:41 1997  Ben Pfaff  <blp@gnu.org>
8339
8340         * Makefile.am: Added include files to SOURCES.  Added
8341         frequencies.q to EXTRA_DIST.  Removed include/ from INCLUDES.  Now
8342         includes rules for q2c.  Added `boast' target.
8343
8344 Fri Apr 18 15:42:22 1997  Ben Pfaff  <blp@gnu.org>
8345
8346         * Makefile.am: Maintainer-clean Makefile.in.
8347         
8348         * Makefile.am: Fixed redundant EXTRA_DIST line.
8349
8350         * ascii.c: Comment fixes.
8351         (ascii_line_vert) Fixed overly aggressive range check.
8352
8353         * display.c: Removed dead code.
8354
8355         * list.q: Turn debugging on.
8356         (flush_table) New debug code.
8357
8358         * sfm-read.c: (read_value_labels) malloc's the structure before
8359         trying to assign to its members.
8360
8361         * sfm-write.c: Comment fix.
8362
8363         * som-high.c: (som_submit_table) Sets som.t and som.d on each call
8364         to output_table().
8365         (output_table) No arguments anymore--gets them through `som'
8366         global.  New debug code.  In crushed tables, now sets `htv' as
8367         well as `hv' to avoid bad confusion later.
8368         (dump_crush_page) New debug code.
8369
8370         * som-low.c: (som_dump_crush_page) New debug code.
8371
8372 Thu Mar 27 01:11:29 1997  Ben Pfaff  <blp@gnu.org>
8373
8374         All source files: Broke long lines into multiple lines.
8375         
8376         * ascii.c: (ascii_close_page) Uses host_system var in place of
8377         HOST_SYSTEM constant.
8378
8379         * cmdline.c: (var syntax_message[]) Broke into
8380         pre_syntax_message[] and post_syntax_message[].
8381         (usage) Outputs both parts, separated by driver list.
8382
8383         * error.h: Fixed broken formatting.
8384
8385         * expr-opt.c: (str_search, str_rsearch) New functions.
8386
8387         * misc.c: (blp_getdelim) Removed.  All references changed to
8388         `getdelim'.
8389         (str_search, str_rsearch) Removed.
8390         (memrmem) New function.
8391
8392         * misc.h: (blp_getline) Removed.  All reference changed to
8393         `getline'.
8394
8395         * stat.h: New file.
8396
8397         * filename.c: Includes "stat.h", not <sys/stat.h>.
8398         (blp_getenv) Uses host_system var instead of HOST_SYSTEM constant.
8399
8400         * output.c: (outp_list_classes) Changed output formatting.
8401
8402         * sfm-write.c: (write_header) Uses host_system var instead of
8403         HOST_SYSTEM constant.
8404         (write_rec_7_34) Extracts version numbers from the version string.
8405         Untested.
8406
8407         * sort.c: Includes "stat.h", not <sys/stat.h>.
8408
8409         * str.c: (strcasecmp) Removed.
8410
8411         * title.c: (cmd_document) Uses host_system var instead of
8412         HOST_SYSTEM constant.
8413
8414         * version.c: Generated on-the-fly by the Makefile instead of being
8415         static.
8416
8417         * str.h: Comment fixes.  Doesn't substitute for missing memmove or
8418         memcpy.
8419         [!HAVE_STRNCASECMP] Declares strncasecmp().
8420
8421         * version.h: Removed stray character.  Comment fixes.
8422         (vars host_system, build_system) New vars.
8423
8424 Mon Mar 24 21:47:31 1997  Ben Pfaff  <blp@gnu.org>
8425
8426         * Most source files: Changed formatting of copyright notice; fixed
8427         FSF address; reformatted to better conform to GNU standards;
8428         comment fixes.  Added markups to prevent GNU indent from messing
8429         up my beautiful formatting :-).
8430         
8431         * q2c.c: (get_line) Ignores lines that begin with `/* *INDENT' so
8432         that GNU indent markups can be passed through without problems.
8433
8434 Wed Feb 19 21:30:31 1997  Ben Pfaff  <blp@gnu.org>
8435
8436         * get.c: Turned off debugging.
8437
8438         * glob.c: (init_glob) Turned on save-file compression by default.
8439
8440         * sfm-write.c: (sfm_write_case) Fixed bug which resulted in less
8441         compression than was possible in save files.
8442
8443 Sun Feb 16 20:57:20 1997  Ben Pfaff  <blp@gnu.org>
8444
8445         * data-out.c: (convert_F) Comment fixes.  Debug message fixes.
8446
8447         * frequencies.q: Removed Fiasco extensions.  Updated calculation
8448         algorithms.  Polished output format. 
8449         (struct frq_info_struct) Removed members `max_degree', `min_n',
8450         all references removed.
8451         (macro frq_extensions) Removed.
8452         (static vars min_n, max_degree) Removed, all references removed.
8453         (internal_cmd_frequencies) Doesn't handle extensions.  Doesn't
8454         calculate `min_n', `max_degree'.
8455         (postcalc) Passes new arg to dump_statistics().
8456         (dump_full) Honor NOLABEL option.  Buggy?  Adds variable name
8457         title.
8458         (dump_condensed) Adds variable name title.
8459         (sum_freqs) Removed.
8460         (calc_stats) Updated calculation algorithm.
8461         (dump_statistics) Removed warning for too-few observations.
8462         Changed table formatting.  Adds variable name title if passed new
8463         arg is nonzero.
8464
8465         * output.h: Comment fix.
8466
8467         * recode.c, sample.c, sort.c: Disabled debug code.
8468
8469         * som-frnt.c: (som_set_value, som_set_float, som_set_text)
8470         Improved debug code.
8471
8472         * var.h: (enum series frq_*) Removed Fiasco extensions.
8473
8474 Sat Feb 15 21:26:53 1997  Ben Pfaff  <blp@gnu.org>
8475
8476         * command.c: Added PROCESS IF to command table.
8477
8478         * Lots & lots of places, removed checks for NULLs preceding calls
8479         to free_expression(), which itself checks.
8480
8481         * descript.q: Removed Fiasco extensions.  Removed optimizations
8482         for non-weighted active files.  Implemented some options.
8483         Finished polishing output format.  Comment fixes.  Merged
8484         `descript.g'.
8485         (static vars n_glob_miss_list, n_glob_valid, n_glob_missing,
8486         max_degree, min_n) Removed.
8487         (macro dsc_extensions) Removed.
8488         (struct dsc_info_struct) Removed `min_n' member, all references
8489         fixed.
8490         (internal_cmd_descriptives) Removed calculation of min_n,
8491         max_degree.  Only deals with one `calc' routine instead of two
8492         flavors.
8493         (precalc) Eliminated redundancy.  Updated for changes to
8494         descriptives_proc structure.
8495         (calc) Moved here from `descript.g'.  Rewritten to calculate
8496         statistics via `moments about the mean' rather than by summing,
8497         summing squares, summing cubes, and so on.
8498         (postcalc) Rewritten for new-style statistical calculation.
8499         (display) Removed support for displaying variables across rows.
8500         No longer crushes the descriptives table.  Removed ancient code.
8501         Added display of N, by variable and listwise.
8502
8503         * descript.g: Removed; merged into `descript.q'.
8504
8505         * expr-evl.c: (evaluate_expression) Now returns a double.  For
8506         numeric results, it returns the result as well as storing it in
8507         the passed `value' structure if non-NULL.  For string results it
8508         just returns 0.0 and it must be passed non-NULL.  Many references
8509         to this function were optimized by use of this change, especially
8510         but not exclusively in `compute.c'.
8511
8512         * frequencies.g: Comment fix.
8513
8514         * glob.c: (glob var process_if_expr) New global var.
8515
8516         * postscript.c: (static var option_tab[]) Corrected entry for
8517         `fixed_size'.
8518         (postopen) Sets x->size to x->prop_size.
8519         (ps_text_set_font_by_name) Sets font size as well as typeface for
8520         PROP and FIXED fonts.
8521         
8522         * sel-if.c: (cmd_process_if) New function.
8523
8524         * sfm-write.c: (struct sfm_fhuser_ext) New member `n_cases'.
8525         (sfm_write_dictionary) Sets `n_cases' to 0.
8526         (sfm_write_case) Increments `n_cases'.
8527         (sfm_close) Attempts to seek the system file back to the header
8528         and write the number of cases in its proper slot.
8529
8530         * som-frnt.c: (som_insert_table) Masks off expansion options since
8531         only SOPT_X_NORM seems to work sensibly.
8532
8533         * som-low.c: (get_cell_size) Fixed bug when a table cell was sized
8534         with a `fixed' value of 2.
8535
8536         * sort.c: (cmd_sort_cases) Cancels PROCESS IF.
8537
8538         * sysfile-info.c: (cmd_sysfile_info) Doesn't display more than 10
8539         value labels; uses SOPT_NONE instead of SOPT_X_BOTH.
8540
8541         * var.h: (enum series dsc_*) Removed Fiasco extensions.
8542         (struct descriptives_proc) Removed `miss_noweight'; new members
8543         `X_bar', `M2', `M3', `M4', `min', `max'.
8544
8545         * vars-atr.c: (discard_variables) Cancels PROCESS IF.
8546
8547         * vfm.c: (close_active_file) Cancels PROCESS IF.
8548         (write_case) Doesn't process cases unselected by PROCESS IF.
8549
8550 Fri Feb 14 23:32:58 1997  Ben Pfaff  <blp@gnu.org>
8551
8552         * glob.c: (glob var err) Removed.
8553
8554         * sysfile-info.c: (cmd_sysfile_info) When adjusting table size,
8555         doesn't have to take into account number of value labels since
8556         they're in a subtable anyway.  Also, doesn't display more than 10
8557         value labels since we can't yet break pages in subtables.
8558
8559 Tue Feb  4 15:15:50 1997  Ben Pfaff  <blp@gnu.org>
8560
8561         * som-frnt.c: (som_change_table_size) Simple change for elegance
8562         that shouldn't change behavior.
8563         (som_set_value) Comment fix.
8564
8565         * som-high.c: (som_submit_table) Message fix.
8566
8567 Wed Jan 22 21:54:00 1997  Ben Pfaff  <blp@gnu.org>
8568
8569         * command.c: Added SYSFILE INFO to command table.
8570
8571         * file-handle.q: (fh_handle_filename) New function.
8572
8573         * get.c: (save_trns_proc) Fixed a bug in padding of output data
8574         with spaces.
8575
8576         * main.c: (parse) New return value for command functions, -3.
8577
8578         * misc.h: Comment fix.
8579
8580         * output.h: Comment fixes.
8581         (macro COMPONENTS) Removed.
8582
8583         * postscript.c: (write_text) Modified literal_chars[] so that `('
8584         and ')' are not written to the output in strings as literals.
8585
8586         * sfm-read.c: (sfm_read_dictionary) New argument.
8587         (read_header) New argument.  Sets the information structure's
8588         values from the header information.  
8589         (read_variables) [__CHECKER__] Redefines isalnum()--some sort of
8590         bizarre Checker problem, I guess.
8591         (read_variables) Proper cleanup on lossage.
8592
8593         * sfm.h: (struct sfm_read_info) New struct for use by
8594         sfm_read_dictionary().
8595
8596         * som-frnt.c: (som_create_table) New argument CREATE_FLAGS,
8597         currently used just for tables that can be dynamically resized and
8598         thus have to be allocated with arena_malloc() instead of
8599         arena_alloc().  All references changed.
8600         (som_change_table_size) New function.
8601         (som_insert_table) Bugfix: now inserts `cell', not `c'!
8602
8603         * som-high.c: [GLOBAL_DEBUGGING] (check_table) Moved to som-low.c.
8604         (som_submit_table) [GLOBAL_DEBUGGING] Doesn't call check_table()
8605         any more.
8606
8607         * som-low.c: (draw_cell) Calls draw_table_cell() for SCON_TABLE
8608         cells.
8609         (draw_intersection) Now takes an argument specifying the table in
8610         question.  All references changed.
8611         (draw_table_cell) New function.
8612         (som_get_table_size) [GLOBAL_DEBUGGING] Calls check_table().
8613         (som_get_table_size) Many nice new explanatory comments.
8614         [GLOBAL_DEBUGGING] (check_table) Moved here from som-high.c.
8615
8616         * som.h: New enum series SOM_CREATE_* for use as create flags with
8617         som_create_table().
8618
8619         * str.h: Moved a comment here from TODO.
8620
8621         * sysfile-info.c: New file.  Reference implementation.
8622
8623 Sun Jan 19 14:22:11 1997  Ben Pfaff  <blp@gnu.org>
8624
8625         * command.c: Added RENAME VARIABLES to table of commands.
8626
8627         * data-in.c: (dls_error) Sets `cust_field'.
8628         (parse_N) Message fix.
8629         (parse_day_count) New function.
8630         (to_roman) Never outputs VX as a `short form' of V.
8631         (parse_month) Fixed parsing of Roman numerals.
8632         (parse_trailer) Message fix.
8633         (parse_DATE, parse_ADATE, parse_EDATE, parse_SDATE, parse_JDATE,
8634         parse_QYR, parse_MOYR, parse_WKYR, parse_DTIME) Issue a message if
8635         the date is invalid.
8636         (parse_SDATE) Fixed swapped day, year.
8637         (parse_JDATE) Fixed bug for dates in 1582.
8638         (parse_DTIME) Allows days not between 1 and 31.
8639         (parse_numeric) Makes local copy of f.type for easier usage.
8640         FMT_DOLLAR fixed.
8641
8642         * data-out.c: (convert_F) When outputting as scientific, properly
8643         sets f.type as fp->type.
8644         (insert_commas) Fixed operator precedence problem with setting of
8645         nitems.  Changed strcpy to memcpy (no null terminator). 
8646         (convert_date) Fixed FMT_JDATE: added 1900 to year.
8647         (convert_CCx) Essentially rewritten, but now it works.
8648
8649         * display.c: (cmd_display) Added DISPLAY FILE LABEL (undocumented
8650         feature of Fiasco).
8651         (display_documents) Implemented.
8652
8653         * error.c: (glob var cust_field) New var.
8654         (vmsg) Displays cust_field as part of message classes DE and DW.
8655
8656         * formats.c: (debug_print) Fixed to compile under updated
8657         dictionary format.
8658
8659         * get.c: (cmd_get, cmd_save_internal) Close file handle on
8660         failure.
8661
8662         * misc.c: (parse_format_specifier) Formatting fix.
8663
8664         * modify-vars.c: (struct var_modification) Renamed `n_reorder' as
8665         `n_rename' for clarity.
8666         (cmd_modify_vars) Initializes `forward' and `positional' at
8667         appropriate times.  Frees lists of vars to rename on failure.
8668         Comment fix.  Frees memory on success.  
8669         (rearrange_dict) Simplified `for' loop condition.
8670
8671         * rename-vars.c: New file (reference implementation).
8672         
8673         * set.q: (internal_cmd_set) Fixed `emu' test condition.
8674
8675         * sfm-read.c: (read_header) File label is created only if file
8676         label in file is not blank.
8677         (read_variables) Initializes `dict' local variable.
8678         (read_documents) Proper behavior on lossage.
8679
8680         * sfm-write.c: (write_header) Doesn't blank out the file label
8681         (why was this here to begin with?!)
8682
8683         * temporary.c: (save_dictionary) File label is copied only if
8684         non-NULL.  Doesn't try to xstrdup() dictionary documents.
8685         Adapted so as to not irritate Checker.
8686         (free_dictionary) Only destroys var_by_name if non-NULL.
8687
8688         * title.c: (cmd_file_label) Doesn't skip FILE, LABEL tokens.
8689         (cmd_document) Doesn't skip DOCUMENT token.  Adds some header
8690         lines to the document, indents the document.  Also, it works now.
8691         (add_document_line) New function.
8692
8693         * var.h: (struct dictionary) Reordering.
8694
8695         * vars-prs.c: (parse_variables) On lossage, only local_free()'s
8696         bits if it was allocated to begin with.
8697
8698 Thu Jan 16 13:08:57 1997  Ben Pfaff  <blp@gnu.org>
8699
8700         * command.c: Added MODIFY VARS to list of commands.
8701
8702         * configure.in: Updated custom macros for autoconf 2.12.  Removed
8703         mmap reference; fixed termcap library reference.
8704
8705         * display.c: (display_variables) Fixed a few bugs although it's
8706         still not well written.
8707
8708         * error.c: [!__CHECKER__] (chkr_disp_call_chain) New function.
8709         (induce_segfault) Calls chkr_disp_call_chain() instead of
8710         inducing an actual SIGSEGV.
8711
8712         * expr-opt.c: (evaluate_tree) Swapped order of arguments to
8713         str_search() and str_rsearch().  Fixed tests for matches on
8714         OP_INDEX and OP_RINDEX.
8715
8716         * filename.c: (good_getcwd) Removed as the new libc for Checker
8717         doesn't contain this bug, apparently.
8718
8719         * misc.c: (str_search, str_rsearch) Changed order of arguments for
8720         consistency with GNU memmem.
8721         (blp_getdelim) Changed `len' from `int' to `size_t'.
8722
8723         * modify-vars.c: Reference implementation.
8724
8725         * som-frnt.c: (zero_length) New global var.
8726         (som_create_table) Message fix.
8727
8728         * som.h: Added gcc attributions to som_set_text(),
8729         som_output_text() prototypes.  blank_line() refers to
8730         zero_length[] instead of a literal null string to suppress gcc
8731         warnings.
8732
8733         * sort.c: (do_external_sort) Fixed fencepost error on lossage.
8734         (allocate_cases) Decrements x_max so the last element of x[] can
8735         be used by the algorithm.
8736
8737         * var.h: Changed minor details of `variable' declaration.  
8738         (struct modify_vars_proc) New struct.
8739         (struct variable) Added field p.mfv.
8740
8741         * vars-atr.c: Comment fix.
8742
8743         * vars-prs.c: (fill_all_vars) More optimal implementation.
8744
8745         * vfm.c: (dump_splits) Sets the last byte of temp_buf to a null
8746         character, which it shouldn't have to do but printf() seems to
8747         read the null byte even though I supply a maximum length...
8748
8749 Fri Jan 10 20:22:08 1997  Ben Pfaff  <blp@gnu.org>
8750
8751         * command.c: Removed command alias X for QUIT.
8752         (parse_cmd) Fixed comment parsing.
8753
8754         * dfm.c: (struct dfm_fhuser_ext) Fields `len', `size' are now of
8755         type size_t.
8756         (read_record) Fixed references to len, size.
8757         (dfm_get_record) Restructured.
8758
8759         * file-handle.h: (struct file_handle) Field `lrecl' now of type
8760         size_t.
8761
8762         * file-handle.q: (internal_cmd_file_handle) Checks for nonpositive
8763         record length.
8764
8765         * modify-vars.c: New file.  Not complete.
8766         
8767         * set.q: (set_ccx) Fixed operator precedence problem regarding ^
8768         and ==.
8769
8770         * sfm-read.c: (bswap_flt64, read_header, write_variable) Fixed
8771         problems caused by int/size_t differences.
8772
8773         * sort.c: (output_record, merge_once) Cast `size_t's to `int's in
8774         appropriate spots.
8775
8776         * str.c: (strcasecmp) Fixed bug that cropped up when the strings
8777         being compared were of equal length.
8778
8779 Thu Jan  2 19:08:23 1997  Ben Pfaff  <blp@gnu.org>
8780
8781         * command.c: Added DOCUMENT, DROP DOCUMENTS, FILE LABEL.
8782
8783         * lexer.c: (get_dotted_rest_of_line) New function.
8784
8785         * sel-if.c: (cmd_filter) Cannot choose string or scratch variables
8786         as filters.
8787
8788         * sfm-read.c: (sfm_read_dictionary) Calls read_documents() to read
8789         type 6 records.  Frees the dictionary properly.
8790         (read_header) Initializes the dictionary instead of letting
8791         read_variables() do it.  Sets the dictionary file label from the
8792         system file.
8793         (read_documents) New function.
8794
8795         * sfm-write.c: (sfm_write_dictionary) Calls write_documents() to
8796         write type 6 record if appropriate.
8797         (write_header) Writes file label from dictionary.
8798         (write_documents) New function.
8799
8800         * temporary.c: (save_dictionary, restore_dictionary,
8801         free_dictionary) Properly handle new fields in dictionary struct.
8802
8803         * title.c: (get_title) Returns after failure().
8804         (cmd_file_label, cmd_document, cmd_drop_documents) New functions
8805         for new commands FILE LABEL, DOCUMENT, DROP DOCUMENTS.  Untested.
8806
8807         * var.h: (struct dictionary) New fields `label', `n_documents',
8808         `documents'.
8809
8810 Wed Jan  1 22:08:10 1997  Ben Pfaff  <blp@gnu.org>
8811
8812         * command.c: Added FILTER to list of commands.
8813
8814         * frequencies.g: [WEIGHTING] Removed test for weighting!=-1 since
8815         it's always true.
8816
8817         * get.c: (cmd_save_internal) Removed weighting code since it's now
8818         handled by sfm-write.c.  Properly commented out debug code.
8819
8820         * glob.c: (glob var weighting) Removed.
8821
8822         * sel-if.c: Comment fixes.
8823         (cmd_filter) New function.
8824
8825         * sfm-read.c: (struct sfm_fhuser_ext) New field `weight_index'.
8826         (sfm_read_dictionary) Sets weighting variable direct in the
8827         created dictionary now.  (Apparently we previously didn't support
8828         weighting on GET?)
8829         (read_header) Sets weight_index field in sfm_fhuser_ext from
8830         header read from disk.
8831
8832         * sfm-write.c: (sfm_write_dictionary) Comment fix.
8833         (write_header) Now sets the weighting in the header from the
8834         passed primary dictionary instead of from the sfm_write_info.
8835
8836         * sfm.h: (struct sfm_write_info) Removed field `weight'.
8837
8838         * som-high.c: (dump_crush_table) Fixed a couple of assertions that
8839         broke on boundary conditions.
8840
8841         * var.h: (struct dictionary) New fields `weight_var',
8842         `weight_index', and `filter_var'.
8843         (glob var weighting) Removed.  This is now part of struct
8844         dictionary.  All references changed; the less mechanical changes
8845         are described above.
8846
8847         * vars-atr.c: (find_dict_variable) New function.
8848
8849         * vfm.c: (static var filter_index) New variable.
8850         (open_active_file) Initializes filter_index from default_dict.
8851         (write_case) Calls proc_func() only if the filter variable is
8852         nonzero; this implements FILTER behavior.
8853
8854         * weight.c: (static var weight_varname) Removed.
8855         (cmd_weight) Modified default_dict instead of glob vars.
8856         (update_weighting) Changed the signature to modify a dictionary
8857         instead of glob vars.  Now returns the weighting variable.
8858         (get_weighting_variable) Removed; its function is absorbed by
8859         update_weighting().
8860         (stop_weighting) Operates on a dictionary now.
8861
8862 Wed Jan  1 17:00:59 1997  Ben Pfaff  <blp@gnu.org>
8863
8864         * sort.c: Removed debugging info from messages.
8865         (do_external_sort) Cleans up after itself by deleting the
8866         temporary directory on failure.  (On success it is deleted by the
8867         input program.)
8868         (allocate_cases) Removed debug code.  Added clean up code.
8869         (output_record) Removed debug code.
8870         (merge) Added code to close all the input files that are currently
8871         open.  This is a likely location for bugs, because I'm not sure
8872         about boundary conditions.  Removed an unnecesary heap_delete().
8873         (merge_once) Removed input file "optimization" that in fact
8874         screwed up the rest of the code.  Message and comment fixes.
8875
8876 Sun Dec 29 21:36:48 1996  Ben Pfaff  <blp@gnu.org>
8877
8878         * error.c: [__CHECKER__] (induce_segfault) Flushes output streams.
8879
8880         * heap.c: (heap_delete) New argument.
8881
8882         * sort.c: Finished implementation of external sort.
8883
8884         * vfm.c: (read_from_disk) Returns after a disk error.
8885
8886 Sun Dec 22 23:10:39 1996  Ben Pfaff  <blp@gnu.org>
8887
8888         * sort.c: (static var state) Removed.
8889         (static vars max_handles, tmp_basename, tmp_extname,
8890         huffman_queue) New variables.
8891         (do_external_sort) Moved most code to new functions.
8892         Creates huffman_queue.
8893         (allocate_file_handles, allocate_cases) New functions.
8894         (static vars run_no, run_length, file_index, case_count) New
8895         variables. 
8896         (output_record) Returns success.  Now really writes to the output
8897         file.
8898         (begin_run, end_run) New functions.
8899         (write_initial_runs) Returns success.  Initializes run_no to -1.
8900         Calls begin_run(), end_run() at appropriate times.  Outputs debug
8901         messages.
8902         (write_to_sort_cases) Calls begin_run(), end_run() at appropriate
8903         times.
8904         (merge) New function.
8905
8906         * heap.c, heap.h: New files.  Hopefully in near-final form.
8907
8908 Sat Dec 21 21:51:04 1996  Ben Pfaff  <blp@gnu.org>
8909
8910         * glob.c: Added write_active_file to global vars.
8911
8912         * sort.c: Several new miscellaneous static variables.
8913         (cmd_sort_cases) Big comment fix.
8914         (perform_case_2) Renamed `do_external_sort' and completely
8915         rewritten.
8916         (case_2_proc_func) Removed.
8917         (output_record, write_initial_runs, write_to_sort_cases,
8918         compare_record) New functions.
8919
8920         * vfm.c: [DEBUGGING] (index_to_varname) Excised bit rot.
8921
8922 Tue Dec 17 18:57:59 1996  Ben Pfaff  <blp@gnu.org>
8923
8924         * sort.c: (perform_case_2) Changed the method for allocation of
8925         lots of memory--now allocates one case at a time in hopes that
8926         more cases can be allocated with heavily fragmented memory.
8927
8928         * var.h: (write_active_file) New global var.
8929
8930         * vfm.c: (procedure, close_active_file, write_case,
8931         SPLIT_FILE_procfunc) Now allow beginfunc, procfunc, and endfunc
8932         arguments to procedure() to be NULL.  All references to
8933         procedure() that made use of dummy functions were changed to NULL
8934         functions.
8935         (open_active_file) If write_active_file is non-NULL, the output
8936         device becomes DEV_PGM (a new enum).
8937         (close_active_file) Sets write_active_file to NULL.
8938         (read_from_memory) Comment fix.
8939         (record_case) Calls write_active_file() when the output device is
8940         DEV_PGM.
8941
8942 Sun Dec 15 15:32:16 1996  Ben Pfaff  <blp@gnu.org>
8943
8944         * sort.c: New file.
8945
8946         * autorecode.c: (cmd_autorecode) Fixed parsing of options.
8947         Fixed checking for duplicate varnames.
8948         (recode) xmalloc()'s the transformation instead of arena_alloc()'ing
8949         it.
8950         (autorecode_trns_free) Destroys hash tables for each recoding
8951         specification.
8952         (autorecode_proc_func) Compares NULL to *vpp instead of vpp.
8953
8954         * command.c: Added SORT CASES to cmd_table.
8955         (null_func, null_int_func) Prototyped.
8956
8957         * descript.g: (calc_weight, calc_noweight) Computes own case
8958         number now.
8959         
8960         * frequencies.q: (dump_statistics) Fixed problem with
8961         too-few-cases warning message.
8962
8963         * get.c: (cmd_save_internal) Handles weighting properly.
8964
8965         * hash.c: (hsh_dump) Output format changed.
8966         (force_hsh_insert) Actually works now, prototype changed.
8967
8968         * list.q: (static var case_num) New variable.
8969         (cmd_list) Initializes case_num.
8970         (list_cases) Increments case_num.
8971
8972         * var.h: Added definitions for SORT CASES.  Comment fixes.
8973
8974         * vfm.c: Some definitions moved to new file vfmP.h.  Comment
8975         fixes.  `active' renamed vfm_active, `rep' renamed
8976         vfm_replacement, all references changed.
8977         (procedure) The procfunc no longer receives a case number.  All
8978         references changed.
8979         (write_case) Subtle reordering.
8980         (SPLIT_FILE_procfunc) Counts cases differently.  Slightly less
8981         redundant.
8982
8983         * weight.c: (get_weighting_variable) New function.
8984
8985         * vfmP.h: New file with definitions from vfm.c.
8986
8987 Sat Dec 14 10:35:30 1996  Ben Pfaff  <blp@gnu.org>
8988
8989         * command.c: (FILE_TYPE_okay) Commented out some tests because
8990         they're clumsy and not yet needed.
8991
8992         * var.h: Most *_trns structures moved to their respective source
8993         files.  Some were moved into a new file, do-ifP.h.  Comment fixes.
8994         (union any_trns) Changed to a typedef for trns_header.
8995         (struct input_program_pgm) Removed.
8996
8997         * vars-prs.c: (parse_variables) Only local_free()'s bits if it
8998         was allocated in the first place.
8999
9000 Fri Dec 13 21:30:53 1996  Ben Pfaff  <blp@gnu.org>
9001
9002         * autorecode.c: New file.
9003         
9004         * command.c: Added AUTORECODE to command table; re-enabled SET.
9005
9006         * data-out.c: (convert_F) Handles infinities and NaNs properly.
9007
9008         * error.c: (vmsg) Comment fixes.
9009
9010         * hash.c: Comment fix.
9011         (hashpjw_d) New function.
9012         (hashpjw) Reimplemented as call to more general function
9013         hashpjw_d().
9014         (internal_comparison_fn) Initializes pointers properly.
9015         (hsh_sort) [GLOBAL_DEBUGGING] New debugging code.
9016         (force_hsh_insert, force_hsh_find) New debugging wrapper
9017         functions.
9018
9019         * main.c: (main) Message fix.
9020
9021         * output.c: (outp_read_devices) Message fix.
9022
9023         * set.q: Comment fixes.
9024         (custom_results) Implemented Wnd/X form of subcommand.
9025         (set_routing) New function.
9026         (internal_cmd_set) Implemented ERRORS, MESSAGES.
9027
9028         * settings.h: (SET_ROUTE_*) New enum series.
9029         (set_results) Renamed set_results_file, all references changed.
9030         (set_messages) Removed.
9031         (glob vars set_errors, set_messages, set_results) New vars.
9032
9033         * title.c: (get_title) Remembers to xstrdup() the result of
9034         get_rest_of_line().
9035
9036         * var.h: (arc_item, arc_spec, autorecode_trns) New structures for
9037         use by AUTORECODE.
9038         (union any_trns) New element `arc'.
9039
9040 Fri Dec  6 23:53:47 1996  Ben Pfaff  <blp@gnu.org>
9041
9042         * command.c: (output_line) Removed references to set_screen.
9043
9044         * error.c: (static var terminating) New var.
9045         (hcf) Sets terminating to 1.
9046         (vmsg) If terminating is nonzero, does not attempt to call hcf().
9047         This prevents an infinite loop if an error occurs within hcf().
9048
9049         * expr-evl.c: (evaluate_expression) [__CHECKER__] Replaced case
9050         statement circumlocution with `case 42000' trick.
9051         (evaluate_expression) New support for OP_STR_MIS.
9052
9053         * expr-opt.c: (evaluate_expression) [__CHECKER__] Replaced case
9054         statement circumlocution with `case 42000' trick.
9055         (dump_node) Handles OP_STR_MIS.
9056
9057         * expr-prs.c: (MISSING_func, SYSMIS_func) Rewrote to handle string
9058         variables exceptions.
9059         (parse_function) Message fix.
9060         (ops[]) Added OP_STR_MIS.
9061
9062         * expr.h: Added OP_STR_MIS to OP_* enum.  Comment fixes.
9063
9064         * exprP.h: [__CHECKER__] Removed case statement circumlocution.
9065
9066         * glob.c: Removed set_scrnfile glob var.
9067         (init_glob) set_errorbreak set to 0 by default.
9068
9069         * groff-font.c: Changed included files.
9070         (groff_read_font) Initializes font_arena local var correctly.
9071         (default_font) New function.
9072
9073         * output.c: Comment fixes.
9074         (glob var disabled_devices) New variable.
9075         [GLOBAL_DEBUGGING] (static var iterating_driver_list) New
9076         variable.
9077         [GLOBAL_DEBUGGING] (reentrancy) New function.
9078         [GLOBAL_DEBUGGING] (outp_read_devices, outp_done, find_driver,
9079         outp_iterate_enabled_drivers) Calls to reentrancy().
9080         (destroy_list) New function.
9081         (outp_done) Moved code to destroy_list().
9082         (parse_options) Parses `listing', `screen', `printer' options
9083         internally.
9084         (configure_driver) Sets new `device' member of driver.
9085         (outp_iterate_enabled_drivers, outp_enable_device) New functions.
9086
9087         * output.h: Comment fixes.  New enum series OUTP_DEV_*.
9088         (struct outp_driver_struct) New member `device'.
9089
9090         * postscript.c: (find_encoding_file) Doesn't display its own error
9091         messages.
9092         (default_encoding) New function.
9093         (switch_font) Calls default_encoding() if no encoding can be
9094         found.
9095         (text) Makes up a character metric if none exists for the desired
9096         character.
9097         (load_font) Properly copies a fallback filename.  Calls
9098         default_font() for a font if none at all are known.
9099
9100         * set.q: Comment fixes.  Removed OUTPUT subcommand.
9101         (custom_listing) Calls outp_enable_device() to enable/disable
9102         listing device.
9103         (turn_screen_on) Removed.
9104         (internal_cmd_set) Calls outp_enable_device() to enable/disable
9105         screen, printer devices.
9106
9107         * settings.h: Comment fixes.
9108         (glob vars set_output, set_printer, set_screen, set_scrnfile)
9109         Removed.
9110
9111         * som-high.c: (som_submit_table, som_eject_page) Use
9112         outp_iterate_enabled_drivers() instead of iterating
9113         outp_driver_list directly.
9114
9115 Wed Dec  4 21:34:17 1996  Ben Pfaff  <blp@gnu.org>
9116
9117         * data-in.c: (parse_EDATE, parse_SDATE) New functions.
9118         (parse_string_as_format) Handles new formats.
9119         (parse_numeric) Now handles DOT and PCT formats.
9120
9121         * data-out.c: (convert_E, convert_F, insert_commas) Handle DOT
9122         format now.
9123         (convert_date) Handle EDATE and SDATE formats.
9124         (convert_CCx) Now if there's not room for the currency characters,
9125         converts it as F format if it's positive instead of giving up
9126         quickly.  Also fixed save-and-restore bug with decimal point
9127         characters.  
9128         (convert_format_to_string) Handles new formats.
9129
9130         * misc.c: (formats[]) Added new formats.
9131         (convert_fmt_ItoO) Supports new formats.
9132
9133         * sfm-read.c: (parse_format_spec) Supports new formats.  Better
9134         data checking.  New argument, all references changed.
9135
9136         * sfm-write.c: (write_format_spec) Supports new formats.
9137
9138         * var.h: New formats FMT_DOT, FMT_PCT, FMT_EDATE, FMT_SDATE.
9139         Comment fixes.
9140
9141 Sun Dec  1 17:19:00 1996  Ben Pfaff  <blp@gnu.org>
9142
9143         * cmdline.c: Comment fixes.
9144         (parse_command_line) Changed return type to void.
9145
9146         * data-in.c: (parse_string_as_format) Added FMT_CCA...FMT_CCE to
9147         switch.
9148         (parse_numeric) Handles international numbers (comma as decimal
9149         point).  Some reformatting.
9150
9151         * data-list.c: (parse_free) Default output format is now
9152         set_format instead of hard-coded F8.2.
9153         (read_from_data_list_list) Emits error message on undefined data
9154         only if set_undefined is nonzero.
9155
9156         * data-out.c: (convert_E) Changes decimal point from period to
9157         comma if appropriate.  Restructured.  Better comments.
9158         (convert_F) Changes decimal point from period to comma if
9159         appropriate.
9160         (insert_commas) Major bug with handling of negative values fixed.
9161         Also, inserts periods instead of commas if appropriate.
9162         (convert_CCx) New function.
9163         (convert_format_to_string) Added FMT_CCA...FMT_CCE to switch.
9164         (num_to_string) Changed `.' to set_decimal.
9165
9166         * dfm.c: Comment fixes.
9167         (dfm_close) Frees ext->line even in inline_file.
9168         (open_inline_file) New function.
9169         (open_file_r) When opening the inline file: now properly
9170         recognizes `BEGIN DATA.' line, and calls open_inline_file() to
9171         finish up.
9172         (read_record) Calls fh_close_handle() instead of dfm_close() to
9173         close the inline file.  Makes a copy of the line getl_buf to avoid
9174         interlock problems.
9175         (dfm_get_record) Restructured.  Now checks the return value of
9176         open_file_r().
9177         (cmd_begin_data) Moved open code into open_inline_file().  Relaxed
9178         checking for use of inline file.  No longer tries to close inline
9179         file.
9180
9181         * error.c: (glob var error_already_flagged) New var.
9182         (vmsg) Message change.  Now checks max number of errors/warnings,
9183         acts on it.
9184
9185         * file-handle.q: (fh_handle_name) Now allows closing of
9186         inline_file.
9187         (fh_init_files) Reformatted.
9188
9189         * get.c: (trim_dictionary) Checks SCOMP option instead of COMP.
9190
9191         * getline.c: (getl_include) Fixed bug that popped up when called
9192         when file queue was empty.
9193         (read_console) Resets error_count, warning_count,
9194         error_already_flagged to zero.
9195
9196         * glob.c: Many changes to update list of variables.
9197         (init_compat_dependent) Now this function is called whenever
9198         `compat' changes.  It now sets set_seed only if it hasn't
9199         previously been referenced.  It now calls
9200         lex_init_compat_dependent().
9201
9202         * include.c: (cmd_include_at) Frees temporary buffer instead of
9203         line buffer.  
9204         (cmd_include) Doesn't make copy of include file name.
9205
9206         * lexer.c: Comment fixes.
9207         (init_lex) Moved some code into new function
9208         lex_init_compat_dependent().
9209         (lex_init_compat_dependent) New function.
9210         (hex_val) Simplified.
9211         (preprocess_line) Uses set_endcmd instead of hardcoding `.'.
9212
9213         * main.c: Comment fixes.
9214         (main) Reformatted.
9215
9216         * misc.c: (formats[]) Added FMT_CCA...FMT_CCE.
9217         (check_input_specifier) Disallows FMT_CCA...FMT_CCE.
9218         (convert_fmt_ItoO) Detects FMT_CCA...FMT_CCE.
9219         (setup_randomize) Sets set_seed_used.
9220
9221         * set.q: Comment fixes.
9222         (custom_results) Conditionalizes on `compat'.
9223         (custom_log) Calls custom_journal().
9224         (set_ccx) New function.
9225         (cmd_set) Calls init_compat_dependent() when `compat' changes.
9226         Calls set_ccx() to handle CCA...CCE.  Sets set_grouping
9227         when set_decimal changes.  Range-checks values for MITERATE,
9228         MNEST.  Message fixes.
9229
9230         * settings.h: Comment fixes.
9231         (struct set_cust_currency) New struct.
9232         (set_cc[], set_grouping, set_seed_used) New global vars.
9233
9234         * var.h: (FMT_CCA...FMT_CCE) New output formats.
9235         (FCAT_OUTPUT_ONLY) New FCAT_* constant.
9236
9237 Thu Nov 28 23:14:07 1996  Ben Pfaff  <blp@gnu.org>
9238
9239         * glob.c: Revised variables to correspond to settings.h.
9240         (init_glob) Initializes variables from settings.h properly.
9241
9242         * set.q: Began long-overdue major revision to correspond to new
9243         philosophy.  Most code changed. 
9244
9245         * settings.h: Mostly changed; reorganized, reordered, large new
9246         comment.
9247
9248 Thu Nov 28 19:46:10 1996  Ben Pfaff  <blp@gnu.org>
9249
9250         * get.c: (cmd_save_internal) No longer forces compression off.
9251
9252         * sfm-read.c: (read_compressed_data) If eof is reached when
9253         reading a new instruction octet, only signal error if we're in the
9254         middle of a case.
9255
9256         * sfm-write.c: (COMPRESSION_BIAS) New #define.
9257         (struct sfm_fhuser_ext) New member `end'.
9258         (write_header) Refers to COMPRESSION_BIAS instead of magic 100.0.
9259         (ensure_buf_space) New function.
9260         (sfm_write_case) Reimplemented in order to support compression.
9261         (sfm_close) Writes out the remaining contents of the compression
9262         buffer if any.
9263
9264 Wed Nov 27 23:18:35 1996  Ben Pfaff  <blp@gnu.org>
9265
9266         * command.c: Defined SAVE and XSAVE commands in command table.
9267
9268         * common.h: second_lowest_value is of type flt64, not double.
9269
9270         * file-handle.h: Comment fix.
9271
9272         * get.c: Comment fixes.
9273         (static var `trns') New.
9274         (save_write_case_func, save_trns_proc, save_trns_free, null_func,
9275         cmd_save_internal, cmd_save, cmd_xsave) New functions.
9276         (dict_delete_run) Clears the variables and frees them now.
9277         (trim_dictionary) Sets default for compression.
9278         On KEEP subcommand, frees deleted variables as well as clearing
9279         them.  Finally got the sense of the test for deleting all
9280         variables correct.
9281         [DEBUGGING] (dump_dict_variables) Message fix.
9282
9283         * glob.c: (init_glob) set_compression set to 1 by default.
9284
9285         * list.q: Properly #includes config.h.
9286
9287         * misc.h: New macro REM_RND_UP.
9288
9289         * settings.h: Comment fix.
9290
9291         * sfm-read.c: (structs sysfile_header, sysfile_format,
9292         sysfile_variable; inline function bswap_int32) Moved to new file
9293         sfmP.h.
9294         (corrupt_msg) [__CHECKER__] No longer induces segfault.
9295         (sfm_read_dictionary) Fixed bug caused by failing to initialize
9296         var_by_index.
9297         (read_machine_flt64_info) Fixed some problems caused by confusion
9298         between flt64 and double types.
9299         (read_header) Message fix.
9300         (read_variables) Fixed set of cases in which we byte-swap sv.print
9301         and sv.write.  Fixed confusion of flt64 and double.
9302
9303         * sfm.h: (struct sfm_write_info) New.
9304
9305         * som-high.c: (som_draw_title) Properly frees `s'.
9306
9307         * temporary.c: (save_dictionary) Comment fix.
9308
9309         * var.h: Comment fixes.  New FMT_* enum, FMT_NUMBER_OF_FORMATS.
9310         (struct trns_header) Formatting fix.
9311         (struct save_trns) New.
9312
9313         * vars-atr.c: (discard_variables) Comment fix.
9314
9315         * sfm-write.c: New file, baseline release.
9316
9317         * sfmP.h: New file, baseline release.
9318
9319 Sun Nov 24 14:53:53 1996  Ben Pfaff  <blp@gnu.org>
9320
9321         * cmdline.c: (parse_command_line) `--version' output updated.
9322         (glob var syntax_message[]) Added my e-mail address.
9323
9324         * file-handle.q, lexer.c, vfm.c: Changed many instances of
9325         `illegal' to `invalid'.
9326
9327         * sfm-read.c: (struct sfm_fhuser_ext) New fields used as
9328         uncompression buffer.
9329         (sfm_close) Frees decompression buffer.
9330         (sfm_read_dictionary) Initializes decompression buffer.
9331         (buffer_input, read_compressed_data) New functions.
9332         (sfm_read_case) Restructured; now calls read_compressed_data() to
9333         handle compressed system file data.
9334
9335         * var.h: Comment fix.
9336
9337 Mon Nov 11 15:34:09 1996  Ben Pfaff  <blp@gnu.org>
9338
9339         * dfm.c: (dfm_close) Does not set h->{ext,class} because the
9340         caller handles it.
9341          
9342         * get.c: New comments.  New static var `get_file'.
9343         (cmd_get) Now fully implemented.  Calls discard_variables();
9344         initializes fv and lv for all variables; new debug code; sets
9345         up the dictionary; sets up the input program.
9346         (read_from_get, cancel_get) New functions.
9347
9348         * sfm-read.c: Comment fixes.
9349         (sfm_close) New static function.
9350         (sfm_read_dictionary) Properly sets up the class of the
9351         file_handle.  No longer cares what size the data is in records of
9352         type 7.  Also, on failure, properly cleans up the file_handle and
9353         free()s some stuff.
9354         (read_variables) No longer thinks it knows `nval' of the
9355         dictionary.  Now sets p.get.fv, etc., instead of speculatively
9356         setting fv itself.
9357         (read_value_labels) Fixed off-by-one error in indexing of
9358         var_by_index[].
9359         (sfm_read_case) New function.
9360         (sfm_r_class) New static var.
9361
9362         * var.h: (get_proc) New struct.
9363         (struct variable) New member p.get.
9364
9365 Thu Nov  7 20:52:28 1996  Ben Pfaff  <blp@gnu.org>
9366
9367         * get.c: Removed GTSV_OPT_MAP because of a misinterpretation of
9368         the manual's meaning.
9369         (rename_variables) New function.
9370         (trim_variables) Doesn't try to parse MAP any more.  Removed debug
9371         code.  Now properly reorders the dictionary on the KEEP keyword.
9372
9373         * sfm-read.c: (read_value_labels) Fixed some bugs regarding
9374         garbage collection.
9375
9376         * vars-atr.c: (clear_variable) New argument `dictionary *'.
9377         (rename_variable) New function.
9378         (free_val_lab) Reformatted.
9379
9380 Thu Nov  7 17:29:16 1996  Ben Pfaff  <blp@gnu.org>
9381
9382         * var.h: Reindented entire file.  Comment fixes.
9383         (glob vars var, var_by_name, nvar, N, nval, n_splits, splits)
9384         Removed.
9385         (glob var default_dict) New.
9386         (struct indirect_dictionary) Removed.
9387
9388         * Many other source files were changed to add `default_dict.'
9389         before all references to the dictionary of the active file.
9390         
9391         * vars-atr.c: (make_indirect_dictionary) Removed.
9392
9393         * glob.c: Reindented all variable declarations.  Updated for
9394         changed var.h.  Comment fixes.
9395
9396         * temporary.c: (restore_dictionary, save_dictionary) Simplified
9397         because now we can mainly copy dictionary structs.
9398
9399         * vars-prs.c: (is_dict_varname, parse_dict_variable,
9400         parse_variables) Takes dictionary instead of indirect_dictionary
9401         first argument.
9402         (parse_variables) Instead of calling make_indirect_dictionary,
9403         just sets DICT to &default_dict if DICT is NULL.  Of course, lots
9404         of `*dict.' references had to be changed to `dict->'.  Removed
9405         debug code.
9406
9407 Thu Nov  7 15:48:52 1996  Ben Pfaff  <blp@gnu.org>
9408
9409         * get.c: Added GTSV_OPT_* series of enums.
9410         (trim_dictionary, dict_delete_run) New functions.
9411         [DEBUGGING] (dump_dict_variables) New function.
9412         (cmd_get) Calls trim_dictionary() to get dictionary fully set-up.
9413         [DEBUGGING] Calls dump_dict_variables() to display results.
9414
9415         * glob.c: (cmp_variable) Now a public function declared in var.h.
9416
9417         * sfm-read.c: Turned off debug code.  Comment fixes.
9418         (read_machine_int32_info, read_machine_flt64_info) New functions
9419         to parse type 7 records.
9420         (sfm_read_dictionary) Properly byteswaps several fields now.
9421         Calls read_machine_*_info() to parse type 7 subtypes 3 and 4
9422         records.  [DEBUGGING] Dumps dictionary.
9423         (read_variables) Sets `index' field of variables created properly.
9424         Constructs avl tree of variables in dictionary.  [DEBUGGING] No
9425         longer dumps dictionary.
9426         (read_value_labels) Properly byteswaps fields.  [DEBUGGING] New
9427         debug code.
9428         [DEBUGGING] (dump_dictionary) No longer stubbed out.
9429
9430         * temporary.c: (restore_dictionary) Destroys `var_by_name' glob
9431         var before destroying any variables just to save a little time.
9432
9433         * var.h: (struct variable) Reordered in order to make name[] the
9434         first member; this makes pointers to `variable' pointers to the
9435         variable name, simplifying avl trees, etc.
9436         (struct indirect_dictionary) New struct.
9437
9438         * vars-atr.c: (find_variable) Rewritten for efficiency.
9439         (make_indirect_dictionary, is_dict_varname, parse_dict_variable)
9440         New functions.
9441         (is_varname) Rewritten for efficiency.
9442         (parse_variables) New argument, which is a `dictionary *'.  All
9443         references changed.  This function now reads variable names from
9444         the dictionary passed, or from the default dictionary if NULL.
9445
9446 Tue Nov  5 18:34:59 1996  Ben Pfaff  <blp@gnu.org>
9447
9448         * misc.h: Added new macro DIV_RND_UP to perform integer division,
9449         rounding up.  Changed many references to ROUND_UP to use this
9450         instead.
9451
9452         * sfm-read.c: Includes avl.h.
9453         (corrupt_msg) Induces a segfault under Checker.
9454         (macro assertive_bufread) New.  Many references to bufread() now
9455         use this instead.
9456         (sfm_read_dictionary) Split up into several functions.  Added code
9457         to read dictionary records following the the type 2 records.  Not
9458         quite complete.  New variable `var_by_index'.
9459         (read_header, read_variables) New functions extracted from
9460         sfm_read_dictionary().
9461         (read_value_labels) New function.
9462         (bufread) Checks ferror() if fread() doesn't return the expected
9463         value; if ferror() is zero it's just EOF.
9464         (dump_dictionary) Stubbed out.
9465
9466         * BTW: The source code now exceeds 50000 lines!
9467         
9468 Mon Nov  4 22:03:28 1996  Ben Pfaff  <blp@gnu.org>
9469
9470         * command.c: Added GET to cmd_table[].
9471
9472         * list.q: Removed reference to alloca headers.
9473         (cmd_list) Gave prototype.
9474
9475         * sfm-read.c: Added DEBUGGING comments.
9476         (sfm_read_dictionary) Checks bias correctly.  Sets
9477         dict->var_by_name to NULL.  Calculates long_string_count
9478         correctly.  realloc's dict->var[] array to minimum size.
9479         [DEBUGGING] Calls dump_dictionary.
9480         [DEBUGGING] (dump_dictionary) New function.
9481
9482         * temporary.c: (save_dictionary) Sets var_by_name to NULL.
9483         (restore_dictionary) If the dictionary contains a non-NULL
9484         var_by_name, uses that instead of generating one.
9485         (free_dictionary) Destroys var_by_name.
9486
9487         * var.h: (struct dictionary) Added field `var_by_name'.
9488
9489         * get.c: New file, not complete.
9490
9491 Sun Nov  3 12:24:36 1996  Ben Pfaff  <blp@gnu.org>
9492
9493         * mis-val.c: New enums MV_NOR_*.  New struct num_or_range.
9494         (parse_num_or_range) New function.
9495         (parse_numeric) Reimplemented in order to support LOW THRU <n> and
9496         <n> THRU HIGH missing values.
9497
9498         * output.h: [__GNUC__>1 && __OPTIMIZE__] (width, height) Made
9499         __attribute__((const)).
9500
9501         * q2c.c: (get_token) Merged isdigit || isalpha into isalnum.
9502
9503         * sfm-read.c: Finished reference implementation.
9504
9505         * sfm.h: Includes var.h.
9506
9507         * var.h: Comment fixes.
9508         (struct `variable') Reordered some fields.
9509
9510         * vars-atr.c: (is_num_user_missing) Added support for MISSING_*
9511         constants added previously.
9512
9513 Wed Oct 30 17:13:08 1996  Ben Pfaff  <blp@gnu.org>
9514
9515         * common.h: Comment fixes.  Added declaration of
9516         `second_lowest_value' as variable or macro.  Made `compat_type',
9517         `pgm_state_type' into anonymous enums.
9518
9519         * display.c: Comment fix.
9520
9521         * glob.c: [ENDIAN==UNKNOWN] Added definition for `endian' global
9522         var.
9523         [!defined SECOND_LOWEST_VALUE] Added definition for
9524         `second_lowest_value' global var.
9525         (compat, pgm_state global vars) Changed types to `int'.
9526         (init_glob) Initializes `second_lowest_value'.
9527
9528         * sfm-read.c: Continued work, not complete.
9529
9530         * var.h: Added new MISSING_* constants to handle LOWEST and
9531         HIGHEST.
9532
9533 Sat Oct 26 23:06:06 1996  Ben Pfaff  <blp@gnu.org>
9534
9535         * sfm-read.c: New file, not complete.
9536
9537         * cases.c: (vec_insert) Changed vector expansion algorithm.
9538         (vec_delete) Fixed bug that screwed up deletion sometimes, it was
9539         mucking up the RECODE transformation in particular.
9540         (envector) Harmless change in notation.
9541
9542         dfm is now fairly well tested again.  
9543         * dfm.c: (dfm_get_record) Only returns ext->ptr if ext is
9544         non-NULL--duh.
9545         (cmd_begin_data) if(ext->line) replaced by if(ext && ext->line).
9546
9547         * recode.c: Comment fix.
9548
9549         * sfm.h: Interface should be fairly final now, or at least for a
9550         day or so...
9551
9552         * vfm.c: [DEBUGGING] (index_to_varname) New function.
9553         (open_active_file) [DEBUGGING] Translates ccase indices into
9554         variable names now to make it easier to understand what's really
9555         going on.
9556
9557 Sat Oct 26 20:46:31 1996  Ben Pfaff  <blp@gnu.org>
9558
9559         * data-in.c: Comment fix.
9560
9561         * data-list.c: Includes dfm.h.
9562         (do_reading) Uses new function dfm_push_cust().
9563
9564         * data-out.c: (convert_time, convert_WKDAY, convert_MONTH) Added
9565         `return 1;' at end.
9566
9567         * file-handle.h: Completely changed.  Some parts split off into
9568         new file dfm.h.  Implemented in file-handle.q.
9569         (enum FH_*) Removed.
9570         (struct fh_ext_class) New struct.
9571         (struct file_handle) Retained only these fields: name, norm_fn,
9572         fn, recform, lrecl, mode.  New fields class, ext.
9573         (get_handle_by_name, get_handle_by_filename, parse_file_handle,
9574         close_handle, handle_name) Added `fh_' prefix to name, all
9575         references changed.
9576
9577         * dfm.h: New file, implemented in dfm.c.
9578         (get_record, put_record, fwd_record, bkwd_record, set_record,
9579         get_cur_col) Functions moved from file-handle.h, now prefixed with
9580         `dfm_'.
9581         (dfm_push_cust) New function.
9582
9583         * sfm.h: New file.  Incomplete.
9584
9585         * dfm.c: All functions adjusted/rewritten for new dfm/fhp
9586         interface.  Functions reordered, comments changed.  Not well
9587         tested, probably full of bugs.
9588         (struct dfm_fhuser_ext) New struct.
9589         (dfm_close) New function.
9590         (open_file_r) Pickier about finding `BEGIN DATA.' line.
9591         (open_file_w) User messages changed.
9592         (get_record) Comment fixed.
9593         (read_record) Increments ext->ln even for inline_file.  Calls
9594         dfm_close() for inline_file when `END DATA.' encountered.
9595         (dfm_get_record) Experimental restructuring.
9596         (dfm_push_cust) New function.
9597         (cmd_begin_data) Detects whether the inline file was fully read by
9598         checking whether it is still open; detects whether it was read at
9599         all by checking whether the line number is greater than zero.
9600
9601         * file-handle.q: All functions adjust/rewritten for new dfm/fhp
9602         interface.  Functions reordered, comments changed.  Not well
9603         tested, probably full of bugs.
9604         (init_file_handle) Removed initializers for obsolete fields, added
9605         new fields.
9606         (fh_close_handle) Much simpler, now mainly calls the class
9607         function.
9608         (fh_init_files) Renamed inline file internal filename.
9609
9610         * file-type.c: Includes dfm.h.
9611         (read_from_file_type) Doesn't use dfm internal state anymore.
9612
9613         * inpt-pgm.c, print.c: Include dfm.h.
9614
9615         * recode.c: (internal_cmd_recode) Casts strlen() return value to
9616         int in comparison with other int.
9617
9618         * som-high.c: (build_target) Fixed operator precedence problem in
9619         if statement (& versus ==).
9620
9621 Sat Oct 26 10:39:25 1996  Ben Pfaff  <blp@gnu.org>
9622
9623         * dfm.c: (read_record) Can now read fixed-length records; not
9624         tested.
9625         (put_record) Can now write fixed-length records; not tested.
9626
9627         * file-handle.h: FH_* defines changed to enums.  New enum series
9628         FH_RF_*, FH_MD_*.
9629         (struct file_handle) New members recform, lrecl, mode.
9630
9631         * file-handle.q: Parser changed.
9632         (internal_cmd_file_handle) Added support for new /RECFORM, /MODE,
9633         /LRECL subcommands.  These are compatible with Windows.
9634         (init_file_handle) Initializes recform, mode fields.
9635
9636         * q2c.c: (get_line) When outputting `!' comment lines, now
9637         increments the output file line number so that `#line' directives
9638         are correct.
9639         (make_identifier) New function that converts an arbitrary string
9640         into a valid C identifier.
9641         (dump_vars) Calls make_identifier() in two places in order to
9642         suppress some errors for bad identifiers.
9643         (make_match) Allows TRUE as synonym for YES and FALSE as synonym
9644         for NO.  Allows numbers to be prefixed by underscores to make them
9645         acceptable C identifiers but still to be parsed as numbers by the
9646         Fiasco lexer.
9647
9648 Thu Oct 24 20:13:42 1996  Ben Pfaff  <blp@gnu.org>
9649
9650         * command.c: Re-enabled RECODE, SAMPLE, SELECT IF.
9651         
9652         * dfm.c: Comment fixes. (get_record) Gives error if file handle
9653         was opened for writing.
9654         (open_file_w) New function.
9655         (read_record) Uses strncasecmp if available.  Improved error
9656         messages, comments.
9657         (put_record) New function.
9658
9659         * file-handle.h: Moved function comments into dfm.c and
9660         file-handle.q.  Comment fixes.  Removed declarations of
9661         tilde_expand() and normalize_filename().
9662         (struct file_handle) Changed `open' from boolean to enumerated
9663         field to allow for three states--closed, open for reading, open
9664         for writing--all references changed.
9665
9666         * file-handle.q: Includes filename.h.
9667
9668         * print.c: (CMD_* enums) Renamed PRT_* and moved into var.h; all
9669         references changed.
9670         (alloc_line) Makes allowance for line terminator characters in
9671         calculations.
9672         (print_trns_proc) Now handles OUTFILE, WRITE differences.
9673         (print_space_trns_proc) Handles OUTFILE differences.
9674
9675         * recode.c, sample.c: Comment fixes.
9676
9677         * var.h: (struct print_trns) Changed boolean field `eject' to
9678         bitmapped field `options'; all references changed.  New enums
9679         PRT_* for use with this field.
9680
9681         * exception.h, test-exception.c: Removed.
9682
9683 Thu Oct 24 17:47:14 1996  Ben Pfaff  <blp@gnu.org>
9684
9685         * ascii.c: (delineate) Turned off debug output.
9686
9687         * common.c: [Checker and Linux] (__assert_fail, __eprintf) Moved
9688         to error.c.
9689
9690         * data-in.c: (parse_string_as_format) Sets the entire string value
9691         to spaces, not just the short string part of it.  Is this correct
9692         now? 
9693
9694         * data-out.c: (convert_date) Fixed DATETIME format problems with
9695         decimal places, removed debug code.
9696
9697         * dfm.c: (open_file_r) Fixed bug where an error would occur in the
9698         middle of parsing BEGIN DATA that would cause the lexer to read
9699         from a wild pointer `prog'; now calls new function
9700         preprocess_line() in lexer.c.
9701
9702         * error.c: [__CHECKER__] (hcf) Calls induce_segfault() on improper
9703         termination.
9704         [Checker and Linux] (__assert_fail, _eprintf) Moved from common.c.
9705         Now call induce_segfault() to induce the segfault.
9706         (induce_segfault) New function.
9707
9708         * expr-opt.c: Comment fix.
9709         (parse_sysvar) New function.
9710         (parse_primary) Added system variable support--calls
9711         parse_sysvar().
9712         (global var ops) Added OP_CASENUM operator.
9713
9714         * expr.h: Comment fixes.
9715         (OP_* enum) added OP_CASENUM operator.
9716         (struct casenum_node) New struct.
9717         (union any_union_union) New member `cas' of type `casenum_node'.
9718
9719         * glob.c: (global var last_vfm_invocation) New var.
9720         (init_glob) Initializes last_vfm_invocation.
9721
9722         * lexer.c: (lookahead) Fixed reversed condition on if statement.
9723
9724         * getline.c: (get_line) Split into get_line() and preprocess_line().
9725         (preprocess_line) New function.
9726
9727         * var.h: Declares last_vfm_invocation.
9728
9729         * vfm.c: (procedure) Sets last_vfm_invocation.
9730
9731 Wed Oct 23 21:53:43 1996  Ben Pfaff  <blp@gnu.org>
9732
9733         * command.c: (parse_cmd) Fixed bad assertion related to
9734         lookahead().
9735
9736         * data-in.c: (parse_month) Implemented to parse months according
9737         to full interpretation of standard.
9738         (to_roman) New function.
9739         (parse_wk_delimiter) Bug fix (forgot to skip `WK' in string).
9740         (parse_weekday) Bug fix (forgot to skip all the day name).
9741
9742         * data-list.c: (read_from_data_list_fixed) Fixed bug that screwed
9743         up parsing of multirecord data items.  Also fixed user message.
9744
9745         * data-out.c: Comment fix.
9746         (year2, year4, convert_date, convert_time, convert_WKDAY,
9747         convert_MONTH) New functions to support time & date output.
9748         (convert_format_to_string) Calls new time & date output routines.
9749
9750         * expr-prs.c: (nary_num_func) Found a bug, but didn't fix it yet.
9751
9752         * lexer.c: (lookahead) Noted a previously unnoticed caveat in
9753         comment.
9754
9755         * main.c: [DEBUGGING] (dump_token) Updated to handle getline.h.
9756
9757         * misc.c: (global var formats) Fixed declarations of DATETIME,
9758         TIME, DTIME.
9759
9760         * postscript.c: (text) Fixed a pair of bugs in the reallocation of
9761         the output_char buffer.
9762
9763         * vars-prs.c: (parse_DATA_LIST_vars) Fixed a failure to free
9764         memory bug.  Fixed user messages.
9765
9766 Tue Oct 22 17:27:04 1996  Ben Pfaff  <blp@gnu.org>
9767
9768         * Removed #pragma argsused from lots of places.
9769         
9770         * data-in.c: Implemented zoned decimal and time-date formats.
9771         Untested.  This is a huge chunk of code--maybe 1000 lines and 50
9772         new functions.
9773
9774         * data-out.c: Implemented zoned decimal format.
9775
9776         * expr.h: Moved yrmoda() declaration here from exprP.h.
9777
9778         * misc.c: (global var formats) Minor fixes--added
9779         FCAT_SHIFT_DECIMAL to formats N and Z.
9780         (convert_fmt_ItoO) Added support for format Z.
9781
9782         * som-frnt.c: (som_set_value) Fixed bug regarding string values.
9783
9784 Mon Oct 21 20:39:59 1996  Ben Pfaff  <blp@gnu.org>
9785
9786         * command.c: (parse_cmd) [GLOBAL_DEBUGGING] Inserted call to
9787         som_check_workspace() that is activated between commands.
9788
9789         * data-list.c: (dump_fixed_table, dump_free_table) Finished these
9790         for good, I hope.
9791
9792         * list.q: (begin_row) Changed title expansion style from
9793         SOPT_X_VERT to SOPT_X_SHSP.
9794
9795         * som-frnt.c: Now includes `somP.h'.
9796         (som_push_workspace, som_pop_workspace) New functions that, taken
9797         together, form a solution to the recursive table building problem
9798         mentioned yesterday.  Surrounded every table output routine
9799         throughout the program with calls to these functions.
9800         [GLOBAL_DEBUGGING] (som_check_workspace) New function.
9801         (som_create_table) Checks that there's an active workspace.
9802         (som_destroy_all_tables, som_crush) Removed.
9803
9804         * som-high.c: (global var som_preserve_tables) Removed, all
9805         references deleted.
9806         (som_submit_table) Checks that there's an active workspace.
9807         (dump_columnated_table) Doesn't columnate tables that would have
9808         just one row per column.
9809         (dump_crush_page, som_dump_crush_page) Removed debugging code.
9810         (som_dump_crush_page) Moved row number labels from left side of
9811         tables to right side.
9812         (som_get_table_size) Added support for SOPT_X_SHSP.
9813
9814         * som.h: New cell expansion type SOPT_X_SHSP.
9815
9816         * somP.h: (global vars arena_stack, n_arena_stack, m_arena_stack)
9817         New vars.
9818         (global var curtab_arena) Moved from som-frnt.c.
9819
9820 Sun Oct 20 13:45:28 1996  Ben Pfaff  <blp@gnu.org>
9821
9822         * ascii.c: [GLOBAL_DEBUGGING] (SUPPRESS_WARNINGS) New debug option
9823         that causes bad location warnings to be suppressed.
9824         (delineate) Saves current font when calling draw_text(); fixed
9825         handling of NULLs when backing up.  Also fixed line-wrapping bug.
9826
9827         * command.c: Re-enabled `LEAVE', `NUMERIC', `PRINT', `PRINT EJECT',
9828         `PRINT FORMATS', `PRINT SPACE', `STRING', `TITLE', `WRITE'.
9829
9830         * common.c: Added code to cause assertion failure to dump core
9831         when run under Checker.
9832
9833         * data-list.c: (dump_fixed_table) Fixed some inconsistencies, but
9834         there are still bugs.
9835
9836         * glob.c: (__eprintf) Removed.
9837
9838         * list.q: Inserted som_preserve_tables kluge that prevents tables
9839         from being thrown away due to recursive table building through
9840         som_output_line being called from a transformation during the LIST
9841         procedure invocation.  This is a general problem that must be
9842         solved in a better way since it applies to all procedures in
9843         general.
9844         (begin_row) Changed title options to SOM_X_VERT from SOM_X_BOTH.
9845         (flush_table) Removed SOM_TOPT_PRESERVE from submission options.
9846
9847         * numeric.c: Fixed several errors in the form of msg() calls.
9848
9849         * print.c: Updated for use of som.
9850         (dump_table) Reimplemented.
9851         (print_trns_proc) Calls som_eject_page() instead of eject_page().
9852         Calls som_output_text() instead of outs_line().
9853
9854         * som-frnt.c: (som_destroy_all_tables) Sets som_preserve_tables to
9855         0.
9856         (som_output_text) Function moved from som-low.c.  Interface
9857         changed.
9858
9859         * som-high.c: (som_preserve_tables) New global public variable
9860         declared in som.h.
9861         (som_submit_table) Destroys the tables only if som_preserve_tables
9862         is 0.
9863         (paginate_horizontally) Bugfix: sets som.mpw even if there's only
9864         one subrow per row.  Now labels subrows if there's more than one
9865         subrow per row.
9866         (dump_crush_table) Added wishlist comment.
9867         (som_eject_page) New public function declared in som.h.
9868
9869         * som-low.c: (som_dump_crush_page) Draws row labels if there's
9870         more than one subrow per row.
9871         (som_output_text) Moved to som-frnt.c.
9872
9873         * som.h: (SOM_TOPT_PRESERVE) Removed.
9874
9875         * title.c: (get_title) Changed interface.
9876         (cmd_title) Changed `title' to `outp_title'.
9877         (cmd_subtitle) Changed `subtitle' to `outp_subtitle'.
9878
9879 Sun Oct 20 09:04:15 1996  Ben Pfaff  <blp@gnu.org>
9880
9881         * list.q: (flush_table) Conforms to new partial options in
9882         som_submission_form.
9883
9884         * som-high.c: (paginate_horizontally) Changed form of subrow
9885         number labels.
9886         (build_target) Omits spacing before table if
9887         SOM_TOPT_PARTIAL_OMIT_TOP is selected.
9888         (dump_crush_page) Changed interface.  Only trims bottom rule if
9889         SOM_TOPT_PARTIAL_OMIT_BTM is not selected.
9890         (dump_crush_table) Handles partial tables.
9891         (output_row_label) New function.
9892         (som_dump_crush_page) Emits subrow number labels.  Draws vertical
9893         rule on the right edge of narrow subrows.
9894
9895         * som.h: Changed SOM_SUB_PARTIAL_* series of submission type
9896         constants to a series of SOM_TOPT_PARTIAL_* submission options.
9897         All references updated.
9898
9899 Fri Oct 18 19:46:49 1996  Ben Pfaff  <blp@gnu.org>
9900
9901         * misc.c: Comment fix.
9902
9903         * som-high.c: (examine_table) Treats crushed tables separates for
9904         purpose of determining header size.
9905         (paginate_horizontally) Allots space for line numbers in crushed
9906         tables with lots of subrows per row.  Calculates the `maximum page
9907         width', the width of the widest horizontal page.
9908         (build_target) Removed trim argument; all references changed.
9909         Stricter assertions.  (dump_crush_page) New function.
9910         (dump_crush_table) Reimplemented.
9911
9912         * som-low.c: (som_dump_page) Uses new RULE_ROW &c. constants.
9913         (som_dump_crush_page) Reimplemented, interface changed.
9914
9915         * somP.h: Many many new helper macros for use with crushed tables.
9916         (global var som) Removed `tv', `cum_y' members; all references
9917         removed.  New members `mpw', `digit_space'.
9918
9919 Sun Sep 29 19:37:03 1996  Ben Pfaff  <blp@gnu.org>
9920
9921         * arena.c: (arena_alloc) [!DISCRETE_BLOCKS] Removed `size'
9922         variable, changed to constant 1024.
9923         (arena_ca_strdup) Changed `sizeof(a_string)' to
9924         `sizeof(c_string)'.
9925         (arena_ca_strdup) [!DISCRETE_BLOCKS] Changed bad cast from
9926         `(c_string *)' to `(char *)'; this fixed some offset problems.
9927
9928         * filename.c: (readlink_malloc) Changed initial allocation from
9929         100 bytes to 128.
9930         (good_getcwd) Changed from xmalloc() to local_alloc(); removed
9931         comment.
9932
9933         * postscript.c: (read_fontmap) Fixed leak by changing &owner to
9934         &fm->owner in several places.
9935
9936         * som-high.c: (output_table) Changed interface to rest of world.
9937         (examine_crush_table) Removed.  Crushed tables are re-broken now,
9938         in preparation for rewrite.
9939
9940         * som.h: Comment fix.
9941
9942 Sat Sep 28 21:28:07 1996  Ben Pfaff  <blp@gnu.org>
9943
9944         * ascii.c: (ascii_init_driver) Disposes of x->file.filename and x
9945         itself in the cleanup stage.
9946
9947         * descript.q: (display) At least temporarily, changed the table
9948         format to a crushed table.
9949
9950         * list.q: (begin_row) At least temporarily, added horizontal lines
9951         between cases.
9952
9953         * som-high.c: (examine_crush_table) Sets som.hh to the width of
9954         the horizontal "headers," that is, to the width of the far left
9955         and far right rules.
9956         (justify_pagination) Sets som.th to the width of the widest row
9957         in the crushed table.  Fixed inner loop off-by-one error.
9958
9959         * som-low.c: (som_dump_crush_page) Added code to draw horizontal
9960         rules.
9961
9962         * somP.h: Comment fix.
9963
9964 Fri Sep 27 20:08:39 1996  Ben Pfaff  <blp@gnu.org>
9965
9966         * filename.c: (open_file_ext) Now, doesn't set f->file to NULL
9967         before closing it; also, opens the constructed filename `s'
9968         instead of f->filename.
9969
9970         * postscript.c: Moved initialization of x->loaded, x->prop,
9971         x->fixed, x->current, also the add_encoding() calls, into
9972         postopen().
9973         (preclose) Destroys x->combos; sets x->loaded, x->combos to NULL;
9974         sets x->last_font to NULL; sets x->next_combo to zero.
9975
9976         * som-high.c: (crushed_row_height) Moved definition farther up.
9977         (som_submit_table) Doesn't calculate line width, font size until
9978         after calling open_page(), to accomodate changes to PostScript
9979         driver.
9980         (vert_headers) Removed; equivalent functionality moved to
9981         examine_table(), examine_crush_table().
9982         (justify_pagination) Replaced with different algorithm.
9983         (dump_crush_table) Bugfix that caused tables to fail to be clipped
9984         at the bottom of the page.
9985
9986 Thu Sep 26 22:20:26 1996  Ben Pfaff  <blp@gnu.org>
9987
9988         * command.c: Added cmd_list back into cmd_table.
9989
9990         * freq.c, frequencies.q, repeat.c, list.q, vars-atr.c, vfm.c:
9991         Comment fix: `#define DEBUGGING' --> `#define DEBUGGING 1'.
9992
9993         * list.q: (flush_table) Updated to new som_submission_form format.
9994
9995         * som-frnt.c: Comment fix.
9996
9997         * som-high.c: Changed `#endif' to `#undef EXTERN'.
9998         (output_table) Calls som_get_table_size() directly; handles
9999         crushed tables.
10000         (examine_crush_table) New function; calls vert_headers().
10001         (examine_table) Moved some code into new function, vert_headers().
10002         (justify_pagination) New function.
10003         (dump_plain_table) Removed `static' from `cy'.
10004         (dump_crush_table) New function.
10005
10006         * som-low.c: (som_dump_crush_page) New function.
10007
10008         * som.h: Comment fixes.
10009         (enum SOM_TOPT_CRUSH) New.
10010         (SOM_SUB_PARTIAL_BEG, SOM_SUB_PARTIAL_MID, SOM_SUB_PARTIAL_END)
10011         Temporarily set to zero to make do with LIST procedure.
10012
10013         * somP.h: Re-ordering.
10014
10015 Wed Sep 25 19:36:11 1996  Ben Pfaff  <blp@gnu.org>
10016
10017         * som.c: Split into som-frnt.c, som-high.c, som-low.c.
10018
10019         * somP.h: New file for use by som-high.c, som-low.c.
10020
10021         * q2c.c: Added definition for VME.
10022         (get_line) Now dumps `!' comment lines to the output file
10023         verbatim.
10024
10025         * crosstabs.q, descript.q, file-handle.q, frequencies.q, list.q,
10026         set.q: Changed format of `!' comment lines.
10027
10028 Tue Sep 24 18:39:09 1996  Ben Pfaff  <blp@gnu.org>
10029
10030         * All source files: Added copyright notice.
10031
10032         * common.c: (xmalloc, xrealloc, xstrdup) Cast size_t's to unsigned
10033         longs in msg() calls.
10034
10035         * con32s.c: (xmalloc, xrealloc) Updated from common.c.
10036
10037         * q2c.c: (xmalloc, xrealloc, xstrdup) Updated from common.c.
10038
10039 Sat Sep 21 23:16:31 1996  Ben Pfaff  <blp@gnu.org>
10040
10041         * output.c: (outp_read_devices) Changed criteria for
10042         distinguishing different types of lines.
10043
10044 Fri Sep 20 22:52:28 1996  Ben Pfaff  <blp@gnu.org>
10045
10046         * cmdline.c: Changed syntax message.
10047
10048         * filename.c: (good_getcwd) Bug fix (?).
10049         (normalize_filename) [__BORLANDC__] Uses _fullpath() library
10050         function.
10051         (search_path) Appends DIR_SEPARATOR to directory name only if it
10052         does not already end with one.
10053
10054         * glob.c: Checks STAT_PAGER envvar before PAGER.
10055
10056         * output.c: Checks environment variables instead of just local
10057         macros.
10058
10059 Tue Sep 10 21:39:00 1996  Ben Pfaff  <blp@gnu.org>
10060
10061         * arena.c: (arena_destroy) Swatted a subtle bug that cropped up
10062         when the pointer passed to the function was within the arena
10063         itself, so that it couldn't properly be set to NULL _after the
10064         arena was freed_.
10065
10066         * command.c: Re-enabled DISPLAY.
10067
10068         * display.c: Rewritten to handle tables.  Untested.
10069
10070         * filename.c: (search_path) Fixed memory leak.
10071
10072         * frequencies.q: (cmd_frequencies) Frees v_variables.
10073         (postcalc) Calls cleanup_freq_tab() after displaying statistics.
10074         (cleanup_freq_tab) New function to garbage collect.
10075         (dump_full) Elegantized.
10076
10077         * main.c: New comment.
10078
10079         * output.h: New tag for tagged quotes: TAG_NEWLINE.
10080
10081         * postscript.c: Comment fix.
10082         (release_fontmap, free_font_entry) New functions.
10083         (ps_init_driver) Sets free_font_entry() as the freefunc for
10084         hashtable `loaded'.  Calls release_fontmap() when destroying a
10085         driver; also frees the output filename; also frees the
10086         ps_driver_ext block.
10087         (free_ps_encoding) Frees the filename as well as the encoding
10088         block.
10089         (output_encodings) Frees the line buffer and pops the msg-filename
10090         stack.
10091         (read_fontmap) Frees the fontmap filename and the line buffer.
10092         (postopen, preclose) Misc. garbage collection fixes.
10093         (ps_open_page) Destroys the `combos' hash table; sets `last_font'
10094         to NULL; this fixes some output problems.
10095         (text) Handles TAG_NEWLINE.  Untested.
10096
10097         * som.c: (cell_byte_size) Merged SCON_VALUE and SCON_TEXT cases.
10098         (som_set_string) Removed.  All references changed to
10099         `som_set_text'.
10100         (som_set_text) Rewritten.  New interface.  More general.
10101
10102         * som.h: Minor format changes.
10103         (struct som_value_cell) Removed; all references changed to
10104         `som_text_cell'.
10105         (enums SOT_*) Changed.
10106
10107 Mon Sep  9 21:43:13 1996  Ben Pfaff  <blp@gnu.org>
10108
10109         * command.c: Re-enabled SPLIT FILE.
10110
10111         * postscript.c: Comment fix.
10112
10113         * som.h: Added `SOT_NONE'.
10114
10115         * split-file.h: (cmd_split_file) Removed superfluous parenthesis.
10116
10117         * vfm.c: (dump_splits) Reimplemented.
10118
10119 Sat Sep  7 22:35:12 1996  Ben Pfaff  <blp@gnu.org>
10120
10121         * Compiled the project under gcc 2.7.2, which gave some new
10122         warnings.  This led to many additions of casts from unsigned to
10123         int sprinkled throughout the code.
10124         
10125         * arena.c: Many uses of `unsigned' changed to `size_t'.
10126
10127         * command.c: Added END FILE, END REPEAT to command table.
10128         (var cmd_end_repeat) Renamed cmd_end_repeat_p.
10129         (find_command, FILE_TYPE_okay) Not commented out anymore.
10130         (parse_cmd) Calls FILE_TYPE_okay again.
10131         (output_line) Added calls to som_output_text() to put the line
10132         in the output files.
10133
10134         * common.c: (macro VME) Format changes.
10135         (xstrdup) Asserts that its argument is not NULL.
10136         
10137         * data-list.c: Implemented dump_fixed_table().
10138         
10139         * inpt-pgm.c: Formatting changes.  Comment changes.
10140         (end_case_proc) Renamed end_case_trns_proc.
10141         (cmd_end_file, end_file_trns_proc) New functions.
10142
10143         * misc.c: Many uses of `int' and `unsigned' changed to `size_t'.
10144
10145         * misc.h: (local_strdup) New macro corresponding to strdup() but
10146         allocating its data through local_alloc() if possible--that is, if
10147         GNU C is in use.
10148
10149         * postscript.c: Comment changes.
10150         (quote_ps_name, quote_ps_string, output_encodings) New functions.
10151         (output_line, add_string) New macros supporting
10152         output_encodings().
10153         (postopen) Fixed contents of ${fixed-font} and ${prop-font}
10154         substitution vars.  Calls output_encodings() when a line
10155         consisting of `!encodings' is encountered.
10156         (preclose) Some code moved into quote_ps_string().
10157         (dump_line) Changed into macro supporting dump_fancy_line().
10158         (switch_font) Now outputs DSC "%%IncludeResource: font (...)"
10159         command when appropriate.
10160         (write_text) Fixed `literal_char' array (I think it's fixed, at
10161         least.)
10162         (text) Fixed bug when width was zero.  Now exits immediately on
10163         zero height_left.  Now, when executing `goto restart;', checks
10164         that cp<end, so that we don't read beyond end-of-string.  Also,
10165         outputs the correct code to the output file by outputting the code
10166         from the metric instead of the internal metric index.
10167
10168         * repeat.c: (cmd_end_repeat) New function.
10169
10170         * som.c: (var som) `headers' renamed `options' and semantics
10171         changed.  All references changed.
10172         (draw_title) `if(px!=-1 || px!=-1)' --> `if(px!=-1 || py!=-1)'.
10173         (build_target) Only inserts spacing if SOM_TOPT_SPACING not
10174         selected.
10175         (som_text_table) Removed.
10176         (som_output_text) New function.
10177
10178         * som.h: (struct som_submission_form) Removed `header', `reuse',
10179         replaced with bitmapped field `options'.
10180         (SOM_TOPT_*) New enum set for som_submission_form.options.
10181         (SOT_*) New enum set for som_output_text().
10182
10183         * temporary.c: (copy_variable) When copying the var label, only
10184         calls xstrdup() if it's non-NULL.
10185
10186         * var.h: (enum type `vartype') Removed; all references changed to
10187         `int'.
10188
10189         * vars-atr.c: (init_variable) Changed local var `nbytes' from
10190         `int' to `size_t'.
10191
10192 Thu Sep  5 22:05:56 1996  Ben Pfaff  <blp@gnu.org>
10193
10194         * font.h: Comment changes.
10195
10196         * groff-font.c: (groff_read_font) Initializes `name' field to
10197         NULL.  Handles `encoding' field.
10198
10199         * hash.c: (hsh_dump) [GLOBAL_DEBUGGING] Output formatting changes.
10200
10201         * postscript.c: (struct font_entry) Removed `position' field.
10202         (struct ps_font_combo) New struct.
10203         (struct ps_driver_ext) Removed field `next_position'.  New fields
10204         `combos', `next_combo'.  `last_font' field changed from
10205         `font_entry *' to `ps_font_combo *'.
10206         (ps_init_driver) Reformatted; handles new fields.  When
10207         OPO_AUTO_ENCODE is set, adds the two default fonts' encodings to
10208         the encoding list.
10209         (get_encoding, find_encoding_file) New functions.
10210         (add_encoding) Some code moved out into find_encoding_file().
10211         (postopen) Changed value for ${title}.
10212         (preclose) Sets `loaded' field to NULL after destroying the hash
10213         table.
10214         (ps_open_page) Added comment.  Inits the `combos' and `next_combo'
10215         fields.
10216         (ps_text_set_font_by_position) Figures out the current family if
10217         not known.
10218         (compare_ps_combo, hash_ps_combo, free_ps_combo) New functions.
10219         (switch_font) Implemented.
10220         (write_text) Calls switch_font() more often.  Format changes.
10221         #undefs its macros after they're no longer useful.
10222         (text) Changed `continue' at one point to a jump to the top of the
10223         loop because we don't want `separate' reset to 0 at that point.
10224         (load_font) No longer sets `position' in the font_entry created.
10225
10226 Wed Sep  4 21:45:35 1996  Ben Pfaff  <blp@gnu.org>
10227
10228         * font.h: (struct font_desc) New member `encoding', which is not
10229         properly handled yet.
10230
10231         * glob.c: (init_glob) Some new i18n code, which is probably
10232         screwed up.
10233
10234         * output.c: (outp_read_devices, outp_get_paper_size) Changed
10235         `size' local from `int' to `size_t'.
10236
10237         * postscript.c: New driver configuration parameter `auto-encode'.
10238         New enums OPO_AUTO_ENCODE, ODA_COUNT.
10239         (struct font_entry) New member `position'.
10240         (struct ps_driver_ext) Reordered.  New hash table member
10241         `encodings'; new members `next_position', `next_encoding',
10242         `last_font'.  Members `current', `prop', `fixed' changed from type
10243         `font_desc *' to `font_entry *'; all references changed.
10244         (struct ps_encoding) New struct.
10245         (read_ps_encodings, compare_ps_encoding, hash_ps_encoding,
10246         free_ps_encoding, add_encoding) New functions.
10247         (ps_init_driver) Added OPO_AUTO_ENCODE to default
10248         x->output_options.  Initializes new members of ps_driver_ext.
10249         Changed default value for prologue_fn, encoding_fn.  Calls
10250         read_ps_encodings after loading default fonts.
10251         (option_tab[], ps_option) Handle new configuration parameter.
10252         (switch_font) New function.
10253         (struct output_char) `font' member changed from `font_desc *' to
10254         `font_entry *'.  New member `separate'.
10255         (read_fontmap) Changed `size' from `int' to `size_t'.
10256         (output_line, put_number) New macros for write_text().
10257         (write_text) Optimizes text output by consolidating multiple
10258         calls to PostScript `show' operator.
10259         (text) Keeps track of when text arguments can't be consolidated by
10260         write_text(), and marks those spots in the output stream.
10261         (load_font) Sets `position' of the allocated font_entry to -1, cuz
10262         the font hasn't been switched to by switch_font(), which is where
10263         the position is important--the PostScript is what cares about the
10264         position.
10265
10266 Sat Aug 31 23:52:38 1996  Ben Pfaff  <blp@gnu.org>
10267
10268         * hash.c: (hsh_destroy) Ignores NULL argument.  Doesn't try to
10269         call a NULL free_func.
10270         (hsh_rehash) Elegantized.
10271         (hsh_probe) Fix bug that manifested when the table was expanded
10272         and thus had to change location in memory.  Good thing
10273         too--otherwise could have been much more subtle.
10274         (hsh_find) [GLOBAL_DEBUGGING] Not stubbed out anymore.
10275         (hsh_foreach) New function for hash table iteration.
10276
10277         * hash.h: (struct hsh_iterator) New.
10278
10279         * lexer.c: (parse_tagged_quote) Font and family name strings in
10280         tags are now null-terminated.
10281
10282         * output.c: (outp_evaluate_dimension) Fixed over-aggressive unit
10283         parsing.
10284         (internal_get_paper_size, outp_get_paper_size) Fixed; now work as
10285         documented.  (Never before tested?)
10286
10287         * output.h: Comment changes.
10288
10289         * postscript.c: New driver options `optimize-text-size',
10290         `optimize-line-size', `max-fonts-simult'.  New enum set for
10291         specing cached line types.  Comment fixes.
10292         (struct line_form) New struct.
10293         (struct ps_driver_struct) New members `text_opt', `line_opt',
10294         `max_fonts', `lines'.
10295         (ps_init_driver) Initializes new members of ps_driver_struct.
10296         (user option type enum set) New member `nonneg_int_arg'.
10297         (static var option_tab[]) Supports new options.
10298         (ps_option) Handles new options.
10299         (find_ps_file) Made static.  No longer calls hsh_dump().
10300         (ps_get_var) Made static.
10301         (preclose) Dumps out proper DSC trailer.
10302         (ps_open_page) Elegantized.
10303         (ps_close_page) Calls dump_lines() if appropriate.
10304         (ps_line_horz, ps_line_vert, ps_line_intersection) Reduced to
10305         wrappers around line().
10306         (int_2_compare, compare_line, dump_line, dump_fancy_line,
10307         dump_lines, hash_line, free_line, line) New functions for support
10308         of line caching.
10309         (write_text, text) Made static.
10310         (text) Added to font support, not finished.
10311
10312 Thu Aug 29 21:36:41 1996  Ben Pfaff  <blp@gnu.org>
10313
10314         * font.h: (struct font_desc) New members ascent, descent.
10315
10316         * groff-font.c: (groff_read_font) Calculates font ascent and
10317         descent from the ascent and descent of the `d' and `p' characters,
10318         respectively, as per a suggestion on comp.fonts.
10319
10320         * postscript.c: (ps_open_page, ps_close_page, ps_line_horz,
10321         ps_line_vert, ps_line_intersection) Rewritten to deal with changed
10322         prologue.
10323         (write_text) Handles text right-justification and centering (not
10324         full justification).  Still very inefficient.  (One output line
10325         per character?!)
10326         (struct output_char) Added fields for font and font size.
10327         (text) Many bugfixes.
10328
10329 Sat Aug 24 23:26:00 1996  Ben Pfaff  <blp@gnu.org>
10330
10331         * cmdline.c: (usage) Calls outp_list_classes().
10332
10333         * font.h: Comment fix.
10334
10335         * groff-font.c: New exported global var `space_index'.
10336         (groff_init) New function to initialize `space_index'.
10337         (hash_kern) Casts result to unsigned.
10338         (font_name_to_index) Renamed font_char_name_to_index.  All
10339         references changed.  Also, now returns the value of `space_index'
10340         when passed an ASCII space character as an argument.  Fixed
10341         handling of nulls.
10342         (font_get_kern_adjust) Changed i from `int' to `unsigned'.
10343         Handles passed NULL pointers properly.
10344
10345         * lexer.c: (parse_tagged_quote) Comment fix.  Better range
10346         checking.
10347
10348         * output.c: (outp_list_drivers) Removed.  Removed all references.
10349         
10350         * output.h: Comment fixes.
10351
10352         * postscript.c: (ps_open_global) Calls groff_init().
10353         (output_char) New structure.
10354         (write_text) New function.
10355         (text) No longer stubbed out!  Now the output is correct--with a
10356         few exceptions, one of them being that the page has to be held
10357         upside down into a mirror.
10358
10359 Sun Aug 11 21:31:22 1996  Ben Pfaff  <blp@gnu.org>
10360
10361         * font.h: Comment fix.
10362         
10363         * font.c: (name_to_index) Renamed font_name_to_index, made extern.
10364         All callers changed.
10365         (number_to_index) Renamed font_number_to_index, made extern.  All
10366         callers changed.
10367         (font_get_kern_adjust, font_get_char_metrics) New functions.
10368
10369         * output.h: New constant OUTP_T_INTERNAL_DRAW.
10370
10371         * postscript.c: Changed default line width back to 1/2 point.
10372         (ps_line_horz, ps_line_vert, ps_line_intersection) Now lines are
10373         in the center of the space allotted for them, not just a fixed
10374         offset from the edge of the space; this fixes some bugs.
10375         (ps_line_intersection) Now supports all command line styles.
10376         (ps_text_get_size) Bug fix in computation of em width.
10377         (text) New function, the meat behind ps_text_metrics and
10378         ps_text_draw.  Not complete.
10379         (ps_text_metrics, ps_text_draw) Removed the stub taken from
10380         ascii.c; call text().
10381
10382 Sat Aug 10 23:28:17 1996  Ben Pfaff  <blp@gnu.org>
10383
10384         * arena.c: (arena_free) Assert that the argument is non-NULL.
10385         
10386         * groff-font.c: (add_kern) Calls arena_free() for old_kern if and
10387         only if old_kern is non-NULL.
10388
10389         * postscript.c: (ps_init_driver) Changed default line width to 1
10390         point.
10391         (postopen) New prologue variables.
10392         (ps_line_horz, ps_line_vert, ps_line_intersection) Implements some
10393         more of the common line styles properly, but not all.
10394         (ps_text_metrics) Fixed problem with this stubbed out version that
10395         kept it from taking font sizes into account.
10396
10397 Thu Aug  8 22:31:11 1996  Ben Pfaff  <blp@gnu.org>
10398
10399         * arena.c: (arena_malloc) Bug fix.
10400         (arena_dump) [GLOBAL_DEBUGGING] New function.
10401
10402         * ascii.c: Comment fix.
10403         (count_fancy_chars, delineate) Now static functions.
10404         
10405         * filename.c: (interp_vars) Bug fixes.
10406
10407         * font.h: Comment fixes.
10408
10409         * glob.c: (init_glob) Sets set_viewwidth, set_viewlength at
10410         beginning in case we have an error message to display before
10411         initializing the display.
10412
10413         * groff-font.c: Comment fix.  Changed rehash threshold from 2/3
10414         full to 1/2 full.
10415         (groff_read_font) Bug fixes.
10416         (name_to_index) Increments hash.used.  Sets `name' field of hash
10417         entry properly.
10418         (add_kern) Sets kern_max_used after rehashing.  Other bug fixes.
10419
10420         * hash.c: Return type changed.
10421
10422         * postscript.c: Continued development.  Now marks lines on the
10423         paper, but very buggy.
10424
10425 Sat Aug  3 20:50:35 1996  Ben Pfaff  <blp@gnu.org>
10426
10427         * Changed comments in many source files from `/* xxx /* yyy */' to
10428         `/* xxx */ /* yyy */' for cleanliness.
10429
10430         * arena.c: (arena_sd_strdup) New function.
10431         
10432         * ascii.c: (struct ascii_driver_ext) New member `file'.
10433         (ascii_init_driver) Fills out member `file' for initing; uses
10434         close_file_ext for closing drivers.
10435         (ascii_option) Changed %.*s back to %s because the a_string's are
10436         always null-terminated.
10437         (postopen, preclose) New functions.
10438         (ascii_open_page) Uses new style of open_file_ext.
10439         (ascii_option, commit_line_buf, output_lines) Use ext->file.file
10440         instead of this->output.
10441         (__assert_fail) Removed.
10442
10443         * cmdline.c: Changed syntax_message[].
10444
10445         * error.c: #include's <readline/history.h> only if the history
10446         library is available, not if just the readline library is
10447         available.
10448
10449         * filename.c: (expand_line) Removed alloca() support.
10450         (interp_vars) No longer tilde-expands argument.  Limit on output
10451         length removed.
10452         (tilde_expand) Now treats argument as path rather than filename.
10453         [!unix] Now is a no-op function.
10454         (search_path) Better verbose message formatting.
10455         (open_file, close_file) Comment fixes.
10456         (close_file) [!unix] Doesn't bother with pipes.
10457         (open_file_ext) Completely rewritten, interface revamped.
10458         (close_file_ext) New function.
10459
10460         * font.h: Comment changes.
10461
10462         * frequencies.q: Removed AIX alloca support since it doesn't use
10463         alloca.
10464
10465         * hash.c: Comment changes & additions.
10466         (hsh_create) Initializes entire table instead of first M entries.
10467         (hsh_probe) Stupid bug fixed.  Now it works.
10468         (hsh_dump) [GLOBAL_DEBUGGING] New function.
10469
10470         * main.c: (parse) Detects EOF properly in token-eating loop.
10471         Should the STOP token have its value changed to 0?
10472
10473         * misc.c: (blp_getdelim) [HAVE_GETDELIM] Now it's a macro.
10474         (blp_getline) Now it's a macro.
10475
10476         * output.h: (struct outp_driver) Removed members output, filename.
10477         
10478         * output.c: (outp_init) [!NO_POSTSCRIPT] Installs PostScript
10479         drivers in driver table.
10480         (outp_read_devices) Frees buf.  Warns if there are no active
10481         output drivers.
10482         (outp_configure_clear) Sets outp_configure_vec to NULL after
10483         deleting its elements.
10484         (configure_driver, destroy_driver) Removed references to output,
10485         filename members of outp_driver.
10486         (outp_evaluate_dimension, internal_get_paper_size,
10487         outp_get_paper_size) New functions.
10488
10489         * postscript.c: Continued development.  Now links but doesn't make
10490         any marks on the page.  Lotsa bugs I suppose.
10491
10492         * str.c: (strcasecmp) [!HAVE_STRCASECMP] New function.
10493
10494         * str.h: Comment changes.
10495
10496 Sat Jul 27 22:32:38 1996  Ben Pfaff  <blp@gnu.org>
10497
10498         * Removed dependencies on non-nested comments in several files.
10499         Also removed references to (unix || __unix__) in #if's since
10500         prefh.orig makes those two equivalent.
10501         
10502         * ascii.c: (ascii_open_global) Creates ascii_arena.
10503         (ascii_close_global) Destroys ascii_arena.
10504         (ascii_init_driver) Doesn't create ascii_arena.
10505         (ascii_copy_driver) Removed.
10506         (ascii_option) Possible bugfix regarding %s vs. %.*s with a_string's.
10507         (outp_class ascii_class) Removed ascii_copy_driver reference.
10508
10509         * frequencies.q: Now can display all statistics except median.
10510         Still not finished.
10511
10512         * output.c: Handles outp_class.ref_count so output class
10513         destructors are called properly.
10514         (add_class) Sets ref_count to 0.
10515         (configure_driver) Initializes class if ref_count++ is 0.
10516         (destroy_driver) Destructs class if --ref_count is 0.  Frees the
10517         class output file name.
10518         
10519         * output.h: (struct outp_class) Removed copy_driver, inited.
10520         Added ref_count.
10521
10522         * postscript.c: Completely replaced but not finished.
10523         
10524 Tue Jul 23 21:48:36 1996  Ben Pfaff  <blp@gnu.org>
10525
10526         * approx.h: #includes <float.h>.
10527
10528         * arena.h, arena.c: Many functions changed to take an arena **
10529         instead of an arena *, for consistency.  All callers changed.
10530         (arena_alloc) Now creates a new arena if passed *A that is NULL.
10531         (arena_destroy) Sets *A to NULL.
10532         
10533         * ascii.c: (delineate) Implements OUTP_T_VERT correctly.  Removed
10534         assertion that `width' be positive.
10535
10536         * command.c: Removed #if's from cmd_table.
10537         (walk_cmdtable_func) [0] New function (debug code).
10538         (init_cmd_parser) [0] Dumps out cmd_table (debug code).
10539         (parse_cmd) Doesn't return failure for unimplemented commands.
10540
10541         * common.h: (SYSMIS) Changed from DBL_MAX to -DBL_MAX.
10542         (SYSCODE) New constant macro.
10543
10544         * descript.q: Checks for positive n_variables before performing
10545         analysis.
10546
10547         * file-handle.q: (get_handle_by_filename) Bug fix: passes &f to
10548         avl_find instead of &fp as arg 2.
10549
10550         * frequencies.g, frequencies.q: Continued updating; now compiles &
10551         works again, but not complete.
10552
10553         * main.c: Changes to user messages.
10554
10555         * misc.c: (reverse) [0] New function.
10556
10557         * settings.h: Comment removed.  #includes "common.h".
10558
10559         * som.c: (som_set_null) New function.
10560         (som_set_value, som_set_string, som_set_text) More detailing
10561         assertions.
10562         (som_set_float) Implemented function.
10563         (dump_columnated_table) Bug fix regarding page breaks.
10564         (draw_cell) Bug fix regarding text that spilled out of a cell.
10565         (draw_intersection, draw_horz_rule, draw_vert_rule) No longer draw
10566         null lines.
10567         (get_cell_size) Support SCON_EMPTY cells.
10568         (get_table_size) When calculating rules' widths and heights, mask
10569         out SLIN_SPACING bit.  Added SOPT_X_HLTL support.
10570         
10571         * som.h: (som_any_cell) New option SOPT_X_HTLT.  Removed
10572         SOPT_X_SHADE.
10573         (struct som_submission_form) New member `header'; all users
10574         changed.
10575
10576         * val-labs.c: (get_label) User messages changed.
10577
10578         * var.h: Changed FREQUENCIES structures.
10579
10580         * vars-atr.c: (is_num_user_missing, is_str_user_missing) Made
10581         inline.
10582         
10583 Fri Jul 19 19:11:13 1996  Ben Pfaff  <blp@gnu.org>
10584
10585         * approx.h: Definition of EPSILON now depends on system's
10586         DBL_EPSILON.  Removed GNU C specific code.
10587         (cmpapx) Renamed approx_compare.
10588
10589         * frequencies.g, frequencies.q: Continued updating; still doesn't
10590         compile.
10591
10592         * groff-font.c: (name_to_index) Fix bug that kept it from
10593         compiling.
10594
10595         * hash.c, hash.h: Completed work.
10596
10597         * var.h: Changes to freq_tab, frequencies_proc.
10598         
10599 Wed Jul 17 21:23:36 1996  Ben Pfaff  <blp@gnu.org>
10600
10601         New hashing code.
10602         * hash.c, hash.h: New files.  Not completed.
10603         * Makefile.am: Added hash.c to source file list.
10604         * font.h: (struct font_desc) New member kern_size_p.
10605         * groff-font.c: Uses hash.h.
10606         (hashpjw) Moved to hash.c.
10607         (next_prime_power) Rewrote, renamed hsh_next_prime, moved to
10608         hash.c.
10609         (static var hash) New member size_p.
10610         * var.h: Includes hash.h.
10611         (struct freq_tab) Changed AVL_TREE to hash_tab.
10612
10613         * vars-prs.c: Comment, formatting fixes.
10614
10615         * frequencies.g, frequencies.q: Continued updating.  Not yet
10616         working.
10617
10618         * formats.c: Bug fix.
10619
10620 Tue Jul 16 22:10:04 1996  Ben Pfaff  <blp@gnu.org>
10621
10622         Increasing parallelism between DESCRIPTIVES and FREQUENCIES.
10623         * descript.g: Comment fixes.
10624         * descript.q: Comment fixes.  Moved some declarations into var.h.
10625         Made dsc_info a static table.  Updated FIXMEs.
10626         (internal_cmd_descriptives) Beautified.
10627         
10628         * frequencies.q: Started updating into working order.
10629         * frequencies.g: New file analogous to descript.g.
10630         * var.h: Comment fixes.  Added structures for FREQUENCIES.
10631         
10632         * som.c: Removed vestiges of crushing and partial table support.
10633
10634 Sun Jul 14 15:45:31 1996  Ben Pfaff  <blp@gnu.org>
10635
10636         * Many more changes to som.c especially, but these will not be
10637         documented as I have resolved to remove them.  This patchlevel is
10638         being released solely so that I can fall back to it if I decide
10639         that removing the changes is not a good idea.
10640
10641 Sat Jul 13 09:58:44 1996  Ben Pfaff  <blp@gnu.org>
10642
10643         * som.c: (global var som) New member `cum_y'.
10644         (build_target) Properly handles titles for partial tables.
10645         (dump_partial_beg, dump_partial_mid, dump_partial_end)
10646         Merged into single new function dump_partial().  Fixed problem
10647         with titles on partial tables.
10648         (dump_table) Calls dump_partial() for all parts of partial tables.
10649         (dump_page) Criteria for drawing title changed.
10650         
10651 Fri Jul 12 22:03:36 1996  Ben Pfaff  <blp@gnu.org>
10652
10653         * command.c: (cmd_table) Added LIST, WEIGHT.
10654
10655         * command.c: (cmd_remark) No longer frees `s' since it's not
10656         dynamically allocated.
10657         
10658         * data-out.c: (convert_f) Now correctly handles the case where
10659         abs(v->f)<1 but v->f rounds to a value of 1.00 given the specified
10660         number of decimals.
10661         (som_destroy_all_tables) Removed argument.  All callers changed.
10662         (som_vline, som_hline) Argument validity checking corrected.
10663         (som_set_value) Implemented half-heartedly.
10664         (replicate_table) Copies tables piece-by-piece when using Checker.
10665
10666         * som.h: New line style SLIN_1THIN, currently equivalent to
10667         SLIN_0.  New enum set SOM_SUB_*.
10668         (struct som_submission_form) Removed `seq_no'.  Added `type'.
10669         
10670         * list.q: Newly working file; uses partial tables.
10671         
10672         * som.c: (som_reduce_table) Renamed som_set_table_height().
10673         (som_crush) Removed argument `group'.
10674         (global var som) Removed `nt', `seq_no'.  Added `type'.
10675         (som_submit_table) Arguments changed.
10676         (output_table) Removed partial table code.
10677         (build_target) New arg; partial table support added.  All callers
10678         changed.
10679         (dump_plain_table) Removed partial table code.
10680         (dump_partial_beg, dump_partial_mid, dump_partial_end) New functions.
10681         (dump_table) Supports partial tables.
10682         (dump_page) New argument to allow not drawing top and/or bottom
10683         headers.  All callers changed.  Supports partial tables.
10684
10685 Sat Jul  6 22:22:25 1996  Ben Pfaff  <blp@gnu.org>
10686
10687         * data-out.c: Changed `#include <approx.h>' to `#include
10688         "approx.h".
10689         (convert_F) Comment fix.  Now won't print `-.000', etc.
10690
10691         * descript.q: Now Z-scores work, although there appears to
10692         be a bug (which might actually be in data-out.c:convert_F()).
10693         (descriptives_trns_proc, descriptives_trns_free) New functions.
10694         (run_z_pass) Implemented.
10695         
10696         * var.h: Comment fixes.
10697         (dsc_z_score, descriptives_trns) New structs.
10698         (descriptives_trns) Added to any_trns as `dsc'.
10699
10700         * error.c, error.h: New error class, IS (Installation Script
10701         error), used in those instances where the error is in the
10702         installation, but there is a script file or installation file that
10703         can be usefully referred to.
10704         
10705         * output.c: Change many IE classes to IS classes.
10706
10707         * cases.c, command.c, common.c, crosstabs.q, expr-evl.c,
10708         frequencies.q, list.q, vars-prs.c, vfm.c: Removed reference to
10709         HAVE_MALLOC_H because Borland C++ alloca() is broken, so why
10710         include the corresponding header?
10711         
10712         * glob.c: (init_glob) Don't malloc term_buffer under Checker.
10713         Don't bail out if termcap can't be read.
10714
10715         * som.c: (som_destroy_table) Removed.
10716         (som_reduce_table, som_destroy_all_tables) New functions.
10717         (som_crush) New function, not implemented.
10718         
10719         * som.h: New table option STAB_CRUSH.  Comment fix.  New struct
10720         som_submission_form.  Function prototypes revised.
10721
10722         Outputting huge tables (1000s of rows) a few rows at a time
10723         is supported, though untested.  May even break everything.
10724         Actually, the code doesn't even compile right now.
10725         * som.c: (struct som) New fields htv, nt, seq_no.
10726         (som_submit_table) Multiple arguments changed to a single
10727         pointer to struct submission_form.  Only increments subtable_num
10728         if seq_no is zero.  Only destroys table if it's not going to
10729         be reused.
10730         (replicate_table) New function.
10731         (output_table) Comment fix.
10732         (examine_table) Changed inline code to code calling
10733         replicate_table().  Calculates htv.  Supports partial tables.
10734         (draw_title) Removed comment.
10735         (build_target) Only allows for title on first part of partial
10736         tables.
10737         (dump_plain_table) Only resets table chunk number on first part
10738         of partial tables; FIXME: doesn't work quite right.  Supports
10739         partial tables.
10740         (dump_page) Titles only on first part of partial tables.
10741
10742 Fri Jul  5 20:16:19 1996  Ben Pfaff  <blp@gnu.org>
10743
10744         * Thanks to an unreliable IDE hard drive, I have spent the last
10745         day reconstructing my Debian GNU/Linux installation and redoing
10746         the previous day's changes--somehow I managed to save every file
10747         except for output.c and output.h.  So the following changes could
10748         really be considered independent of the output.c, output.h changes
10749         from Jul 4.
10750
10751         * output.h, output.c: Moved the outp_configure_vec global var,
10752         outp_names struct, and enum set OUTP_S_* from output.h to output.c.
10753         outp_configure_vec is now static.
10754         
10755 Thu Jul  4 20:20:24 1996  Ben Pfaff  <blp@gnu.org>
10756
10757         * The entire philosophy behind configuration of the output drivers
10758         changed.  Now there is a termcap-type configuration where drivers
10759         to be read are determined beforehand, rather than parsing the
10760         entire output init file and storing it in memory & deciding what
10761         to actually use later.  Faster & more memory-efficient at the same
10762         time, cool.
10763         
10764         * output.c: Comment fix.  Removed outp_init_drivers global var.
10765         Removed all references to synonyms.  New structure outp_defn.  New
10766         global vars outp_macros, outp_configure_vec.
10767         (search_name, delete_name, add_name, check_configure_vec,
10768         expand_name, find_defn_value) New static functions.
10769         (outp_configure_clear, outp_configure_add, outp_configure_macro,
10770         outp_read_devices) New extern functions.
10771         (outp_init) Much functionality moved into outp_read_devices.
10772         (outp_read_devices) Format of output init file changed; name of
10773         file is `devices' rather than `output' to avoid Makefile
10774         conflicts.
10775         (outp_clear) Renamed outp_done.
10776         (outp_list_classes) Bug fix, cleaned up.
10777         (outp_list_drivers) Not implemented anymore.
10778         (outp_configure_driver) Now a static function; simplified; now
10779         interpolates macros; supports new structure.
10780         (outp_enable_driver, match_synonym) Removed; all references
10781         removed.
10782         (find_driver) First argument removed.
10783         
10784         * output.h: Global var outp_init_drivers removed; new structure
10785         outp_names; new enum set OUTP_S_*; new global var
10786         outp_configure_vec; function prototypes for output.c exports
10787         updated.
10788         
10789         * main.c: (main) Calls outp_read_devices() after parsing the
10790         command line.
10791         
10792         * cmdline.c: (parse_command_line) New option -v --verbose;
10793         --version changed to -V.  --device option changed syntax to just
10794         take a single device name.  Accepts key=value declaration of
10795         output init file macros.  Syntax message updated.
10796
10797         * filename.c: (expand_line) New function.
10798         (interp_environ_vars) Renamed interp_vars; no longer uses
10799         fixed-size buffer.
10800         (blp_getenv) Allows $ARCH and $VER pseudo-environment-vars to be
10801         overridden by real environment vars.
10802         (search_path) Uses verbose_msg() instead of #ifdef'd printf().
10803         * filename.h: interp_environ_vars() renamed interp_vars().
10804         
10805         * error.c, error.h: Added extern variable `verbosity', message
10806         class MM.
10807         
10808         * error.c: (vmsg) Support message class MM.
10809         (verbose_msg) New function.
10810
10811         * descript.q: (generate_z_varname) Bug fix in generation of
10812         Z-score varnames.
10813         (dump_z_table) Bug fix in column headers.
10814         
10815         * ascii.c: (ascii_init_driver) Changed minimum number of lines per
10816         page from 29 to 15.  Don't set a default for ops[OPS_INIT,
10817         OPS_DONE].  Writes the uninit string when the driver is closed.
10818         (ascii_open_page) Write the init string before the first page.
10819         (output_shorts) Form of main loop changed from `while' to `for'.
10820         Bug fix with overstrikes: the character is printed *after* the
10821         backspace.  Eliminated a lot of `& 0xff' modifiers.
10822         (advance_to_left_margin) New function.
10823         (return_carriage, output_lines) Handle left margin.
10824
10825 Thu Jul  4 00:35:59 1996  Ben Pfaff  <blp@gnu.org>
10826
10827         * ascii.c: New option `carriage-return-style'.
10828
10829         * ascii.c: (count_fancy_chars) New function.
10830         (delineate, text_metrics) Use new function; bug fixes regarding
10831         rich text strings.
10832         (text_draw) Bug fix with rich text.
10833         (output_string, output_shorts) Reordered.
10834         (output_shorts) Now handles boxchars and some overstrike font
10835         changes.
10836         (output_char, return_carriage) New functions.
10837         (output_lines) Now handles overstriking and font changes properly;
10838         some code moved to output_shorts.
10839
10840 Tue Jul  2 22:13:23 1996  Ben Pfaff  <blp@gnu.org>
10841
10842         [GLOBAL_DEBUGGING]
10843         * ascii.c: New member `debug' in ascii_driver_ext.
10844         (ascii_init_driver, delineate) Uses new member.
10845
10846         Now you can set a vertical height on writing text.
10847         * ascii.c: (delineate) Keeps track of vertical position.
10848         (text_draw) No longer considers fully justified text an internal
10849         error.
10850         
10851         * output.h: New flag OUTP_T_VERT; other OUTP_T_ values changed.
10852
10853         Tables' titles are drawn; they can have variable height.
10854         * som.c: `som' struct has new member, title_height.
10855         (draw_title) New argument.  Moved within file.  All caller
10856         changed.
10857         (build_target) New argument, amount of space needed for first row.
10858         Calculates height of title, takes that into account.  All callers
10859         changed.
10860         (dump_plain_table, dump_columnated_table) Took calculation of y1,
10861         y2 out of loop.
10862         (dump_columnated_table) [GLOBAL_DEBUGGING] Debugging code
10863         improved.
10864         (dump_columnated_table) Organized for readability.
10865         (dump_page) Makes use of som.title_height.
10866
10867         * som.c: Many comment bug fixes.
10868
10869         * descript.q: (try_name, generate_z_name) Bug fix regarding
10870         generation of Z-score variable names.
10871         * var.h: Removed num from descriptives_proc; all referents removed.
10872
10873 Mon Jul  1 22:13:39 1996  Ben Pfaff  <blp@gnu.org>
10874
10875         * ascii.c: (ascii_line_horz, ascii_line_vert,
10876         ascii_line_intersection) Added debugging code.
10877
10878         Added a descriptive line above each table to describe it.
10879         * command.c: (parse_cmd) Calls som_new_series.
10880         
10881         * som.c: New static vars table_num, subtable_num.  New `som'
10882         member `title'.
10883         (dump_page) New arguments.
10884         (som_submit_table) Handle new variables.
10885         
10886         * som.c, som.h: (som_submit_table) New arguments.  All callers
10887         changed.
10888         (som_new_series) New function.
10889         (build_target) Makes room for extra line.
10890         (draw_title) New function.
10891         (dump_page) Calls draw_title.  Bug fix: doesn't always set
10892         som.ext->cp to 0.
10893         
10894         Columnation of tables support.
10895         * som.h: Deleted fr, lr, ri from som_table.  Reorganized.
10896         
10897         * som.c: Deleted references to fr, lr, ri.
10898         (som_columnate) Bux fix: sets group member of table.
10899         (som_add_options) Function removed.
10900         (dump_table) Split into three functions; extensively reworked.
10901         
10902         * descript.q: (dump_z_table) Better output table formatting; added
10903         title support to correspond to som.h changes.
10904         (display) Title support.
10905
10906         * output.h: Added OUTP_T_NONE.
10907         
10908 Mon Jul  1 13:00:00 1996  Ben Pfaff  <blp@gnu.org>
10909
10910         * descript.q: Improved handling of Z scores; still not perfect.
10911         
10912         * output.h, ascii.c: Added hook for getting em width of current
10913         font.
10914         
10915         * som.c: Uses new em-width hook.  Added debugging code to
10916         several functions.
10917         (som_columnate) New argument.
10918         (som_add_options) Removed.
10919
10920 Jun 29 17:40:47 1996  Ben Pfaff  <blp@gnu.org>
10921
10922         * som.h, som.c, output.c, output.h, ascii.c: Updated to work with
10923         rules as a property of the table instead of as a property of the
10924         cells.
10925         
10926         * ascii.c: Added `header' to table of options.
10927         
10928         * descript.q: Added even shorter statistic names; modified to work
10929         with new som interface.
10930         
10931         * misc.c (blp_getdelim): Bug fix.
10932         
10933         * version.c: includes 'conf.h'.
10934         
10935 ----------------------------------------------------------------------
10936 Local Variables:
10937 mode: change-log
10938 version-control: never
10939 End: